WO2009113777A2 - 다자간 전자회의 시스템에 있어서 공유화면 제어 장치 및 그 방법 - Google Patents

다자간 전자회의 시스템에 있어서 공유화면 제어 장치 및 그 방법 Download PDF

Info

Publication number
WO2009113777A2
WO2009113777A2 PCT/KR2009/001088 KR2009001088W WO2009113777A2 WO 2009113777 A2 WO2009113777 A2 WO 2009113777A2 KR 2009001088 W KR2009001088 W KR 2009001088W WO 2009113777 A2 WO2009113777 A2 WO 2009113777A2
Authority
WO
WIPO (PCT)
Prior art keywords
screen
window
hidden
module
meeting
Prior art date
Application number
PCT/KR2009/001088
Other languages
English (en)
French (fr)
Other versions
WO2009113777A3 (ko
Inventor
차민수
신윤희
Original Assignee
(주)유프리즘
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020080021786A external-priority patent/KR20080027813A/ko
Application filed by (주)유프리즘 filed Critical (주)유프리즘
Publication of WO2009113777A2 publication Critical patent/WO2009113777A2/ko
Publication of WO2009113777A3 publication Critical patent/WO2009113777A3/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems

Definitions

  • the present invention relates to an apparatus and method for controlling a shared screen in a multi-party electronic conference system, and more particularly, to a presenter's conference system toolbar and a user interface in a screen sharing service of a multi-party electronic conference system.
  • the present invention relates to a shared screen control device and a method for setting a screen such as a selected external application to be hidden to other attendees.
  • Screen sharing is a technology that divides into master and host so that the whole screen of the host or the shared area screen of a specific area is transmitted to the master in real time so that the other party can see it.
  • the remote control provides a function that allows the master to manipulate the keyboard and mouse while viewing the screen of the host in the screen sharing state.
  • Representative products among these products include pcAnywhere and VNC.
  • screen sharing in e-meeting is a service concept that extends to 1: N including 1: 1, and the presenter's screen is transmitted to a large number of participants in real time so that the presentation and meeting can be conducted.
  • the biggest advantage is that screen sharing transmits the presenter's PC screen as it is.
  • the UI screen of the meeting system obstructs the presenter's screen, and the screen such as the chat window provided by the meeting system is visible to other participants, thus preventing the smooth presentation.
  • the conference system In order to switch the sharing mode such as writing and execute various menus such as chat, the conference system inevitably provides a UI such as a toolbar, and since such a system generally supports full screen, such a UI is used for screen sharing. It becomes visible to other participants.
  • the prior art has attempted to prevent unnecessary parts from being transmitted from the presenter's screen by sharing only the screen except the toolbar and the UI area, or supporting auto-hiding of the toolbar and the UI.
  • excluding the toolbar and UI area causes a problem that part of the presentation screen is fixedly excluded, and the auto-hiding function of the toolbar and the UI solves this problem to some extent, but uses the functions of the hidden toolbar and the UI.
  • the original problem of sharing unnecessary areas reappears.
  • the present invention solves the problem that the application screen is also transmitted only to the presenter or not desired to be transmitted, and when the other participant is remotely controlling the presenter's screen, the mouse and keyboard events generated by the controller are already present. It is an object of the present invention to provide a shared screen control device and a method for blocking the transmission to an application which is hidden.
  • Electronic conferencing sharing screen control apparatus comprises a hidden processing module for hiding the screen that is a hidden setting target, and extracts a screen that does not correspond to the hidden setting target when screen capture for sharing; A conference module for receiving a target to be hidden from a user and transmitting the extracted screen to the electronic conference attendee terminal when the screen is shared for the electronic conference; And a window hooking module for monitoring newly created windows and selectively hiding the newly created windows.
  • the conferencing module may control the concealment processing module to conceal at least one of a toolbar or a user interface provided by the electronic conference sharing screen control apparatus.
  • the hidden setting target received from the user may be any one of a specific window, a currently running application, or a window depending on an application to be executed later.
  • the window hooking module monitors a window generated by the currently running application or an application to be executed later, and controls to hide the application when an application currently executed or application information to be executed later is input from a user. It may be characterized by.
  • the hidden processing module may be configured to perform a hidden process by assigning a transparent window property to a window for performing a hidden process.
  • the electronic conference sharing screen control device may further include a graphic hooking module that blocks the graphic output when a graphic output corresponding to the hidden window is requested, wherein the hidden processing module is a transparent window in an operating system. If the setting function is not supported, the hiding process may be performed using the graphic hooking module.
  • the conferencing module may ignore the command when receiving a command to be delivered to a hidden processed object from another electronic conference terminal other than the conference module.
  • the conference module may control to hide the hidden object on the screen of the electronic conference shared screen processing apparatus when another electronic conference terminal other than the user has the remote control right.
  • the conference module may control to output the hidden object to a screen on the electronic conference shared screen processing apparatus.
  • a method for controlling an e-conferencing shared screen comprising: receiving, by the e-conferencing shared screen control apparatus, a target to be hidden from a user; A process of concealing a screen which is a hidden setting target, and extracting a screen that does not correspond to a hidden setting target and transmitting the screen to the electronic conference participant terminal during screen capture for sharing by the electronic meeting sharing screen control apparatus; And monitoring the newly created window and selectively hiding the newly created window.
  • the electronic conference sharing screen control device may hide at least one of a toolbar or a user interface provided by the electronic conference.
  • the hidden setting target received from the user may be any one of a specific window, a currently running application, or a window depending on an application to be executed later.
  • the step of monitoring the newly created window and selectively hiding the newly created window may include: monitoring a window generated by a currently running application or an application to be executed later, and inputting the generated window. It may be characterized in that the hiding process.
  • the process of hiding the screen that the e-meeting shared screen control target is the hidden setting, it may be characterized in that the hidden process by giving a transparent window property to the window for the hiding process.
  • the process of hiding the screen that is the target to be set hidden by the e-meeting shared screen control device if a graphic output corresponding to the window for the hiding process is requested, performing the hiding process by blocking the graphic output. It may also be characterized.
  • the method of controlling the e-meeting shared screen may further include ignoring the command when receiving a command to be delivered to a hidden object from another e-meeting terminal.
  • the method of controlling the e-meeting sharing screen may further include controlling to hide the hidden object on the screen of the e-meeting sharing screen processing apparatus when another e-meeting terminal other than the user has the remote control right. have.
  • the method may further include controlling to output the hidden processed object to the screen on the e-conferencing shared screen processing apparatus.
  • the presenter can still see the presenter's toolbar, user interface, or additionally selected screens of the external application in the screen sharing service of the electronic conference system.
  • the hidden screen is sent to other participants.
  • the part of the screen hidden by the hidden window is transmitted instead, so that it may appear as if it did not exist, thereby providing the presenter with the user interface of the conference system without restriction of expression.
  • it solves the problem that the contents of the presentation are obscured and improves the convenience and security for the smooth presentation process by not transmitting the window screen contents that need security.
  • the conference system can automatically deliver the keyboard and mouse events generated by the controller to the application that is already hidden.
  • the hidden window can be hidden from the actual screen as well as the screen sharing transmission screen.
  • the present invention is more suitable for the electronic conference system, which is a multi-party service, but also has excellent compatibility in that it is applicable to all screen sharing and remote control solutions.
  • FIG. 1 is a block diagram of an apparatus for controlling a shared meeting screen according to an embodiment of the present invention.
  • FIG. 2 is a diagram illustrating a specific operation process of the conference module shown in FIG. 1.
  • FIG. 3 is a view illustrating a specific operation process of the graphic hooking module 140 shown in FIG. 1.
  • FIG. 4 is a view illustrating a specific operation process of the window hooking module shown in FIG. 1.
  • FIG. 5 is a view illustrating a specific operation process of the hidden window setting module shown in FIG.
  • FIG. 6 is a diagram illustrating a method of using a hidden window function and a remote control function in parallel according to another embodiment of the present invention.
  • FIG. 7 is a view showing a control method when a remote control right is changed according to another embodiment of the present invention.
  • FIG. 1 is a block diagram of an apparatus for controlling a shared meeting screen according to an embodiment of the present invention.
  • the apparatus 100 for controlling e-meeting sharing screen may include a conference module 110, a window hooking module 120, a hidden window setting module 130, and a graphic hooking module 140. Can be.
  • the conferencing module 100 performs a process of displaying an output screen of a toolbar and a user interface on a conference system on the screen of a conference in a electronic meeting or the like, and presenting it to the presenter and hiding it from other participants. . Such a process is referred to as a hiding process in the present invention.
  • the hidden process is performed by the conference module 100 using the hidden window setting module 130 at the beginning of execution.
  • the conference module 100 may provide a tool such as a dialog box that the user can select so that the presenter can hide an unrelated external window or application other than the electronic conference related window while the electronic conference is in progress. have.
  • the user may input a specific window, the name of the currently running application or the name and execution path of an application to be executed later using the provided dialog box.
  • the conference module 100 may perform the hidden process by calling the hidden window setting module 130 for the window selected by the user or the input application.
  • the meeting module 100 hides the toolbar, the user interface, the window, and the like, which are to be hidden, and then captures a screen and transmits the screen to another electronic conference participant terminal.
  • the hidden window setting module 130 is a component that controls to hide a toolbar, a user interface, and a target window of an additional selected external application according to the control of the conference module 100 or the window hooking module 120.
  • GDI Graphic Device Interface
  • the hidden window setting module 130 outputs the target window of the toolbar, user interface, or additionally selected external application of the electronic conferencing system on the presenter's actual screen, but must hide it as it did not exist on the captured screen for transmission.
  • the hidden window setting module 130 controls the graphic hooking module 140 to perform a graphic API hooking process to perform an emulation process of hiding a specific window.
  • the hidden window setting module 130 layered window properties of the toolbar, user interface or any window that is the target of the hidden setting This is done by adding an attribute and setting it to a transparent window.
  • the graphic hooking module 140 is a component for invalidating or blocking a display output when a graphic application programming interface (API) corresponding to a window set to be hidden at the time of screen capture is called.
  • API application programming interface
  • Hooking here may be described as follows. For example, if A module hooks API of B function, when A API is called, A module executes before API of B function, and optionally calls original API so that normal processing is performed. It is to make progress.
  • the graphic hooking module 140 executes before the graphic API to block the display output.
  • the window hooking module 120 of the present invention corresponds to a component for monitoring newly created windows and selectively hiding when detecting a newly created window.
  • the present invention provides a function of hiding a specific window of an external application input by a user or an entire window of an application.
  • the operation ends with one hidden setting.
  • a hidden setting should be made for all windows dependent on the application.
  • the window hooking module 120 monitors a window that is continuously generated and controls to set a hidden window.
  • the present invention also provides a function for automatically hiding when an application not currently executed is executed later.
  • the electronic conference sharing screen control apparatus 100 may receive an application name and an execution path from a user.
  • the window hooking module 120 monitors windows generated when an application that receives information is executed and hides the windows.
  • FIG. 2 is a diagram illustrating a specific operation process of the conference module shown in FIG. 1.
  • the conference module 110 first loads the graphic hooking module 140 and the window hooking module 120 when the operation starts (S201 and S202).
  • the loaded graphic hooking module 140 and the window hooking module 120 continue to operate until the end of the operation of the conference module 110 or the e-meeting system ends.
  • the conference module 110 controls the hidden window setting module 130 to hide the toolbar and various user interfaces of the electronic conference system (S203).
  • the hidden processing performed by the hidden window setting module 130 will be described in more detail with reference to FIG. 5.
  • the conference module 110 outputs an interface such as a dialog box for receiving a window or an application to be hidden from the user (S204).
  • the meeting module 110 determines whether the user selects a window or an application to be hidden through the dialog box output in step S204 (S205).
  • the conference module 110 controls the hidden window setting module 130 to hide the selected window or application (S206).
  • the conference module 110 performs other electronic conference related processes (S207).
  • the conference module 110 determines whether the conference system ends (S208). If the electronic conference system is terminated, the conference module 110 ends its operation. If the electronic conference system is not terminated, the conference module 110 proceeds to step S205 to determine whether the user additionally inputs window or application information to be hidden.
  • FIG. 3 is a diagram illustrating a specific operation process of the graphic hooking module shown in FIG. 1.
  • the graphic hooking module 140 starts its operation through the loading process of the conference module 110 according to step S201 of FIG. 2.
  • the graphic hooking module 140 resides itself throughout the operating system (S301), and then starts a hooking process for monitoring a graphic API such as an application (S302).
  • the graphic hooking module 140 may be executed before the API is used when an application outputs the screen.
  • the graphic hooking module 140 determines whether the hooked API is called (S303). If the hooked API is not called, the steps of S304 to S307 do not need to proceed, and the process proceeds directly to S308.
  • the graphic hooking module 140 determines whether the hooked API is the API called in the process of the conference module 110 to capture the screen (S304). In addition, the graphic hooking module 140 determines whether an API call is a call to a window that is set to be hidden (S305).
  • the graphic hooking module 140 hides or invalidates the screen of the corresponding API as if the screen of the corresponding window did not exist (S306).
  • S304 or S305 determines whether any API call is not a call for screen capture or a call to a window that is set to be hidden. If the determination of S304 or S305 is No, that is, if any API call is not a call for screen capture or a call to a window that is set to be hidden, the graphic hooking module 140 may not use the original API. The call is controlled to be output normally (S307).
  • the graphic hooking module 140 determines whether the electronic conference system is terminated (S308). If the electronic conference system is not terminated, the graphic hooking module 140 proceeds to step S302 to wait for another API call. On the other hand, when the electronic conference system is terminated, the graphic hooking module 140 ends the operation.
  • FIG. 4 is a diagram illustrating a specific operation process of the window hooking module illustrated in FIG. 1.
  • the window hooking module 120 is loaded by the conference module 110 in operation S202.
  • the window hooking module 120 also resides throughout the operating system.
  • the window hooking module 120 resides throughout the operating system and performs a hooking process for monitoring window generation of all applications (S402). When the window hooking module 120 performs a hooking process, the window hooking module 120 may detect a window newly created in all applications.
  • the window hooking module 120 determines whether a newly generated window is detected (S403). If the newly created window does not exist, the window hooking module 120 proceeds to step S406 without any further processing.
  • the window hooking module 120 determines whether the detected window corresponds to a window which is set to be hidden and a window belonging to an application (S404).
  • the window hooking module 120 controls the hidden window setting module 130 to immediately hide a newly created window (S405). ).
  • the window hooking module 120 After controlling to hide the newly generated window as described above, the window hooking module 120 detects whether the electronic conference system is terminated (S406). If the electronic conference system is not terminated, the window hooking module 120 proceeds to step S403 and detects whether another window is generated while remaining throughout the operating system.
  • step S406 the window hooking module 120 will terminate the operation.
  • FIG. 5 is a diagram illustrating a specific operation process of the hidden window setting module shown in FIG. 1.
  • the hidden window setting module 130 is started by calling the conference module 110 or the window hooking module 120 to set the window or application to be hidden.
  • the hidden window setting module 130 receives parameter information of a window or an application to be hidden from a module (eg, the conference module 110 or the window hooking module 120) that calls itself (S501). ).
  • a module eg, the conference module 110 or the window hooking module 120
  • the hidden window setting module 130 determines whether the received parameter information is information on a window and an application currently being executed (S502).
  • the hidden window setting module 130 adds these information to the hidden setting management list (S506). Thereafter, the hidden window setting module 130 ends the operation and immediately returns.
  • step S502 if the received parameter information is information on a currently running window and application, the hidden window setting module 130 checks whether the operating system supports a transparent window function such as a layered window of Microsoft Windows (S503). .
  • a transparent window function such as a layered window of Microsoft Windows (S503).
  • the hidden window setting module 130 performs a hidden process on windows that are dependent on a window or an application to be hidden by using the function (S504).
  • the hidden window setting module 130 may perform a hidden process by adding a layered window attribute to all windows that depend on a window or application that is a hidden setting target and setting it as a transparent window.
  • the hidden window setting module 130 controls the graphic hooking module 140 to immediately process hidden for windows that are subject to hidden processing or windows that depend on the application. (S505).
  • the hidden window setting module 130 adds the window or application input from the user to the hidden setting management list (S506), and controls to hide the window or application immediately even if the window or application is called later. Thereafter, the hidden window setting module 130 ends the operation.
  • FIG. 6 is a diagram illustrating a method of using a hidden window function and a remote control function in parallel according to another embodiment of the present invention.
  • FIG. 6 illustrates a process of processing a keyboard and mouse event generated by a remote controller in the conference module 110 of the presenter side electronic conference sharing screen control apparatus 100.
  • the meeting module 110 of the electronic meeting sharing screen control apparatus 100 is in a state in which the current electronic meeting screen is shared, and checks whether the present meeting side is presenter (S601).
  • the conference module 110 proceeds to step S606 in which other conference related processes are performed. If the presenter is in the screen sharing state, the following steps S602 to S605 are performed.
  • the conference module 110 of the presenter-side shared screen control device determines whether a keyboard or mouse event generated by another participant having a remote control right has been received (S602).
  • the conference module 110 determines whether a keyboard or mouse event generated by another participant is delivered to the window in which the event is currently hidden (S603). If the event is not received, the process proceeds to step S606 without performing an event related operation (steps S604 to S605).
  • the conference module 110 ignores or blocks the event so that the event is not delivered to the hidden window (S604). After ignoring or blocking the event, the conference module 110 continues with other conference related processes (S606).
  • step S603 the conference module 110 controls the event to be processed normally (S605).
  • the conference module 110 checks whether the electronic conference system is terminated (S607). When the electronic conference system is terminated, the conference module 110 also terminates the operation. If the conference system is not terminated, the conference module 110 proceeds to step S601 to repeat the operation.
  • FIG. 7 is a diagram illustrating a control method when a remote control right is changed according to another embodiment of the present invention.
  • the meeting module 110 of the electronic meeting sharing screen control apparatus 100 checks whether a change of the remote controller is made (S701).
  • the meeting module 110 determines whether the remote control right is returned to the presenter (S702). If the remote control right has been recovered to the presenter, it controls to output the hidden windows on the actual display of the electronic meeting shared screen control apparatus 100 (S703).
  • the conference module 110 controls the hidden window to be hidden not only on the screen sharing transmission screen but also on the actual screen (S704).
  • keyboard and mouse events generated by the remote controller can be applied to the hidden window of the presenter's electronic conference sharing screen control device.
  • processing a specific window to be shown or not seen on an actual screen rather than a shared screen can be implemented using a window API of Microsoft Windows.
  • the conference module 110 performs other conference related processes (S705). In addition, the conference module 110 checks whether the electronic conference system is terminated (S706). If the electronic conference system is terminated, the conference module 110 also terminates its operation. If the conference system is not terminated, the conference module 110 proceeds to step S701 to repeat the operation.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명은 다자간 전자회의 시스템에 있어서 공유화면 제어 장치 및 그 방법에 관한 것으로, 숨김 설정된 화면이 화면공유 전송을 위한 화면 캡처시 감춰지게 하고, 숨김 설정된 윈도우의 화면이 아니며 숨김 설정된 윈도우에 의하여 가려져 있던 화면을 추출하는 숨김 처리 모듈, 숨김 설정이 된 윈도우에 해당되는 그래픽 출력이 요청된 경우, 상기 그래픽 출력을 차단하는 그래픽 후킹 모듈, 새롭게 생성되는 윈도우를 감시하고, 새롭게 생성된 윈도우를 선택적으로 숨김 설정 처리를 하기 위한 윈도우 후킹 모듈 및 사용자로부터 숨김 설정할 대상을 입력받아, 상기 숨김 설정할 대상을 숨김 처리하도록 제어하는 회의 모듈을 포함하는 전자회의 공유화면 제어 장치 및 그 방법을 제공함으로써, 원할한 발표진행을 위한 편리성 및 보안성을 향상시킨다.

Description

다자간 전자회의 시스템에 있어서 공유화면 제어 장치 및 그 방법
본 발명은 다자간 전자회의 시스템에 있어서 공유화면 제어 장치 및 그 방법에 관한 것으로, 더욱 상세하게는 다자간으로 진행되는 전자회의 시스템의 화면공유 서비스에 있어서 발표자의 회의시스템의 툴바 및 유저 인터페이스(User Interface)와 추가적으로 선택된 외부 어플리케이션 등의 화면을 다른 참석자에게는 숨김 설정하는 공유화면 제어 장치 및 그 방법에 관한 것이다.
현재 인터넷의 발달로 원격지의 사용자 간에 화상 및 음성 그리고 각종 문서를 공유하면서 회의를 진행하는 것이 일반화 되어 있다. 특히 화면공유와 같은 경우는 발표자의 문서자료를 업로드를 할 필요가 없이 즉시 발표자의 PC 화면을 특정 및 다수의 회의 참석자들에게 전송함으로써 편리한 프레젠테이션 방법으로 각광받으며 전자회의에서 필수적인 기능으로 자리 잡고 있는 상태이다.
화면 공유란 마스터(Master)와 호스트(Host)로 구분이 되어 호스트의 전체 화면이나 특정 영역의 공유영역 화면이 실시간적으로 마스터로 전송이 되어 상대방이 볼 수 있도록 해주는 기술이다. 원격 제어는 이러한 화면공유 상태에서 호스트의 화면을 마스터가 상대방의 화면을 보면서 키보드 및 마우스를 조작할 수 있는 기능을 제공한다. 이러한 제품 중 대표적인 제품으로는 pcAnywhere, VNC 등이 존재한다.
나아가 전자회의에서의 화면공유는 1:1을 포함한 1:N까지 확장되는 서비스 개념이며, 발표자의 화면을 다수의 참석자들에게 실시간적으로 전송되어 발표 및 회의를 진행할 수 있도록 해준다. 화면공유가 발표자의 PC 화면을 그대로 전송하는 것이 최대의 장점이라 할 수 있다.
하지만, 회의 시스템의 UI 화면이 발표자의 화면을 가리는 문제가 발생하고 회의 시스템에서 제공하는 채팅 창 등의 화면이 타 참석자들에게 그대로 보임으로써 원활한 발표에 방해가 되는 요소로 작용한다. 판서 등의 공유모드 전환이나 채팅 등의 각종 메뉴 등을 실행시키기 위해서는 회의시스템에서 필연적으로 툴바 등의 UI를 제공하고 있고, 이러한 시스템에서 통상적으로 전체화면을 지원하는 것이 일반적이기 때문에 이러한 UI가 화면공유가 되어 다른 참석자들에게도 보이게 되는 것이다.
종래의 기술에서는 이러한 문제를 해결하기 위해서 툴바 및 UI 영역 등을 제외한 부분만을 화면공유하거나 툴바 및 UI의 자동 숨김 등을 지원하여 발표자의 화면에서 불필요한 부분이 전송되는 것을 막으려고 노력해왔다. 그러나 툴바 및 UI 영역 등을 제외한다는 것은 발표 자료화면의 일부분이 고정되게 제외되는 문제가 발생하고, 툴바 및 UI의 자동 숨김 기능은 이러한 문제를 어느 정도 해소했지만 숨겨진 툴바 및 UI에 있던 기능들을 이용하기 위해서는 숨겨졌던 툴바를 다시 나타나게 해야 하므로 불필요한 영역이 공유된다는 애초의 문제가 다시 발생하게 된다.
이러한 문제는 회의시스템에서 계속적으로 표현해주어야 하는 각종 정보와 기능들의 UI 배치 표현에 커다란 제약을 가하게 되는 원인으로 작용하였다. 비단 회의시스템의 UI 뿐만 아니라 발표자에게 회의 진행 시 필요한 각종 자료 화면과 보안상 화면공유 되지 말아야 하는 외부 어플리케이션의 UI에 대해서 종래의 기술에서는 공유 시 다른 참석자들에게 그대로 노출하거나 해당 영역의 화면에 패턴 배경 이미지 등의 화면 정도를 보여주는데 그쳤었다.
따라서 본 발명은 발표자 자신에게만 필요하거나 전송되기를 원하지 않는 어플리케이션 화면도 같이 전송되는 문제점을 해결하고, 발표자의 화면을 다른 참석자가 원격제어를 하고 있을 때, 제어권자에 의해서 발생된 마우스 및 키보드 이벤트가 이미 숨김 설정이 된 어플리케이션에게 전달되는 것을 차단하는 공유화면 제어 장치 및 그 방법의 제공을 그 목적으로 한다.
본 발명의 일 측면에 따른 전자회의 공유화면 제어 장치는 공유하기 위한 화면 캡쳐시 숨김 설정 대상인 화면을 숨김 처리하고, 숨김 설정 대상에 해당하지 않는 화면을 추출하는 숨김 처리 모듈; 사용자로부터 숨김 설정할 대상을 입력받고, 전자 회의를 위한 화면 공유시 상기 숨김 처리 모듈을 이용하여 추출한 화면을 전자 회의 참석자 단말로 전송하는 회의 모듈; 및 새롭게 생성되는 윈도우를 감시하고, 새롭게 생성된 윈도우를 선택적으로 숨김 설정 처리를 하기 위한 윈도우 후킹 모듈을 포함한다.
상기 회의 모듈은, 상기 숨김 처리 모듈로 하여금 전자회의 공유화면 제어 장치가 제공하는 툴바 또는 유저 인터페이스 중 적어도 하나를 숨김 처리하도록 제어하는 것을 특징으로 할 수 있다.
상기 사용자로부터 입력받는 숨김 설정 대상은, 특정 윈도우, 현재 실행되고 있는 어플리케이션 또는 추후 실행될 어플리케이션에 종속된 윈도우 중 어느 하나인 것을 할 수 있다.
이 때 상기 윈도우 후킹 모듈은, 사용자로부터 현재 실행되고 있는 어플리케이션 또는 추후 실행될 어플리케이션 정보를 입력받은 경우, 상기 현재 실행되고 있는 어플리케이션 또는 추후 실행될 어플리케이션에 의하여 생성되는 윈도우를 감시하고, 이를 숨김 처리하도록 제어하는 것을 특징으로 할 수 있다.
한편, 상기 숨김 처리 모듈은, 숨김 처리를 하기 위한 윈도우에 대하여 투명 윈도우 속성을 부여함으로써 숨김 처리를 수행하는 것을 특징으로 할 수 있다.
이 경우 상기 전자회의 공유화면 제어 장치는 숨김 처리된 윈도우에 해당되는 그래픽 출력이 요청된 경우, 상기 그래픽 출력을 차단하는 그래픽 후킹 모듈을 더 포함할 수 있으며, 상기 숨김 처리 모듈은 운영 체제에서 투명 윈도우 설정 기능을 지원하지 않는 경우 상기 그래픽 후킹 모듈을 이용하여 숨김 처리를 수행할 수 있다.
바람직하게 상기 회의 모듈은, 자신이 아닌 다른 전자회의 단말로부터 숨긴 처리된 대상으로 전달되어야 하는 명령을 수신한 경우, 상기 명령을 무시하는 것을 특징으로 할 수 있다.
더욱 바람직하게 상기 회의 모듈은, 자신이 아닌 다른 전자회의 단말이 원격 제어권을 갖게된 경우, 숨김 처리된 대상을 상기 전자회의 공유화면 처리 장치 상의 화면에서도 숨기도록 제어하는 것을 특징으로 할 수 있다.
이 경우 상기 회의 모듈은, 상기 다른 전자회의 단말로부터 원격 제어권을 회수한 경우, 상기 숨김 처리된 대상을 상기 전자회의 공유화면 처리 장치 상의 화면에 출력하도록 제어할 수 있다.
본 발명의 다른 측면에 따른 전자회의 공유화면 제어 방법은 전자회의 공유화면 제어 장치가 사용자로부터 숨김 설정할 대상을 입력받는 단계; 전자회의 공유화면 제어 장치가 공유하기 위한 화면 캡처시 숨김 설정 대상인 화면을 숨김 처리하고 숨김 설정 대상에 해당하지 않는 화면을 추출하여 전자 회의 참석자 단말로 전송하는 단계; 및 전자회의 공유화면 제어 장치가 새롭게 생성되는 윈도우를 감시하고 새롭게 생성된 윈도우를 선택적으로 숨김 처리하는 단계를 포함한다.
상기 전자회의 공유화면 제어 장치는 자신이 제공하는 툴바 또는 유저 인터페이스 중 적어도 하나를 숨김 처리할 수 있다.
상기 사용자로부터 입력받는 숨김 설정 대상은,특정 윈도우, 현재 실행되고 있는 어플리케이션 또는 추후 실행될 어플리케이션에 종속된 윈도우 중 어느 하나일 수 있다.
이 경우 상기 새롭게 생성되는 윈도우를 감시하고 새롭게 생성된 윈도우를 선택적으로 숨김 처리하는 단계는, 사용자로부터 입력받은 현재 실행되고 있는 어플리케이션 또는 추후 실행될 어플리케이션에 의하여 생성되는 윈도우를 감시하고, 상기 생성되는 윈도우를 숨김 처리하는 것을 특징으로 할 수 있다.
한편, 상기 전자회의 공유화면 제어 장치가 숨김 설정 대상인 화면을 숨김 처리하는 과정은, 상기 숨김 처리를 하기 위한 윈도우에 대하여 투명 윈도우 속성을 부여함으로써 숨김 처리하는 것을 특징으로 할 수 있다.
또한, 상기 전자회의 공유화면 제어 장치가 숨김 설정 대상인 화면을 숨김 처리하는 과정은, 상기 숨김 처리를 하기 위한 윈도우에 해당되는 그래픽 출력이 요청된 경우, 상기 그래픽 출력을 차단함으로써 숨김 처리를 수행하는 것을 특징으로 할 수도 있다.
바람직하게 전자회의 공유화면 제어 방법은 자신이 아닌 다른 전자회의 단말로부터 숨긴 처리된 대상으로 전달되어야 하는 명령을 수신한 경우, 상기 명령을 무시하는 단계를 더 포함할 수 있다.
더 바람직하게 전자회의 공유화면 제어 방법은 자신이 아닌 다른 전자회의 단말이 원격 제어권을 갖게된 경우, 숨김 처리된 대상을 상기 전자회의 공유화면 처리 장치 상의 화면에서도 숨기도록 제어하는 단계를 더 포함할 수도 있다.
이 경우 상기 다른 전자회의 단말로부터 원격 제어권을 회수한 경우, 상기 숨김 설정 처리된 대상을 상기 전자회의 공유화면 처리 장치 상의 화면에 출력하도록 제어하는 단계가 더 포함될 수도 있다.
본 발명에 따른 공유화면 제어 장치 및 그 방법에 의하면 다자간으로 진행되는 전자회의 시스템의 화면공유 서비스에서 발표자의 회의시스템의 툴바, 유저 인터페이스 또는 추가적으로 선택된 외부 어플리케이션의 화면을 발표자 자신에게는 계속 볼 수 있게 하지만, 다른 참석자들에게는 감추어진 화면을 전송한다.
따라서 숨겨진 윈도우에 가려져있던 화면 부분을 대신 전송하게 되어, 마치 원래 없었던 것처럼 보이게 할 수 있으므로 회의시스템의 유저 인터페이스를 표현의 제약 없이 발표자에게 제공할 수 있게 된다. 동시에 그로 인한 발표 내용이 가려지게 되는 문제점을 근본적으로 해소하고 보안이 필요한 윈도우 화면 내용이 전송되지 않게 함으로써 원활한 발표진행을 위한 편리성 및 보안성을 향상시킨다.
문서회의에서는 전체화면인 상태에서 공유하는 경우가 많고 특히 화면공유의 경우 실시간적으로 화면을 캡처하는 특성 상 발표 화면이 가려지는 것은 다자간 회의에서 매우 치명적이 될 수 있으므로 전자회의 화면공유에서 매우 강력한 기능으로 적용될 수 있다.
나아가 본 발명이 적용된 상태에서 발표자의 화면을 다른 참석자가 원격제어를 하고자 할 때에는 제어권자에 의해서 발생된 키보드 및 마우스 이벤트가 이미 숨김 설정이 된 어플리케이션에게 전달이 될 수 있으므로, 회의시스템에서 이를 자동적으로 차단하거나 발표자가 아닌 다른 참석자에게 원격제어권이 부여되었을 때에는 숨김 설정이 된 윈도우를 화면공유 전송된 화면뿐만이 아닌 실제 화면에서도 숨기는 방법을 제공하여 원격제어 시에 발생할 수 있는 문제를 해결할 수도 있다.
본 발명은 다자간 서비스인 전자회의 시스템에 더욱 적합하지만 모든 화면공유 및 원격제어 솔루션에도 적용이 가능하다는 점에서 호환성도 뛰어나다.
도 1은 본 발명의 일 실시예에 따른 전자회의 공유화면 제어 장치의 블록 구성을 나타낸 도면.
도 2는 도 1에 도시된 회의 모듈의 구체적 동작 과정을 나타낸 도면.
도 3은 도 1에 도시된 그래픽 후킹 모듈(140)의 구체적 동작 과정을 나타낸 도면.
도 4는 도 1에 도시된 윈도우 후킹 모듈의 구체적 동작 과정을 나타낸 도면.
도 5는 도 1에 도시된 숨김 윈도우 설정 모듈의 구체적 동작 과정을 나타낸 도면.
도 6은 본 발명의 다른 실시예에 따른 숨김 윈도우 기능과 원격제어 기능을 병행하여 사용하는 방법을 나타낸 도면.
도 7은 본 발명의 또 다른 실시예에 따른 원격 제어권이 변경 시 그 제어 방법을 나타낸 도면.
<도면의 주요 부분에 대한 부호 설명>
100 : 전자회의 공유화면 제어 장치 110 : 회의 모듈
120 : 윈도우 후킹 모듈 130 : 숨김 윈도우 설정 모듈
140 : 그래픽 후킹 모듈
이하, 본 발명에 따른 다자간 전자회의 시스템에 있어서 공유화면 제어 장치 및 그 방법에 대하여 첨부된 도면을 참조하여 상세히 설명한다.
도 1은 본 발명의 일 실시예에 따른 전자회의 공유화면 제어 장치의 블록 구성을 나타낸 도면이다.
도 1에 도시된 바와 같이 전자회의 공유화면 제어 장치(100)는 회의 모듈(110), 윈도우 후킹 모듈(120), 숨김 윈도우 설정 모듈(130) 및 그래픽 후킹 모듈(140) 등을 포함하여 구성될 수 있다.
회의 모듈(100)은 전자 회의 등의 상황에서 화면 공유 시 자신의 회의 시스템 상의 툴바(Toolbar) 및 유저 인터페이스(User Interface)의 출력 화면을, 발표자인 자신에게는 나타내고 다른 참석자들에게 숨기는 처리를 수행한다. 이와 같은 과정을 본 발명에서는 숨김 처리 과정이라고 지칭한다. 숨김 처리는 회의 모듈(100)이 실행 초기에 숨김 윈도우 설정 모듈(130)을 이용하여 수행한다.
또한, 회의 모듈(100)은 전자 회의가 진행되는 도중 발표자가 전자 회의 관련 윈도우가 아닌 관련 없는 외부 윈도우 또는 어플리케이션을 숨김 처리할 수 있도록, 사용자가 선택할 수 있는 대화상자 등의 도구 등을 제공할 수 있다.
사용자는 제공된 대화상자 등을 이용하여 특정 윈도우, 현재 실행되고 있는 어플리케이션 또는 추후 실행될 어플리케이션의 이름 및 실행 경로 등을 입력할 수 있다. 회의 모듈(100)은 사용자가 선택한 윈도우 또는 입력된 어플리케이션에 대하여 숨김 윈도우 설정 모듈(130)을 호출함으로써 숨김 처리를 수행할 수 있다.
회의 모듈(100)은 이와 같이 숨김 대상이 되는 툴바, 유저 인터페이스, 윈도우 등을 숨김 처리한 후 화면을 캡쳐하여 다른 전자 회의 참석자 단말로 전송한다.
숨김 윈도우 설정 모듈(130)은 회의 모듈(100) 또는 윈도우 후킹 모듈(120)의 제어에 따라 툴바, 유저 인터페이스 및 추가적으로 선택된 외부 어플리케이션의 대상 윈도우 등을 숨김 처리하도록 제어하는 구성 요소이다.
발표자의 화면을 공유하여 다른 회의 참가자들에게 전송하기 위해서는 발표자의 디스플레이 화면을 캡처해야 한다. 상기 화면 캡처를 하기 위해서 Microsoft Windows 운영 체제에서는 일반적으로 GDI(Graphic Device Interface) API 등을 이용할 수 있다.
또한, 숨김 윈도우 설정 모듈(130)은 전자 회의 시스템의 툴바, 유저 인터페이스 또는 추가적으로 선택된 외부 어플리케이션의 대상 윈도우들을 발표자의 실제 화면에서는 출력하나, 전송하기 위하여 캡처된 화면에서는 존재하지 않았던 것처럼 숨겨야만 한다.
이러한 캡처 과정을 위해 특정 윈도우 숨김 처리를 운영체제에서 지원해주는 방법이 있으면 사용할 수 있다. 그러나 운영체제에서 특정 윈도우 숨김 처리를 지원하지 않는 경우 숨김 윈도우 설정 모듈(130)은 그래픽 후킹 모듈(140)로 하여금 그래픽 API Hooking 처리를 하도록 하여, 특정 윈도우를 숨김 처리하는 에뮬레이션 처리를 하도록 제어한다.
반면, Microsoft Windows 2000 이상의 운영 체제와 같이 투명 윈도우 처리가 가능한 Layered Window API를 지원하는 경우, 숨김 윈도우 설정 모듈(130)은 숨김 설정의 대상이 되는 툴바, 유저 인터페이스 또는 임의의 윈도우의 속성을 Layered Window 속성을 추가하여 투명 윈도우로 설정함으로써 숨김 처리를 하게 된다.
그래픽 후킹 모듈(Graphic Hooking Module)(140)은 화면 캡처 시에 숨김 설정이 된 윈도우에 해당되는 그래픽 API(Application Programming Interface)가 호출되었을 때, 디스플레이 출력을 무효화 또는 차단시키기 위한 구성 요소이다.
여기서 후킹은 다음과 같이 설명될 수 있다. 예를 들어, A 모듈이 B 기능의 API를 후킹 처리한다는 것은, B 기능의 API가 호출될 때 A 모듈이 B 기능의 API 보다 먼저 동작을 수행하고, 선택적으로 본래의 API를 호출해주어 정상적인 처리가 진행되도록 하는 것이다.
즉, 그래픽 후킹 모듈(140)은 숨김 설정이 된 윈도우를 출력하기 위한 그래픽 API가 호출되는 경우, 상기 그래픽 API보다 먼저 실행되어 그에 따른 디스플레이 출력을 차단하는 것이다.
한편, 본 발명의 윈도우 후킹 모듈(Window Hooking Module)(120)은 새롭게 생성되는 윈도우들을 감시하고, 새롭게 생성된 윈도우를 감지하였을 경우에 선택적으로 숨김 처리를 하기 위한 구성 요소에 해당한다.
위에서 설명한 바와 같이 본 발명은 사용자가 입력한 외부 어플리케이션의 특정 윈도우나 어플리케이션의 전체 윈도우를 숨김 설정하는 기능을 제공한다. 특정 윈도우의 경우에는 한 번의 숨김 설정으로 그 동작이 종료한다.
그러나 어플리케이션의 경우에는 상기 어플리케이션에 종속되어 있는 모든 윈도우에 대하여 숨김 설정을 하여야 한다. 뿐만 아니라, 숨김 설정 후에도 어플리케이션이 계속적으로 생성하는 윈도우가 있을 수 있다. 상기 윈도우 후킹 모듈(120)은 계속적으로 생성되는 윈도우를 감시하고, 이에 대하여 숨김 설정을 하도록 제어한다.
또한, 본 발명에서는 현재 실행되지 않은 어플리케이션이 추후에 실행되었을 때 자동적으로 숨김 처리를 하는 기능도 제공한다. 이를 위하여 전자회의 공유화면 제어 장치(100)는 사용자로부터 어플리케이션의 이름 및 실행 경로를 입력 받을 수 있다. 윈도우 후킹 모듈(120)은 정보를 입력받은 어플리케이션이 실행되었을 때 생성되는 윈도우들을 감시하고 이에 대하여 숨김 처리를 하게 된다.
도 2는 도 1에 도시된 회의 모듈의 구체적 동작 과정을 나타낸 도면이다.
회의 모듈(110)은 동작이 시작되면 먼저 그래픽 후킹 모듈(140)과 윈도우 후킹 모듈(120)을 각각 로드한다(S201, S202). 로드된 그래픽 후킹 모듈(140)과 윈도우 후킹 모듈(120)은 회의 모듈(110)의 동작 종료 또는 전자회의 시스템이 종료될 때까지 그 동작을 계속한다.
그 후 회의 모듈(110)은 숨김 윈도우 설정 모듈(130)로 하여금 전자 회의 시스템의 툴바 및 각종 유저 인터페이스를 숨김 처리하도록 제어한다(S203). 숨김 윈도우 설정 모듈(130)이 수행하는 숨김 처리 동작에 대해서는 도 5에서 더욱 자세히 살펴본다.
또한, 회의 모듈(110)은 사용자로부터 숨길 윈도우 또는 어플리케이션을 입력받기 위한 대화상자 등의 인터페이스를 출력한다(S204). 회의 모듈(110)은 S204 단계에서 출력한 대화 상자 등을 통해 사용자가 숨기고자 하는 윈도우 또는 어플리케이션을 선택했는지 판단한다(S205).
만일, 사용자로부터 임의의 윈도우 또는 어플리케이션을 입력받은 경우, 회의 모듈(110)은 숨김 윈도우 설정 모듈(130)이 선택된 윈도우 또는 어플리케이션을 숨김 처리 하도록 제어한다(S206).
숨김 처리가 끝난 후 회의 모듈(110)은 기타 전자 회의 관련 프로세스들을 수행하게 된다(S207).
회의 모듈(110)은 회의 시스템의 종료 여부를 판단한다(S208). 만일 전자 회의 시스템이 종료된 경우, 회의 모듈(110)은 그 동작을 종료한다. 전자 회의 시스템이 종료되지 않는 경우, 회의 모듈(110)은 S205 단계로 진행하여 사용자가 숨기고자 하는 윈도우 또는 어플리케이션 정보를 추가적으로 입력하는지 판단하게 된다.
도 3은 도 1에 도시된 그래픽 후킹 모듈의 구체적 동작 과정을 나타낸 도면이다.
그래픽 후킹 모듈(140)은 도 2의 S201 단계에 따른 회의 모듈(110)의 로드 과정을 통해 그 동작이 시작된다.
그래픽 후킹 모듈(140)은 운영체제 전역으로 자신을 상주시킨 후(S301), 어플리케이션 등의 그래픽 API를 감시하기 위한 Hooking 처리를 시작한다(S302).
임의의 그래픽 API에 대해 Hooking 처리를 하게 되면, 그래픽 후킹 모듈(140)은 임의의 어플리케이션이 화면에 출력할 때 사용하는 API를 호출하는 경우 이보다 먼저 실행될 수 있다.
그래픽 후킹 모듈(140)은 후킹된 API가 호출되었는지 판단한다(S303). 만일 후킹된 API가 호출되지 않은 경우라면 S304 내지 S307의 단계는 진행할 필요가 없으며, 바로 S308 단계로 진행한다.
반면 후킹된 API가 호출된 경우, 그래픽 후킹 모듈(140)은 후킹된 API가 회의 모듈(110)이 화면을 캡처하기 위한 과정에서 호출된 API인지 판단한다(S304). 또한, 그래픽 후킹 모듈(140)은 임의의 API 호출이 숨김 설정이 된 윈도우에 대한 호출인지 판단한다(S305).
상기 S304의 판단과 S305의 판단이 모두 Yes인 경우 그래픽 후킹 모듈(140)은 호출된 API의 화면 출력 처리를 차단 또는 무효화시킴으로써 해당 윈도우의 화면이 마치 존재하지 않았던 것처럼 숨기게 된다(S306).
만약, S304 또는 S305의 판단이 No인 경우, 즉 임의의 API 호출이 화면 캡처를 위한 호출이 아니거나 숨김 설정이 되어 있는 윈도우에 대한 호출이 아닌 경우, 그래픽 후킹 모듈(140)은 원래의 API를 호출하여 정상적으로 출력 처리되도록 제어한다(S307).
이와 같은 과정을 마친 후 그래픽 후킹 모듈(140)은 전자 회의 시스템이 종료되었는지 판단한다(S308). 전자 회의 시스템이 종료되지 않은 경우 그래픽 후킹 모듈(140)은 S302 단계로 진행하여 또 다른 API의 호출을 대기한다. 반면 전자 회의 시스템이 종료된 경우 그래픽 후킹 모듈(140)은 그 동작을 종료하게 된다.
도 4는 도 1에 도시된 윈도우 후킹 모듈의 구체적 동작 과정을 나타낸 도면이다.
윈도우 후킹 모듈(120)은 그래픽 후킹 모듈(140)과 마찬가지로 S202 단계에서 회의 모듈(110)이 로드함으로써 그 동작이 시작된다.
그래픽 후킹 모듈(140)과 마찬가지로 윈도우 후킹 모듈(120) 또한 운영체제 전역으로 자신을 상주시킨다.
윈도우 후킹 모듈(120)은 운영체제 전역으로 상주한 후 모든 어플리케이션의 윈도우 생성을 감시하기 위한 Hooking 처리를 하게 된다(S402). 윈도우 후킹 모듈(120)이 후킹 처리를 하는 경우, 윈도우 후킹 모듈(120)은 모든 어플리케이션에서 새롭게 생성된 윈도우를 감지할 수 있게 된다.
윈도우 후킹 모듈(120)은 새롭게 생성되는 윈도우가 감지되는지 판단한다(S403). 만일 새롭게 생성되는 윈도우가 존재하지 않는다면, 윈도우 후킹 모듈(120)은 별도의 처리 없이 S406 단계로 진행한다.
새롭게 생성되는 윈도우를 감지한 경우 윈도우 후킹 모듈(120)은 감지된 윈도우가 숨김 설정이 된 윈도우 및 어플리케이션에 속하는 윈도우에 해당하는지 판단한다(S404).
만일 S404 단계에서 감지된 윈도우가 숨김 설정이 된 윈도우 또는 어플리케이션에 속하는 윈도우인 경우, 윈도우 후킹 모듈(120)은 숨김 윈도우 설정 모듈(130)로 하여금 새롭게 생성되는 윈도우를 즉시 숨김 처리하도록 제어한다(S405).
이와 같이 새롭게 생성되는 윈도우를 숨김 처리하도록 제어한 후 윈도우 후킹 모듈(120)은 전자 회의 시스템이 종료되었는지 감지한다(S406). 만일 전자 회의 시스템이 종료되지 않았다면 윈도우 후킹 모듈(120)은 S403 단계로 진행하여 운영체제 전역에 상주된 채로 또 다른 윈도우의 생성 여부를 감지하게 된다.
물론 S406 단계에서 전자 회의 시스템이 종료된 경우 윈도우 후킹 모듈(120)은 그 동작을 종료하게 된다.
도 5는 도 1에 도시된 숨김 윈도우 설정 모듈의 구체적 동작 과정을 나타낸 도면이다.
숨김 윈도우 설정 모듈(130)은 회의 모듈(110) 또는 윈도우 후킹 모듈(120)에서 윈도우 또는 어플리케이션을 숨김 설정하기 위하여 호출함으로써 동작이 시작된다.
먼저, 숨김 윈도우 설정 모듈(130)은 자신을 호출한 모듈(예를 들어, 회의 모듈(110) 또는 윈도우 후킹 모듈(120))로부터 숨김 설정을 하고자 하는 윈도우 또는 어플리케이션의 파라미터 정보를 전달받는다(S501).
숨김 윈도우 설정 모듈(130)은 넘겨받은 파라미터 정보가 현재 실행 중인 윈도우 및 어플리케이션에 대한 정보인지 판단한다(S502).
S502의 판단에서 전달받은 파라미터 정보가 현재 실행 중인 윈도우 또는 어플리케이션에 대한 정보가 아닌 경우, 숨김 윈도우 설정 모듈(130)은 숨김 설정 관리 목록에 이들 정보를 추가한다(S506). 그 후 숨김 윈도우 설정 모듈(130)은 그 동작을 종료하고 즉시 복귀하게 된다.
반면 S502 단계에서, 전달받은 파라미터 정보가 현재 실행중인 윈도우 및 어플리케이션에 대한 정보인 경우, 숨김 윈도우 설정 모듈(130)은 운영체제에서 Microsoft Windows의 Layered Window와 같은 투명 윈도우 기능을 지원하는지 체크한다(S503).
만일 운영체제에서 투명 윈도우 기능이 지원되는 경우 숨김 윈도우 설정 모듈(130)은 상기 기능을 이용하여 숨김 설정 대상이 되는 윈도우 또는 어플리케이션에 종속되는 윈도우들에 대하여 숨김 처리를 수행한다(S504).
예를 들어, 숨김 윈도우 설정 모듈(130)은 숨김 설정 대상이 되는 윈도우 또는 어플리케이션에 종속되는 모든 윈도우에 대하여 Layered Window 속성을 추가하여 이를 투명 윈도우로 설정하는 방법으로 숨김 처리를 수행할 수 있다.
S503 단계에서 운영체제가 이러한 Layered Window 기능을 지원하지 않는다면 숨김 윈도우 설정 모듈(130)은 그래픽 후킹 모듈(140)로 하여금 숨김 처리 대상이 되는 윈도우 또는 어플리케이션에 종속되는 윈도우들에 대하여 즉시 숨김 처리하도록 제어하게 된다(S505).
마지막으로 숨김 윈도우 설정 모듈(130)은 사용자로부터 입력된 윈도우 또는 어플리케이션을 숨김 설정 관리 목록에 추가하여(S506), 추후 상기 윈도우 또는 어플리케이션이 호출되더라도 즉시 숨기도록 제어한다. 그 후 숨김 윈도우 설정 모듈(130)은 그 동작을 종료하게 된다.
화면 공유되어 있는 발표자의 화면을 다른 참석자가 원격제어를 하고 있는 경우, 상기 제어권자에 의해서 발생된 키보드 또는 마우스 이벤트가 숨김 설정이 된 어플리케이션으로 전달되는 문제가 발생할 수 있다. 이하, 이러한 문제를 해결하기 위한 방법에 대해서 살펴보기로 한다.
도 6은 본 발명의 다른 실시예에 따른 숨김 윈도우 기능과 원격제어 기능을 병행하여 사용하는 방법을 나타낸 도면이다.
구체적으로 도 6은 원격 제어권자가 발생한 키보드 및 마우스 이벤트를 발표자 측 전자회의 공유화면 제어 장치(100)의 회의 모듈(110)에서 처리하는 과정을 나타낸 것이다.
전자회의 공유화면 제어 장치(100)의 회의 모듈(110)은 현재 전자회의 화면이 공유되어 있는 상태이며, 자신이 발표자 측인지 체크한다(S601).
자신이 화면 공유 중인 상태로 발표자 측이 아닌 경우, 회의 모듈(110)은 기타 회의 관련 프로세스를 진행하는 S606 단계로 진행한다. 만일 자신이 화면 공유 중인 상태로 발표자 측이라면 이하의 S602 내지 S605의 단계를 수행한다.
발표자 측 공유화면 제어 장치의 회의 모듈(110)은 원격 제어권을 가진 다른 참석자에 의하여 발생된 키보드 또는 마우스 이벤트를 수신하였는지 판단한다(S602).
또한 상기 회의 모듈(110)은 다른 참석자에 의해 발생된 키보드 또는 마우스 이벤트가 상기 이벤트가 현재 숨김 설정된 윈도우에 전달이 되는지 여부를 판단하게 된다(S603). 만일 이벤트를 수신하지 못하였다면 이벤트 관련 동작(S604 내지 S605 과정)은 하지 않고 S606 단계로 진행한다.
만일 원격 제어권을 가진 다른 참석자로부터 전달된 이벤트가 숨긴 윈도우에 전달되는 경우라면, 회의 모듈(110)은 숨김 설정된 윈도우로 이벤트가 전달되지 않도록 이벤트를 무시 또는 차단한다(S604). 이벤트 무시 또는 차단 후 회의 모듈(110)은 기타 회의 관련 프로세스들을 계속하여 진행하게 된다(S606).
만일 S603 단계에서, 다른 참석자에 의해 발생된 키보드 또는 마우스 이벤트가 상기 이벤트가 현재 숨김 설정된 윈도우에 전달되지 않는 경우라면, 회의 모듈(110)은 상기 이벤트를 정상적으로 처리되도록 제어한다(S605).
이러한 이벤트 관련 동작 제어 후 회의 모듈(110)은 전자 회의 시스템의 종료 여부를 체크한다(S607). 전자 회의 시스템이 종료된 경우 회의 모듈(110)도 그 동작을 종료하게 된다. 회의 시스템이 종료되지 않은 경우 회의 모듈(110)은 S601 단계로 진행하여 그 동작을 반복하게 된다.
도 7은 본 발명의 또 다른 실시예에 따른 원격 제어권이 변경 시 그 제어 방법을 나타낸 도면이다.
전자회의 공유화면 제어 장치(100)의 회의 모듈(110)은 원격 제어권자의 변경이 이루어졌는지 체크한다(S701).
회의 모듈(110)은 원격 제어권이 발표자에게 회수되었는지 판단한다(S702). 만일 원격 제어권이 발표자에게 원래대로 회수된 경우에는 숨김 설정된 윈도우들을 상기 전자회의 공유화면 제어 장치(100)의 실제 디스플레이 상에서 출력하도록 제어한다(S703).
만일 S702 단계에서 원격 제어권이 발표자에게 회수되지 않고 다른 참석자에게 부여된 경우, 회의 모듈(110)은 숨김 설정이 된 윈도우를 화면 공유 전송된 화면뿐만이 아닌 실제 화면에서도 숨김 설정되도록 제어한다(S704).
이를 통해 원격 제어권자가 발생시킨 키보드 및 마우스 이벤트가 발표자 측 전자회의 공유화면 제어 장치의 숨김 설정된 윈도우 등에 적용될 수 있는 문제점을 근본적으로 해결할 수 있다.
이와 같이 특정 윈도우를 공유 화면이 아닌 실제 화면에서 보이게 또는 안보이도록 처리하는 것은 Microsoft Windows의 윈도우 API 등을 이용하여 구현할 수 있다.
이와 같이 원격제어권자의 변경에 따른 제어가 이루어진 후 회의 모듈(110)은 기타 회의 관련 프로세스들을 수행한다(S705). 또한, 회의 모듈(110)은 전자 회의 시스템의 종료 여부를 체크한다(S706). 전자 회의 시스템이 종료된 경우 회의 모듈(110)도 그 동작을 종료하게 된다. 회의 시스템이 종료되지 않은 경우 회의 모듈(110)은 S701 단계로 진행하여 그 동작을 반복하게 된다.
이상에서 대표적인 실시예를 통하여 본 발명에 대하여 상세하게 설명하였으나, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 상술한 실시예에 대하여 본 발명의 범주에서 벗어나지 않는 한도 내에서 다양한 변형이 가능함을 이해할 것이다. 그러므로 본 발명의 권리 범위는 설명된 실시예에 국한되어 정해져서는 안 되며, 후술하는 특허청구범위뿐만 아니라 이 특허청구범위와 균등한 것들에 의하여 정해져야 한다.

Claims (18)

  1. 공유하기 위한 화면 캡쳐시 숨김 설정 대상인 화면을 숨김 처리하고, 숨김 설정 대상에 해당하지 않는 화면을 추출하는 숨김 처리 모듈;
    사용자로부터 숨김 설정할 대상을 입력받고, 전자 회의를 위한 화면 공유시 상기 숨김 처리 모듈을 이용하여 추출한 화면을 전자 회의 참석자 단말로 전송하는 회의 모듈; 및
    새롭게 생성되는 윈도우를 감시하고, 새롭게 생성된 윈도우를 선택적으로 숨김 설정 처리를 하기 위한 윈도우 후킹 모듈을 포함하는 전자회의 공유화면 제어 장치.
  2. 제1항에 있어서,
    상기 회의 모듈은,
    상기 숨김 처리 모듈로 하여금 전자회의 공유화면 제어 장치가 제공하는 툴바 또는 유저 인터페이스 중 적어도 하나를 숨김 처리하도록 제어하는 것을 특징으로 하는 전자회의 공유화면 제어 장치.
  3. 제1항에 있어서,
    상기 사용자로부터 입력받는 숨김 설정 대상은,
    특정 윈도우, 현재 실행되고 있는 어플리케이션 또는 추후 실행될 어플리케이션에 종속된 윈도우 중 어느 하나인 것을 특징으로 하는 전자회의 공유화면 제어 장치.
  4. 제3항에 있어서,
    상기 윈도우 후킹 모듈은,
    사용자로부터 현재 실행되고 있는 어플리케이션 또는 추후 실행될 어플리케이션 정보를 입력받은 경우, 상기 현재 실행되고 있는 어플리케이션 또는 추후 실행될 어플리케이션에 의하여 생성되는 윈도우를 감시하고, 이를 숨김 처리하도록 제어하는 것을 특징으로 하는 전자회의 공유화면 제어 장치.
  5. 제1항에 있어서,
    상기 숨김 처리 모듈은,
    숨김 처리를 하기 위한 윈도우에 대하여 투명 윈도우 속성을 부여함으로써 숨김 처리를 수행하는 것을 특징으로 하는 전자회의 공유화면 제어 장치.
  6. 제5항에 있어서,
    상기 전자회의 공유화면 제어 장치는 숨김 처리된 윈도우에 해당되는 그래픽 출력이 요청된 경우, 상기 그래픽 출력을 차단하는 그래픽 후킹 모듈을 더 포함하며,
    상기 숨김 처리 모듈은 운영 체제에서 투명 윈도우 설정 기능을 지원하지 않는 경우 상기 그래픽 후킹 모듈을 이용하여 숨김 처리를 수행하는 것을 특징으로 하는 전자회의 공유화면 제어 장치.
  7. 제1항 내지 제6항 중 어느 한 항에 있어서,
    상기 회의 모듈은,
    자신이 아닌 다른 전자회의 단말로부터 숨긴 처리된 대상으로 전달되어야 하는 명령을 수신한 경우, 상기 명령을 무시하는 것을 특징으로 하는 전자회의 공유화면 제어 장치.
  8. 제1항 내지 제6항 중 어느 한 항에 있어서,
    상기 회의 모듈은,
    자신이 아닌 다른 전자회의 단말이 원격 제어권을 갖게된 경우, 숨김 처리된 대상을 상기 전자회의 공유화면 처리 장치 상의 화면에서도 숨기도록 제어하는 것을 특징으로 하는 전자회의 공유화면 제어 장치.
  9. 제8항에 있어서,
    상기 회의 모듈은,
    상기 다른 전자회의 단말로부터 원격 제어권을 회수한 경우, 상기 숨김 처리된 대상을 상기 전자회의 공유화면 처리 장치 상의 화면에 출력하도록 제어하는 것을 특징으로 하는 전자회의 공유화면 제어 장치.
  10. 전자회의 공유화면 제어 장치는 사용자로부터 숨김 설정할 대상을 입력받는 단계;
    상기 전자회의 공유화면 제어 장치는 공유하기 위한 화면 캡처시 숨김 설정 대상인 화면을 숨김 처리하고, 숨김 설정 대상에 해당하지 않는 화면을 추출하여 전자 회의 참석자 단말로 전송하는 단계; 및
    상기 전자회의 공유화면 제어 장치는 새롭게 생성되는 윈도우를 감시하고 새롭게 생성된 윈도우를 선택적으로 숨김 처리하는 단계를 포함하는 것을 특징으로 하는 전자회의 공유화면 제어 방법.
  11. 제10항에 있어서,
    상기 전자회의 공유화면 제어 장치는 자신이 제공하는 툴바 또는 유저 인터페이스 중 적어도 하나를 숨김 처리하는 것을 특징으로 하는 전자회의 공유화면 제어 방법.
  12. 제10항에 있어서,
    상기 사용자로부터 입력받는 숨김 설정 대상은,
    특정 윈도우, 현재 실행되고 있는 어플리케이션 또는 추후 실행될 어플리케이션에 종속된 윈도우 중 어느 하나인 것을 특징으로 하는 전자회의 공유화면 제어 방법.
  13. 제12항에 있어서,
    상기 새롭게 생성되는 윈도우를 감시하고 새롭게 생성된 윈도우를 선택적으로 숨김 처리하는 단계는,
    사용자로부터 입력받은 현재 실행되고 있는 어플리케이션 또는 추후 실행될 어플리케이션에 의하여 생성되는 윈도우를 감시하고, 상기 생성되는 윈도우를 숨김 처리하는 것을 특징으로 하는 전자회의 공유화면 제어 방법.
  14. 제10항에 있어서,
    상기 전자회의 공유화면 제어 장치가 숨김 설정 대상인 화면을 숨김 처리하는 과정은,
    상기 숨김 처리를 하기 위한 윈도우에 대하여 투명 윈도우 속성을 부여함으로써 숨김 처리하는 것을 특징으로 하는 전자회의 공유화면 제어 방법.
  15. 제10항에 있어서,
    상기 전자회의 공유화면 제어 장치가 숨김 설정 대상인 화면을 숨김 처리하는 과정은,
    상기 숨김 처리를 하기 위한 윈도우에 해당되는 그래픽 출력이 요청된 경우, 상기 그래픽 출력을 차단함으로써 숨김 처리를 수행하는 것을 특징으로 하는 전자회의 공유화면 제어 방법.
  16. 제10항 내지 제15항 중 어느 한 항에 있어서,
    자신이 아닌 다른 전자회의 단말로부터 숨긴 처리된 대상으로 전달되어야 하는 명령을 수신한 경우, 상기 명령을 무시하는 단계를 더 포함하는 것을 특징으로 하는 전자회의 공유화면 제어 방법.
  17. 제10항 내지 제15항 중 어느 한 항에 있어서,
    자신이 아닌 다른 전자회의 단말이 원격 제어권을 갖게된 경우, 숨김 처리된 대상을 상기 전자회의 공유화면 처리 장치 상의 화면에서도 숨기도록 제어하는 단계를 더 포함하는 전자회의 공유화면 제어 방법.
  18. 제17항에 있어서,
    상기 다른 전자회의 단말로부터 원격 제어권을 회수한 경우, 상기 숨김 설처리된 대상을 상기 전자회의 공유화면 처리 장치 상의 화면에 출력하도록 제어하는 단계를 더 포함하는 전자회의 공유화면 제어 방법.
PCT/KR2009/001088 2008-03-10 2009-03-05 다자간 전자회의 시스템에 있어서 공유화면 제어 장치 및 그 방법 WO2009113777A2 (ko)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
KR1020080021786A KR20080027813A (ko) 2008-03-10 2008-03-10 다자간 전자회의 화면공유에서의 공유 윈도우 처리 방법
KR10-2008-0021786 2008-03-10
KR10-2009-0015414 2009-02-24
KR1020090015414A KR100952122B1 (ko) 2008-03-10 2009-02-24 다자간 전자회의 시스템에 있어서 공유화면 제어 장치 및 그 방법

Publications (2)

Publication Number Publication Date
WO2009113777A2 true WO2009113777A2 (ko) 2009-09-17
WO2009113777A3 WO2009113777A3 (ko) 2009-12-23

Family

ID=41065649

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2009/001088 WO2009113777A2 (ko) 2008-03-10 2009-03-05 다자간 전자회의 시스템에 있어서 공유화면 제어 장치 및 그 방법

Country Status (1)

Country Link
WO (1) WO2009113777A2 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9525845B2 (en) 2012-09-27 2016-12-20 Dobly Laboratories Licensing Corporation Near-end indication that the end of speech is received by the far end in an audio or video conference

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001195007A (ja) * 2000-01-06 2001-07-19 Minolta Co Ltd 情報表示装置及び電子会議システム
JP2007280243A (ja) * 2006-04-11 2007-10-25 Fuji Xerox Co Ltd 電子会議システム、電子会議用端末、電子会議システムの制御方法及び電子会議用端末の制御プログラム
US20070282948A1 (en) * 2006-06-06 2007-12-06 Hudson Intellectual Properties, Inc. Interactive Presentation Method and System Therefor

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09200350A (ja) * 1996-01-12 1997-07-31 Hitachi Inf Syst Ltd 電子会議システム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001195007A (ja) * 2000-01-06 2001-07-19 Minolta Co Ltd 情報表示装置及び電子会議システム
JP2007280243A (ja) * 2006-04-11 2007-10-25 Fuji Xerox Co Ltd 電子会議システム、電子会議用端末、電子会議システムの制御方法及び電子会議用端末の制御プログラム
US20070282948A1 (en) * 2006-06-06 2007-12-06 Hudson Intellectual Properties, Inc. Interactive Presentation Method and System Therefor

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9525845B2 (en) 2012-09-27 2016-12-20 Dobly Laboratories Licensing Corporation Near-end indication that the end of speech is received by the far end in an audio or video conference

Also Published As

Publication number Publication date
WO2009113777A3 (ko) 2009-12-23

Similar Documents

Publication Publication Date Title
KR100952122B1 (ko) 다자간 전자회의 시스템에 있어서 공유화면 제어 장치 및 그 방법
US5826051A (en) Method and apparatus for simplifying active window selection, application activation, and shared command execution in a multi-application environment
WO2014035108A1 (en) Message handling method and terminal supporting the same
WO2011014040A2 (en) Method and device for creation of integrated user interface
WO2011037401A2 (en) Method for controlling display apparatus and mobile phone
WO2016032051A1 (ko) 다자간 영상 회의 서비스의 참여자 확장 방법
WO2015046837A1 (ko) 컨텐츠 공유 장치 및 방법
WO2010143842A2 (ko) Ｕｉ 제공방법 및 이를 적용한 디스플레이 장치
WO2013042921A1 (en) Apparatus and method for running application in mobile terminal
US20060092268A1 (en) Teleconference method with a shared working space
WO2013048141A2 (en) System and method for displaying usage history of applications executed between devices
WO2013094881A1 (ko) 어플리케이션 실행 제어 방법 및 장치
WO2014003377A1 (ko) 화면 동기화를 위한 멀티미디어 장치와 원격 제어 장치 및 그 방법
US7849410B2 (en) Pointing-control system for multipoint conferences
WO2020159037A1 (ko) 사용자 단말을 이용하여 엠씨유와 영상회의 단말을 제어할 수 있는 제어방법 및 그 제어방법을 위한 영상회의 시스템
WO2019054796A1 (en) INTERACTION ACTIVATION METHOD USING A DIGITAL FOOTPRINT ON A DISPLAY AND ASSOCIATED ELECTRONIC DEVICE
WO2014126331A1 (en) Display apparatus and control method thereof
WO2015046683A1 (en) Digital device and control method thereof
WO2018186698A2 (ko) 다자간 커뮤니케이션 서비스를 제공하기 위한 방법, 시스템 및 비일시성의 컴퓨터 판독 가능 기록 매체
WO2011059227A2 (en) Method for providing contents to external apparatus
WO2009113777A2 (ko) 다자간 전자회의 시스템에 있어서 공유화면 제어 장치 및 그 방법
EP2820558A1 (en) Remote user interface providing apparatus and method
WO2018229661A1 (ko) 웹 또는 클라우드 환경의 클라이언트간 동기화된 화면보기를 위한 방법 및 시스템
WO2019045362A1 (en) DISPLAY APPARATUS FOR PROVIDING A PREVIEWING UI AND METHOD FOR CONTROLLING DISPLAY APPARATUS
WO2015142007A1 (ko) 추출된 메시지를 채팅창에 구별하여 표시하는 메시지 표시 방법, 상기 방법을 수행하는 이동 단말 및 채팅 서버

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 09720698

Country of ref document: EP

Kind code of ref document: A2

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 09720698

Country of ref document: EP

Kind code of ref document: A2