WO2010115364A1 - 一种基于图像的视讯会议控制方法、终端及系统 - Google Patents

一种基于图像的视讯会议控制方法、终端及系统 Download PDF

Info

Publication number
WO2010115364A1
WO2010115364A1 PCT/CN2010/071516 CN2010071516W WO2010115364A1 WO 2010115364 A1 WO2010115364 A1 WO 2010115364A1 CN 2010071516 W CN2010071516 W CN 2010071516W WO 2010115364 A1 WO2010115364 A1 WO 2010115364A1
Authority
WO
WIPO (PCT)
Prior art keywords
conference
control
video
site
video source
Prior art date
Application number
PCT/CN2010/071516
Other languages
English (en)
French (fr)
Inventor
张静
耿峰
Original Assignee
华为终端有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 华为终端有限公司 filed Critical 华为终端有限公司
Priority to EP10761193A priority Critical patent/EP2418847A4/en
Publication of WO2010115364A1 publication Critical patent/WO2010115364A1/zh
Priority to US13/270,461 priority patent/US8736658B2/en

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/02—Details
    • H04L12/16—Arrangements for providing special services to substations
    • H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1827—Network arrangements for conference optimisation or adaptation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • H04N7/152—Multipoint control units therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/02—Details
    • H04L12/16—Arrangements for providing special services to substations
    • H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1822—Conducting the conference, e.g. admission, detection, selection or grouping of participants, correlating users to one or more conference sessions, prioritising transmission

Definitions

  • the present invention relates to the field of network communication technologies, and in particular, to an image-based video conference control method, terminal, and system.
  • video conferencing terminals as professional video terminals, have not been able to provide a friendly, convenient and intuitive human-computer interaction interface like consumer video terminals.
  • Modifying the conference configuration or controlling the conference requires step-by-step access to a specific menu interface. Whether it is WEB or mouse, it is inevitable that the user spends a lot of time understanding the menu meaning of the complex interactive interface.
  • control methods of the video conference mainly include two methods: Method 1.
  • the director control method that is, the broadcast site, the viewing site, the voice control switching, the multi-screen setting, and the ending video conference are performed from the central control console of the system.
  • Method 2 The chairman terminal control method, that is, setting the chair terminal, performing the operations of broadcasting the site, watching the site, voice control switching, multi-screen setting, and ending the video conference from the terminal terminal.
  • the video conference control is performed on the central control console of the system. Since the video conference user does not feel the presence of the console, it is unrealistic for the videoconferencing personnel to directly perform conference control from the console. Must be equipped with an operator to perform video conferencing control in the background, and The video conference control command shall be sent to the operator by the video conference host, and then the operator shall perform the video control according to the control command.
  • the video conference control is implemented by using the chair terminal.
  • the conference terminal that participates in the conference applies to become the chairman terminal.
  • the conference is controlled by the operation on the conference terminal interface.
  • the videoconferencing control is implemented through the chairman terminal, it is necessary to enter a specific menu interface to operate step by step.
  • the control operation is very cumbersome.
  • To implement a video conference control operation such as ending a video conference, it is often necessary to perform multiple selections and enter a multi-level menu. Only when the relevant video conference control operation can be found, it is very inconvenient to use; and the control menu interface and the site image contention for a limited display window will distract the attention of the participants.
  • the above method 1 must be equipped with an operator to perform video conference control in the background, and the video conference control command needs to be sent to the operator by the video conference host, and then the operator according to the control command Videoconferencing control is carried out, and the situation of each venue cannot be controlled in time according to the requirements of the conference.
  • the above method 2 needs to enter a specific menu interface step by step to perform a selection operation, and the control operation thereof is very inconvenient, and the control menu interface occupies the image display window of each site on the display screen, which affects the conference viewing effect.
  • an embodiment of the present invention provides an image-based video conference control method, terminal, and system.
  • An image-based video conference control method includes the following steps: An image-based video conference control method, including:
  • the image is edited to complete the video conference control.
  • an embodiment of the present invention further provides a conference terminal, including:
  • the embodiment of the present invention further provides a multipoint conference control apparatus, including: a maintenance setting control module, configured to: after receiving a request for maintaining a local conference terminal sent by the conference terminal, controlling to perform related to the conference terminal The local video source image maintenance setting operation is performed.
  • the conference control module is configured to: after receiving the video conference control request sent by the conference terminal, edit the conference video source corresponding to each conference terminal in the conference, and complete the video conference control.
  • an embodiment of the present invention further provides an image-based video control system, including:
  • a conference terminal configured to send a control request message to the network side, and dynamically display the image information according to the control message fed back by the network side, thereby performing video conference control on the image editing setting;
  • the multi-point conference control device is configured to: after receiving the control request sent by the conference terminal, perform an edit control operation on the play situation of the conference video source corresponding to each conference terminal in the conference;
  • the plurality of conference terminals and the multipoint conference control unit are connected by the Internet or a wireless communication network to transmit data.
  • setting and editing are performed through the moving image information displayed by each conference terminal to implement various conference control operations in the video conference, thereby avoiding the need to enter a multi-level menu for complex video conference control. Since the dynamic situation of each site can be observed in real time, it is more intuitive and easy to select the button operation by entering the multi-level menu. At the same time, there is no multi-level control menu on the display screen and the limited display window of the site image is contested, and the meeting participants are also convenient. Focus on watching and listening to ⁇ yi content.
  • FIG. 1 is a flow chart of an image-based video control method according to Embodiment 1 of the present invention
  • FIG. 2 is a flowchart of a session browsing control performed by a related remote controller button in a site browsing mode according to Embodiment 1 of the present invention
  • FIG. 3 is a schematic diagram of control of viewing a site list by using a remote controller according to Embodiment 1 of the present invention
  • 4 is a schematic diagram of control of controlling a new Han-han terminal to join a conference in the first embodiment of the present invention
  • FIG. 5 is a schematic diagram of control of a conference center of a conference of the president of the conference in the first embodiment of the present invention
  • FIG. 6 is a schematic diagram of Embodiment 1 of the present invention.
  • the selection screen displays the control schematic of the video source;
  • FIG. 7 is a schematic diagram of control of selecting a video source for displaying a screen in a site browsing mode according to Embodiment 1 of the present invention.
  • FIG. 8 is a schematic diagram of a control for setting a local site to view a video source according to the first embodiment of the present invention
  • FIG. 9 is a schematic diagram of a control for setting a video source for viewing at another site in the first embodiment of the present invention
  • FIG. 11 is a schematic diagram of control of erasing a sub-picture image in the first embodiment of the present invention
  • FIG. 12 is a schematic diagram of control of automatically filling a sub-picture in the first embodiment of the present invention.
  • FIG. 13 is a schematic diagram of control of a down/down screen in the first embodiment of the present invention.
  • FIG. 14 is a schematic diagram of control of viewing/cancelling a full screen in the first embodiment of the present invention.
  • Figure 15 is a schematic diagram showing the control of the display position of the exchange sub-picture in the first embodiment of the present invention
  • Figure 16 is a schematic diagram of the control of setting the local multi-picture display in the first embodiment of the present invention
  • Figure 17 is a second embodiment of the present invention. Schematic diagram of the i-terminal structure
  • FIG. 18 is a schematic structural diagram of a control module of a terminal in the second embodiment of the present invention.
  • FIG. 19 is a schematic structural diagram of a multi-point control device according to Embodiment 3 of the present invention
  • FIG. 20 is a schematic diagram showing the structure of an image-based video conference control system according to Embodiment 4 of the present invention.
  • An embodiment of the present invention provides an image-based video control method and system, which can perform all basic site control by directly operating a site screen on a remote terminal and a local conference terminal, in all combined picture modes (including single screen).
  • the control is the same, the object of the site control operation is The site audio source stream and video source stream corresponding to all the sub-pictures.
  • the first embodiment of the present invention provides an image-based video control method, including the following steps:
  • the control request message includes maintaining a request for setting the local conference terminal and/or a remote video conference.
  • Control request Specifically, when the conference is not joined, the conference terminal sends a request for maintaining the local conference terminal to the multipoint conference control device on the network side; in the case of joining the conference, according to the conference requirement, the conference terminal is connected to the network side by multiple points.
  • the conference control device sends control requests for various remote video conferences.
  • the conference terminal dynamically displays the local video source image information or the conference video source image information corresponding to each terminal according to the control message fed back by the multipoint conference control device on the network side.
  • the controller can browse, add, modify, and delete the address when the site browsing mode is selected according to the displayed address book information of the local conference terminal video source.
  • the content and the operation of the convening conference; or when the control personnel configures the image information according to the displayed local conference terminal video source to select the non-site browsing mode, the mainstream or auxiliary stream may be respectively set at the corresponding sub-screen position of the local conference terminal. Video source.
  • the control terminal selects the site browsing mode according to the displayed site video source image information corresponding to each of the displayed conference terminals, and the respective corresponding site video sources are used. Click editing of the image to complete the video conference control operation; or when controlling
  • the video source displays a static picture or a dynamic picture inserted by the site personnel corresponding to the conference terminal, where the static picture includes a presentation electronic document or an electronic picture, and the dynamic picture includes a played video file or an input image of an external camera.
  • the method provided by the embodiment of the present invention supports the site control operation in all the combined picture modes.
  • the personnel of each site can select the browsing mode on the conference terminal, where the browsing mode includes the site browsing mode and the non-site browsing mode.
  • the main difference between the site browsing mode and the non-site browsing mode is that in the site browsing mode, the system automatically displays all the sites, and can browse and control the video source images corresponding to all the sites in the conference; The system does not automatically display the status of all the sites.
  • the number of the site control objects and the site control objects is limited to the specific combined picture mode. For example, in the case of a single picture, the site control operation can only be performed for one video source.
  • the site browsing mode is also a virtual scene mode.
  • the combined screen formats supported by the site browsing mode are single picture, two picture, four picture, nine picture and sixteen pictures.
  • the conference terminal dynamically displays a conference list composed of image information of each site.
  • the participating personnel can directly press the button on the conference terminal according to the image information of the relevant site sub-screen in the displayed meaning list, or complete the corresponding site control operation through the related remote controller function button.
  • operations such as viewing a venue, voice-activated switching, multi-screen setting, switching, requesting a speech, ending a video conference, etc. can be controlled, and specific operations are described in the following embodiments.
  • the process of dynamically browsing the list in the site browsing mode is as follows: 1. After the conference terminal applies to join the remote video conference, for example, press the DIRECTORY button on the remote controller (this button can reuse other remote controllers).
  • the multi-point conference control device may be a multi-point conference control server of the teleconferencing system.
  • the multi-point conference control device may be a multipoint conference control server of the teleconferencing system.
  • the multipoint conference control server sequentially views the conference sites according to the site list information.
  • the code stream data of the frequency source is sent to the conference terminal that requests the site to be browsed, and the multipoint conference control server controls the code stream data of the corresponding site to be cyclically updated, and the images of the respective sites are cyclically updated.
  • the conference terminal After receiving the control signaling and the code stream data of the corresponding site, the conference terminal displays the position of the sub-screen corresponding to the display screen in turn, saves and maintains the screenshot of the previous code stream, and maintains the site index information.
  • the still image of each code stream can be used for the next site browsing, and can also be used for address book, group book, call record, log, etc., and recorded as auxiliary information.
  • the multi-screen video source of the remote site is usually a code stream. The conference terminal needs to distinguish the location of the video source in different sites.
  • the multi-point conference control server sets the multi-picture
  • the corresponding sub-picture position information of each conference terminal in the multi-picture is sent to each conference terminal by signaling;
  • each conference terminal applies to join the remote video conference
  • the corresponding sub-picture position information of each terminal in the multi-screen of the self screen is inquired by the multi-point conference control server. If there are too many video sources in the site, if there is no blank sub-screen position display in the current site browsing mode, the video of the corresponding site will not be displayed, but the video will still be decoded normally. Wait for other sites to exit the conference and release the conference resources before displaying.
  • the site personnel can use the up, down, left, and right arrow keys of the remote control to view the site list.
  • the site is displayed in the flashing site sub-screen frame.
  • the conference chair terminal can view the entire conference site list. According to the image information displayed by each conference terminal, the control of the relevant conference site in the video conference is completed by the remote control function button operation. As shown in Figure 4, when a new conference terminal needs to join the conference, the specific control steps are as follows:
  • the new conference terminal that needs to join the conference sends an admission application signal to the multipoint conference control server through the remote controller button;
  • the multipoint conference control server forwards the membership application signal to the conference chairperson terminal, and displays information about the new conference terminal, including the site name, number, line type, rate, and IP address, in the status bar of the conference site;
  • the conference chair terminal enters the site browsing mode, and views all the site lists. Select a blank sub-screen position by using the remote control direction keys up, down, left and right, and add a new conference terminal related letter.
  • the information includes superimposing the title of the venue, selecting a video source, and the like, and finally displaying the video of the new conference terminal at the determined blank sub-screen position.
  • the conference control process based on the image in the conference terminal system will be specifically described below in an operational manner.
  • the embodiment of the present invention uses a remote controller to describe a specific operation process in combination with a conference terminal user.
  • the function of the remote controller button required by the embodiment of the present invention is not specifically defined and limited. It can be understood that the conference terminal user can also use other control methods to control. Video conferencing.
  • the image video source displayed by the sub-picture position 1 is the currently set local mainstream video source; the image video source displayed by the sub-picture position 2 is the currently set local auxiliary stream video source.
  • control steps for selecting the video source to display the screen are as follows:
  • the local terminal or auxiliary stream video source is selected to be switched at the corresponding sub-picture position by the conference terminal, for example, selecting a switch
  • the video and audio signals of the local site, the camera signal input by the local site, and the demonstration electronic file input by the external computer at the local site; in the case of a meeting, according to the meeting needs, the mainstream or auxiliary stream video source in the conference is selected through the conference terminal, for example, When the participant at the site speaks, the system broadcasts the mainstream video source of the A site to each of the conferences. Conference terminal, if the A site personnel need to demonstrate a WORD document of an external computer, you can switch to the auxiliary stream video source to display the WORD document.
  • control steps for selecting the video source to display the screen are as follows:
  • All video sources are sequentially switched from the start-up sub-picture in the default order, and the display effect is similar to the nine-screen preview effect of VCD/DVD, as shown in FIG. 7, for example, when the point-to-point call is selected, the site browsing mode is selected. Enter the four screens to display the local mainstream, local auxiliary stream, remote mainstream, and remote auxiliary stream. The entire conference displays a large screen. There are 9 video sources in the multipoint conference. The MCU is currently sending the image of the update stream stream 7. The substream positions of the stream 1, 2, 3, 4, 5, 6, 8, and 9 are maintained. For the last updated still image, the next code stream to be updated is code stream 8.
  • the viewing source of the local site At the current local site viewing screen (such as selecting four screens), set the viewing source of the local site. Enter the site list to select the pre-viewed site image. It can be one or more. If you select 4 sites, press the SOURCE button. The selected site in the site list will be displayed in the local site in a combination of multiple screens. Displaying images of the conference sites 4, 7, 13, and 16 in the viewing screen of the local site video source 1;
  • the video source for the site corresponding to the first screen is specified as the video source of the site corresponding to the second screen.
  • the sites one to four correspond to video sources 1 ⁇ 4. Take the four screens on the local end as an example to enable At the conference site 1 and the conference site 3, the site (the other site) that is being viewed at the site is switched to the site 3; if the site is viewed (such as site 3), the auxiliary stream is simultaneously transmitted, and the remote auxiliary stream screen displayed at the site is switched to display the site.
  • the auxiliary stream of three Take the four screens on the local end as an example to enable At the conference site 1 and the conference site 3, the site (the other site) that is being viewed at the site is switched to the site 3; if the site is viewed (such as site 3), the auxiliary stream is simultaneously transmitted, and the remote auxiliary stream screen displayed at the site is switched to display the site.
  • the auxiliary stream of three Take the four screens on the local end as an example to enable At the conference site 1 and the conference site 3, the site (the other site) that is being viewed at the site is switched to the site 3; if the site is viewed (such as site 3),
  • the application signal is sent to the multipoint conference control server through the "application to speak" button on the remote controller, and the multipoint conference control server controls the site where the conference needs to be sneaked on the display screen of each conference terminal.
  • the corresponding sub-screen video image indicates which site needs to be uttered.
  • the highlighted frame displays the sub-picture selected by the current user.
  • the current sub-screen in the combined screen selected by the user has a highlighted frame, that is, the blinking frame prompts the user, when the user does not perform the video source switching operation on the current sub-screen within a certain period of time, the highlighted box will It disappears automatically.
  • the sub-picture field 1 in the upper left corner of the combined picture indicates the currently selected sub-picture, and the user can operate the sub-picture.
  • the system determines that only one screen double-click is activated, and the selected picture video source is automatically swapped with the current main sub-picture video to become a new main sub-picture;
  • press function key Fl to directly apply/release the conference chairperson terminal
  • the system displays the status of the conference chair terminal by superimposing subtitles or icons on the screen.
  • the present invention also supports other undefined conference control operations, including basic conference control operations, address book modification and deletion, call conference/initiation call, request to view remote site auxiliary stream, request designation. Viewing custom combination screens, etc. at the venue can be achieved in this way.
  • the function key or the combination key can also be used.
  • the second embodiment of the present invention further provides a conference terminal, including
  • the sending module 21 is configured to receive the remote control signal of the site, and send a control request message to the network side;
  • the display module 22 is configured to dynamically display the image information according to the control message fed back by the network side;
  • the control module 23 is configured to: according to the image information, Edit the image to complete the video conference control.
  • the display module 22 displays the local video source image information according to the maintenance setting control message fed back by the network side, or displays the conference video source image information corresponding to each conference terminal according to the conference control message fed back by the network side.
  • control module 23 includes:
  • the selecting unit 231 is configured to select a site browsing mode or a non-site browsing mode.
  • the maintenance setting unit 232 is configured to: when the site browsing mode is selected according to the displayed address book information of the local conference terminal video source, perform operations of browsing, adding, modifying, deleting the address book content and calling the conference;
  • the local conference terminal video source configures image information, and when the non-site browsing mode is selected, the mainstream or auxiliary stream video source is respectively set at the corresponding sub-screen position of the local conference terminal;
  • the site control unit 233 is configured to complete the video conference control operation by clicking and editing the corresponding site video source image when the site browsing mode is selected according to the displayed site video source image information corresponding to the displayed respective conference terminals.
  • the non-site browsing mode is selected according to the displayed site video source image information corresponding to each of the displayed conference terminals, the mainstream or auxiliary stream video source image in the conference is selected to be switched.
  • the third embodiment of the present invention further provides a multipoint conference control apparatus, including: a maintenance setting control module 31, configured to receive a request sent by a conference terminal to maintain a local conference terminal, and then control the location.
  • the local video source image maintenance setting operation of the conference terminal is performed;
  • the conference control module 32 is configured to: after receiving the video conference control request sent by the conference terminal, edit and control the conference video source playback image corresponding to each terminal in the semantic terminal operating.
  • the maintenance setting control module includes
  • the maintenance control unit is configured to: after receiving the request for maintaining the local conference terminal sent by the conference terminal, send the address book information of the conference terminal, and control the operation of browsing, adding, modifying, deleting the address book content and calling the conference ;
  • the setting control unit is configured to: after receiving the request for setting the local conference terminal sent by the conference terminal, send the video source configuration image information, and control to set the mainstream or auxiliary stream video source respectively at the corresponding sub-screen position of the conference terminal.
  • the conference control module includes
  • the browsing control unit is configured to: after receiving the request for joining the remote video conference sent by the conference terminal, sequentially send the video and audio code streams of all the conference sites in the conference to the request to join the remote video conference.
  • a conference terminal dynamically displaying each corresponding conference video source image in a sub-screen of the conference terminal screen;
  • the conference control unit is configured to perform an edit control operation on each of the site video and audio signals dynamically displayed in the sub-screen of the conference terminal screen after receiving the conference site control request sent by the conference terminal.
  • Embodiment 4 of the present invention further provides an image-based video control system, including:
  • the conference terminal 20 is configured to receive a remote control signal of the conference site, send a control request message to the network side, and dynamically display the image information according to the control message fed back by the network side, so as to perform video conference control on the image editing setting;
  • the multipoint conference control device 30 is configured to: after receiving the control request sent by the conference terminal, perform an edit control operation on the play situation of the conference video source corresponding to each conference terminal in the conference;
  • the plurality of conference terminals and the multipoint conference control device are connected by the Internet or a wireless communication network to transmit data.
  • various conference control operations in the video conference can be realized by directly selecting the operation list and the multi-site screen according to the rich information provided by each site screen itself, thereby avoiding the need to enter the multi-level menu.
  • the storage medium may be a magnetic disk, an optical disk, a read-only memory (ROM), or a random access memory (RAM).
  • ROM read-only memory
  • RAM random access memory

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Telephonic Communication Services (AREA)

Description

一种基于图像的视讯会议控制方法、 终端及系统 本申请要求于 2009 年 4 月 8 日提交中国专利局、 申请号为 200910038505.6, 发明名称为"一种基于图像的视讯会议控制方法、 终端及系 统"的中国专利申请的优先权， 其全部内容通过引用结合在本申请中。
技术领域
本发明涉及网络通信技术领域， 尤其涉及一种基于图像的视讯会议控制 方法、 终端及系统。
背景技术
目前视讯会议终端作为专业类视讯终端， 一直不能像消费类视讯终端般 那样提供友善、 便捷、 直观的人机交互界面。 修改会议配置或进行会议控制， 都需要逐级进入特定的菜单界面进行操作，不论是 WEB方式，还是鼠标方式， 都不可避免让用户花大量时间了解掌握复杂的交互界面的菜单意思。
同时， 各种各样的菜单操作界面， 包括透明界面、 隐藏界面、 界面小型 化、 各种快捷键、 界面单独输出， 无论设计好坏， 都在和会场图像争夺有限 的显示窗口， 占据显示屏较大显示面积。 这种在会议中必须频繁使用的菜单 操作界面， 也分散了人们的注意力， 可能会漏掉某个会议中需要关注的地方。 即使派专职人员维护会议控制， 也不能很好的解决上述存在的问题和不足。
目前视讯会议的控制方法主要包括两种： 方法一、 导演控制方法， 即从 系统中央控制操作台上进行广播会场、 观看会场、 声控切换、 多画面设置、 结束视讯会议等操作。 方法二、 主席终端控制方法， 即设置主席终端， 从主 席终端上进行广播会场、 观看会场、 声控切换、 多画面设置、 结束视讯会议 等操作。
其中所述方法一， 通过系统中央控制操作台上进行视讯会议控制， 由于 视讯会议用户感觉不到操作台的存在， 由参加视讯会议人员直接从操作台上 进行会议控制是不现实的。 必须配备操作人员在后台进行视讯会议控制， 且 视讯会议控制命令需由视讯会议主持人下发给操作人员， 再由操作人员根据 控制命令进行视讯^ i义控制。
所述方法二， 通过主席终端实现视讯会议控制。 由参加会议的会议终端 申请成为主席终端， 申请成功后， 通过在会议终端界面上的操作来完成控制 会议。 但通过主席终端实现视讯会议控制时， 需要逐级进入特定的菜单界面 进行操作其控制操作很烦瑣， 为实现一个视讯会议控制操作如结束视讯会议 等往往需要进行多项选择、 进入多级菜单才能够找到相关的视讯会议控制操 作， 使用起来非常不方便； 而且控制菜单界面和会场图像争夺有限的显示窗 口， 会分散 义参加人员的注意力。
本发明人在实现本发明的过程中发现： 上述方法一必须配备操作人员在 后台进行视讯会议控制， 且视讯会议控制命令需由视讯会议主持人下发给操 作人员， 再由操作人员根据控制命令进行视讯会议控制， 不能根据会议要求 及时控制各个会场情况。 上述方法二需要逐级进入特定的菜单界面进行选择 操作， 其控制操作非常不方便， 而且控制菜单界面会占据显示屏上各个会场 图像显示窗口， 影响会议观看效果。
发明内容
为解决上述技术问题， 本发明实施例提供了一种基于图像的视讯会议控 制方法、 终端及系统。
本发明实施例提供的一种基于图像的视讯会议控制方法， 包括步骤： 一种基于图像的视讯会议控制方法， 其特征在于， 包括：
向网络侧发送控制请求消息；
根据网络侧反馈的控制消息， 动态显示图像信息；
根据所述图像信息， 对图像进行编辑完成视讯会议控制。
进一步， 本发明实施例还提供了一种会议终端， 其包括：
发送模块， 用于接收会场遥控信号， 向网络侧发送控制请求消息； 显示模块， 用于根据网络侧反馈的控制消息， 动态显示图像信息； 控制模块，用于根据所述图像信息，对图像进行编辑完成视讯会议控制。 再进一步， 本发明实施例还提供了一种多点会议控制装置， 包括： 维护设置控制模块， 用于接收到会议终端发送的维护设置本地会议终端 的请求后， 控制进行所述会议终端的相关本地视频源图像维护设置操作； 会议控制模块， 用于接收到会议终端发送的视讯会议控制请求后， 对会 议中各个会议终端对应的会场视频源播放情况进行编辑操作， 完成视讯会议 控制。
更进一步， 本发明实施例还提供了一种基于图像的视讯^ i义控制系统， 包括：
会议终端， 用于向网络侧发送控制请求消息， 并根据网络侧反馈的控制 消息， 动态显示图像信息， 从而对图像编辑设置进行视讯会议控制；
多点会议控制装置， 用于接收到会议终端发送的控制请求后， 对会议中 各个会议终端对应的会场视频源播放情况进行编辑控制操作；
所述多个会议终端和所述多点会议控制单元通过互联网或无线通信网 连接起来， 传送数据。
采用本发明的实施例， 通过各个会议终端显示的动态图像信息， 进行设 置编辑， 来实现视讯会议中的各种会议控制操作， 避免了需要进入多级菜单 来进行复杂的视讯会议控制。 由于可实时观测到各个会场的动态情况， 所以 比采用进入多级菜单进行选择按键操作更直观容易， 同时在显示屏上没有多 级控制菜单和会场图像争夺有限的显示窗口， 也便于会议参加人员集中注意 力观看、 听取^ i义内容。
附图说明
图 1是本发明实施例一提供的一种基于图像的视讯 义控制方法流程图； 图 2是本发明实施例一中在会场浏览模式下通过相关遥控器按键进行会 场浏览控制流程图；
图 3是本发明实施例一中通过遥控器查看会场列表的控制示意图； 图 4是本发明实施例一中控制新的会汉终端加入会汉的控制示意图； 图 5是本发明实施例一中会汉主席终端浏览多会场的控制示意图； 图 6是本发明实施例一中在非会场浏览模式下， 选择画面显示视频源的 控制示意图；
图 7是本发明实施例一中在会场浏览模式下， 选择画面显示视频源的控 制示意图；
图 8是本发明实施例一中设置本地会场观看视频源的控制示意图； 图 9是本发明实施例一中设置其它会场观看视频源的控制示意图； 图 10是本发明实施例一中高亮框显示当前用户所选的子画面示意图； 图 11是本发明实施例一中擦除子画面图像的控制示意图；
图 12是本发明实施例一中自动填充子画面的控制示意图；
图 13是本发明实施例一中缩 /放画面的控制示意图；
图 14是本发明实施例一中观看 /取消全屏的控制示意图；
图 15是本发明实施例一中交换子画面显示位置的控制示意图； 图 16是本发明实施例一中设置本地多画面显示的控制示意图； 图 17是本发明实施例二还提供了一种^ i义终端结构示意图；
图 18是本发明实施例二中 义终端的控制模块结构示意图；
图 19是本发明实施例三提供的一种多点^ i义控制装置结构示意图； 图 20是本发明实施例四提供的一种基于图像的视讯会议控制系统结构示 意图。
具体实施方式
为使本发明更加容易理解， 下面结合附图对本发明作进一步阐述， 但附 图中的实施例不构成对本发明的任何限制。
本发明实施例提供了一种基于图像的视讯 义控制方法及系统， 支持在 远端和本端的会议终端上通过直接操作会场画面进行所有基本会场控制， 在 所有组合画面模式（包括单画面） 下控制是一样的， 会场控制操作的对象是 所有子画面所对应的会场音频源码流和视频源码流。
实施例一
如图 1所示，本发明实施例一提供了一种基于图像的视讯^ i义控制方法， 包括步骤：
101、 向网络侧发送控制请求消息。
通过会汉终端向网络侧的多点^ i义控制装置，即多点^ i义控制单元 MCU 发送控制请求消息， 所述控制请求消息包括维护设置本地会议终端的请求和 / 或远程视讯会议的控制请求。 具体的， 在没加入会议情况下， 通过会议终端 向网络侧的多点会议控制装置发送维护设置本地会议终端的请求； 在加入会 议情况下， 根据会议需要， 通过会议终端向网络侧的多点会议控制装置发送 各种远程视讯会议的控制请求。
102、 根据网络侧反馈的控制消息， 动态显示图像信息。
会议终端根据网络侧的多点会议控制装置反馈的控制消息， 动态显示本 地^ i义终端视频源图像信息， 或各个 义终端对应的会场视频源图像信息。
103、 据所述图像信息， 对图像进行编辑， 完成视讯^ i义控制。
在没加入^ i义情况下， 通过^ i义终端， 当控制人员根据显示的所述本地 会议终端视频源的地址本信息， 选择会场浏览模式时， 可以进行浏览、 新增、 修改、 删除地址本内容和召集会议的操作； 或者当控制人员根据显示的所述 本地会议终端视频源配置图像信息， 选择非会场浏览模式时， 可以在所述本 地会议终端相应子画面位置分别设置主流或辅流视频源。
在加入到^ i义情况下， 通过^ i义终端， 当控制人员根据显示的所述各个 会议终端对应的会场视频源图像信息， 选择会场浏览模式时， 通过对所述各 个对应的会场视频源图像的点击编辑， 完成视讯会议控制操作； 或者当控制
浏览模式时， 选择切换^ i义中的主流或辅流视频源图像。 视频源显示所述会议终端对应的会场人员插播的静态画面或动态画面， 其中 所述静态画面包括演示的电子文档或电子图片， 所述动态画面包括播放的视 频文件或外接摄像头的输入图像。
本发明实施例提供的方法支持在所有组合画面模式下进行会场控制操 作， 各个会场的人员可以在会议终端上选择浏览模式， 其中浏览模式包括会 场浏览模式和非会场浏览模式。 所述会场浏览模式和非会场浏览模式的主要 区别为， 在会场浏览模式下， 系统自动显示所有会场的情况， 可以浏览并控 制会议中的所有会场对应的视频源图像； 而在非会场浏览模式下， 系统不能 自动显示所有会场的情况， 会场控制对象和会场控制对象的数目， 受限于具 体的组合画面模式， 例如在单画面情况下， 只能针对一个视频源进行会场控 制操作。
会场浏览模式也是一种虚拟场景模式， 会场浏览模式支持的组合画面形 式有单画面、 二画面、 四画面、 九画面和十六画面。 点对点呼叫情况下默认 四画面， 多点呼叫情况下默认十六画面。 根据多点会议控制单元反馈的控制 信息， 会议终端动态显示各个会场图像信息组成的会议列表。
为实现本发明的方法， 参加^ i义人员根据显示的 义列表中相关会场子 画面图像信息， 可在会议终端上直接按键操作， 或通过相关遥控器功能按键 完成对应的会场控制操作。 例如可控制进行观看会场、 声控切换、 多画面设 置、 切换、 请求发言、 结束视讯会议等操作， 具体操作在下面的实施例中描 述。
如图 2所示， 当在会场浏览模式下动态浏览^ i义列表的流程如下： 1、会议终端申请加入远程视讯会议后， 比如在遥控器上按 DIRECTORY 键（该按键可复用其他遥控器按键或新定义）使会议终端直接进入会场浏览 模式， 并向多点会议控制装置请求浏览所有会场， 作为一种实施方式， 该多 点会议控制装置可以是远程会议系统的多点会议控制服务器。
2、 多点会议控制服务器根据会场列表信息， 依次将来自各个会场的视 频源的码流数据发送给所述请求进行会场浏览的会议终端， 多点会议控制服 务器控制循环的发送相应会场的码流数据， 循环更新各个会场的图像。
3、 所述会议终端收到控制信令和相应会场的码流数据后， 依次在显示 屏对应的子画面位置显示出来， 保存并维持上一码流截屏， 维护会场索引信 息。 维持的各个码流的静止图像， 可用于下一次会场浏览， 也可用于地址本、 群组本、 呼叫记录、 日志等， 作为辅助信息一并记录。 远端会场视频源多画 面一般是一路码流， 会议终端需要自己区分识别出不同会场视频源在多画面 中的位置。 一方面多点会议控制服务器在设置多画面时， 将各个会议终端在 多画面中的对应子画面位置信息通过信令发送给各个会议终端； 另一方面各 个会议终端在申请加入远程视讯会议时， 通过向多点会议控制服务器询问各 个^ i义终端在自己屏幕多画面中的对应子画面位置信息。 若会场视频源过多， 在当前会场浏览模式下无空白子画面位置显示时， 则不显示相应会场的视频， 但依然正常解码， 等待有无其它会场退出会议释放会议资源后再显示。
如图 3所示， 义建立之后， 会场人员可通过遥控器上下左右的方向键 查看会场列表， 即移动闪烁的会场子画面框查看会场列表， 对于会议中的未 入会会场和纯音频会场， 使用默认图片替代显示。
会议主席终端可以观看整个会场列表， 根据各个会议终端显示的图像信 息， 通过遥控器功能按键操作完成视讯会议中相关会场的控制。 如图 4所示， 当有新的会议终端需要加入会议时， 具体控制步骤如下：
( 1 ) 需要加入会议的新会议终端通过遥控器按键向多点会议控制服务 器发送入会申请信号；
( 2 ) 多点会议控制服务器将该入会申请信号转发给会议主席终端， 在 显示屏的会场状态栏中显示新会议终端的相关信息， 包括会场名称、 号码、 线路类型、 速率、 IP地址等；
( 3 )会议主席终端进入会场浏览模式， 观看所有会场列表， 通过遥控 器方向键上下左右选择选择一个空白子画面位置， 添加新会议终端的相关信 息， 包括叠加字幕标识会场名、 选择视频源等操作， 最后在该确定的空白子 画面位置显示新会议终端的视频。
如图 5所示， 如果会议中的会场数目较多， 比如有十八个会场， 一屏显 示不完， 则可以通过上、 下键回卷显示， 或者 PAGE UP、 PAGE DOWN键翻 页显示， 进行相关的视音频源的选择切换操作。
下面再具体以操作方式说明在该会议终端系统中基于图像进行会议控 制过程。 本发明实施例结合会议终端用户使用遥控器来说明具体操作过程， 本发明实施例所需要的遥控器按键功能不做具体定义和限定， 可以理解的是 会议终端用户也可以采用其他控制方式来控制视讯会议。
一、 设置本地输入视频源步骤如下：
( 1 )没开会情况下， 选择非会场浏览模式， 设置定义子画面位置 1 显 示本地主流视频源， 定义子画面位置 2显示本地辅流视频源；
( 2 )选择子画面位置 1或者子画面位置 2， 双击图像框激活， 进行选择 视频源匹配添加到对应子画面的操作。 这时子画面位置 1 显示的图像视频源 即为当前设置的本地主流视频源； 子画面位置 2显示的图像视频源即为当前 设置的本地辅流视频源。
二、 如图 6所示， 在非会场浏览模式下， 选择画面显示视频源的控制步 骤如下：
( 1 )在非会场浏览模式下， 选择一个或多个画面双击；
( 2 )按遥控器的 DISPLAY键切换该画面显示的视频源；
( 3 )所有视频源按照默认顺序依次切换， 按键一次， 切换一次； ( 4 )在没开会情况下， 通过所述会议终端在相应子画面位置选择切换 本地主流或辅流视频源， 例如选择切换本地会场视音频信号、 本地会场输入 的摄像头信号、 本地会场外接电脑输入的演示电子文档； 在开会情况下， 根 据会议需要，通过所述会议终端选择切换会议中的主流或辅流视频源，比如 A 会场人员发言时， 系统将录制 A会场情况的的主流视频源广播给会议中每个 会议终端，如果 A会场人员需要演示一个外接电脑的 WORD文档， 就可以切 换成辅流视频源显示 WORD文档。
三、 如图 7所示， 在会场浏览模式下， 选择画面显示视频源的控制步骤 如下：
( 1 )在会场浏览模式下， 选择一个开始浏览的子画面双击；
( 2 )按遥控器的 DISPLAY键切换各个画面显示的视频源；
( 3 )所有视频源按照默认顺序从所述开始浏览的子画面依次切换显示， 显示效果类似 VCD/DVD的九画面预览效果， 如图 7所示， 比如点对点呼叫 时， 选择会场浏览模式， 则进入四画面， 依次显示本地主流、 本地辅流、 远 端主流、 远端辅流。 整个会议显示大屏幕中， 多点会议中共有 9个视频源， MCU当前正在发送更新码流 7的图像， 码流 1、 2、 3、 4、 5、 6、 8、 9子画 面位置维持显示上一次更新后的静止图像， 下一个将要更新的码流是码流 8。
四、 设置本地及会场观看视频源步骤如下：
( 1 )在会场浏览模式下， 多点会议中， 选择一个或先后选择两个画面 按键 SOURCE键双击激活；
( 2 )若只有一个画面被激活， 规定设置本地会场观看视频源， 设置的 观看视频源为被选择画面的显示视频源；
如图 8所示， 比如在当前本地会场观看画面 （如选择四画面）， 设置本 地会场的观看视频源。 进入会场列表选择预观看的会场图像， 可以是一个或 更多， 如果选择 4个会场， 按键 SOURCE键后， 会场列表中被选中的会场， 会以多画面的组合形式显示在本地会场中， 即在本地会场视频源 1 的观看画 面中显示会场 4、 7、 13、 16的图像；
( 3 )若有两个画面被激活， 规定第一个画面所对应会场的观看视频源 为第二个画面所对应会场的视频源。 （仅针对拥有对会场码流设置权限的会 场）
如图 9所示， 会场一〜四对应视频源 1~4。 以本端显示四画面为例， 使能 会场一、 会场三， 会场一所观看的会场（其他会场）被切换为会场三的画面； 如果被观看会场 （如会场三） 同时发送辅流， 会场一观看的远端辅流画面切 换显示会场三的辅流。
五、 对会议中发言的控制过程。
比如如果有另外的会场想发言， 则通过遥控器上 "申请发言" 键向多点 会议控制服务器发送申请信号， 所述多点会议控制服务器则控制在各个会议 终端显示屏上闪烁需要发言的会场对应的子画面视屏图像， 提示哪个会场需 要发言， 请发言完毕的会议终端结束发言后释放会议资源给申请发言的会议 终端。
下面再具体说明对子画面的各种操作方式。
一、 高亮框显示当前用户所选的子画面。
如图 10所示， 用户选择的组合画面中的当前子画面会有高亮框， 即闪 烁框提示用户， 当用户在某时间段内没有对当前子画面进行视频源切换操作， 高亮框将自动消失。 在图 10中， 组合画面左上角的子画面会场一表示当前选 中的子画面， 用户可以对该子画面进行操作。
二、 擦除画面的操作如图 11所示
( 1 )在非会场浏览模式下， 选择一个或多个画面点击激活该画面；
( 2 )按键 BACKSPACE键擦除画面， 被选择的子画面位置就无显示图 像.
三、 自动填充画面的操作如图 12所示
( 1 )在非会场浏览模式下， 选择一个或多个空白画面双击激活；
( 2 )按键 DISPLAY键， 使用当前视频源填充显示所有被选择的空白画 面。
四、 缩 /放画面的操作如图 13所示
( 1 )在会场浏览模式或非会场浏览模式下， 选择一个或多个画面双击 激活； ( 2 )按键 ZOOM IN/ZOOM OUT键后， 被选择的画面被缩 /放；
(3)若选择画面对应本地会场视频源， 则进行本地摄像机控制或者本 地编解码缩 /放；
(4)若选择画面对应远端会场视频源， 则请求远端摄像机控制； 五、 观看 /取消全屏的操作如图 14所示
(1)在会场浏览模式或非会场浏览模式下， 选择一个画面双击激活；
(2)按键 RESIZE键， 若画面焦点为多画面中的子画面， 则该子画面被 切换到单画面模式下显示； 若画面焦点为单画面， 则画面被切换到原多画面 模式下显示； 若原多画面模式不存在， 则不处理；
六、 选择成为主子画面
(1)在非会场浏览模式下， 选择一个画面双击激活；
(2)按键 SWAP键后， 系统判断出只有一个画面双击激活， 自动将被 选择画面视频源与当前主子画面视频对换， 成为新的主子画面；
七、 交换画面显示位置的操作如图 15所示
(1)在会场浏览模式或非会场浏览模式下， 选择两个画面双击激活；
(2)按键 SWAP键， 交换两个画面位置的显示视频源.
下面再具体说明 义控制操作的过程
1、 设置本地多画面显示， 如图 16所示
(1)在会场浏览模式或非会场浏览模式下， 选择一个或多个画面双击 激活；
( 2 )按键 LAYOUT键， 若在多点^ i义中， 向 MCU观看请求指定的多 画面， 切换到新的组合画面模式， 显示被选择的一个或多个画面， 新的组合 画面模式能够刚好满足被选择画面的显示， 最大为十六画面； 若被选择的画 面数目大于 16个， 则跳到下一页显示。
2、 广播会场或多画面的步骤如下：
(1)在会场浏览模式下， 选择一个或多个画面双击激活； ( 2 )按键 DISPLAY键， 请求广播会场或者多画面， 默认多画面模式刚 好显示所选视频源。
3、 申请 /释放会议主席终端的步骤如下：
( 1 )在会场浏览模式或非会场浏览模式下， 按功能键 Fl， 直接申请 / 释放会议主席终端；
( 2 ) 系统通过画面叠加字幕或图标显示会议主席终端状态。
4、 轮询
( 1 )在会场浏览模式下， 选择一个或多个画面双击激活；
( 2 )按功能键 F2， 离开会场浏览模式， 在原组合画面模式中的主子画 面位置或者单画面轮询所选视频源.
除上述会控操作外， 本发明还支持其他一些未定义的会控操作， 包括基 本的会控操作、 地址本的修改和删除、 召集会议 /发起呼叫、 请求观看远端会 场辅流、 请求指定会场观看定制组合画面等等， 都可以通过这种方法实现。
对于遥控器按键功能的定义，除了类似上述的单键定义，在具体实现时， 也可以使用功能键或组合键的方式。
实施例二
如图 17所示， 本发明实施例二还提供了一种会议终端， 包括
发送模块 21， 用于接收会场遥控信号， 向网络侧发送控制请求消息； 显示模块 22， 用于根据网络侧反馈的控制消息， 动态显示图像信息； 控制模块 23， 用于根据所述图像信息， 对图像进行编辑完成视讯会议控 制。
所述显示模块 22根据网络侧反馈的维护设置控制消息， 显示本地^ i义 终端视频源图像信息； 或根据网络侧反馈的会议控制消息， 显示各个会议终 端对应的会场视频源图像信息。
如图 18所示， 其中所述控制模块 23包括：
选择单元 231， 用于选择会场浏览模式或非会场浏览模式； 维护设置单元 232， 用于当根据显示的所述本地会议终端视频源的地址 本信息， 选择会场浏览模式时， 进行浏览、 新增、 修改、 删除地址本内容和 召集会议的操作； 当根据显示的所述本地会议终端视频源配置图像信息， 选 择非会场浏览模式时， 在所述本地会议终端相应子画面位置分别设置主流或 辅流视频源；
会场控制单元 233， 用于当根据显示的所述各个会议终端对应的会场视 频源图像信息， 选择会场浏览模式时， 通过对所述各个对应的会场视频源图 像的点击编辑， 完成视讯会议控制操作； 当根据显示的所述各个会议终端对 应的会场视频源图像信息， 选择非会场浏览模式时， 选择切换会议中的主流 或辅流视频源图像。
实施例三
如图 19所示， 本发明实施例三还提供了一种多点会议控制装置， 包括： 维护设置控制模块 31，用于接收到会议终端发送的维护设置本地会议终 端的请求后， 控制进行所述会议终端的相关本地视频源图像维护设置操作； 会议控制模块 32， 用于接收到会议终端发送的视讯会议控制请求后，对 义中各个^ i义终端对应的会场视频源播放图像进行编辑控制操作。
其中所述维护设置控制模块包括
维护控制单元， 用于接收到会议终端发送的维护本地会议终端的请求 后， 发送所述会议终端的地址本信息， 控制进行浏览、 新增、 修改、 删除地 址本内容和召集^ i义的操作；
设置控制单元， 用于接收到会议终端发送的设置本地会议终端的请求 后， 发送所述视频源配置图像信息， 控制在所述会议终端相应子画面位置分 别设置主流或辅流视频源。
所述会议控制模块包括
浏览控制单元， 用于接收到会议终端发送的加入远程视讯会议的请求 后， 依次将会议中所有会场的视音频码流循环发送给请求加入远程视讯会议 的会议终端， 在所述会议终端屏幕的子画面中动态显示各个对应的会场视频 源图像；
开会控制单元， 用于接收到会议终端发送的会场控制请求后， 对所述会 议终端屏幕的子画面中动态显示的各个会场视音频信号进行编辑控制操作。
实施例四
如图 20所示， 本发明实施例四还提供了一种基于图像的视讯^ i义控制 系统， 包括：
会议终端 20， 用于接收会场遥控信号， 向网络侧发送控制请求消息， 并 根据网络侧反馈的控制消息， 动态显示图像信息， 从而对图像编辑设置进行 视讯会议控制；
多点会议控制装置 30， 用于接收到会议终端发送的控制请求后， 集中对 会议中各个会议终端对应的会场视频源播放情况进行编辑控制操作；
所述多个会议终端和所述多点会议控制装置通过互联网或无线通信网 连接起来， 传送数据。
采用本发明的实施例， 可以根据各个会场画面本身提供的丰富信息， 配 合遥控器直接选择操作单、 多会场画面， 来实现视讯会议中的各种会议控制 操作， 避免了需要进入多级菜单来进行复杂的视讯会议控制。 由于可实时观 测到各个会场的情况， 所以比采用进入多级菜单进行选择按键操作更直观， 同时在显示屏上没有多级控制菜单和会场图像争夺有限的显示窗口， 也便于 操作人员集中注意力。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分 流程， 是可以通过计算机程序来指令相关的硬件来完成， 所述的程序可存 储于一计算机可读取存储介质中， 该程序在执行时， 可包括如上述各方法 的实施例的流程。 其中， 所述的存储介质可为磁碟、 光盘、 只读存储记忆 体( Read-Only Memory, ROM )或随机存储记忆体 ( Random Access Memory, RAM ) 等。 以上所述是本发明的优选实施方式而已， 当然不能以此来限定本发明之 权利范围， 应当指出， 对于本技术领域的普通技术人员来说， 在不脱离本发 明原理的前提下， 还可以做出若干改进和变动， 也可以用于其他的所有需要 在终端界面上， 通过图像操作实现控制功能的情况， 包括但不限于视讯会议， 电视监控等， 这些改进和变动也视为本发明的保护范围。

Claims

权 利 要求 书
1、 一种基于图像的视讯 义控制方法， 其特征在于， 包括：
向网络侧发送控制请求消息；
根据网络侧反馈的控制消息， 动态显示图像信息；
根据所述图像信息， 对图像进行编辑完成视讯会议控制。
2、 根据权利要求 1 所述的视讯会议控制方法， 其特征在于， 所述控制请 求消息包括维护设置本地会议终端的请求和 /或远程视讯会议的控制请求。
3、 根据权利要求 1 所述的视讯会议控制方法， 其特征在于， 所述图像信 息包括本地会议终端视频源图像信息， 或各个会议终端对应的会场视频源图像 信息。
4、 根据权利要求 1 所述的视讯会议控制方法， 其特征在于， 在显示图像 信息之后， 选择浏览模式， 分别对显示的视频源图像信息进行编辑设置， 完成 视讯^ i义控制操作。
5、 根据权利要求 4所述的视讯会议控制方法， 其特征在于， 所述本地会 议终端视频源图像信息包括地址本信息和配置图像信息；
当根据显示的所述本地会议终端视频源的地址本信息， 选择会场浏览模式 时， 进行浏览、 新增、 修改、 删除地址本内容和召集^ i义的操作；
当根据显示的所述本地会议终端视频源配置图像信息， 选择非会场浏览模 式时， 在所述本地会议终端相应子画面位置分别设置主流或辅流视频源。
6、 根据权利要求 4所述的视讯会议控制方法， 其特征在于，
当根据显示的所述各个 义终端对应的会场视频源图像信息， 选择会场浏 览模式时， 通过对所述各个对应的会场视频源图像的点击编辑， 完成视讯会议 控制操作；
当根据显示的所述各个 义终端对应的会场视频源图像信息， 选择非会场 浏览模式时， 选择切换^ i义中的主流或辅流视频源图像。
7、 根据权利要求 5或 6所述的视讯会议控制方法， 其特征在于， 所述主 流视频源显示所述会议终端对应的会场视频情况； 所述辅流视频源显示所述会 议终端对应的会场人员插播的静态画面或动态画面， 其中所述静态画面包括演 示的电子文档或电子图片， 所述动态画面包括播放的视频文件或外接摄像头的 输入图像。
8、 一种会议终端， 其特征在于， 包括
发送模块， 用于向网络侧发送控制请求消息；
显示模块， 用于根据网络侧反馈的控制消息， 动态显示图像信息； 控制模块， 用于根据所述图像信息， 对图像进行编辑完成视讯会议控制。
9、 根据权利要求 8所述的会议终端， 其特征在于， 所述显示模块根据网 络侧反馈的维护设置控制消息， 显示本地会议终端视频源图像信息； 或根据网 络侧反馈的会议控制消息， 显示各个会议终端对应的会场视频源图像信息。
10、 根据权利要求 8所述的会议终端， 其特征在于， 所述控制模块包括： 选择单元， 用于选择会场浏览模式或非会场浏览模式； 息， 选择会场浏览模式时， 进行浏览、 新增、 修改、 删除地址本内容和召集会 议的操作； 当根据显示的所述本地会议终端视频源配置图像信息， 选择非会场 浏览模式时， 在所述本地会议终端相应子画面位置分别设置主流或辅流视频源； 会场控制单元， 用于当根据显示的所述各个^ i义终端对应的会场视频源图 像信息， 选择会场浏览模式时， 通过对所述各个对应的会场视频源图像的点击 编辑， 完成视讯会议控制操作； 当根据显示的所述各个会议终端对应的会场视 频源图像信息， 选择非会场浏览模式时， 选择切换会议中的主流或辅流视频源 图像。
11、 一种多点会议控制装置， 其特征在于， 包括：
维护设置控制模块， 用于接收到会议终端发送的维护设置本地会议终端的 请求后， 控制进行所述会议终端的相关本地视频源图像维护设置操作；
会议控制模块， 用于接收到会议终端发送的视讯会议控制请求后， 对会议 中各个会议终端对应的会场视频源播放图像进行编辑操作， 完成视讯^ i义控制。
12、 根据权利要求 11 所述的多点会议控制装置， 其特征在于， 所述维护 设置控制模块包括：
维护控制单元， 用于接收到会议终端发送的维护本地会议终端的请求后， 发送所述会议终端的地址本信息， 控制进行浏览、 新增、 修改、 删除地址本内 容和召集会议的操作；
设置控制单元， 用于接收到会议终端发送的设置本地会议终端的请求后， 发送所述视频源配置图像信息， 控制在所述会议终端相应子画面位置分别设置 主流或辅流视频源。
13、 根据权利要求 11 所述的多点会议控制装置， 其特征在于， 所述会议 控制模块包括：
浏览控制单元， 用于接收到会议终端发送的加入远程视讯会议的请求后， 将会议中所有会场的视音频码流循环发送给请求加入远程视讯会议的会议终 端， 在所述 义终端屏幕的子画面中动态显示各个对应的会场视频源图像； 开会控制单元， 用于接收到会议终端发送的会场控制请求后， 对所述会议 终端屏幕的子画面中动态显示的各个会场视音频信号进行编辑控制操作。
14、 一种基于图像的视讯 义控制系统， 其特征在于， 包括：
会议终端， 用于接收会场遥控信号， 向网络侧发送控制请求消息， 并根据 网络侧反馈的控制消息， 动态显示图像信息， 从而对图像编辑设置进行视讯会 议控制；
多点会议控制装置， 用于接收到会议终端发送的控制请求后， 对会议中各 个会议终端对应的会场视频源播放情况进行编辑控制操作；
所述多个会议终端和所述多点会议控制装置通过互联网或无线通信网连接 起来， 传送数据。
15、 一种会议终端， 其特征在于， 包括：
发送模块， 用于向网络侧发送控制请求消息；
显示模块， 用于根据网络侧反馈的控制消息， 动态显示图像信息； 控制模块， 用于^^据所述图像信息， 对图像进行视讯 义控制的操作。
PCT/CN2010/071516 2009-04-08 2010-04-02 一种基于图像的视讯会议控制方法、终端及系统 WO2010115364A1 (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
EP10761193A EP2418847A4 (en) 2009-04-08 2010-04-02 METHOD, DEVICE AND SYSTEM FOR CONTROLLING IMAGE-BASED VIDEO CONFERENCES
US13/270,461 US8736658B2 (en) 2009-04-08 2011-10-11 Image-based video conference control method, terminal, and system

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN200910038505.6 2009-04-08
CN200910038505.6A CN101534411B (zh) 2009-04-08 2009-04-08 一种基于图像的视讯会议控制方法、终端及系统

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US13/270,461 Continuation US8736658B2 (en) 2009-04-08 2011-10-11 Image-based video conference control method, terminal, and system

Publications (1)

Publication Number Publication Date
WO2010115364A1 true WO2010115364A1 (zh) 2010-10-14

Family

ID=41104764

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2010/071516 WO2010115364A1 (zh) 2009-04-08 2010-04-02 一种基于图像的视讯会议控制方法、终端及系统

Country Status (4)

Country Link
US (1) US8736658B2 (zh)
EP (1) EP2418847A4 (zh)
CN (1) CN101534411B (zh)
WO (1) WO2010115364A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8736658B2 (en) 2009-04-08 2014-05-27 Huawei Device Co., Ltd. Image-based video conference control method, terminal, and system
CN103986904A (zh) * 2014-05-30 2014-08-13 上海斐讯数据通信技术有限公司 一种视频会议管理系统

Families Citing this family (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101742221B (zh) * 2009-11-09 2012-06-13 中兴通讯股份有限公司 一种会议电视系统中的多画面合成方法及装置
CN102088440B (zh) * 2009-12-07 2014-02-19 华为技术有限公司 计算机支持的电信应用服务的实现方法、装置及系统
CN101783920B (zh) * 2009-12-25 2012-05-30 华为终端有限公司 视频会议的状态恢复方法和装置
KR101680344B1 (ko) * 2010-05-06 2016-11-28 엘지전자 주식회사 이동 단말기 및 그 제어방법
CN101888523A (zh) * 2010-06-30 2010-11-17 华为终端有限公司 会议控制方法和系统
CN102457702B (zh) * 2010-10-29 2015-03-11 华为终端有限公司 多画面处理方法、装置及系统
CN102572370B (zh) 2011-01-04 2014-06-11 华为终端有限公司 视频会议的控制方法和会议终端
CN102215375B (zh) * 2011-06-24 2018-04-27 中兴通讯股份有限公司 多媒体会议中多画面的子画面的视频源的选择方法及装置
CN102752488B (zh) * 2011-08-02 2017-08-04 新奥特（北京）视频技术有限公司 实现多演播室系统的统一控制的方法、设备及系统
CN102523099B (zh) * 2011-12-21 2015-04-08 华为技术有限公司 一种发起多点会议的方法、装置、终端及系统
KR101922283B1 (ko) 2011-12-28 2019-02-13 노키아 테크놀로지스 오와이 애플리케이션의 오픈 인스턴스의 제공
CN104137064B (zh) * 2011-12-28 2018-04-20 诺基亚技术有限公司 应用切换器
US8996729B2 (en) 2012-04-12 2015-03-31 Nokia Corporation Method and apparatus for synchronizing tasks performed by multiple devices
EP2852092A1 (en) * 2013-09-24 2015-03-25 Alcatel Lucent Method and system for videoconferencing
CN104735390A (zh) * 2013-12-20 2015-06-24 华为技术有限公司 浸入式会议中视频、音频布局方法与装置
CN105635785A (zh) 2014-10-27 2016-06-01 三亚中兴软件有限责任公司 一种多画面中子画面的调整控制方法、装置及多点控制单元
CN108170390B (zh) * 2016-12-07 2021-06-18 南京仁光电子科技有限公司 遥控切换显示的交互方法和系统
CN110324563A (zh) * 2018-03-29 2019-10-11 北京视联动力国际信息技术有限公司 一种视频会议的主辅源切换方法和系统
CN110636243B (zh) * 2018-06-22 2022-03-01 中兴通讯股份有限公司 一种会议控制方法及mcu
CN110636242B (zh) * 2018-06-22 2023-02-17 中兴通讯股份有限公司 一种视频会议中画面切换方法、终端及mcu
CN110636244B (zh) * 2018-06-25 2022-03-29 中兴通讯股份有限公司 一种视频会议服务器、系统、控制方法及存储介质
CN109151372A (zh) * 2018-10-23 2019-01-04 国家电网公司 一种基于物联网的视频会议系统
CN109561274B (zh) * 2018-11-27 2021-12-24 平安科技（深圳）有限公司 会议激活方法及系统、会议终端和计算机可读存储介质
CN109963107B (zh) * 2019-02-20 2021-10-08 视联动力信息技术股份有限公司 一种音视频数据的显示方法和系统
CN110139061B (zh) * 2019-04-04 2021-07-20 视联动力信息技术股份有限公司 一种视频流分屏展示方法及装置
CN112040166A (zh) * 2019-06-04 2020-12-04 中兴通讯股份有限公司 会议控制的实现方法、装置和服务器
CN111614934B (zh) * 2020-04-28 2022-01-07 深圳奇迹智慧网络有限公司 视频会议监控方法、装置、计算机设备和存储介质
US11245949B2 (en) 2020-05-29 2022-02-08 Elo Touch Solutions, Inc. Secure conferencing device
CN114339130A (zh) * 2021-12-31 2022-04-12 中国工商银行股份有限公司 一种会议信息监控方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1874483A (zh) * 2006-06-30 2006-12-06 西安西邮双维通信技术有限公司 一种基于远程摄像机遥控功能的视频会议自主控制的方法
CN201063755Y (zh) * 2007-03-23 2008-05-21 杨子江 用于教学与会场的录制系统
CN101198008A (zh) * 2008-01-03 2008-06-11 中兴通讯股份有限公司 一种实现多屏多画面的方法和系统
CN101252671A (zh) * 2008-04-11 2008-08-27 杭州华三通信技术有限公司 在视频会议中调取会场的方法、多点控制单元及主席终端
CN101534411A (zh) * 2009-04-08 2009-09-16 深圳华为通信技术有限公司 一种基于图像的视讯会议控制方法、终端及系统
CN101583011A (zh) * 2009-05-27 2009-11-18 深圳华为通信技术有限公司 视频会议控制方法、系统、视频会议网络设备和会场

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6594688B2 (en) * 1993-10-01 2003-07-15 Collaboration Properties, Inc. Dedicated echo canceler for a workstation
US20030025786A1 (en) * 2001-07-31 2003-02-06 Vtel Corporation Method and system for saving and applying a video address from a video conference
EP1381237A3 (en) * 2002-07-10 2004-05-12 Seiko Epson Corporation Multi-participant conference system with controllable content and delivery via back-channel video interface
US7477281B2 (en) * 2004-11-09 2009-01-13 Nokia Corporation Transmission control in multiparty conference
US7830409B2 (en) * 2005-03-25 2010-11-09 Cherng-Daw Hwang Split screen video in a multimedia communication system
US20060248210A1 (en) * 2005-05-02 2006-11-02 Lifesize Communications, Inc. Controlling video display mode in a video conferencing system
US8125510B2 (en) * 2007-01-30 2012-02-28 Ankur Agarwal Remote workspace sharing
US8208004B2 (en) * 2007-05-08 2012-06-26 Radvision Ltd. Device, methods, and media for providing multi-point video conferencing unit functions
CN100562094C (zh) 2007-06-21 2009-11-18 中兴通讯股份有限公司 一种会议电视系统中的多画面远端摄像机遥控方法
CN101257607B (zh) * 2008-03-12 2010-06-09 中兴通讯股份有限公司 一种应用于视频会议的多画面处理系统和方法
CN101350898A (zh) 2008-08-29 2009-01-21 深圳华为通信技术有限公司 一种组合画面视频源选择方法及其装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1874483A (zh) * 2006-06-30 2006-12-06 西安西邮双维通信技术有限公司 一种基于远程摄像机遥控功能的视频会议自主控制的方法
CN201063755Y (zh) * 2007-03-23 2008-05-21 杨子江 用于教学与会场的录制系统
CN101198008A (zh) * 2008-01-03 2008-06-11 中兴通讯股份有限公司 一种实现多屏多画面的方法和系统
CN101252671A (zh) * 2008-04-11 2008-08-27 杭州华三通信技术有限公司 在视频会议中调取会场的方法、多点控制单元及主席终端
CN101534411A (zh) * 2009-04-08 2009-09-16 深圳华为通信技术有限公司 一种基于图像的视讯会议控制方法、终端及系统
CN101583011A (zh) * 2009-05-27 2009-11-18 深圳华为通信技术有限公司 视频会议控制方法、系统、视频会议网络设备和会场

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP2418847A4 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8736658B2 (en) 2009-04-08 2014-05-27 Huawei Device Co., Ltd. Image-based video conference control method, terminal, and system
CN103986904A (zh) * 2014-05-30 2014-08-13 上海斐讯数据通信技术有限公司 一种视频会议管理系统
CN103986904B (zh) * 2014-05-30 2017-12-01 上海斐讯数据通信技术有限公司 一种视频会议管理系统

Also Published As

Publication number Publication date
CN101534411A (zh) 2009-09-16
CN101534411B (zh) 2012-12-12
US8736658B2 (en) 2014-05-27
EP2418847A4 (en) 2012-10-10
EP2418847A1 (en) 2012-02-15
US20120038740A1 (en) 2012-02-16

Similar Documents

Publication Publication Date Title
WO2010115364A1 (zh) 一种基于图像的视讯会议控制方法、终端及系统
CN114390359B (zh) 一种消息的展示方法及显示设备
WO2012092853A1 (zh) 视频会议的控制方法和会议终端
US8860776B2 (en) Conference terminal, conference server, conference system and data processing method
US8885057B2 (en) Performing camera control using a remote control device
US9148625B2 (en) Transition control in a videoconference
US10691398B2 (en) Connected classroom
TW200303519A (en) Method and apparatus for controlling the visual presentation of data
JP2001313915A (ja) テレビ会議装置
US20130154923A1 (en) Performing Searching for a List of Entries Using a Remote Control Device
US20130155171A1 (en) Providing User Input Having a Plurality of Data Types Using a Remote Control Device
WO2016169496A1 (zh) 一种视频会议图像呈现方法及其装置
US8922615B2 (en) Customizing input to a videoconference using a remote control device
US20100293469A1 (en) Providing Portions of a Presentation During a Videoconference
US9531981B2 (en) Customized mute in a videoconference based on context
JP6024002B2 (ja) 動画配信システム
JP2005348360A (ja) 双方向コミュニケーションシステムにおけるグラフィカルユーザインタフェース装置及び接続方法
WO2022007618A1 (zh) 视频通话方法及显示设备
WO2024041672A1 (zh) 一种基于iptv业务的vr全景视频播放方法和系统
JP7196951B2 (ja) 情報処理装置、プログラム、方法、システム
JP2003284018A (ja) テレビ会議システム、方法、および、テレビ会議サーバ
JP2022016424A (ja) ストリーミング配信及びテレビ会議のためのシステム
US20130155172A1 (en) User Interface for a Display Using a Simple Remote Control Device
BE1029675B1 (nl) Systeem voor het verrijken van een online meeting
Chagas et al. Exploring Practices and Systems for Remote Teaching

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 10761193

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 2010761193

Country of ref document: EP