WO2018121682A1 - 一种云台控制及处理方法、装置、系统、电子设备 - Google Patents

一种云台控制及处理方法、装置、系统、电子设备 Download PDF

Info

Publication number
WO2018121682A1
WO2018121682A1 PCT/CN2017/119475 CN2017119475W WO2018121682A1 WO 2018121682 A1 WO2018121682 A1 WO 2018121682A1 CN 2017119475 W CN2017119475 W CN 2017119475W WO 2018121682 A1 WO2018121682 A1 WO 2018121682A1
Authority
WO
WIPO (PCT)
Prior art keywords
terminal
pan
video source
source terminal
point
Prior art date
Application number
PCT/CN2017/119475
Other languages
English (en)
French (fr)
Inventor
孙博
Original Assignee
中兴通讯股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 中兴通讯股份有限公司 filed Critical 中兴通讯股份有限公司
Publication of WO2018121682A1 publication Critical patent/WO2018121682A1/zh

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • H04N7/152—Multipoint control units therefor

Definitions

  • the present invention relates to the field of video conferencing, and in particular, to a cloud station control and processing method, device, system, and electronic device.
  • Conference TV is a multimedia communication method that uses video technology and equipment to hold real-time, two-way and interactive video conferences locally and remotely through a modern communication network. It uses TV technology and equipment to transmit channels through two channels. A means of communication for holding meetings at or in multiple locations.
  • video conferencing has been widely used in many scenes of life and work. It can easily participate in conferences through conference TV terminals no matter where you are, greatly improving work efficiency. And saving travel expenses, accepted by more and more ordinary users.
  • the broadcast source site uses a wide-angle or panoramic lens (possibly spliced by multiple cameras) to increase the image collection range as much as possible, and transmits all the original image codes collected to the conference terminal, and the conference terminal according to the conference. At your own point of interest, the region of interest is intercepted from the original image for output display.
  • the purpose of the embodiments of the present invention is to provide a method, a device, a system, and an electronic device for controlling and processing a cloud platform, so that any participant can be at any time according to his or her own attention without affecting the images viewed by other participants.
  • the remote image is controlled by the pan/tilt to enhance the immersion of the video conferencing participants.
  • the pan/tilt control method provided by the embodiment of the invention includes:
  • the determining the PTZ control parameter of the video source terminal according to the first PTZ control message and the information about the point of interest of the at least one second terminal in the video conference includes:
  • the pan/tilt control is performed on the video source terminal based on the determined pan/tilt control parameter
  • the pan/tilt control is not performed on the video source terminal.
  • the PTZ control parameter includes at least one of the following: a focus control parameter of the video source terminal, and an azimuth control parameter of the video source terminal;
  • pan/tilt control when the pan/tilt control is performed on the video source terminal, generating a second pan-tilt control message based on the pan-tilt control parameter, including:
  • the second pan-tilt control message is generated based on the focal length control parameter of the video source terminal and/or the azimuth control parameter of the video source terminal.
  • the method further includes:
  • the method further includes:
  • the target video data corresponding to each terminal is separately sent to the corresponding terminal for playing.
  • the method further includes:
  • a receiving unit configured to receive a first pan-tilt control message sent by the first terminal
  • a determining unit configured to determine a PTZ control parameter of the video source terminal according to the first PTZ control message and the attention point information of the at least one second terminal in the video conference;
  • the determining unit is configured to determine, according to the PTZ control parameter, whether the PTZ control needs to be performed on the video source terminal;
  • a generating unit configured to generate a second PTZ control message based on the PTZ control parameter when the PTZ control needs to be performed on the video source terminal;
  • the sending unit is configured to send the second cloud platform control message to the video source terminal, and perform pan/tilt control on the video source terminal.
  • the determining unit is specifically configured to: determine, according to the original point of interest information of the first terminal, and the information about the point of interest of the at least one second terminal, the original attention point range of the video conference;
  • the pan/tilt control is performed on the video source terminal based on the determined pan/tilt control parameter
  • the pan/tilt control is not performed on the video source terminal.
  • the PTZ control parameter includes at least one of the following: a focus control parameter of the video source terminal, and an azimuth control parameter of the video source terminal;
  • the generating unit is specifically configured to: when the pan/tilt control of the video source terminal is required, generate a second pan-tilt control based on a focal length control parameter of the video source terminal and/or an azimuth control parameter of the video source terminal Message.
  • the device further includes:
  • An update unit configured to update the original point of interest information of the first terminal to the new point of interest information
  • the sending unit is further configured to send the new point of interest information of the first terminal to the PTZ control device.
  • the device further includes:
  • the initializing unit is configured to set the attention point information of the first terminal as default attention point information when receiving the cancel focus message sent by the first terminal;
  • the sending unit is further configured to send the default point of interest information of the first terminal to the PTZ control device.
  • the obtaining unit is configured to obtain video data sent by the video source terminal;
  • a processing unit configured to extract corresponding target video data from the video data for each terminal based on the attention point information of each terminal in the video conference;
  • the sending unit is configured to separately send the target video data corresponding to each terminal to the corresponding terminal for playing.
  • the acquiring unit is further configured to receive new point of interest information sent by the PTZ control device for the first terminal;
  • the processing unit is further configured to extract, according to the new point of interest information, the corresponding target video data from the video data for the first terminal.
  • the pan/tilt head system provided by the embodiment of the invention includes the pan/tilt head control device described above and the pan/tilt head processing device.
  • An electronic device provided by an embodiment of the present invention includes a processor and a memory storing the processor executable instructions. When the instructions are executed by the processor, the processor is configured to perform the following operations:
  • the processor is further configured to perform the following operations:
  • An electronic device includes a processor and a memory storing the processor-executable instructions, when the instructions are executed by the processor, the processor is configured to perform the following operations:
  • the target video data corresponding to each terminal is separately sent to the corresponding terminal for playing.
  • the processor is further configured to perform the following operations:
  • a storage medium is further provided, and the storage medium may store an execution instruction for executing the implementation of the PTZ control method or the PTZ processing method in the foregoing embodiment.
  • the first PTZ control message sent by the first terminal is received, and the video source is determined according to the first PTZ control message and the information about the point of interest of the at least one second terminal in the video conference.
  • a PTZ control parameter of the terminal determining, according to the PTZ control parameter, whether the PTZ control needs to be performed on the video source terminal; and when performing PTZ control on the video source terminal, based on the PTZ control parameter Generating a second pan-tilt control message; sending the second pan-tilt control message to the video source terminal, and performing pan-tilt control on the video source terminal.
  • the same video source terminal can be affected.
  • Other terminals view images, and they can control the image at any time according to their own concerns.
  • the embodiment of the invention can be connected with the terminal of any manufacturer, and has strong versatility.
  • FIG. 1 is a schematic flowchart diagram of a PTZ control method according to an embodiment of the present invention
  • FIG. 2 is a schematic flowchart of a method for processing a PTZ according to an embodiment of the present invention
  • FIG. 3 is a schematic diagram of an application scenario according to an embodiment of the present invention.
  • FIG. 5 is a flowchart 1 of a system processing signaling according to an embodiment of the present invention.
  • FIG. 6 is a flowchart 2 of a system processing signaling according to an embodiment of the present invention.
  • FIG. 7 is a flowchart of a system processing medium according to an embodiment of the present invention.
  • FIG. 8 is a flowchart of a pan/tilt adjustment according to an embodiment of the present invention.
  • FIG. 9 is a flowchart of performing pan-tilt control on a viewing image of a terminal according to an embodiment of the present invention.
  • FIG. 10 is a flowchart of performing pan-tilt control on a viewing image of a terminal according to an embodiment of the present invention.
  • FIG. 11 is a flowchart of performing pan-tilt control on a viewing image of a terminal according to an embodiment of the present invention.
  • FIG. 12 is a flowchart of performing pan-tilt control on a viewing image of a terminal according to an embodiment of the present invention
  • FIG. 13 is a signaling flowchart of canceling a point of interest of a terminal according to an embodiment of the present invention.
  • FIG. 14 is a schematic structural diagram of a PTZ control apparatus according to an embodiment of the present invention.
  • FIG. 15 is a schematic structural diagram of a PTZ processing apparatus according to an embodiment of the present invention.
  • FIG. 16 is a schematic structural diagram of a cloud platform system according to an embodiment of the present invention.
  • the technical solution of the embodiment of the present invention mainly adds two modules: a cloud platform control parameter adjustment module and a digital cloud platform processing module. among them,
  • the task of the PTZ control parameter adjustment module is to optimize the adjustment and control of the PTZ control parameters by combining the PTZ control parameters sent by the participating terminals with the attention point information of other currently viewed images of the conference.
  • the PTZ control message after the parameter adjustment is sent to the broadcast source terminal.
  • the main function of this module is to process the original video source image according to the focus information of the terminal, such as zooming, region clipping, encoding and decoding.
  • the position of the PTZ control parameter adjustment module can be adjusted according to actual needs.
  • the running position can be a video conference central office device, a terminal device or a separate unit entity.
  • the pan/tilt control parameter adjustment module preferably runs in the video conference office equipment.
  • FIG. 1 is a schematic flowchart of a PTZ control method according to an embodiment of the present invention.
  • the PTZ control method of the present example is applied to a PTZ control parameter adjustment module side. As shown in FIG. 1 , the PTZ control method includes the following steps:
  • Step 101 Receive a first pan-tilt control message sent by the first terminal.
  • each participant terminal needs to be connected to a video conference.
  • the conference terminals in the video conference are classified into three types, namely, a first terminal, a second terminal, and a video source terminal:
  • a terminal is a terminal that triggers pan/tilt control;
  • a second terminal is a remote device that is different from the first terminal;
  • a video source terminal is a terminal that provides video data for the first terminal and the second terminal, and the video source terminal is opposite to the first terminal In terms of it, it is also a remote device.
  • the pan/tilt control parameter adjustment module and the digital cloud platform processing module Both perform an initialization operation.
  • the user corresponding to the first terminal triggers the PTZ control.
  • the video conference includes four terminals T1, T2, T3, and T4, and T1 is the video source terminal.
  • T2 wants to adjust the image of the T1 site that is seen, and T2 sends the first cloud.
  • the station control (PTZ) message is sent to the PTZ control parameter adjustment module.
  • Step 102 Determine a PTZ control parameter of the video source terminal according to the first PTZ control message and the attention point information of the at least one second terminal in the video conference.
  • the first PTZ control message of the PTZ control parameter adjustment module is adjusted, and the adjustment result includes whether PTZ control and specific PTZ control parameters are required.
  • Step 103 Determine, according to the PTZ control parameter, whether pan/tilt control needs to be performed on the video source terminal.
  • the pan/tilt control is performed on the video source terminal based on the determined pan/tilt control parameter
  • the pan/tilt control is not performed on the video source terminal.
  • Step 104 When performing pan-tilt control on the video source terminal, generate a second pan-tilt control message based on the pan-tilt control parameter.
  • the pan/tilt control parameter includes at least one of: a focus control parameter of the video source terminal, and an azimuth control parameter of the video source terminal;
  • pan/tilt control when the pan/tilt control is performed on the video source terminal, generating a second pan-tilt control message based on the pan-tilt control parameter, including:
  • the second pan-tilt control message is generated based on the focal length control parameter of the video source terminal and/or the azimuth control parameter of the video source terminal.
  • Step 105 Send the second PTZ control message to the video source terminal, and perform pan/tilt control on the video source terminal.
  • the method further includes: updating the original point of interest information of the first terminal to the new point of interest information, and sending the information to the pan/tilt control device.
  • the method further includes:
  • FIG. 2 is a schematic flowchart of a PTZ processing method according to an embodiment of the present invention.
  • the PTZ processing method of the present example is applied to a digital PTZ processing module side. As shown in FIG. 2, the PTZ processing method includes the following steps:
  • Step 201 Acquire video data sent by the video source terminal.
  • Step 202 Extract corresponding target video data from the video data for each terminal based on the attention point information of each terminal in the video conference.
  • the digital cloud platform processing module receives the new attention point information for the first terminal sent by the PTZ control device in real time, and extracts the corresponding target from the video data for the first terminal based on the new attention point information. Video data.
  • Step 203 Send the target video data corresponding to each terminal to the corresponding terminal for playing.
  • FIG. 3 is a schematic diagram of an application scenario according to an embodiment of the present invention.
  • T1 is the broadcast source of the current conference.
  • T2, T3, and T4 all look at the image of the T1 venue.
  • T2, T3, and T4 terminal are identical, that is, the CD position image of the T1 site is seen.
  • the CD position image of the T1 site can be seen by T2 and the A B position image of the T1 site is seen by T3, and T4 is seen.
  • the EF image of the T1 site, the images seen by the three are inconsistent.
  • FIG. 4 is a system architecture diagram of an embodiment of the present invention.
  • the invention mainly adds two modules: a cloud platform control parameter adjustment module and a digital cloud platform processing module.
  • T1 is the broadcast source of the current conference.
  • T2 is an example to adjust the angle of the image you are looking at.
  • the task of the PTZ control parameter adjustment module is to optimize the adjustment of the PTZ control parameters by comparing the PTZ control parameters sent by the participating terminal (T2) with the attention point information of other current terminal viewing images of the conference. And recording, transmitting the PTZ control message after adjusting the parameter to the broadcast source terminal (T1).
  • the main function of this module is to process the original video source image according to the focus information of the terminal, such as zooming, region clipping, encoding and decoding.
  • the position of the PTZ control parameter adjustment module can be adjusted according to actual needs.
  • the running position can be a video conference central office device, a terminal device or a separate unit entity. It preferably runs in the video conference office equipment.
  • FIG. 5 is a flowchart 1 of a system processing signaling according to an embodiment of the present invention (the PTZ control parameter adjustment module operates on a multipoint control unit).
  • Step 501 a meeting is held, and the process starts;
  • Step 502 Initializing all the information about the point of interest of the participant terminal, the initialized point of interest information is the focus of the current video source camera (the pan-tilt control parameter adjustment and the digital pan/tilt processing module both perform an initialization operation);
  • Step 503 The user triggers the PTZ control.
  • the T2 wants to adjust the image of the T1 site that is seen, and the terminal sends the PTZ control message to the PTZ control parameter adjustment module in the MCU.
  • Step 504 The PTZ control parameter adjustment module adjusts the PTZ message, and the adjustment result includes whether the PTZ control and the PTZ control message parameters are required.
  • Step 505 Determine whether the adjustment result needs to perform pan/tilt control, and if necessary, proceed to step 506, otherwise the process ends;
  • Step 506 The PTZ control parameter adjustment module sends the adjusted PTZ message to the video source terminal.
  • Step 507 The video source terminal feeds back the PTZ control result to the PTZ control parameter adjustment module.
  • Step 508 if the feedback result is “successful”, the pan/tilt control parameter adjustment module updates the focus information of the pan/tilt control terminal, and synchronizes the information to the digital cloud platform processing module;
  • step 509 the process ends.
  • FIG. 6 is a flowchart 2 of a system processing signaling according to an embodiment of the present invention (the PTZ control parameter adjustment module runs on a video source terminal).
  • Step 601 a meeting is held, and the process begins;
  • Step 602 Initializing all the participant terminal focus information, the initialized focus information is the focus of the current video source camera (the pan-tilt control parameter adjustment and the digital pan/tilt processing module both perform an initialization operation);
  • Step 603 the user triggers the PTZ control, for example, T2 wants to adjust the image of the T1 site that is seen, and the terminal sends the PTZ control message to the MCU;
  • Step 604 After adding the terminal number identification information to the message, the MCU forwards the information to the video source terminal.
  • Step 605 The PTZ control parameter adjustment module of the video source terminal performs parameter adjustment on the message, and operates the PTZ of the terminal by using the adjusted PTZ control message;
  • Step 606 If the PTZ control operation of the video source terminal is successful, the PTZ control parameter adjustment module of the video source terminal sends a focus point change indication message to the MCU, where the message content includes the terminal number identification information and the current point of interest information of the terminal. If the pan/tilt control operation of the video source terminal is unsuccessful, the process ends;
  • Step 607 After receiving the attention point change indication message, the MCU synchronously updates to the digital cloud platform processing module.
  • FIG. 7 is a flowchart of a system processing medium according to an embodiment of the present invention.
  • Step 701 the process begins
  • Step 702 Receive a video source stream, and start decoding.
  • Step 703 The digital cloud platform control module performs digital cloud platform processing on the terminal-by-terminal basis according to the information of the terminal of the terminal, and the processed data is sent to the coding module of each terminal.
  • Step 704 encoding and transmitting
  • FIG. 8 is a flowchart of station parameter adjustment according to an embodiment of the present invention. Take the PTZ control parameter adjustment module running in the multi-point control unit central office equipment as an example.
  • Step 801 the process begins
  • Step 802 the PTZ control parameter type judgment, the up, down, left and right angle rotation message proceeds to step 803, the reduction message proceeds to step 809, the enlargement message proceeds to step 811;
  • Step 803 Determine whether the up, down, left, and right angle messages corresponding to the terminal exceed the angle range of the current video source camera image acquisition. If the range is exceeded, proceed to step 804; if the range is not exceeded, proceed to step 806;
  • Step 804 The PTZ control parameter adjustment module attempts to perform a reduction operation, and sends a reduced PTZ message to the video source terminal.
  • Step 805 The video source terminal feeds back the operation result.
  • Step 806 the PTZ control parameter adjustment module determines whether it is necessary to actually perform pan/tilt control, if it is required to proceed to step 807, if it is not required to proceed to step 811;
  • Step 807 The PTZ control parameter adjustment module transparently transmits the PTZ message sent by the control end to the video source.
  • Step 808 The video source terminal feeds back the control result.
  • Step 809 The PTZ control information adjustment module transparently transmits the PTZ message of the control end to the video source terminal.
  • Step 810 The video source terminal feeds back the control result.
  • Step 811 the PTZ control information adjustment module feeds back the control result to the control end, and updates the attention point information.
  • FIG. 9 is a flowchart (horizontal rotation) of performing pan-tilt control on a viewing image of a certain terminal according to an embodiment of the present invention. Take the PTZ control parameter adjustment module running in the multi-point control unit central office equipment as an example.
  • step 901 a relationship between the focal length of the camera and the viewing angle is established, as follows:
  • Step 902 Obtain the focal length and field of view information of the current video source T1 camera, and the field of view angle information of the participant terminal.
  • the focal length value of the current video source T1 camera such as 85mm
  • the viewing angle range is -14.26 ° ⁇ 14.26 degrees.
  • the value of the attention point image of the T2 terminal ranges from -10° to 10°
  • the value of the attention point image of the T3 terminal ranges from ⁇ 14° to 6°.
  • Step 903 when T3 wants to adjust the T1 image that it views to the left, it sends a control command to the left side to the left side of the PTZ control parameter adjustment module, for example, 2 degrees to the left;
  • Step 904 The PTZ control parameter adjustment module adjusts the PTZ message.
  • the angle range of the image viewed by T2 and T3 is -14° to 10°. After rotating to the left by two degrees, the angle range of the viewed image is updated to -16° to 10 degrees, which exceeds the current video source T1 camera -14.26° to 14.26°. Range, so you need to adjust the parameters.
  • the angle of view is -16° to 10°, the angle of view is 26°, which is less than the range of 28.52 angle of view when the focal length is 85 mm.
  • the result of the adjustment of the PTZ control parameter adjustment module for the PTZ control message is that there is no need to adjust the focal length, and the camera angle needs to be rotated.
  • step 905 the PTZ control parameter adjustment module sends T1 a PTZ control command rotated 2° to the left. Update the horizontal viewing angle range of T3, change T3 to -16° ⁇ 4°, and update the viewing angle range of T1 video source camera to -16.26° ⁇ 12.26°;
  • FIG. 10 is a flowchart (horizontal rotation) of performing pan-tilt control on a viewing image of a terminal according to an embodiment of the present invention. Take the PTZ control parameter adjustment module running in the multi-point control unit central office equipment as an example.
  • Step 1001 establishing a relationship between the focal length of the camera and the viewing angle, as follows:
  • Step 1002 Read a focal length value of the current video source T1 camera, such as 85 mm, and a viewing angle range of -14.26 ° to 14.26 degrees.
  • the value of the attention point image of the T2 terminal ranges from -10° to 10°, and the value of the attention point image of the T3 terminal ranges from ⁇ 14° to 6°.
  • Step 1003 when T3 wants to adjust the T1 image that it views to the right, it sends a control command to the right side of the PTZ control parameter adjustment module, such as rotating 2 degrees to the right;
  • Step 1004 The PTZ control parameter adjustment module adjusts the PTZ message.
  • the angle range of the image viewed by T2 and T3 is -14° to 10°. After rotating to the right by two degrees, the angle range of the viewed image is updated to -12° to 10 degrees, which does not exceed the current video source T1 camera -14.26° to 14.26. ° range, so no real pan/tilt control is required. Update the horizontal viewing angle range of T3, and change T3 to -12° to 8°.
  • FIG. 11 is a flowchart (horizontal rotation) of performing pan-tilt control on a viewing image of a certain terminal according to an embodiment of the present invention. Take the PTZ control parameter adjustment module running in the multi-point control unit central office equipment as an example.
  • Step 1101 establishing a relationship between the focal length of the camera and the viewing angle, as follows:
  • Step 1102 Read the focal length value of the current video source T1 camera, such as 85 mm, and the viewing angle range is -14.26 ° to 14.26.
  • the value of the attention point image of the T2 terminal ranges from -6° to 14°, and the value of the attention point image of the T3 terminal ranges from ⁇ 14° to 6°.
  • Step 1103 when T3 wants to adjust the T1 image that it views to the left, it sends a control command to the left side to the left side of the PTZ control parameter adjustment module, for example, 2 degrees to the left;
  • Step 1104 The PTZ control parameter adjustment module adjusts the PTZ message.
  • the angle range of the image viewed by T2 and T3 is -14° ⁇ 14°. After rotating to the left by two degrees, the angle range of the viewed image is updated to -16° to 14°, span 30°, and the allowable 28.52 degrees over 85mm focal length. Therefore, the pan/tilt control parameter needs to be rotated to the left and adjusted to modify the focal length to be 70 mm.
  • Step 1105 The PTZ control parameter adjustment module sends a PTZ message with a focal length of 70 mm to the T1 terminal.
  • step 1106 the PTZ control parameter adjustment module updates the viewing angle range of T3 by ⁇ 16° to 4°.
  • FIG. 12 is a flowchart (horizontal rotation) of performing pan-tilt control on a viewing image of a terminal according to an embodiment of the present invention. Take the PTZ control parameter adjustment module running in the multi-point control unit central office equipment as an example.
  • Step 1201 establishing a relationship between the focal length of the camera and the viewing angle, as follows:
  • Step 1202 Read a focal length value of the current video source T1 camera, such as 70 mm, and a viewing angle range of -17.15 ° to 17.15 °.
  • the value of the attention point image of the T2 terminal ranges from -6° to 14°, and the value of the attention point image of the T3 terminal ranges from ⁇ 16° to 4°.
  • Step 1203 when T3 wants to adjust the T1 image that it views to the right, it sends a control command to the right side of the PTZ control parameter adjustment module, such as rotating 2 degrees to the right;
  • the PTZ control parameter adjustment module adjusts the PTZ message.
  • the angle range of the image viewed by T2 and T3 is -16° ⁇ 14°. After two degrees of rotation, the angle range of the image is updated to -14° ⁇ 14°, the span is 28°, and the allowable 28.55 is less than 85mm focal length. Degree, therefore, it is necessary to rotate the control parameters of the pan/tilt head to the right and adjust the modified focal length to 85mm.
  • Step 1205 The PTZ control parameter adjustment module sends a PTZ message with a focal length of 85 mm to the T1 terminal.
  • step 1206 the PTZ control parameter adjustment module updates the viewing angle range of T3 by -14° to 6°.
  • step 1207 the process ends.
  • FIG. 13 is a signaling flowchart of a terminal canceling a point of interest according to an embodiment of the present invention. Take the PTZ control parameter adjustment module running in the multi-point control unit central office equipment as an example.
  • Step 1301 The terminal performs a cancel focus operation
  • Step 1302 The terminal sends a cancel focus message to the PTZ control parameter adjustment module, and the cancel focus message may be a PTZ control message whose parameter is empty, but is not limited to this message;
  • Step 1303 The PTZ control parameter adjustment module transparently transmits a message to the PTZ control parameter recording module.
  • Step 1304 The PTZ control parameter recording module directly restores the terminal's attention point message to a default value (the current camera actual focus point value range).
  • Step 1305 The PTZ control parameter recording module synchronizes the focus information of the terminal to the digital cloud platform processing module.
  • FIG. 14 is a schematic structural diagram of a PTZ control device according to an embodiment of the present invention. As shown in FIG. 14, the device includes:
  • the receiving unit 1401 is configured to receive a first pan-tilt control message sent by the first terminal;
  • the determining unit 1402 is configured to determine a PTZ control parameter of the video source terminal according to the first PTZ control message and the attention point information of the at least one second terminal in the video conference;
  • the determining unit 1403 is configured to determine, according to the PTZ control parameter, whether the PTZ control needs to be performed on the video source terminal;
  • the generating unit 1404 is configured to generate a second PTZ control message based on the PTZ control parameter when the PTZ control needs to be performed on the video source terminal;
  • the sending unit 1405 is configured to send the second PTZ control message to the video source terminal, and perform pan/tilt control on the video source terminal.
  • the determining unit 1402 is specifically configured to: determine, according to the original point of interest information of the first terminal, and the information about the point of interest of the at least one second terminal, the original attention point range of the video conference;
  • the pan/tilt control is performed on the video source terminal based on the determined pan/tilt control parameter
  • the pan/tilt control is not performed on the video source terminal.
  • the PTZ control parameter includes at least one of the following: a focus control parameter of the video source terminal, and an azimuth control parameter of the video source terminal;
  • the generating unit 1404 is specifically configured to: when the pan/tilt control of the video source terminal is required, generate a second pan/tilt based on a focus control parameter of the video source terminal and/or an azimuth control parameter of the video source terminal Control messages.
  • the device further includes:
  • the updating unit 1406 is configured to update the original point of interest information of the first terminal to the new point of interest information
  • the sending unit 1405 is further configured to send the new point of interest information of the first terminal to the PTZ control device.
  • the device further includes:
  • the initializing unit 1407 is configured to set the attention point information of the first terminal as default attention point information when receiving the cancel focus message sent by the first terminal;
  • the sending unit 1405 is further configured to send the default point of interest information of the first terminal to the PTZ control device.
  • an embodiment of the present invention further provides an electronic device, including a processor and a memory storing the processor executable instructions, when the instructions are executed by the processor, the processor is configured to perform the following operations:
  • processor is further configured to perform the following operations:
  • FIG. 15 is a schematic structural diagram of a PTZ processing apparatus according to an embodiment of the present invention. As shown in FIG. 15, the apparatus includes:
  • the obtaining unit 1501 is configured to acquire video data sent by the video source terminal;
  • the processing unit 1502 is configured to extract, according to the attention point information of each terminal in the video conference, the corresponding target video data from the video data for each terminal;
  • the sending unit 1503 is configured to separately send the target video data corresponding to each terminal to the corresponding terminal for playing.
  • the acquiring unit 1501 is further configured to receive new point of interest information sent by the PTZ control device for the first terminal;
  • the processing unit 1502 is further configured to extract, according to the new point of interest information, the corresponding target video data from the video data for the first terminal.
  • an embodiment of the present invention further provides an electronic device, including a processor and a memory storing the processor executable instructions, when the instructions are executed by the processor, the processor is configured to perform the following operations:
  • the target video data corresponding to each terminal is separately sent to the corresponding terminal for playing.
  • the processor is further configured to perform the following operations:
  • FIG. 16 is a schematic structural diagram of a PTZ system according to an embodiment of the present invention. As shown in FIG. 16, the system includes a PTZ control device 1601 and a PTZ processing device 1602.
  • the PTZ processing device 1601 is configured to receive the first PTZ control message sent by the first terminal, and determine the video source terminal according to the first PTZ control message and the information about the point of interest of the at least one second terminal in the video conference
  • the pan/tilt control parameter is determined according to the pan/tilt control parameter, and whether the pan/tilt control needs to be performed on the video source terminal; when the pan/tilt control is required to be performed on the video source terminal, based on the pan/tilt control parameter generation And transmitting, by the second cloud platform control message, the second cloud platform control message to the video source terminal, and performing pan/tilt control on the video source terminal.
  • the cloud station processing device 1602 is configured to acquire video data sent by the video source terminal, and extract corresponding target video data from the video data for each terminal based on the attention point information of each terminal in the video conference; The target video data is separately sent to the corresponding terminal for playback.
  • the PTZ control device 1601 of the embodiment of the present invention can be understood by referring to the functions of the PTZ control parameter adjustment module.
  • the PTZ processing device 1602 of the embodiment of the present invention can refer to the foregoing digital PTZ processing module. The function is understood.
  • embodiments of the present invention can be provided as a method, system, or computer program product. Accordingly, the present invention can take the form of a hardware embodiment, a software embodiment, or a combination of software and hardware. Moreover, the invention can take the form of a computer program product embodied on one or more computer-usable storage media (including but not limited to disk storage and optical storage, etc.) including computer usable program code.
  • the computer program instructions can also be stored in a computer readable memory that can direct a computer or other programmable data processing device to operate in a particular manner, such that the instructions stored in the computer readable memory produce an article of manufacture comprising the instruction device.
  • the apparatus implements the functions specified in one or more blocks of a flow or a flow and/or block diagram of the flowchart.
  • These computer program instructions can also be loaded onto a computer or other programmable data processing device such that a series of operational steps are performed on a computer or other programmable device to produce computer-implemented processing for execution on a computer or other programmable device.
  • the instructions provide steps for implementing the functions specified in one or more of the flow or in a block or blocks of a flow diagram.
  • the first PTZ control message sent by the first terminal is received, and the video source is determined according to the first PTZ control message and the information about the point of interest of the at least one second terminal in the video conference.
  • a PTZ control parameter of the terminal determining, according to the PTZ control parameter, whether the PTZ control needs to be performed on the video source terminal; and when performing PTZ control on the video source terminal, based on the PTZ control parameter Generating a second pan-tilt control message; sending the second pan-tilt control message to the video source terminal, and performing pan-tilt control on the video source terminal.
  • the same video source terminal can be affected.
  • Other terminals view images, and they can control the image at any time according to their own concerns.
  • the embodiment of the invention can be connected with the terminal of any manufacturer, and has strong versatility.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明公开了一种云台控制及处理方法、装置、系统、电子设备，所述方法包括：接收第一终端发送的第一云台控制消息；根据所述第一云台控制消息，以及视频会议中的至少一个第二终端的关注点信息，确定视频源终端的云台控制参数；根据所述云台控制参数，判断是否需要对所述视频源终端进行云台控制；当需要对所述视频源终端进行云台控制时，基于所述云台控制参数生成第二云台控制消息；将所述第二云台控制消息发送给所述视频源终端，对所述视频源终端进行云台控制。

Description

一种云台控制及处理方法、装置、系统、电子设备 技术领域
本发明涉及视频会议领域，尤其涉及一种云台控制及处理方法、装置、系统、电子设备。
背景技术
会议电视是利用视讯技术和设备通过现代通信网络，在本地及远端以电视方式召开实时、双向、交互式的可视会议的一种多媒体通信方式，是利用电视技术和设备通过传输信道在两地或多个地点举行会议的一种通信手段。随着移动互联网技术的发展，视频会议已经被广泛的使用在生活和工作中的多个场景中，不论身处何地，都可以很方便地通过会议电视终端参与会议，大大的提高了工作效率和节约差旅费用，为越来越多的普通用户所接受。
传统视频会议系统中，仅存在对远端会场图像远遥和对本地会场图像远遥两种云台控制方式。多点会议中，所有与会端均看广播源会场，所看广播源图像完全一致，如任意与会人员想要观看广播源会场另一方向的图像，对广播源会场进行远端会场遥控时，会导致所有与会端看到的图像均发生变化。随着视频会议的普及和功能的完善，人们对视频会议的与会体验要求也逐步提高，如何做到与会端可以根据自身的关注点调整观看图像内容且不影响与会其它人员观看的效果，是需要研究的一个方向。目前解决这个问题的一个方法是，广播源会场使用广角或者全景镜头(可能是多个摄像机拼接的)尽可能的增加图像采集范围，将采集到的全部原始图像编码发给与会终端，与会终端根据自己的关注点，从原始图像中截取感兴趣区域进行输出显示。采用这种方案存在以下几个问题：
1、带宽占用高。每一个与会终端均需要接收广播源采集编码的所有信息(即使有些图像内容并不是该与会终端想要的)。
2、所有与会终端均需要支持数字变焦技术，通用性差。
发明内容
本发明实施例的目的在于，提供一种云台控制及处理方法、装置、系统、电子设备，在不影响其它与会端所看图像的前提下，使得任意与会端可以根据自己的关注点随时对远端图像进行云台控制，提升视频会议与会人员的沉浸感。
本发明实施例提供的云台控制方法，包括：
接收第一终端发送的第一云台控制消息；
根据所述第一云台控制消息，以及视频会议中的至少一个第二终端的关注点信息，确定视频源终端的云台控制参数；
根据所述云台控制参数，判断是否需要对所述视频源终端进行云台控制；
当需要对所述视频源终端进行云台控制时，基于所述云台控制参数生成第二云台控制消息；
将所述第二云台控制消息发送给所述视频源终端，对所述视频源终端进行云台控制。
本发明实施例中，所述根据所述第一云台控制消息，以及视频会议中的至少一个第二终端的关注点信息，确定视频源终端的云台控制参数，包括：
根据所述第一终端的原关注点信息，以及至少一个第二终端的关注点信息，确定视频会议的原关注点范围；
根据所述第一云台控制消息，以及所述第一终端的原关注点信息，确定所述第一终端的新关注点信息；根据所述第一终端的新关注点信息，以及至少一个第二终端的关注点信息，确定视频会议的新关注点范围；
根据所述视频会议的新关注点范围以及所述视频源终端的原关注点范围，确定视频源终端的云台控制参数。
本发明实施例中，当所述视频会议的新关注点范围超出所述视频源终端的原关注点范围时，基于所确定的云台控制参数对所述视频源终端进行云台控制；
当所述视频会议的新关注点范围未超出所述视频源终端的原关注点范围时，不对所述视频源终端进行云台控制。
本发明实施例中，所述云台控制参数包括以下至少之一：视频源终端的焦距控制参数、视频源终端的方位控制参数；
所述当需要对所述视频源终端进行云台控制时，基于所述云台控制参数生成第二云台控制消息，包括：
当需要对所述视频源终端进行云台控制时，基于所述视频源终端的焦距控制参数和/或视频源终端的方位控制参数，生成第二云台控制消息。
本发明实施例中，所述方法还包括：
将所述第一终端的原关注点信息更新为所述新关注点信息，并发送给云台控制装置。
本发明实施例中，所述方法还包括：
当接收到所述第一终端发送的取消关注点消息时，将所述第一终端的关注点信息设置为默认关注点信息；
将所述第一终端的默认关注点信息发送给云台控制装置。
本发明实施例提供的云台处理方法，包括：
获取视频源终端发送的视频数据；
基于视频会议中的各个终端的关注点信息，为各个终端从所述视频数据中提取出相应的目标视频数据；
将各个终端对应的目标视频数据分别发送给相应的终端进行播放。
本发明实施例中，所述方法还包括：
接收云台控制装置发送的针对第一终端的新关注点信息，基于所述新 关注点信息，为所述第一终端从所述视频数据中提取出相应的目标视频数据。
本发明实施例提供的云台控制装置，包括：
接收单元，设置为接收第一终端发送的第一云台控制消息；
确定单元，设置为根据所述第一云台控制消息，以及视频会议中的至少一个第二终端的关注点信息，确定视频源终端的云台控制参数；
判断单元，设置为根据所述云台控制参数，判断是否需要对所述视频源终端进行云台控制；
生成单元，设置为当需要对所述视频源终端进行云台控制时，基于所述云台控制参数生成第二云台控制消息；
发送单元，设置为将所述第二云台控制消息发送给所述视频源终端，对所述视频源终端进行云台控制。
本发明实施例中，所述确定单元，具体设置为：根据所述第一终端的原关注点信息，以及至少一个第二终端的关注点信息，确定视频会议的原关注点范围；
根据所述第一云台控制消息，以及所述第一终端的原关注点信息，确定所述第一终端的新关注点信息；根据所述第一终端的新关注点信息，以及至少一个第二终端的关注点信息，确定视频会议的新关注点范围；
根据所述视频会议的新关注点范围以及所述视频源终端的原关注点范围，确定视频源终端的云台控制参数。
本发明实施例中，当所述视频会议的新关注点范围超出所述视频源终端的原关注点范围时，基于所确定的云台控制参数对所述视频源终端进行云台控制；
当所述视频会议的新关注点范围未超出所述视频源终端的原关注点范围时，不对所述视频源终端进行云台控制。
本发明实施例中，所述云台控制参数包括以下至少之一：视频源终端 的焦距控制参数、视频源终端的方位控制参数；
所述生成单元，具体设置为：当需要对所述视频源终端进行云台控制时，基于所述视频源终端的焦距控制参数和/或视频源终端的方位控制参数，生成第二云台控制消息。
本发明实施例中，所述装置还包括：
更新单元，设置为将所述第一终端的原关注点信息更新为所述新关注点信息；
所述发送单元，还设置为将所述第一终端的新关注点信息发送给云台控制装置。
本发明实施例中，所述装置还包括：
初始化单元，设置为当接收到所述第一终端发送的取消关注点消息时，将所述第一终端的关注点信息设置为默认关注点信息；
所述发送单元，还设置为将所述第一终端的默认关注点信息发送给云台控制装置。
本发明实施例提供的云台处理装置，包括：
获取单元，设置为获取视频源终端发送的视频数据；
处理单元，设置为基于视频会议中的各个终端的关注点信息，为各个终端从所述视频数据中提取出相应的目标视频数据；
发送单元，设置为将各个终端对应的目标视频数据分别发送给相应的终端进行播放。
本发明实施例中，所述获取单元，还设置为接收云台控制装置发送的针对第一终端的新关注点信息；
所述处理单元，还设置为基于所述新关注点信息，为所述第一终端从所述视频数据中提取出相应的目标视频数据。
本发明实施例提供的云台系统，包括上述所述的云台控制装置，以及云台处理装置。
本发明实施例提供的电子设备，包括处理器以及存储有所述处理器可执行指令的存储器，当所述指令被处理器执行时，所述处理器设置为执行如下操作：
接收第一终端发送的第一云台控制消息；
根据所述第一云台控制消息，以及视频会议中的至少一个第二终端的关注点信息，确定视频源终端的云台控制参数；
根据所述云台控制参数，判断是否需要对所述视频源终端进行云台控制；
当需要对所述视频源终端进行云台控制时，基于所述云台控制参数生成第二云台控制消息；
将所述第二云台控制消息发送给所述视频源终端，对所述视频源终端进行云台控制。
本发明实施例中，所述处理器还设置为执行如下操作：
根据所述第一终端的原关注点信息，以及至少一个第二终端的关注点信息，确定视频会议的原关注点范围；
根据所述第一云台控制消息，以及所述第一终端的原关注点信息，确定所述第一终端的新关注点信息；根据所述第一终端的新关注点信息，以及至少一个第二终端的关注点信息，确定视频会议的新关注点范围；
根据所述视频会议的新关注点范围以及所述视频源终端的原关注点范围，确定视频源终端的云台控制参数。
本发明另一实施例提供的电子设备，包括处理器以及存储有所述处理器可执行指令的存储器，当所述指令被处理器执行时，所述处理器设置为执行如下操作：
获取视频源终端发送的视频数据；
基于视频会议中的各个终端的关注点信息，为各个终端从所述视频数据中提取出相应的目标视频数据；
将各个终端对应的目标视频数据分别发送给相应的终端进行播放。
本发明实施例中，所述处理器还设置为执行如下操作：
接收云台控制装置发送的针对第一终端的新关注点信息，基于所述新关注点信息，为所述第一终端从所述视频数据中提取出相应的目标视频数据。
在本发明实施例中，还提供了一种存储介质，该存储介质可以存储有执行指令，该执行指令用于执行上述实施例中的云台控制方法或云台处理方法的实现。
本发明实施例的技术方案中，接收第一终端发送的第一云台控制消息；根据所述第一云台控制消息，以及视频会议中的至少一个第二终端的关注点信息，确定视频源终端的云台控制参数；根据所述云台控制参数，判断是否需要对所述视频源终端进行云台控制；当需要对所述视频源终端进行云台控制时，基于所述云台控制参数生成第二云台控制消息；将所述第二云台控制消息发送给所述视频源终端，对所述视频源终端进行云台控制。获取视频源终端发送的视频数据；基于视频会议中的各个终端的关注点信息，为各个终端从所述视频数据中提取出相应的目标视频数据；将各个终端对应的目标视频数据分别发送给相应的终端进行播放。采用本发明实施例的技术方案，在视频会议视频通讯过程中，在不增加编码带宽的基础上，通过对当前与会终端的关注点信息进行分析、调整，可以实现观看同一视频源终端既不影响其它终端观看图像，又可以根据自己的关注点随时对图像进行云台控制。本发明实施例可以与任意厂家的终端对接，通用性强。
附图说明
附图以示例而非限制的方式大体示出了本文中所讨论的各个实施例。
图1为本发明实施例的云台控制方法的流程示意图；
图2为本发明实施例的云台处理方法的流程示意图；
图3为本发明实施例的应用场景图；
图4为本发明实施例的系统架构图；
图5为本发明实施例的系统处理信令流程图一；
图6为本发明实施例的系统处理信令流程图二；
图7为本发明实施例的系统处理媒体流程图；
图8为本发明实施例的云台调整流程图；
图9为本发明实施例的某一终端对其观看图像进行云台控制的流程图；
图10为本发明实施例的某一终端对其观看图像进行云台控制的流程图；
图11为本发明实施例的某一终端对其观看图像进行云台控制的流程图；
图12为本发明实施例的某一终端对其观看图像进行云台控制的流程图；
图13为本发明实施例的终端取消关注点的信令流程图；
图14为本发明实施例的云台控制装置的结构组成示意图；
图15为本发明实施例的云台处理装置的结构组成示意图；
图16为本发明实施例的云台系统的结构组成示意图。
具体实施方式
为了能够更加详尽地了解本发明实施例的特点与技术内容，下面结合附图对本发明实施例的实现进行详细阐述，所附附图仅供参考说明之用，并非用来限定本发明实施例。
本发明实施例的技术方案，主要新增两个模块：云台控制参数调整模块、数字云台处理模块。其中，
云台控制参数调整模块：云台控制参数调整模块的任务是对与会终端发过来的云台控制参数，结合会议当前其它终端观看图像的关注点信息，对云台控制参数进行优化调整，并记录，将调整参数后的云台控制消息发 给广播源终端。
数字云台处理模块：本模块主要的作用是对原始视频源图像，根据终端的关注点信息，进行缩放、区域剪裁、编解码等处理。
云台控制参数调整模块的位置可以根据实际需要进行调整，运行的位置可以是视频会议局端设备、终端设备或者独立单元实体。云台控制参数调整模块优选运行在视频会议局端设备中。
图1为本发明实施例的云台控制方法的流程示意图，本示例的云台控制方法应用于云台控制参数调整模块侧，如图1所示，所述云台控制方法包括以下步骤：
步骤101：接收第一终端发送的第一云台控制消息。
本发明实施例中，首先各个与会终端需要连接至视频会议中，本示例中，将视频会议中的与会终端分为三类，分别为第一终端、第二终端和视频源终端：其中，第一终端为触发云台控制的终端；第二终端是区别于第一终端的远端设备；视频源终端是为第一终端和第二终端提供视频数据的终端，视频源终端相对于第一终端而言，也为远端设备。
在召开视频会议时，所有与会终端关注点信息初始化，初始化的关注点信息即为当前视频源终端(也即视频源的摄像头)的焦点，这里，云台控制参数调整模块和数字云台处理模块均执行初始化操作。
第一终端对应的用户触发云台控制，例如：视频会议中包括T1、T2、T3、T4四个终端，T1为视频源终端，T2希望调整看到的T1会场的图像，T2发送第一云台控制(PTZ)消息给云台控制参数调整模块。
步骤102：根据所述第一云台控制消息，以及视频会议中的至少一个第二终端的关注点信息，确定视频源终端的云台控制参数。
本发明实施例中，云台控制参数调整模块第一云台控制消息进行调整，调整结果包括是否需要进行云台控制以及具体的云台控制参数。
具体地，根据所述第一终端的原关注点信息，以及至少一个第二终端 的关注点信息，确定视频会议的原关注点范围；
根据所述第一云台控制消息，以及所述第一终端的原关注点信息，确定所述第一终端的新关注点信息；根据所述第一终端的新关注点信息，以及至少一个第二终端的关注点信息，确定视频会议的新关注点范围；
根据所述视频会议的新关注点范围以及所述视频源终端的原关注点范围，确定视频源终端的云台控制参数。
步骤103：根据所述云台控制参数，判断是否需要对所述视频源终端进行云台控制。
当所述视频会议的新关注点范围超出所述视频源终端的原关注点范围时，基于所确定的云台控制参数对所述视频源终端进行云台控制；
当所述视频会议的新关注点范围未超出所述视频源终端的原关注点范围时，不对所述视频源终端进行云台控制。
步骤104：当需要对所述视频源终端进行云台控制时，基于所述云台控制参数生成第二云台控制消息。
所述云台控制参数包括以下至少之一：视频源终端的焦距控制参数、视频源终端的方位控制参数；
所述当需要对所述视频源终端进行云台控制时，基于所述云台控制参数生成第二云台控制消息，包括：
当需要对所述视频源终端进行云台控制时，基于所述视频源终端的焦距控制参数和/或视频源终端的方位控制参数，生成第二云台控制消息。
步骤105：将所述第二云台控制消息发送给所述视频源终端，对所述视频源终端进行云台控制。
本发明实施例中，所述方法还包括：将所述第一终端的原关注点信息更新为所述新关注点信息，并发送给云台控制装置。
本发明实施例中，所述方法还包括：
当接收到所述第一终端发送的取消关注点消息时，将所述第一终端的 关注点信息设置为默认关注点信息；
将所述第一终端的默认关注点信息发送给云台控制装置。
图2为本发明实施例的云台处理方法的流程示意图，本示例的云台处理方法应用于数字云台处理模块侧，如图2所示，所述云台处理方法包括以下步骤：
步骤201：获取视频源终端发送的视频数据。
步骤202：基于视频会议中的各个终端的关注点信息，为各个终端从所述视频数据中提取出相应的目标视频数据。
这里，数字云台处理模块实时接收云台控制装置发送的针对第一终端的新关注点信息，基于所述新关注点信息，为所述第一终端从所述视频数据中提取出相应的目标视频数据。
步骤203：将各个终端对应的目标视频数据分别发送给相应的终端进行播放。
下面结合具体应用场景对本发明实施例的技术方案做进一步详细描述。
图3为本发明实施例的应用场景图。
召开多点会议，参加会议的有T1、T2、T3、T4四个会场，T1为当前会议的广播源，T2、T3、T4均看T1会场的图像，传统视频会议系统中，T2、T3、T4终端看到的图像完全相同，即都看到T1会场的CD位置图像；本方案中，可以实现T2看到T1会场的CD位置图像，T3看到T1会场的A B位置图像，T4看到T1会场的EF图像，三者看到的图像不一致。
图4为本发明实施例的系统架构图。
本发明主要新增两个模块：云台控制参数调整模块、数字云台处理模块。召开多点会议，参加会议的有T1、T2、T3、T4四个会场，T1为当前会议的广播源，以T2希望调整自己所看图像的角度为例。
云台控制参数调整模块：云台控制参数调整模块的任务是对与会终端 (T2)发过来的云台控制参数，结合会议当前其它终端观看图像的关注点信息，对云台控制参数进行优化调整，并记录，将调整参数后的云台控制消息发给广播源终端(T1)。
数字云台处理模块：本模块主要的作用是对原始视频源图像，根据终端的关注点信息，进行缩放、区域剪裁、编解码等处理。
云台控制参数调整模块的位置可以根据实际需要进行调整，运行的位置可以是视频会议局端设备、终端设备或者独立单元实体。优选运行在视频会议局端设备中。
图5为本发明实施例的系统处理信令流程图一(云台控制参数调整模块运行在多点控制单元上)。
步骤501，召开会议，流程开始；
步骤502，所有与会终端关注点信息初始化，初始化的关注点信息即为当前视频源摄像头的焦点(云台控制参数调整和数字云台处理模块均执行初始化操作)；
步骤503，用户触发云台控制，比如T2希望调整看到的T1会场的图像，终端发送云台控制消息给MCU中的云台控制参数调整模块；
步骤504，云台控制参数调整模块对该PTZ消息进行调整，调整结果包括是否需要进行云台控制以及云台控制消息参数；
步骤505，判断调整结果是否需要进行云台控制，如果需要进入步骤506，否则流程结束；
步骤506，云台控制参数调整模块将调整后的云台消息发送给视频源终端；
步骤507，视频源终端反馈云台控制结果给云台控制参数调整模块；
步骤508，如果反馈结果为“成功”，云台控制参数调整模块更新触发该云台控制终端的关注点信息，并将信息同步到数字云台处理模块；
步骤509，流程结束。
图6为本发明实施例的系统处理信令流程图二(云台控制参数调整模块运行在视频源终端上)。
步骤601，召开会议，流程开始；
步骤602，所有与会终端关注点信息初始化，初始化的关注点信息即为当前视频源摄像头的焦点(云台控制参数调整和数字云台处理模块均执行初始化操作)；
步骤603，用户触发云台控制，比如T2希望调整看到的T1会场的图像，终端发送云台控制消息给MCU；
步骤604，MCU对该消息增加终端号码识别信息后，转发给视频源终端；
步骤605，视频源终端的云台控制参数调整模块，对该消息进行参数调整，用调整后的云台控制消息操作本终端的云台；
步骤606，如果视频源终端的云台控制操作成功，视频源终端的云台控制参数调整模块给MCU发送关注点变更指示消息，该消息内容包括，终端号码识别信息、该终端当前的关注点信息；如果视频源终端的云台控制操作不成功，则流程结束；
步骤607，MCU收到关注点变更指示消息后，同步更新到数字云台处理模块；
步骤608，流程结束。
图7为本发明实施例的系统处理媒体流程图。
步骤701，流程开始；
步骤702，接收视频源码流，启动解码；
步骤703，数字云台控制模块对解码后的数据，根据终端的关注点信息，逐个终端进行数字云台处理，处理后的数据发送给每个终端的编码模块；
步骤704，编码发送；
步骤705，流程结束。
图8为本发明实施例的台参数调整流程图。以云台控制参数调整模块运行在多点控制单元局端设备为例。
步骤801，流程开始；
步骤802，云台控制参数类型判断，上下左右角度转动消息进入步骤803，缩小消息进入步骤809，放大消息进入步骤811；
步骤803，判断该终端所对应的上下左右角度消息是否超出当前视频源摄像头图像采集的角度范围？如果超过范围，进入步骤804；如果没有超过范围，则进入步骤806；
步骤804，云台控制参数调整模块尝试进行一次缩小操作，给视频源终端发送一次缩小的PTZ消息；
步骤805，视频源终端反馈操作结果；
步骤806，云台控制参数调整模块判断是否需要真正进行云台控制，如果需要进入步骤807，如果不需要进入步骤811；
判断的原则是：如果云台控制终端的关注点在，与其同一视频源终端的所有关注点内部，则不需进行真正的云台控制，如果在所有关注点的边缘，则需要进行真正的云台控制。
步骤807，云台控制参数调整模块将控制端发来的PTZ消息透传给视频源；
步骤808，视频源终端反馈控制结果；
步骤809，云台控制信息调整模块透传控制端的PTZ消息给视频源终端；
步骤810，视频源终端反馈控制结果；
步骤811，云台控制信息调整模块将控制结果反馈给控制端，并更新关注点信息
步骤812，流程结束。
实施例一
图9为本发明实施例的某一终端对其观看图像进行云台控制的流程图(水平转动)。以云台控制参数调整模块运行在多点控制单元局端设备为例。
步骤901，建立摄像头焦距跟视角之间的关系，如下：
Figure PCTCN2017119475-appb-000001
步骤902，获取当前视频源T1摄像头焦距和视场角信息、与会终端的关注点视场角信息。读取当前视频源T1摄像头的焦距数值，比如85mm，视角范围-14.26°～14.26度。T2终端的关注点图像的取值范围为-10°～10°，T3终端的关注点图像的取值范围-14°～6°。
步骤903，当T3想要向左调整其观看的T1图像，其向云台控制参数调整模块发送向左侧旋转的控制命令，比如向左旋转2度；
步骤904,云台控制参数调整模块对该PTZ消息进行调整。当前T2、T3观看的图像角度范围是-14°～10°，向左旋转两度后，观看的图像角度范围更新为-16°～10度，超过当前视频源T1摄像头-14.26°～14.26°范围，所以需要调整参数。同时，因为-16°～10°，视角为26°，小于焦距为85mm时28.52视角范围，此时不需要调整焦距。最终云台控制参数调整模块针对此次PTZ控制消息调整后的结果为，不需要进行调整焦距，需要旋转摄像头角度。
步骤905，云台控制参数调整模块给T1发送向左旋转2°的PTZ控制命令。更新T3的水平视角范围，T3变更为-16°～4°，T1视频源摄像头的视角范围更新为-16.26°～12.26°；
步骤906，流程结束。
实施例二
图10为本发明实施例的某一终端对其观看图像进行云台控制的流程图(水平转动)。以云台控制参数调整模块运行在多点控制单元局端设备为例。
步骤1001，建立摄像头焦距跟视角之间的关系，如下：
Figure PCTCN2017119475-appb-000002
步骤1002，读取当前视频源T1摄像头的焦距数值，比如85mm，视角范围-14.26°～14.26度。T2终端的关注点图像的取值范围为-10°～10°，T3终端的关注点图像的取值范围-14°～6°。
步骤1003，当T3想要向右调整其观看的T1图像，其向云台控制参数调整模块发送向右侧旋转的控制命令，比如向右旋转2度；
步骤1004，云台控制参数调整模块对该PTZ消息进行调整。当前T2、T3观看的图像角度范围是-14°～10°，向右旋转两度后，观看的图像角度范围更新为-12°～10度，未超过当前视频源T1摄像头-14.26°～14.26°范围，所以不需要进行真正的云台控制。更新T3的水平视角范围，T3变更为-12°～8°。
步骤1005，流程结束。
实施例三
图11为本发明实施例的某一终端对其观看图像进行云台控制的流程图(水平转动)。以云台控制参数调整模块运行在多点控制单元局端设备为例。
步骤1101，建立摄像头焦距跟视角之间的关系，举例如下：
焦距 17 28 35 40 50 70 85
(mm)              
视角(°) 103.59 75.30 63.36 56.74 46.70 34.30 28.52
步骤1102，读取当前视频源T1摄像头的焦距数值，比如85mm，视角范围-14.26°～14.26。T2终端的关注点图像的取值范围为-6°～14°，T3终端的关注点图像的取值范围-14°～6°。
步骤1103，当T3想要向左调整其观看的T1图像，其向云台控制参数调整模块发送向左侧旋转的控制命令，比如向左旋转2度；
步骤1104，云台控制参数调整模块对该PTZ消息进行调整。当前T2、T3观看的图像角度范围是-14°～14°，向左旋转两度后，观看的图像角度范围更新为-16°～14°，跨度30°，超过85mm焦距所允许的28.52度，所以，需要将该云台控制参数由向左旋转，调整为修改焦距为70mm。
步骤1105，云台控制参数调整模块向T1终端发送调整焦距为70mm的PTZ消息；
步骤1106，云台控制参数调整模块更新T3的视角范围-16°～4°。
步骤1107，流程结束。
实施例四
图12为本发明实施例的某一终端对其观看图像进行云台控制的流程图(水平转动)。以云台控制参数调整模块运行在多点控制单元局端设备为例。
步骤1201，建立摄像头焦距跟视角之间的关系，如下：
Figure PCTCN2017119475-appb-000003
步骤1202，读取当前视频源T1摄像头的焦距数值，比如70mm，视角范围-17.15°～17.15°。T2终端的关注点图像的取值范围为-6°～14°， T3终端的关注点图像的取值范围-16°～4°。
步骤1203，当T3想要向右调整其观看的T1图像，其向云台控制参数调整模块发送向右侧旋转的控制命令，比如向右旋转2度；
步骤1204，云台控制参数调整模块对该PTZ消息进行调整。当前T2、T3观看的图像角度范围是-16°～14°，向由旋转两度后，观看的图像角度范围更新为-14°～14°，跨度28°，低于85mm焦距所允许的28.52度，所以，需要将改云台控制参数由向右旋转，调整为修改焦距为85mm。
步骤1205，云台控制参数调整模块向T1终端发送调整焦距为85mm的PTZ消息；
步骤1206，云台控制参数调整模块更新T3的视角范围-14°～6°。
步骤1207，流程结束。
实施例五
图13为本发明实施例的终端取消关注点的信令流程图。以云台控制参数调整模块运行在多点控制单元局端设备为例。
步骤1301，终端执行取消关注点操作；
步骤1302，终端给云台控制参数调整模块发送取消关注点消息，取消关注点消息可以为参数为空的PTZ控制消息，但不限于此消息；
步骤1303，云台控制参数调整模块透传消息给云台控制参数记录模块；
步骤1304，云台控制参数记录模块直接将该终端的关注点消息恢复成默认值(当前摄像机实际的关注点取值范围)。
步骤1305，云台控制参数记录模块将该终端的关注点信息同步到数字云台处理模块；
步骤1306，流程结束。
图14为本发明实施例的云台控制装置的结构组成示意图，如图14所示，所述装置包括：
接收单元1401，设置为接收第一终端发送的第一云台控制消息；
确定单元1402，设置为根据所述第一云台控制消息，以及视频会议中的至少一个第二终端的关注点信息，确定视频源终端的云台控制参数；
判断单元1403，设置为根据所述云台控制参数，判断是否需要对所述视频源终端进行云台控制；
生成单元1404，设置为当需要对所述视频源终端进行云台控制时，基于所述云台控制参数生成第二云台控制消息；
发送单元1405，设置为将所述第二云台控制消息发送给所述视频源终端，对所述视频源终端进行云台控制。
本发明实施例中，所述确定单元1402，具体设置为：根据所述第一终端的原关注点信息，以及至少一个第二终端的关注点信息，确定视频会议的原关注点范围；
根据所述第一云台控制消息，以及所述第一终端的原关注点信息，确定所述第一终端的新关注点信息；根据所述第一终端的新关注点信息，以及至少一个第二终端的关注点信息，确定视频会议的新关注点范围；
根据所述视频会议的新关注点范围以及所述视频源终端的原关注点范围，确定视频源终端的云台控制参数。
本发明实施例中，当所述视频会议的新关注点范围超出所述视频源终端的原关注点范围时，基于所确定的云台控制参数对所述视频源终端进行云台控制；
当所述视频会议的新关注点范围未超出所述视频源终端的原关注点范围时，不对所述视频源终端进行云台控制。
本发明实施例中，所述云台控制参数包括以下至少之一：视频源终端的焦距控制参数、视频源终端的方位控制参数；
所述生成单元1404，具体设置为：当需要对所述视频源终端进行云台控制时，基于所述视频源终端的焦距控制参数和/或视频源终端的方位控制参数，生成第二云台控制消息。
本发明实施例中，所述装置还包括：
更新单元1406，设置为将所述第一终端的原关注点信息更新为所述新关注点信息；
所述发送单元1405，还设置为将所述第一终端的新关注点信息发送给云台控制装置。
本发明实施例中，所述装置还包括：
初始化单元1407，设置为当接收到所述第一终端发送的取消关注点消息时，将所述第一终端的关注点信息设置为默认关注点信息；
所述发送单元1405，还设置为将所述第一终端的默认关注点信息发送给云台控制装置。
相应地，本发明实施例还提供一种电子设备，包括处理器以及存储有所述处理器可执行指令的存储器，当所述指令被处理器执行时，所述处理器用于执行如下操作：
接收第一终端发送的第一云台控制消息；
根据所述第一云台控制消息，以及视频会议中的至少一个第二终端的关注点信息，确定视频源终端的云台控制参数；
根据所述云台控制参数，判断是否需要对所述视频源终端进行云台控制；
当需要对所述视频源终端进行云台控制时，基于所述云台控制参数生成第二云台控制消息；
将所述第二云台控制消息发送给所述视频源终端，对所述视频源终端进行云台控制。
其中，所述处理器还设置为执行如下操作：
根据所述第一终端的原关注点信息，以及至少一个第二终端的关注点信息，确定视频会议的原关注点范围；
根据所述第一云台控制消息，以及所述第一终端的原关注点信息，确定所述第一终端的新关注点信息；根据所述第一终端的新关注点信息，以及至少一个第二终端的关注点信息，确定视频会议的新关注点范围；
根据所述视频会议的新关注点范围以及所述视频源终端的原关注点范围，确定视频源终端的云台控制参数。
图15为本发明实施例的云台处理装置的结构组成示意图，如图15所示，所述装置包括：
获取单元1501，设置为获取视频源终端发送的视频数据；
处理单元1502，设置为基于视频会议中的各个终端的关注点信息，为各个终端从所述视频数据中提取出相应的目标视频数据；
发送单元1503，设置为将各个终端对应的目标视频数据分别发送给相应的终端进行播放。
本发明实施例中，所述获取单元1501，还设置为接收云台控制装置发送的针对第一终端的新关注点信息；
所述处理单元1502，还设置为基于所述新关注点信息，为所述第一终端从所述视频数据中提取出相应的目标视频数据。
相应地，本发明实施例还提供一种电子设备，包括处理器以及存储有所述处理器可执行指令的存储器，当所述指令被处理器执行时，所述处理器用于执行如下操作：
获取视频源终端发送的视频数据；
基于视频会议中的各个终端的关注点信息，为各个终端从所述视频数据中提取出相应的目标视频数据；
将各个终端对应的目标视频数据分别发送给相应的终端进行播放。
其中，所述处理器还用于执行如下操作：
接收云台控制装置发送的针对第一终端的新关注点信息，基于所述新关注点信息，为所述第一终端从所述视频数据中提取出相应的目标视频数据。
图16为本发明实施例的云台系统的结构组成示意图，如图16所示，所述系统包括云台控制装置1601和云台处理装置1602；其中，
云台处理装置1601，设置为接收第一终端发送的第一云台控制消息；根据所述第一云台控制消息，以及视频会议中的至少一个第二终端的关注点信息，确定视频源终端的云台控制参数；根据所述云台控制参数，判断是否需要对所述视频源终端进行云台控制；当需要对所述视频源终端进行云台控制时，基于所述云台控制参数生成第二云台控制消息；将所述第二云台控制消息发送给所述视频源终端，对所述视频源终端进行云台控制。
云台处理装置1602，设置为获取视频源终端发送的视频数据；基于视频会议中的各个终端的关注点信息，为各个终端从所述视频数据中提取出相应的目标视频数据；将各个终端对应的目标视频数据分别发送给相应的终端进行播放。
本领域技术人员应当理解，本发明实施例的云台控制装置1601可参照前述云台控制参数调整模块的功能进行理解，本发明实施例的云台处理装置1602可参照前述数字云台处理模块的功能进行理解。
本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用硬件实施例、软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算 机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
以上所述，仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。
工业实用性
本发明实施例的技术方案中，接收第一终端发送的第一云台控制消息；根据所述第一云台控制消息，以及视频会议中的至少一个第二终端的关注点信息，确定视频源终端的云台控制参数；根据所述云台控制参数，判断是否需要对所述视频源终端进行云台控制；当需要对所述视频源终端进行云台控制时，基于所述云台控制参数生成第二云台控制消息；将所述第二云台控制消息发送给所述视频源终端，对所述视频源终端进行云台控制。获取视频源终端发送的视频数据；基于视频会议中的各个终端的关注点信息，为各个终端从所述视频数据中提取出相应的目标视频数据；将各个终端对应的目标视频数据分别发送给相应的终端进行播放。采用本发明实施例的技术方案，在视频会议视频通讯过程中，在不增加编码带宽的基础上，通过对当前与会终端的关注点信息进行分析、调整，可以实现观看同一视 频源终端既不影响其它终端观看图像，又可以根据自己的关注点随时对图像进行云台控制。本发明实施例可以与任意厂家的终端对接，通用性强。

Claims (21)

  1. 一种云台控制方法，所述方法包括：
    接收第一终端发送的第一云台控制消息；
    根据所述第一云台控制消息，以及视频会议中的至少一个第二终端的关注点信息，确定视频源终端的云台控制参数；
    根据所述云台控制参数，判断是否需要对所述视频源终端进行云台控制；
    当需要对所述视频源终端进行云台控制时，基于所述云台控制参数生成第二云台控制消息；
    将所述第二云台控制消息发送给所述视频源终端，对所述视频源终端进行云台控制。
  2. 根据权利要求1所述的云台控制方法，其中，所述根据所述第一云台控制消息，以及视频会议中的至少一个第二终端的关注点信息，确定视频源终端的云台控制参数，包括：
    根据所述第一终端的原关注点信息，以及至少一个第二终端的关注点信息，确定视频会议的原关注点范围；
    根据所述第一云台控制消息，以及所述第一终端的原关注点信息，确定所述第一终端的新关注点信息；根据所述第一终端的新关注点信息，以及至少一个第二终端的关注点信息，确定视频会议的新关注点范围；
    根据所述视频会议的新关注点范围以及所述视频源终端的原关注点范围，确定视频源终端的云台控制参数。
  3. 根据权利要求2所述的云台控制方法，其中，
    当所述视频会议的新关注点范围超出所述视频源终端的原关注点范围时，基于所确定的云台控制参数对所述视频源终端进行云台控制；
    当所述视频会议的新关注点范围未超出所述视频源终端的原关注点范围时，不对所述视频源终端进行云台控制。
  4. 根据权利要求3所述的云台控制方法，其中，所述云台控制参数包括以下至少之一：视频源终端的焦距控制参数、视频源终端的方位控制参数；
    所述当需要对所述视频源终端进行云台控制时，基于所述云台控制参数生成第二云台控制消息，包括：
    当需要对所述视频源终端进行云台控制时，基于所述视频源终端的焦距控制参数和/或视频源终端的方位控制参数，生成第二云台控制消息。
  5. 根据权利要求2所述的云台控制方法，其中，所述方法还包括：
    将所述第一终端的原关注点信息更新为所述新关注点信息，并发送给云台控制装置。
  6. 根据权利要求1至5任一项所述的云台控制方法，其中，所述方法还包括：
    当接收到所述第一终端发送的取消关注点消息时，将所述第一终端的关注点信息设置为默认关注点信息；
    将所述第一终端的默认关注点信息发送给云台控制装置。
  7. 一种云台处理方法，所述方法包括：
    获取视频源终端发送的视频数据；
    基于视频会议中的各个终端的关注点信息，为各个终端从所述视频数据中提取出相应的目标视频数据；
    将各个终端对应的目标视频数据分别发送给相应的终端进行播放。
  8. 根据权利要求7所述的云台处理方法，其中，所述方法还包括：
    接收云台控制装置发送的针对第一终端的新关注点信息，基于所述新关注点信息，为所述第一终端从所述视频数据中提取出相应的目标视频数据。
  9. 一种云台控制装置，所述装置包括：
    接收单元，设置为接收第一终端发送的第一云台控制消息；
    确定单元，设置为根据所述第一云台控制消息，以及视频会议中的至少一个第二终端的关注点信息，确定视频源终端的云台控制参数；
    判断单元，设置为根据所述云台控制参数，判断是否需要对所述视频源终端进行云台控制；
    生成单元，设置为当需要对所述视频源终端进行云台控制时，基于所述云台控制参数生成第二云台控制消息；
    发送单元，设置为将所述第二云台控制消息发送给所述视频源终端，对所述视频源终端进行云台控制。
  10. 根据权利要求9所述的云台控制装置，其中，所述确定单元，具体设置为：根据所述第一终端的原关注点信息，以及至少一个第二终端的关注点信息，确定视频会议的原关注点范围；
    根据所述第一云台控制消息，以及所述第一终端的原关注点信息，确定所述第一终端的新关注点信息；根据所述第一终端的新关注点信息，以及至少一个第二终端的关注点信息，确定视频会议的新关注点范围；
    根据所述视频会议的新关注点范围以及所述视频源终端的原关注点范围，确定视频源终端的云台控制参数。
  11. 根据权利要求10所述的云台控制装置，其中，
    当所述视频会议的新关注点范围超出所述视频源终端的原关注点范围时，基于所确定的云台控制参数对所述视频源终端进行云台控制；
    当所述视频会议的新关注点范围未超出所述视频源终端的原关注点范围时，不对所述视频源终端进行云台控制。
  12. 根据权利要求11所述的云台控制装置，其中，所述云台控制参数包括以下至少之一：视频源终端的焦距控制参数、视频源终端的方位控制参数；
    所述生成单元，具体设置为：当需要对所述视频源终端进行云台控制 时，基于所述视频源终端的焦距控制参数和/或视频源终端的方位控制参数，生成第二云台控制消息。
  13. 根据权利要求10所述的云台控制装置，其中，所述装置还包括：
    更新单元，设置为将所述第一终端的原关注点信息更新为所述新关注点信息；
    所述发送单元，还设置为将所述第一终端的新关注点信息发送给云台控制装置。
  14. 根据权利要求9至13任一项所述的云台控制装置，其中，所述装置还包括：
    初始化单元，设置为当接收到所述第一终端发送的取消关注点消息时，将所述第一终端的关注点信息设置为默认关注点信息；
    所述发送单元，还设置为将所述第一终端的默认关注点信息发送给云台控制装置。
  15. 一种云台处理装置，所述装置包括：
    获取单元，设置为获取视频源终端发送的视频数据；
    处理单元，设置为基于视频会议中的各个终端的关注点信息，为各个终端从所述视频数据中提取出相应的目标视频数据；
    发送单元，设置为将各个终端对应的目标视频数据分别发送给相应的终端进行播放。
  16. 根据权利要求15所述的云台处理装置，其中，
    所述获取单元，还设置为接收云台控制装置发送的针对第一终端的新关注点信息；
    所述处理单元，还设置为基于所述新关注点信息，为所述第一终端从所述视频数据中提取出相应的目标视频数据。
  17. 一种云台系统，所述系统包括权利要求10至14任一项所述的云台控制装置，以及权利要求15至16任一项所述的云台处理装置。
  18. 一种电子设备，包括处理器以及存储有所述处理器可执行指令的存储器，当所述指令被处理器执行时，所述处理器设置为执行如下操作：
    接收第一终端发送的第一云台控制消息；
    根据所述第一云台控制消息，以及视频会议中的至少一个第二终端的关注点信息，确定视频源终端的云台控制参数；
    根据所述云台控制参数，判断是否需要对所述视频源终端进行云台控制；
    当需要对所述视频源终端进行云台控制时，基于所述云台控制参数生成第二云台控制消息；
    将所述第二云台控制消息发送给所述视频源终端，对所述视频源终端进行云台控制。
  19. 根据权利要求18所述的电子设备，其中，所述处理器还设置为执行如下操作：
    根据所述第一终端的原关注点信息，以及至少一个第二终端的关注点信息，确定视频会议的原关注点范围；
    根据所述第一云台控制消息，以及所述第一终端的原关注点信息，确定所述第一终端的新关注点信息；根据所述第一终端的新关注点信息，以及至少一个第二终端的关注点信息，确定视频会议的新关注点范围；
    根据所述视频会议的新关注点范围以及所述视频源终端的原关注点范围，确定视频源终端的云台控制参数。
  20. 一种电子设备，包括处理器以及存储有所述处理器可执行指令的存储器，当所述指令被处理器执行时，所述处理器设置为执行如下操作：
    获取视频源终端发送的视频数据；
    基于视频会议中的各个终端的关注点信息，为各个终端从所述视频数据中提取出相应的目标视频数据；
    将各个终端对应的目标视频数据分别发送给相应的终端进行播放。
  21. 根据权利要求20所述的电子设备，其中，所述处理器还设置为执行如下操作：
    接收云台控制装置发送的针对第一终端的新关注点信息，基于所述新关注点信息，为所述第一终端从所述视频数据中提取出相应的目标视频数据。
PCT/CN2017/119475 2016-12-30 2017-12-28 一种云台控制及处理方法、装置、系统、电子设备 WO2018121682A1 (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201611257255.1A CN108270986A (zh) 2016-12-30 2016-12-30 一种云台控制及处理方法、装置、系统、电子设备
CN201611257255.1 2016-12-30

Publications (1)

Publication Number Publication Date
WO2018121682A1 true WO2018121682A1 (zh) 2018-07-05

Family

ID=62706989

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2017/119475 WO2018121682A1 (zh) 2016-12-30 2017-12-28 一种云台控制及处理方法、装置、系统、电子设备

Country Status (2)

Country Link
CN (1) CN108270986A (zh)
WO (1) WO2018121682A1 (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101521745A (zh) * 2009-04-14 2009-09-02 王广生 一组多镜头光心重合式全方位摄像装置及全景摄像、转播的方法
US20100002070A1 (en) * 2004-04-30 2010-01-07 Grandeye Ltd. Method and System of Simultaneously Displaying Multiple Views for Video Surveillance
CN103814567A (zh) * 2012-07-10 2014-05-21 松下电器产业株式会社 显示控制装置
CN104349112A (zh) * 2013-07-31 2015-02-11 波利康公司 视频会议装置及其方法
CN104767927A (zh) * 2014-01-07 2015-07-08 三亚中兴软件有限责任公司 一种对云台摄像设备进行方位控制的方法和装置

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7755668B1 (en) * 1998-04-09 2010-07-13 Johnston Gregory E Mobile surveillance system
CN101656873A (zh) * 2008-08-18 2010-02-24 北京创先泰克科技有限公司 现场拍摄中摄像机及云台的控制系统和方法
JP2012034151A (ja) * 2010-07-30 2012-02-16 Sony Corp カメラ装置、カメラシステム、制御装置、及びプログラム
CN102346484A (zh) * 2011-07-12 2012-02-08 广州灿点信息科技有限公司 云台设备移动处理方法及系统
CN103108126B (zh) * 2013-01-21 2017-08-25 Tcl集团股份有限公司 一种视频交互系统、方法、交互眼镜及终端
CN106027887B (zh) * 2016-05-20 2019-01-25 北京格灵深瞳信息技术有限公司 针对旋镜云台的枪球联动控制的方法、装置及电子设备

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100002070A1 (en) * 2004-04-30 2010-01-07 Grandeye Ltd. Method and System of Simultaneously Displaying Multiple Views for Video Surveillance
CN101521745A (zh) * 2009-04-14 2009-09-02 王广生 一组多镜头光心重合式全方位摄像装置及全景摄像、转播的方法
CN103814567A (zh) * 2012-07-10 2014-05-21 松下电器产业株式会社 显示控制装置
CN104349112A (zh) * 2013-07-31 2015-02-11 波利康公司 视频会议装置及其方法
CN104767927A (zh) * 2014-01-07 2015-07-08 三亚中兴软件有限责任公司 一种对云台摄像设备进行方位控制的方法和装置

Also Published As

Publication number Publication date
CN108270986A (zh) 2018-07-10

Similar Documents

Publication Publication Date Title
US8675038B2 (en) Two-way video conferencing system
US11418758B2 (en) Multiple simultaneous framing alternatives using speaker tracking
US9270941B1 (en) Smart video conferencing system
US8130257B2 (en) Speaker and person backlighting for improved AEC and AGC
US9641585B2 (en) Automated video editing based on activity in video conference
US9300912B2 (en) Software based whiteboard capture solution for conference room meetings
US9912907B2 (en) Dynamic video and sound adjustment in a video conference
US9065967B2 (en) Method and apparatus for providing device angle image correction
CN102282847B (zh) 用于远程会议的多视频相机处理
US10079995B1 (en) Methods and systems for generating resolution based content
EP1592198A1 (en) Systems and methods for real-time audio-visual communication and data collaboration
US8848021B2 (en) Remote participant placement on a unit in a conference room
US11076127B1 (en) System and method for automatically framing conversations in a meeting or a video conference
WO2015196765A1 (zh) 多媒体会议系统中控制多媒体播放的方法、设备及系统
US20230283888A1 (en) Processing method and electronic device
US7397504B2 (en) Whiteboard view camera
US10447969B2 (en) Image processing device, image processing method, and picture transmission and reception system
WO2018121682A1 (zh) 一种云台控制及处理方法、装置、系统、电子设备
US11922605B2 (en) Selective distortion or deformation correction in images from a camera with a wide angle lens
EP4075794A1 (en) Region of interest based adjustment of camera parameters in a teleconferencing environment
US11729489B2 (en) Video chat with plural users using same camera
US20220264156A1 (en) Context dependent focus in a video feed
US20140267870A1 (en) Mixed media from multimodal sensors
US11223798B1 (en) Methods and system for transmitting content during a networked conference
JP6565777B2 (ja) 通信装置、会議システム、プログラムおよび表示制御方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17887212

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 17887212

Country of ref document: EP

Kind code of ref document: A1