WO2023182026A1 - 情報処理装置、情報処理システムおよび情報処理装置の制御方法 - Google Patents

情報処理装置、情報処理システムおよび情報処理装置の制御方法 Download PDF

Info

Publication number
WO2023182026A1
WO2023182026A1 PCT/JP2023/009492 JP2023009492W WO2023182026A1 WO 2023182026 A1 WO2023182026 A1 WO 2023182026A1 JP 2023009492 W JP2023009492 W JP 2023009492W WO 2023182026 A1 WO2023182026 A1 WO 2023182026A1
Authority
WO
WIPO (PCT)
Prior art keywords
video
parameter
information processing
imaging device
processing device
Prior art date
Application number
PCT/JP2023/009492
Other languages
English (en)
French (fr)
Inventor
亮治 大久保
芳紀 岡崎
浩 齋藤
Original Assignee
パナソニックIpマネジメント株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by パナソニックIpマネジメント株式会社 filed Critical パナソニックIpマネジメント株式会社
Publication of WO2023182026A1 publication Critical patent/WO2023182026A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B15/00Special procedures for taking photographs; Apparatus therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/218Source of audio or video content, e.g. local disk arrays
    • H04N21/2187Live feed
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules

Definitions

  • the present disclosure relates to an information processing device that outputs a video stream, an information processing system, and a method of controlling the information processing device.
  • an information processing device that outputs a video stream using video captured by a camera (see, for example, Patent Document 1).
  • video streams output from the information processing device are switched depending on various scenes captured by a camera.
  • Patent Document 1 may not be able to appropriately switch video streams.
  • the present disclosure provides an information processing device and the like that can appropriately switch video streams.
  • An information processing device is an information processing device that outputs a video stream using a video imaged by an imaging device capable of changing at least one parameter among panning, tilting, and zooming, a parameter control unit that controls the at least one parameter of the imaging device, the parameter control unit instructing the imaging device to change the at least one parameter; When the change is completed, a switching permission signal is output that permits switching of the video stream output from the information processing device.
  • An information processing system includes: an imaging device capable of changing at least one parameter among pan, tilt, and zoom; a parameter control unit that controls the at least one parameter of the imaging device; a video processing unit that outputs a video stream using the video imaged by the imaging device, the parameter control unit instructing the imaging device to change the at least one parameter, and the parameter control unit instructing the imaging device to change the at least one parameter;
  • a switching permission signal is output to the video processing unit to permit switching of the video stream output from the video processing unit, and the video processing unit outputs the switching permission signal to the video processing unit.
  • the video stream is switched based on the video stream.
  • a method for controlling an information processing device includes controlling an information processing device that outputs a video stream using a video imaged by an imaging device that can change at least one parameter among panning, tilting, and zooming.
  • the method includes the steps of: outputting a parameter signal instructing the imaging device to change the at least one parameter; and when the change of the at least one parameter of the imaging device is completed, the information processing
  • the method includes the step of outputting a switching permission signal that permits switching of the video stream output from the device.
  • FIG. 2 is a diagram showing an information processing system of a comparative example.
  • FIG. 3 is a ladder diagram showing a control method of an information processing system of a comparative example.
  • FIG. 2 is a ladder diagram showing a method of controlling the information processing system according to the embodiment.
  • 1 is a block configuration diagram showing an information processing system and an information processing device according to an embodiment.
  • FIG. FIG. 3 is a diagram showing preset-related information stored in a storage unit of the information processing device.
  • FIG. 7 is a diagram illustrating an example of the operation of the information processing system according to Modification 1 of the embodiment.
  • FIG. 7 is a flowchart illustrating a method for controlling an information processing apparatus according to Modification 1 of the embodiment.
  • FIG. 7 is a diagram illustrating an example of an operation of an information processing system according to a second modification of the embodiment.
  • 7 is a flowchart illustrating a method for controlling an information processing apparatus according to a second modification of the embodiment.
  • FIG. 7 is a diagram illustrating an example of an operation of an information processing system according to a third modification of the embodiment.
  • 7 is a flowchart illustrating a method for controlling an information processing apparatus according to modification 3 of the embodiment.
  • FIG. 1 is a diagram showing an information processing system 101 as a comparative example.
  • FIG. 2 is a ladder diagram showing a control method of the information processing system 101 as a comparative example.
  • the information processing system 101 of the comparative example includes a plurality of PTZ cameras 180 and an information processing device 102 that outputs a video stream using videos captured by the plurality of PTZ cameras 180. .
  • images of various scenes are captured by changing parameters such as pan, tilt, and zoom of the PTZ camera 180, and a video stream corresponding to each scene is generated. Output.
  • the user using the information processing system 101 uses the terminal device 170 to output a signal instructing the PTZ camera 180 to change the parameters, as shown in FIG. Then, the user visually confirms that the parameter change of the PTZ camera 180 has been completed, and then performs an operation to switch the video stream output from the information processing device 102.
  • the timing of the video stream switching operation is delayed or accelerated.
  • FIG. 3 is a ladder diagram showing a control method for the information processing system 1 according to the embodiment.
  • the information processing system 1 includes a plurality of imaging devices 80 and an information processing device 2 that outputs a video stream using videos captured by the plurality of imaging devices 80.
  • the information processing device 2 instructs the imaging device 80 to change the parameters based on the switching signal of the terminal device 70, and when the change of the parameters of the imaging device 80 is completed, the information processing device 2 instructs the imaging device 80 to change the parameters. Allows switching of video streams output from the processing device 2. According to this configuration, the video stream output from the information processing device 2 can be appropriately switched.
  • each figure is a schematic diagram and is not necessarily strictly illustrated. Furthermore, in each figure, substantially the same configurations are denoted by the same reference numerals, and overlapping explanations may be omitted or simplified. Further, in each figure, even when the same object is illustrated, the scale may be changed for convenience.
  • FIG. 4 is a block configuration diagram showing the information processing system 1 and the information processing device 2 according to the embodiment.
  • FIG. 4 also shows a display device 99 to which the video stream Is is output.
  • the display device 99 is, for example, a display device, a projector, or a personal computer.
  • the information processing system 1 includes an information processing device 2, a terminal device 70, and a plurality of imaging devices 80a, 80b, and 80c.
  • the information processing device 2 and the plurality of imaging devices 80a to 80c are communicatively connected via an information network and a network switch.
  • the information processing device 2 and the plurality of imaging devices 80a to 80c perform bidirectional communication using IP (Internet Protocol) signals.
  • IP Internet Protocol
  • Communication between the information processing device 2 and the plurality of imaging devices 80a to 80c may be wireless communication or wired communication.
  • the information processing device 2 is a device that outputs a video stream Is using the video imaged by the imaging device 80.
  • the video stream Is is data that includes two or more consecutive images.
  • the video stream Is may include not only a video captured by one imaging device 80a but also videos captured by a plurality of imaging devices 80a to 80c.
  • Each of the imaging devices 80a to 80c is an imaging device that can change at least one parameter among panning, tilting, and zooming.
  • the imaging devices 80a to 80c have a communication section 81, a PTZ drive section 82, a camera section 83, and an encoding section 84.
  • the imaging devices 80a to 80c are, for example, PTZ cameras, and can take images by changing the pan, tilt, and zoom position coordinates of the camera unit 83. Note that the number of imaging devices is not limited to three, and may be one, two, or four or more. Hereinafter, one or all of the imaging devices may be referred to as the imaging device 80.
  • the imaging device 80 is installed, for example, in a facility that includes a training venue, a lecture venue, an event venue, and the like.
  • the imaging device 80 is remotely controlled by the information processing device 2 while being fixed to a pedestal, wall, ceiling, etc. in the venue.
  • the communication unit 81 is a communication module and communicates with the information processing device 2 via an information network and a network switch.
  • the communication unit 81 receives a signal transmitted from the information processing device 2 and outputs it to the PTZ drive unit 82. Furthermore, the communication unit 81 receives a signal output from the PTZ drive unit 82 and transmits it to the information processing device 2 . Furthermore, the communication unit 81 receives a signal output from the encoding unit 84 and transmits it to the information processing device 2 .
  • the PTZ drive section 82 has a drive mechanism that moves the camera section 83 in the panning direction, tilting direction, and zooming direction.
  • the drive mechanism is, for example, a motor, and allows the camera unit 83 to move 360 degrees in the pan direction, 90 degrees in the tilt direction, and 100 mm in the zoom direction.
  • the PTZ drive section 82 has a sensor capable of detecting the position coordinates of each of the pan, tilt, and zoom parameters, and has a function of determining whether or not the parameter change is completed.
  • the PTZ driving unit 82 When the PTZ driving unit 82 receives the parameter signal s2 instructing parameter change from the information processing device 2, it changes the parameter based on the parameter signal s2. Specifically, when receiving the parameter signal s2, the PTZ drive unit 82 moves the camera unit 83 so as to change at least one of panning, tilting, and zooming. Further, when the above parameter change is completed, the PTZ drive unit 82 outputs a change completion signal s3 indicating that the parameter change is completed to the information processing device 2 via the communication unit 81.
  • the camera unit 83 is a detector for capturing images of various scenes, and detects visible light or near-infrared light. Imaging by the camera unit 83 is always performed while the information processing system 1 is in operation. The video imaged by the camera section 83 is output to the encoding section 84.
  • the encoding unit 84 encodes the video output from the camera unit 83 in a predetermined format.
  • the encoded video information is output to the information processing device 2 via the communication unit 81.
  • the terminal device 70 of the information processing system 1 is connected to the information processing device 2 by wireless or wired communication.
  • the terminal device 70 is a user interface, and outputs commands based on operation inputs received from the user to the information processing device 2.
  • the terminal device 70 can write and store preset-related information including information regarding parameters of the imaging device 80 in the information processing device 2. Further, the terminal device 70 can also read preset related information stored in the information processing device 2. Preset related information will be described later.
  • the terminal device 70 outputs a switching signal s0 for switching the video stream Is output from the information processing device 2 to the information processing device 2 in response to a predetermined operation input by the user.
  • the information processing device 2 receives the switching signal s0 output from the terminal device 70, it starts switching the video stream Is.
  • the information processing device 2 has the configuration shown below in order to appropriately switch the video stream Is.
  • the information processing device 2 includes a communication section 10, a parameter control section 20, a decoding section 30, a video processing section 50, and a storage section 60.
  • the parameter control section 20, decoding section 30, and video processing section 50 are configured by a processor, a microcomputer, or the like.
  • the communication unit 10 is a communication module, and communicates with the imaging device 80 via an information network and a network switch.
  • the communication unit 10 receives the parameter signal s2 output from the parameter control unit 20 and transmits it to the imaging device 80. Furthermore, the communication unit 10 receives a change completion signal s3 transmitted from the imaging device 80 and outputs it to the parameter control unit 20. Furthermore, the communication unit 10 receives a signal containing video information transmitted from the imaging device 80 and outputs it to the decoding unit 30.
  • Video information obtained by encoding the video imaged by the imaging device 80 is input to the decoding unit 30.
  • the decoding unit 30 decodes the video information encoded by the imaging device 80 according to its encoding format.
  • the decoding unit 30 decodes each of the plurality of video information encoded by the plurality of imaging devices 80, and sends a plurality of videos corresponding to the plurality of video information to the video processing unit 50. Output to.
  • the parameter control unit 20 controls at least one parameter among panning, tilting, and zooming of the imaging device 80.
  • the parameter control unit 20 also instructs the imaging device 80 to change the parameters, and when the parameter change of the imaging device 80 is completed, allows switching of the video stream Is output from the information processing device 2.
  • a switching permission signal s4 is output.
  • the parameter control section 20 has a parameter output section 21 and a permission signal output section 23. Each function of the parameter output section 21 and the permission signal output section 23 is realized by executing a software program stored in the storage section 60.
  • the parameter output unit 21 outputs a parameter signal s2 that instructs the imaging device 80 to change the parameter.
  • the parameter signal s2 includes preset-related information including information regarding parameters of the imaging device 80.
  • FIG. 5 is a diagram showing preset related information stored in the storage unit 60 of the information processing device 2.
  • the storage unit 60 is, for example, a nonvolatile storage device such as a flash memory.
  • the storage unit 60 stores software programs executed by the information processing device 2 and preset information.
  • scene information, source information, layout information, and preset information are stored in the storage unit 60 in a linked manner.
  • scene information, source information, layout information, preset information, and the like are collectively referred to as preset-related information.
  • Scene information is information indicating various scenes held at the venue. For example, in a venue where an online class is being held, there is a scene where the teacher stands at the podium and speaks, a scene where the characters written on the white board are displayed, a scene where students are listening to the teacher's talk, a scene where one of the students There are scenes such as scenes where the character is speaking.
  • One piece of scene information is associated with one or more pieces of source information.
  • the source information is identification information of the imaging device 80 and information regarding the specifications of the imaging device 80.
  • the identification information of the imaging device 80 is the name and IP information of the imaging device 80
  • the information regarding the specifications of the imaging device 80 is the number of horizontal and vertical pixels of the imaging device 80.
  • One piece of source information is associated with one piece of layout information and one piece of preset information.
  • Layout information is information regarding layers, display positions, display sizes, and transmittance.
  • the layer is information indicating in which layer the video imaged by the imaging device 80 is placed among the multiple layers making up the video stream Is.
  • the display position is information indicating the horizontal and vertical position coordinates of the video on the display screen. In this example, the coordinates are determined with the top left of the display screen as 0.
  • the display size is information indicating the size of the video on the display screen.
  • the transmittance is information indicating the transmittance on the display screen. In this example, when the transmittance is 0%, it indicates that the image existing in the lower layer cannot be seen. This layout information is predetermined for each source information.
  • the preset information includes information regarding the position coordinates of pan, tilt, and zoom, which are parameters of the imaging device 80.
  • the preset information also includes whether to output a video different from the captured video, whether to switch the video stream Is output from the information processing device 2 using the switching permission signal s4, and the video to be output to the screen. Contains information indicating whether or not to change. Further, the preset information includes a mask video and an animation video, which will be described later.
  • the preset information may include information regarding focus and iris as parameters of the imaging device 80.
  • the video processing unit 50 When the video processing unit 50 receives the switching signal s0 output from the terminal device 70, it reads out the preset-related information stored in the storage unit 60, and outputs the preset setting signal s1 including the preset-related information to the parameter output unit 21. . In the information processing device 2, the switching operation of the video stream Is is started by outputting this preset setting signal s1.
  • the parameter output unit 21 outputs a parameter signal s2 including information regarding parameters to the imaging device 80 based on the preset setting signal s1 output from the video processing unit 50.
  • the parameter signal s2 is output corresponding to each of the plurality of imaging devices 80. In the imaging device 80 described above, parameters are changed based on the parameter signal s2.
  • the permission signal output unit 23 receives a change completion signal s3 from the imaging device 80 whose parameters have been changed based on the parameter signal s2, and generates a switching permission signal s4 that allows switching of the video stream output from the information processing device 2. Output. For example, when the permission signal output unit 23 receives a change completion signal s3 from at least one of the plurality of imaging devices 80, the permission signal output unit 23 transmits a switching permission signal s4 corresponding to the imaging device 80 that has output the change completion signal s3 to the video processing unit. Output to 50.
  • the video processing unit 50 generates a video stream Is using the video captured by the imaging device 80.
  • the video stream Is is generated based on a predetermined distribution format.
  • the video processing unit 50 switches the video stream Is output from the information processing device 2 based on the switching permission signal s4 output from the permission signal output unit 23.
  • the video stream Is output from the information processing device 2 is input to the display device 99 and displayed on the display device 99.
  • the information processing device 2 outputs a switching permission signal s4 that permits switching of the video stream output from the information processing device 2 when the change of the parameters of the imaging device 80 is completed. According to this configuration, since the video stream Is can be switched after changing the parameters of the imaging device 80, the video stream Is can be switched appropriately.
  • FIG. 6 is a diagram illustrating an example of the operation of the information processing system 1 according to the embodiment.
  • FIG. 7 is a flowchart showing a method of controlling the information processing device 2 according to the embodiment. Note that FIG. 7 also shows a terminal device 70 and an imaging device 80.
  • the image captured by the imaging device 80c is displayed on the right screen.
  • the imaging device 80a has parameter settings based on the first preset related information p1.
  • the imaging device 80a is in a state of capturing a picture of the sun, but the image taken by the imaging device 80a is not displayed on the screen.
  • the terminal device 70 Upon receiving a predetermined operation input from the user, the terminal device 70 outputs a switching signal s0 for switching the video stream Is to the video processing unit 50 of the information processing device 2 (step S10).
  • This switching signal s0 includes information that instructs the imaging device 80a to set parameters based on the second preset related information p2.
  • the video processing unit 50 of the information processing device 2 reads out the second preset related information p2 stored in the storage unit 60 based on the switching signal s0, and outputs the preset setting signal s1 including the second preset related information p2. It is output to the parameter control unit 20 (step S20).
  • the parameter control unit 20 outputs a parameter signal s2 including second preset related information p2 to the imaging device 80a based on the preset setting signal s1 (step S21). Note that the parameter control unit 20 stores the second preset related information p2 at least until it receives the change completion signal s3.
  • the imaging device 80a drives the PTZ drive unit 82 to change the parameter (step S30). Specifically, the imaging device 80a drives the PTZ drive unit 82 so that the imaging device 80a sets parameters based on the second preset related information p2.
  • the second preset-related information p2 includes information instructing not to output the video by the imaging device 80a while the parameters are being changed, but to output the video by the imaging device 80a after the parameters have been changed. Therefore, while the parameters are being changed, as shown in FIG. 6(b), the video is not switched, and the video by the imaging device 80c is displayed on the right screen as in FIG. 6(a).
  • the imaging device 80a When the imaging device 80a enters the parameter setting state based on the second preset related information p2, that is, when the parameter change is completed (step S31), it outputs a change completion signal s3 to the information processing device 2 (step S32). Note that the change completion signal s3 is output when all the parameters of pan, tilt, and zoom have been changed.
  • the parameter control unit 20 of the information processing device 2 determines whether or not it has received the change completion signal s3 output from the imaging device 80a (step S40). If the parameter control unit 20 does not receive the change completion signal s3 (No in S40), the process returns to step S40, and if the change completion signal s3 is received (Yes in S40), the parameter control unit 20 transmits the switching permission signal s4 to the video processing unit 50. (Step S41).
  • the video processing unit 50 switches and outputs the video stream Is output from the information processing device 2 (step S42).
  • the right half region of the video stream Is is switched to the video imaged by the imaging device 80a.
  • the imaging device 80a is in a state to capture a picture of a face, and the image captured by the imaging device 80a is displayed on the right screen of the display device 99.
  • the method for controlling the information processing device 2 includes the steps of outputting a parameter signal s2 that instructs the imaging device 80 to change the parameters, and when changing the parameters of the imaging device 80 is completed.
  • the step of outputting a switching permission signal s4 that permits switching of the video stream Is output from the information processing device 2 is included. According to this control method, since the video stream Is can be switched after changing the parameters of the imaging device 80, the video stream Is can be switched appropriately.
  • Modification 1 of the embodiment An information processing device 2 according to a first modification of the embodiment will be described.
  • this modification an example will be described in which, when the imaging device 80 is changing parameters, a video different from the video captured by the imaging device 80 is output.
  • the information processing device 2 includes a communication section 10, a parameter control section 20, a decoding section 30, a video processing section 50, and a storage section 60, as in the embodiment.
  • the information processing device 2 of Modification 1 outputs a video different from the video captured by the imaging device 80 when the imaging device 80 is changing the parameters.
  • the video processing unit 50 generates the video stream Is using a video different from the video captured by the imaging device 80 from the time it outputs the preset setting signal s1 until the time it receives the switching permission signal s4.
  • the image different from the image captured by the imaging device 80 is, for example, a still image or a mask image of a moving image.
  • the mask image may be monochrome, chromatic, or achromatic.
  • the video processing unit 50 determines whether the image is captured by the imaging device 80 based on the switching signal s0. You may also select whether to output a video different from the video.
  • FIG. 8 is a diagram illustrating an example of the operation of the information processing system 1 according to the first modification of the embodiment.
  • FIG. 9 is a flowchart illustrating a method for controlling the information processing device 2 according to the first modification of the embodiment.
  • the image captured by the imaging device 80a is displayed on the right screen.
  • the imaging device 80a has parameter settings based on the first preset related information p1, and is in a state of capturing, for example, a picture of the sun.
  • This switching signal s0 includes information that instructs the imaging device 80a to set parameters based on the second preset related information p2.
  • the video processing unit 50 of the information processing device 2 reads out the second preset related information p2 stored in the storage unit 60 based on the switching signal s0, and outputs the preset setting signal s1 including the second preset related information p2. It is output to the parameter control unit 20 (step S20).
  • the parameter control unit 20 outputs a parameter signal s2 including second preset related information p2 to the imaging device 80a based on the preset setting signal s1 (step S21).
  • the imaging device 80a drives the PTZ drive unit 82 to change the parameter (step S30). Specifically, the imaging device 80a drives the PTZ drive unit 82 so that the imaging device 80a sets parameters based on the second preset related information p2.
  • the information processing device 2 determines whether to display the image captured by the imaging device 80a during the parameter change (step S24). When the information processing device 2 determines to display the captured video (Yes in S24), the information processing device 2 proceeds to step S40 to prepare to output the video stream Is using the video captured by the imaging device 80a. On the other hand, if the information processing device 2 determines not to display the video (No in S24), it proceeds to the next step.
  • the second preset related information p2 includes information instructing to output a video different from the video captured by the imaging device 80a while the parameters are being changed. Therefore, the information processing device 2 outputs a video different from the video captured by the imaging device 80a (step S25). For example, while the parameters are being changed, a mask image different from the image captured by the imaging device 80 is displayed, as shown in FIG. 8(b).
  • the imaging device 80a When the imaging device 80a enters the parameter setting state based on the second preset related information p2, that is, when the parameter change is completed (step S31), it outputs a change completion signal s3 to the information processing device 2 (step S32).
  • the parameter control unit 20 of the information processing device 2 determines whether or not it has received the change completion signal s3 output from the imaging device 80a (step S40). Upon receiving the change completion signal s3, the parameter control unit 20 outputs a switching permission signal s4 to the video processing unit 50 (step S41).
  • the video processing unit 50 switches and outputs the video stream Is output from the information processing device 2 (step S42).
  • the right half region of the video stream Is is switched to the video imaged by the imaging device 80a.
  • the imaging device 80a is in a state to capture a picture of a face, and the image captured by the imaging device 80a is displayed on the right screen of the display device 99.
  • the video processing unit 50 generates the video stream Is using a video different from the video captured by the imaging device 80a, after outputting the preset setting signal s1 until receiving the switching permission signal s4. generate. According to this configuration, it is possible to prevent a video whose parameters are being changed from being output as the video stream Is, for example, in response to a user's request. Thereby, it is possible to appropriately switch the video stream Is.
  • Modification 2 of embodiment An information processing device 2 according to a second modification of the embodiment will be described.
  • this modification an example will be described in which the switching permission signal s4 output from the parameter control unit 20 is used to select whether or not to switch the video stream Is.
  • the information processing device 2 includes a communication section 10, a parameter control section 20, a decoding section 30, a video processing section 50, and a storage section 60, as in the embodiment.
  • the video processing unit 50 of the second modification uses the switching permission signal s4 to select whether to switch the video stream Is output from the information processing device 2.
  • the video processing unit 50 selects not to use the switching permission signal s4, the video processing unit 50 generates the video stream Is using the video captured by the imaging device 80 while changing the parameters.
  • the video processing unit 50 switches the video stream Is output from the information processing device 2 using the switching permission signal s4 is stored in the storage unit 60 as the aforementioned preset information (see FIG. 5). ). Note that if the switching signal s0 output from the terminal device 70 includes information indicating whether or not to switch the video stream Is using the switching permission signal s4, the video processing unit 50 performs the switching based on the switching signal s0. Then, the switching permission signal s4 may be used to select whether or not to switch.
  • FIG. 10 is a diagram illustrating an example of the operation of the information processing system 1 according to the second modification of the embodiment.
  • FIG. 11 is a flowchart showing a method of controlling the information processing device 2 according to the second modification of the embodiment.
  • parameters of the imaging device 80a are changed while the right screen is an image taken by the imaging device 80a, and the left screen is changed from an image taken by the imaging device 80c to the imaging device 80b.
  • An example of switching to video will be explained.
  • the image captured by the imaging device 80a is displayed on the right screen, and the image captured by the imaging device 80c is displayed on the left screen.
  • the imaging device 80a has parameter settings based on the first preset related information p1, and is in a state of capturing, for example, a picture of the sun.
  • the imaging device 80b has parameter settings based on the third preset related information p3, and is in a state of capturing, for example, a picture of the moon. Note that at this point, the image captured by the imaging device 80b is not displayed on the left screen.
  • This switching signal s0 includes information instructing the imaging device 80a to set parameters based on the second preset related information p2, and information instructing the imaging device 80b to set parameters based on the fourth preset related information p4. Contains information that instructs.
  • the video processing unit 50 of the information processing device 2 reads out the second preset related information p2 and the fourth preset related information p4 stored in the storage unit 60 based on the switching signal s0.
  • the video processing unit 50 then outputs the preset setting signal s1 including the second preset related information p2 and the preset setting signal s1 including the fourth preset related information p4 to the parameter control unit 20 (step S20).
  • the parameter control unit 20 outputs a parameter signal s2 including the second preset related information p2 to the imaging device 80a based on each preset setting signal s1, and outputs a parameter signal s2 including the fourth preset related information p4 to the imaging device 80a.
  • s2 is output to the imaging device 80b (step S21).
  • each imaging device 80a, 80b drives the PTZ drive unit 82 to change the parameter (step S30). Specifically, the imaging device 80a drives the PTZ drive unit 82 so that the imaging device 80a sets parameters based on the second preset related information p2. Further, the imaging device 80b drives the PTZ drive unit 82 so that the imaging device 80b sets parameters based on the fourth preset related information p4.
  • the information processing device 2 selects whether to switch the video stream Is using the switching permission signal s4 (step S22).
  • the process proceeds to step S42, and outputs the video stream Is using the video imaged by the imaging device 80a.
  • the information processing device 2 determines to switch the video stream using the switching permission signal s4 (Yes in S22)
  • it proceeds to the next step S24. Steps S24 and S25 are the same as in the first modification.
  • step S22 is performed for each of the preset setting signal s1 including the second preset related information p2 and the preset setting signal s1 including the fourth preset related information p4. That is, the determination in step S22 is executed for each of the imaging devices 80a and 80b.
  • the second preset related information p2 includes information instructing to switch the video stream Is using the switching permission signal s4. Therefore, the information processing device 2 executes steps S24 and S25 for the imaging device 80a.
  • the fourth preset related information p4 includes information instructing to switch the video stream Is without using the switching permission signal s4. Therefore, the information processing device 2 does not execute steps S24 and S25 for the imaging device 80b, and proceeds to step S42.
  • a mask image different from the image captured by the imaging device 80a is displayed on the right screen, as shown in FIG. 10(b). Furthermore, while the parameters are being changed, the image captured by the imaging device 80b is displayed as is on the left screen, as shown in FIGS. 10(b) and 10(c). As shown in FIGS. 10(b) and 10(c), the imaging device 80b is in a state of imaging a picture of a cloud, and the left screen of the display device 99 shows the image captured by the imaging device 80b. It will be displayed.
  • the imaging device 80a When the imaging device 80a enters the parameter setting state based on the second preset related information p2, that is, when the parameter change is completed (step S31), it outputs a change completion signal s3 to the information processing device 2 (step S32). Note that the change completion signal s3 is also output from the imaging device 80b, but in this example, the change completion signal s3 output from the imaging device 80b is not used by the information processing device 2.
  • the parameter control unit 20 of the information processing device 2 determines whether or not it has received the change completion signal s3 output from the imaging device 80a (step S40). Upon receiving the change completion signal s3, the parameter control unit 20 outputs a switching permission signal s4 to the video processing unit 50 (step S41).
  • the video processing unit 50 switches and outputs the video stream Is output from the information processing device 2 (step S42).
  • the right half region of the video stream Is is switched to the video imaged by the imaging device 80a.
  • the imaging device 80a is in a state to capture a picture of a face, and the image captured by the imaging device 80a is displayed on the right screen of the display device 99.
  • the imaging device 80b is in a state of imaging a picture of a heart mark, and the left screen of the display device 99 displays the video imaged by the imaging device 80b. It will be done.
  • the video processing unit 50 switches and outputs the video stream Is after receiving the switching permission signal s4, and when it is selected to use the switching permission signal s4. If not, a video stream is generated using the video imaged by the imaging device 80 while changing the parameters. According to this configuration, it is possible to provide the information processing device 2 that can select whether or not to switch the video stream Is using the switching permission signal s4.
  • the information processing device 2 includes a communication section 10, a parameter control section 20, a decoding section 30, a video processing section 50, and a storage section 60, as in the embodiment.
  • the information processing device 2 of Modification 3 acquires information regarding the degree of parameter change while the imaging device 80 is changing the parameter. Then, the information processing device 2 calculates the layout position of the video on the display screen where the video is displayed according to the degree of change of the parameter, and generates the video stream Is so that the video is displayed at the layout position.
  • the degree of parameter change is the rate of arrival (movement rate) until reaching the target position based on the position before parameter change. For example, when the camera unit 83 rotates 90 degrees in the pan direction, the arrival rate when rotated 45 degrees is 50% (0.5 in terms of ratio).
  • FIG. 12 is a diagram illustrating an example of the operation of the information processing system 1 according to the third modification of the embodiment.
  • FIG. 13 is a flowchart illustrating a method for controlling the information processing device 2 according to modification 3 of the embodiment.
  • the right side of the multi-view screen of the display device 99 is the image captured by the imaging device 80a, and the image displayed on the screen is changed while changing the parameters of the imaging device 80a. Note that a small image captured by the imaging device 80b is displayed on the left side of the screen.
  • the imaging device 80a As shown in FIG. 12(a), initially, a small image from the imaging device 80a is displayed on the right side of the screen. At this time, the imaging device 80a has parameter settings based on the first preset related information p1. For example, the imaging device 80a is in a state to capture a picture of the sun.
  • This switching signal s0 includes information that instructs the imaging device 80a to set parameters based on the second preset related information p2.
  • the video processing unit 50 of the information processing device 2 reads out the second preset related information p2 stored in the storage unit 60 based on the switching signal s0, and outputs the preset setting signal s1 including the second preset related information p2. It is output to the parameter control unit 20 (step S20).
  • the parameter control unit 20 outputs a parameter signal s2 including second preset related information p2 to the imaging device 80a based on the preset setting signal s1 (step S21).
  • the imaging device 80a drives the PTZ drive unit 82 to change the parameter (step S30). Specifically, the imaging device 80a drives the PTZ drive unit 82 so that the imaging device 80a sets parameters based on the second preset related information p2. In this modification, the PTZ driving unit 82 notifies the information processing device 2 of the status of each parameter while changing the above parameters (step S30A). For example, the PTZ driving unit 82 outputs information regarding the degree of parameter change to the information processing device 2 via the communication unit 81 while changing the parameters.
  • Step S22 the information processing device 2 selects whether to switch the video stream Is using the switching permission signal s4 (step S22). Step S22 is the same as the second modification.
  • the information processing device 2 determines whether to display the video captured by the imaging device 80a during the parameter change (step S24). If the information processing device 2 determines that the video imaged by the imaging device 80a is to be displayed (Yes in S24), the information processing device 2 proceeds to step S40 as in Modification 1, and determines that the video imaged by the imaging device 80a is not to be displayed. If so (No in S24), proceed to the next step.
  • step S24A it is determined whether or not to change the video output to the screen according to the degree of parameter change. If the information processing device 2 determines not to change the video output to the screen (No in S24A), it executes step S25 as in the first modification. On the other hand, when the information processing device 2 determines to change the video output to the screen (Yes in S24A), it acquires information regarding the degree of parameter change from the imaging device 80a (step S27).
  • the information processing device 2 calculates the layout position of the video on the display screen where the video is displayed according to the degree of parameter change (step S28).
  • the layout position of the video on the display screen is calculated, for example, using (Equation 1) below.
  • Layout position [(display position based on second preset related information p2) - (display position based on first preset related information p1)] x arrival rate + (display position based on first preset related information p1) ⁇ (Formula 1) Note that the display position is position information on the screen, as shown in FIG.
  • the video processing unit 50 generates the video stream Is so that the video is displayed at the layout position calculated by (Equation 1) (step S29).
  • the second preset related information p2 includes information instructing to output a video different from the video captured by the imaging device 80a during parameter change, and information instructing to change this different video. It is included. Therefore, the information processing device 2 outputs a video that is different from the video captured by the imaging device 80a while changing the video. For example, while the parameters are being changed, as shown in FIGS. 12(b) and 12(c), an animation video that is slightly different from the video captured by the imaging device 80a is displayed so as to gradually change greatly toward the center.
  • the imaging device 80a When the imaging device 80a enters the parameter setting state based on the second preset related information p2, that is, when the parameter change is completed (step S31), it outputs a change completion signal s3 to the information processing device 2 (step S32).
  • the parameter control unit 20 of the information processing device 2 determines whether or not it has received the change completion signal s3 output from the imaging device 80a (step S40A).
  • step S41 Upon receiving the change completion signal s3 (Yes in S40A), the parameter control unit 20 outputs a switching permission signal s4 to the video processing unit 50 (step S41). Note that if the change completion signal s3 is not received in step S40A (No in S40A), the process returns to step S27.
  • the video processing unit 50 switches and outputs the video stream Is output from the information processing device 2 (step S42).
  • the right half region of the video stream Is is switched to the video imaged by the imaging device 80a.
  • the imaging device 80a is in a state to capture a picture of a face, and the image captured by the imaging device 80a is displayed on the right screen of the display device 99.
  • the video processing unit 50 changes the parameters by using a video different from the video captured by the imaging device 80a, after outputting the preset setting signal s1 until receiving the switching permission signal s4.
  • a video stream Is that changes depending on the degree is generated. According to this configuration, it is possible to provide the information processing device 2 that outputs the video stream Is while changing it according to the degree of parameter change.
  • the information processing device 2 provides information for outputting a video stream Is using video captured by the imaging device 80 that can change at least one parameter among panning, tilting, and zooming.
  • the processing device includes a parameter control unit 20 that controls parameters of the imaging device 80.
  • the parameter control unit 20 instructs the imaging device 80 to change parameters, and when the parameter change of the imaging device 80 is completed, a switching permission that allows switching of the video stream Is output from the information processing device 2.
  • the video stream Is can be switched after changing the parameters of the imaging device 80. Thereby, it is possible to appropriately switch the video stream Is.
  • the parameter control unit 20 also outputs a parameter signal s2 that instructs the imaging device 80 to change a parameter, and a parameter output unit 21 that outputs a parameter signal s2 that instructs the imaging device 80 to change a parameter. It may also include a permission signal output unit 23 that outputs a switching permission signal s4 by receiving a change completion signal s3 indicating that the change has been completed.
  • the switching permission signal s4 can be output after reliably confirming that the parameters of the imaging device 80 have been changed. Thereby, it is possible to appropriately switch the video stream Is.
  • the information processing device 2 further includes a video processing unit 50 that generates a video stream Is using the video captured by the imaging device 80.
  • the parameter control section 20 outputs a switching permission signal s4 to the video processing section 50.
  • the video processing unit 50 may switch the video stream Is output from the information processing device 2 based on the switching permission signal s4.
  • the video processing unit 50 can appropriately switch the video stream Is.
  • the video processing unit 50 also outputs a preset setting signal s1 including information regarding the parameters to the parameter control unit 20, and the parameter control unit 20 instructs the imaging device 80 to change the parameters based on the preset setting signal s1. You may give instructions.
  • the video processing unit 50 can appropriately switch the video stream Is.
  • the information processing device 2 further includes a storage unit 60 that stores parameters.
  • the video processing section 50 may read the parameters stored in the storage section 60 and output the preset setting signal s1 including information regarding the parameters.
  • the video processing unit 50 can appropriately switch the video stream Is.
  • the video processing unit 50 may generate the video stream Is using a video different from the video captured by the imaging device 80, after outputting the preset setting signal s1 until receiving the switching permission signal s4.
  • the image different from the image captured by the imaging device 80 may be a mask image.
  • the information processing device 2 further includes a video processing unit 50 that generates a video stream Is using the video captured by the imaging device 80. Regarding switching of the video stream Is output from the information processing device 2, the video processing unit 50 selects whether or not to use the switching permission signal s4, and when it is selected not to use the switching permission signal s4, the image processing unit 50 performs imaging
  • the video stream Is may be generated using a video captured while the device 80 is changing the parameters.
  • the information processing device 2 also acquires information regarding the degree of parameter change when the imaging device 80 is changing the parameter, and determines the layout of the video on the display screen on which the video is displayed according to the degree of parameter change. The position may be calculated and the video stream Is may be generated so that the video is displayed at the layout position.
  • the degree of parameter change may be the rate of arrival at the target position based on the position before the parameter change.
  • the parameter output unit 21 outputs a parameter signal s2 corresponding to each of the plurality of imaging devices 80 to each of the plurality of imaging devices 80
  • the permission signal output unit 23 outputs a parameter signal s2 corresponding to each of the plurality of imaging devices 80.
  • the video stream Is can be switched according to changes in the parameters of each of the plurality of imaging devices 80. Thereby, it is possible to appropriately switch the video stream Is.
  • the information processing device 2 further includes a decoding unit 30 into which video information obtained by encoding the video captured by the imaging device 80 is input.
  • the decoding unit 30 may decode each of the plurality of video information captured by the plurality of imaging devices 80 and output the plurality of decoded videos to the video processing unit 50.
  • the video stream Is can be switched using a plurality of videos output from the decoding section 30. Thereby, it is possible to appropriately switch the video stream Is.
  • the information processing system 1 includes an imaging device 80 that can change at least one parameter among panning, tilting, and zooming, a parameter control unit 20 that controls parameters of the imaging device 80, and an imaging device 80 that controls parameters of the imaging device 80. and a video processing unit 50 that outputs a video stream Is using the video imaged by.
  • the parameter control unit 20 instructs the imaging device 80 to change the parameters, and when the parameter change of the imaging device 80 is completed, the parameter control unit 20 provides a switching permission that allows switching of the video stream Is output from the video processing unit 50.
  • the signal s4 is output to the video processing section 50.
  • the video processing unit 50 switches the video stream Is based on the switching permission signal s4.
  • the video stream Is can be switched after changing the parameters of the imaging device 80. Thereby, it is possible to appropriately switch the video stream Is.
  • a method for controlling the information processing device 2 is an information processing device that outputs a video stream Is using a video imaged by an imaging device 80 that can change at least one parameter among panning, tilting, and zooming. This is a control method.
  • the method for controlling the information processing device 2 includes the steps of outputting a parameter signal s2 that instructs the imaging device 80 to change the parameters, and outputting the parameter signal s2 from the information processing device 2 when the parameter change of the imaging device 80 is completed. outputting a switching permission signal s4 that permits switching of the video stream Is to be performed.
  • the video stream Is can be switched after changing the parameters of the imaging device 80, so the video stream Is can be switched appropriately.
  • the method for controlling the information processing device 2 may further include the step of switching the video stream Is based on the switching permission signal s4.
  • the method for controlling the information processing device 2 further includes the step of reading the parameters stored in the storage unit 60 and outputting the preset setting signal s1 including information regarding the parameters.
  • the parameter signal s2 may be output in response to the output of the preset setting signal s1.
  • the method for controlling the information processing device 2 further includes the step of outputting a video different from the video captured by the imaging device 80 from when the preset setting signal s1 is output to when the switching permission signal s4 is received. Good too.
  • the method for controlling the information processing device 2 further includes a step of selecting whether or not to use the switching permission signal s4 regarding switching of the video stream Is output from the information processing device 2;
  • the process may also include a step of generating the video stream Is using the video imaged by the imaging device 80 while changing the parameters when it is selected not to use the switching permission signal s4.
  • the method for controlling the information processing device 2 further includes the step of acquiring information regarding the degree of parameter change when the imaging device 80 is changing the parameter, and displaying the video according to the degree of parameter change.
  • the method may include the steps of calculating the layout position of the video on the display screen and generating the video stream Is so that the video is displayed at the layout position.
  • the parameter control unit 20 outputs the switching permission signal s4 to the video processing unit 50 based on the change completion signal s3 output from the imaging device 80, but the present invention is not limited thereto.
  • the imaging device 80 has a configuration that outputs the position coordinates of its own parameters to the parameter control unit 20, the parameter control unit 20 determines whether the parameter change is completed based on the position coordinates.
  • the switching permission signal s4 may be output to the video processing unit 50 when the change is completed.
  • General or specific aspects of the present disclosure may be implemented in a system, apparatus, method, integrated circuit, computer program, or computer readable storage medium such as a CD-ROM. Further, the present invention may be realized by any combination of a system, an apparatus, a method, an integrated circuit, a computer program, and a recording medium.
  • each component for example, a processing unit such as a control unit
  • each component is configured with dedicated hardware, or is realized by executing a software program suitable for each component.
  • Each component may be realized by a program execution unit such as a CPU (Central Processing Unit) or a processor reading and executing a software program recorded on a recording medium such as a hard disk or a semiconductor memory.
  • each component may be a circuit (or an integrated circuit). These circuits may constitute one circuit as a whole, or may be separate circuits. Further, each of these circuits may be a general-purpose circuit or a dedicated circuit.
  • the information processing device and the like of the present disclosure can be used as a switcher device for switching video streams.
  • Information processing system 2 Information processing device 10
  • Communication unit 20 Parameter control unit 21
  • Parameter output unit 23 Permission signal output unit 30
  • Decoding unit 50 Video processing unit 60
  • Storage unit 70 Terminal devices 80, 80a, 80b, 80c Imaging device 81
  • Communication unit 82 PTZ drive section 83
  • Camera section 84 Encoding section 99

Abstract

情報処理装置は、パン、チルトおよびズームのうちの少なくとも1つのパラメータを変更可能な撮像装置で撮像した映像を用いて映像ストリームを出力する情報処理装置であって、撮像装置の少なくとも1つのパラメータを制御するパラメータ制御部を備える。パラメータ制御部は、撮像装置に対して少なくとも1つのパラメータの変更を指示し、撮像装置の少なくとも1つのパラメータの変更が完了した場合に、情報処理装置から出力される映像ストリームの切り替えを許可する切替許可信号を出力する。

Description

情報処理装置、情報処理システムおよび情報処理装置の制御方法
 本開示は、映像ストリームを出力する情報処理装置、情報処理システムおよび情報処理装置の制御方法に関する。
 従来、カメラで撮像した映像を用いて映像ストリームを出力する情報処理装置が知られている(例えば特許文献1参照)。このような情報処理装置では、カメラで撮像した様々なシーンに応じて、情報処理装置から出力される映像ストリームの切り替えが行われる。
特開2011-91760号公報
 しかしながら、特許文献1に開示された情報処理装置では、映像ストリームの切り替えを適切に行えないことがある。
 そこで、本開示は、映像ストリームの切り替えを適切に行うことができる情報処理装置等を提供する。
 本開示の一態様に係る情報処理装置は、パン、チルトおよびズームのうちの少なくとも1つのパラメータを変更可能な撮像装置で撮像した映像を用いて映像ストリームを出力する情報処理装置であって、前記撮像装置の前記少なくとも1つのパラメータを制御するパラメータ制御部を備え、前記パラメータ制御部は、前記撮像装置に対して前記少なくとも1つのパラメータの変更を指示し、前記撮像装置の前記少なくとも1つのパラメータの変更が完了した場合に、前記情報処理装置から出力される前記映像ストリームの切り替えを許可する切替許可信号を出力する。
 本開示の一態様に係る情報処理システムは、パン、チルトおよびズームのうちの少なくとも1つのパラメータを変更可能な撮像装置と、前記撮像装置の前記少なくとも1つのパラメータを制御するパラメータ制御部と、前記撮像装置で撮像した映像を用いて映像ストリームを出力する映像処理部と、を備え、前記パラメータ制御部は、前記撮像装置に対して前記少なくとも1つのパラメータの変更を指示し、前記撮像装置の前記少なくとも1つのパラメータの変更が完了した場合に、前記映像処理部から出力される前記映像ストリームの切り替えを許可する切替許可信号を前記映像処理部へ出力し、前記映像処理部は、前記切替許可信号に基づいて前記映像ストリームを切り替える。
 本開示の一態様に係る情報処理装置の制御方法は、パン、チルトおよびズームのうちの少なくとも1つのパラメータを変更可能な撮像装置で撮像した映像を用いて映像ストリームを出力する情報処理装置の制御方法であって、前記撮像装置に対して、前記少なくとも1つのパラメータの変更を指示するパラメータ信号を出力するステップと、前記撮像装置の前記少なくとも1つのパラメータの変更が完了した場合に、前記情報処理装置から出力される前記映像ストリームの切り替えを許可する切替許可信号を出力するステップと、を含む。
 本開示の情報処理装置等によれば、映像ストリームの切り替えを適切に行うことができる。
比較例の情報処理システムを示す図である。 比較例の情報処理システムの制御方法を示すラダー図である。 実施の形態に係る情報処理システムの制御方法を示すラダー図である。 実施の形態に係る情報処理システムおよび情報処理装置を示すブロック構成図である。 情報処理装置の記憶部に記憶されているプリセット関連情報を示す図である。 実施の形態に係る情報処理システムの動作の一例を示す図である。 実施の形態に係る情報処理装置の制御方法を示すフローチャートである。 実施の形態の変形例1に係る情報処理システムの動作の一例を示す図である。 実施の形態の変形例1に係る情報処理装置の制御方法を示すフローチャートである。 実施の形態の変形例2に係る情報処理システムの動作の一例を示す図である。 実施の形態の変形例2に係る情報処理装置の制御方法を示すフローチャートである。 実施の形態の変形例3に係る情報処理システムの動作の一例を示す図である。 実施の形態の変形例3に係る情報処理装置の制御方法を示すフローチャートである。
 (本開示に至る経緯)
 本開示に至る経緯について、図1~図3を参照しながら説明する。
 図1は、比較例の情報処理システム101を示す図である。図2は、比較例の情報処理システム101の制御方法を示すラダー図である。
 図1に示すように、比較例の情報処理システム101は、複数のPTZカメラ180と、複数のPTZカメラ180で撮像した映像を用いて映像ストリームを出力する情報処理装置102と、を備えている。この情報処理システム101では、PTZカメラ180のパン(pan)、チルト(tilt)、ズーム(zoom)などのパラメータを変更することで様々なシーンの撮像が行われ、各シーンに応じた映像ストリームが出力される。
 上記のパラメータを変更する場合、情報処理システム101を利用するユーザは、端末装置170を用いて、図2に示すように、PTZカメラ180に対してパラメータの変更を指示する信号を出力する。そしてユーザは、PTZカメラ180のパラメータの変更が終了したことを目視で確認して、情報処理装置102から出力される映像ストリームの切り替え操作を行う。比較例では、パラメータの変更が完了したか否かを目視によって確認するため、映像ストリームの切り替え操作のタイミングが遅くなったり、または、早くなったりするという問題がある。
 図3は、実施の形態に係る情報処理システム1の制御方法を示すラダー図である。
 実施の形態に係る情報処理システム1は、複数の撮像装置80と、複数の撮像装置80で撮像した映像を用いて映像ストリームを出力する情報処理装置2と、を備えている。図3に示すように、情報処理装置2は、端末装置70のスイッチング信号に基づいて、撮像装置80に対してパラメータの変更を指示し、撮像装置80のパラメータの変更が完了した場合に、情報処理装置2から出力される映像ストリームの切り替えを許可する。この構成によれば、情報処理装置2から出力される映像ストリームを適切に切り替えることができる。
 以下、実施の形態等について、図面を参照しながら説明する。以下で説明する実施の形態等は、いずれも包括的または具体的な例を示すものである。以下の実施の形態等で示される数値、形状、材料、構成要素、構成要素の配置位置および接続形態、ステップ、ステップの順序などは、一例であり、本開示を限定する主旨ではない。また、以下の実施の形態等における構成要素のうち、独立請求項に記載されていない構成要素については、任意の構成要素として説明される。
 また、各図は模式図であり、必ずしも厳密に図示されたものではない。また、各図において、実質的に同一の構成に対しては同一の符号を付し、重複する説明は省略または簡略化される場合がある。また、各図において、同一の物体を図示している場合であっても、便宜上、縮尺を変更している場合がある。
 また、本明細書において、一致、等しい、平行などの要素間の関係性を示す用語、および、板状、矩形状などの要素の形状を示す用語、並びに、数値、および、数値範囲は、厳格な意味のみを表す表現ではなく、実質的に同等な範囲、例えば数%程度の差異をも含むことを意味する表現である。
 (実施の形態)
 [情報処理システムの構成]
 実施の形態に係る情報処理システムの構成について、図4および図5を参照しながら説明する。
 図4は、実施の形態に係る情報処理システム1および情報処理装置2を示すブロック構成図である。図4には、映像ストリームIsの出力先である表示装置99も示されている。表示装置99は、例えば、ディスプレイ装置、プロジェクタまたはパーソナルコンピュータである。
 情報処理システム1は、情報処理装置2と、端末装置70と、複数の撮像装置80a、80bおよび80cと、を備えている。
 情報処理装置2と複数の撮像装置80a~80cとは、情報ネットワークおよびネットワークスイッチを介して通信接続されている。情報処理装置2および複数の撮像装置80a~80cは、IP(Internet Protocol)信号を用いて双方向通信を行う。情報処理装置2と複数の撮像装置80a~80cとの通信は、無線通信であってもよいし、有線通信であってもよい。
 情報処理装置2は、撮像装置80で撮像した映像を用いて映像ストリームIsを出力する装置である。なお、映像ストリームIsとは、2つ以上の連続した画像を含むデータである。映像ストリームIsの中には、1つの撮像装置80aで撮像した映像だけでなく、複数の撮像装置80a~80cで撮像した映像が含まれていてもよい。
 撮像装置80a~80cのそれぞれは、パン、チルトおよびズームのうちの少なくとも1つのパラメータを変更可能な撮像装置である。
 撮像装置80a~80cは、通信部81、PTZ駆動部82、カメラ部83およびエンコード部84を有している。撮像装置80a~80cは、例えばPTZカメラであり、カメラ部83のパン、チルトおよびズームの各位置座標を変更して撮像可能である。なお、撮像装置は、3つに限られず1つ、2つまたは4つ以上であってもよい。以下、撮像装置の1つまたは全部を指して撮像装置80と呼ぶ場合がある。
 撮像装置80は、例えば、研修会場、講演会場、イベント会場などを備える施設に設置される。撮像装置80は、会場内の台座、壁、天井などに固定された状態で、情報処理装置2によって遠隔操作される。
 通信部81は、通信モジュールであり、情報ネットワークおよびネットワークスイッチを介して情報処理装置2と通信する。通信部81は、情報処理装置2から送信された信号を受信してPTZ駆動部82へ出力する。また、通信部81は、PTZ駆動部82から出力された信号を受け付けて情報処理装置2へ送信する。また、通信部81は、エンコード部84から出力された信号を受け付けて情報処理装置2へ送信する。
 PTZ駆動部82は、カメラ部83をパン方向、チルト方向およびズーム方向に移動させる駆動機構を有している。駆動機構は、例えばモータであり、カメラ部83をパン方向に360°移動可能とし、チルト方向に90°移動可能とし、ズーム方向に100mm移動可能とする。また、PTZ駆動部82は、パン、チルトおよびズームのそれぞれのパラメータの位置座標を検出可能なセンサを有し、パラメータの変更が完了したか否かを判断する機能を有している。
 PTZ駆動部82は、情報処理装置2からパラメータの変更を指示するパラメータ信号s2を受け付けた場合に、パラメータ信号s2に基づいてパラメータの変更を行う。具体的には、PTZ駆動部82は、パラメータ信号s2を受け付けた場合に、パン、チルトおよびズームのうちの少なくとも1つを変更するように、カメラ部83を移動させる。また、PTZ駆動部82は、上記のパラメータの変更が完了した場合に、パラメータの変更が完了したことを示す変更完了信号s3を、通信部81を介して情報処理装置2へ出力する。
 カメラ部83は、様々なシーンを撮像するための検出器であり、可視光または近赤外光を検出する。カメラ部83による撮像は、情報処理システム1の稼働中において常時実行される。カメラ部83で撮像した映像は、エンコード部84に出力される。
 エンコード部84は、カメラ部83から出力された映像を所定の形式でエンコード(符号化)処理する。エンコード処理された映像情報は、通信部81を介して情報処理装置2へ出力される。
 情報処理システム1の端末装置70は、無線通信または有線通信によって情報処理装置2と接続されている。端末装置70は、ユーザインタフェースであり、ユーザから受け付けた操作入力に基づく指令を情報処理装置2へ出力する。端末装置70は、撮像装置80のパラメータに関する情報を含むプリセット関連情報を情報処理装置2に書き込んで記憶させることができる。また、端末装置70は、情報処理装置2に記憶されているプリセット関連情報を読み出すこともできる。プリセット関連情報については後述する。
 端末装置70は、ユーザの所定の操作入力により、情報処理装置2から出力される映像ストリームIsを切り替えるためのスイッチング信号s0を情報処理装置2へ出力する。情報処理装置2は、端末装置70から出力されたスイッチング信号s0を受け付けると、映像ストリームIsの切り替えを開始する。情報処理装置2は、映像ストリームIsの切り替えを適切に行うために、以下に示す構成を備えている。
 [情報処理装置の構成]
 実施の形態に係る情報処理装置2の構成について説明する。
 図4に示すように、情報処理装置2は、通信部10、パラメータ制御部20、デコード部30、映像処理部50および記憶部60を備えている。パラメータ制御部20、デコード部30および映像処理部50は、プロセッサまたはマイクロコンピュータなどによって構成される。
 通信部10は、通信モジュールであり、情報ネットワークおよびネットワークスイッチを介して撮像装置80と通信する。通信部10は、パラメータ制御部20から出力されたパラメータ信号s2を受け付けて撮像装置80へ送信する。また、通信部10は、撮像装置80から送信された変更完了信号s3を受け付けてパラメータ制御部20へ出力する。また、通信部10は、撮像装置80から送信された映像情報を含む信号を受け付けて、デコード部30へ出力する。
 デコード部30には、撮像装置80で撮像された映像をエンコード処理した映像情報が入力される。デコード部30は、撮像装置80で符号化された映像情報をその符号化形式に応じてデコード(復号化)処理する。撮像装置80が複数の場合、デコード部30は、複数の撮像装置80で符号化された複数の映像情報のそれぞれをデコード処理して、複数の映像情報に応じた複数の映像を映像処理部50へ出力する。
 パラメータ制御部20は、撮像装置80のパン、チルトおよびズームのうちの少なくとも1つのパラメータを制御する。また、パラメータ制御部20は、撮像装置80に対してパラメータの変更を指示し、撮像装置80のパラメータの変更が完了した場合に、情報処理装置2から出力される映像ストリームIsの切り替えを許可する切替許可信号s4を出力する。
 パラメータ制御部20は、パラメータ出力部21および許可信号出力部23を有している。パラメータ出力部21および許可信号出力部23の各機能は、記憶部60に格納されたソフトウェアプログラムを実行することで実現される。
 パラメータ出力部21は、撮像装置80に対して、パラメータの変更を指示するパラメータ信号s2を出力する。パラメータ信号s2には、撮像装置80のパラメータに関する情報を含むプリセット関連情報が含まれている。
 図5は、情報処理装置2の記憶部60に記憶されているプリセット関連情報を示す図である。
 記憶部60は、例えば、フラッシュメモリ等の不揮発性の記憶装置等である。記憶部60には、情報処理装置2によって実行されるソフトウェアプログラム、および、プリセット情報が記憶されている。
 図5に示すように、記憶部60には、シーン情報、ソース情報、レイアウト情報およびプリセット情報が紐づけられた状態で記憶されている。本実施の形態では、シーン情報、ソース情報、レイアウト情報およびプリセット情報などをまとめてプリセット関連情報と呼ぶ。
 シーン情報は、会場にて催される様々なシーンを示す情報である。例えば、オンライン授業が開催されている会場では、教師が教壇に立って話しているシーン、ホワイドボードに記載された文字を映し出すシーン、生徒が教師の話を聞いているシーン、生徒の一人が発言しているシーンなどのシーンが存在する。1つのシーン情報には、1つまたは複数のソース情報が紐づけされている。
 ソース情報は、撮像装置80の識別情報、および、撮像装置80の仕様に関する情報である。例えば、撮像装置80の識別情報は、撮像装置80の名称およびIP情報であり、撮像装置80の仕様に関する情報は、撮像装置80の横縦の画素数である。1つのソース情報には、1つのレイアウト情報および1つのプリセット情報が紐づけされている。
 レイアウト情報は、レイヤー、表示位置、表示サイズおよび透過率に関する情報である。レイヤーは、撮像装置80で撮像した映像を、映像ストリームIsを構成する複数のレイヤーのうちのどのレイヤーに置くかを示す情報である。表示位置は、表示画面における映像の横縦の位置座標を示す情報である。この例では、表示画面の左上を0として座標が決められる。表示サイズは、表示画面における映像の大きさを示す情報である。透過率は、表示画面における透過率を示す情報である。この例では、透過率が0%である場合は下層に存在する画像が見えないことを示している。これらのレイアウト情報は、ソース情報ごとに予め決められている。
 プリセット情報は、撮像装置80のパラメータであるパン、チルトおよびズームの位置座標に関する情報を有している。また、プリセット情報には、撮像した映像と異なる映像を出力するか否か、切替許可信号s4を利用して情報処理装置2から出力される映像ストリームIsを切り替えるか否か、画面に出力する映像を変化させるか否かなどを示す情報が含まれている。また、プリセット情報には、後述するマスク映像、アニメーション映像が含まれている。プリセット情報には、撮像装置80のパラメータとして、フォーカスおよびアイリスに関する情報が含まれていてもよい。
 映像処理部50は、端末装置70から出力されたスイッチング信号s0を受け付けると、記憶部60に記憶されたプリセット関連情報を読み出し、プリセット関連情報を含むプリセット設定信号s1をパラメータ出力部21へ出力する。情報処理装置2では、このプリセット設定信号s1の出力によって、映像ストリームIsの切り替え動作が開始される。
 パラメータ出力部21は、映像処理部50から出力されたプリセット設定信号s1に基づいて、パラメータに関する情報を含むパラメータ信号s2を撮像装置80へ出力する。パラメータ信号s2は、複数の撮像装置80のそれぞれに対応して出力される。前述した撮像装置80では、パラメータ信号s2に基づいてパラメータの変更が行われる。
 許可信号出力部23は、パラメータ信号s2に基づいてパラメータを変更した撮像装置80から変更完了信号s3を受け付けることで、情報処理装置2から出力される映像ストリームの切り替えを許可する切替許可信号s4を出力する。例えば、許可信号出力部23は、複数の撮像装置80のうちの少なくとも1つから変更完了信号s3を受け付けると、変更完了信号s3を出力した撮像装置80に対応する切替許可信号s4を映像処理部50へ出力する。
 映像処理部50は、撮像装置80が撮像した映像を用いて映像ストリームIsを生成する。映像ストリームIsは、予め決められた配信形式に基づいて生成される。
 また、映像処理部50は、許可信号出力部23から出力された切替許可信号s4に基づいて、情報処理装置2から出力される映像ストリームIsを切り替える。情報処理装置2から出力された映像ストリームIsは、表示装置99に入力され、表示装置99にて映し出される。
 本実施の形態に係る情報処理装置2は、撮像装置80のパラメータの変更が完了した場合に、情報処理装置2から出力される映像ストリームの切り替えを許可する切替許可信号s4を出力する。この構成によれば、撮像装置80のパラメータを変更してから映像ストリームIsを切り替えることができるので、映像ストリームIsの切り替えを適切に行うことができる。
 [情報処理システムの動作]
 情報処理システム1の動作について、図6および図7を参照しながら説明する。
 図6は、実施の形態に係る情報処理システム1の動作の一例を示す図である。図7は、実施の形態に係る情報処理装置2の制御方法を示すフローチャートである。なお図7には、端末装置70および撮像装置80も示されている。
 この例では、表示装置99のマルチビュー画面のうち、右画面を撮像装置80cによる映像から撮像装置80aによる映像に切り替える例について説明する。なお、左画面には、撮像装置80bによる映像が継続的に映されている。
 図6の(a)に示すように、初めは、右画面に撮像装置80cによる映像が映し出される。このとき撮像装置80aは、第1のプリセット関連情報p1に基づくパラメータ設定となっている。撮像装置80aは、太陽の絵を撮像する状態となっているが、撮像装置80aによる映像は画面に映し出されていない。
 端末装置70は、ユーザから所定の操作入力を受け付けると、映像ストリームIsを切り替えるためのスイッチング信号s0を情報処理装置2の映像処理部50へ出力する(ステップS10)。このスイッチング信号s0には、撮像装置80aが第2のプリセット関連情報p2に基づくパラメータ設定となるように指示する情報が含まれている。
 情報処理装置2の映像処理部50は、スイッチング信号s0に基づいて、記憶部60に記憶されている第2のプリセット関連情報p2を読み出し、第2のプリセット関連情報p2を含むプリセット設定信号s1をパラメータ制御部20へ出力する(ステップS20)。パラメータ制御部20は、プリセット設定信号s1に基づいて、第2のプリセット関連情報p2を含むパラメータ信号s2を撮像装置80aへ出力する(ステップS21)。なお、パラメータ制御部20は、少なくとも変更完了信号s3を受け付けるまでは、第2のプリセット関連情報p2を保存している。
 撮像装置80aは、パラメータ信号s2を受け付けると、PTZ駆動部82を駆動させてパラメータを変更させる(ステップS30)。具体的には、撮像装置80aは、自身が第2のプリセット関連情報p2に基づくパラメータ設定となるように、PTZ駆動部82を駆動させる。
 なお、第2のプリセット関連情報p2には、パラメータの変更中は撮像装置80aによる映像を出力せず、パラメータの変更後に撮像装置80aによる映像を出力するように指示する情報が含まれている。したがって、パラメータの変更中は、図6の(b)に示すように、映像が切り替えられておらず、図6の(a)と同様に、右画面に撮像装置80cによる映像が映し出される。
 撮像装置80aは、第2のプリセット関連情報p2に基づくパラメータ設定状態になると、すなわち、パラメータの変更が完了すると(ステップS31)、変更完了信号s3を情報処理装置2へ出力する(ステップS32)。なお、変更完了信号s3は、パン、チルトおよびズームの全てのパラメータの変更が完了したときに出力される。
 情報処理装置2のパラメータ制御部20は、撮像装置80aから出力された変更完了信号s3を受け付けたか否かを判断する(ステップS40)。パラメータ制御部20は、変更完了信号s3を受け付けていないと(S40にてNo)、ステップS40に戻り、変更完了信号s3を受け付けると(S40にてYes)、切替許可信号s4を映像処理部50へ出力する(ステップS41)。
 映像処理部50は、切替許可信号s4を受け付けると、情報処理装置2から出力される映像ストリームIsを切り替えて出力する(ステップS42)。この例では、映像ストリームIsの右半分の領域が、撮像装置80aによって撮像された映像となるように切り替えられる。図6の(c)に示すように、撮像装置80aは、顔の絵を撮像する状態となっており、表示装置99の右画面には、撮像装置80aによって撮像された映像が映し出される。
 本実施の形態に係る情報処理装置2の制御方法は、撮像装置80に対して、パラメータの変更を指示するパラメータ信号s2を出力するステップと、撮像装置80のパラメータの変更が完了した場合に、情報処理装置2から出力される映像ストリームIsの切り替えを許可する切替許可信号s4を出力するステップと、を含む。この制御方法によれば、撮像装置80のパラメータを変更してから映像ストリームIsを切り替えることができるので、映像ストリームIsの切り替えを適切に行うことができる。
 (実施の形態の変形例1)
 実施の形態の変形例1に係る情報処理装置2について説明する。この変形例では、撮像装置80がパラメータを変更しているときに、撮像装置80で撮像した映像と異なる映像を出力する例について説明する。
 変形例1に係る情報処理装置2は、実施の形態と同様に、通信部10、パラメータ制御部20、デコード部30、映像処理部50および記憶部60を備えている。
 変形例1の情報処理装置2は、撮像装置80がパラメータを変更しているときに、撮像装置80で撮像した映像と異なる映像を出力する。具体的には、映像処理部50は、プリセット設定信号s1を出力してから切替許可信号s4を受け付けるまでの間、撮像装置80で撮像した映像と異なる映像を用いて映像ストリームIsを生成する。撮像装置80で撮像した映像と異なる映像は、例えば、静止画または動画のマスク映像である。マスク映像は、単色であってもよいし、有彩色または無彩色であってもよい。
 映像処理部50が、撮像装置80がパラメータを変更しているときに、撮像装置80で撮像した映像と異なる映像を出力するか否かは、前述したプリセット情報として記憶部60に記憶されている(図5参照)。なお、異なる映像を出力するか否かを示す情報が端末装置70から出力されたスイッチング信号s0に含まれている場合、映像処理部50は、スイッチング信号s0に基づいて、撮像装置80で撮像した映像と異なる映像を出力するか否かを選択してもよい。
 図8は、実施の形態の変形例1に係る情報処理システム1の動作の一例を示す図である。図9は、実施の形態の変形例1に係る情報処理装置2の制御方法を示すフローチャートである。
 この例では、表示装置99のマルチビュー画面のうち、右画面を撮像装置80aによる映像とした状態で、撮像装置80aのパラメータを変更する例について説明する。なお、左画面には、撮像装置80bによる映像が継続的に映されている。
 図8の(a)に示すように、初めは、右画面に撮像装置80aによる映像が映し出される。このとき撮像装置80aは、第1のプリセット関連情報p1に基づくパラメータ設定となっており、例えば、太陽の絵を撮像する状態となっている。
 端末装置70は、ユーザから所定の操作入力を受け付けると、映像ストリームIsを切り替えるためのスイッチング信号s0を情報処理装置2へ出力する(ステップS10)。このスイッチング信号s0には、撮像装置80aが第2のプリセット関連情報p2に基づくパラメータ設定となるように指示する情報が含まれている。
 情報処理装置2の映像処理部50は、スイッチング信号s0に基づいて、記憶部60に記憶されている第2のプリセット関連情報p2を読み出し、第2のプリセット関連情報p2を含むプリセット設定信号s1をパラメータ制御部20へ出力する(ステップS20)。パラメータ制御部20は、プリセット設定信号s1に基づいて、第2のプリセット関連情報p2を含むパラメータ信号s2を撮像装置80aへ出力する(ステップS21)。
 撮像装置80aは、パラメータ信号s2を受け付けると、PTZ駆動部82を駆動させてパラメータを変更させる(ステップS30)。具体的には、撮像装置80aは、自身が第2のプリセット関連情報p2に基づくパラメータ設定となるように、PTZ駆動部82を駆動させる。
 パラメータの変更中において情報処理装置2は、パラメータの変更中に撮像装置80aで撮像した映像を表示させるか否かを判断する(ステップS24)。情報処理装置2は、撮像した映像を表示させると判断した場合(S24にてYes)、撮像装置80aで撮像した映像を用いて映像ストリームIsを出力する準備を行うためステップS40へ進む。一方、情報処理装置2は、映像を表示させないと判断した場合(S24にてNo)、次のステップへ進む。
 この例では、第2のプリセット関連情報p2に、パラメータの変更中は撮像装置80aで撮像した映像と異なる映像を出力するように指示する情報が含まれている。したがって、情報処理装置2は、撮像装置80aで撮像した映像と異なる映像を出力する(ステップS25)。例えば、パラメータの変更中は、図8の(b)に示すように、撮像装置80で撮像した映像と異なるマスク映像が映し出される。
 撮像装置80aは、第2のプリセット関連情報p2に基づくパラメータ設定状態になると、すなわち、パラメータの変更が完了すると(ステップS31)、変更完了信号s3を情報処理装置2へ出力する(ステップS32)。
 情報処理装置2のパラメータ制御部20は、撮像装置80aから出力された変更完了信号s3を受け付けたか否かを判断する(ステップS40)。パラメータ制御部20は、変更完了信号s3を受け付けると、切替許可信号s4を映像処理部50へ出力する(ステップS41)。
 映像処理部50は、切替許可信号s4を受け付けると、情報処理装置2から出力される映像ストリームIsを切り替えて出力する(ステップS42)。この例では、映像ストリームIsの右半分の領域が、撮像装置80aによって撮像された映像となるように切り替えられる。図8の(c)に示すように、撮像装置80aは、顔の絵を撮像する状態となっており、表示装置99の右画面には、撮像装置80aによって撮像された映像が映し出される。
 このように変形例1では、映像処理部50が、プリセット設定信号s1を出力してから切替許可信号s4を受け付けるまでの間、撮像装置80aで撮像した映像と異なる映像を用いて映像ストリームIsを生成する。この構成によれば、例えばユーザの要求に応じて、パラメータの変更中の映像を映像ストリームIsとして出力しないようにすることが可能となる。これにより、映像ストリームIsの切り替えを適切に行うことができる。
 (実施の形態の変形例2)
 実施の形態の変形例2に係る情報処理装置2について説明する。この変形例では、パラメータ制御部20から出力された切替許可信号s4を利用して映像ストリームIsを切り替えるか否かを選択する例について説明する。
 変形例2に係る情報処理装置2は、実施の形態と同様に、通信部10、パラメータ制御部20、デコード部30、映像処理部50および記憶部60を備えている。
 変形例2の映像処理部50は、切替許可信号s4を利用して、情報処理装置2から出力される映像ストリームIsを切り替えるか否かを選択する。そして映像処理部50は、切替許可信号s4を利用しないことを選択した場合に、撮像装置80がパラメータを変更中に撮像した映像を用いて映像ストリームIsを生成する。
 映像処理部50が、切替許可信号s4を利用して、情報処理装置2から出力される映像ストリームIsを切り替えるか否かは、前述したプリセット情報として記憶部60に記憶されている(図5参照)。なお、切替許可信号s4を利用して映像ストリームIsを切り替えるか否かを示す情報が端末装置70から出力されたスイッチング信号s0に含まれている場合、映像処理部50は、スイッチング信号s0に基づいて、切替許可信号s4を利用して切り替えるか否かを選択してもよい。
 図10は、実施の形態の変形例2に係る情報処理システム1の動作の一例を示す図である。図11は、実施の形態の変形例2に係る情報処理装置2の制御方法を示すフローチャートである。
 この例では、表示装置99のマルチビュー画面のうち、右画面を撮像装置80aによる映像とした状態で撮像装置80aのパラメータを変更する例、および、左画面を撮像装置80cによる映像から撮像装置80bによる映像に切り替える例について説明する。
 図10の(a)に示すように、初めは、右画面に撮像装置80aによる映像が映し出され、左画面に撮像装置80cによる映像が映し出される。このとき撮像装置80aは、第1のプリセット関連情報p1に基づくパラメータ設定となっており、例えば、太陽の絵を撮像する状態となっている。撮像装置80bは、第3のプリセット関連情報p3に基づくパラメータ設定となっており、例えば、月の絵を撮像する状態となっている。なおこの時点では、撮像装置80bによる映像は左画面に映し出されていない。
 端末装置70は、ユーザから所定の操作入力を受け付けると、映像ストリームIsを切り替えるためのスイッチング信号s0を情報処理装置2へ出力する(ステップS10)。このスイッチング信号s0には、撮像装置80aが第2のプリセット関連情報p2に基づくパラメータ設定となるように指示する情報、および、撮像装置80bが第4のプリセット関連情報p4に基づくパラメータ設定となるように指示する情報が含まれている。
 情報処理装置2の映像処理部50は、スイッチング信号s0に基づいて、記憶部60に記憶されている第2のプリセット関連情報p2および第4のプリセット関連情報p4を読み出す。そして映像処理部50は、第2のプリセット関連情報p2を含むプリセット設定信号s1および第4のプリセット関連情報p4を含むプリセット設定信号s1をパラメータ制御部20へ出力する(ステップS20)。次に、パラメータ制御部20は、それぞれのプリセット設定信号s1に基づいて、第2のプリセット関連情報p2を含むパラメータ信号s2を撮像装置80aへ出力し、第4のプリセット関連情報p4を含むパラメータ信号s2を撮像装置80bへ出力する(ステップS21)。
 各撮像装置80a、80bは、パラメータ信号s2を受け付けると、PTZ駆動部82を駆動させてパラメータを変更させる(ステップS30)。具体的には、撮像装置80aは、自身が第2のプリセット関連情報p2に基づくパラメータ設定となるように、PTZ駆動部82を駆動させる。また、撮像装置80bは、自身が第4のプリセット関連情報p4に基づくパラメータ設定となるように、PTZ駆動部82を駆動させる。
 パラメータの変更中において情報処理装置2は、切替許可信号s4を利用して映像ストリームIsを切り替えるか否かを選択する(ステップS22)。情報処理装置2は、切替許可信号s4を利用しないと判断した場合(S22にてNo)、ステップS42へ進み、撮像装置80aで撮像した映像を用いて映像ストリームIsを出力する。一方、情報処理装置2は、切替許可信号s4を利用して映像ストリームを切り替えると判断した場合(S22にてYes)、次のステップS24に進む。ステップS24およびS25は、変形例1と同様である。
 ステップS22の判断は、第2のプリセット関連情報p2を含むプリセット設定信号s1および第4のプリセット関連情報p4を含むプリセット設定信号s1のそれぞれを対象として実行される。すなわちステップS22の判断は、撮像装置80a、80bのそれぞれを対象として実行される。
 この例では、第2のプリセット関連情報p2に、切替許可信号s4を利用して映像ストリームIsを切り替えるように指示する情報が含まれている。したがって情報処理装置2は、撮像装置80aに対してはステップS24およびS25を実行する。一方、第4のプリセット関連情報p4には、切替許可信号s4を利用せずに映像ストリームIsを切り替えるように指示する情報が含まれている。したがって情報処理装置2は、撮像装置80bに対してはステップS24およびS25を実行せず、ステップS42へ進む。
 例えば、パラメータの変更中は、図10の(b)に示すように、右画面に撮像装置80aで撮像した映像と異なるマスク映像が映し出される。また、パラメータの変更中は、図10の(b)および(c)に示すように、左画面に撮像装置80bで撮像した映像がそのまま映し出される。図10の(b)および(c)に示すように、撮像装置80bは、雲の絵を撮像する状態となっており、表示装置99の左画面には、撮像装置80bによって撮像された映像が映し出される。
 撮像装置80aは、第2のプリセット関連情報p2に基づくパラメータ設定状態になると、すなわち、パラメータの変更が完了すると(ステップS31)、変更完了信号s3を情報処理装置2へ出力する(ステップS32)。なお、撮像装置80bからも変更完了信号s3が出力されるが、この例では、撮像装置80bから出力された変更完了信号s3は、情報処理装置2にて使用されない。
 情報処理装置2のパラメータ制御部20は、撮像装置80aから出力された変更完了信号s3を受け付けたか否かを判断する(ステップS40)。パラメータ制御部20は、変更完了信号s3を受け付けると、切替許可信号s4を映像処理部50へ出力する(ステップS41)。
 映像処理部50は、切替許可信号s4を受け付けると、情報処理装置2から出力される映像ストリームIsを切り替えて出力する(ステップS42)。この例では、映像ストリームIsの右半分の領域が、撮像装置80aによって撮像された映像となるように切り替えられる。図10の(c)に示すように、撮像装置80aは、顔の絵を撮像する状態となっており、表示装置99の右画面には、撮像装置80aによって撮像された映像が映し出される。また、図10の(d)に示すように、撮像装置80bは、ハートマークの絵を撮像する状態となっており、表示装置99の左画面には、撮像装置80bによって撮像された映像が映し出される。
 このように変形例2では、情報処理装置2から出力される映像ストリームIsの切り替えを、切替許可信号s4を利用して行うか否かを選択することができる。映像処理部50は、切替許可信号s4を利用することが選択されている場合、切替許可信号s4を受け付けた後、映像ストリームIsを切り替えて出力し、切替許可信号s4を利用することが選択されていない場合、撮像装置80がパラメータを変更中に撮像した映像を用いて映像ストリームを生成する。この構成によれば、映像ストリームIsの切り替えを、切替許可信号s4を利用して行うか否かを選択できる情報処理装置2を提供することができる。
 (実施の形態の変形例3)
 実施の形態の変形例3に係る情報処理装置2について説明する。この変形例では、撮像装置80のパラメータの変更度合いに応じて、画面に出力する映像を変化させる例について説明する。
 変形例3に係る情報処理装置2は、実施の形態と同様に、通信部10、パラメータ制御部20、デコード部30、映像処理部50および記憶部60を備えている。
 変形例3の情報処理装置2は、撮像装置80がパラメータを変更しているときにパラメータの変更度合いに関する情報を取得する。そして、情報処理装置2は、パラメータの変更度合いに応じて、映像が表示される表示画面中の映像のレイアウト位置を計算し、レイアウト位置に映像が映し出されるように映像ストリームIsを生成する。パラメータの変更度合いは、パラメータの変更前の位置を基準として目標とする位置に到達するまでの到達率(移動率)である。例えば、カメラ部83がパン方向に90°回転する場合、45°回転したのときの到達率は50%(比にすると0.5)である。
 図12は、実施の形態の変形例3に係る情報処理システム1の動作の一例を示す図である。図13は、実施の形態の変形例3に係る情報処理装置2の制御方法を示すフローチャートである。
 この例では、表示装置99のマルチビュー画面のうち、画面の右側を撮像装置80aによる映像とし、撮像装置80aのパラメータを変更しつつ、かつ、画面に映し出される映像を変化させる例について説明する。なお、画面の左側には、撮像装置80bによる映像が小さく映し出されている。
 図12の(a)に示すように、初めは、画面の右側に撮像装置80aによる映像が小さく映し出される。このとき撮像装置80aは、第1のプリセット関連情報p1に基づくパラメータ設定となっている。例えば、撮像装置80aは、太陽の絵を撮像する状態となっている。
 端末装置70は、ユーザから所定の操作入力を受け付けると、映像ストリームIsを切り替えるためのスイッチング信号s0を情報処理装置2へ出力する(ステップS10)。このスイッチング信号s0には、撮像装置80aが第2のプリセット関連情報p2に基づくパラメータ設定となるように指示する情報が含まれている。
 情報処理装置2の映像処理部50は、スイッチング信号s0に基づいて、記憶部60に記憶されている第2のプリセット関連情報p2を読み出し、第2のプリセット関連情報p2を含むプリセット設定信号s1をパラメータ制御部20へ出力する(ステップS20)。パラメータ制御部20は、プリセット設定信号s1に基づいて、第2のプリセット関連情報p2を含むパラメータ信号s2を撮像装置80aへ出力する(ステップS21)。
 撮像装置80aは、パラメータ信号s2を受け付けると、PTZ駆動部82を駆動させてパラメータを変更させる(ステップS30)。具体的には、撮像装置80aは、自身が第2のプリセット関連情報p2に基づくパラメータ設定となるように、PTZ駆動部82を駆動させる。この変形例では、PTZ駆動部82が、上記のパラメータを変更しているときに、各パラメータの状態を情報処理装置2へ通知する(ステップS30A)。例えばPTZ駆動部82は、パラメータの変更中に、パラメータの変更度合に関する情報を、通信部81を介して情報処理装置2へ出力する。
 パラメータの変更中において情報処理装置2は、切替許可信号s4を利用して映像ストリームIsを切り替えるか否かを選択する(ステップS22)。ステップS22については、変形例2と同様である。
 また、情報処理装置2は、パラメータの変更中に撮像装置80aで撮像した映像を表示させるか否かを判断する(ステップS24)。情報処理装置2は、撮像装置80aで撮像した映像を表示させると判断した場合(S24にてYes)、変形例1と同様にステップS40に進み、撮像装置80aで撮像した映像を表示させないと判断した場合(S24にてNo)、次のステップへ進む。
 次のステップでは、パラメータの変更度合いに応じて、画面に出力する映像を変化させるか否かが判断される(ステップS24A)。情報処理装置2は、画面に出力する映像を変化させないと判断した場合(S24AにてNo)、変形例1と同様にステップS25を実行する。一方、情報処理装置2は、画面に出力する映像を変化させると判断した場合(S24AにてYes)、撮像装置80aからパラメータの変更度合いに関する情報を取得する(ステップS27)。
 次に情報処理装置2は、パラメータの変更度合いに応じて、映像が表示される表示画面中の映像のレイアウト位置を計算する(ステップS28)。表示画面中の映像のレイアウト位置は、例えば、以下の(式1)で算出される。
 レイアウト位置=[(第2のプリセット関連情報p2に基づく表示位置)-(第1のプリセット関連情報p1に基づく表示位置)]×到達率+(第1のプリセット関連情報p1に基づく表示位置)・・(式1)
 なお、表示位置は、図5に示されているように、画面上の位置情報である。
 映像処理部50は、(式1)によって算出されたレイアウト位置に映像が映し出されるように映像ストリームIsを生成する(ステップS29)。
 この例では、第2のプリセット関連情報p2に、パラメータの変更中に撮像装置80aで撮像した映像と異なる映像を出力するように指示する情報、および、この異なる映像を変化させることを指示する情報が含まれている。したがって、情報処理装置2は、撮像装置80aで撮像した映像と異なる映像を変化させながら出力する。例えば、パラメータの変更中は、図12の(b)および(c)に示すように、撮像装置80aで撮像した映像と少し異なるアニメーション映像が中央に向けて徐々に大きく変化するように映し出される。
 撮像装置80aは、第2のプリセット関連情報p2に基づくパラメータ設定状態になると、すなわち、パラメータの変更が完了すると(ステップS31)、変更完了信号s3を情報処理装置2へ出力する(ステップS32)。
 情報処理装置2のパラメータ制御部20は、撮像装置80aから出力された変更完了信号s3を受け付けたか否かを判断する(ステップS40A)。
 パラメータ制御部20は、変更完了信号s3を受け付けると(S40AにてYes)、切替許可信号s4を映像処理部50へ出力する(ステップS41)。なお、ステップS40Aにて、変更完了信号s3を受け付けていない場合(S40AにてNo)は、ステップS27に戻る。
 映像処理部50は、切替許可信号s4を受け付けると、情報処理装置2から出力される映像ストリームIsを切り替えて出力する(ステップS42)。この例では、映像ストリームIsの右半分の領域が、撮像装置80aによって撮像された映像となるように切り替えられる。図12の(d)に示すように、撮像装置80aは、顔の絵を撮像する状態となっており、表示装置99の右画面には、撮像装置80aによって撮像された映像が映し出される。
 このように変形例3では、映像処理部50が、プリセット設定信号s1を出力してから切替許可信号s4を受け付けるまでの間、撮像装置80aで撮像した映像と異なる映像を用いて、パラメータの変更度合いに応じて変化する映像ストリームIsを生成する。この構成によれば、パラメータの変更度合いに応じて映像ストリームIsを変化させながら出力する情報処理装置2を提供することができる。
 (まとめ)
 以上のように、本実施の形態に係る情報処理装置2は、パン、チルトおよびズームのうちの少なくとも1つのパラメータを変更可能な撮像装置80で撮像した映像を用いて映像ストリームIsを出力する情報処理装置であって、撮像装置80のパラメータを制御するパラメータ制御部20を備える。パラメータ制御部20は、撮像装置80に対してパラメータの変更を指示し、撮像装置80のパラメータの変更が完了した場合に、情報処理装置2から出力される映像ストリームIsの切り替えを許可する切替許可信号s4を出力する。
 この情報処理装置2によれば、撮像装置80のパラメータを変更してから映像ストリームIsを切り替えることができる。これにより、映像ストリームIsの切り替えを適切に行うことができる。
 また、パラメータ制御部20は、撮像装置80に対して、パラメータの変更を指示するパラメータ信号s2を出力するパラメータ出力部21と、パラメータ信号s2に基づいてパラメータを変更した撮像装置80から、パラメータの変更が完了したことを示す変更完了信号s3を受け付けることで、切替許可信号s4を出力する許可信号出力部23と、を有していてもよい。
 これによれば、撮像装置80のパラメータが変更されたことを確実に確認してから、切替許可信号s4を出力することができる。これにより、映像ストリームIsの切り替えを適切に行うことができる。
 また、情報処理装置2は、さらに、撮像装置80で撮像した映像を用いて映像ストリームIsを生成する映像処理部50を備える。パラメータ制御部20は、切替許可信号s4を映像処理部50へ出力する。映像処理部50は、切替許可信号s4に基づいて、情報処理装置2から出力される映像ストリームIsを切り替えてもよい。
 上記のように切替許可信号s4を映像処理部50へ出力することで、映像処理部50によって映像ストリームIsの切り替えを適切に行うことができる。
 また、映像処理部50は、パラメータに関する情報を含むプリセット設定信号s1をパラメータ制御部20へ出力し、パラメータ制御部20は、プリセット設定信号s1に基づいて、撮像装置80に対してパラメータの変更を指示してもよい。
 このように、映像処理部50から出力したプリセット設定信号s1に基づいてパラメータを変更することで、映像処理部50によって映像ストリームIsの切り替えを適切に行うことができる。
 また、情報処理装置2は、さらに、パラメータを記憶している記憶部60を備える。映像処理部50は、記憶部60に記憶されているパラメータを読み出し、当該パラメータに関する情報を含むプリセット設定信号s1を出力してもよい。
 このように、記憶部60に記憶されたパラメータに関する情報を含むプリセット設定信号s1に基づいてパラメータを変更することで、映像処理部50によって映像ストリームIsの切り替えを適切に行うことができる。
 また、映像処理部50は、プリセット設定信号s1を出力してから切替許可信号s4を受け付けるまでの間、撮像装置80で撮像した映像と異なる映像を用いて映像ストリームIsを生成してもよい。
 この構成によれば、例えばユーザの要求に応じて、パラメータの変更中の映像を映像ストリームIsとして出力しないようにすることが可能となる。これにより、映像ストリームIsの切り替えを適切に行うことができる。
 また、撮像装置80で撮像した映像と異なる映像は、マスク映像であってもよい。
 この構成によれば、パラメータの変更中の映像をマスク映像にして隠すことができる。これにより、映像ストリームIsの切り替えを適切に行うことができる。
 また、情報処理装置2は、さらに、撮像装置80で撮像した映像を用いて映像ストリームIsを生成する映像処理部50を備える。映像処理部50は、情報処理装置2から出力される映像ストリームIsの切り替えに関し、切替許可信号s4を利用するか否かを選択し、切替許可信号s4を利用しないことを選択した場合に、撮像装置80がパラメータを変更中に撮像した映像を用いて映像ストリームIsを生成してもよい。
 この構成によれば、映像ストリームIsの切り替えを行うか否かを選択できる情報処理装置2を提供することができる。
 また、情報処理装置2は、撮像装置80がパラメータを変更しているときにパラメータの変更度合いに関する情報を取得し、パラメータの変更度合いに応じて、映像が表示される表示画面中の映像のレイアウト位置を計算し、レイアウト位置に映像が映し出されるように映像ストリームIsを生成してもよい。
 この構成によれば、パラメータの変更度合いに応じて映像ストリームIsを変化させながら出力する情報処理装置2を提供することができる。
 また、パラメータの変更度合いは、パラメータの変更前の位置を基準として目標とする位置に到達するまでの到達率であってもよい。
 この構成によれば、上記の到達率に基づいて映像を変化させながら出力する情報処理装置2を提供することができる。
 また、パラメータ出力部21は、複数の撮像装置80のそれぞれに対し、複数の撮像装置80のそれぞれに対応するパラメータ信号s2を出力し、許可信号出力部23は、複数の撮像装置80のうちの少なくとも1つから変更完了信号s3を受け付けると、変更完了信号s3を出力した撮像装置80に対応する切替許可信号s4を出力してもよい。
 この構成によれば、複数の撮像装置80のそれぞれのパラメータの変更に応じて映像ストリームIsを切り替えることができる。これにより、映像ストリームIsの切り替えを適切に行うことができる。
 また、情報処理装置2は、さらに、撮像装置80で撮像した映像をエンコード処理した映像情報が入力されるデコード部30を備える。デコード部30は、複数の撮像装置80で撮像した複数の映像情報のそれぞれをデコード処理して、デコード処理後の複数の映像を映像処理部50へ出力してもよい。
 この構成によれば、デコード部30から出力された複数の映像を用いて映像ストリームIsを切り替えることができる。これにより、映像ストリームIsの切り替えを適切に行うことができる。
 本実施の形態に係る情報処理システム1は、パン、チルトおよびズームのうちの少なくとも1つのパラメータを変更可能な撮像装置80と、撮像装置80のパラメータを制御するパラメータ制御部20と、撮像装置80で撮像した映像を用いて映像ストリームIsを出力する映像処理部50と、を備える。パラメータ制御部20は、撮像装置80に対してパラメータの変更を指示し、撮像装置80のパラメータの変更が完了した場合に、映像処理部50から出力される映像ストリームIsの切り替えを許可する切替許可信号s4を映像処理部50へ出力する。映像処理部50は、切替許可信号s4に基づいて映像ストリームIsを切り替える。
 この情報処理システム1によれば、撮像装置80のパラメータを変更してから映像ストリームIsを切り替えることができる。これにより、映像ストリームIsの切り替えを適切に行うことができる。
 本実施の形態に係る情報処理装置2の制御方法は、パン、チルトおよびズームのうちの少なくとも1つのパラメータを変更可能な撮像装置80で撮像した映像を用いて映像ストリームIsを出力する情報処理装置の制御方法である。情報処理装置2の制御方法は、撮像装置80に対して、パラメータの変更を指示するパラメータ信号s2を出力するステップと、撮像装置80のパラメータの変更が完了した場合に、情報処理装置2から出力される映像ストリームIsの切り替えを許可する切替許可信号s4を出力するステップと、を含む。
 この制御方法によれば、撮像装置80のパラメータを変更してから映像ストリームIsを切り替えることができるので、映像ストリームIsの切り替えを適切に行うことができる。
 また、情報処理装置2の制御方法は、さらに、切替許可信号s4に基づいて、映像ストリームIsを切り替えるステップを含んでいてもよい。
 これによれば、切替許可信号s4に基づいて映像ストリームIsの切り替えを適切に行うことができる。
 また、情報処理装置2の制御方法は、さらに、記憶部60に記憶されているパラメータを読み出し、当該パラメータに関する情報を含むプリセット設定信号s1を出力するステップを含む。パラメータ信号s2を出力するステップにおいて、パラメータ信号s2は、プリセット設定信号s1の出力に応じて出力されてもよい。
 これによれば、プリセット設定信号s1に応じて映像ストリームIsの切り替えを適切に行うことができる。
 また、情報処理装置2の制御方法は、さらに、プリセット設定信号s1が出力されてから切替許可信号s4を受け付けるまでの間、撮像装置80で撮像した映像と異なる映像を出力するステップを含んでいてもよい。
 これによれば、例えばユーザの要求に応じて、パラメータの変更中の映像を映像ストリームIsとして出力しないようにすることが可能となる。これにより、映像ストリームIsの切り替えを適切に行うことができる。
 また、情報処理装置2の制御方法は、さらに、情報処理装置2から出力される映像ストリームIsの切り替えに関し、切替許可信号s4を利用するか否かを選択するステップと、当該選択するステップにて切替許可信号s4を利用しないことを選択した場合に、撮像装置80がパラメータを変更中に撮像した映像を用いて映像ストリームIsを生成するステップと、を含んでいてもよい。
 これによれば、映像ストリームIsの切り替えを行うか否かを選択できる情報処理装置2の制御方法を提供することができる。
 また、情報処理装置2の制御方法は、さらに、撮像装置80がパラメータを変更しているときにパラメータの変更度合いに関する情報を取得するステップと、パラメータの変更度合いに応じて、映像が表示される表示画面中の映像のレイアウト位置を計算し、レイアウト位置に映像が映し出されるように映像ストリームIsを生成するステップと、を含んでいてもよい。
 これによれば、パラメータの変更度合いに応じて映像ストリームIsを変化させながら出力する情報処理装置2の制御方法を提供することができる。
 (その他の実施の形態)
 以上、実施の形態について説明したが、本開示は、このような実施の形態に限定されるものではない。
 上記の実施の形態では、撮像装置80から出力された変更完了信号s3に基づいて、パラメータ制御部20が切替許可信号s4を映像処理部50へ出力する例を示したが、それに限られない。例えば、撮像装置80が自身のパラメータの位置座標をパラメータ制御部20へ出力する構成を有している場合、パラメータ制御部20は、上記の位置座標に基づいてパラメータの変更が完了したか否かを判断し、変更が完了したときに切替許可信号s4を映像処理部50へ出力してもよい。
 本開示の全般的又は具体的な態様は、システム、装置、方法、集積回路、コンピュータプログラム又はコンピュータ読み取り可能なCD-ROMなどの記録媒体で実現されてもよい。また、システム、装置、方法、集積回路、コンピュータプログラムおよび記録媒体の任意な組み合わせで実現されてもよい。
 また、上記実施の形態等のフローチャートで説明された処理の順序は、一例である。複数の処理の順序は変更されてもよいし、複数の処理は並行して実行されてもよい。
 また、ブロック図における機能ブロックの分割は一例であり、複数の機能ブロックを一つの機能ブロックとして実現したり、一つの機能ブロックを複数に分割したり、一部の機能を他の機能ブロックに移してもよい。また、類似する機能を有する複数の機能ブロックの機能を単一のハードウェア又はソフトウェアが並列又は時分割に処理してもよい。
 また、上記実施の形態等において、各構成要素(例えば、制御部などの処理部)は、専用のハードウェアで構成されるか、各構成要素に適したソフトウェアプログラムを実行することによって実現されてもよい。各構成要素は、CPU(Central Processing Unit)又はプロセッサなどのプログラム実行部が、ハードディスク又は半導体メモリなどの記録媒体に記録されたソフトウェアプログラムを読み出して実行することによって実現されてもよい。また、例えば、各構成要素は、回路(または集積回路)でもよい。これらの回路は、全体として1つの回路を構成してもよいし、それぞれ別々の回路でもよい。また、これらの回路は、それぞれ、汎用的な回路でもよいし、専用の回路でもよい。
 その他、上記実施の形態等に対して当業者が思いつく各種変形を施して得られる形態、または、本開示の趣旨を逸脱しない範囲で各実施の形態における構成要素および機能を任意に組み合わせることで実現される形態も本開示に含まれる。
 本開示の情報処理装置等は、映像ストリームを切り替えるためのスイッチャ装置などに利用することができる。
1  情報処理システム
2  情報処理装置
10 通信部
20 パラメータ制御部
21 パラメータ出力部
23 許可信号出力部
30 デコード部
50 映像処理部
60 記憶部
70 端末装置
80、80a、80b、80c 撮像装置
81 通信部
82 PTZ駆動部
83 カメラ部
84 エンコード部
99 表示装置
Is 映像ストリーム
p1、p2、p3、p4 プリセット関連情報
s0 スイッチング信号
s1 プリセット設定信号
s2 パラメータ信号
s3 変更完了信号
s4 切替許可信号

Claims (19)

  1.  パン、チルトおよびズームのうちの少なくとも1つのパラメータを変更可能な撮像装置で撮像した映像を用いて映像ストリームを出力する情報処理装置であって、
     前記撮像装置の前記少なくとも1つのパラメータを制御するパラメータ制御部を備え、
     前記パラメータ制御部は、前記撮像装置に対して前記少なくとも1つのパラメータの変更を指示し、前記撮像装置の前記少なくとも1つのパラメータの変更が完了した場合に、前記情報処理装置から出力される前記映像ストリームの切り替えを許可する切替許可信号を出力する
     情報処理装置。
  2.  前記パラメータ制御部は、
     前記撮像装置に対して、前記少なくとも1つのパラメータの変更を指示するパラメータ信号を出力するパラメータ出力部と、
     前記パラメータ信号に基づいて前記少なくとも1つのパラメータを変更した前記撮像装置から、前記少なくとも1つのパラメータの変更が完了したことを示す変更完了信号を受け付けることで、前記切替許可信号を出力する許可信号出力部と、
     を有する請求項1に記載の情報処理装置。
  3.  さらに、前記撮像装置で撮像した前記映像を用いて前記映像ストリームを生成する映像処理部を備え、
     前記パラメータ制御部は、前記切替許可信号を前記映像処理部へ出力し、
     前記映像処理部は、前記切替許可信号に基づいて、前記情報処理装置から出力される前記映像ストリームを切り替える
     請求項1または2に記載の情報処理装置。
  4.  前記映像処理部は、前記少なくとも1つのパラメータに関する情報を含むプリセット設定信号を前記パラメータ制御部へ出力し、
     前記パラメータ制御部は、前記プリセット設定信号に基づいて、前記撮像装置に対して前記少なくとも1つのパラメータの変更を指示する
     請求項3に記載の情報処理装置。
  5.  さらに、前記少なくとも1つのパラメータを記憶している記憶部を備え、
     前記映像処理部は、前記記憶部に記憶されている前記少なくとも1つのパラメータを読み出し、当該少なくとも1つのパラメータに関する情報を含む前記プリセット設定信号を出力する
     請求項4に記載の情報処理装置。
  6.  前記映像処理部は、前記プリセット設定信号を出力してから前記切替許可信号を受け付けるまでの間、前記撮像装置で撮像した前記映像と異なる映像を用いて映像ストリームを生成する
     請求項4に記載の情報処理装置。
  7.  前記撮像装置で撮像した前記映像と異なる前記映像は、マスク映像である
     請求項6に記載の情報処理装置。
  8.  さらに、前記撮像装置で撮像した前記映像を用いて前記映像ストリームを生成する映像処理部を備え、
     前記映像処理部は、前記情報処理装置から出力される前記映像ストリームの前記切り替えに関し、前記切替許可信号を利用するか否かを選択し、前記切替許可信号を利用しないことを選択した場合に、前記撮像装置が前記少なくとも1つのパラメータを変更中に撮像した映像を用いて前記映像ストリームを生成する
     請求項1または2に記載の情報処理装置。
  9.  前記情報処理装置は、前記撮像装置が前記少なくとも1つのパラメータを変更しているときに前記少なくとも1つのパラメータの変更度合いに関する情報を取得し、前記少なくとも1つのパラメータの変更度合いに応じて、前記映像が表示される表示画面中の前記映像のレイアウト位置を計算し、前記レイアウト位置に前記映像が映し出されるように前記映像ストリームを生成する
     請求項1または2に記載の情報処理装置。
  10.  前記少なくとも1つのパラメータの変更度合いは、前記少なくとも1つのパラメータの変更前の位置を基準として目標とする位置に到達するまでの到達率である
     請求項9に記載の情報処理装置。
  11.  前記パラメータ出力部は、各々が前記撮像装置である複数の撮像装置のそれぞれに対し、複数の前記撮像装置のそれぞれに対応する前記パラメータ信号を出力し、
     前記許可信号出力部は、前記複数の撮像装置のうちの少なくとも1つの撮像装置から前記変更完了信号を受け付けると、前記変更完了信号を出力した前記少なくとも1つの撮像装置に対応する前記切替許可信号を出力する
     請求項2に記載の情報処理装置。
  12.  さらに、前記撮像装置で撮像した前記映像をエンコード処理した映像情報が入力されるデコード部を備え、
     前記デコード部は、各々が前記撮像装置である複数の撮像装置の各々が撮像した前記映像情報をデコード処理して、デコード処理後の映像を前記映像処理部へ出力する
     請求項3に記載の情報処理装置。
  13.  パン、チルトおよびズームのうちの少なくとも1つのパラメータを変更可能な撮像装置と、
     前記撮像装置の前記少なくとも1つのパラメータを制御するパラメータ制御部と、
     前記撮像装置で撮像した映像を用いて映像ストリームを出力する映像処理部と、
     を備え、
     前記パラメータ制御部は、前記撮像装置に対して前記少なくとも1つのパラメータの変更を指示し、前記撮像装置の前記少なくとも1つのパラメータの変更が完了した場合に、前記映像処理部から出力される前記映像ストリームの切り替えを許可する切替許可信号を前記映像処理部へ出力し、
     前記映像処理部は、前記切替許可信号に基づいて前記映像ストリームを切り替える
     情報処理システム。
  14.  パン、チルトおよびズームのうちの少なくとも1つのパラメータを変更可能な撮像装置で撮像した映像を用いて映像ストリームを出力する情報処理装置の制御方法であって、
     前記撮像装置に対して、前記少なくとも1つのパラメータの変更を指示するパラメータ信号を出力するステップと、
     前記撮像装置の前記少なくとも1つのパラメータの変更が完了した場合に、前記情報処理装置から出力される前記映像ストリームの切り替えを許可する切替許可信号を出力するステップと、
     を含む情報処理装置の制御方法。
  15.  さらに、前記切替許可信号に基づいて、前記映像ストリームを切り替えるステップを含む
     請求項14に記載の情報処理装置の制御方法。
  16.  さらに、記憶部に記憶されている前記少なくとも1つのパラメータを読み出し、当該少なくとも1つのパラメータに関する情報を含むプリセット設定信号を出力するステップを含み、
     前記パラメータ信号を出力するステップにおいて、前記パラメータ信号は、前記プリセット設定信号の出力に応じて出力される
     請求項15に記載の情報処理装置の制御方法。
  17.  さらに、前記プリセット設定信号が出力されてから前記切替許可信号を受け付けるまでの間、前記撮像装置で撮像した前記映像と異なる映像を出力するステップを含む
     請求項16に記載の情報処理装置の制御方法。
  18.  さらに、
     前記情報処理装置から出力される前記映像ストリームの前記切り替えに関し、前記切替許可信号を利用するか否かを選択するステップと、
     前記選択するステップにて前記切替許可信号を利用しないことを選択した場合に、前記撮像装置が前記少なくとも1つのパラメータを変更中に撮像した映像を用いて前記映像ストリームを生成するステップと、
     を含む請求項14に記載の情報処理装置の制御方法。
  19.  さらに、
     前記撮像装置が前記少なくとも1つのパラメータを変更しているときに前記少なくとも1つのパラメータの変更度合いに関する情報を取得するステップと、
     前記少なくとも1つのパラメータの変更度合いに応じて、前記映像が表示される表示画面中の前記映像のレイアウト位置を計算し、前記レイアウト位置に前記映像が映し出されるように前記映像ストリームを生成するステップと、
     を含む請求項14~16のいずれか1項に記載の情報処理装置の制御方法。
PCT/JP2023/009492 2022-03-24 2023-03-13 情報処理装置、情報処理システムおよび情報処理装置の制御方法 WO2023182026A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2022-048732 2022-03-24
JP2022048732A JP2023142060A (ja) 2022-03-24 2022-03-24 情報処理装置、情報処理システムおよび情報処理装置の制御方法

Publications (1)

Publication Number Publication Date
WO2023182026A1 true WO2023182026A1 (ja) 2023-09-28

Family

ID=88101410

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2023/009492 WO2023182026A1 (ja) 2022-03-24 2023-03-13 情報処理装置、情報処理システムおよび情報処理装置の制御方法

Country Status (2)

Country Link
JP (1) JP2023142060A (ja)
WO (1) WO2023182026A1 (ja)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018070092A1 (ja) * 2016-10-11 2018-04-19 ソニー株式会社 情報提供装置と情報提供方法および情報再生装置と情報再生方法
JP2021034824A (ja) * 2019-08-21 2021-03-01 キヤノン株式会社 撮像装置、制御装置、プログラム、記憶媒体及び制御方法
JP2021068989A (ja) * 2019-10-21 2021-04-30 株式会社Jvcケンウッド 情報処理システム、情報処理方法及びプログラム
JP2022045529A (ja) * 2020-09-09 2022-03-22 キヤノン株式会社 情報処理装置、システム、情報処理装置の制御方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018070092A1 (ja) * 2016-10-11 2018-04-19 ソニー株式会社 情報提供装置と情報提供方法および情報再生装置と情報再生方法
JP2021034824A (ja) * 2019-08-21 2021-03-01 キヤノン株式会社 撮像装置、制御装置、プログラム、記憶媒体及び制御方法
JP2021068989A (ja) * 2019-10-21 2021-04-30 株式会社Jvcケンウッド 情報処理システム、情報処理方法及びプログラム
JP2022045529A (ja) * 2020-09-09 2022-03-22 キヤノン株式会社 情報処理装置、システム、情報処理装置の制御方法

Also Published As

Publication number Publication date
JP2023142060A (ja) 2023-10-05

Similar Documents

Publication Publication Date Title
CN101006415B (zh) 具有投影仪装置的电子设备
KR101784176B1 (ko) 영상 촬영 장치 및 그 제어방법
JP3992045B2 (ja) 映像信号処理装置及び該方法並びに仮想現実感生成装置
US20140232922A1 (en) Imaging device, display control method and program
CN104378547B (zh) 成像装置、图像处理设备、图像处理方法和程序
KR102280000B1 (ko) 표시 제어 장치, 표시 제어 방법 및 저장 매체
US20200402281A1 (en) Image processing apparatus, image processing method, and storage medium
JP2009004885A (ja) 画像処理装置、画像処理方法、およびプログラム
US20200177818A1 (en) Display control apparatus, imaging apparatus, control method for display apparatus, and non-transitory computer readable medium
WO2023182026A1 (ja) 情報処理装置、情報処理システムおよび情報処理装置の制御方法
JP5785038B2 (ja) 撮影機器
US11044419B2 (en) Image processing device, imaging processing method, and program
US10349026B2 (en) Projector, method for controlling the same, and projection system
US20230217084A1 (en) Image capture apparatus, control method therefor, image processing apparatus, and image processing system
US8842193B2 (en) Imaging apparatus
US11190696B2 (en) Electronic device capable of remotely controlling image capture apparatus and control method for same
JP2018054912A (ja) 投影型表示装置及びその制御方法
JP2018101930A (ja) 雲台システム
US20190158751A1 (en) Display control device and display control system
JP6728024B2 (ja) 表示制御装置、表示制御方法及びプログラム
JP2020053710A (ja) 情報処理装置、投影装置、投影装置の制御方法、プログラム
JP4741434B2 (ja) Cg合成装置およびcg合成プログラム
JP2013085041A (ja) 情報処理装置、その処理方法及びプログラム
JP2024065683A (ja) 撮像装置、撮像装置の制御方法、プログラム
US20200186706A1 (en) Image processing apparatus, image processing method, and non-transitory computer-readable storage medium

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 23774623

Country of ref document: EP

Kind code of ref document: A1