WO2021246104A1 - 制御方法および制御システム - Google Patents

制御方法および制御システム Download PDF

Info

Publication number
WO2021246104A1
WO2021246104A1 PCT/JP2021/017475 JP2021017475W WO2021246104A1 WO 2021246104 A1 WO2021246104 A1 WO 2021246104A1 JP 2021017475 W JP2021017475 W JP 2021017475W WO 2021246104 A1 WO2021246104 A1 WO 2021246104A1
Authority
WO
WIPO (PCT)
Prior art keywords
terminal device
event
instruction data
user
facility
Prior art date
Application number
PCT/JP2021/017475
Other languages
English (en)
French (fr)
Inventor
優樹 瀬戸
智大 井本
Original Assignee
ヤマハ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ヤマハ株式会社 filed Critical ヤマハ株式会社
Publication of WO2021246104A1 publication Critical patent/WO2021246104A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K15/00Acoustics not otherwise provided for
    • G10K15/04Sound-producing devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/233Processing of audio elementary streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones

Definitions

  • the present disclosure relates to a technique for controlling a directing effect in various events such as music or sports.
  • Patent Document 1 a system has been conventionally proposed for a large number of users to view an event such as a concert held in an acoustic space such as an acoustic hall at a remote location (for example, Patent Document 1).
  • a preferred embodiment of the present disclosure is intended to increase the number of users who can contribute to the event.
  • the control method receives instruction data according to an instruction by a user of the terminal device from each of the plurality of terminal devices, and the plurality of terminal devices.
  • the instruction data is received from the user's first terminal device that views the first content generated by recording the event and distributed by the first distribution environment in parallel with the progress of the event.
  • the first process of outputting the effect to the facility where the event is carried out is executed, and the second of the plurality of terminal devices, which is generated by recording the event and has a larger delivery delay than the first delivery environment.
  • the control method is a facility in which instruction data corresponding to an instruction by a user of the terminal device is received from each of the plurality of terminal devices, and an event is performed among the plurality of terminal devices.
  • the instruction data is received from the first terminal device of the user who views the event
  • the first process of outputting the effect to the facility is executed, and among the plurality of terminal devices, the event
  • the instruction data is received from the second terminal device of the user who views the content generated and distributed by recording in parallel with the progress of the event, the second process different from the first process is performed. Run.
  • the control system includes a reception control unit that receives instruction data according to an instruction from a user of the terminal device from each of the plurality of terminal devices, and an event among the plurality of terminal devices.
  • the event is executed when the instruction data is received from the user's first terminal device for viewing the first content generated by recording and distributed by the first distribution environment in parallel with the progress of the event.
  • the first process of outputting the effect to the facility is executed, and among the plurality of terminal devices, it is generated by recording the event and distributed by the second distribution environment having a larger distribution delay than the first distribution environment.
  • Output control that executes a second process different from the first process when the instruction data is received from the user's second terminal device for viewing the second content in parallel with the progress of the event. It is equipped with a part.
  • the control system includes a reception control unit that receives instruction data according to an instruction by a user of the terminal device from each of the plurality of terminal devices, and an event among the plurality of terminal devices.
  • the instruction data is received from the first terminal device of the user who views the event at the facility to be implemented, the first process of outputting the effect to the facility is executed, and among the plurality of terminal devices.
  • the second terminal device of the user who watches the content generated and distributed by recording the event in parallel with the progress of the event. It includes an output control unit that executes the second process.
  • FIG. 1 is a block diagram illustrating the configuration of the communication system 100 according to the first embodiment.
  • the communication system 100 is a computer system capable of communicating with each of a plurality of terminal devices 10 via a communication network 300 such as the Internet.
  • Each of the plurality of terminal devices 10 is an information terminal such as a mobile phone, a smartphone, a tablet terminal, or a personal computer.
  • Each user U uses his / her own terminal device 10.
  • the communication system 100 includes a recording system 21a, a recording system 21b, a distribution system 22a, a distribution system 22b, a reproduction system 23, and a control system 30.
  • recording system 21 when it is not necessary to distinguish between the recording system 21a and the recording system 21b, it is simply referred to as "recording system 21”.
  • distribution system 22 when it is not necessary to distinguish between the distribution system 22a and the distribution system 22b, it is simply referred to as "distribution system 22".
  • the recording system 21a, the recording system 21b, and the playback system 23 are installed in the facility 200 where various events are held.
  • the facility 200 is a stadium where an event in which a plurality of contestants compete in a specific sport (hereinafter referred to as a "competition event") is held.
  • a competition event that is, a non-spectator match
  • the reproduction system 23 is an acoustic system composed of acoustic equipment installed in the facility 200, and reproduces the sound in the facility 200.
  • the reproduction system 23 includes, for example, a plurality of sound emitting devices (for example, speaker devices) installed at different locations in the facility 200.
  • the reproduction system 23 and the control system 30 may be configured as a single device.
  • the control system 30 is a computer system that controls the reproduction of sound by the reproduction system 23. Specifically, the control system 30 causes the reproduction system 23 to reproduce various sound effects.
  • the sound effect is produced, for example, by the cheers uttered by a large number of spectators, the clapping sound produced by the clapping of a large number of spectators, or the finger whistle sound produced by the spectator's flute, or the performance of a musical instrument such as a striking instrument or a wind instrument.
  • Various production sounds such as musical instrument sounds. Participants in the competition event can hear the sound effects reproduced by the reproduction system 23.
  • the sound effect system reproduces the sound effects, so that even if there are no spectators in the facility 200 or the number of spectators is small, the facility will have an atmosphere as if a large number of spectators are watching the competition event. Can be generated within 200.
  • the recording system 21 records a video of a competition event held in the facility 200.
  • each recording system 21 includes an imaging device that captures an image of a competition event and a sound collecting device that collects the sound of the competition event.
  • the sound picked up by the sound collecting device includes the sound reproduced by the reproduction system 23 in addition to the sound produced by the contestants or spectators located in the facility 200.
  • the recording system 21 generates a moving image composed of an image captured by the image pickup device and a sound picked up by the sound pickup device.
  • the recording system 21a and the recording system 21b record videos of a common competition event held in the facility 200 in parallel.
  • the distribution system 22a distributes the content Ca including the moving image recorded by the recording system 21a to the terminal device 10. Specifically, the distribution system 22a distributes content Ca (that is, live distribution) in parallel with the progress of the competition event. Similarly, the distribution system 22b distributes the content Cb including the moving image recorded by the recording system 21b to the terminal device 10. Specifically, the distribution system 22b distributes the content Cb in parallel with the progress of the competition event. The distribution of the content Ca by the distribution system 22a and the distribution of the content Cb by the distribution system 22b are executed in parallel. As can be understood from the above explanation, the content Ca and the content Cb target a common competition event held in the facility 200, but the distribution source (distribution system 22a / distribution system 22b) is different. In the following description, when it is not necessary to distinguish between the content Ca and the content Cb, it is simply referred to as "content C".
  • each of the plurality of terminal devices 10 can receive either the content Ca or the content Cb.
  • an environment in which the content Ca generated by recording by the recording system 21a is distributed to the terminal device 10 by the distribution system 22a is referred to as a “first distribution environment”.
  • an environment in which the content Cb generated by recording by the recording system 21b is distributed to the terminal device 10 by the distribution system 22b is referred to as a “second distribution environment”. Either the first distribution environment or the second distribution environment is selected for each terminal device 10.
  • terminal device 10a the terminal device 10 that receives the content Ca in the first distribution environment
  • terminal device 10b the terminal device 10 that receives the content Cb in the second distribution environment
  • terminal device 10b The user U of the terminal device 10a watches the content Ca reproduced by the terminal device 10a.
  • the user U of the terminal device 10b watches the content Cb reproduced by the terminal device 10b.
  • Each user U is located outside the facility 200 (for example, at home).
  • the delivery delay differs between the first delivery environment and the second delivery environment.
  • the delivery delay is a delay in the reproduction of the content C with respect to the progress of the competition event. For example, the time length from the time when a specific event occurs in the competition event to the time when the terminal device 10 reproduces the event in the content C corresponds to the delivery delay.
  • the distribution delay is, for example, the communication status between the recording system 21 and the distribution system 22, the total number of terminal devices 10 to which the distribution system 22 distributes the content C, or the requirement for image processing in which the distribution system 22 generates the content C. It depends on various factors such as time.
  • the second delivery environment has a larger delivery delay than the first delivery environment. Therefore, the progress of the reproduction of the content Cb is delayed with respect to the progress of the reproduction of the content Ca.
  • the time when the user U who watches the content Cb recognizes a specific event in the competition event is the time when the user U who watches the content Ca recognizes the event.
  • the delivery delay in the first delivery environment is sufficiently small. That is, the content Ca is reproduced with almost no delay with respect to the progress of the competition event in the facility 200.
  • FIG. 3 is a block diagram illustrating the configuration of each terminal device 10.
  • the terminal device 10 includes a control device 11, a storage device 12, a communication device 13, a reproduction device 14, and an operation device 15.
  • the terminal device 10 is realized not only as a single device but also as a set of a plurality of devices configured as separate bodies from each other.
  • the control device 11 is composed of a single or a plurality of processors that control each element of the terminal device 10.
  • the control device 11 is one or more types such as a CPU (Central Processing Unit), a GPU (Graphic Processing Unit), a DSP (Digital Signal Processor), an FPGA (Field Programmable Gate Array), or an ASIC (Application Specific Integrated Circuit). It consists of a processor.
  • the storage device 12 is a single or a plurality of memories for storing a program executed by the control device 11 and various data used by the control device 11.
  • the storage device 12 is composed of a known recording medium such as a magnetic recording medium or a semiconductor recording medium.
  • the storage device 12 may be configured by combining a plurality of types of recording media. Further, even if a portable recording medium attached to and detached from the terminal device 10 or a recording medium (for example, cloud storage) in which the terminal device 10 can perform writing and reading via the communication network 300 can be used as the storage device 12. good.
  • the communication device 13 communicates with the communication system 100 (distribution system 22a, distribution system 22b, and control system 30) via the communication network 300.
  • the communication device 13 receives the content Ca distributed from the distribution system 22a or the content Cb distributed from the distribution system 22b.
  • the playback device 14 reproduces a moving image including video and audio under the control of the control device 11.
  • the reproduction device 14 reproduces the content C received by the communication device 13.
  • the reproduction device 14 includes a display device 141 and a sound emitting device 142.
  • the display device 141 displays an image under the control of the control device 11.
  • the display device 141 is composed of a display panel such as a liquid crystal panel or an organic EL (ElectroLuminescence) panel.
  • the display device 141 displays the video of the content C.
  • the sound emitting device 142 reproduces sound under the control of the control device 11.
  • the sound emitting device 142 reproduces the sound of the content C.
  • the operation device 15 is an input device that receives an instruction from the user U.
  • the operation device 15 is, for example, a plurality of controls operated by the user U or a touch panel integrally configured with the display device 141. By operating the operation device 15, the user U can select a desired sound effect to be reproduced in the facility 200 by the reproduction system 23 from a plurality of sound effects.
  • FIG. 4 is a flowchart illustrating a specific procedure of the process (hereinafter referred to as “acceptance process”) Sa executed by the control device 11.
  • the reception process Sa is a process of receiving an instruction of a sound effect emitted by the reproduction system 23 in the facility 200 from the user U.
  • the reception process Sa is executed in parallel with the reproduction of the content C by the reproduction device 14. That is, the reception process Sa is executed in parallel with the progress of the competition event.
  • the control device 11 specifies the distribution environment (first distribution environment / second distribution environment) of the content C being reproduced by the reproduction device 14 (Sa1).
  • the first distribution environment is specified during the reproduction of the content Ca by the reproduction device 14, and the second distribution environment is specified during the reproduction of the content Cb.
  • methods 1 to 3 exemplified below are adopted.
  • the content C distributed by the distribution system 22 includes the identification information D representing the distribution environment.
  • an image such as a QR code (registered trademark) representing the identification information D of the distribution environment is arranged in the video of the content C.
  • the control device 11 can extract the identification information D of the distribution environment by analyzing the video of the content C.
  • an acoustic component representing the identification information D of the distribution environment is included in the acoustic of the content C.
  • the control device 11 can extract the identification information D of the distribution environment by analyzing the sound of the content C.
  • the acoustic component of the identification information D in the distribution environment is, for example, an acoustic component in a frequency band that is difficult for the user U to hear.
  • Method 2 By operating the operation device 15, the user U instructs the distribution environment of the content C being reproduced by the reproduction device 14.
  • the control device 11 specifies the distribution environment in response to an instruction from the user U to the operation device 15.
  • the control device 11 is a collation device (not shown) in which the video of a specific section (hereinafter referred to as “reference section”) of the content C being played by the playback device 14 that differs depending on the distribution environment is connected to the communication network 300. ).
  • the collation device stores the video of the reference section of the content C for each distribution environment.
  • the collating device identifies the video inquired from the terminal device 10 among a plurality of videos corresponding to different distribution environments, and transmits the identification information D of the distribution environment corresponding to the video to the inquiring terminal device 10.
  • the control device 11 specifies the distribution environment by receiving the identification information D transmitted from the collation device by the communication device 13.
  • the sound of the content C may be used to specify the distribution environment.
  • the control device 11 inquires the collating device of the sound of the reference section of the content C being reproduced, which differs depending on the distribution environment.
  • the collation device stores the sound of the reference section of the content C for each distribution environment.
  • the collating device identifies the sound inquired from the terminal device 10 among a plurality of sounds corresponding to different distribution environments, and transmits the identification information D of the distribution environment corresponding to the sound to the inquiring terminal device 10.
  • the control device 11 specifies the distribution environment by receiving the identification information D transmitted from the collation device by the communication device 13.
  • the character string estimated by the voice recognition for the sound of the reference section may be referred to the collating device.
  • the control device 11 displays the selection screen G exemplified in FIG. 5 on the display device 141 (Sa2).
  • the selection screen G is displayed together with the video of the content C.
  • the selection screen G is an image that presents a plurality of sound effects that can be selected by the user U to the user U.
  • a plurality of operation images g corresponding to different sound effects are displayed on the selection screen G.
  • Each operation image g is a software button that can be operated by the user U by using the operation device 15.
  • the “cheers” in FIG. 5 mean the cheers uttered by the audience.
  • “Applause” means the applause sound produced by the audience's applause.
  • “Finger whistle” means a finger whistle sound produced by a finger whistle.
  • disappointment means a sighing sound that is pronounced when the audience is discouraged.
  • the user U can select any of a plurality of sound effects in the selection screen G by operating the selection screen G while watching the content C of the competition event.
  • the control device 11 waits until the selection of the sound effect is received from the user U (Sa3: NO).
  • the control device 11 functions as an element for receiving an instruction of any of the plurality of sound effects from the user U.
  • the control device 11 transmits the instruction data Q in response to the instruction by the user U to the control system 30 by the communication device 13 (Sa4).
  • the instruction data Q includes identification information D representing the distribution environment (first distribution environment / second distribution environment) of the terminal device 10 and identification information E of the sound effect designated by the user U.
  • the identification information E is a code string for identifying a sound effect.
  • the operation of the user U on the selection screen G is accepted as a valid operation only once every predetermined length (for example, 1 second). That is, when the user U repeatedly operates the selection screen G at short intervals, only the first operation within the period is effectively accepted, and the subsequent operations are ignored.
  • the control device 11 determines whether or not the end is instructed by the user U (Sa5). When the end is not instructed (Sa5: NO), the control device 11 waits for the user U to select the sound effect (Sa3). When the end is instructed by the user U (Sa5: YES), the control device 11 ends the reception process Sa.
  • the instruction data Q including the designation of the sound effect (identification information E) is controlled for each instruction of the sound effect by the user U. It is transmitted to the system 30.
  • each terminal device 10 executes the above processing, a plurality of instruction data Q transmitted from different terminal devices 10 are transmitted to the control system 30.
  • the control device 11 may reproduce the sound effect in the sound emitting device 142.
  • an acoustic signal representing different sound effect waveforms is stored in the storage device 12.
  • the control device 11 regenerates the sound effect by supplying the sound emitting device 142 with an acoustic signal corresponding to the sound effect selected by the user U.
  • a plurality of acoustic signals having different pitches or sound qualities are stored in the storage device 12 for each sound effect, and the control device 11 releases any one of the plurality of acoustic signals corresponding to the sound effects selected by the user U. It may be supplied to the sound device 142.
  • the control device 11 randomly selects any one of a plurality of acoustic signals corresponding to the sound effects and supplies them to the sound emitting device 142.
  • FIG. 6 is a block diagram illustrating the configuration of the control system 30.
  • the control system 30 includes a control device 31, a storage device 32, and a communication device 33.
  • the control system 30 is realized not only as a single device but also as a set of a plurality of devices configured as separate bodies from each other.
  • the control device 31 is composed of a single or a plurality of processors that control each element of the control system 30.
  • the control device 31 is composed of one or more types of processors such as a CPU, GPU, DSP, FPGA, or ASIC.
  • the communication device 33 communicates with each terminal device 10 via the communication network 300.
  • the storage device 32 is a single or a plurality of memories for storing a program executed by the control device 31 and various data used by the control device 31.
  • the storage device 32 is composed of a known recording medium such as a magnetic recording medium or a semiconductor recording medium.
  • the storage device 32 may be configured by combining a plurality of types of recording media. Even if a portable recording medium attached to and detached from the control system 30 or a recording medium (for example, cloud storage) on which the control system 30 can write and read via the communication network 300 is used as the storage device 32. good.
  • the storage device 32 stores a plurality of acoustic signals X corresponding to different sound effects.
  • the acoustic signal X corresponding to each sound effect is data representing the waveform of the sound effect.
  • Each acoustic signal X is recorded or synthesized in advance and then stored in the storage device 32.
  • the acoustic signal X is expressed in an arbitrary format such as MP3 (MPEG-1 Audio Layer-3).
  • the storage device 32 has an effect of acoustic signals X (X1 to X5) corresponding to each of the plurality of numerical values R1 to R5 with respect to the indicated number M (Ma, Mb).
  • the instruction number Ma is the number of times that the instruction data Q is received from the terminal device 10a in the first distribution environment.
  • the indicated number Ma is also referred to as the number of users U who instructed the terminal device 10a to make a sound effect.
  • Each of the five numerical ranges R1 to R5 is a range in which the range of the indicated number Ma is divided so as not to overlap with each other.
  • the numerical range R1 corresponds to the numerical value "1" of the indicated number Ma.
  • the numerical range R2 is a range of 2 or more and less than 10 in the range of the indicated number Ma.
  • the numerical range R3 is a range of 10 or more and less than 50 in the range of the indicated number Ma
  • the numerical range R4 is a range of 50 or more and less than 100 in the range of the indicated number Ma.
  • the numerical range R5 is a range of 100 or more in the range of the indicated number Ma.
  • one acoustic signal X corresponding to the numerical range R1 represents a cheer produced by one spectator.
  • one acoustic signal X corresponding to the numerical range R5 represents a cheer produced by 100 or more spectators.
  • a plurality of different sound effects are registered in the storage device 32.
  • FIG. 8 is a block diagram illustrating a functional configuration of the control device 31.
  • the control device 31 functions as a reception control unit 51 and an output control unit 52 by executing a program stored in the storage device 32.
  • the reception control unit 51 receives the instruction data Q transmitted from each terminal device 10 by the communication device 33.
  • the reception control unit 51 receives instruction data Q from each of the plurality of terminal devices 10 in parallel with the progress of the competition event.
  • the output control unit 52 controls the reproduction of the sound effect by the reproduction system 23 according to the instruction data Q received by the reception control unit 51.
  • the output control unit 52 supplies the acoustic signal X stored in the storage device 32 to the reproduction system 23, so that the sound effect represented by the acoustic signal X is reproduced in the reproduction system 23.
  • FIG. 9 is a flowchart illustrating a specific procedure of the process (hereinafter referred to as “control process”) Sb executed by the output control unit 52.
  • the control process Sb is a process of controlling the reproduction of the sound effect by the reproduction system 23 according to the instruction data Q transmitted from the plurality of terminal devices 10.
  • the control process Sb is repeated at a predetermined cycle (for example, every few seconds) in parallel with the progress of the competition event. That is, the control process Sb is repeated in parallel with the viewing of the content C by the user U of each terminal device 10.
  • the control device 31 determines whether or not the reception control unit 51 has received the instruction data Q transmitted from the terminal device 10a in the first distribution environment (Sb1). That is, it is determined whether or not the reception control unit 51 has received one or more instruction data Q including the identification information D of the first distribution environment.
  • the output control unit 52 executes the first process Sb2 for causing the reproduction system 23 to reproduce the sound effect.
  • the output control unit 52 does not execute the first process Sb2.
  • the output control unit 52 executes the first process Sb2 (Sb1: YES), and when the number is below the threshold value, the output control unit A configuration is also assumed in which 52 does not execute the first process Sb2 (Sb1: NO).
  • the first process Sb2 includes the aggregation process Sb21 and the reproduction process Sb22.
  • the aggregation process Sb21 is a process of counting the number of times (instruction number Ma) that the instruction data Q is received from the terminal device 10a after the execution of the immediately preceding control process Sb for each sound effect.
  • the output control unit 52 sets the number of times of receiving the instruction data Q including the identification information D of the first distribution environment and the identification information E of the sound effect as the instruction number Ma for each of the plurality of sound effects. Count.
  • the reproduction process Sb22 is a process for causing the reproduction system 23 of the facility 200 to reproduce any one of a plurality of sound effects. Specifically, among the plurality of sound effects, the sound effect corresponding to the result of the aggregation process Sb21 is reproduced in the facility 200 by the reproduction process Sb22.
  • the output control unit 52 selects one type of sound effect having the maximum indicated number Ma from the plurality of sound effects registered in the storage device 32, and among the plurality of acoustic signals X corresponding to the sound effect.
  • the acoustic signal X corresponding to the numerical range Rn to which the indicated number Ma belongs is supplied to the reproduction system 23.
  • the reproduction system 23 may reproduce two or more kinds of sound effects instructed by the user U of the terminal device 10a.
  • the first process Sb2 for reproducing the sound effect is executed. .. Therefore, not only the spectators located inside the facility 200 but also the user U located outside the facility 200 can contribute to raising the atmosphere of the competition event. That is, according to the first embodiment, it is possible to increase the number of users U who can contribute to the competition event.
  • the control device 31 determines whether or not the reception control unit 51 has received the instruction data Q transmitted from the terminal device 10b in the second distribution environment (Sb3). That is, it is determined whether or not the reception control unit 51 has received the instruction data Q including the identification information D of the second distribution environment.
  • the output control unit 52 executes the second process Sb4.
  • the second process Sb4 is a process for changing the volume of the sound effect reproduced in the facility 200 by the first process Sb2.
  • the output control unit 52 does not execute the second process Sb4.
  • the second process Sb4 includes the aggregation process Sb41 and the adjustment process Sb42.
  • the aggregation process Sb41 is a process of counting the number of times (instruction number Mb) that the instruction data Q is received from the terminal device 10b after the execution of the immediately preceding control process Sb for each sound effect.
  • the indicated number Mb is also referred to as the number of users U who instructed the terminal device 10b to make a sound effect.
  • the adjustment process Sb42 is a process of changing the volume of the sound effect according to the result of the aggregation process Sb41. Specifically, the output control unit 52 increases the volume of each sound effect reproduced by the first process Sb2 by an increase amount corresponding to the indicated number Mb of the sound effect. For example, the larger the indicated number Mb, the greater the amount of increase in volume.
  • the locus of change in volume is arbitrary, but for example, a configuration is assumed in which the volume is increased over time over a predetermined time. If the sound effect instructed by the user U of the terminal device 10a is not reproduced in the facility 200, the volume adjustment for the sound effect is not executed.
  • the delivery delay in the second delivery environment is larger than the delivery delay in the first delivery environment. Therefore, the time when the user U of the terminal device 10b recognizes a specific event (for example, a scoring scene in a match) in the content Cb of the competition event is the time when the user U of the terminal device 10a recognizes the event in the content Ca. Delay against. That is, even when the user U of the terminal device 10a and the user U of the terminal device 10b instruct the sound effect triggered by a common event of the competition event, the time point of the instruction by the user U of the terminal device 10b is the terminal. The device 10a is delayed by the time corresponding to the delivery delay with respect to the time point of the instruction by the user U. Therefore, the volume of the sound effect whose reproduction is started by the first process Sb2 of the control process Sb is changed by the second process Sb4 of the control process Sb executed after the lapse of time corresponding to the distribution delay in the second distribution environment. ..
  • the first process when the instruction data Q is received from the terminal device 10b to which the content Cb is distributed by the second distribution environment in which the distribution delay is larger than that in the first distribution environment, the first process is performed.
  • the second process Sb4 which is different from Sb2, is executed. Therefore, there is an advantage that the second process Sb4 suitable for the second delivery environment with a large delivery delay can be executed. Further, by changing the volume of the sound effect reproduced by the first processing Sb2 by the second processing Sb4, the total number of users U can be reflected in the sound effect.
  • the instruction data Q transmitted by the terminal device 10a in the first distribution environment and the instruction data Q transmitted by the terminal device 10b in the second distribution environment are not distinguished, and the sound effect is triggered by the reception of the instruction data Q by the control system 30. It is assumed that the playback is started (hereinafter referred to as "inverse proportion"). As described above, the time point of the instruction by the user U of the terminal device 10b is delayed from the time point of the instruction by the user U of the terminal device 10a. Therefore, in inverse proportion, when the reproduction of the sound effect corresponding to the instruction data Q from the terminal device 10a is delayed and delayed, the reproduction of the sound effect different from the sound effect is performed by the user of the terminal device 10b. It starts according to the instruction from U. In the above situation, the delay of the sound effect according to the instruction data Q from the terminal device 10b may be significantly perceived.
  • the volume of the sound effect during reproduction increases. That is, when the user U of the terminal device 10b instructs the sound effect, the reproduction of the individual sound effect according to the instruction is not newly started. Therefore, there is an advantage that the discomfort of the sound effect due to the delivery delay can be reduced as compared with the inverse proportion in which the reproduction of the sound effect different from the existing sound effect is started when the instruction data Q is received from the terminal device 10b. There is.
  • FIG. 10 is a flowchart illustrating a specific procedure of the control process Sb in the second embodiment.
  • the adjustment process Sb42 of the second process Sb4 in the first embodiment is replaced with the regeneration process Sb43.
  • the reproduction process Sb43 is a process of causing the reproduction system 23 to reproduce the sound effect corresponding to the instruction data Q from the terminal device 10b in the second distribution environment from a time point in the middle.
  • the operation other than the reproduction process Sb43 is the same as that of the first embodiment.
  • FIG. 11 is an explanatory diagram of the control process Sb in the second embodiment.
  • the output control unit 52 selects the acoustic signal X from the storage device 32 according to the instruction data Q received from the terminal device 10a from the start point P1 as in the first embodiment.
  • the sound effect represented by the acoustic signal X is reproduced from the start point P1. Therefore, the same effect as that of the first embodiment is realized in the second embodiment.
  • the output control unit 52 supplies the acoustic signal X to the reproduction system 23 from the time point P2 in the middle, so that the sound effect represented by the acoustic signal X is reproduced from the middle.
  • the output control unit 52 selects one type of sound effect having the maximum indicated number Mb from the plurality of sound effects registered in the storage device 32, and a plurality of acoustic signals corresponding to the sound effect.
  • the acoustic signal X corresponding to the numerical range Rn to which the indicated number Mb belongs is specified.
  • the output control unit 52 supplies the section of the acoustic signal X after the time point P2 to the reproduction system 23. That is, the section of the acoustic signal X from the time point P2 to the end point P3 is used for reproducing the sound effect, and the section from the start point P1 to the time point P2 is not used.
  • Time point P2 is a variable time point according to the delivery delay of the second delivery environment.
  • the acoustic signal X is the length of time from the start of reproduction of the sound effect in response to the instruction of the user U of the terminal device 10a to the reception of the instruction data Q transmitted by the terminal device 10b.
  • the time point behind the start point P1 of is a typical example of the time point P2.
  • the reproduction process Sb43 may be executed with the time point when a predetermined time has elapsed from the start point P1 of the acoustic signal X as the time point P2.
  • the same effect as that of the first embodiment is realized in the second embodiment.
  • the delay of the sound effect according to the instruction data Q from the terminal device 10b is remarkably perceived.
  • the sound effect is reproduced from the start point P1 according to the instruction data Q from the terminal device 10a, while the sound effect is reproduced from the intermediate time point P2 according to the instruction data Q from the terminal device 10b.
  • the discomfort of the sound effect due to the delivery delay is reduced as compared with the inverse proportion in which the sound effect is reproduced from the start point P1 according to the instruction data Q from the terminal device 10b.
  • FIG. 12 is a flowchart illustrating a specific procedure of the control process Sb in the third embodiment.
  • the adjustment process Sb42 of the second process Sb4 in the first embodiment is replaced with the additional process Sb44.
  • the additional processing Sb44 is a processing of adding a sound effect corresponding to the instruction data Q from the terminal device 10b in the second distribution environment to the content Cb distributed in the second distribution environment.
  • the operation other than the additional processing Sb44 is the same as that of the first embodiment.
  • the output control unit 52 supplies the acoustic signal X corresponding to the instruction data Q received from the terminal device 10a to the reproduction system 23, as in the first embodiment.
  • the sound effect represented by the acoustic signal X is reproduced in the facility 200. Therefore, the same effect as that of the first embodiment is realized in the third embodiment.
  • the output control unit 52 transmits the acoustic signal X to the distribution system 22b, so that the effect of the acoustic signal X on the content Cb distributed by the distribution system 22b to each terminal device 10b. Add sound. Specifically, the output control unit 52 selects one type of sound effect having the maximum indicated number Mb from the plurality of sound effects registered in the storage device 32, and a plurality of acoustic signals corresponding to the sound effect. Of X, the acoustic signal X corresponding to the numerical range Rn to which the indicated number Mb belongs is specified. Then, the output control unit 52 transmits the acoustic signal X to the distribution system 22b.
  • the distribution system 22b synthesizes the acoustic signal X received from the control system 30 into the content Cb. That is, the sound effect represented by the acoustic signal X is mixed with the acoustic of the content Cb.
  • the sound effect corresponding to the instruction data Q from the terminal device 10b is reproduced by each terminal device 10b as the sound of the content Cb, but is not reproduced by the reproduction system 23 in the facility 200. .. Further, the sound effect corresponding to the instruction data Q received from the terminal device 10b is not added to the content Ca distributed in the first distribution environment. The sound effect corresponding to the instruction data Q from the terminal device 10b may be reproduced in the facility 200.
  • the sound effect corresponding to the instruction data Q from the terminal device 10b is added to the content Cb delivered to the terminal device 10b. Therefore, the discomfort of the sound effect due to the delivery delay is reduced as compared with the inverse proportion in which the sound effect is reproduced in the facility 200 according to the instruction data Q from the terminal device 10b.
  • FIG. 13 is a block diagram illustrating the configuration of the communication system 100 in the fourth embodiment.
  • the communication system 100 of the fourth embodiment has a configuration in which a management device 60 is added to the communication system 100 of the first embodiment.
  • the management device 60 is an information terminal such as a mobile phone, a smartphone, a tablet terminal, or a personal computer.
  • the management device 60 can communicate with the control system 30.
  • the communication between the control system 30 and the management device 60 is a wired communication via the communication network 300 or a short-range wireless communication that does not use the communication network 300.
  • the manager A located in the facility 200 uses the management device 60.
  • Manager A is, for example, an employee of an organization that manages a competition event.
  • the manager A can operate the management device 60 while viewing the competition event in the facility 200.
  • Manager A operates the management device 60 at the time when the sound effect should be reproduced in the competition event. For example, the manager A operates the management device 60 at a time suitable for reproducing the sound effect or at a time when there is no problem in reproducing the sound effect, such as a scoring scene in a competition event.
  • the management device 60 transmits the output request R to the control system 30.
  • the communication device 33 of the control system 30 receives the output request R from the management device 60.
  • the administrator A may operate the management device 60 while viewing the content Ca distributed by the first distribution environment having a small distribution delay.
  • FIG. 14 is a flowchart illustrating a specific procedure of the control process Sb in the fourth embodiment.
  • the adjustment process Sb42 of the second process Sb4 in the first embodiment is replaced with the regeneration process Sb45.
  • the reproduction process Sb45 is a process of causing the reproduction system 23 to reproduce the sound effect corresponding to the instruction data Q from the terminal device 10b in the second distribution environment when the output request R is received.
  • the operation other than the reproduction process Sb45 is the same as that of the first embodiment.
  • the output control unit 52 reproduces the sound effect corresponding to the instruction data Q received from the terminal device 10a in the facility 200, as in the first embodiment. Therefore, the same effect as that of the first embodiment is realized in the fourth embodiment.
  • the output control unit 52 determines whether or not the output request R has been received.
  • the output control unit 52 causes the reproduction system 23 to reproduce the sound effect corresponding to the instruction data Q received from the terminal device 10b.
  • the output control unit 52 selects one type of sound effect having the maximum indicated number Mb from the plurality of sound effects registered in the storage device 32, and a plurality of acoustic signals corresponding to the sound effect.
  • the acoustic signal X corresponding to the numerical range Rn to which the indicated number Mb belongs is specified. Then, when the communication device 33 receives the output request R, the output control unit 52 supplies the acoustic signal X to the reproduction system 23.
  • the sound effect corresponding to the instruction data Q from the terminal device 10b is reproduced in the facility 200 triggered by the instruction by the administrator A. Therefore, compared with the inverse proportion in which the sound effect is reproduced by the reproduction system 23 immediately after it is determined that the reception control unit 51 has received the instruction data Q from the terminal device 10b (Sb3: YES), it is caused by the delivery delay in the competition event. It is possible to reduce the possibility that the sound effect will be reproduced at an unnatural point in time.
  • FIG. 15 is a schematic diagram of instruction data Q transmitted from the terminal device 10 to the control system 30 in the fifth embodiment.
  • the instruction data Q of the fifth embodiment includes the attribute Z of the user U in addition to the identification information D of the distribution environment and the identification information E of the sound effect.
  • the attribute Z is information about the user U such as age or gender, and is stored in the storage device 12 of the terminal device 10, for example. In the following description, the combination of age and gender is exemplified as attribute Z.
  • the point that the instruction data Q is transmitted from each terminal device 10 for each instruction of the sound effect by the user U is the same as that of the first embodiment.
  • FIG. 16 is a schematic diagram of an acoustic signal X stored in the storage device 32 of the control system 30.
  • the storage device 32 of the fifth embodiment stores the acoustic signals X (X1 to X5) corresponding to each of the plurality of attributes Z (Z1 to Z5) for each sound effect.
  • the acoustic signal X corresponding to each attribute Z represents a sound effect produced by the audience of the attribute Z. For example, of the five acoustic signals X corresponding to the "cheers" sound effect, one acoustic signal X corresponding to the attribute Z of the age "20s" and the gender "male” is pronounced by a male in his 20s. Represents the cheers to do.
  • the first process Sb2 of the control process Sb in the fifth embodiment includes the aggregation process Sb21 and the reproduction process Sb22 as in the first embodiment.
  • the output control unit 52 counts the instruction number Ma for each combination of the sound effect (identification information E) indicated by the instruction data Q received from the terminal device 10a and the attribute Z. That is, the instruction number Ma corresponding to the combination of one type of sound effect and one type of attribute Z is the number of times the instruction data Q including the identification information D of the sound effect and the attribute Z is received from the terminal device 10a.
  • the indicated number Ma is also referred to as the number of users U of the attribute Z who have selected the sound effect on the selection screen G of the terminal device 10a.
  • the output control unit 52 regenerates the acoustic signal X stored in the storage device 32 for the combination of the sound effect corresponding to the maximum instruction number Ma among the plurality of instruction number Ma and the attribute Z. Supply to. That is, the output control unit 52 of the fifth embodiment causes the reproduction system 23 to reproduce the sound effect corresponding to the indicated number Ma for each attribute Z.
  • the case of reproducing one type of sound effect corresponding to the attribute Z has been illustrated, but for example, two or more types of sound effects selected in descending order of the indicated number Ma are reproduced in the reproduction system 23. You may.
  • the second process Sb4 of the control process Sb in the fifth embodiment includes the aggregation process Sb41 and the reproduction process Sb45 as in the fourth embodiment.
  • the output control unit 52 counts the instruction number Mb for each combination of the sound effect (identification information E) indicated by the instruction data Q received from the terminal device 10b and the attribute Z. That is, the instruction number Mb corresponding to the combination of one type of sound effect and one type of attribute Z is the number of times the instruction data Q including the identification information D of the sound effect and the attribute Z is received from the terminal device 10b.
  • the indicated number Mb is also referred to as the number of users U of the attribute Z who have selected the sound effect on the selection screen G of the terminal device 10b.
  • the output control unit 52 when the output control unit 52 receives the output request R from the management device 60, the output control unit 52 causes the reproduction system 23 to reproduce the sound effect corresponding to the instruction data Q received from the terminal device 10b. Specifically, the output control unit 52 reproduces the acoustic signal X stored in the storage device 32 for the combination of the sound effect corresponding to the maximum indicated number Mb among the plurality of indicated number Mb and the attribute Z in the reproduction system 23. Supply to. That is, the output control unit 52 of the fifth embodiment causes the reproduction system 23 to reproduce the sound effect corresponding to the indicated number Mb for each attribute Z. In the above description, the case of reproducing one type of sound effect corresponding to the attribute Z has been illustrated, but for example, two or more types of sound effects selected in descending order of the indicated number Mb are reproduced in the reproduction system 23. You may.
  • the sound effect corresponding to the attribute Z of the user U of each terminal device 10 is reproduced. Therefore, it is possible to reproduce a sound effect having appropriate acoustic characteristics for the attribute Z of the user U who views the content C.
  • one acoustic signal X is stored in the storage device 32 for each numerical range Rn, but as illustrated in FIG. 17, a plurality of numerical ranges R1 to R5 are stored.
  • a plurality of acoustic signals X may be stored in the storage device 32 for each of the above.
  • the plurality of acoustic signals X corresponding to each numerical range Rn have the same type of sound effect (“cheers”, “clapping sounds”, etc.) and the scale of the audience (range of the number of instructions M), but the pitch or sound quality, etc.
  • the acoustic characteristics are different.
  • the number of acoustic signals X corresponding to each numerical range Rn may be different.
  • the output control unit 52 selects and reproduces any of a plurality of acoustic signals X corresponding to the numerical range Rn to which the indicated number Ma belongs. Supply to system 23. For example, any one of a plurality of acoustic signals X corresponding to one numerical range Rn is randomly selected.
  • the output control unit 52 randomly selects, for example, any of a plurality of acoustic signals X corresponding to the numerical range Rn to which the indicated number Mb belongs, and among the acoustic signals X, the time point P2 Subsequent sections are supplied to the reproduction system 23.
  • the output control unit 52 randomly selects, for example, any one of a plurality of acoustic signals X corresponding to the numerical range Rn to which the indicated number Mb belongs, and distributes the acoustic signal X to the distribution system 22b. Send to.
  • the output control unit 52 randomly selects, for example, any one of the plurality of acoustic signals X corresponding to the numerical range Rn to which the indicated number Mb belongs, and receives the output request R as an opportunity.
  • the acoustic signal X is supplied to the reproduction system 23.
  • the acoustic characteristics of the sound effects are different even when the indicated number Ma or the indicated number Mb is common. Can be done. That is, there is an advantage that sound effects having various acoustic characteristics can be reproduced.
  • one acoustic signal X is stored in the storage device 32 for each attribute Z, but as illustrated in FIG. 18, a plurality of acoustic signals X are stored for each of the plurality of attributes Z. It may be stored in the storage device 32.
  • the plurality of acoustic signals X corresponding to each attribute Z have the same type of sound effect (“cheers”, “clapping sound”, etc.), but differ in acoustic characteristics such as pitch or sound quality.
  • the number of acoustic signals X corresponding to each attribute Z may be different.
  • the output control unit 52 has a plurality of acoustic signals stored in the storage device 32 for the combination of the sound effect corresponding to the maximum value of the indicated number Ma and the attribute Z. Any one of X is selected and supplied to the reproduction system 23. For example, any of a plurality of acoustic signals X corresponding to one attribute Z is randomly selected.
  • the output control unit 52 of the fifth embodiment receives a plurality of acoustic signals X stored for the combination of the sound effect corresponding to the maximum value of the indicated number Mb and the attribute Z in the reproduction process Sb45 of the second process Sb4. Any of them is randomly selected, for example, and supplied to the reproduction system 23.
  • the acoustic characteristics of the sound effect can be different. can. That is, there is an advantage that sound effects having various acoustic characteristics can be reproduced.
  • the content Cb viewed by the user U of the terminal device 10b in the second distribution environment is delayed with respect to the progress of the competition event viewed by the user U of the terminal device 10a in the facility 200. Therefore, even when the user U of the terminal device 10a instructs the sound effect in the facility 200, the discomfort of the sound effect due to the delivery delay of the second delivery delay can be reduced as in each of the above-described embodiments. The same effect as each form of is realized.
  • the control device 11 refers to the position information of the terminal device 10a in step Sa1 of FIG. 4, so that the user U can use the facility 200. It can be identified that it is located within.
  • the position information of the terminal device 10a is generated by using, for example, a GPS (Global Positioning System) or an IP (Internet Protocol) address. Further, when the terminal device 10a acquires information that can be acquired by the terminal device 10a only in the facility 200 (hereinafter referred to as "specific information"), the user U of the terminal device 10a is located in the facility 200. It may be specified.
  • the terminal device 10a receives specific information transmitted by short-range wireless communication from a transmitter in the facility 200
  • the terminal device 10a is located in the facility 200.
  • short-range wireless communication for example, wireless communication such as Bluetooth (registered trademark) or WiFi (registered trademark), or acoustic communication using sound waves as a transmission medium is used.
  • an image such as a QR code (registered trademark) representing specific information is posted in the facility 200
  • the terminal device 10a is used when the terminal device 10a acquires the specific information by imaging the image. Person U is identified as being located in the facility 200.
  • the terminal device 10 exemplifies both the reception and reproduction of the content C and the reception of the sound effect instruction by the user U, which is illustrated in FIG. As you can see, the content C may be reproduced by the reproduction device 70 separate from the terminal device 10.
  • the playback device 70 reproduces the content C distributed by the distribution system 22.
  • the information terminal mobile phone, smartphone, tablet terminal, personal computer, etc.
  • the distribution system 22 is a television broadcasting system
  • a television receiver is used as a reproduction device 70.
  • the delivery delay due to the television broadcasting system is sufficiently small. Therefore, the television broadcasting system is used as the distribution system 22a that distributes the content C by the first distribution environment.
  • the user U instructs the sound effect by operating the terminal device 10 while watching the content C reproduced by the reproduction device 70.
  • the remote control device used for operating the playback device 70 may be used as the terminal device 10. By operating any of the plurality of controls installed on the remote control device, the user U can select any of the plurality of sound effects.
  • the following method (a modification of the above-mentioned method 1) can be used to specify the distribution environment.
  • the playback device 70 displays an image such as a QR code (registered trademark) representing the identification information D of the distribution environment together with the video of the content C.
  • the control device 11 of the terminal device 10 captures the image by the image pickup device mounted on the terminal device 10, and analyzes the image pickup result to specify the identification information D of the distribution environment. Further, the reproduction device 70 reproduces the acoustic component representing the identification information D of the distribution environment together with the sound of the content C.
  • the control device 11 of the terminal device 10 picks up the sound reproduced by the reproduction device 70 by the sound collecting device mounted on the terminal device 10, and identifies the identification information D of the distribution environment by analyzing the reproduced sound.
  • the instruction data Q transmitted from the terminal device 10b in the second distribution environment is reflected in the reproduction of the sound effect, but the instruction data Q transmitted from the terminal device 10b is reflected in the sound effect. It does not have to be reflected in the playback. That is, the control system 30 may ignore the instruction data Q transmitted from the terminal device 10b.
  • the acoustic signal X corresponding to the numerical range Rn to which the indicated number M belongs was selected.
  • the acoustic signal X corresponding to the attribute Z of the user U who instructed the sound effect was selected.
  • the selection of the acoustic signal X corresponding to the numerical range Rn and the selection of the acoustic signal X according to the attribute Z may be merged.
  • a plurality of acoustic signals X (X1 to X5) corresponding to different numerical ranges Rn are stored in the storage device 32 in advance, but the indicated number M (Ma, Mb) is supported.
  • the control device 31 (output control unit 52) may generate the acoustic signal X each time the instruction data Q is received.
  • the output control unit 52 processes a reference signal prepared in advance for each sound effect to generate an acoustic signal X corresponding to the indicated number Ma. Generate.
  • the reference signal of each sound effect is a signal representing the waveform of the sound effect produced by a single audience.
  • the output control unit 52 generates the number of intermediate signals corresponding to the indicated number M from the reference signal.
  • the plurality of intermediate signals differ in acoustic characteristics such as pitch or sound quality.
  • the output control unit 52 generates an acoustic signal X by mixing a plurality of intermediate signals. According to the above configuration, there is an advantage that it is not necessary to store a large number of acoustic signals X in the storage device 32.
  • the sound effect is reproduced by the reproduction system 23, but the staging effect output in the facility 200 is not limited to the reproduction of the sound effect (that is, the acoustic effect).
  • the control system 30 may control the lighting effect using the lighting device installed in the facility 200.
  • the control system 30 controls the lighting system by a light emission pattern corresponding to the instruction data Q received from each terminal device 10.
  • the emission pattern is a pattern of temporal changes in emission amount or emission color.
  • the output control unit 52 of the first embodiment controls the lighting system in the first process Sb2 by a light emission pattern corresponding to the instruction data Q received from the terminal device 10a. Further, when the instruction data Q is received from the terminal device 10b, the output control unit 52 changes the light emission characteristics of the lighting system controlled by the first process Sb2 in the second process Sb4. For example, the output control unit 52 increases the amount of light emitted from the lighting system when the instruction data Q is received from the terminal device 10b.
  • the output control unit 52 of the fourth embodiment or the fifth embodiment takes the instruction (output request R) by the administrator A as an opportunity in the second process Sb4 to be executed when the instruction data Q is received from the terminal device 10b.
  • the lighting system is controlled by a light emission pattern according to the instruction data Q.
  • control system 30 may control the effect of using the smoke generation system for effect installed in the facility 200.
  • the control system 30 controls the smoke generation system according to the smoke generation pattern corresponding to the instruction data Q received from each terminal device 10.
  • the smoke pattern is a pattern of temporal changes in smoke charge or smoke color.
  • the output control unit 52 of the first embodiment controls the smoke generation system in the first process Sb2 by the smoke generation pattern according to the instruction data Q received from the terminal device 10a. Further, when the instruction data Q is received from the terminal device 10b, the output control unit 52 changes the smoke emission characteristics of the smoke generation system controlled by the first process Sb2 in the second process Sb4. For example, the output control unit 52 increases the amount of smoke emitted from the smoke emitting system when the instruction data Q is received from the terminal device 10b.
  • the output control unit 52 of the fourth embodiment or the fifth embodiment takes the instruction (output request R) by the administrator A as an opportunity in the second process Sb4 to be executed when the instruction data Q is received from the terminal device 10b.
  • the smoke generation system is controlled by the smoke generation pattern according to the instruction data Q.
  • the "directing effect” means an arbitrary effect output in the facility 200.
  • Reproduction of sound effects by the reproduction system 23, light emission by the lighting system, and smoke generation by the smoke generation system are examples of "output of effect”.
  • the control system 30 is expressed as a computer system for controlling the output of the effect of the effect in the event.
  • the configuration in which the distribution source (distribution system 22a, distribution system 22b) of the content C is different between the first distribution environment and the second distribution environment is exemplified, but the common distribution system 22 is used. Even in the situation where the content C is delivered from, the delivery delay for each terminal device 10 may differ for each terminal device 10. That is, even in a situation where the content C is distributed from the common distribution system 22, the environment in which the distribution delay for the terminal device 10 is small corresponds to the first distribution environment, and the environment in which the distribution delay for the terminal device 10 is large corresponds to the second distribution environment. Equivalent to.
  • the distribution system 22 transmits time data (time stamp) representing the transmission time of the content C to each terminal device 10 together with the content C.
  • the control device 11 of the terminal device 10 can specify the delivery delay by comparing the transmission time represented by the time data received from the delivery system 22 with the current time.
  • the control device 11 may specify the distribution environment (first distribution environment / second distribution environment) from the distribution delay specified by the above method.
  • the acoustic characteristic of the sound effect adjusted when the instruction data Q is received from the terminal device 10b is not limited to the volume.
  • various acoustic characteristics such as pitch, sound quality, and reverberation characteristics of the sound effect may be changed.
  • a competition event in which a plurality of contestants compete in sports is illustrated, but the type of event in which the effect is output is not limited to the above examples.
  • a demonstration event live
  • a performer such as a singer or a dancer
  • an exhibition event displaying various items or an educational event in which various educational institutions such as schools and learning schools provide classes to students, or
  • Various events held for a specific purpose such as a lecture event in which a lecturer such as an expert gives a lecture on various subjects, are included in the concept of "event”.
  • an event means various performances in which a directing effect is output.
  • the function of the terminal device 10 exemplified above is performed by the cooperation between the single or plurality of processors constituting the control device 11 and the program stored in the storage device 12. It will be realized. Further, as described above, the function of the control system 30 is realized by the cooperation between the single or a plurality of processors constituting the control device 31 and the program stored in the storage device 32.
  • the program exemplified above can be provided in a form stored in a computer-readable recording medium and installed in the computer.
  • the recording medium is, for example, a non-transitory recording medium, and an optical recording medium (optical disc) such as a CD-ROM is a good example, but a known arbitrary such as a semiconductor recording medium or a magnetic recording medium. Recording media in the form of are also included.
  • the non-transient recording medium includes any recording medium other than the transient propagation signal (transitory, propagating signal), and the volatile recording medium is not excluded. Further, in the configuration in which the distribution device distributes the program via the communication network, the recording medium for storing the program in the distribution device corresponds to the above-mentioned non-transient recording medium.
  • the control method receives instruction data according to an instruction by a user of the terminal device from each of the plurality of terminal devices, and is an event among the plurality of terminal devices.
  • the event occurs.
  • the first process of outputting the effect to the facility to be implemented is executed, and among the plurality of terminal devices, the second distribution environment, which is generated by recording the event and has a larger distribution delay than the first distribution environment, is used for distribution.
  • a second process different from the first process is executed.
  • the first effect is output to the facility where the event is carried out.
  • the process is executed. Therefore, it is possible to increase the number of users who can contribute to the event.
  • the instruction data is received from the second terminal device of the user who views the second content distributed by the second distribution environment having a larger distribution delay than the first distribution environment, the first process is different from the first process. 2 Processing is executed. Therefore, the second process suitable for an environment with a large delivery delay can be executed.
  • Content is information (digital content) provided to the user of the terminal device.
  • the user views any content, including, for example, at least one of video and audio.
  • the difference between the “first content” and the “second content” does not matter.
  • the "first content” and the “second content” may be contents recorded by a common recording system, or may be separate contents recorded by different recording systems.
  • the "first content” and the “second content” may be separate contents generated by different processes after recording by a common recording system.
  • the event to be recorded is common between the first content and the second content.
  • Distribution environment means an environment in which processing or communication from content generation (recording) to playback is executed.
  • the first distribution environment is an environment in which the first content is distributed from the first distribution system (for example, a television broadcasting system)
  • the second distribution environment is a second distribution system (for example) separate from the first distribution system.
  • it is an environment in which the second content is distributed from a video distribution system).
  • the second distribution environment is an environment in which the distribution delay is larger than that of the first distribution environment. Therefore, for example, even in an environment in which distribution systems are common, an environment in which the terminal device can receive the content with the first delay amount corresponds to the first distribution environment, and the second delay for receiving the content by the terminal device is larger than the first delay amount.
  • the environment in which the amount is required corresponds to the second distribution environment.
  • Delivery delay means a delay in playing content for an event. That is, the time length from the time when a specific event occurs in the event to the time when the event in the content is reproduced in the terminal device is a specific example of the "delivery delay".
  • Directive effect is a directing effect at an event.
  • an acoustic effect using the acoustic equipment of the facility where the event is held a video effect using the display equipment of the facility, or a lighting effect using the lighting equipment of the facility, for example, a user located in the facility
  • Various perceptible effects typically visual or acoustic effects are included in the concept of "directing effects”.
  • the "second process” is an arbitrary process different from the "first process".
  • the relationship between the "first process” and the “second process” may be a relationship in which all are different (a relationship in which there is no common process) or a relationship in which the "second process” is partially common.
  • the control method receives instruction data according to an instruction by a user of the terminal device from each of the plurality of terminal devices, and among the plurality of terminal devices, an event.
  • the instruction data is received from the first terminal device of the user who views the event at the facility where the event is carried out, the first process of outputting the effect to the facility is executed, and the plurality of terminal devices are used.
  • the instruction data is received from the second terminal device of the user who watches the content generated and distributed by recording the event in parallel with the progress of the event, the process is different from the first process.
  • the second process is executed.
  • the first process includes a process of causing a reproduction system of the facility to reproduce a sound effect (for example, a reproduction process Sb22), and the second process is described.
  • a process for changing the acoustic characteristics of the sound effect (for example, an adjustment process Sb42) is included.
  • the instruction by the user of the second terminal device is reflected in the sound effect.
  • the reproduction of the sound effect is started according to the instruction data without distinguishing between the instruction data received from the first terminal device and the instruction data received from the second terminal device, the instruction data from the first terminal device is started.
  • the reproduction of the sound effect according to the above is delayed and delayed, the reproduction of the sound sound different from the sound effect is started according to the instruction from the user of the second terminal device. Therefore, the delay may be noticeably perceived by the listener of the sound effect. According to the above-described aspect, since the acoustic characteristics of the sound effect whose reproduction is started by the first processing are changed by the second processing, it is possible to reduce the discomfort of the sound effect due to the delivery delay.
  • the first process includes a process (for example, reproduction process Sb22) of supplying an acoustic signal representing a sound effect to the reproduction system of the facility from a starting point.
  • the second process includes a process of supplying the acoustic signal to the reproduction system from a time point in the middle (for example, the reproduction process Sb43).
  • the instruction data from the first terminal device is started.
  • the reproduction of the sound effect according to the above is delayed and delayed, the reproduction of the sound sound different from the sound effect is started according to the instruction from the user of the second terminal device. Therefore, the delay may be noticeably perceived by the listener of the sound effect.
  • the acoustic signal is supplied to the reproduction system from a time point in the middle, it is possible to reduce the discomfort of the sound effect due to the delivery delay.
  • the first process includes a process of causing the reproduction system of the facility to reproduce the sound effect (for example, the reproduction process Sb22), and the second process produces the sound effect.
  • a process to be added to the second content (for example, an additional process Sb44) is included.
  • the second process includes a process (for example, a reproduction process Sb45) of outputting an effect to the facility triggered by an instruction by an administrator.
  • a process for example, a reproduction process Sb45
  • the instruction data is received from the second terminal device
  • the effect is output triggered by the instruction by the administrator. Therefore, it is possible to reduce the possibility that the effect is output at an unnatural time point due to the delivery delay in the second delivery environment.
  • the second process counts the number of times the instruction data is received from the second terminal device for each attribute of the user of the second terminal device. Processing (for example, aggregation processing Sb41) and processing for outputting an effect according to the number of times for each attribute (for example, reproduction processing Sb45) are included.
  • the effect is output according to the attributes of the user of the terminal device. Therefore, it is possible to output an appropriate effect on the attributes of the user who views the content.
  • any specific example (eighth aspect) of any one of the first to seventh aspects a plurality of different sound effects are registered for each of the plurality of numerical ranges relating to the number of times the instruction data is received from the first terminal device.
  • the first process one of the process of counting the number of times instruction data is received from the first terminal device and the plurality of sound effects corresponding to the numerical range including the number of times is selected from the plurality of numerical ranges.
  • the present disclosure is also realized as a control system that realizes the control method according to each of the above-mentioned aspects (any of aspects 1 to 8), or a program that causes a computer to execute the control method.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Databases & Information Systems (AREA)
  • Computer Graphics (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

制御システムは、イベントの収録により生成されて配信されるコンテンツを当該イベントの進行に並行して視聴する複数の利用者がそれぞれ使用する複数の端末装置から、各利用者による指示に応じた指示データを受信する受信制御部と、複数の端末装置のうち第1配信環境により配信される第1コンテンツを視聴する利用者の端末装置から指示データを受信した場合に、イベントが実施される施設に演出効果を出力する第1処理を実行し、第1配信環境よりも配信遅延が大きい第2配信環境により配信される第2コンテンツを視聴する利用者の端末装置から指示データを受信した場合に、第1処理とは相違する第2処理を実行する出力制御部とを具備する。

Description

制御方法および制御システム
 本開示は、例えば音楽またはスポーツ等の各種のイベントにおける演出効果を制御する技術に関する。
 例えば音響ホール等の音響空間で実施されるコンサート等のイベントを、多数の利用者が遠隔地において視聴するためのシステムが、従来から提案されている(例えば特許文献1)。
米国特許第9131016号明細書
 しかし、イベントが実施される施設以外の場所において当該イベントを視聴する利用者の挙動(例えば出演者に対する声援)は、施設内に伝達されない。また、例えば身体的な障碍等の事情により応援等の行為が制限される観客は、施設内に所在する場合でもイベントに寄与することが困難である。以上の事情を考慮して、本開示の好適な態様は、イベントに寄与できる利用者を増加させることを目的とする。
 以上の課題を解決するために、本開示のひとつの態様に係る制御方法は、複数の端末装置の各々から当該端末装置の利用者による指示に応じた指示データを受信し、前記複数の端末装置のうち、イベントの収録により生成されて第1配信環境により配信される第1コンテンツを、当該イベントの進行に並行して視聴する利用者の第1端末装置から、前記指示データを受信した場合に、前記イベントが実施される施設に演出効果を出力する第1処理を実行し、前記複数の端末装置のうち、前記イベントの収録により生成されて前記第1配信環境よりも配信遅延が大きい第2配信環境により配信される第2コンテンツを、当該イベントの進行に並行して視聴する利用者の第2端末装置から、前記指示データを受信した場合に、前記第1処理とは相違する第2処理を実行する。
 本開示の他の態様に係る制御方法は、複数の端末装置の各々から当該端末装置の利用者による指示に応じた指示データを受信し、前記複数の端末装置のうち、イベントが実施される施設において当該イベントを観覧する利用者の第1端末装置から、前記指示データを受信した場合に、前記施設に演出効果を出力する第1処理を実行し、前記複数の端末装置のうち、前記イベントの収録により生成されて配信されるコンテンツを当該イベントの進行に並行して視聴する利用者の第2端末装置から、前記指示データを受信した場合に、前記第1処理とは相違する第2処理を実行する。
 本開示のひとつの態様に係る制御システムは、複数の端末装置の各々から当該端末装置の利用者による指示に応じた指示データを受信する受信制御部と、前記複数の端末装置のうち、イベントの収録により生成されて第1配信環境により配信される第1コンテンツを、当該イベントの進行に並行して視聴する利用者の第1端末装置から、前記指示データを受信した場合に、前記イベントが実施される施設に演出効果を出力する第1処理を実行し、前記複数の端末装置のうち、前記イベントの収録により生成されて前記第1配信環境よりも配信遅延が大きい第2配信環境により配信される第2コンテンツを、当該イベントの進行に並行して視聴する利用者の第2端末装置から、前記指示データを受信した場合に、前記第1処理とは相違する第2処理を実行する出力制御部とを具備する。
 本開示の他の態様に係る制御システムは、複数の端末装置の各々から当該端末装置の利用者による指示に応じた指示データを受信する受信制御部と、前記複数の端末装置のうち、イベントが実施される施設において当該イベントを観覧する利用者の第1端末装置から、前記指示データを受信した場合に、前記施設に演出効果を出力する第1処理を実行し、前記複数の端末装置のうち、前記イベントの収録により生成されて配信されるコンテンツを当該イベントの進行に並行して視聴する利用者の第2端末装置から、前記指示データを受信した場合に、前記第1処理とは相違する第2処理を実行する出力制御部とを具備する。
第1実施形態における通信システムの構成を例示するブロック図である。 第1配信環境および第2配信環境の説明図である。 端末装置の構成を例示するブロック図である。 受付処理の具体的な手順を例示するフローチャートである。 選択画面の模式図である。 制御システムの構成を例示するブロック図である。 複数の音響信号の説明図である。 制御システムの機能的な構成を例示するブロック図である。 制御処理の具体的な手順を例示するフローチャートである。 第2実施形態における制御処理の手順を例示するフローチャートである。 第2実施形態における制御処理の説明図である。 第3実施形態における制御処理の手順を例示するフローチャートである。 第4実施形態における通信システムの構成を例示するブロック図である。 第4実施形態における制御処理の手順を例示するフローチャートである。 第5実施形態における指示データの模式図である。 第5実施形態における複数の音響信号の説明図である。 変形例(1)における複数の音響信号の説明図である。 変形例(2)における複数の音響信号の説明図である。 端末装置の利用者が再生機器を利用してコンテンツを視聴する状況の説明図である。
A:第1実施形態
 図1は、第1実施形態に係る通信システム100の構成を例示するブロック図である。通信システム100は、例えばインターネット等の通信網300を介して複数の端末装置10の各々と通信可能なコンピュータシステムである。複数の端末装置10の各々は、例えば携帯電話機,スマートフォン,タブレット端末またはパーソナルコンピュータ等の情報端末である。各利用者Uは自身の端末装置10を利用する。
 通信システム100は、収録システム21aと収録システム21bと配信システム22aと配信システム22bと再生システム23と制御システム30とを具備する。なお、以下の説明においては、収録システム21aと収録システム21bとを区別する必要がない場合には単に「収録システム21」と表記する。同様に、配信システム22aと配信システム22bとを区別する必要がない場合には単に「配信システム22」と表記する。
 収録システム21aと収録システム21bと再生システム23とは、各種のイベントが実施される施設200内に設置される。具体的には、施設200は、複数の出場者が特定のスポーツにより競技するイベント(以下「競技イベント」という)が実施される競技場である。なお、例えば感染症の蔓延の防止等の種々の事情により、施設200内に観客が存在しない状況で競技イベント(すなわち無観客試合)が実施される場合がある。
 再生システム23は、施設200内に設置された音響設備により構成される音響システムであり、施設200内に音響を再生する。再生システム23は、例えば、施設200内の相異なる場所に設置された複数の放音装置(例えばスピーカ装置)を具備する。なお、再生システム23と制御システム30とを単体の装置として構成してもよい。
 制御システム30は、再生システム23による音響の再生を制御するコンピュータシステムである。具体的には、制御システム30は、再生システム23に各種の効果音を再生させる。効果音は、例えば、多数の観客が発声する歓声、多数の観客による拍手で発音される拍手音、または観客の指笛により発音される指笛音、打楽器または管楽器等の楽器の演奏により発音される楽器音等の各種の演出音である。競技イベントの出場者は、再生システム23が再生する効果音を聴取可能である。以上のように放音システムが効果音を再生することで、施設200内に観客が存在しない状況または観客が少ない状況でも、恰も多数の観客が競技イベントを観覧しているかのような雰囲気を施設200内に生成できる。
 収録システム21は、施設200内で実施される競技イベントの動画を収録する。具体的には、各収録システム21は、競技イベントの映像を撮像する撮像装置と、競技イベントの音響を収音する収音装置とを具備する。収音装置が収音する音響は、施設200内に所在する出場者または観客が発音した音響に加えて再生システム23による再生音を含む。撮像装置が撮像する映像と収音装置が収音する音響とで構成される動画が収録システム21により生成される。収録システム21aと収録システム21bとは、施設200内で実施される共通の競技イベントの動画を並列に収録する。
 配信システム22aは、収録システム21aが収録した動画を含むコンテンツCaを端末装置10に配信する。具体的には、配信システム22aは、競技イベントの進行に並行してコンテンツCaを配信(すなわちライブ配信)する。同様に、配信システム22bは、収録システム21bが収録した動画を含むコンテンツCbを端末装置10に配信する。具体的には、配信システム22bは、競技イベントの進行に並行してコンテンツCbを配信する。配信システム22aによるコンテンツCaの配信と配信システム22bによるコンテンツCbの配信とは並列に実行される。以上の説明から理解される通り、コンテンツCaとコンテンツCbとは、施設200内で実施される共通の競技イベントを対象とするが、配信元(配信システム22a/配信システム22b)が相違する。なお、以下の説明において、コンテンツCaとコンテンツCbとを区別する必要がない場合には単に「コンテンツC」と表記する。
 図2に例示される通り、複数の端末装置10の各々は、コンテンツCaおよびコンテンツCbの何れかを受信することが可能である。以下の説明においては、収録システム21aによる収録で生成されるコンテンツCaが配信システム22aにより端末装置10に配信される環境を「第1配信環境」と表記する。同様に、収録システム21bによる収録で生成されるコンテンツCbが配信システム22bにより端末装置10に配信される環境を「第2配信環境」と表記する。第1配信環境および第2配信環境の何れかが端末装置10毎に選択される。以下の説明においては、第1配信環境によりコンテンツCaを受信する端末装置10を「端末装置10a」と表記し、第2配信環境によりコンテンツCbを受信する端末装置10を「端末装置10b」と表記する場合がある。端末装置10aの利用者Uは、当該端末装置10aが再生するコンテンツCaを視聴する。端末装置10bの利用者Uは、当該端末装置10bが再生するコンテンツCbを視聴する。各利用者Uは、施設200の外側(例えば自宅)に位置する。
 第1配信環境と第2配信環境との間では配信遅延が相違する。配信遅延は、競技イベントの進行に対するコンテンツCの再生の遅延である。例えば、競技イベントにおいて特定の事象が発生した時点から、コンテンツCにおける当該事象を端末装置10が再生する時点までの時間長が、配信遅延に相当する。配信遅延は、例えば、収録システム21と配信システム22との間の通信状況、配信システム22がコンテンツCを配信する端末装置10の総数、または、配信システム22がコンテンツCを生成する画像処理の所要時間等の種々の要因に依存する。
 具体的には、第2配信環境は、第1配信環境と比較して配信遅延が大きい。したがって、コンテンツCbの再生の進行は、コンテンツCaの再生の進行に対して遅延した関係にある。例えば、コンテンツCbを視聴する利用者Uが競技イベント内の特定の事象(例えば試合内の得点シーン)を認識する時点は、コンテンツCaを視聴する利用者Uが当該事象を認識する時点に対して遅延した関係にある。なお、第1配信環境における配信遅延は充分に小さい。すなわち、コンテンツCaは、施設200内の競技イベントの進行に対して殆ど遅延なく再生される。
 図3は、各端末装置10の構成を例示するブロック図である。端末装置10は、制御装置11と記憶装置12と通信装置13と再生装置14と操作装置15とを具備する。なお、端末装置10は、単体の装置として実現されるほか、相互に別体で構成された複数の装置の集合としても実現される。
 制御装置11は、端末装置10の各要素を制御する単数または複数のプロセッサで構成される。例えば、制御装置11は、CPU(Central Processing Unit)、GPU(Graphic Processing Unit)、DSP(Digital Signal Processor)、FPGA(Field Programmable Gate Array)、またはASIC(Application Specific Integrated Circuit)等の1種類以上のプロセッサにより構成される。
 記憶装置12は、制御装置11が実行するプログラムと制御装置11が使用する各種のデータとを記憶する単数または複数のメモリである。記憶装置12は、例えば磁気記録媒体または半導体記録媒体等の公知の記録媒体により構成される。なお、複数種の記録媒体の組合せにより記憶装置12を構成してもよい。また、端末装置10に着脱される可搬型の記録媒体、または端末装置10が通信網300を介して書込および読出を実行できる記録媒体(例えばクラウドストレージ)を、記憶装置12として利用してもよい。
 通信装置13は、通信網300を介して通信システム100(配信システム22a,配信システム22bおよび制御システム30)と通信する。例えば、通信装置13は、配信システム22aから配信されるコンテンツCaまたは配信システム22bから配信されるコンテンツCbを受信する。
 再生装置14は、制御装置11による制御のもとで、映像と音響とを含む動画を再生する。例えば、再生装置14は、通信装置13が受信するコンテンツCを再生する。再生装置14は、表示装置141と放音装置142とを具備する。表示装置141は、制御装置11による制御のもとで画像を表示する。表示装置141は、例えば液晶パネルまたは有機EL(ElectroLuminescence)パネル等の表示パネルで構成される。例えば、表示装置141はコンテンツCの映像を表示する。放音装置142は、制御装置11による制御のもとで音響を再生する。例えば、放音装置142はコンテンツCの音響を再生する。
 操作装置15は、利用者Uからの指示を受付ける入力機器である。操作装置15は、例えば、利用者Uが操作する複数の操作子、または、表示装置141と一体に構成されたタッチパネルである。利用者Uは、操作装置15を操作することで、再生システム23が施設200内に再生する所望の効果音を複数の効果音から選択できる。
 図4は、制御装置11が実行する処理(以下「受付処理」という)Saの具体的な手順を例示するフローチャートである。受付処理Saは、再生システム23が施設200内に放音する効果音の指示を利用者Uから受付ける処理である。再生装置14によるコンテンツCの再生に並行して受付処理Saが実行される。すなわち、競技イベントの進行に並行して受付処理Saが実行される。
 制御装置11は、再生装置14が再生しているコンテンツCの配信環境(第1配信環境/第2配信環境)を特定する(Sa1)。再生装置14によるコンテンツCaの再生中には第1配信環境が特定され、コンテンツCbの再生中には第2配信環境が特定される。配信環境の特定には、例えば以下に例示する方法1から方法3が採用される。
[方法1]
 配信システム22が配信するコンテンツCには、配信環境を表す識別情報Dが含まれる。例えば配信環境の識別情報Dを表すQRコード(登録商標)等の図像がコンテンツCの映像内に配置される。制御装置11は、当該コンテンツCの映像を解析することで配信環境の識別情報Dを抽出可能である。また、例えば配信環境の識別情報Dを表す音響成分がコンテンツCの音響に含有される。制御装置11は、当該コンテンツCの音響を解析することで配信環境の識別情報Dを抽出可能である。なお、配信環境の識別情報Dの音響成分は、例えば、利用者Uが聴取し難い周波数帯域の音響成分である。
[方法2]
 利用者Uは、操作装置15を操作することで、再生装置14による再生中のコンテンツCの配信環境を指示する。制御装置11は、操作装置15に対する利用者Uからの指示に応じて配信環境を特定する。
[方法3]
 制御装置11は、再生装置14による再生中のコンテンツCのうち配信環境に応じて相違する特定の区間(以下「参照区間」という)の映像を、通信網300に接続された照合装置(図示略)に照会する。照合装置は、配信環境毎にコンテンツCの参照区間の映像を記憶する。照合装置は、相異なる配信環境に対応する複数の映像のうち端末装置10から照会された映像を特定し、当該映像に対応する配信環境の識別情報Dを照会元の端末装置10に送信する。制御装置11は、照合装置から送信された識別情報Dを通信装置13により受信することで配信環境を特定する。
 なお、以上の説明においては映像を照合したが、コンテンツCの音響を配信環境の特定に利用してもよい。例えば、制御装置11は、再生中のコンテンツCのうち配信環境に応じて相違する参照区間の音響を照合装置に照会する。照合装置は、配信環境毎にコンテンツCの参照区間の音響を記憶する。照合装置は、相異なる配信環境に対応する複数の音響のうち端末装置10から照会された音響を特定し、当該音響に対応する配信環境の識別情報Dを照会元の端末装置10に送信する。制御装置11は、照合装置から送信された識別情報Dを通信装置13により受信することで配信環境を特定する。なお、参照区間の音響に対する音声認識で推定された文字列を、照合装置に照会してもよい。
 以上の手順により配信環境を特定すると、制御装置11は、図5に例示される選択画面Gを表示装置141に表示させる(Sa2)。例えばコンテンツCの映像とともに選択画面Gが表示される。選択画面Gは、利用者Uが選択可能な複数の効果音を利用者Uに提示する画像である。具体的には、選択画面Gには、相異なる効果音に対応する複数の操作画像gが表示される。各操作画像gは、操作装置15を利用して利用者Uが操作可能なソフトウェアボタンである。図5の「歓声」は、観客が発声する歓声を意味する。「拍手」は、観客による拍手で発音される拍手音を意味する。「指笛」は、指笛により発音される指笛音を意味する。また、「落胆」は、観客が落胆したときに発音する溜息音を意味する。
 利用者Uは、競技イベントのコンテンツCを視聴しながら選択画面Gを操作することで、選択画面G内の複数の効果音の何れかを選択可能である。制御装置11は、効果音の選択を利用者Uから受付けるまで待機する(Sa3:NO)。以上の説明から理解される通り、制御装置11は、複数の効果音の何れかの指示を利用者Uから受付ける要素として機能する。
 効果音の選択を受付けた場合(Sa3:YES)、制御装置11は、利用者Uによる指示に応じた指示データQを通信装置13により制御システム30に送信する(Sa4)。指示データQは、端末装置10の配信環境(第1配信環境/第2配信環境)を表す識別情報Dと、利用者Uが指定した効果音の識別情報Eとを含む。識別情報Eは、効果音を識別するための符号列である。なお、選択画面Gに対する利用者Uの操作は、所定長(例えば1秒間)の期間毎に1回だけ有効な操作として受付けられる。すなわち、利用者Uが短い間隔で選択画面Gを何度も操作した場合、当該期間内における最初の操作のみが有効に受付けられ、以後の操作は無視される。
 指示データQを送信すると(Sa4)、制御装置11は、利用者Uから終了が指示されたか否かを判定する(Sa5)。終了が指示されていない場合(Sa5:NO)、制御装置11は、利用者Uによる効果音の選択を待機する(Sa3)。利用者Uから終了が指示された場合(Sa5:YES)、制御装置11は受付処理Saを終了する。以上の説明から理解される通り、再生装置14によるコンテンツCの再生に並行して、利用者Uによる効果音の指示毎に、当該効果音の指定(識別情報E)を含む指示データQが制御システム30に送信される。各端末装置10が以上の処理を実行することで、相異なる端末装置10から送信された複数の指示データQが制御システム30に送信される。
 なお、利用者Uによる効果音の選択を受付けた場合に(Sa3:YES)、制御装置11は、当該効果音を放音装置142に再生させてもよい。例えば、相異なる効果音の波形を表す音響信号が記憶装置12に記憶される。制御装置11は、利用者Uが選択した効果音に対応する音響信号を放音装置142に供給することで当該効果音を再生させる。なお、音高または音質が相違する複数の音響信号を効果音毎に記憶装置12に記憶し、制御装置11は、利用者Uが選択した効果音に対応する複数の音響信号の何れかを放音装置142に供給してもよい。例えば、制御装置11は、効果音に対応する複数の音響信号の何れかをランダムに選択して放音装置142に供給する。
 図6は、制御システム30の構成を例示するブロック図である。制御システム30は、制御装置31と記憶装置32と通信装置33とを具備する。なお、制御システム30は、単体の装置として実現されるほか、相互に別体で構成された複数の装置の集合としても実現される。
 制御装置31は、制御システム30の各要素を制御する単数または複数のプロセッサで構成される。例えば、制御装置31は、CPU、GPU、DSP、FPGA、またはASIC等の1種類以上のプロセッサにより構成される。通信装置33は、通信網300を介して各端末装置10と通信する。
 記憶装置32は、制御装置31が実行するプログラムと制御装置31が使用する各種のデータとを記憶する単数または複数のメモリである。記憶装置32は、例えば磁気記録媒体または半導体記録媒体等の公知の記録媒体により構成される。複数種の記録媒体の組合せにより記憶装置32を構成してもよい。なお、制御システム30に着脱される可搬型の記録媒体、または制御システム30が通信網300を介して書込および読出を実行できる記録媒体(例えばクラウドストレージ)を、記憶装置32として利用してもよい。
 記憶装置32は、相異なる効果音に対応する複数の音響信号Xを記憶する。各効果音に対応する音響信号Xは、当該効果音の波形を表すデータである。各音響信号Xは、事前に収録または合成されたうえで記憶装置32に記憶される。音響信号Xは、例えばMP3(MPEG-1 Audio Layer-3)等の任意の形式で表現される。
 具体的には、記憶装置32は、図7に例示される通り、指示数M(Ma,Mb)に関する複数の数値範囲R1~R5の各々に対応する音響信号X(X1~X5)を、効果音毎に記憶する。指示数Maは、第1配信環境にある端末装置10aから指示データQを受信した回数である。指示数Maは、端末装置10aに対して効果音を指示した利用者Uの人数とも換言される。5個の数値範囲R1~R5の各々は、指示数Maの値域を相互に重複しないように区分した範囲である。例えば、数値範囲R1は指示数Maの数値「1」に対応する。数値範囲R2は、指示数Maの値域のうち2以上かつ10未満の範囲である。数値範囲R3は、指示数Maの値域のうち10以上かつ50未満の範囲であり、数値範囲R4は、指示数Maの値域のうち50以上かつ100未満の範囲である。また、数値範囲R5は、指示数Maの値域のうち100以上の範囲である。
 各数値範囲Rn(n=1~5)に対応する音響信号Xは、当該数値範囲Rnに相当する規模の観客により発音される効果音を表す。例えば、「歓声」の効果音に対応する5個の音響信号Xのうち数値範囲R1に対応する1個の音響信号Xは、1人の観客が発音する歓声を表す。他方、「歓声」の効果音に対応する5個の音響信号Xのうち数値範囲R5に対応する1個の音響信号Xは、100人以上の観客が発音する歓声を表す。以上の例示の通り、相異なる複数の効果音が記憶装置32に登録される。
 図8は、制御装置31の機能的な構成を例示するブロック図である。図8に例示される通り、制御装置31は、記憶装置32に記憶されたプログラムを実行することで受信制御部51および出力制御部52として機能する。受信制御部51は、各端末装置10から送信された指示データQを通信装置33により受信する。受信制御部51は、競技イベントの進行に並行して複数の端末装置10の各々から指示データQを受信する。
 出力制御部52は、受信制御部51が受信した指示データQに応じて再生システム23による効果音の再生を制御する。例えば、出力制御部52は、記憶装置32に記憶された音響信号Xを再生システム23に供給することで、当該音響信号Xが表す効果音を再生システム23に再生させる。
 図9は、出力制御部52が実行する処理(以下「制御処理」という)Sbの具体的な手順を例示するフローチャートである。制御処理Sbは、複数の端末装置10から送信された指示データQに応じて再生システム23による効果音の再生を制御する処理である。制御処理Sbは、競技イベントの進行に並行して所定の周期(例えば数秒毎)で反復される。すなわち、各端末装置10の利用者UによるコンテンツCの視聴に並行して制御処理Sbが反復される。
 制御処理Sbが開始されると、制御装置31は、第1配信環境の端末装置10aから送信された指示データQを受信制御部51が受信したか否かを判定する(Sb1)。すなわち、第1配信環境の識別情報Dを含む1以上の指示データQを受信制御部51が受信したか否かが判定される。端末装置10aから指示データQを受信した場合(Sb1:YES)、出力制御部52は、再生システム23に効果音を再生させる第1処理Sb2を実行する。他方、端末装置10aから指示データQを受信していない場合(Sb1:NO)、出力制御部52は第1処理Sb2を実行しない。なお、端末装置10aから受信した指示データQの個数が所定の閾値を上回る場合に出力制御部52が第1処理Sb2を実行し(Sb1:YES)、当該個数が閾値を下回る場合に出力制御部52が第1処理Sb2を実行しない(Sb1:NO)構成も想定される。
 第1処理Sb2は、集計処理Sb21と再生処理Sb22とを含む。集計処理Sb21は、直前の制御処理Sbの実行後に端末装置10aから指示データQを受信した回数(指示数Ma)を、効果音毎に計数する処理である。具体的には、出力制御部52は、複数の効果音の各々について、第1配信環境の識別情報Dと当該効果音の識別情報Eとを含む指示データQの受信の回数を指示数Maとして計数する。
 再生処理Sb22は、複数の効果音の何れかを施設200の再生システム23に再生させる処理である。具体的には、複数の効果音のうち集計処理Sb21の結果に応じた効果音が再生処理Sb22により施設200内に再生される。例えば、出力制御部52は、記憶装置32に登録された複数の効果音のうち指示数Maが最大である1種類の効果音を選択し、当該効果音に対応する複数の音響信号Xのうち指示数Maが属する数値範囲Rnに対応する音響信号Xを再生システム23に供給する。すなわち、記憶装置32に登録された複数の効果音のうち、端末装置10aの利用者Uによる指示数Maが最大である効果音が、再生システム23により再生される。ただし、端末装置10aの利用者Uにより指示された2種類以上の効果音を再生システム23に再生させてもよい。
 以上に説明した通り、第1実施形態においては、第1配信環境によりコンテンツCaが配信される端末装置10aから指示データQを受信した場合に、効果音を再生する第1処理Sb2が実行される。したがって、施設200内に所在する観客だけでなく、施設200外に所在する利用者Uも、競技イベントの雰囲気を盛上げることに寄与できる。すなわち、第1実施形態によれば、競技イベントに寄与できる利用者Uを増加させることが可能である。
 図9に例示される通り、制御装置31は、第2配信環境の端末装置10bから送信された指示データQを受信制御部51が受信したか否かを判定する(Sb3)。すなわち、第2配信環境の識別情報Dを含む指示データQを受信制御部51が受信したか否かが判定される。端末装置10bから指示データQを受信した場合(Sb3:YES)、出力制御部52は第2処理Sb4を実行する。第2処理Sb4は、第1処理Sb2により施設200内に再生されている効果音の音量を変化させる処理である。他方、端末装置10bから指示データQを受信していない場合(Sb3:NO)、出力制御部52は第2処理Sb4を実行しない。なお、端末装置10bから受信した指示データQの個数が所定の閾値を上回る場合に出力制御部52が第2処理Sb4を実行し(Sb3:YES)、当該個数が閾値を下回る場合に出力制御部52が第2処理Sb4を実行しない(Sb3:NO)構成も想定される。
 第2処理Sb4は、集計処理Sb41と調整処理Sb42とを含む。集計処理Sb41は、直前の制御処理Sbの実行後に端末装置10bから指示データQを受信した回数(指示数Mb)を、効果音毎に計数する処理である。指示数Mbは、端末装置10bに対して効果音を指示した利用者Uの人数とも換言される。
 調整処理Sb42は、集計処理Sb41の結果に応じて効果音の音量を変化させる処理である。具体的には、出力制御部52は、第1処理Sb2により再生された各効果音の音量を、当該効果音の指示数Mbに応じた増加量だけ増加させる。例えば、指示数Mbが大きいほど音量の増加量は増加する。音量の変化の軌跡は任意であるが、例えば所定の時間をかけて音量を経時的に増加させる構成が想定される。なお、端末装置10aの利用者Uが指示した効果音が施設200内に再生されていない場合、当該効果音に関する音量の調整は実行されない。
 前述の通り、第2配信環境の配信遅延は第1配信環境の配信遅延よりも大きい。したがって、端末装置10bの利用者Uが競技イベントのコンテンツCbにおいて特定の事象(例えば試合内の得点シーン)を認識する時点は、端末装置10aの利用者UがコンテンツCaにおいて当該事象を認識する時点に対して遅延する。すなわち、端末装置10aの利用者Uと端末装置10bの利用者Uとが競技イベントの共通の事象を契機として効果音を指示した場合でも、端末装置10bの利用者Uによる指示の時点は、端末装置10aの利用者Uによる指示の時点に対して、配信遅延に対応する時間だけ遅延する。したがって、制御処理Sbの第1処理Sb2により再生が開始された効果音は、第2配信環境の配信遅延に対応する時間の経過後に実行される制御処理Sbの第2処理Sb4により音量が変化する。
 以上に説明した通り、第1実施形態においては、第1配信環境よりも配信遅延が大きい第2配信環境によりコンテンツCbが配信される端末装置10bから指示データQを受信した場合に、第1処理Sb2とは相違する第2処理Sb4が実行される。したがって、配信遅延が大きい第2配信環境に好適な第2処理Sb4を実行できるという利点がある。また、第1処理Sb2により再生される効果音の音量を第2処理Sb4により変化させることで、利用者Uの総数を効果音に反映させることができる。
 第1配信環境の端末装置10aが送信する指示データQと第2配信環境の端末装置10bが送信する指示データQとを区別せず、制御システム30による指示データQの受信を契機として効果音の再生を開始する構成(以下「対比例」という)を想定する。前述の通り、端末装置10bの利用者Uによる指示の時点は、端末装置10aの利用者Uによる指示の時点に対して遅延する。したがって、対比例においては、端末装置10aからの指示データQに応じた効果音の再生が開始されてから遅延した時点で、当該効果音とは別個の効果音の再生が端末装置10bの利用者Uからの指示に応じて開始される。以上の状況では、端末装置10bからの指示データQに応じた効果音の遅延が顕著に知覚される可能性がある。
 対比例とは対照的に、第1実施形態においては、第2配信環境にある端末装置10bから指示データQを受信した場合に、再生中の効果音の音量が増加する。すなわち、端末装置10bの利用者Uから効果音が指示された場合に、当該指示に応じた個別の効果音の再生が新たに開始されるわけではない。したがって、端末装置10bから指示データQを受信した場合に既存の効果音とは別個の効果音の再生が開始される対比例と比較すると、配信遅延に起因した効果音の違和感を低減できるという利点がある。
B:第2実施形態
 第2実施形態を説明する。なお、以下に例示する各態様において機能が第1実施形態と同様である要素については、第1実施形態の説明で使用した符号と同様の符号を使用して各々の詳細な説明を適宜に省略する。
 図10は、第2実施形態における制御処理Sbの具体的な手順を例示するフローチャートである。第2実施形態においては、第1実施形態における第2処理Sb4の調整処理Sb42が再生処理Sb43に置換される。再生処理Sb43は、第2配信環境にある端末装置10bからの指示データQに応じた効果音を途中の時点から再生システム23に再生させる処理である。再生処理Sb43以外の動作は第1実施形態と同様である。
 図11は、第2実施形態における制御処理Sbの説明図である。第1処理Sb2の再生処理Sb22において、出力制御部52は、第1実施形態と同様に、端末装置10aから受信した指示データQに応じて記憶装置32から選択した音響信号Xを、始点P1から再生システム23に供給することで、当該音響信号Xが表す効果音を始点P1から再生させる。したがって、第2実施形態においても第1実施形態と同様の効果が実現される。
 第2処理Sb4の再生処理Sb43において、出力制御部52は、音響信号Xを途中の時点P2から再生システム23に供給することで、当該音響信号Xが表す効果音を途中から再生させる。具体的には、出力制御部52は、記憶装置32に登録された複数の効果音のうち指示数Mbが最大である1種類の効果音を選択し、当該効果音に対応する複数の音響信号Xのうち指示数Mbが属する数値範囲Rnに対応する音響信号Xを特定する。そして、出力制御部52は、当該音響信号Xのうち時点P2以降の区間を再生システム23に供給する。すなわち、音響信号Xのうち時点P2から終点P3までの区間が効果音の再生に利用され、始点P1から時点P2までの区間は利用されない。
 時点P2は、第2配信環境の配信遅延に応じた可変の時点である。具体的には、端末装置10aの利用者Uの指示に応じて効果音の再生が開始されてから、端末装置10bにより送信された指示データQが受信されるまでの時間長だけ、音響信号Xの始点P1に対して後方の時点が、時点P2の典型例である。ただし、音響信号Xのうち始点P1から所定の時間が経過した時点を時点P2として再生処理Sb43を実行してもよい。
 第2実施形態においても第1実施形態と同様の効果が実現される。なお、端末装置10bからの指示データQの受信を契機として効果音が始点P1から再生される対比例においては、端末装置10bからの指示データQに応じた効果音の遅延が顕著に知覚される可能性がある。第2実施形態においては、端末装置10aからの指示データQに応じて効果音が始点P1から再生される一方、端末装置10bからの指示データQに応じて効果音が途中の時点P2から再生される。したがって、端末装置10bからの指示データQに応じて効果音が始点P1から再生される対比例と比較して、配信遅延に起因した効果音の違和感が低減される。
C:第3実施形態
 図12は、第3実施形態における制御処理Sbの具体的な手順を例示するフローチャートである。第3実施形態においては、第1実施形態における第2処理Sb4の調整処理Sb42が付加処理Sb44に置換される。付加処理Sb44は、第2配信環境にある端末装置10bからの指示データQに応じた効果音を、当該第2配信環境で配信されるコンテンツCbに付加する処理である。
 なお、付加処理Sb44以外の動作は第1実施形態と同様である。例えば、第1処理Sb2の再生処理Sb22において、出力制御部52は、第1実施形態と同様に、端末装置10aから受信した指示データQに応じた音響信号Xを再生システム23に供給することで、当該音響信号Xが表す効果音を施設200内に再生させる。したがって、第3実施形態においても第1実施形態と同様の効果が実現される。
 第2処理Sb4の付加処理Sb44において、出力制御部52は、音響信号Xを配信システム22bに送信することで、当該配信システム22bが各端末装置10bに配信するコンテンツCbに当該音響信号Xの効果音を付加する。具体的には、出力制御部52は、記憶装置32に登録された複数の効果音のうち指示数Mbが最大である1種類の効果音を選択し、当該効果音に対応する複数の音響信号Xのうち指示数Mbが属する数値範囲Rnに対応する音響信号Xを特定する。そして、出力制御部52は、当該音響信号Xを配信システム22bに送信する。配信システム22bは、制御システム30から受信した音響信号XをコンテンツCbに合成する。すなわち、音響信号Xが表す効果音がコンテンツCbの音響に混合される。以上の説明から理解される通り、端末装置10bからの指示データQに応じた効果音は、コンテンツCbの音響として各端末装置10bにより再生される一方、施設200内の再生システム23によっては再生されない。また、端末装置10bから受信した指示データQに応じた効果音は、第1配信環境で配信されるコンテンツCaには付加されない。なお、端末装置10bからの指示データQに応じた効果音を施設200内に再生してもよい。
 前述の通り、対比例においては、端末装置10bからの指示データQに応じた効果音の遅延が顕著に知覚される可能性がある。第3実施形態においては、端末装置10bからの指示データQに応じた効果音が、当該端末装置10bに配信されるコンテンツCbに付加される。したがって、端末装置10bからの指示データQに応じて施設200内に効果音が再生される対比例と比較して、配信遅延に起因した効果音の違和感が低減される。
D:第4実施形態
 図13は、第4実施形態における通信システム100の構成を例示するブロック図である。第4実施形態の通信システム100は、第1実施形態の通信システム100に管理装置60を追加した構成である。管理装置60は、例えば携帯電話機,スマートフォン,タブレット端末またはパーソナルコンピュータ等の情報端末である。管理装置60は、制御システム30と通信可能である。制御システム30と管理装置60との間の通信は、通信網300を介した有線通信、または通信網300を使用しない近距離無線通信である。施設200内に所在する管理者Aが管理装置60を使用する。管理者Aは、例えば競技イベントを運営する組織の従業員である。管理者Aは、競技イベントを施設200内で観覧しながら管理装置60を操作することが可能である。
 管理者Aは、競技イベントにおいて効果音が再生されるべき時点において管理装置60を操作する。例えば、競技イベントにおける得点の場面等、効果音の再生に好適な時点または効果音を再生して問題ない時点において、管理者Aは管理装置60を操作する。管理者Aからの指示を受付けた場合、管理装置60は、出力要求Rを制御システム30に送信する。制御システム30の通信装置33は、管理装置60から出力要求Rを受信する。なお、管理者Aは、配信遅延が小さい第1配信環境により配信されるコンテンツCaを視聴しながら管理装置60を操作してもよい。
 図14は、第4実施形態における制御処理Sbの具体的な手順を例示するフローチャートである。第4実施形態においては、第1実施形態における第2処理Sb4の調整処理Sb42が再生処理Sb45に置換される。再生処理Sb45は、第2配信環境にある端末装置10bからの指示データQに応じた効果音を、出力要求Rの受信を契機として再生システム23に再生させる処理である。
 なお、再生処理Sb45以外の動作は第1実施形態と同様である。例えば、第1処理Sb2の再生処理Sb22において、出力制御部52は、第1実施形態と同様に、端末装置10aから受信した指示データQに応じた効果音を施設200内に再生させる。したがって、第4実施形態においても第1実施形態と同様の効果が実現される。
 第2処理Sb4の再生処理Sb45において、出力制御部52は、出力要求Rを受信したか否かを判定する。出力制御部52は、出力要求Rを受信した場合に、端末装置10bから受信した指示データQに応じた効果音を再生システム23に再生させる。具体的には、出力制御部52は、記憶装置32に登録された複数の効果音のうち指示数Mbが最大である1種類の効果音を選択し、当該効果音に対応する複数の音響信号Xのうち指示数Mbが属する数値範囲Rnに対応する音響信号Xを特定する。そして、出力制御部52は、通信装置33が出力要求Rを受信した場合に当該音響信号Xを再生システム23に供給する。
 以上の説明から理解される通り、第4実施形態においては、端末装置10bからの指示データQに応じた効果音が、管理者Aによる指示を契機として施設200内に再生される。したがって、受信制御部51が端末装置10bから指示データQを受信したと判定された(Sb3:YES)直後に効果音を再生システム23に再生させる対比例と比較すると、競技イベントにおいて配信遅延に起因した不自然な時点で効果音が再生される可能性を低減できる。
E:第5実施形態
 図15は、第5実施形態において端末装置10から制御システム30に送信される指示データQの模式図である。第5実施形態の指示データQは、配信環境の識別情報Dと効果音の識別情報Eとに加えて利用者Uの属性Zを含む。属性Zは、例えば年齢または性別等の利用者Uに関する情報であり、例えば端末装置10の記憶装置12に記憶されている。以下の説明においては、年齢と性別との組合せを属性Zとして例示する。利用者Uによる効果音の指示毎に各端末装置10から指示データQが送信される点は第1実施形態と同様である。
 図16は、制御システム30の記憶装置32に記憶される音響信号Xの模式図である。第5実施形態の記憶装置32は、複数の属性Z(Z1~Z5)の各々に対応する音響信号X(X1~X5)を効果音毎に記憶する。各属性Zに対応する音響信号Xは、当該属性Zの観客により発音される効果音を表す。例えば、「歓声」の効果音に対応する5個の音響信号Xのうち、年齢「20代」および性別「男性」の属性Zに対応する1個の音響信号Xは、20代の男性が発音する歓声を表す。
 第5実施形態における制御処理Sbの第1処理Sb2は、第1実施形態と同様に集計処理Sb21と再生処理Sb22とを含む。集計処理Sb21において、出力制御部52は、端末装置10aから受信した指示データQが示す効果音(識別情報E)と属性Zとの組合せ毎に、指示数Maを計数する。すなわち、1種類の効果音と1種類の属性Zとの組合せに対応する指示数Maは、当該効果音の識別情報Dと当該属性Zとを含む指示データQを端末装置10aから受信した回数である。指示数Maは、端末装置10aの選択画面Gにおいて当該効果音を選択した当該属性Zの利用者Uの人数とも換言される。
 再生処理Sb22において、出力制御部52は、複数の指示数Maのうち最大の指示数Maに対応する効果音と属性Zとの組合せについて記憶装置32に記憶された音響信号Xを、再生システム23に供給する。すなわち、第5実施形態の出力制御部52は、属性Z毎の指示数Maに応じた効果音を再生システム23に再生させる。なお、以上の説明においては、1種類の属性Zに対応する効果音を再生する場合を例示したが、例えば指示数Maの降順で選択された2種類以上の効果音を再生システム23に再生させてもよい。
 第5実施形態における制御処理Sbの第2処理Sb4は、第4実施形態と同様に集計処理Sb41と再生処理Sb45とを含む。集計処理Sb41において、出力制御部52は、端末装置10bから受信した指示データQが示す効果音(識別情報E)と属性Zとの組合せ毎に、指示数Mbを計数する。すなわち、1種類の効果音と1種類の属性Zとの組合せに対応する指示数Mbは、当該効果音の識別情報Dと当該属性Zとを含む指示データQを端末装置10bから受信した回数である。指示数Mbは、端末装置10bの選択画面Gにおいて当該効果音を選択した当該属性Zの利用者Uの人数とも換言される。
 再生処理Sb45において、出力制御部52は、管理装置60から出力要求Rを受信した場合に、端末装置10bから受信した指示データQに応じた効果音を再生システム23に再生させる。具体的には、出力制御部52は、複数の指示数Mbのうち最大の指示数Mbに対応する効果音と属性Zとの組合せについて記憶装置32に記憶された音響信号Xを、再生システム23に供給する。すなわち、第5実施形態の出力制御部52は、属性Z毎に指示数Mbに応じた効果音を再生システム23に再生させる。なお、以上の説明においては、1種類の属性Zに対応する効果音を再生する場合を例示したが、例えば指示数Mbの降順で選択された2種類以上の効果音を再生システム23に再生させてもよい。
 以上に説明した通り、第5実施形態においては、各端末装置10の利用者Uの属性Zに応じた効果音が再生される。したがって、コンテンツCを視聴する利用者Uの属性Zに対して適切な音響特性の効果音を再生できる。
F:変形例
 以上に例示した各態様に付加される具体的な変形の態様を以下に例示する。以下の例示から任意に選択された複数の態様を、相互に矛盾しない範囲で適宜に併合してもよい。
(1)第1実施形態から第4実施形態においては、各数値範囲Rnについて1個の音響信号Xを記憶装置32に記憶したが、図17に例示される通り、複数の数値範囲R1~R5の各々について複数の音響信号Xを記憶装置32に記憶してもよい。各数値範囲Rnに対応する複数の音響信号Xは、効果音の種類(「歓声」「拍手音」等)および観客の規模(指示数Mの範囲)は共通するが、音高または音質等の音響特性が相違する。なお、各数値範囲Rnに対応する音響信号Xの個数を相違させてもよい。
 第1実施形態から第4実施形態における第1処理Sb2の再生処理Sb22において、出力制御部52は、指示数Maが属する数値範囲Rnに対応する複数の音響信号Xの何れかを選択して再生システム23に供給する。例えば、1個の数値範囲Rnに対応する複数の音響信号Xの何れかがランダムに選択される。
 第2実施形態の再生処理Sb43において、出力制御部52は、指示数Mbが属する数値範囲Rnに対応する複数の音響信号Xの何れかを例えばランダムに選択し、当該音響信号Xのうち時点P2以降の区間を再生システム23に供給する。第3実施形態の付加処理Sb44において、出力制御部52は、指示数Mbが属する数値範囲Rnに対応する複数の音響信号Xの何れかを例えばランダムに選択し、当該音響信号Xを配信システム22bに送信する。第4実施形態の再生処理Sb45において、出力制御部52は、指示数Mbが属する数値範囲Rnに対応する複数の音響信号Xの何れかを例えばランダムに選択し、出力要求Rの受信を契機として当該音響信号Xを再生システム23に供給する。
 以上のように各数値範囲Rnに対応する複数の音響信号Xが選択的に使用される構成によれば、指示数Maまたは指示数Mbが共通する場合でも、効果音の音響特性を相違させることができる。すなわち、多様な音響特性の効果音を再生できるという利点がある。
(2)第5実施形態においては、各属性Zについて1個の音響信号Xを記憶装置32に記憶したが、図18に例示される通り、複数の属性Zの各々について複数の音響信号Xを記憶装置32に記憶してもよい。各属性Zに対応する複数の音響信号Xは、効果音の種類(「歓声」「拍手音」等)は共通するが、音高または音質等の音響特性が相違する。なお、各属性Zに対応する音響信号Xの個数を相違させてもよい。
 第5実施形態における第1処理Sb2の再生処理Sb22において、出力制御部52は、指示数Maの最大値に対応する効果音と属性Zとの組合せについて記憶装置32に記憶された複数の音響信号Xの何れかを選択して再生システム23に供給する。例えば、1個の属性Zに対応する複数の音響信号Xの何れかがランダムに選択される。
 また、第5実施形態の出力制御部52は、第2処理Sb4の再生処理Sb45において、指示数Mbの最大値に対応する効果音と属性Zとの組合せについて記憶された複数の音響信号Xの何れかを例えばランダムに選択して再生システム23に供給する。
 以上のように各属性Zに対応する複数の音響信号Xが選択的に使用される構成によれば、指示数Maまたは指示数Mbが共通する場合でも、効果音の音響特性を相違させることができる。すなわち、多様な音響特性の効果音を再生できるという利点がある。
(3)前述の各形態においては、端末装置10を利用してコンテンツCを視聴する利用者Uが施設200外に所在する場合を例示したが、各端末装置10の利用者Uは施設200内に所在してもよい。また、前述の各形態においては、第1配信環境にある端末装置10aを利用して利用者UがコンテンツCaを視聴する場合を例示したが、端末装置10aの利用者Uは、施設200内で競技イベントを直接に観覧してもよい。すなわち、第1配信環境にある端末装置10aに対するコンテンツCaの配信は省略される。第2配信環境にある端末装置10bの利用者Uが視聴するコンテンツCbは、端末装置10aの利用者Uが施設200内で観覧する競技イベントの進行に対して遅延する。したがって、端末装置10aの利用者Uが施設200内で効果音を指示する場合にも、前述の各形態と同様に、第2配信遅延の配信遅延に起因した効果音の違和感を低減できるという前述の各形態と同様の効果が実現される。
 端末装置10aの利用者Uが施設200内に所在する場合を想定すると、制御装置11は、図4のステップSa1において、当該端末装置10aの位置情報を参照することで、利用者Uが施設200内に所在することを特定できる。端末装置10aの位置情報は、例えばGPS(Global Positioning System)またはIP(Internet Protocol)アドレスを利用して生成される。また、施設200内のみで端末装置10aが取得可能な情報(以下「特定情報」という)を当該端末装置10aが取得した場合に、端末装置10aの利用者Uが施設200内に所在することを特定してもよい。例えば、施設200内の送信機から近距離無線通信により送信される特定情報を端末装置10aが受信した場合に、当該端末装置10aが施設200内に所在すると判定する形態が想定される。近距離無線通信としては、例えばBluetooth(登録商標)またはWiFi(登録商標)等の無線通信、または、音波を伝送媒体として利用した音響通信が利用される。また、特定情報を表すQRコード(登録商標)等の図像が施設200内に掲示された状況を想定すると、端末装置10aが当該図像の撮像により特定情報を取得した場合に、端末装置10aの利用者Uが施設200内に所在することが特定される。
(4)前述の各形態においては、コンテンツCの受信および再生と、利用者Uによる効果音の指示の受付との双方を、端末装置10が実行する構成を例示したが、図19に例示される通り、端末装置10とは別個の再生機器70によりコンテンツCを再生してもよい。
 再生機器70は、配信システム22により配信されるコンテンツCを再生する。例えば、配信システム22が通信網300を介してコンテンツCを配信する構成においては、通信網300を介した通信が可能な情報端末(携帯電話機,スマートフォン,タブレット端末またはパーソナルコンピュータ等)が再生機器70として利用される。また、配信システム22がテレビ放送システムである構成においては、例えばテレビジョン受像機が再生機器70として利用される。なお、テレビ放送システムによる配信遅延は充分に小さい。したがって、テレビ放送システムは、第1配信環境によりコンテンツCを配信する配信システム22aとして利用される。利用者Uは、再生機器70により再生されるコンテンツCを視聴しながら、端末装置10を操作することで効果音を指示する。なお、再生機器70の操作に利用されるリモコン装置を端末装置10として利用してもよい。リモコン装置に設置された複数の操作子の何れかを操作することで、利用者Uは複数の効果音の何れかを選択できる。
 なお、端末装置10とは別個の再生機器70がコンテンツCを再生する構成においては、配信環境を特定するために以下の方法(前述の方法1の変形)を利用できる。
 再生機器70は、配信環境の識別情報Dを表すQRコード(登録商標)等の図像をコンテンツCの映像とともに表示する。端末装置10の制御装置11は、当該端末装置10に搭載された撮像装置により当該図像を撮像し、撮像結果を解析することで配信環境の識別情報Dを特定する。また、再生機器70は、配信環境の識別情報Dを表す音響成分をコンテンツCの音響とともに再生する。端末装置10の制御装置11は、当該端末装置10に搭載された収音装置により再生機器70による再生音を収音し、当該再生音を解析することで配信環境の識別情報Dを特定する。
(5)前述の各形態においては、第2配信環境の端末装置10bから送信される指示データQを効果音の再生に反映させたが、端末装置10bから送信された指示データQを効果音の再生に反映させなくてもよい。すなわち、端末装置10bから送信された指示データQを制御システム30が無視してもよい。
(6)第1実施形態から第4実施形態の第1処理Sb2および第2処理Sb4においては、指示数Mが属する数値範囲Rnに対応する音響信号Xを選択した。第5実施形態の第1処理Sb2および第2処理Sb4においては、効果音を指示した利用者Uの属性Zに応じた音響信号Xを選択した。数値範囲Rnに対応する音響信号Xの選択と属性Zに応じた音響信号Xの選択とを併合してもよい。
(7)前述の各形態においては、相異なる数値範囲Rnに対応する複数の音響信号X(X1~X5)を事前に記憶装置32に格納したが、指示数M(Ma,Mb)に対応する音響信号Xを、指示データQの受信毎に制御装置31(出力制御部52)が生成してもよい。例えば、前述の各形態における第1処理Sb2の再生処理Sb22において、出力制御部52は、効果音毎に事前に用意された参照信号を加工することで、指示数Maに応じた音響信号Xを生成する。各効果音の参照信号は、単数の観客が発音した当該効果音の波形を表す信号である。出力制御部52は、指示数Mに対応する個数の中間信号を参照信号から生成する。複数の中間信号は、例えば音高または音質等の音響特性が相違する。出力制御部52は、複数の中間信号を混合することで音響信号Xを生成する。以上の構成によれば、多数の音響信号Xを記憶装置32に格納する必要がないという利点がある。
(8)前述の各形態においては、再生システム23に効果音を再生させたが、施設200内に出力される演出効果は、効果音の再生(すなわち音響効果)に限定されない。例えば、施設200内に設置された照明装置を利用した照明効果を、制御システム30が制御してもよい。例えば、制御システム30は、各端末装置10から受信した指示データQに応じた発光パターンにより照明システムを制御する。発光パターンは、発光量または発光色の時間的な変化のパターンである。
 例えば、第1実施形態の出力制御部52は、第1処理Sb2において、端末装置10aから受信した指示データQに応じた発光パターンにより照明システムを制御する。また、端末装置10bから指示データQを受信した場合、出力制御部52は、第2処理Sb4において、第1処理Sb2により制御されている照明システムの発光特性を変化させる。例えば、出力制御部52は、端末装置10bから指示データQを受信した場合に、照明システムの発光量を増加させる。
 第4実施形態または第5実施形態の出力制御部52は、端末装置10bから指示データQを受信した場合に実行する第2処理Sb4において、管理者Aによる指示(出力要求R)を契機として、当該指示データQに応じた発光パターンにより照明システムを制御する。
 また、例えば施設200内に設置された演出用の発煙システムを利用した演出効果を、制御システム30が制御してもよい。例えば、制御システム30は、各端末装置10から受信した指示データQに応じた発煙パターンにより発煙システムを制御する。発煙パターンは、発煙料または煙色の時間的な変化のパターンである。
 例えば、第1実施形態の出力制御部52は、第1処理Sb2において、端末装置10aから受信した指示データQに応じた発煙パターンにより発煙システムを制御する。また、端末装置10bから指示データQを受信した場合、出力制御部52は、第2処理Sb4において、第1処理Sb2により制御されている発煙システムの発煙特性を変化させる。例えば、出力制御部52は、端末装置10bから指示データQを受信した場合に、発煙システムの発煙量を増加させる。
 第4実施形態または第5実施形態の出力制御部52は、端末装置10bから指示データQを受信した場合に実行する第2処理Sb4において、管理者Aによる指示(出力要求R)を契機として、当該指示データQに応じた発煙パターンにより発煙システムを制御する。
 以上の例示から理解される通り、「演出効果」は、施設200内で出力される任意の効果を意味する。再生システム23による効果音の再生、照明システムによる発光、および発煙システムによる発煙は、「演出効果の出力」の例示である。また、制御システム30は、イベントにおける演出効果の出力を制御するためのコンピュータシステムとして表現される。
(9)前述の各形態においては、第1配信環境と第2配信環境とでコンテンツCの配信元(配信システム22a,配信システム22b)が別個である構成を例示したが、共通の配信システム22からコンテンツCが配信される状況でも、各端末装置10に対する配信遅延が端末装置10毎に相違する場合がある。すなわち、共通の配信システム22からコンテンツCが配信される状況でも、端末装置10に対する配信遅延が小さい環境は第1配信環境に相当し、端末装置10に対する配信遅延が大きい環境は第2配信環境に相当する。
 配信システム22は、コンテンツCの送信時刻を表す時刻データ(タイムスタンプ)を当該コンテンツCとともに各端末装置10に送信する。端末装置10の制御装置11は、配信システム22から受信される時刻データが表す送信時刻を現在時刻とを比較することで、配信遅延を特定することが可能である。図4のステップSa1において、制御装置11は、以上の方法で特定した配信遅延から配信環境(第1配信環境/第2配信環境)を特定してもよい。
(10)第1実施形態の調整処理Sb42においては効果音の音量を増加させたが、端末装置10bから指示データQを受信した場合に調整される効果音の音響特性は音量に限定されない。例えば、調整処理Sb42において効果音の音高、音質または残響特性等の各種の音響特性を変化させてもよい。
(11)前述の各形態においては、複数の出場者がスポーツで競技する競技イベントを例示したが、演出効果が出力されるイベントの種類は以上の例示に限定されない。例えば、歌手またはダンサー等の実演者が実演する実演イベント(ライブ)、各種の物品を展示する展示イベント、または、学校や学習塾等の各種の教育機関が生徒に授業を提供する教育イベント、または専門家等の講演者が各種の題材について講演する講演イベント等、特定の目的で開催される各種の行事が「イベント」の概念に包含される。また、動画配信サイトにより配信される動画の作成者が自宅等の施設200内で自身の活動を実時間的に収録および配信(すなわち生放送)する場面を想定すると、当該活動も「イベント」の概念には包含される。以上の例示から理解される通り、イベントは、演出効果が出力される各種の興行を意味する。
(12)以上の例示した端末装置10の機能(例えば受付処理Sa)は、前述の通り、制御装置11を構成する単数または複数のプロセッサと、記憶装置12に記憶されたプログラムとの協働により実現される。また、制御システム30の機能は、前述の通り、制御装置31を構成する単数または複数のプロセッサと、記憶装置32に記憶されたプログラムとの協働により実現される。
 以上に例示したプログラムは、コンピュータが読取可能な記録媒体に格納された形態で提供されてコンピュータにインストールされ得る。記録媒体は、例えば非一過性(non-transitory)の記録媒体であり、CD-ROM等の光学式記録媒体(光ディスク)が好例であるが、半導体記録媒体または磁気記録媒体等の公知の任意の形式の記録媒体も包含される。なお、非一過性の記録媒体とは、一過性の伝搬信号(transitory, propagating signal)を除く任意の記録媒体を含み、揮発性の記録媒体も除外されない。また、配信装置が通信網を介してプログラムを配信する構成では、当該配信装置においてプログラムを記憶する記録媒体が、前述の非一過性の記録媒体に相当する。
G:付記
 以上に例示した形態から、例えば以下の構成が把握される。
 本開示のひとつの態様(第1態様)に係る制御方法は、複数の端末装置の各々から当該端末装置の利用者による指示に応じた指示データを受信し、前記複数の端末装置のうち、イベントの収録により生成されて第1配信環境により配信される第1コンテンツを、当該イベントの進行に並行して視聴する利用者の第1端末装置から、前記指示データを受信した場合に、前記イベントが実施される施設に演出効果を出力する第1処理を実行し、前記複数の端末装置のうち、前記イベントの収録により生成されて前記第1配信環境よりも配信遅延が大きい第2配信環境により配信される第2コンテンツを、当該イベントの進行に並行して視聴する利用者の第2端末装置から、前記指示データを受信した場合に、前記第1処理とは相違する第2処理を実行する。
 以上の態様においては、第1配信環境により配信される第1コンテンツを視聴する利用者の第1端末装置から指示データを受信した場合に、イベントが実施される施設に演出効果を出力する第1処理が実行される。したがって、イベントに寄与できる利用者を増加させることができる。他方、第1配信環境よりも配信遅延が大きい第2配信環境により配信される第2コンテンツを視聴する利用者の第2端末装置から指示データを受信した場合に、第1処理とは相違する第2処理が実行される。したがって、配信遅延が大きい環境に好適な第2処理を実行できる。
 「コンテンツ」は、端末装置の利用者に提供される情報(デジタルコンテンツ)である。例えば映像および音響の少なくとも一方を含む任意のコンテンツを利用者は視聴する。なお、「第1コンテンツ」と「第2コンテンツ」との異同は不問である。例えば、「第1コンテンツ」と「第2コンテンツ」とは、共通の収録システムにより収録されたコンテンツでもよいし、相異なる収録システムにより収録された別個のコンテンツでもよい。また、「第1コンテンツ」と「第2コンテンツ」とは、共通の収録システムによる収録後に相異なる処理で生成された別個のコンテンツでもよい。ただし、第1コンテンツと第2コンテンツとの間において、収録対象のイベントは共通する。
 「配信環境」は、コンテンツの生成(収録)から再生までの処理または通信が実行される環境を意味する。例えば、第1配信環境は、第1配信システム(例えばテレビジョン放送システム)から第1コンテンツが配信される環境であり、第2配信環境は、第1配信システムとは別個の第2配信システム(例えば動画配信システム)から第2コンテンツが配信される環境である。第2配信環境は第1配信環境よりも配信遅延が大きい環境である。したがって、例えば配信システムが共通する環境でも、端末装置がコンテンツを第1遅延量で受信できる環境は第1配信環境に相当し、端末装置によるコンテンツの受信に第1遅延量よりも大きい第2遅延量が必要である環境は第2配信環境に相当する。
 「配信遅延」は、イベントに対するコンテンツの再生の遅延を意味する。すなわち、イベントにおいて特定の事象が発生した時点から、コンテンツにおける当該事象が端末装置において再生される時点までの時間長が「配信遅延」の具体例である。
 「演出効果」は、イベントにおける演出的な効果である。例えば、イベントが実施される施設の音響設備を利用した音響効果、当該施設の表示設備を利用した映像効果、または当該施設の照明設備を利用した照明効果等、例えば施設内に所在する利用者が知覚可能な各種の効果(典型的には視覚効果または音響効果)が「演出効果」の概念に包含される。
 「第2処理」は、「第1処理」とは相違する任意の処理である。「第1処理」と「第2処理」との関係は、全部が相違する関係(共通する処理がない関係)でもよいし、部分的に共通する関係でもよい。
 本開示の他の態様(第2態様)に係る制御方法は、複数の端末装置の各々から当該端末装置の利用者による指示に応じた指示データを受信し、前記複数の端末装置のうち、イベントが実施される施設において当該イベントを観覧する利用者の第1端末装置から、前記指示データを受信した場合に、前記施設に演出効果を出力する第1処理を実行し、前記複数の端末装置のうち、前記イベントの収録により生成されて配信されるコンテンツを当該イベントの進行に並行して視聴する利用者の第2端末装置から、前記指示データを受信した場合に、前記第1処理とは相違する第2処理を実行する。
 以上の態様においては、施設においてイベントを観覧する利用者の第1端末装置から指示データを受信した場合に、イベントが実施される施設に演出効果を出力する第1処理が実行され、当該イベントの収録により生成されて配信されるコンテンツを視聴する利用者の第2端末装置から指示データを受信した場合に、第1処理とは相違する第2処理が実行される。したがって、イベントに寄与できる利用者を増加させ、かつ、コンテンツの配信遅延が大きい環境に好適な第2処理を実行できる。
 第1態様または第2態様の具体例(第3態様)において、前記第1処理は、前記施設の再生システムに効果音を再生させる処理(例えば再生処理Sb22)を含み、前記第2処理は、前記効果音の音響特性を変化させる処理(例えば調整処理Sb42)を含む。以上の態様によれば、第1処理により再生される効果音の音響特性を第2処理により変化させることで、第2端末装置の利用者による指示が効果音に反映される。なお、第1端末装置から受信する指示データと第2端末装置から受信する指示データとを区別せずに指示データに応じて効果音の再生を開始する構成では、第1端末装置からの指示データに応じた効果音の再生が開始されてから遅延した時点で、当該効果音とは別個の効果音の再生が第2端末装置の利用者からの指示に応じて開始される。したがって、効果音の受聴者に遅延が顕著に知覚される可能性がある。前述の態様によれば、第1処理により再生が開始された効果音の音響特性が第2処理により変化するから、配信遅延に起因した効果音の違和感を低減できる。
 第1態様または第2態様の具体例(第4態様)において、前記第1処理は、前記施設の再生システムに、効果音を表す音響信号を始点から供給する処理(例えば再生処理Sb22)を含み、前記第2処理は、前記音響信号を途中の時点から前記再生システムに供給する処理(例えば再生処理Sb43)を含む。以上の態様によれば、第1処理および第2処理の各々において音響信号を再生システムに供給することで、第1端末装置および第2端末装置の各々の利用者による指示に応じた効果音が再生される。なお、第1端末装置から受信する指示データと第2端末装置から受信する指示データとを区別せずに指示データに応じて効果音の再生を開始する構成では、第1端末装置からの指示データに応じた効果音の再生が開始されてから遅延した時点で、当該効果音とは別個の効果音の再生が第2端末装置の利用者からの指示に応じて開始される。したがって、効果音の受聴者に遅延が顕著に知覚される可能性がある。前述の態様によれば、第2処理においては音響信号が途中の時点から再生システムに供給されるから、配信遅延に起因した効果音の違和感を低減できる。
 第1態様の具体例(第5態様)において、前記第1処理は、前記施設の再生システムに効果音を再生させる処理(例えば再生処理Sb22)を含み、前記第2処理は、前記効果音を前記第2コンテンツに付加する処理(例えば付加処理Sb44)を含む。第2配信環境により配信される第2コンテンツを視聴する利用者の第2端末装置から指示データを受信した場合に、第1処理と同様に効果音を再生する構成では、イベントの進行に対して遅延した時点で効果音の再生が開始される。したがって、効果音の受聴者に遅延が顕著に知覚される可能性がある。前述の態様によれば、第2コンテンツに効果音が付加されるから、配信遅延に起因した効果音の違和感を低減できる。
 第1態様または第2態様の具体例(第6態様)において、前記第2処理は、管理者による指示を契機として前記施設に演出効果を出力する処理(例えば再生処理Sb45)を含む。以上の態様によれば、第2端末装置から指示データを受信した場合に、管理者による指示を契機として演出効果が出力される。したがって、第2配信環境における配信遅延に起因した不自然な時点で演出効果が出力される可能性を低減できる。
 第1態様または第2態様の具体例(第7態様)において、前記第2処理は、前記第2端末装置から指示データを受信した回数を、前記第2端末装置の利用者の属性毎に計数する処理(例えば集計処理Sb41)と、前記属性毎の回数に応じた演出効果を出力する処理(例えば再生処理Sb45)とを含む。以上の態様においては、端末装置の利用者の属性に応じた演出効果が出力される。したがって、コンテンツを視聴する利用者の属性に対して適切な演出効果を出力できる。
 第1態様から第7態様の何れかの具体例(第8態様)において、前記第1端末装置から指示データを受信した回数に関する複数の数値範囲の各々について相異なる複数の効果音が登録され、前記第1処理は、前記第1端末装置から指示データを受信した回数を計数する処理と、前記複数の数値範囲のうち当該回数を含む数値範囲に対応する前記複数の効果音の何れかを選択的に前記施設の再生システムに再生させる処理とを含む。以上の構成によれば、第1端末装置から指示データを受信した回数を含む数値範囲に対応する複数の効果音の何れかが再生システムにより再生される。したがって、数値範囲毎に1種類の効果音のみが用意された構成と比較して、再生システムにより多様な効果音を再生できるという利点がある。
 なお、本開示は、前述の各態様(態様1から態様8の何れか)に係る制御方法を実現する制御システム、または、当該制御方法をコンピュータに実行させるプログラム、としても実現される。
100…通信システム、200…施設、300…通信網、10(10a,10b)…端末装置、11…制御装置、12…記憶装置、13…通信装置、14…再生装置、141…表示装置、142…放音装置、15…操作装置、21(21a,21b)…収録システム、22(22a,22b)…配信システム、23…再生システム、30…制御システム、31…制御装置、32…記憶装置、33…通信装置、51…受信制御部、52…出力制御部、60…管理装置、70…再生機器。

Claims (10)

  1.  複数の端末装置の各々から当該端末装置の利用者による指示に応じた指示データを受信し、
     前記複数の端末装置のうち、イベントの収録により生成されて第1配信環境により配信される第1コンテンツを、当該イベントの進行に並行して視聴する利用者の第1端末装置から、前記指示データを受信した場合に、前記イベントが実施される施設に演出効果を出力する第1処理を実行し、前記複数の端末装置のうち、前記イベントの収録により生成されて前記第1配信環境よりも配信遅延が大きい第2配信環境により配信される第2コンテンツを、当該イベントの進行に並行して視聴する利用者の第2端末装置から、前記指示データを受信した場合に、前記第1処理とは相違する第2処理を実行する
     コンピュータシステムにより実現される制御方法。
  2.  複数の端末装置の各々から当該端末装置の利用者による指示に応じた指示データを受信し、
     前記複数の端末装置のうち、イベントが実施される施設において当該イベントを観覧する利用者の第1端末装置から、前記指示データを受信した場合に、前記施設に演出効果を出力する第1処理を実行し、前記複数の端末装置のうち、前記イベントの収録により生成されて配信されるコンテンツを当該イベントの進行に並行して視聴する利用者の第2端末装置から、前記指示データを受信した場合に、前記第1処理とは相違する第2処理を実行する
     コンピュータシステムにより実現される制御方法。
  3.  前記第1処理は、前記施設の再生システムに効果音を再生させる処理を含み、
     前記第2処理は、前記効果音の音響特性を変化させる処理を含む
     請求項1または請求項2の制御方法。
  4.  前記第1処理は、前記施設の再生システムに、効果音を表す音響信号を始点から供給する処理を含み、
     前記第2処理は、前記音響信号を途中の時点から前記再生システムに供給する処理を含む
     請求項1または請求項2の制御方法。
  5.  前記第1処理は、前記施設の再生システムに効果音を再生させる処理を含み、
     前記第2処理は、前記効果音を前記第2コンテンツに付加する処理を含む
     請求項1の制御方法。
  6.  前記第2処理は、管理者による指示を契機として前記施設に演出効果を出力する処理を含む
     請求項1または請求項2の制御方法。
  7.  前記第2処理は、
     前記第2端末装置から指示データを受信した回数を、前記第2端末装置の利用者の属性毎に計数する処理と、
     前記属性毎の回数に応じた演出効果を出力する処理とを含む
     請求項1または請求項2の制御方法。
  8.  前記第1端末装置から指示データを受信した回数に関する複数の数値範囲の各々について相異なる複数の効果音が登録され、
     前記第1処理は、
     前記第1端末装置から指示データを受信した回数を計数する処理と、
     前記複数の数値範囲のうち当該回数を含む数値範囲に対応する前記複数の効果音の何れかを選択的に前記施設の再生システムに再生させる処理とを含む
     請求項1から請求項7の何れかの制御方法。
  9.  複数の端末装置の各々から当該端末装置の利用者による指示に応じた指示データを受信する受信制御部と、
     前記複数の端末装置のうち、イベントの収録により生成されて第1配信環境により配信される第1コンテンツを、当該イベントの進行に並行して視聴する利用者の第1端末装置から、前記指示データを受信した場合に、前記イベントが実施される施設に演出効果を出力する第1処理を実行し、前記複数の端末装置のうち、前記イベントの収録により生成されて前記第1配信環境よりも配信遅延が大きい第2配信環境により配信される第2コンテンツを、当該イベントの進行に並行して視聴する利用者の第2端末装置から、前記指示データを受信した場合に、前記第1処理とは相違する第2処理を実行する出力制御部と
     を具備する制御システム。
  10.  複数の端末装置の各々から当該端末装置の利用者による指示に応じた指示データを受信する受信制御部と、
     前記複数の端末装置のうち、イベントが実施される施設において当該イベントを観覧する利用者の第1端末装置から、前記指示データを受信した場合に、前記施設に演出効果を出力する第1処理を実行し、前記複数の端末装置のうち、前記イベントの収録により生成されて配信されるコンテンツを当該イベントの進行に並行して視聴する利用者の第2端末装置から、前記指示データを受信した場合に、前記第1処理とは相違する第2処理を実行する出力制御部と
     を具備する制御システム。
PCT/JP2021/017475 2020-06-01 2021-05-07 制御方法および制御システム WO2021246104A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2020-095584 2020-06-01
JP2020095584A JP6958676B1 (ja) 2020-06-01 2020-06-01 制御方法および制御システム

Publications (1)

Publication Number Publication Date
WO2021246104A1 true WO2021246104A1 (ja) 2021-12-09

Family

ID=78282116

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2021/017475 WO2021246104A1 (ja) 2020-06-01 2021-05-07 制御方法および制御システム

Country Status (2)

Country Link
JP (1) JP6958676B1 (ja)
WO (1) WO2021246104A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024047755A1 (ja) * 2022-08-30 2024-03-07 日本電信電話株式会社 音響情報出力制御装置、方法およびプログラム

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016146544A (ja) * 2015-02-06 2016-08-12 ブラザー工業株式会社 通信システム、配信装置及びプログラム

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016146544A (ja) * 2015-02-06 2016-08-12 ブラザー工業株式会社 通信システム、配信装置及びプログラム

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
ANONYMOUS: "Can you send cheers from your home to the venue? Yamaha develops "remote support" ... New possibilities even for "no audience" ", FNN PRIME, 24 May 2020 (2020-05-24), XP055880358, Retrieved from the Internet <URL:https://www.fnn.jp/articles/-/44819> *
ANONYMOUS: "New technology to deliver cheers to the stadium while watching TV or online broadcasting at home, Yamaha Reveals Remote Cheering System in Field Test Assisted by Two Professional Football Clubs in Japan", 18 May 2020 (2020-05-18), JP, pages 1 - 3, XP009532987, Retrieved from the Internet <URL:https://www.yamaha.com/ja/news-release/2020/20051801/pdf/2005180101.pdf> *

Also Published As

Publication number Publication date
JP2021190895A (ja) 2021-12-13
JP6958676B1 (ja) 2021-11-02

Similar Documents

Publication Publication Date Title
US6653545B2 (en) Method and apparatus for remote real time collaborative music performance
CN101803336B (zh) 用于对视频进行选择性音频修改的方法和系统
WO2022004103A1 (ja) 演出効果制御方法、端末装置の動作方法、演出効果制御システムおよび端末装置
Connelly Digital radio production
WO2021246104A1 (ja) 制御方法および制御システム
WO2014181773A1 (ja) 音楽セッション管理方法及び音楽セッション管理装置
Beggs et al. Designing web audio
JP5459331B2 (ja) 投稿再生装置及びプログラム
WO2022163137A1 (ja) 情報処理装置、情報処理方法、およびプログラム
JP6951610B1 (ja) 音声処理システム、音声処理装置、音声処理方法、及び音声処理プログラム
JP2021021870A (ja) コンテンツ収集・配信システム
Avarese Post sound design: the art and craft of audio post production for the moving image
JP2014123085A (ja) カラオケにおいて歌唱に合わせて視聴者が行う身体動作等をより有効に演出し提供する装置、方法、およびプログラム
WO2021210338A1 (ja) 再生制御方法、制御システムおよびプログラム
JP6474292B2 (ja) カラオケ装置
JP6876169B1 (ja) カラオケ装置
WO2023022004A1 (ja) 制御システムの動作方法、制御システムおよびプログラム
WO2023084933A1 (ja) 情報処理装置、情報処理方法およびプログラム
US20230421865A1 (en) Content data processing method and content data processing apparatus
JP7149203B2 (ja) カラオケシステム
JP2022049333A (ja) 再生制御方法、制御システムおよびプログラム
JP2011013290A (ja) 演奏条件設定機能付きカラオケシステム
Piqué The electric saxophone: An examination of and guide to electroacoustic technology and classical saxophone repertoire
JP2017044765A (ja) 映像提供装置、映像提供システム及びプログラム
Green The Podcaster's Audio Handbook

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21817490

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 21817490

Country of ref document: EP

Kind code of ref document: A1