WO2025257959A1 - 配信方法、装置及びプログラム - Google Patents

配信方法、装置及びプログラム

Info

Publication number
WO2025257959A1
WO2025257959A1 PCT/JP2024/021302 JP2024021302W WO2025257959A1 WO 2025257959 A1 WO2025257959 A1 WO 2025257959A1 JP 2024021302 W JP2024021302 W JP 2024021302W WO 2025257959 A1 WO2025257959 A1 WO 2025257959A1
Authority
WO
WIPO (PCT)
Prior art keywords
listener
priority
information
sound
predetermined position
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
PCT/JP2024/021302
Other languages
English (en)
French (fr)
Inventor
櫻子 矢澤
弘章 伊藤
愛 磯貝
隆之 大西
智子 川瀬
大将 千葉
悠希 渡邊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NTT Inc
NTT Inc USA
Original Assignee
Nippon Telegraph and Telephone Corp
NTT Inc USA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegraph and Telephone Corp, NTT Inc USA filed Critical Nippon Telegraph and Telephone Corp
Priority to PCT/JP2024/021302 priority Critical patent/WO2025257959A1/ja
Publication of WO2025257959A1 publication Critical patent/WO2025257959A1/ja
Pending legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; ELECTRIC HEARING AIDS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers

Definitions

  • the disclosed technology relates to technology for distributing audio signals.
  • Non-Patent Document 1 When carrying out such distribution, it is often difficult to distribute audio to all audience members in real time due to the capacity of the distribution server.
  • Non-Patent Document 2 is known as a conventional technology related to distribution.
  • the disclosed technology aims to provide a distribution method, device, and program that enables more appropriate distribution than conventional methods.
  • a distribution method that is one aspect of the disclosed technology includes: a listener information acquisition step in which a listener information acquisition unit acquires listener information for each listener, where the listener information is location information of the listener; a priority determination step in which a priority determination unit determines a priority for each listener based on the acquired listener information so that listeners closer to a predetermined location have a higher priority; and a distribution step in which the distribution unit distributes a sound signal based on sound emitted from the predetermined location to each listener so that listeners with higher determined priorities are given higher priority; the listeners wear a wearable device that plays sound corresponding to the sound signal, and the distribution unit is able to distribute the sound signal based on the sound emitted from the predetermined location to the listener via the wearable device in a time shorter than the time it takes for sound emitted from the predetermined location to directly reach the listener's location.
  • the disclosed technology allows for more appropriate delivery than ever before by delivering content based on priority.
  • FIG. 1 is a diagram illustrating an example of the functional configuration of a distribution device.
  • FIG. 2 is a diagram showing an example of a processing procedure of the distribution method.
  • FIG. 3 is a diagram illustrating an example of the functional configuration of a computer.
  • FIG. 4 is a diagram illustrating an example of the functional configuration of a computer.
  • the distribution device includes, for example, a listener information acquisition unit 1, a priority determination unit 2, and a distribution unit 3.
  • the distribution method is realized, for example, by each component of the distribution device performing the processes from step S1 to step S3 described below and shown in Figure 2.
  • the distribution device and method are used in a concert venue where actor A is on stage S, as shown in the example of Figure 3.
  • the venue contains audio emitted from actor A on stage S, as well as other audio emitted from speakers SP installed on the stage and throughout the venue.
  • the audience, or listener LS is assumed to be wearing a wearable device that reproduces sound corresponding to the input sound signal.
  • An example of a wearable device is an open-ear earphone that reproduces sound without completely blocking the ear canal.
  • the listener LS can hear not only the sounds in the venue but also the sound output from the wearable device. For example, in order for the listener to hear actor A's voice better, actor A's audio signal is distributed to the wearable device.
  • differences in how the sound is heard refer to differences that arise due to the difference in distance between listeners LS seated close to stage S and/or speakers SP and listeners LS seated far from stage S and/or speakers SP. This is because there is a difference in the timing at which listeners LS hear the acoustic signal arriving at listeners LS from stage S and/or speakers SP and the acoustic signal distributed to their wearable devices. If sequential distribution within the distribution capacity is performed without taking this difference in how the sound is heard into consideration, differences in the experience of listeners LS will arise. Therefore, the distribution device and method described below, for example, resolve these differences in experience by distributing based on priority.
  • the listener information acquisition unit acquires listener information of each listener (step S1).
  • the acquired listener information of each listener is output to the priority determination unit 2.
  • the listener information is position information of the listener.
  • An example of listener position information is information about the distance between a predetermined sound source position and the listener's position.
  • An example of a predetermined sound source position is the microphone position of an actor on stage.
  • the predetermined sound source position may also be the position of a speaker. This speaker is, for example, a speaker that emits sound based on an audio signal emitted from a microphone position on the stage. If there are multiple speakers, the predetermined sound source position may be the position of the speaker closest to the listener.
  • the listener's position information may be information about the listener's seat position. In this case, the aforementioned listener's position information may be obtained based on the seat information.
  • the listener information acquisition unit 1 acquires information about the distance between a predetermined sound source position and the listener's position, for example, based on image data or video data captured by a camera. In this case, the image data or video data captured by the camera is input to the listener information acquisition unit 1.
  • the listener information acquisition unit 1 may use laser light to acquire information about the distance between a predetermined sound source position and the listener's position.
  • a beacon that emits radio waves at predetermined intervals may be attached to a moving object that moves along with the sound source position.
  • the listener information acquisition unit 1 may acquire the predetermined sound source position based on the radio waves emitted from the beacon. Then, the listener information acquisition unit 1 may acquire information on the distance between the predetermined sound source position and the listener's position from this acquired predetermined sound source position.
  • the listener's position information may also be the delay time, which is the time it takes for sound emitted from a specified position to directly reach the listener's position.
  • the listener information may be information relating to a delay time, which is the time it takes for a sound emitted from a predetermined position to directly reach the listener's position, and a delivery time, which is the time it takes for a sound signal based on the sound emitted from the predetermined position to be delivered to the listener via a wearable device.
  • the sound signal may be an audio signal or an acoustic signal.
  • Examples of information related to delay time and delivery time may be the delay time and delivery time themselves, or the output value when the delay time and delivery time are input to a predetermined function f.
  • the listener information may also be information relating to the sound pressure of a sound emitted from a predetermined position and directly reaching the listener's position, and the sound pressure of a sound generated by a wearable device based on a distributed sound signal.
  • a delay time calculated in advance based on the position information may also be used.
  • the priority determination unit 2 receives the listener information acquired by the listener information acquisition unit 1 as input.
  • the priority determination unit 2 determines the priority of each listener based on the listener information so that the closer a listener is to a predetermined location, the higher the priority (step S2). The determined priority is output to the distribution unit 3.
  • the priority determination unit 2 may determine the priority of each listener so that the listener with the shorter delay time has a higher priority.
  • the priority determination unit 2 may determine the priority of each listener so that the listener located in a section closer to a predetermined position has a higher priority. In other words, the priority determination unit 2 may assign the same priority value to listeners located in the same section. In other words, the delay time set for listeners whose position information is within a predetermined threshold range of distance from the stage and/or speaker may be set to the same value.
  • the number of sections may be set to any value as long as it is two or more.
  • the priority determination unit 2 assigns the same priority value to listeners located in the same section, making it possible to deliver content more appropriately even when listeners are densely packed and close to each other.
  • the listener information may also be information relating to the delay time, which is the time it takes for sound emitted from a predetermined position to directly reach the listener's position, and the delivery time, which is the time it takes for a sound signal based on the sound emitted from the predetermined position to be delivered to the listener via a wearable device.
  • the priority determination unit 2 may determine the priority of each listener so that the shorter the delay time and the longer the delivery time, the higher the priority. Also, if the listener information is the output value when input to a predetermined function f, the priority determination unit 2 may determine a higher priority the smaller the value of the listener information.
  • the listener information may be information regarding the sound pressure of sound emitted from a predetermined position and directly reaching the listener's position, and the sound pressure of sound generated by a wearable device based on a distributed sound signal.
  • the priority determination unit 2 may determine the priority of each listener so that the closer the sound pressure of the sound emitted from a predetermined location and directly reaching the listener's position is to the sound pressure of the sound generated by the wearable device based on the distributed sound signal, the higher the priority of the listener.
  • the distribution unit 3 receives the priorities determined by the priority determination unit 2 .
  • the distribution unit 3 distributes sound signals based on sounds emitted from a specified position to each listener, giving higher priority to listeners with higher priorities (step S3).
  • the distribution unit 3 is capable of distributing an audio signal based on sound emitted from a predetermined position to a listener via a wearable device in a time shorter than the time it takes for the sound emitted from the predetermined position to reach the listener's position directly.
  • Distribution via the wearable device may be performed via a wired or wireless connection. Existing wireless technologies such as Bluetooth (registered trademark) and Wi-Fi (registered trademark) can be used, for example. Distribution may also be performed using technologies such as WebRTC.
  • the distribution unit 3 distributes to listeners in order of priority.
  • the distribution unit 3 may distribute only to listeners whose priority is equal to or greater than a predetermined value.
  • the distribution unit 3 distributes a sound signal based on the sound emitted from a predetermined position to the listener via the wearable device.
  • the wearable device generates sound based on the input sound signal.
  • the distribution device may be equipped with an audio capture unit 4 for capturing that voice.
  • the audio capture unit 4 is shown by a dashed line in Figure 1. In this case, a sound signal based on the sound captured by the audio capture unit 4 is input to the distribution unit 3.
  • the "sound-based sound signal” may be a signal representing the sound itself, a signal representing the sound after a predetermined processing has been performed on the sound, or a signal representing a sound mixed with other sounds.
  • the audio capture unit 4 may be a microphone placed at a predetermined position, or a directional microphone placed at a position away from the predetermined position and directed toward the predetermined position.
  • An example of a microphone placed at a predetermined position is a microphone held by an actor.
  • An example of a directional microphone directed toward a predetermined position is a gun microphone directed toward the actor.
  • the distribution unit 3 may distribute within the scope of the distribution unit 3's distribution capabilities.
  • listener information may be information about the listener.
  • listener information include the listener's status and attributes.
  • listener information may be information about whether the listener has a physical disability.
  • An example of a physical disability is a visual disability.
  • the listener information acquisition unit 1 acquires information about whether the listener has a visual disability, for example, based on image data or video data captured by a camera. In this case, the image data or video data captured by the camera is input to the listener information acquisition unit 1.
  • the listener information acquisition unit 1 performs image recognition on the input image data or video data, for example, to detect whether the listener has a hearing aid, a white cane, or a guide dog.
  • the information about whether the listener has a visual disability is output to the priority determination unit 2.
  • the image recognition technology can be, for example, the technology described in Reference 1.
  • the priority determination unit 2 determines the priority of each listener based on listener information, which is information about whether the listener has a visual disability, so that the priority of listeners with a visual disability is higher than the priority of listeners without a visual disability.
  • This type of processing makes it possible to prioritize the delivery of announcement audio, such as warnings, to listeners with visual disabilities, for example.
  • data exchange between components of the distribution device may be performed directly, or via a storage unit (not shown).
  • a device (terminal) for using the device, system, or method of the present invention via a network (telecommunications line) may also be provided.
  • the “device (terminal) for use” may be equipped with the functions necessary to obtain the effects of implementing the device, system, or method of the present invention (e.g., control functions, decoding functions, restoration functions, input/output functions, etc.).
  • circuitry or processing circuitry including general-purpose processors, application-specific processors, integrated circuits, ASICs (Application Specific Integrated Circuits), a CPU (a Central Processing Unit), conventional circuits, and/or combinations thereof, programmed to perform the described functions.
  • a processor includes transistors and other circuits and is considered to be circuitry or processing circuitry.
  • a processor may also be a programmed processor that executes programs stored in memory.
  • a circuit, unit, or means refers to hardware that is programmed to realize or executes the described functions.
  • the hardware may be any hardware disclosed in this specification or any hardware known to be programmed to realize or execute the described functions.
  • the hardware is a processor, which is considered to be a type of circuitry
  • the circuitry, means, or unit is the combination of the hardware and the software used to configure the hardware and/or processor.
  • the program describing this processing can be recorded on a computer-readable recording medium.
  • Examples of computer-readable recording media include magnetic recording devices, optical disks, magneto-optical recording media, and semiconductor memory.
  • this program may be distributed, for example, by selling, transferring, or lending portable recording media such as DVDs or CD-ROMs on which the program is recorded.
  • the program may be stored in a storage device on a server computer, and then transferred from the server computer to other computers via a network, thereby distributing the program.
  • a computer that executes such a program for example, first stores the program recorded on a portable recording medium or transferred from a server computer in its own storage device. Then, when executing processing, the computer reads the program stored on its own recording medium and executes processing in accordance with the read program. As another form of execution of this program, the computer may read the program directly from the portable recording medium and execute processing in accordance with that program, or it may execute processing in accordance with the received program each time a program is transferred to this computer from the server computer. Alternatively, the server computer may not transfer the program to this computer, but rather executes processing using a so-called ASP (Application Service Provider) type service, which realizes processing functions simply by issuing execution instructions and obtaining results.
  • ASP Application Service Provider
  • the computer may be configured to execute terminal processing using a so-called SaaS (Software as a Service) type service, which allows users to use part of a server computer along with the program.
  • the program includes information used for processing by an electronic computer that is equivalent to a program (such as data that is not a direct command to a computer but has properties that dictate computer processing).
  • the device is configured by executing a specific program on a computer, but at least part of the processing may also be implemented in hardware.

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Stereophonic System (AREA)

Abstract

配信方法は、聴取者情報は聴取者の位置情報であるとして、聴取者情報取得部１が、各聴取者の聴取者情報を取得する聴取者情報取得ステップと、優先度決定部２が、取得された聴取者情報に基づいて、所定の位置から近い聴取者ほど優先度が高くなるように各聴取者の優先度を決定する優先度決定ステップと、配信部３が、決定された優先度が高い聴取者ほどより優先されるように、所定の位置から発せられる音に基づく音信号の配信を各聴取者に対して行う配信ステップと、を含み、聴取者は、音信号に対応する音を再生する装着型デバイスを装着しており、配信部３は、所定の位置から発せられる音が聴取者の位置に直接的に到達するまでの時間よりも短い時間で、所定の位置から発せられる音に基づく音信号を装着型デバイスを介して聴取者に配信可能である。

Description

配信方法、装置及びプログラム
　開示の技術は、音信号を配信する技術に関する。
　近年、ライブパフォーマンスなどでステージ上のアクターの声を収音した音を、リアルタイムで観客への配信を行うことが増えてきている。また、観客への配信を行う際に、音響処理を付加した音と会場内のBGMとをあわせて観客が視聴できるようにすることで、観客によりよいエンターテイメント体験を提供することが増えている（例えば、非特許文献１参照。）。そういった配信を行う場合、すべての観客へのリアルタイムでの配信は、配信サーバーの能力の関係で困難な場合が多い。
　例えば、大人数の聴取者に一斉に同じタイミングで配信しようとしても、配信側の制限及び限界ですべての聴取者に配信しきれないことがある。例えば、同時に配信することができる聴取者の数である配信能力が２であるのに、聴取者の数が１０であるような場合に、すべての聴取者に配信しきれないことがある。また、この場合に、聴こえ方にズレが発生してしまうことがある。
　なお、配信に関する従来技術として、非特許文献２の技術が知られている。
日本電信電話株式会社、外２名、"「超歌舞伎 Powered by NTT」にて超歌舞伎の新しい空間音響演出にチャレンジ～舞台のリアルな音と耳元の効果音がクロスオーバーする空間音響演出を実現～"、［online］、２０２３年４月２９日、［令和６年５月３１日検索］、インターネット＜URL：https://group.ntt/jp/newsrelease/2023/04/29/230429b.html＞ Bluetooth（登録商標） SIG、"AURACAST"、［online］、［令和６年５月３１日検索］、インターネット＜URL：https://www.bluetooth.com/ja-jp/auracast/＞
　開示の技術は、従来よりも適切に配信を行うことができる配信方法、装置及びプログラムを提供することを目的とする。
　開示の技術の一態様である配信方法は、聴取者情報は聴取者の位置情報であるとして、聴取者情報取得部が、各聴取者の聴取者情報を取得する聴取者情報取得ステップと、優先度決定部が、取得された聴取者情報に基づいて、所定の位置から近い聴取者ほど優先度が高くなるように各聴取者の優先度を決定する優先度決定ステップと、配信部が、決定された優先度が高い聴取者ほどより優先されるように、所定の位置から発せられる音に基づく音信号の配信を各聴取者に対して行う配信ステップと、を含み、聴取者は、音信号に対応する音を再生する装着型デバイスを装着しており、配信部は、所定の位置から発せられる音が聴取者の位置に直接的に到達するまでの時間よりも短い時間で、所定の位置から発せられる音に基づく音信号を装着型デバイスを介して聴取者に配信可能である。
　開示の技術によれば、優先度に基づいて配信することで、従来よりも適切に配信を行うことができる。
図１は、配信装置の機能構成の例を示す図である。 図２は、配信方法の処理手続きの例を示す図である。 図３は、コンピュータの機能構成例を示す図である。 図４は、コンピュータの機能構成例を示す図である。
　以下、図面を参照して開示の技術の実施形態を説明する。なお、図面中において同じ機能を有する構成部には同じ番号を付し、重複説明を省略する。
　[配信装置及び方法]
　配信装置は、図１に示すように、聴取者情報取得部１、優先度決定部２及び配信部３を例えば備えている。
　配信方法は、配信装置の各構成部が、以下に説明し及び図２に示すステップＳ１からステップＳ３の処理を行うことにより例えば実現される。
　配信装置及び方法は、図３に例示するような、アクターＡがステージＳにいるようなコンサート会場で用いられる。会場には、ステージＳ上のアクターＡから発せられる音声、その他ステージや会場の至る所に設置されているスピーカＳＰから発せられる音声が存在している。
　観客である聴取者ＬＳは、入力された音信号に対応する音を再生する装着型デバイスを装着しているとする。装着型デバイスの例は、外耳孔を完全に遮蔽せずに音を再生するオープンイヤー型イヤホンである。このような装着型デバイスを用いることで、聴取者ＬＳは、会場の音だけではなく、装着型デバイスから出力される音を聴くことができる。聴取者がアクターＡの音声をよりよく聞くために、例えばアクターＡの音声信号が装着型デバイスに配信される。
　このアクターＡの音声信号の配信を行う際に、ステージＳから近い座席の聴取者ＬＳとステージＳから遠い座席の聴取者ＬＳは音の聴こえ方に違いがあることがある。ここで、聴こえ方の違いとは、ステージＳもしくは/及びスピーカＳＰから近い座席の聴取者ＬＳとの距離と、ステージＳもしくは/及びスピーカＳＰから遠い座席の聴取者ＬＳとの距離とからの距離が違うが故に起きる違いを指す。ステージSもしくは/及びスピーカSPから聴取者LSに到来する音響信号と、装着型デバイスに配信される音響信号と、を聴取者LSが聴取するタイミングに差異が生じるためである。この聴こえ方の違いを考慮せずに、配信能力の範囲内で逐次配信をしてしまうと聴取者ＬＳの体験に違いが出てきてしまう。そこで、以下に説明する配信装置及び方法では、例えば、このような体験の違いを、優先度に基づいて配信することで解消する。
　以下、配信装置の各構成部について説明する。
　[[聴取者情報取得部１]]
　聴取者情報取得部は、各聴取者の聴取者情報を取得する（ステップＳ１）。取得された各聴取者の聴取者情報は、優先度決定部２に出力される。
　聴取者情報は、聴取者の位置情報である。聴取者の位置情報の例は、所定の音源位置と聴取者の位置との間の距離の情報である。所定の音源位置の例は、ステージ上にいるアクターのマイク位置である。所定の音源位置は、スピーカの位置であってもよい。このスピーカは、例えば、ステージ上にいるマイク位置から発せられた音声信号に基づく音を発するスピーカである。複数のスピーカがある場合には、所定の音源位置は、聴取者から最も近いスピーカの位置であってもよい。
　聴取者の座席位置の情報がわかる場合には、聴取者の位置情報は、聴取者の座席位置の情報であってもよい。この場合、座席情報に基づき、前述した聴取者の位置情報を取得してもよい。
　聴取者情報取得部１は、例えば、カメラで撮影された画像データ又は映像データに基づいて、所定の音源位置と聴取者の位置との間の距離の情報を取得する。この場合、カメラで撮影された画像データ又は映像データが、聴取者情報取得部１に入力される。
　聴取者情報取得部１は、レーザー光を用いて、所定の音源位置と聴取者の位置との間の距離の情報を取得してもよい。
　なお、所定の音源位置が移動する可能性がある場合には、その音源位置と共に移動する移動体に、所定の間隔で電波を発するビーコンを付けてもよい。この場合、聴取者情報取得部１は、ビーコンから発せられる電波に基づいて所定の音源位置を取得してもよい。そして、聴取者情報取得部１は、この取得された所定の音源位置から、所定の音源位置と聴取者の位置との間の距離の情報を取得してもよい。
　なお、聴取者の位置情報は、所定の位置から発せられる音が聴取者の位置に直接的に到達するまでの時間である遅延時間であってもよい。
　遅延時間を求めるために、聴取者情報取得部１は、まず、所定の音源位置と聴取者の位置との間の距離Lを求める。そして、聴取者情報取得部１は、距離Lと音速V（V=331.5+0.6×T[m/s]、Tは気温）を用いて、以下の式により定義される遅延時間tを計算する。
遅延時間t=l/V
　聴取者情報は、所定の位置から発せられる音が聴取者の位置に直接的に到達するまでの時間である遅延時間と、所定の位置から発せられる音に基づく音信号が装着型デバイスを介して聴取者に配信されるまでの時間である配信時間とに関する情報であってもよい。なお、音信号は、音声信号であってもよいし、音響信号であってもよい。
　遅延時間と配信時間とに関する情報の例は、遅延時間と配信時間自体であってもよいし、遅延時間と配信時間を所定の関数fに入力したときの出力値であってもよい。所定の関数fは、遅延関数について非減少となり、配信時間についての非増加となる関数である。i=1,...,Iとして、聴取者iに対応する遅延時間及び配信時間をそれぞれRi,Piと表記する。Iは、聴取者の人数である。所定の関数fの例は、f=Ri-Piである。
　なお、聴取者情報は、所定の位置から発せられ聴取者の位置に直接的に到達する音の音圧と、装着型デバイスが配信された音信号に基づいて発生させた音の音圧とに関する情報であってもよい。位置情報に基づきあらかじめ計算された遅延時間を用いてもよい。
　[[優先度決定部２]]
　優先度決定部２には、聴取者情報取得部１が取得した聴取者情報が入力される。
　優先度決定部２は、聴取者情報に基づいて、所定の位置から近い聴取者ほど優先度が高くなるように各聴取者の優先度を決定する（ステップＳ２）。決定された優先度は、配信部３に出力される。
　例えば、聴取者情報が、所定の位置から発せられる音が聴取者の位置に直接的に到達するまでの時間である遅延時間である場合には、優先度決定部２は、遅延時間が短い聴取者ほど優先度が高くなるように各聴取者の優先度が決定してもよい。
　また、聴取者が位置する領域が複数の区画に分割されている場合には、優先度決定部２は、所定の位置から近い区画に位置する聴取者ほど優先度が高くなるように各聴取者の優先度を決定してもよい。すなわち、優先度決定部２は、同一の区画に位置する聴取者の優先度を同一の値とする。言い換えると、ステージもしくは/およびスピーカからの距離が所定の閾値の範囲内に位置情報を有する聴取者に対して設定される遅延時間を同一の値としてもよい。区画の数は2以上であればどのような値を設定してもよい。
　優先度を決定する際に、聴取者が密な状態であり、聴取者同士の距離が近い場合、個々に優先度を設定するのはあまり効果的ではない。このように、優先度決定部２が、同一の区画に位置する聴取者の優先度を同一の値とすることで、聴取者が密な状態であり、聴取者同士の距離が近い場合であっても、より適切に配信を行うことができる。
　なお、先に述べたように、聴取者情報は、所定の位置から発せられる音が聴取者の位置に直接的に到達するまでの時間である遅延時間と、所定の位置から発せられる音に基づく音信号が装着型デバイスを介して聴取者に配信されるまでの時間である配信時間とに関する情報であってもよい。
　この場合、優先度決定部２は、遅延時間が短く、配信時間が長い聴取者ほど優先度が高くなるように各聴取者の優先度を決定してもよい。また、聴取者情報が、所定の関数fに入力したときの出力値である場合には、優先度決定部２は、聴取者情報である値が小さいほど高い優先度を決定してもよい。
　また、先に述べたように、聴取者情報は、所定の位置から発せられ聴取者の位置に直接的に到達する音の音圧と、装着型デバイスが配信された音信号に基づいて発生させた音の音圧とに関する情報であってもよい。
　この場合、優先度決定部２は、所定の位置から発せられ聴取者の位置に直接的に到達する音の音圧と、装着型デバイスが配信された音信号に基づいて発生させた音の音圧とが近い聴取者ほど優先度が高くなるように各聴取者の優先度を決定してもよい。
　このように、配信時間を考慮して優先度を決定することで、より適切な配信を行うことができる。
　[[配信部３]]
　配信部３には、優先度決定部２で決定された優先度が入力される。
　配信部３は、優先度が高い聴取者ほどより優先されるように、所定の位置から発せられる音に基づく音信号の配信を各聴取者に対して行う（ステップＳ３）。
　配信部３は、所定の位置から発せられる音が聴取者の位置に直接的に到達するまでの時間よりも短い時間で、所定の位置から発せられる音に基づく音信号を装着型デバイスを介して聴取者に配信可能であるとする。装着型デバイスを介した配信は、有線で行われてもよいし、無線で行われてもよい。無線技術として、Bluetooth（登録商標）、Wi-Fi（登録商標）等の既存の技術を例えば用いることができる。また、配信は、例えばWebRTC等の技術を用いて行われる。
　例えば、配信部３は、優先度が高い聴取者から順に配信を行う。また、配信部３は、優先度が所定の値以上である聴取者のみに配信を行ってもよい。
　配信部３は、所定の位置から発せられる音に基づく音信号を装着型デバイスを介して聴取者に配信する。装着型デバイスは、入力された音信号に基づく音を発生させる。
　所定の位置から発せられる音が、ステージ上にいるアクターの音声である場合には、その音声を取得するための音声取得部４が配信装置に備えられていてもよい。図１に音声取得部４を破線で示す。この場合、音声取得部４で取得された音に基づく音信号が、配信部３に入力される。
　「音に基づく音信号」は、音自体を表す信号であってもよいし、音に所定の処理を行った後の音を表す信号であってもよいし、音に他の音を混ぜた音を表す信号であってもよい。
　音声取得部４は、所定の位置に配置されたマイクであってもよいし、所定の位置から離れた位置に配置され、所定の位置に指向性が向けられた指向性マイクであってもよい。所定の位置に配置されたマイクの例は、アクターが持っているマイクである。所定の位置に指向性が向けられた指向性マイクの例は、アクターの方に向けられたガンマイクである。
　配信部３は、配信部３の配信能力の範囲内で配信を行ってもよい。
　このように、優先度に基づいて配信することで、従来よりも適切に配信を行うことができる。すなわち、優先度に基づいて配信することで、配信能力の範囲で可能な限り多くの聴取者に配信を行うことができる。また、優先度に基づいて配信することで、例えば、所定の位置から発せられる音が聴取者の位置に直接的に到達するまでの時間である遅延時間と、所定の位置から発せられる音に基づく音信号が装着型デバイスを介して聴取者に配信されるまでの時間である配信時間とを近づけることができる。言い換えれば、所定の位置から発せられ聴取者の位置に直接的に到達する音と、装着型デバイスを介して聴取者に配信される音とのズレを小さくすることができる。
　[変形例]
　以上、開示の技術の実施形態の具体的な構成は、これまで説明した構成に限られるものではない。開示の技術の実施形態の具体的な構成は、開示の技術の実施形態の趣旨を逸脱しない範囲で適宜設計の変更等が可能である。
　例えば、聴取者情報は、聴取者についての情報であってもよい。聴取者についての情報の例は、聴取者の状態、聴取者の属性である。具体的には、聴取者情報は、聴取者が、身体的なディスアビリティを有するかどうかについての情報であってもよい。身体的なディスアビリティの例は、視覚的なディスアビリティである。
　聴取者情報が、聴取者が視覚的なディスアビリティを有するかどうかについての情報である場合、聴取者情報取得部１は、例えば、カメラで撮影された画像データ又は映像データに基づいて、聴取者が視覚的なディスアビリティを有するかどうかについての情報を取得する。この場合、カメラで撮影された画像データ又は映像データが、聴取者情報取得部１に入力される。聴取者情報取得部１は、例えば、入力された画像データ又は映像データに対して、画像認識を行い、聴取者が補聴器、白杖、盲導犬を有しているかどうかを検出する。聴取者が視覚的なディスアビリティを有するかどうかについての情報は、優先度決定部２に出力される。画像認識技術としては、例えば参考文献１に記載された技術を用いることができる。
　〔参考文献１〕@daifuku10、“Python で物体認識AIのYOLOv8を試してみた！～応用編～”、［online］、２０２４年３月２４日、［令和６年５月３１日検索］、インターネット＜URL：https://qiita.com/daifuku10/items/50cb5cd9740e07fde591＞
　この場合、優先度決定部２は、聴取者が視覚的なディスアビリティを有するかどうかについての情報である聴取者情報に基づいて、視覚的なディスアビリティを有する聴取者の優先度が視覚的なディスアビリティを有しない聴取者の優先度よりも高くなるように、各聴取者の優先度を決定する。
　このような処理により、例えば視覚的なディスアビリティを有する聴取者に対して優先的に、注意喚起等を促すアナウンス音声を優先的に配信することができる。
　開示の技術の実施形態において説明した各種の処理は、記載の順に従って時系列に実行されるのみならず、処理を実行する装置の処理能力あるいは必要に応じて並列的にあるいは個別に実行されてもよい。
　例えば、配信装置の構成部間のデータのやり取りは直接行われてもよいし、図示していない記憶部を介して行われてもよい。
　さらに、本発明の装置、本発明のシステムもしくは本発明の方法を、ネットワーク（電気通信回線）を介して使用するための装置（端末）も有してもよい。「使用するための装置（端末）」には、本発明の装置、本発明のシステムもしくは本発明の方法の実施による効果を得るために必要な機能（例えば、制御機能、復号機能、復元機能、入出力機能など）を備えさせてもよい。
　その他、この発明の趣旨を逸脱しない範囲で適宜変更が可能であることはいうまでもない。
　本明細書に記載された全ての文献、特許出願、及び技術規格は、個々の文献、特許出願、及び技術規格が参照により取り込まれることが具体的かつ個々に記載された場合と同程度に、本明細書中に参照により取り込まれる。
　[プログラム、記録媒体]
　本明細書中に記載されている構成要素により実現される機能は、当該記載された機能を実現するようにプログラムされた、汎用プロセッサ、特定用途プロセッサ、集積回路、ＡＳＩＣｓ(Application Specific Integrated Circuits)、ＣＰＵ(a Central Processing Unit)、従来型の回路、および／又はそれらの組合せを含む、circuitry又はprocessing circuitryにおいて実装されてもよい。プロセッサは、トランジスタやその他の回路を含み、 circuitry又はprocessing circuitryとみなされる。プロセッサは、メモリに格納されたプログラムを実行する、programmed processorであってもよい。
　本明細書において、circuitry、ユニット、手段は、記載された機能を実現するようにプログラムされたハードウェア、又は実行するハードウェアである。当該ハードウェアは、本明細書に開示されているあらゆるハードウェア、又は、当該記載された機能を実現するようにプログラムされた、又は、実行するものとして知られているあらゆるハードウェアであってもよい。
　当該ハードウェアがcircuitryのタイプであるとみなされるプロセッサである場合、当該circuitry、手段、又はユニットは、ハードウェアと、当該ハードウェア及び又はプロセッサを構成する為に用いられるソフトウェアの組合せである。
　上述の各種の処理は、図４に示すコンピュータ２０００の記録部２０２０に、上記方法の各ステップを実行させるプログラムを読み込ませ、制御部２０１０、入力部２０３０、出力部２０４０、表示部２０５０などに動作させることで実施できる。
　この処理内容を記述したプログラムは、コンピュータで読み取り可能な記録媒体に記録しておくことができる。コンピュータで読み取り可能な記録媒体としては、例えば、磁気記録装置、光ディスク、光磁気記録媒体、半導体メモリ等どのようなものでもよい。
　また、このプログラムの流通は、例えば、そのプログラムを記録したＤＶＤ、ＣＤ－ＲＯＭ等の可搬型記録媒体を販売、譲渡、貸与等することによって行う。さらに、このプログラムをサーバコンピュータの記憶装置に格納しておき、ネットワークを介して、サーバコンピュータから他のコンピュータにそのプログラムを転送することにより、このプログラムを流通させる構成としてもよい。
　このようなプログラムを実行するコンピュータは、例えば、まず、可搬型記録媒体に記録されたプログラムもしくはサーバコンピュータから転送されたプログラムを、一旦、自己の記憶装置に格納する。そして、処理の実行時、このコンピュータは、自己の記録媒体に格納されたプログラムを読み取り、読み取ったプログラムに従った処理を実行する。また、このプログラムの別の実行形態として、コンピュータが可搬型記録媒体から直接プログラムを読み取り、そのプログラムに従った処理を実行することとしてもよく、さらに、このコンピュータにサーバコンピュータからプログラムが転送されるたびに、逐次、受け取ったプログラムに従った処理を実行することとしてもよい。また、サーバコンピュータから、このコンピュータへのプログラムの転送は行わず、その実行指示と結果取得のみによって処理機能を実現する、いわゆるＡＳＰ（Application Service Provider）型のサービスによって処理を実行する構成としてもよい。さらには、サーバコンピュータの一部をプログラムと共にユーザに使用させる、いわゆるＳａａＳ（Software as a Service）型のサービスを利用して、端末の処理を実行する構成としてもよい。なお、本形態におけるプログラムには、電子計算機による処理の用に供する情報であってプログラムに準ずるもの（コンピュータに対する直接の指令ではないがコンピュータの処理を規定する性質を有するデータ等）を含むものとする。
　また、この形態では、コンピュータ上で所定のプログラムを実行させることにより、本装置を構成することとしたが、これらの処理内容の少なくとも一部をハードウェア的に実現することとしてもよい。

Claims (7)

  1. 　聴取者情報は聴取者の位置情報であるとして、聴取者情報取得部が、各聴取者の聴取者情報を取得する聴取者情報取得ステップと、
    　優先度決定部が、前記取得された聴取者情報に基づいて、所定の位置から近い聴取者ほど優先度が高くなるように各聴取者の優先度を決定する優先度決定ステップと、
    　配信部が、前記決定された優先度が高い聴取者ほどより優先されるように、前記所定の位置から発せられる音に基づく音信号の配信を各聴取者に対して行う配信ステップと、を含み、
    　前記聴取者は、前記音信号に対応する音を再生する装着型デバイスを装着しており、
    　前記配信部は、前記所定の位置から発せられる音が聴取者の位置に直接的に到達するまでの時間よりも短い時間で、前記所定の位置から発せられる音に基づく音信号を前記装着型デバイスを介して聴取者に配信可能である、
    　配信方法。
  2. 　請求項１の配信方法であって、
    　前記装着型デバイスは、外耳孔を完全に遮蔽せずに音を再生する、
    　配信方法。
  3. 　請求項１の配信方法であって、
    　前記聴取者情報は、前記所定の位置から発せられる音が前記聴取者の位置に直接的に到達するまでの時間である遅延時間であり、
    　前記優先度決定ステップでは、前記遅延時間が短い聴取者ほど優先度が高くなるように各聴取者の優先度が決定される、
    　配信方法。
  4. 　請求項１の配信方法であって、
    　前記聴取者情報は、前記所定の位置から発せられる音が前記聴取者の位置に直接的に到達するまでの時間である遅延時間と、前記所定の位置から発せられる音に基づく音信号が前記装着型デバイスを介して聴取者に配信されるまでの時間である配信時間とに関する情報であり、
    　前記優先度決定ステップでは、前記遅延時間が短く、前記配信時間が長い聴取者ほど優先度が高くなるように各聴取者の優先度が決定される
    　配信方法。
  5. 　請求項１の配信方法であって、
    　聴取者が位置する領域は複数の区画に分割されており、
    　前記優先度決定ステップでは、前記所定の位置から近い区画に位置する聴取者ほど優先度が高くなるように各聴取者の優先度が決定される、
    　配信方法。
  6. 　聴取者情報は聴取者の位置情報であるとして、各聴取者の聴取者情報を取得する聴取者情報取得部と、
    　前記取得された聴取者情報に基づいて、所定の位置から近い聴取者ほど優先度が高くなるように各聴取者の優先度を決定する優先度決定部と、
    　前記決定された優先度が高い聴取者ほどより優先されるように、前記所定の位置から発せられる音に基づく音信号の配信を各聴取者に対して行う配信部と、を含み、
    　前記聴取者は、前記音信号に対応する音を再生する装着型デバイスを装着しており、
    　前記配信部は、前記所定の位置から発せられる音が聴取者の位置に直接的に到達するまでの時間よりも短い時間で、前記所定の位置から発せられる音に基づく音信号を前記装着型デバイスを介して聴取者に配信可能である、
    　配信装置。
  7. 　請求項１の通信方法の各ステップをコンピュータに実行させるためのプログラム。
PCT/JP2024/021302 2024-06-12 2024-06-12 配信方法、装置及びプログラム Pending WO2025257959A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
PCT/JP2024/021302 WO2025257959A1 (ja) 2024-06-12 2024-06-12 配信方法、装置及びプログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2024/021302 WO2025257959A1 (ja) 2024-06-12 2024-06-12 配信方法、装置及びプログラム

Publications (1)

Publication Number Publication Date
WO2025257959A1 true WO2025257959A1 (ja) 2025-12-18

Family

ID=98050218

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2024/021302 Pending WO2025257959A1 (ja) 2024-06-12 2024-06-12 配信方法、装置及びプログラム

Country Status (1)

Country Link
WO (1) WO2025257959A1 (ja)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060126861A1 (en) * 2000-11-20 2006-06-15 Front Row Advantage, Inc. Personal listening device for events
JP2009503922A (ja) * 2005-07-22 2009-01-29 カンガルー メディア インコーポレイテッド ライブのスポーツイベントの観客の体験を促進するためのシステムと方法
JP2022020625A (ja) * 2020-07-20 2022-02-01 株式会社ウフル 音声処理システム、音声処理装置、音声処理方法、及び音声処理プログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060126861A1 (en) * 2000-11-20 2006-06-15 Front Row Advantage, Inc. Personal listening device for events
JP2009503922A (ja) * 2005-07-22 2009-01-29 カンガルー メディア インコーポレイテッド ライブのスポーツイベントの観客の体験を促進するためのシステムと方法
JP2022020625A (ja) * 2020-07-20 2022-02-01 株式会社ウフル 音声処理システム、音声処理装置、音声処理方法、及び音声処理プログラム

Similar Documents

Publication Publication Date Title
CN102057691B (zh) 会议音频系统、用于分发音频信号的方法以及计算机程序
CN110324685B (zh) 管理回放组
US9031262B2 (en) Distributed, self-scaling, network-based architecture for sound reinforcement, mixing, and monitoring
KR102527336B1 (ko) 가상 공간에서 사용자의 이동에 따른 오디오 신호 재생 방법 및 장치
US20140328485A1 (en) Systems and methods for stereoisation and enhancement of live event audio
CN105940448A (zh) 用于回避控制的元数据
CN109165005B (zh) 音效增强方法、装置、电子设备及存储介质
CN107211212A (zh) 用于控制多个音频输出设备的输出的系统和方法
US20230085918A1 (en) Audio Representation and Associated Rendering
CN106790940A (zh) 录音方法、录音播放方法、装置及终端
TW201928945A (zh) 音訊場景處理技術
US12245008B2 (en) Dynamic audio optimization
JP2022143165A (ja) 再生装置、再生システムおよび再生方法
US12052551B2 (en) Networked audio auralization and feedback cancellation system and method
US20250078859A1 (en) Source separation based speech enhancement
CN116036591B (zh) 音效优化方法、装置、设备及存储介质
US20190182557A1 (en) Method of presenting media
WO2024004006A1 (ja) チャット端末、チャットシステム、およびチャットシステムの制御方法
CN115696170A (zh) 音效处理方法、音效处理装置、终端和存储介质
CN118102176B (zh) 音频输出控制方法及电子设备
WO2014054966A1 (ru) Способ озвучивания видеотрансляции
WO2024257305A1 (ja) 音響信号再生装置、方法及びプログラム
KR102676074B1 (ko) 믹싱 메타데이터를 이용하여 투명 모드를 제공하는 방법 및 오디오 장치
JP7235590B2 (ja) 音声配信システム、配信サーバ、再生装置、及びプログラム
JP7537908B2 (ja) 配信音声遅延調整装置、配信音声遅延調整システム、および配信音声遅延調整プログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 24943322

Country of ref document: EP

Kind code of ref document: A1