JP7469525B1 - 時刻調整システム、端末装置、およびサーバ装置 - Google Patents
時刻調整システム、端末装置、およびサーバ装置 Download PDFInfo
- Publication number
- JP7469525B1 JP7469525B1 JP2023001820A JP2023001820A JP7469525B1 JP 7469525 B1 JP7469525 B1 JP 7469525B1 JP 2023001820 A JP2023001820 A JP 2023001820A JP 2023001820 A JP2023001820 A JP 2023001820A JP 7469525 B1 JP7469525 B1 JP 7469525B1
- Authority
- JP
- Japan
- Prior art keywords
- time
- sound wave
- message
- output
- reference sound
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012937 correction Methods 0.000 claims abstract description 9
- 230000033764 rhythmic process Effects 0.000 claims description 49
- 238000000034 method Methods 0.000 description 44
- 230000008569 process Effects 0.000 description 40
- 238000012545 processing Methods 0.000 description 37
- 238000010586 diagram Methods 0.000 description 14
- 230000006870 function Effects 0.000 description 9
- 230000005236 sound signal Effects 0.000 description 9
- 230000001934 delay Effects 0.000 description 8
- 230000001360 synchronised effect Effects 0.000 description 8
- 230000005540 biological transmission Effects 0.000 description 5
- 238000004891 communication Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 230000002452 interceptive effect Effects 0.000 description 2
- 238000010079 rubber tapping Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000007667 floating Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Images
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Reverberation, Karaoke And Other Acoustics (AREA)
Abstract
【解決手段】ネットワークを介して音波出力装置に接続されるサーバ装置と同期するためのメッセージであって、予め設定された周波数の音波である参照音波が出力される時刻を示すメッセージを受信するメッセージ受信部と、音波出力装置から出力された参照音波を受信したか否かを判定する音波受信判定部と、参照音波を受信したと判定された場合、メッセージに示された時刻と参照音波を受信した時刻との差分により自分のタイマの時刻を修正した修正時刻を算出する時刻修正部とを備える。
【選択図】図7
Description
<第一実施形態>
図1は、オンラインリズムゲームが開催される会場の例を示す図である。同図に示される会場10には、多数の観客が集まっており、観客のそれぞれが自身の端末を使ってリズムゲームを行っている。なお、観客のそれぞれが使う端末は、例えば、スマートフォンなどにより構成される。また、会場10には、スクリーン11およびスピーカ(図示せず)が設置されており、スクリーン11には、オンラインリズムゲームのコンテンツの画像が表示されている。スピーカからは、オンラインリズムゲームのコンテンツの音声が出力されている。
図4は、本実施形態に係る時刻調整システムの構成例を示すブロック図である。この例では、時刻調整システム1が、オンラインリズムゲームを実行するためのシステムとして構成されている。図4の例において、時刻調整システム1は、サーバ31と、サーバ31とネットワーク71を介して接続される会場10によって構成されている。ネットワーク71は、例えば、インターネットなどのネットワークである。
図5は、サーバ31の機能的構成例を示すブロック図である。同図に示されるように、サーバ31は、コンテンツ再生処理部111、メッセージ送信部112、音波出力制御部113、および計時制御部114を有している。
コンテンツ再生処理部111は、記憶部115に記憶されているオンラインリズムゲームのコンテンツのデータを再生し、コンテンツのデータを再生して得られる画像および音声の信号をストリーミング配信する処理を実行する。
メッセージ送信部112は、音波の出力に係るメッセージを生成して端末21に送信する。ここで、音波の出力に係るメッセージは、所定の周波数の音波がスピーカ12-1およびスピーカ12-2から出力される時刻を示す。詳細は、後述するが、端末21は、スピーカ12-1およびスピーカ12-2から所定の周波数の音波が出力された時刻を参照して、遅延時間を計算する。
音波出力制御部113は、スピーカ12-1およびスピーカ12-2から参照音波を出力させるための制御信号を生成してネットワーク接続装置41に送信する。
計時制御部114は、サーバ31のタイマに係る制御を行う。計時制御部114は、例えば、サーバ31のタイマをNTP同期させる。
記憶部115は、コンテンツのデータなど、サーバ31が保存するべきデータを記憶する。
図6は、メッセージ送信部112により生成されるメッセージの例を示す図である。この例では、メッセージ200において、「“target”:“audience”」と記述されており、このメッセージが、会場10の観客の端末21にブロードキャストされることが示されている。
図7は、端末21の機能的構成例を示すブロック図である。同図に示されるように、端末21は、メッセージ受信部151、音波受信判定部152、遅延計算部153、計時制御部154、およびゲーム実行処理部155を有している。
メッセージ受信部151は、サーバ31から送信されたメッセージ200を受信する。このように、端末21は、サーバ31から送信されたメッセージを受信するメッセージ受信部151を備える。
音波受信判定部152は、メッセージ受信部151がメッセージを受信すると、参照音波を受信したか否かを判定する処理を実行する。音波受信判定部152は、例えば、端末21に内蔵されているマイクによって収集された音声の信号をフーリエ変換し、所定の周波数の音波に対応する音声がマイクを介して受信されたか否かを判定する。音波受信判定部152は、例えば、フーリエ変換後のパワースペクトルにおける参照音波の周波数のパワーを閾値と比較することにより、参照音波を受信したか否かを判定する。
遅延計算部153は、メッセージ200に記述されている参照音波の出力時刻と、音波受信判定部152により参照音波を受信したと判定された時刻との差分によって遅延を算出する。また、遅延計算部153は、参照音波が複数回受信された場合、それぞれの回において遅延の平均値を算出する。
計時制御部154は、端末21のタイマに係る制御を行う。計時制御部154は、例えば、端末21のタイマをNTP同期させる。また、計時制御部154は、遅延計算部153により計算された遅延時間だけメッセージ200に記述されている参照音波の出力時刻を遅らせた修正時刻を算出する。
ゲーム実行処理部155は、オンラインリズムゲームの実行を制御する。ゲーム実行処理部155は、例えば、端末21にインストールされたオンラインリズムゲーム用のアプリケーションによる処理を実行し、ゲームに係る画像、音声などを端末21に表示、出力させる。
次に、本実施形態に係る時刻調整システム1においてサーバ31が実行する時刻合わせ処理の例について説明する。図8は、サーバ31による時刻合わせ処理の流れの一例を説明するフローチャートである。
次に、本実施形態に係る時刻調整システム1において端末21が実行する時刻合わせ処理の例について説明する。図9は、端末21による時刻合わせ処理の流れの一例を説明するフローチャートである。
次に、図10のフローチャートを参照して、図9のステップS44の遅延時間計算処理の詳細な例について説明する。
上述したように、本実施形態に係る時刻調整システムにおいては、時刻を修正するためのメッセージと参照音波とに基づく時刻の修正が行われる。このようにすることで、ネットワーク遅延を考慮したコンテンツと端末との正確な同期が可能となる。
第一実施形態においては、参照音波の周波数が不可聴周波数帯域となるように設定され、例えば、20kHz以上の周波数が設定された。オンラインリズムゲームが開始される前に会場10において発生する音は、通常、人の声や人が歩く音などであり、不可聴周波数帯域の雑音が生じることはごく稀であると考えられるからである。
上述した実施形態においては、各実施形態の時刻調整システムをオンラインリズムゲームにおいて利用する例について説明したが、各実施形態の時刻調整システムの用途は、オンラインリズムゲームに限られるものではない。ネットワーク遅延を考慮したコンテンツと端末との同期が必要となる場合、やはり各実施形態の時刻調整システムを利用することができる。
上述したサーバ31および端末21は、コンピュータを機能させるためのプログラムであって、サーバ31および端末21としてコンピュータを機能させるためのプログラムにより実現することができる。この場合、サーバ31および端末21は、上記プログラムを実行するためのハードウェアとして、少なくとも1つの制御装置(例えばプロセッサ)と少なくとも1つの記憶装置(例えばメモリ)を有するコンピュータを備えている。このようなコンピュータの一例を図10に示す。
本発明の態様1に係る端末装置は、ネットワークを介して音波出力装置に接続されるサーバ装置と同期するためのメッセージであって、予め設定された周波数の音波である参照音波が出力される時刻を示すメッセージを受信するメッセージ受信部と、前記音波出力装置から出力された前記参照音波を受信したか否かを判定する音波受信判定部と、前記参照音波を受信したと判定された場合、前記メッセージに示された時刻と前記参照音波を受信した時刻との差分により遅延時間を算出する遅延計算部とを備える。
11 スクリーン
12 スピーカ
21 端末
41 ネットワーク接続装置
51 画像音声制御装置
71 ネットワーク
111 コンテンツ再生処理部
112 メッセージ送信部
113 音波出力制御部
114 計時制御部
115 記憶部
151 メッセージ受信部
152 音波受信判定部
153 遅延計算部
154 計時制御部
155 ゲーム実行処理部
Claims (9)
- ネットワークを介して音波出力装置に接続されるサーバ装置と同期するためのメッセージであって、予め設定された周波数の音波である参照音波が出力される時刻を示すメッセージを、前記サーバ装置から受信するメッセージ受信部と、
前記音波出力装置に前記参照音波を出力させるための制御信号であって、前記メッセージが示す時刻において前記サーバ装置から送信された制御信号に基づいて、
前記音波出力装置が出力した前記参照音波を受信したか否かを判定する音波受信判定部と、
前記参照音波を受信したと判定された場合、前記メッセージに示された時刻と前記参照音波を受信した時刻との差分により遅延時間を算出する遅延計算部とを備える
を備える端末装置。 - 前記メッセージを受信する前にNTP同期する
請求項1に記載の端末装置。 - 前記メッセージは、前記参照音波を出力する複数の時刻をそれぞれ示し、
前記サーバ装置は、前記メッセージが示す時刻のそれぞれにおいて、前記音波出力装置に前記参照音波を出力させるための制御信号を送信する
請求項1に記載の端末装置。 - 前記音波出力装置が、複数回前記参照音波を出力し、
第n(nは2以上の自然数)回目に出力される前記参照音波の周波数が、第n-1回目に出力される前記参照音波の周波数と異なる
請求項3に記載の端末装置。 - 前記メッセージが示す複数の時刻のそれぞれと、前記参照音波のそれぞれを受信した時刻との差分に対して所定の演算を行い、
前記演算により得られた値を、前記メッセージが示す時刻に加算することにより修正時刻を算出する時刻修正部をさらに備える
請求項3に記載の端末装置。 - 前記サーバ装置は、前記制御信号を送信した後、所定の時間が経過したとき、コンテンツの配信を開始する
請求項3に記載の端末装置。 - 前記コンテンツは、オンラインリズムゲームである
請求項6に記載の端末装置。 - ネットワークを介して音波出力装置に接続されるサーバ装置であって、
予め設定された周波数の音波である参照音波を出力する時刻を示すメッセージを前記メッセージに示された時刻と前記参照音波を受信した時刻との差分により遅延時間を算出する端末装置に送信するメッセージ送信部と、
音波出力装置に前記参照音波を出力させるための制御信号を、前記メッセージが示す時刻に送信する音波出力制御部と
を備えるサーバ装置。 - サーバ装置と、前記サーバ装置とネットワークを介して接続される音波出力装置と、端末装置とを有する時刻調整システムであって、
前記サーバ装置は、
予め設定された周波数の音波である参照音波を出力する時刻を示すメッセージを送信するメッセージ送信部と、
前記音波出力装置に前記参照音波を出力させるための制御信号を、前記メッセージが示す時刻に送信する音波出力制御部とを備え、
前記端末装置は、
前記サーバ装置から送信されたメッセージを受信するメッセージ受信部と、
前記メッセージが示す時刻において前記サーバ装置から送信された前記制御信号に基づいて前記音波出力装置が出力した前記参照音波を受信したか否かを判定する音波受信判定部と、
前記参照音波を受信したと判定された場合、前記メッセージに示された時刻と前記参照音波を受信した時刻との差分により遅延時間を算出する遅延計算部とを備える
を備える時刻調整システム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2023001820A JP7469525B1 (ja) | 2023-01-10 | 2023-01-10 | 時刻調整システム、端末装置、およびサーバ装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2023001820A JP7469525B1 (ja) | 2023-01-10 | 2023-01-10 | 時刻調整システム、端末装置、およびサーバ装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP7469525B1 true JP7469525B1 (ja) | 2024-04-16 |
JP2024098356A JP2024098356A (ja) | 2024-07-23 |
Family
ID=90667715
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023001820A Active JP7469525B1 (ja) | 2023-01-10 | 2023-01-10 | 時刻調整システム、端末装置、およびサーバ装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7469525B1 (ja) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009010863A (ja) | 2007-06-29 | 2009-01-15 | Oki Electric Ind Co Ltd | 音声・映像同期方法、音声・映像同期システム及び音声・映像受信端末 |
US20090141699A1 (en) | 2007-11-29 | 2009-06-04 | Samsung Electronics Co., Ltd. | Synchronization of nodes on a network |
US20140215535A1 (en) | 2013-01-31 | 2014-07-31 | Cable Television Laboratories, Inc. | Content snychronization |
US20200091959A1 (en) | 2018-09-18 | 2020-03-19 | Roku, Inc. | Wireless Audio Synchronization Using a Spread Code |
CN114339302A (zh) | 2021-12-31 | 2022-04-12 | 咪咕文化科技有限公司 | 导播方法、装置、设备以及计算机存储介质 |
-
2023
- 2023-01-10 JP JP2023001820A patent/JP7469525B1/ja active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009010863A (ja) | 2007-06-29 | 2009-01-15 | Oki Electric Ind Co Ltd | 音声・映像同期方法、音声・映像同期システム及び音声・映像受信端末 |
US20090141699A1 (en) | 2007-11-29 | 2009-06-04 | Samsung Electronics Co., Ltd. | Synchronization of nodes on a network |
US20140215535A1 (en) | 2013-01-31 | 2014-07-31 | Cable Television Laboratories, Inc. | Content snychronization |
US20200091959A1 (en) | 2018-09-18 | 2020-03-19 | Roku, Inc. | Wireless Audio Synchronization Using a Spread Code |
CN114339302A (zh) | 2021-12-31 | 2022-04-12 | 咪咕文化科技有限公司 | 导播方法、装置、设备以及计算机存储介质 |
Also Published As
Publication number | Publication date |
---|---|
JP2024098356A (ja) | 2024-07-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3673634B1 (en) | Collaborative session over a network | |
CN111028818B (zh) | 合唱方法、装置、电子设备和存储介质 | |
CN110910860B (zh) | 线上ktv实现方法、装置、电子设备及存储介质 | |
US11611793B2 (en) | Expiring synchronized supplemental content in time-shifted media | |
US20190262707A1 (en) | Method and system of creating a network to facilitate a multiplayer game | |
JP6281503B2 (ja) | 通信システム、配信装置及びプログラム | |
US20200014949A1 (en) | Synchronizing session content to external content | |
CN109040819A (zh) | 播放进度同步方法、装置、设备以及存储介质 | |
CN109040851B (zh) | 基于直播进行游戏的延迟处理方法、系统、服务器及计算机可读存储介质 | |
JP7469525B1 (ja) | 時刻調整システム、端末装置、およびサーバ装置 | |
JP4785088B2 (ja) | 端末間における同期制御方法 | |
CN116962747A (zh) | 基于网络直播的实时合唱同步方法、装置及网络直播系统 | |
US20230046493A1 (en) | Information processing system and information processing method | |
JP4422656B2 (ja) | ネットワークを用いた遠隔多地点合奏システム | |
US10263717B1 (en) | Method of synchronizing pause process and system of synchronizing pause process | |
JP6733990B2 (ja) | 解説音声再生装置、解説音声生成装置及び解説音声再生プログラム | |
KR102221501B1 (ko) | 사용자 모바일 단말기를 이용한 오프라인 재생 음원 전달 시스템 및 방법 | |
JP4543586B2 (ja) | 音声再生装置及び音声再生方法 | |
CN114500572B (zh) | 多设备的同步方法及装置、电子设备、存储介质 | |
CN110650353A (zh) | 多人连麦混画方法及装置、存储介质及电子设备 | |
WO2022269788A1 (ja) | 伝送システム、送信システム、受信システム及び伝送方法 | |
JP2014016828A (ja) | アプリケーション管理装置、アプリケーション管理システム、アプリケーション管理方法、およびアプリケーション管理プログラム | |
WO2024057398A1 (ja) | 提示映像調整装置、提示映像調整方法及び提示映像調整プログラム | |
CN111918705B (zh) | 将会话内容同步到外部内容 | |
CN117676184A (zh) | 直播合唱音频的同步方法、计算机设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230303 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240130 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240314 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240402 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240404 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7469525 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |