JP6323505B2 - 情報処理システム、その制御方法、及びプログラム、並びに情報処理装置、その制御方法、及びプログラム - Google Patents
情報処理システム、その制御方法、及びプログラム、並びに情報処理装置、その制御方法、及びプログラム Download PDFInfo
- Publication number
- JP6323505B2 JP6323505B2 JP2016134810A JP2016134810A JP6323505B2 JP 6323505 B2 JP6323505 B2 JP 6323505B2 JP 2016134810 A JP2016134810 A JP 2016134810A JP 2016134810 A JP2016134810 A JP 2016134810A JP 6323505 B2 JP6323505 B2 JP 6323505B2
- Authority
- JP
- Japan
- Prior art keywords
- sound data
- information processing
- user
- virtual space
- users
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Stereophonic System (AREA)
- User Interface Of Digital Computer (AREA)
- Processing Or Creating Images (AREA)
- Information Transfer Between Computers (AREA)
Description
に関する。
102 サーバ装置
103 HMD
104 ヘッドセット
201 オプティカルマーカ
202 赤外線カメラ
301 CPU
302 ROM
303 RAM
304 システムバス
305 入力コントローラ
306 ビデオコントローラ
307 メモリコントローラ
308 通信I/Fコントローラ
309 メディアコントローラ
310 汎用バス
311 入力デバイス
312 外部メモリ
Claims (13)
- それぞれが現実空間上の異なる空間に存在する複数のユーザに共通の仮想空間を表示するための情報処理システムであって、
ユーザが発した音を示す音データを取得可能な音データ取得手段と、
前記複数のユーザの現実空間上の位置に基づいて前記仮想空間におけるそれぞれの位置を取得する位置取得手段と、
前記位置取得手段で取得した仮想空間上のそれぞれの位置を用いて決定される、音データの再生に関するパラメータを用いて、前記音データ取得手段で取得した音データを再生する音データ再生手段と、
前記音データ再生手段で再生される音データの音量に対応する表示アイテムを前記仮想空間上に表示するように制御する表示制御手段と、
を備え、
前記表示制御手段は、前記複数のユーザのうち音を発したユーザと前記現実空間における同一の場所に存在しないと判定された他のユーザに対して、前記表示アイテムを前記仮想空間上に表示させ、前記複数のユーザのうち音を発したユーザと前記現実空間における同一の場所に存在すると判定された他のユーザに対して、前記表示アイテムを前記仮想空間上に表示させないように制御することを特徴とする情報処理システム。 - 前記表示制御手段は、前記音データ再生手段で再生される音データの音量に応じた大きさで前記表示アイテムを表示することを特徴とする請求項1に記載の情報処理システム。
- 前記表示制御手段は、前記位置取得手段が取得した前記仮想空間におけるユーザの位置であって、前記音を発したユーザの位置の近傍に前記表示アイテムを表示することを特徴とする請求項1または2に記載の情報処理システム。
- 前記情報処理システムは、
ユーザが存在する現実空間上の場所を示す属性情報を当該ユーザごとに記憶する記憶手段を更に備え、
前記音データ再生手段は、前記記憶手段に記憶された属性情報を用いて、前記音を発したユーザと前記他のユーザとが同一の場所に存在するか否かを判定することを特徴とする請求項1乃至3のいずれか1項に記載の情報処理システム。 - 前記音データ再生手段は、前記位置取得手段で取得した仮想空間上のそれぞれの位置を用いて決定される音量のパラメータを用いて、前記音データ取得手段で取得した音データを再生することを特徴とする請求項1乃至4のいずれか1項に記載の情報処理システム。
- 前記音データ再生手段は、前記位置取得手段で取得した仮想空間上のそれぞれの位置を用いて決定される、音データを構成するチャンネルごとの音量のパラメータを用いて、前記音データ取得手段で取得した音データを再生することを特徴とする請求項1乃至5のいずれか1項に記載の情報処理システム。
- 前記音データ再生手段は、前記位置取得手段で取得した仮想空間上のそれぞれの位置から特定される距離を用いて決定されるパラメータを用いて、前記音データ取得手段で取得した音データを再生することを特徴とする請求項1乃至6のいずれか1項に記載の情報処理システム。
- 前記位置取得手段は、前記複数のユーザの前記仮想空間におけるそれぞれの向きを更に取得し、
前記音データ再生手段は、前記位置取得手段で取得した仮想空間上のそれぞれの位置及び向きを用いて決定される、音データの再生に関するパラメータを用いて、前記音データ取得手段で取得した音データを再生することを特徴とする請求項1乃至7のいずれか1項に記載の情報処理システム。 - それぞれが現実空間上の異なる空間に存在する複数のユーザに共通の仮想空間を表示するための情報処理システムの制御方法であって、
前記情報処理システムの音データ取得手段が、ユーザが発した音を示す音データを取得する音データ取得ステップと、
前記情報処理システムの位置取得手段が、前記複数のユーザの現実空間上の位置に基づいて前記仮想空間におけるそれぞれの位置を取得する位置取得ステップと、
前記情報処理システムの音データ再生手段が、前記位置取得ステップで取得した仮想空間上のそれぞれの位置を用いて決定される、音データの再生に関するパラメータを用いて、前記音データ取得ステップで取得した音データを再生する音データ再生ステップと、
前記情報処理システムの表示制御手段が、前記音データ再生ステップで再生される音データの音量に対応する表示アイテムを前記仮想空間上に表示するように制御する表示制御ステップと、
を備え、
前記表示制御ステップは、前記複数のユーザのうち音を発したユーザと前記現実空間における同一の場所に存在しないと判定された他のユーザに対して、前記表示アイテムを前記仮想空間上に表示させ、前記複数のユーザのうち音を発したユーザと前記現実空間における同一の場所に存在すると判定された他のユーザに対して、前記表示アイテムを前記仮想空間上に表示させないように制御することを特徴とする情報処理システムの制御方法。 - それぞれが現実空間上の異なる空間に存在する複数のユーザに共通の仮想空間を表示するための情報処理システムの制御方法を実行可能なプログラムであって、
前記情報処理システムを、
ユーザが発した音を示す音データを取得可能な音データ取得手段と、
前記複数のユーザの現実空間上の位置に基づいて前記仮想空間におけるそれぞれの位置を取得する位置取得手段と、
前記位置取得手段で取得した仮想空間上のそれぞれの位置を用いて決定される、音データの再生に関するパラメータを用いて、前記音データ取得手段で取得した音データを再生する音データ再生手段と、
前記音データ再生手段で再生される音データの音量に対応する表示アイテムを前記仮想空間上に表示するように制御する表示制御手段と、
として機能させ、
前記表示制御手段が、前記複数のユーザのうち音を発したユーザと前記現実空間における同一の場所に存在しないと判定された他のユーザに対して、前記表示アイテムを前記仮想空間上に表示させ、前記複数のユーザのうち音を発したユーザと前記現実空間における同一の場所に存在すると判定された他のユーザに対して、前記表示アイテムを前記仮想空間上に表示させないように制御するように機能させることを特徴とするプログラム。 - それぞれが現実空間上の異なる空間に存在する複数のユーザに共通の仮想空間を表示するための情報処理装置であって、
ユーザが発した音を示す音データであって、他の情報処理装置が有する音データを取得可能な音データ取得手段と、
複数のユーザの現実空間上の位置に基づいて前記仮想空間におけるそれぞれの位置を取得する位置取得手段と、
前記位置取得手段で取得した仮想空間上のそれぞれの位置を用いて決定される、音データの再生に関するパラメータを用いて、前記音データ取得手段で取得した音データを再生する音データ再生手段と、
前記音データ再生手段で再生される音データの音量に対応する表示アイテムを前記仮想空間上に表示するように制御する表示制御手段と、
を備え、
前記表示制御手段は、前記複数のユーザのうち音を発したユーザと前記現実空間における同一の場所に存在しないと判定された他のユーザに対して、前記表示アイテムを前記仮想空間上に表示させ、前記複数のユーザのうち音を発したユーザと前記現実空間における同一の場所に存在すると判定された他のユーザに対して、前記表示アイテムを前記仮想空間上に表示させないように制御することを特徴とする情報処理装置。 - それぞれが現実空間上の異なる空間に存在する複数のユーザに共通の仮想空間を表示するための情報処理装置の制御方法であって、
前記情報処理装置の音データ取得手段が、ユーザが発した音を示す音データであって、
他の情報処理装置が有する音データを取得する音データ取得ステップと、
前記情報処理装置の位置取得手段が、前記複数のユーザの現実空間上の位置に基づいて前記仮想空間におけるそれぞれの位置を取得する位置取得ステップと、
前記情報処理装置の音データ再生手段が、前記位置取得ステップで取得した仮想空間上のそれぞれの位置を用いて決定される、音データの再生に関するパラメータを用いて、前記音データ取得ステップで取得した音データを再生する音データ再生ステップと、
前記情報処理装置の表示制御手段が、前記音データ再生ステップで再生される音データの音量に対応する表示アイテムを前記仮想空間上に表示するように制御する表示制御ステップと、
を備え、
前記表示制御ステップは、前記複数のユーザのうち音を発したユーザと前記現実空間における同一の場所に存在しないと判定された他のユーザに対して、前記表示アイテムを前記仮想空間上に表示させ、前記複数のユーザのうち音を発したユーザと前記現実空間における同一の場所に存在すると判定された他のユーザに対して、前記表示アイテムを前記仮想空間上に表示させないように制御することを特徴とする情報処理装置の制御方法。 - それぞれが現実空間上の異なる空間に存在する複数のユーザに共通の仮想空間を表示するための情報処理装置の制御方法を実行可能なプログラムであって、
前記情報処理装置を、
ユーザが発した音を示す音データであって、他の情報処理装置が有する音データを取得可能な音データ取得手段と、
複数のユーザの現実空間上の位置に基づいて前記仮想空間におけるそれぞれの位置を取得する位置取得手段と、
前記位置取得手段で取得した仮想空間上のそれぞれの位置を用いて決定される、音データの再生に関するパラメータを用いて、前記音データ取得手段で取得した音データを再生する音データ再生手段と、
前記音データ再生手段で再生される音データの音量に対応する表示アイテムを前記仮想空間上に表示するように制御する表示制御手段と、
として機能させ、
前記表示制御手段が、前記複数のユーザのうち音を発したユーザと前記現実空間における同一の場所に存在しないと判定された他のユーザに対して、前記表示アイテムを前記仮想空間上に表示させ、前記複数のユーザのうち音を発したユーザと前記現実空間における同一の場所に存在すると判定された他のユーザに対して、前記表示アイテムを前記仮想空間上に表示させないように制御するように機能させることを特徴とするプログラム。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013266203 | 2013-12-25 | ||
JP2013266203 | 2013-12-25 | ||
JP2014174718 | 2014-08-29 | ||
JP2014174718 | 2014-08-29 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014244272A Division JP5971316B2 (ja) | 2013-12-25 | 2014-12-02 | 情報処理システム、その制御方法、及びプログラム、並びに情報処理装置、その制御方法、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016201817A JP2016201817A (ja) | 2016-12-01 |
JP6323505B2 true JP6323505B2 (ja) | 2018-05-16 |
Family
ID=55649375
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014244272A Active JP5971316B2 (ja) | 2013-12-25 | 2014-12-02 | 情報処理システム、その制御方法、及びプログラム、並びに情報処理装置、その制御方法、及びプログラム |
JP2016134810A Active JP6323505B2 (ja) | 2013-12-25 | 2016-07-07 | 情報処理システム、その制御方法、及びプログラム、並びに情報処理装置、その制御方法、及びプログラム |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014244272A Active JP5971316B2 (ja) | 2013-12-25 | 2014-12-02 | 情報処理システム、その制御方法、及びプログラム、並びに情報処理装置、その制御方法、及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (2) | JP5971316B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11151775B2 (en) | 2019-12-06 | 2021-10-19 | Toyota Jidosha Kabushiki Kaisha | Image processing apparatus, display system, computer readable recoring medium, and image processing method |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6739254B2 (ja) * | 2016-07-01 | 2020-08-12 | 株式会社コーエーテクモゲームス | プログラム、情報処理装置、情報処理方法、及びサーバ装置 |
JP6918189B2 (ja) * | 2016-11-18 | 2021-08-11 | 株式会社バンダイナムコエンターテインメント | シミュレーションシステム及びプログラム |
JP6754678B2 (ja) * | 2016-11-18 | 2020-09-16 | 株式会社バンダイナムコエンターテインメント | シミュレーションシステム及びプログラム |
US11054644B2 (en) | 2017-01-25 | 2021-07-06 | Samsung Electronics Co., Ltd | Electronic device and method for controlling electronic device |
WO2018174500A1 (ko) * | 2017-03-20 | 2018-09-27 | 주식회사 라이커스게임 | 현실 음향을 반영한 증강 현실 3차원 음향 구현 시스템 및 프로그램 |
KR101963244B1 (ko) * | 2017-03-20 | 2019-03-28 | ㈜라이커스게임 | 현실 음향을 반영한 증강 현실 3차원 음향 구현 시스템 및 프로그램 |
JP6722786B1 (ja) * | 2019-02-05 | 2020-07-15 | 凸版印刷株式会社 | 空間情報管理装置 |
JP7157271B1 (ja) * | 2022-04-14 | 2022-10-19 | 株式会社Acw-Deep | 多拠点空間共有システム |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5659691A (en) * | 1993-09-23 | 1997-08-19 | Virtual Universe Corporation | Virtual reality network with selective distribution and updating of data to reduce bandwidth requirements |
JP2004274147A (ja) * | 2003-03-05 | 2004-09-30 | Hitachi Communication Technologies Ltd | 音場定位型多地点通話システム |
JP2005032078A (ja) * | 2003-07-08 | 2005-02-03 | Nri & Ncc Co Ltd | 通信プログラム及び通信方法 |
JP4546151B2 (ja) * | 2004-05-26 | 2010-09-15 | 株式会社日立製作所 | 音声コミュニケーション・システム |
JP4426484B2 (ja) * | 2005-03-11 | 2010-03-03 | 株式会社日立製作所 | 音声会議システム、会議端末および音声サーバ |
JP4992591B2 (ja) * | 2007-07-25 | 2012-08-08 | 日本電気株式会社 | 通信システム及び通信端末 |
JP4637889B2 (ja) * | 2007-10-10 | 2011-02-23 | ヤフー株式会社 | 仮想空間放送装置 |
JP5355017B2 (ja) * | 2008-10-01 | 2013-11-27 | 任天堂株式会社 | 情報処理プログラムおよび情報処理装置 |
US8359547B2 (en) * | 2008-10-01 | 2013-01-22 | Nintendo Co., Ltd. | Movable user interface indicator of at least one parameter that is adjustable with different operations for increasing and decreasing the parameter and/or methods of providing the same |
JP2011066467A (ja) * | 2009-09-15 | 2011-03-31 | Brother Industries Ltd | テレビ会議端末装置、テレビ会議端末装置の音声制御方法、音声制御プログラム |
WO2011158493A1 (ja) * | 2010-06-15 | 2011-12-22 | パナソニック株式会社 | 音声通信システム、音声通信方法及び音声通信機器 |
JP5363448B2 (ja) * | 2010-10-28 | 2013-12-11 | 株式会社スクウェア・エニックス | パーティチャットシステム,パーティチャットシステム用プログラム,及び情報記録媒体 |
JP2012216073A (ja) * | 2011-03-31 | 2012-11-08 | Konami Digital Entertainment Co Ltd | 画像処理装置、画像処理装置の制御方法、及びプログラム |
JP2013175929A (ja) * | 2012-02-24 | 2013-09-05 | Nikon Corp | 情報出力装置、及び情報出力方法 |
-
2014
- 2014-12-02 JP JP2014244272A patent/JP5971316B2/ja active Active
-
2016
- 2016-07-07 JP JP2016134810A patent/JP6323505B2/ja active Active
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11151775B2 (en) | 2019-12-06 | 2021-10-19 | Toyota Jidosha Kabushiki Kaisha | Image processing apparatus, display system, computer readable recoring medium, and image processing method |
Also Published As
Publication number | Publication date |
---|---|
JP2016201817A (ja) | 2016-12-01 |
JP5971316B2 (ja) | 2016-08-17 |
JP2016048534A (ja) | 2016-04-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6323505B2 (ja) | 情報処理システム、その制御方法、及びプログラム、並びに情報処理装置、その制御方法、及びプログラム | |
US10970037B2 (en) | System and method for differentially locating and modifying audio sources | |
CN110337318B (zh) | 混合现实装置中的虚拟和真实对象记录 | |
CN111466124B (zh) | 用于渲染用户的视听记录的方法,处理器系统和计算机可读介质 | |
KR102197544B1 (ko) | 공간화 오디오를 가진 혼합 현실 시스템 | |
US11528576B2 (en) | Distributed audio capturing techniques for virtual reality (VR), augmented reality (AR), and mixed reality (MR) systems | |
US10754608B2 (en) | Augmented reality mixing for distributed audio capture | |
US20140328505A1 (en) | Sound field adaptation based upon user tracking | |
TW201248192A (en) | Apparatus, systems and methods for shared viewing experience using head mounted displays | |
CN112272817B (zh) | 用于在沉浸式现实中提供音频内容的方法和装置 | |
KR101963244B1 (ko) | 현실 음향을 반영한 증강 현실 3차원 음향 구현 시스템 및 프로그램 | |
KR101747800B1 (ko) | 입체음향 생성 장치 및 이를 이용한 입체 컨텐츠 생성 시스템 | |
KR102058228B1 (ko) | 입체 음향 컨텐츠 저작 방법 및 이를 위한 어플리케이션 | |
US11792581B2 (en) | Using Bluetooth / wireless hearing aids for personalized HRTF creation | |
US11924317B1 (en) | Method and system for time-aligned media playback | |
CN116684777A (zh) | 音频处理、模型训练方法、装置、设备及存储介质 | |
CN115604408A (zh) | 虚拟场景下的视频录制方法、装置、存储介质及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20161101 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20161101 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170522 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170530 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170612 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20171212 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180202 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180313 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180326 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6323505 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |