JP2020507221A - Hmdを用いたビデオ会議の改良された方法およびシステム - Google Patents
Hmdを用いたビデオ会議の改良された方法およびシステム Download PDFInfo
- Publication number
- JP2020507221A JP2020507221A JP2019514013A JP2019514013A JP2020507221A JP 2020507221 A JP2020507221 A JP 2020507221A JP 2019514013 A JP2019514013 A JP 2019514013A JP 2019514013 A JP2019514013 A JP 2019514013A JP 2020507221 A JP2020507221 A JP 2020507221A
- Authority
- JP
- Japan
- Prior art keywords
- data
- person
- image data
- processed
- video data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/15—Conference systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
- H04N7/142—Constructional details of the terminal equipment, e.g. arrangements of the camera and the display
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
- H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- User Interface Of Digital Computer (AREA)
- Controls And Circuits For Display Device (AREA)
- Telephonic Communication Services (AREA)
Abstract
Description
100B 第2ユーザ端末
100C さらなるユーザ端末
101 第1の人/第1ユーザ
101B ユーザ頭部(第1ユーザ)の側面(横顔)
102 第1HMD
102A HMD装置(例示的場合のVRグラス)の前面
102B HMD装置(例示的場合のVRグラス)の側面
103X 第1ユーザでのビデオ会議用の第1カメラユニット(例示的な場合では外部に配置されているが、他の任意の選択肢が可能である)
103Y 第2ユーザでのビデオ会議用のカメラ(例示的な場合では外部に配置されているが、他の任意の選択肢が可能である)
103Z 第3ユーザでのビデオ会議用のカメラ(例示的な場合では外部に配置されているが、他の任意の選択肢が可能である)
104 両方のユーザがビデオオーディオ情報を送信する
105 ビデオ会議用の任意の転送媒体
106 例示的な場合では、転送媒体はインターネットである
A 画面表示を使用するビデオ会議の第2ユーザ
109 画面
110 HMDを装着する第1ユーザの転送されたビデオ
111 第2ユーザ
112 さらなるユーザのHMD
112A VRグラスの右画面
112B VRグラスの左画面
113A グラスの右画面を変更することなく第1ユーザの転送されたビデオ
113B グラスの左画面を変更することなく第1ユーザの転送されたビデオ
114 さらなるユーザ
115 さらなるヘッドマウントディスプレイ
201 顔のモーションキャプチャのための第1ユーザの記録された頭部データ(ベクトル、ラスター、画像および/またはビデオのいずれか任意の方法で)
309 リアルタイムビデオを記録データと組み合わせる(重ね合わせ−スーパーインポーズ)ためにコンピュータシステム(図示せず)に転送される
202 HMDを使用している場合でも、第1ユーザの顔全面を転送される
203A VRグラスの右表示用HMDを使用している場合でも第1ユーザの顔全面を転送される
203B VRグラスの左表示用HMDを使用している場合でも第1ユーザの顔全面を転送される
301 ユーザの頭部データは、学習サイクルで撮影されるか、またはビデオなどで記録されるかのいずれかである
302 360°または同様の広角データを回転し、取得する
303 HMDのサイズを検出し、適切に切り取られる
304 適切な切り取り
305 切り取られたデータ
307 適切なHMDサイズを取得することによって切り取りから転送されたデータ
308 切り取られたデータ転送
310 記録装置(単純なカメラ、もしくは走査型レーザを支持する没入型または光深度カメラなどのより複雑な装置)
401 切り取られた没入型データが転送される
402 重ね合わせが行われる
501 独立型VRグラスまたは専用画面付きVRグラス
502 片目を覆うARグラスまたは複合現実グラスの種類
503 両目を覆うARグラスまたは複合現実グラスの種類
601 モーションキャプチャとサイズ検出のためのマーカーレス検出または電子的検出6602 ドットマーカー
603 QRマーカー
701 あらゆる種類のアイトラッカー(最も可能なのはnear eye PCCRトラッカー)
702 顔の動き検出器(静電容量式または光学式のいずれか)
801 ドットマーカー
901 開始
902 発明(開示されたシステム)が有効になっているか
902N/Y いいえ/はい
903 何もしない
904 HMDが検出されたか?
905 何もしない
906 リアルタイムビデオと記録されたデータとの重ね合わせ
907 記録されたデータ
908 終了
1001 リアルタイムビデオ
1002 画像/ビデオ処理(最も好ましくは、第1ユーザ側で行われるが、クラウド、ビデオ会議サーバまたは遠隔ユーザでの計算のような他の任意の選択肢が可能である)
1003 合成された重ね合わせ画像の出力
1004 記録されたデータ
1200 仮想環境、例示的な場合には仮想会議室、また仮想空間および/またはロールプレイングゲームなども可能である
1201 例示的な場合では、HMD、VRグラスを有する第1ユーザ
1201A 仮想環境で見られた第1ユーザ
1202 例示的な場合では、HMD、VRグラスを有する第2ユーザ
1202A 仮想環境で見られた第2ユーザ
1203 例示的な場合では、HMD、VRグラスを有する第Nユーザ
1203A 仮想環境で見られた第Nユーザ
Claims (15)
- ビデオ会議セッション中にビデオデータを修正する方法であって、
少なくとも、
少なくとも視覚入力を取り込むための第1カメラユニット(103X)および第1ヘッドマウントディスプレイ(102)を含む第1端末(100A)を提供するステップと、
少なくとも視覚入力を出力するための第2端末(100B)を提供するステップと、
サーバ手段(105)を提供するステップと、
前記第1カメラユニット(103X)を用いて、第1の人(101)の頭部の第1基本画像データまたは第1基本ビデオデータを提供し、または取り込むステップと、
前記第1の人(101)が前記ヘッドマウントディスプレイ(102)を装着している間に、前記第1カメラユニットを用いて、前記第1の人(101)の前記頭部の第1処理画像データまたは第1処理ビデオデータを取り込むステップと、
前記第1ヘッドマウントディスプレイ(102)の外観を表す前記第1の処理画像データまたは第1の処理ビデオデータの第1処理データセクションを判定するステップと、
前記第1処理画像データまたは第1処理ビデオデータの前記第1処理データセクションを第1基本データセクションで置き換えることによって、第1の組の修正画像データまたは修正ビデオデータを生成するステップと、を含み、
前記第1端末(100A)および前記第2端末(100B)は、データ交換のために前記サーバ手段(105)を介して接続され、
前記第1基本データセクションは、前記第1基本画像データまたは第1の基本ビデオデータの一部であり、前記人の前記顔の一部、特に、前記第1の人(101)の目を表している方法。 - 前記第2端末(100B)は、第2カメラユニット(103Y)および第2ヘッドマウントディスプレイを含むことを特徴とし、
前記第2カメラユニット(103Y)を用いて、第2の人(111)の頭部の第2基本画像データまたは第2基本ビデオデータを提供し、または取り込むステップと、
前記第2の人(111)が前記第2ヘッドマウントディスプレイを装着している間に、前記第2カメラユニット(103Y)を用いて、前記第2の人(111)の前記頭部の第2処理画像データまたは第2処理ビデオデータを取り込むステップと、
前記第2ヘッドマウントディスプレイの外観を表す前記第2処理画像データまたは第2処理ビデオデータの第2処理データセクションを判定するステップと、
前記第2処理画像データまたは第2処理ビデオデータの前記第2処理データセクションを第2基本データセクションで置き換えることによって、第2の組の修正画像データまたは修正ビデオデータを形成するステップと、
前記第1端末(100A)を介して前記第2修正画像データまたは第2修正ビデオデータを出力するステップと、によって特徴づけられ、
前記第2の基本データセクションは、前記第2基本画像データまたは第2の基本ビデオデータの一部であり、前記第2の人(111)の前記顔の一部、特に、前記第2の人(111)の目を表している請求項1に記載の方法。 - 前記第1修正画像データまたは第1修正ビデオデータおよび/または前記第2修正画像データまたは第2修正ビデオデータは、前記サーバ手段(105)に接続された少なくとも1つのさらなる端末(100C)を介して出力されることを特徴とする請求項1または請求項2に記載の方法。
- さらなる端末(100C)は、さらなるカメラユニット(103Z)およびさらなるヘッドマウントディスプレイを含むことを特徴とし、
前記さらなるカメラユニット(103Z)を用いて、さらなる人(114)の頭部のさらなる基本画像データまたはさらなる基本ビデオデータを提供し、または取り込むステップと、
前記さらなる人(114)が前記さらなるヘッドマウントディスプレイを装着している間に、前記さらなるカメラユニット(103Z)を用いて、前記さらなる人(114)の前記頭部の第2処理画像データまたは第2処理ビデオデータを取り込むステップと、
前記さらなるヘッドマウントディスプレイ(112)の外観を表す前記さらなる処理画像データまたはさらなる処理ビデオデータのさらなる処理データセクションを判定するステップと、
前記さらなる処理画像データまたはさらなる処理ビデオデータの前記さらなる処理データセクションをさらなる基本データセクションで置き換えることによって、さらなる組の修正画像データまたは修正ビデオデータを形成するステップと、
前記第1端末(100A)および/または前記第2端末(100B)を介して、特に、同時に、前記さらなる修正画像データまたはさらなる修正ビデオデータを出力するステップと、によって特徴づけられ、
前記第さらなる基本データセクションは、前記さらなる基本画像データまたはさらなる基本ビデオデータの一部であり、前記さらなる人(114)の前記顔の一部、特に、前記さらなる人(114)の目を表している請求項1乃至請求項3のいずれか一に記載の方法。 - 第1、第2および/またはさらなる基本ビデオデータもしくは第1、第2および/またはさらなる基本画像データは、それぞれの端末(100A、100B、100C)のメモリおよび/または前記サーバ手段(105)に記憶され、
第1、第2および/またはさらなる基本ビデオデータもしくは第1、第2および/またはさらなる基本画像データが一度取り込まれ、第1、第2および/またはさらなる修正ビデオデータもしくは第1、第2および/またはさらなる修正画像データが必要とされる場合に処理されることを特徴とし、または、
前記第1、第2および/または第3の人(101、111、114)がビデオ会議に参加するたびに、第1、第2および/またはさらなる基本ビデオデータもしくは第1、第2および/またはさらなる基本画像データが取り込まれ、第1、第2および/またはさらなる修正ビデオデータもしくは第1、第2および/またはさらなる修正画像データが必要とされる場合に、前記第1、第2および/またはさらなる基本ビデオデータもしくは第1、第2および/またはさらなる基本画像データが更新され、または置換され、および処理されることを特徴とする請求項1乃至請求項4のいずれか一に記載の方法。 - 少なくとも1つの端末(100A)と好ましくは大多数の端末(100a、100B)またはすべての端末(100A、100B、100C)は、音声データを取り込み、および/または出力するための手段を含み、1つの端末によって取り込まれた前記取り込まれた音声データは、1つまたは複数のさらなる端末に少なくとも転送されることを特徴とする請求項1乃至請求項5のいずれか一に記載の方法。
- 第1の人(101)の顔に対する前記第1ヘッドマウント(102)ディスプレイの前記位置は、物体認識を用いて判定され、
前記第1ヘッドマウントディスプレイ(102)の前記形状は、物体認識によって判定され、および/または識別データは視覚的または電子的に提供されることを特徴とする請求項1乃至請求項6のいずれか一に記載の方法。 - 前記第1の人(101)の前記顔の皮膚部分の動きを表す顔の動きデータが生成され、前記皮膚部分の前記動きが前記第1カメラユニット(103X)によって取り込まれることを特徴とする請求項1乃至請求項7のいずれか一に記載の方法。
- 前記第1の人(101)の少なくとも1つの眼の動きを表す眼球運動データが生成され、前記目の動きは、視線追跡手段(702)によって取り込まれることを特徴とする請求項1乃至請求項8のいずれか一に記載の方法。
- 第1基本データセクションは、
前記第1の人(101)の前記顔の前記取り込まれた顔の動きデータ、および/または、
前記第1の人(101)の少なくとも1つの目の前記取り込まれた眼球運動データ、に応じて修正されることを特徴とする請求項8または請求項9に記載の方法。 - 前記第1の人(101)の前記目の形状を表す眼球データは、前記第1基本データセクションの一部として識別され、
前記眼球データは、前記取り込まれた眼球運動データに応じて修正されることを特徴とし、および/または、
前記第1の人(101)の前記顔の前記皮膚部分を表す皮膚データは、前記第1基本データセクション内の目の上および/下に修正され、
前記皮膚データは、前記取り込まれた顔の動きデータに応じることを特徴とする請求項10に記載の方法。 - 視線追跡手段(702)は、好ましくはnear eye PCCRトラッカーであり、
前記視線追跡手段(702)は前記第1ヘッドマウントディスプレイ(102)の上または内部に配置されることを特徴とする請求項10または請求項11に記載の方法。 - 前記第1の人(101)の前記頭部の前記姿勢に関する情報を受信し、
前記物体の前記姿勢に従って、前記頭部の仮想モデルおよび前記頭部の顔の視線を方向づけ、
ビデオ会議通信の一部からの可視ピクセルを仮想モデルに投影し、
空間の所望の点で顔の視線を作り出す前記頭部の合成された目を生成し、
前記作り出された顔の凝視に従って、前記仮想モデルを方向づけ、
前記仮想モデルを前記ビデオ会議通信の対応する部分に投影し、
修正画像データまたは修正ビデオデータの少なくとも一部は、前記仮想モデルによって置き換えられることを特徴とする請求項1乃至請求項12のいずれか一に記載の方法。 - 請求項1乃至請求項13のいずれか一に記載の方法を実行するためのコンピュータプログラム製品。
- 少なくとも、
少なくとも視覚入力を取り込むための第1カメラユニット(103X)および第1ヘッドマウントディスプレイ(102)を含む第1端末(100A)と、
少なくとも視覚入力を出力するための第2端末(100B)と、
サーバ手段(105)と、を含み、
前記第1端末(100A)および前記第2端末(100B)は、データ交換のために前記サーバ手段(105)を介して接続され、
前記第1カメラユニット(103X)を用いて、第1の人(101)の頭部の第1基本画像データまたは第1基本ビデオデータが提供され、または取り込まれ、
前記第1の人(101)が前記ヘッドマウントディスプレイ(102)を装着している間に、前記第1カメラユニット(103X)を用いて、前記第1の人(101)の前記頭部の第1処理画像データまたは第1処理ビデオデータが取り込まれ、
前記第1ヘッドマウントディスプレイの外観を表す前記第1処理画像データまたは第1処理ビデオデータの第1処理データセクションが判定され、
前記第1処理画像データまたは第1処理ビデオデータの前記第1処理データセクションを第1基本データセクションで置き換えることによって、第1の組の修正画像データまたは修正ビデオデータが形成され、
前記第1基本データセクションは、前記第1基本画像データまたは第1基本ビデオデータの一部であり、前記人(101)の前記顔の一部、特に、前記人(101)の目を表しており、
特に前記人(101)の顔全体を表す前記第1修正画像データまたは第1修正ビデオデータは、前記第2端末(100B)を介して出力されるビデオ会議セッションのためのシステム。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/EP2017/052449 WO2018141408A1 (en) | 2017-02-03 | 2017-02-03 | IMPROVED METHOD AND SYSTEM FOR VIDEO CONFERENCES WITH HMDs |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2020507221A true JP2020507221A (ja) | 2020-03-05 |
Family
ID=58018071
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019514013A Withdrawn JP2020507221A (ja) | 2017-02-03 | 2017-02-03 | Hmdを用いたビデオ会議の改良された方法およびシステム |
Country Status (7)
Country | Link |
---|---|
US (1) | US20210281802A1 (ja) |
EP (1) | EP3358835B1 (ja) |
JP (1) | JP2020507221A (ja) |
KR (1) | KR102574874B1 (ja) |
CN (1) | CN109952759B (ja) |
TR (1) | TR201702966A2 (ja) |
WO (1) | WO2018141408A1 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023037812A1 (ja) * | 2021-09-10 | 2023-03-16 | 株式会社Nttドコモ | オンライン対話支援システム |
JP7524337B2 (ja) | 2020-03-06 | 2024-07-29 | テレフオンアクチーボラゲット エルエム エリクソン(パブル) | 調節/修正されたビデオを伴うビデオ会議を提供する方法および関係するビデオ会議ノード |
Families Citing this family (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109803109B (zh) * | 2018-12-17 | 2020-07-31 | 中国科学院深圳先进技术研究院 | 一种可穿戴增强现实远程视频系统及视频通话方法 |
US11475634B2 (en) | 2020-07-02 | 2022-10-18 | Meta Platforms Technologies, Llc | Generating an extended-reality lobby window for communication between networking system users |
CN112115823A (zh) * | 2020-09-07 | 2020-12-22 | 江苏瑞科科技有限公司 | 一种基于情感化身的混合现实协同系统 |
US12023106B2 (en) | 2020-10-12 | 2024-07-02 | Johnson & Johnson Surgical Vision, Inc. | Virtual reality 3D eye-inspection by combining images from position-tracked optical visualization modalities |
US12045957B2 (en) * | 2020-10-21 | 2024-07-23 | Johnson & Johnson Surgical Vision, Inc. | Visualizing an organ using multiple imaging modalities combined and displayed in virtual reality |
CN112492231B (zh) * | 2020-11-02 | 2023-03-21 | 重庆创通联智物联网有限公司 | 远程交互方法、装置、电子设备和计算机可读存储介质 |
CN112887702A (zh) * | 2021-01-11 | 2021-06-01 | 杭州灵伴科技有限公司 | 一种近眼显示设备的摄像头数据的传输方法及近眼显示设备 |
CN114979454B (zh) * | 2021-02-24 | 2024-02-20 | 广州视创显示科技有限公司 | 一种一体机显示图像调整方法、装置、设备及存储介质 |
US11831814B2 (en) * | 2021-09-03 | 2023-11-28 | Meta Platforms Technologies, Llc | Parallel video call and artificial reality spaces |
US12081601B2 (en) | 2021-09-21 | 2024-09-03 | NCA Holding BV | Data realization for virtual collaboration environment |
US11722329B2 (en) * | 2021-10-06 | 2023-08-08 | Fotonation Limited | Gaze repositioning during a video conference |
US11644895B1 (en) * | 2021-10-08 | 2023-05-09 | Synaptics Incorporated | Attention cues for head-mounted display (HMD) |
US11921970B1 (en) | 2021-10-11 | 2024-03-05 | Meta Platforms Technologies, Llc | Coordinating virtual interactions with a mini-map |
US11622083B1 (en) * | 2021-11-29 | 2023-04-04 | Motorola Mobility Llc | Methods, systems, and devices for presenting obscured subject compensation content in a videoconference |
US20230196712A1 (en) * | 2021-12-21 | 2023-06-22 | Snap Inc. | Real-time motion and appearance transfer |
US20230252745A1 (en) * | 2022-02-09 | 2023-08-10 | Google Llc | Validation of modeling and simulation of virtual try-on of wearable device |
US11935201B2 (en) * | 2022-04-28 | 2024-03-19 | Dell Products Lp | Method and apparatus for using physical devices in extended reality environments |
WO2024086801A2 (en) * | 2022-10-21 | 2024-04-25 | Canon U.S.A., Inc. | System and method for head mount display removal processing |
DE102023103948A1 (de) | 2023-02-17 | 2024-08-22 | Bayerische Motoren Werke Aktiengesellschaft | VERFAHREN UND VORRICHTUNG ZUR BEARBEITUNG VON BILDERN EiNES BENUTZERS |
US11972526B1 (en) | 2023-03-31 | 2024-04-30 | Apple Inc. | Rendering of enrolled user's face for external display |
CN116634177B (zh) * | 2023-06-16 | 2024-02-20 | 北京行者无疆科技有限公司 | 一种基于hdmi通信设备的视频通信解码处理方法 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1196366A (ja) * | 1997-09-19 | 1999-04-09 | Nippon Telegr & Teleph Corp <Ntt> | ヘッドマウントディスプレイを装着した人物の顔画像合成方法およびその装置 |
JP2000004395A (ja) * | 1998-06-15 | 2000-01-07 | Sony Corp | ビデオカメラの画像処理装置及びヘッドマウントディスプレイ |
JP2000083228A (ja) * | 1998-09-04 | 2000-03-21 | Sony Corp | 双方向通信システム、端末装置および制御方法 |
US20040130614A1 (en) * | 2002-12-30 | 2004-07-08 | Valliath George T. | Method, system and apparatus for telepresence communications |
JP2009512009A (ja) * | 2005-10-10 | 2009-03-19 | トビイ テクノロジー アーベー | 広範囲の動作距離を有するアイトラッカー |
JP2009514090A (ja) * | 2005-10-28 | 2009-04-02 | トビイ テクノロジー アーベー | 視覚的フィードバックを有するアイトラッカー |
JP2011217098A (ja) * | 2010-03-31 | 2011-10-27 | Ns Solutions Corp | 情報処理システム、会議管理装置、情報処理方法、会議管理装置の制御方法及びプログラム |
WO2016021252A1 (ja) * | 2014-08-05 | 2016-02-11 | ソニー株式会社 | 情報処理装置及び情報処理方法、並びに画像表示システム |
JP2016086321A (ja) * | 2014-10-27 | 2016-05-19 | 治幸 岩田 | 自己撮影機能付スマートグラス |
JP2016536700A (ja) * | 2013-09-04 | 2016-11-24 | エシロール アンテルナシオナル (コンパニー ジェネラル ドプティック) | 拡張現実感のための方法とシステム |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6806898B1 (en) | 2000-03-20 | 2004-10-19 | Microsoft Corp. | System and method for automatically adjusting gaze and head orientation for video conferencing |
US20080252637A1 (en) | 2007-04-14 | 2008-10-16 | Philipp Christian Berndt | Virtual reality-based teleconferencing |
WO2010022882A2 (en) | 2008-08-25 | 2010-03-04 | Universität Zürich Prorektorat Mnw | Adjustable virtual reality system |
US8436789B2 (en) * | 2009-01-16 | 2013-05-07 | Microsoft Corporation | Surface puck |
EP3429195A1 (en) * | 2012-02-27 | 2019-01-16 | Perceptiko AG | Method and system for image processing in video conferencing for gaze correction |
KR102004265B1 (ko) * | 2012-12-28 | 2019-07-26 | 엘지전자 주식회사 | 헤드 마운트 디스플레이 및 이를 이용한 영상 통화 방법 |
US9524588B2 (en) * | 2014-01-24 | 2016-12-20 | Avaya Inc. | Enhanced communication between remote participants using augmented and virtual reality |
CN104539868B (zh) * | 2014-11-24 | 2018-06-01 | 联想(北京)有限公司 | 一种信息处理方法及电子设备 |
GB2534580B (en) * | 2015-01-28 | 2020-06-17 | Sony Interactive Entertainment Europe Ltd | Image processing |
US9910275B2 (en) * | 2015-05-18 | 2018-03-06 | Samsung Electronics Co., Ltd. | Image processing for head mounted display devices |
-
2017
- 2017-02-03 US US16/334,432 patent/US20210281802A1/en not_active Abandoned
- 2017-02-03 KR KR1020197008799A patent/KR102574874B1/ko active IP Right Grant
- 2017-02-03 CN CN201780068245.XA patent/CN109952759B/zh active Active
- 2017-02-03 JP JP2019514013A patent/JP2020507221A/ja not_active Withdrawn
- 2017-02-03 WO PCT/EP2017/052449 patent/WO2018141408A1/en active Application Filing
- 2017-02-27 TR TR2017/02966A patent/TR201702966A2/tr unknown
- 2017-12-27 EP EP17210684.1A patent/EP3358835B1/en active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1196366A (ja) * | 1997-09-19 | 1999-04-09 | Nippon Telegr & Teleph Corp <Ntt> | ヘッドマウントディスプレイを装着した人物の顔画像合成方法およびその装置 |
JP2000004395A (ja) * | 1998-06-15 | 2000-01-07 | Sony Corp | ビデオカメラの画像処理装置及びヘッドマウントディスプレイ |
JP2000083228A (ja) * | 1998-09-04 | 2000-03-21 | Sony Corp | 双方向通信システム、端末装置および制御方法 |
US20040130614A1 (en) * | 2002-12-30 | 2004-07-08 | Valliath George T. | Method, system and apparatus for telepresence communications |
JP2009512009A (ja) * | 2005-10-10 | 2009-03-19 | トビイ テクノロジー アーベー | 広範囲の動作距離を有するアイトラッカー |
JP2009514090A (ja) * | 2005-10-28 | 2009-04-02 | トビイ テクノロジー アーベー | 視覚的フィードバックを有するアイトラッカー |
JP2011217098A (ja) * | 2010-03-31 | 2011-10-27 | Ns Solutions Corp | 情報処理システム、会議管理装置、情報処理方法、会議管理装置の制御方法及びプログラム |
JP2016536700A (ja) * | 2013-09-04 | 2016-11-24 | エシロール アンテルナシオナル (コンパニー ジェネラル ドプティック) | 拡張現実感のための方法とシステム |
WO2016021252A1 (ja) * | 2014-08-05 | 2016-02-11 | ソニー株式会社 | 情報処理装置及び情報処理方法、並びに画像表示システム |
JP2016086321A (ja) * | 2014-10-27 | 2016-05-19 | 治幸 岩田 | 自己撮影機能付スマートグラス |
Non-Patent Citations (3)
Title |
---|
MASAYUKI TAKEMURA(外1名): "Diminishing Head-Mounted Display for Shared Mixed Reality", PROCEEDINGS INTERNATIONAL SYMPOSIUM ON MIXED AND AUGMENTED REALITY, JPN6020050101, 1 October 2002 (2002-10-01), US, ISSN: 0004417308 * |
中村裕一(外3名): "複合コミュニティ空間のための人物動作理解と人物映像加工", 電子情報通信学会2000年情報・システムソサイエティ大会, JPN6020050103, 7 September 2000 (2000-09-07), JP, pages 331 - 332, ISSN: 0004417309 * |
竹村雅幸(外1名): "協調型複合現実空間のためのアイコンタクトの復元〜視線認知実験と顔映像の高精細化〜", FIT2004 第3回情報科学技術フォーラム 情報科学技術レターズ,, JPN6020050102, 20 August 2004 (2004-08-20), JP, ISSN: 0004417310 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7524337B2 (ja) | 2020-03-06 | 2024-07-29 | テレフオンアクチーボラゲット エルエム エリクソン(パブル) | 調節/修正されたビデオを伴うビデオ会議を提供する方法および関係するビデオ会議ノード |
WO2023037812A1 (ja) * | 2021-09-10 | 2023-03-16 | 株式会社Nttドコモ | オンライン対話支援システム |
Also Published As
Publication number | Publication date |
---|---|
EP3358835B1 (en) | 2020-11-18 |
EP3358835A1 (en) | 2018-08-08 |
KR102574874B1 (ko) | 2023-09-05 |
CN109952759A (zh) | 2019-06-28 |
KR20190112712A (ko) | 2019-10-07 |
US20210281802A1 (en) | 2021-09-09 |
WO2018141408A1 (en) | 2018-08-09 |
CN109952759B (zh) | 2021-06-15 |
TR201702966A2 (tr) | 2018-08-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3358835B1 (en) | Improved method and system for video conferences with hmds | |
US20200142480A1 (en) | Immersive displays | |
US10527846B2 (en) | Image processing for head mounted display devices | |
US11765318B2 (en) | Placement of virtual content in environments with a plurality of physical participants | |
US9959676B2 (en) | Presentation of enhanced communication between remote participants using augmented and virtual reality | |
US8928659B2 (en) | Telepresence systems with viewer perspective adjustment | |
CN107924584A (zh) | 增强现实 | |
CN113282163A (zh) | 具可调整影像感测模块的头戴式装置及其系统 | |
JP2023095862A (ja) | プログラム及び情報処理方法 | |
CN114625468B (zh) | 增强现实画面的展示方法、装置、计算机设备及存储介质 | |
US20230260235A1 (en) | Information processing apparatus, information processing method, and information processing system | |
JP7525598B2 (ja) | 通信端末装置、通信方法、およびソフトウェアプログラム | |
JP6999538B2 (ja) | 情報処理方法、情報処理プログラム、情報処理システム、および情報処理装置 | |
US20240273835A1 (en) | Communication devices, adapting entity and methods for augmented/mixed reality communication | |
WO2023075810A1 (en) | System and method for extracting, transplanting live images for streaming blended, hyper-realistic reality |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191018 |
|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7426 Effective date: 20190614 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20201124 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210105 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20210401 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20210604 |
|
A761 | Written withdrawal of application |
Free format text: JAPANESE INTERMEDIATE CODE: A761 Effective date: 20210706 |