JP6570290B2 - 映像表示システム及び映像表示方法 - Google Patents
映像表示システム及び映像表示方法 Download PDFInfo
- Publication number
- JP6570290B2 JP6570290B2 JP2015071761A JP2015071761A JP6570290B2 JP 6570290 B2 JP6570290 B2 JP 6570290B2 JP 2015071761 A JP2015071761 A JP 2015071761A JP 2015071761 A JP2015071761 A JP 2015071761A JP 6570290 B2 JP6570290 B2 JP 6570290B2
- Authority
- JP
- Japan
- Prior art keywords
- video
- display screen
- display
- space
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/15—Conference systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
- H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Closed-Circuit Television Systems (AREA)
- Controls And Circuits For Display Device (AREA)
Description
上記の構成では、コンピュータが受信部及び映像表示部としての機能を担っている。つまり、コンピュータが受信部及び映像表示部として一連のデータ処理を実行することで、上記の視覚的効果が得られるようになる。すなわち、上記の構成では、ユーザの位置、顔の向き、視線若しくは顔の位置の変化に連動して表示映像を切り替えるにあたり、メカ構成を必要とせず、データ処理のみによって実現する。この結果、より一層簡易な構成にて上述の視覚的効果を得ることが可能となる。
上記の構成では、撮像装置により撮像された映像が、比較的画角の広い映像となる。このように画角が広い映像を元の映像として取得しておけば、ユーザの位置、顔の向き、視線若しくは顔の位置が変化した際に、その変化に応じて部分映像を容易に切り替えることが可能となる。
上記の構成では、表示画面形成部の前に居るユーザを撮像することでユーザの顔の位置を検出し、その後、検出したユーザの顔の位置を示す座標値を算出する。そして、表示画面に部分映像を表示する際には、算出した座標値と対応した部分映像を表示する。さらに、ユーザの顔の位置が変化して座標値が変化したときには、変化後の座標値に応じた部分映像を表示画面に表示する。この結果、ユーザの顔の位置の変化に連動して、表示画面に表示される部分映像が適切に切り替わるようになる。
上記の構成では、ユーザの顔の現在位置について座標値を算出したとき、その算出結果が基準値となるときには、基準部分映像を表示させる。一方、算出結果が基準値と異なるときには、そのずれ量に応じた分だけ基準部分映像からずれた部分映像を表示させる。これにより、表示画面に表示される部分映像が、ユーザの顔の現在位置に応じて適切に決められるようになる。
上記の構成では、表示画面形成部の前に居るユーザが表示画面形成部から見て第一の向きに移動したとき、移動前に表示されていた部分映像よりも第二の向きにずれた部分映像を表示画面に表示させる。他方、ユーザが第二の向きに移動したとき、移動前に表示されていた部分映像よりも第一の向きにずれた部分映像を表示画面に表示させる。つまり、上記の構成によれば、ユーザが顔の位置を変化させたときに、変化させた方向と対応する映像が表示画面に表示されるようになる。この結果、ユーザは、顔を移動させるだけで、移動前の時点で表示画面を通じて見ていた物(人)の隣に在る物(人)を見られるようになる。すなわち、上記の構成により、いわゆる「覗き込み」の効果を得ることが可能となる。
上記の構成では、第一空間内でユーザの動作、位置、姿勢及び音のうちの少なくとも一つを検知すると、これをトリガーとして映像の表示画面が形成されることになっている。他方、トリガーとなる検知対象の検知がない期間には表示画面が形成されず、その代わりに、第一空間内において建築材料、家具若しくは装飾品の一部分としての外観を現すようになる。これにより、映像を表示させない期間中には表示画面形成部が建築材料等として機能するようになり、第一空間内で目立ち難くなる。一方、上述したように第一空間内で検知対象が検知されると、これをトリガーとして表示画面が形成されるため、表示画面を形成させるのに特段複雑な操作を要さないことになる。
上記の方法によれば、ユーザの位置や視線等の変化に連動して表示画面に表示させる映像(部分映像)を切り替えることで、あたかも第二空間に居るような視覚的効果を、よりシンプルな構成によって得ることが可能となる。
先ず、本実施形態に係る映像表示システム(以下、本システムS)の用途及び構成について図1及び2を参照しながら説明する。図1は、第一空間に居るAさんが表示画面を通じて第二空間の映像を見ている様子を示した図である。図2は、本システムSの構成を示したブロック図である。
次に、図5を参照しながら、第一サーバ10A及び第二サーバ10Bの構成をその機能面から改めて説明する。図5は、第一サーバ10A及び第二サーバ10Bのそれぞれの構成を機能面から示したブロック図である。なお、第一サーバ10A及び第二サーバ10Bの双方は機能面で共通するので、以下では、第一サーバ10Aの構成のみを説明することとする。
次に、本実施形態に係る映像表示方法(以下、本表示方法)について説明する。本表示方法は、上述した第一サーバ10A及び第二サーバ10Bにより実現される。より具体的に説明すると、本表示方法は、第一サーバ10Aと第二サーバ10Bとの間で行われる対話用通信処理において採用されている。言い換えれば、対話用通信処理中で実施される各ステップが、本表示方法を構成する各工程に相当する。
上記の実施形態では、本発明の映像表示システム及び映像表示方法について、一例を挙げて説明した。ただし、上記の実施形態は、本発明の理解を容易にするための一例に過ぎず、本発明を限定するものではない。すなわち、本発明は、その趣旨を逸脱することなく、変更、改良され得ると共に、本発明にはその等価物が含まれることは勿論である。
3 通信回線
10A 第一サーバ
10B 第二サーバ
11 CPU
12 メモリ
13 ハードディスクドライブ
14 通信用インターフェース
15 I/Oポート
21 集音装置
22 撮像カメラ
22a 広角レンズ
23 検出カメラ
24 オーディオ装置
25 ディスプレイ兼用ミラー
26 制御回路
27 発光部
31 取得部
32 送信部
33 受信部
34 映像表示部
35 音声再生部
S 本システム
Sx 変形例に係る映像表示システム
Claims (8)
- 第一空間内に居るユーザが、前記第一空間とは離れた第二空間内の映像を見るために用いられる映像表示システムであって、
前記第二空間内に設置された撮像装置と、
前記第一空間内に設置され、映像の表示画面を形成する表示画面形成部と、
前記撮像装置が撮像した映像を示す映像データを前記撮像装置から受信する受信部と、
該受信部が受信した前記映像データが示す映像のうち、前記表示画面の大きさに応じた表示サイズとなった部分映像を前記表示画面に表示させる映像表示部と、
前記第一空間内に居るユーザの位置、顔の向き、視線及び顔の位置のうち、少なくとも一つを検出するための検出部と、を有し、
前記映像表示部は、前記検出部による検出結果が変化したときに、変化後の該検出結果に応じて前記映像データが示す映像中、どの前記部分映像を前記表示画面に表示させるかを決め、
前記受信部が前記撮像装置から前記映像データを受信して、前記検出部が前記表示画面の前に前記ユーザが居ないと判定した場合、前記映像データを受信したことを、呼び出し音、発光、又は受信通知用の画像を利用して前記ユーザに通知するよう構成されていることを特徴とする映像表示システム。 - 互いに通信可能な第一コンピュータ及び第二コンピュータを有し、
前記第一コンピュータは、前記撮像装置と接続されており、前記撮像装置が撮像した映像を示す前記映像データを送信する送信部として機能し、
前記第二コンピュータは、前記表示画面形成部及び前記検出部と接続されており、前記受信部及び前記映像表示部として機能することを特徴とする請求項1に記載の映像表示システム。 - 前記撮像装置は、魚眼レンズ又は広角レンズを備え、該魚眼レンズ又は広角レンズを通して映像を撮像する固定カメラであることを特徴とする請求項1又は2に記載の映像表示システム。
- 前記検出部は、前記第一空間内に設置された他の撮像装置であり、
該他の撮像装置は、前記表示画面形成部の前に居る前記ユーザを撮像することで前記ユーザの顔の位置を検出し、
前記映像表示部は、前記他の撮像装置が検出した前記ユーザの顔の位置を示す座標値を算出し、前記ユーザの顔の位置が変化して前記座標値が変化したときに、変化後の前記座標値に応じて前記映像データが示す映像中、どの前記部分映像を前記表示画面に表示させるかを決めることを特徴とする請求項1乃至3のいずれか一項に記載の映像表示システム。 - 前記映像表示部は、算出した前記座標値が予め設定された基準値となるときには、前記映像データが示す映像中、前記基準値に対応して設定された基準部分映像を前記表示画面に表示させ、算出した前記座標値が前記基準値と異なるときには、前記映像データが示す映像中、前記座標値と前記基準値とのずれ量に応じた分だけ前記基準部分映像からずれた前記部分映像を前記表示画面に表示させることを特徴とする請求項4に記載の映像表示システム。
- 前記表示画面形成部の前に居る前記ユーザが、互いに反対向きである第一の向き及び第二の向きのうち、前記表示画面形成部から見て前記第一の向きに顔を移動させたとき、前記映像表示部は、移動前に表示されていた前記部分映像よりも前記第二の向きにずれた前記部分映像を前記表示画面に表示させ、
前記表示画面形成部の前に居る前記ユーザが、前記表示画面形成部から見て前記第二の向きに顔を移動させたとき、前記映像表示部は、移動前に表示されていた前記部分映像よりも前記第一の向きにずれた前記部分映像を前記表示画面に表示させることを特徴とする請求項5に記載の映像表示システム。 - 前記表示画面形成部は、前記第一空間内に配置された建築材料、家具若しくは装飾品の一部分を構成するとともに前記表示画面を形成し、
前記第一空間内に設けられ、前記ユーザが行う動作、前記ユーザが居る位置、前記ユーザの姿勢及び前記ユーザが発する音のうちの少なくとも一つを検知対象としたときに、予め設定された検知条件を満たす前記検知対象を検知するセンサと、を有し、
該センサが前記検知条件を満たす前記検知対象を検知していない期間中、前記表示画面形成部は、前記表示画面を形成せずに前記一部分としての外観を現し、
前記センサが前記検知条件を満たす前記検知対象を検知している期間にのみ、前記表示画面形成部は、前記表示画面を形成することを特徴とする請求項1乃至6のいずれか一項に記載の映像表示システム。 - 第一空間内に居るユーザが、コンピュータを用いて、前記第一空間とは離れた第二空間内の映像を見るための映像表示方法であって、
コンピュータが、前記第二空間内に設置された撮像装置が撮像した映像を示す映像データを、前記撮像装置から受信し、コンピュータが、前記第一空間内に設置された表示画面形成部によって形成される表示画面の前に前記ユーザが居ないと判定した場合、前記映像データを受信したことを、呼び出し音、発光又は受信通知用画像を利用して前記ユーザに通知する工程と、
コンピュータが、前記表示画面に、受信した前記映像データが示す映像のうち、前記表示画面の大きさに応じた表示サイズとなった部分映像を表示させる工程と、
前記第一空間内に居るユーザの位置、顔の向き、視線及び顔の位置のうち、少なくとも一つを検出部によって検出する工程と、を有し、
前記部分映像を前記表示画面に表示させる工程の実施中、前記検出部による検出結果が変化したときには、コンピュータが、変化後の該検出結果に応じて前記映像データが示す映像中、どの前記部分映像を前記表示画面に表示させるかを決めることを特徴とする映像表示方法。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015071761A JP6570290B2 (ja) | 2015-03-31 | 2015-03-31 | 映像表示システム及び映像表示方法 |
US15/562,331 US10182206B2 (en) | 2015-03-31 | 2016-03-30 | Image display system and image display method |
PCT/JP2016/060530 WO2016159163A1 (ja) | 2015-03-31 | 2016-03-30 | 映像表示システム及び映像表示方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015071761A JP6570290B2 (ja) | 2015-03-31 | 2015-03-31 | 映像表示システム及び映像表示方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016192685A JP2016192685A (ja) | 2016-11-10 |
JP6570290B2 true JP6570290B2 (ja) | 2019-09-04 |
Family
ID=57006053
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015071761A Active JP6570290B2 (ja) | 2015-03-31 | 2015-03-31 | 映像表示システム及び映像表示方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US10182206B2 (ja) |
JP (1) | JP6570290B2 (ja) |
WO (1) | WO2016159163A1 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021090702A1 (ja) * | 2019-11-07 | 2021-05-14 | ソニー株式会社 | 情報処理装置、情報処理方法、およびプログラム |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002062832A (ja) * | 2000-08-16 | 2002-02-28 | Nippon Signal Co Ltd:The | 床埋め込み表示装置 |
JP4556099B2 (ja) | 2003-08-29 | 2010-10-06 | ソニー株式会社 | 監視システム、制御装置および方法、並びにプログラム |
JP2005286442A (ja) * | 2004-03-29 | 2005-10-13 | Saxa Inc | 監視システムおよび画像通信装置 |
JP2009196593A (ja) * | 2008-02-25 | 2009-09-03 | Denso Corp | 車上荒らし予防装置 |
JP5202448B2 (ja) * | 2009-06-17 | 2013-06-05 | シャープ株式会社 | 画像処理システム及び方法 |
JP2011023886A (ja) * | 2009-07-14 | 2011-02-03 | Panasonic Corp | テレビ会議装置及び映像表示処理方法 |
JP5237234B2 (ja) * | 2009-09-29 | 2013-07-17 | 日本電信電話株式会社 | 映像コミュニケーションシステム、及び映像コミュニケーション方法 |
JP2011113206A (ja) * | 2009-11-25 | 2011-06-09 | Nippon Telegr & Teleph Corp <Ntt> | 映像コミュニケーションシステム、及び映像コミュニケーション方法 |
JP5896445B2 (ja) | 2011-03-10 | 2016-03-30 | 日本電気株式会社 | 表示装置、表示方法及びプログラム |
JP2013073505A (ja) | 2011-09-28 | 2013-04-22 | Casio Comput Co Ltd | 動作制御装置、動作制御方法及びプログラム |
JP6303270B2 (ja) * | 2012-05-18 | 2018-04-04 | 株式会社リコー | ビデオ会議端末装置、ビデオ会議システム、映像の歪み補正方法および映像の歪み補正プログラム |
KR102227661B1 (ko) * | 2014-01-08 | 2021-03-15 | 삼성전자주식회사 | 화면 미러링 방법 및 그에 따른 장치 |
US9939167B2 (en) * | 2014-10-22 | 2018-04-10 | Honeywell International Inc. | HVAC controller |
-
2015
- 2015-03-31 JP JP2015071761A patent/JP6570290B2/ja active Active
-
2016
- 2016-03-30 WO PCT/JP2016/060530 patent/WO2016159163A1/ja active Application Filing
- 2016-03-30 US US15/562,331 patent/US10182206B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US20180205912A1 (en) | 2018-07-19 |
JP2016192685A (ja) | 2016-11-10 |
US10182206B2 (en) | 2019-01-15 |
WO2016159163A1 (ja) | 2016-10-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102312124B1 (ko) | 향상된 오디오를 갖는 디바이스 | |
JP2020156109A (ja) | 情報処理装置、情報処理方法、プログラム、および情報処理システム | |
JP6229314B2 (ja) | 情報処理装置、表示制御方法及びプログラム | |
US8887043B1 (en) | Providing user feedback in projection environments | |
JP6496172B2 (ja) | 映像表示システム及び映像表示方法 | |
TWI530157B (zh) | 多視角影像之顯示系統、方法及其非揮發性電腦可讀取紀錄媒體 | |
JP6753405B2 (ja) | 情報処理装置及び情報処理方法 | |
CN110324553B (zh) | 基于视频通信的实景窗系统 | |
WO2018025458A1 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
CN102111541A (zh) | 拍摄控制装置、拍摄控制方法和程序 | |
TWI692976B (zh) | 視頻通信裝置及方法 | |
WO2020017261A1 (ja) | 情報処理装置、情報処理方法及びプログラム | |
JP4414708B2 (ja) | 動画表示用パーソナルコンピュータ、データ表示システム、動画表示方法、動画表示プログラムおよび記録媒体 | |
US9787939B1 (en) | Dynamic viewing perspective of remote scenes | |
CN114302214A (zh) | 一种虚拟现实设备及防抖动录屏方法 | |
TWI439134B (zh) | 三維場景數位影像監控系統及方法 | |
WO2021095573A1 (ja) | 情報処理システム、情報処理方法及びプログラム | |
JP2021136683A (ja) | 全景リアリティシミュレーションシステム及びその使用方法 | |
JP2007501950A (ja) | 3次元像表示装置 | |
WO2009119288A1 (ja) | コミュニケーションシステム及びコミュニケーションプログラム | |
JP6570290B2 (ja) | 映像表示システム及び映像表示方法 | |
JP4960270B2 (ja) | インターホン装置 | |
WO2012008553A1 (ja) | ロボットシステム | |
CN110324556B (zh) | 视频通信装置及方法 | |
WO2019123754A1 (ja) | 情報処理装置、情報処理方法、および記録媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180328 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190305 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190426 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190709 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190806 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6570290 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |