JP6551155B2 - 通信システム、通信装置、通信方法およびプログラム - Google Patents
通信システム、通信装置、通信方法およびプログラム Download PDFInfo
- Publication number
- JP6551155B2 JP6551155B2 JP2015212270A JP2015212270A JP6551155B2 JP 6551155 B2 JP6551155 B2 JP 6551155B2 JP 2015212270 A JP2015212270 A JP 2015212270A JP 2015212270 A JP2015212270 A JP 2015212270A JP 6551155 B2 JP6551155 B2 JP 6551155B2
- Authority
- JP
- Japan
- Prior art keywords
- communication device
- unit
- output
- area
- captured image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000004891 communication Methods 0.000 title claims description 107
- 238000000034 method Methods 0.000 title claims description 21
- 230000005540 biological transmission Effects 0.000 claims description 31
- 238000003384 imaging method Methods 0.000 claims description 11
- 230000006870 function Effects 0.000 description 35
- 238000010586 diagram Methods 0.000 description 17
- 241001422033 Thestylus Species 0.000 description 13
- 238000012937 correction Methods 0.000 description 8
- 230000002452 interceptive effect Effects 0.000 description 6
- 238000003825 pressing Methods 0.000 description 6
- 238000012545 processing Methods 0.000 description 6
- 238000006243 chemical reaction Methods 0.000 description 4
- 238000000605 extraction Methods 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 238000009434 installation Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
- H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
- G06F3/03545—Pens or stylus
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/15—Conference systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Telephonic Communication Services (AREA)
- General Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Health & Medical Sciences (AREA)
- Obtaining Desirable Characteristics In Audible-Bandwidth Transducers (AREA)
- Circuit For Audible Band Transducer (AREA)
Description
2 会議端末
3 ネットワーク
4 サーバ
10 パノラマカメラ
11 表示部
12 マイクアレイ
13 スピーカ
14 CPU
15 記憶装置
16 メモリ
17 LAN I/F部
18 操作部
100 ネットワーク部
101 制御部
102 表示制御部
111 カメラI/Fレシーバ
112 レンズ特性保持部
113 歪曲補正処理部
121 第1の送信制御部
122 取得部
123 特定部
124 切り出し部
125 指向性制御部
126 第2の送信制御部
127 出力制御部
300 プロジェクタ
400 スタイラスペン
Claims (8)
- 第1の通信装置と、前記第1の通信装置との間でデータの送受信を行う第2の通信装置と、を含む通信システムであって、
前記第1の通信装置は、
前記第2の通信装置の周囲を撮像して得られる撮像画像を少なくとも含み、かつ、前記第1の通信装置が出力する映像を示す出力映像のうち、前記撮像画像が表示される領域を示す表示領域を、前記撮像画像に映り込んだ人物の数に応じて複数の単位領域に分ける領域分割部と、
前記出力映像のうちユーザによって指し示された位置に対応する前記単位領域を示す座標情報を、前記第2の通信装置へ送信する制御を行う第1の送信制御部と、
前記撮像画像のうち前記座標情報に対応する領域に応じて指向性が制御された音声を含む出力情報を前記第2の通信装置から受信した場合、その受信した前記出力情報を出力する制御を行う出力制御部と、を備え、
前記第2の通信装置は、
前記撮像画像を取得する取得部と、
前記第1の通信装置から前記座標情報を受信した場合、前記出力映像の座標と前記撮像画像の座標との対応関係を示す対応情報に基づいて、前記取得部により取得された前記撮像画像のうち、その受信した前記座標情報に対応する領域を特定する特定部と、
前記第2の通信装置に搭載された複数のマイクのうち、前記特定部により特定された領域に対応するマイクに指向性を向けるよう、前記複数のマイクを含むマイクアレイの指向性を制御する指向性制御部と、
前記指向性制御部により指向性が制御された音声を少なくとも含む前記出力情報を前記第1の通信装置へ送信する制御を行う第2の送信制御部と、を備える、
通信システム。 - 前記第2の通信装置は、
前記取得部により取得された前記撮像画像のうち、前記特定部により特定された領域の画像を切り出し画像として切り出す切り出し部をさらに備え、
前記第2の送信制御部は、前記切り出し部によって切り出された前記切り出し画像と、前記指向性制御部により指向性が制御された音声とを含む前記出力情報を前記第1の通信装置へ送信する制御を行う、
請求項1に記載の通信システム。 - 前記領域分割部は、前記表示領域に映り込んだ人物を指し示すための前記ユーザの操作の数に応じて前記表示領域を等間隔に分けることで、複数の前記単位領域を得る、
請求項1または2に記載の通信システム。 - 前記領域分割部は、
前記出力映像の4つの頂点と、前記ユーザの操作によって指し示された前記表示領域内の複数の位置と相対的な位置関係に基づいて、前記表示領域を、前記ユーザの操作によって指し示された前記表示領域内の複数の位置と1対1に対応する複数の前記単位領域に分ける、
請求項1または2に記載の通信システム。 - 通信装置であって、
前記通信装置と通信する他の通信装置の周囲を撮像して得られる撮像画像を少なくとも含み、かつ、前記通信装置が出力する映像を示す出力映像のうち、前記撮像画像が表示される領域を示す表示領域を、前記撮像画像に映り込んだ人物の数に応じて複数の単位領域に分ける領域分割部と、
前記出力映像のうちユーザによって指し示された位置に対応する前記単位領域を示す座標情報を、前記他の通信装置へ送信する制御を行う送信制御部と、
前記撮像画像のうち前記座標情報に対応する領域に応じて指向性が制御された音声を含む出力情報を前記他の通信装置から受信した場合、その受信した前記出力情報を出力する制御を行う出力制御部と、を備える、
通信装置。 - 第1の通信装置と、前記第1の通信装置との間でデータの送受信を行う第2の通信装置と、を含む通信システムによる通信方法であって、
前記第1の通信装置は、
前記第2の通信装置の周囲を撮像して得られる撮像画像を少なくとも含み、かつ、前記第1の通信装置が出力する映像を示す出力映像のうち、前記撮像画像が表示される領域を示す表示領域を、前記撮像画像に映り込んだ人物の数に応じて複数の単位領域に分ける領域分割ステップと、
前記出力映像のうちユーザによって指し示された位置に対応する前記単位領域を示す座標情報を、前記第2の通信装置へ送信する制御を行う第1の送信制御ステップと、
前記撮像画像のうち前記座標情報に対応する領域に応じて指向性が制御された音声を含む出力情報を前記第2の通信装置から受信した場合、その受信した前記出力情報を出力する制御を行う出力制御ステップと、を含み、
前記第2の通信装置は、
前記撮像画像を取得する取得ステップと、
前記第1の通信装置から前記座標情報を受信した場合、前記出力映像の座標と前記撮像画像の座標との対応関係を示す対応情報に基づいて、前記取得ステップにより取得された前記撮像画像のうち、その受信した前記座標情報に対応する領域を特定する特定ステップと、
前記第2の通信装置に搭載された複数のマイクのうち、前記特定ステップにより特定された領域に対応するマイクに指向性を向けるよう、前記複数のマイクを含むマイクアレイの指向性を制御する指向性制御ステップと、
前記指向性制御ステップにより指向性が制御された音声を少なくとも含む前記出力情報を前記第1の通信装置へ送信する制御を行う第2の送信制御ステップと、を含む、
通信方法。 - 通信装置による通信方法であって、
前記通信装置と通信する他の通信装置の周囲を撮像して得られる撮像画像を少なくとも含み、かつ、前記通信装置が出力する映像を示す出力映像のうち、前記撮像画像が表示される領域を示す表示領域を、前記撮像画像に映り込んだ人物の数に応じて複数の単位領域に分ける領域分割ステップと、
前記出力映像のうちユーザによって指し示された位置に対応する前記単位領域を示す座標情報を、前記他の通信装置へ送信する制御を行う送信制御ステップと、
前記撮像画像のうち前記座標情報に対応する領域に応じて指向性が制御された音声を含む出力情報を前記他の通信装置から受信した場合、その受信した前記出力情報を出力する制御を行う出力制御ステップと、を含む、
通信方法。 - 通信装置に搭載されたコンピュータに、
前記通信装置と通信する他の通信装置の周囲を撮像して得られる撮像画像を少なくとも含み、かつ、前記通信装置が出力する映像を示す出力映像のうち、前記撮像画像が表示される領域を示す表示領域を、前記撮像画像に映り込んだ人物の数に応じて複数の単位領域に分ける領域分割ステップと、
前記出力映像のうちユーザによって指し示された位置に対応する前記単位領域を示す座標情報を、前記他の通信装置へ送信する制御を行う送信制御ステップと、
前記撮像画像のうち前記座標情報に対応する領域に応じて指向性が制御された音声を含む出力情報を前記他の通信装置から受信した場合、その受信した前記出力情報を出力する制御を行う出力制御ステップと、を実行させるためのプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015212270A JP6551155B2 (ja) | 2015-10-28 | 2015-10-28 | 通信システム、通信装置、通信方法およびプログラム |
US15/297,334 US9648278B1 (en) | 2015-10-28 | 2016-10-19 | Communication system, communication apparatus and communication method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015212270A JP6551155B2 (ja) | 2015-10-28 | 2015-10-28 | 通信システム、通信装置、通信方法およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017085372A JP2017085372A (ja) | 2017-05-18 |
JP6551155B2 true JP6551155B2 (ja) | 2019-07-31 |
Family
ID=58638416
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015212270A Expired - Fee Related JP6551155B2 (ja) | 2015-10-28 | 2015-10-28 | 通信システム、通信装置、通信方法およびプログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US9648278B1 (ja) |
JP (1) | JP6551155B2 (ja) |
Families Citing this family (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018010439A (ja) | 2016-07-13 | 2018-01-18 | 株式会社リコー | 座標検出装置 |
JP2019062448A (ja) * | 2017-09-27 | 2019-04-18 | カシオ計算機株式会社 | 画像処理装置、画像処理方法及びプログラム |
JP7164831B2 (ja) * | 2018-03-30 | 2022-11-02 | 株式会社リコー | 通信管理システム、通信システム、通信方法、及びプログラム |
US10524048B2 (en) | 2018-04-13 | 2019-12-31 | Bose Corporation | Intelligent beam steering in microphone array |
JP7075995B2 (ja) * | 2018-06-07 | 2022-05-26 | マクセル株式会社 | 携帯情報端末 |
JP7371369B2 (ja) * | 2018-07-31 | 2023-10-31 | 株式会社リコー | 通信端末および画像通信システム |
JP7225735B2 (ja) * | 2018-11-27 | 2023-02-21 | 株式会社リコー | ビデオ会議システム、通信端末、及び通信端末のマイクロホンの制御方法 |
CN112422933A (zh) * | 2019-08-21 | 2021-02-26 | 台达电子工业股份有限公司 | 投影装置、投影系统以及运行方法 |
EP3893085A1 (en) | 2020-04-07 | 2021-10-13 | Ricoh Company, Ltd. | Power supply device, power supply system, power supply control method, and carrier means |
US11625218B2 (en) | 2020-04-07 | 2023-04-11 | Ricoh Company, Ltd. | Sound output device, sound output system, and output sound control method with appropriately controllable volume, and recording medium |
US11949997B2 (en) | 2021-03-15 | 2024-04-02 | Amazon Technologies, Inc. | Electronic device with shutter assembly |
US11368651B1 (en) * | 2021-03-15 | 2022-06-21 | Amazon Technologies, Inc. | Audiovisual device |
CN115359789A (zh) * | 2022-08-02 | 2022-11-18 | 科大讯飞股份有限公司 | 语音交互方法及相关装置、设备和存储介质 |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0955925A (ja) * | 1995-08-11 | 1997-02-25 | Nippon Telegr & Teleph Corp <Ntt> | 画像システム |
JP4048511B2 (ja) * | 1998-03-13 | 2008-02-20 | 富士通株式会社 | 魚眼レンズカメラ装置及びその画像歪み補正方法 |
JP2000105671A (ja) | 1998-05-11 | 2000-04-11 | Ricoh Co Ltd | 座標入力/検出装置および電子黒板システム |
JP4439763B2 (ja) * | 2001-07-04 | 2010-03-24 | 株式会社リコー | 画像録画再生システムおよび画像録画再生方法 |
JP2007274463A (ja) | 2006-03-31 | 2007-10-18 | Yamaha Corp | 遠隔会議装置 |
JP5028944B2 (ja) | 2006-10-17 | 2012-09-19 | ヤマハ株式会社 | 音声会議装置及び音声会議システム |
US8289363B2 (en) * | 2006-12-28 | 2012-10-16 | Mark Buckler | Video conferencing |
US8395653B2 (en) * | 2010-05-18 | 2013-03-12 | Polycom, Inc. | Videoconferencing endpoint having multiple voice-tracking cameras |
JP5589644B2 (ja) * | 2010-07-27 | 2014-09-17 | 日本精機株式会社 | 周辺画像表示装置及びその表示方法 |
US8537195B2 (en) * | 2011-02-09 | 2013-09-17 | Polycom, Inc. | Automatic video layouts for multi-stream multi-site telepresence conferencing system |
JP5776313B2 (ja) | 2011-04-28 | 2015-09-09 | 株式会社リコー | 会議装置 |
JP6303270B2 (ja) | 2012-05-18 | 2018-04-04 | 株式会社リコー | ビデオ会議端末装置、ビデオ会議システム、映像の歪み補正方法および映像の歪み補正プログラム |
JP2014143678A (ja) * | 2012-12-27 | 2014-08-07 | Panasonic Corp | 音声処理システム及び音声処理方法 |
US9369672B2 (en) * | 2013-03-14 | 2016-06-14 | Polycom, Inc. | Intelligent layouts for call scaling and layout persistence |
JP5958833B2 (ja) | 2013-06-24 | 2016-08-02 | パナソニックIpマネジメント株式会社 | 指向性制御システム |
JP6201519B2 (ja) | 2013-08-21 | 2017-09-27 | 株式会社リコー | 座標検知装置、及び座標検知方法、及び電子情報ボードシステム |
US9602771B2 (en) * | 2014-12-10 | 2017-03-21 | Polycom, Inc. | Automated layouts optimized for multi-screen and multi-camera videoconferencing calls |
US9641585B2 (en) * | 2015-06-08 | 2017-05-02 | Cisco Technology, Inc. | Automated video editing based on activity in video conference |
-
2015
- 2015-10-28 JP JP2015212270A patent/JP6551155B2/ja not_active Expired - Fee Related
-
2016
- 2016-10-19 US US15/297,334 patent/US9648278B1/en active Active
Also Published As
Publication number | Publication date |
---|---|
US20170127017A1 (en) | 2017-05-04 |
US9648278B1 (en) | 2017-05-09 |
JP2017085372A (ja) | 2017-05-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6551155B2 (ja) | 通信システム、通信装置、通信方法およびプログラム | |
JP6547496B2 (ja) | 通信装置、通信方法、プログラムおよび通信システム | |
JP6582874B2 (ja) | 通信システム、通信装置、通信方法およびプログラム | |
US10440322B2 (en) | Automated configuration of behavior of a telepresence system based on spatial detection of telepresence components | |
JP6171263B2 (ja) | 遠隔会議システム及び遠隔会議端末 | |
US9912907B2 (en) | Dynamic video and sound adjustment in a video conference | |
US11736801B2 (en) | Merging webcam signals from multiple cameras | |
CN108293104B (zh) | 信息处理系统、无线终端和信息处理方法 | |
JP2017059902A (ja) | 情報処理装置、プログラム、画像処理システム | |
JP6241802B1 (ja) | 映像配信システム、ユーザ端末装置および映像配信方法 | |
US9131109B2 (en) | Information processing device, display control system, and computer program product | |
JP6590152B2 (ja) | 情報処理装置、会議システムおよび情報処理装置の制御方法 | |
JP6500366B2 (ja) | 管理装置、端末装置、伝送システム、伝送方法およびプログラム | |
JP6781318B2 (ja) | 情報処理システム及び無線端末 | |
JP2009027246A (ja) | テレビ会議装置 | |
JP2017168903A (ja) | 情報処理装置、会議システムおよび情報処理装置の制御方法 | |
JP6565777B2 (ja) | 通信装置、会議システム、プログラムおよび表示制御方法 | |
JP2010028299A (ja) | 会議撮影画像処理方法及び会議装置等 | |
JP2017092950A (ja) | 情報処理装置、会議システム、情報処理方法およびプログラム | |
US10805557B2 (en) | Image processing device, image processing method and storage medium correcting distortion in wide angle imaging | |
KR20170020391A (ko) | 사용자의 능동적 이용이 가능한 방송 제공방법 및 이를 이용한 단말기, 컴퓨터 판독 가능한 기록매체 | |
JP2011228998A (ja) | 遠隔会議装置、遠隔会議方法、および遠隔会議プログラム | |
JP2017108287A (ja) | 通信装置、制御方法及び制御プログラム | |
JP2021036678A (ja) | 情報処理システム及び無線端末 | |
JP2020191514A (ja) | 情報処理装置および情報処理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180910 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190220 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190305 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190425 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190604 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190617 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6551155 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
LAPS | Cancellation because of no payment of annual fees |