JP2022107608A - 通信端末、通信システム、送信方法、及びプログラム - Google Patents
通信端末、通信システム、送信方法、及びプログラム Download PDFInfo
- Publication number
- JP2022107608A JP2022107608A JP2022075769A JP2022075769A JP2022107608A JP 2022107608 A JP2022107608 A JP 2022107608A JP 2022075769 A JP2022075769 A JP 2022075769A JP 2022075769 A JP2022075769 A JP 2022075769A JP 2022107608 A JP2022107608 A JP 2022107608A
- Authority
- JP
- Japan
- Prior art keywords
- image
- data
- superimposed
- communication
- electronic blackboard
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000004891 communication Methods 0.000 title claims abstract description 247
- 230000005540 biological transmission Effects 0.000 title claims abstract description 90
- 238000000034 method Methods 0.000 title claims description 44
- 230000008569 process Effects 0.000 claims description 38
- 239000002131 composite material Substances 0.000 claims description 6
- 238000009877 rendering Methods 0.000 claims description 6
- 230000009467 reduction Effects 0.000 abstract description 2
- 238000010586 diagram Methods 0.000 description 43
- 238000007726 management method Methods 0.000 description 41
- 230000006870 function Effects 0.000 description 31
- 238000013500 data storage Methods 0.000 description 21
- 230000015654 memory Effects 0.000 description 17
- 238000003384 imaging method Methods 0.000 description 11
- 230000004044 response Effects 0.000 description 7
- 230000000694 effects Effects 0.000 description 4
- 230000005236 sound signal Effects 0.000 description 4
- 230000008859 change Effects 0.000 description 3
- 230000010365 information processing Effects 0.000 description 3
- 230000000295 complement effect Effects 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 230000005674 electromagnetic induction Effects 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 229910044991 metal oxide Inorganic materials 0.000 description 2
- 150000004706 metal oxides Chemical class 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000003213 activating effect Effects 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 230000006866 deterioration Effects 0.000 description 1
- 230000002542 deteriorative effect Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 239000000047 product Substances 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/20—Drawing from basic elements, e.g. lines or circles
- G06T11/203—Drawing of straight lines or curves
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/60—Editing figures and text; Combining figures or text
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/40—Support for services or applications
- H04L65/403—Arrangements for multi-party communication, e.g. for conferences
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2340/00—Aspects of display data processing
- G09G2340/12—Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels
Abstract
Description
まず、図1を用いて、通信システム1について説明する。図1は、一実施形態に係る通信システムの全体構成図である。
図2を用いて、一実施形態に係る電子黒板のハードウェア構成を説明する。なお、図2は、一実施形態に係る電子黒板のハードウェア構成図である。
図3を用いて、一実施形態に係る管理システムのハードウェア構成を説明する。なお、図3は、一実施形態に係る管理システムのハードウェア構成図である。
図4は、一実施形態に係るテレビ会議端末としての伝送端末8のハードウェア構成図である。伝送端末8は、CPU801、ROM802、RAM803、フラッシュメモリ804、SSD805、メディアI/F807、電源スイッチ809、バスライン810、ネットワークI/F811、カメラ812、撮像素子I/F813、マイク814、スピーカ815、音入出力I/F816、ディスプレイI/F817、外部機器接続I/F818、キーボード821、及びマウス822を備えている。これらのうち、CPU801は、伝送端末8全体の動作を制御する。ROM(Read Only Memory)802は、IPL(Initial Program Loader)等のCPU801の駆動に用いられるプログラムを記憶する。RAM(Random Access Memory)803は、CPU801のワークエリアとして使用される。フラッシュメモリ804は、通信用プログラム、表示データ、及び音データ等の各種データを記憶する。SSD(Solid State Drive)805は、CPU801の制御にしたがってフラッシュメモリ804に対する各種データの読み出し又は書き込みを制御する。なお、SSDに代えてHDDを用いてもよい。メディアI/F807は、フラッシュメモリ等の記録メディア806に対するデータの読み出し又は書き込み(記憶)を制御する。
図5の(A)は、一実施形態に係る電子黒板のソフトウェア構成図である。図5の(A)に示されているように、OS(Operating System)2020、通信アプリケーションA11、及び通信アプリケーションB11は、RAM203の作業領域2010上で動作する。以後、アプリケーションは、「アプリ」と表す。
次に、一実施形態に係る通信システムの機能構成について説明する。図6は、一実施形態に係る通信システムの一部を構成する電子黒板、伝送端末8、及び管理システム50の機能ブロック図である。
電子黒板2において、通信アプリA11が起動することにより、クライアント部20は動作開始する。クライアント部20は、通信制御部21、及び描画制御部22を有する。
サーバ部90は、通信制御部91を有している。
電子黒板2、又は伝送端末8において通信アプリB11が起動することによりクライアント部80は動作開始する。クライアント部80は、通信制御部81、表示制御部82、及び入力受付部83を有している。
電子黒板2cは、更に表示順制御部24を有する。表示順制御部24は、電子黒板2cにおいてOS2020が起動することにより、動作開始する。
管理システム50は、図3に示されているハードウェア構成およびプログラムによって、図6に示されている各機能構成を実現する。また、管理システム50は、HD504より構築される記憶部5000を有している。
続いて、一実施形態に係る処理について説明する。
図8を用いて、電子黒板2a,2b,2c間の通信アプリA11による通信を確立する処理について説明する。図8は、電子黒板間の通信を確立する処理の一例を示すシーケンス図である。ユーザが電子黒板2aの電源スイッチ226をオンにすると、通信アプリA11が起動することで電子黒板2aのクライアント部20の処理が開始する(ステップS1)。そして、ディスプレイ3a上の操作により会議主催の要求が受け付けられると、クライアント部20の通信制御部21から同じ電子黒板2aのサーバ部90における通信制御部91に、サーバ部90の処理を開始させる指示を出力する。これにより、電子黒板2aでは、クライアント部20だけでなくサーバ部90も各種処理を開始する(ステップS2)。
図9を用いて、電子黒板2c、及び伝送端末8間の通信アプリB11による通信を確立する処理について説明する。図9は、電子黒板、及び伝送端末間の通信を確立する処理の一例を示すシーケンス図である。
続いて、図10の(A)を用いて、ストロークデータに基づいて画像を生成する処理について説明する。図10の(A)は、通信アプリA11により画像を生成する処理の一例を示すフロー図である。以下、電子黒板2cの通信アプリA11が画像を生成する処理について説明する。
続いて、図10の(B)を用いて、電子黒板2c、及び伝送端末8間で送信される映像データに基づいて画像を生成する処理について説明する。図10の(B)は、通信アプリB11により画像を生成する処理の一例を示すフロー図である。以下、電子黒板2cの通信アプリB11が画像を生成する処理について説明する。
続いて、第2の実施形態について、上記の実施形態と異なる点について説明する。
続いて、第3の実施形態について、上記の実施形態と異なる点について説明する。
続いて、第4の実施形態について、上記の実施形態と異なる点について説明する。
続いて、第5の実施形態について、上記の第4の実施形態と異なる点について説明する。
上記実施形態の送信方法によると、電子黒板2c(通信端末の一例)のストローク処理部22Aは、描画の操作を受け付ける。電子黒板2cの表示順制御部24(表示制御手段の一例)は、ストローク処理部22Aによって受け付けられる操作により描画される画像、及び描画の操作に係るUI画像が背景の画像に重畳された第1の重畳画像をディスプレイ3c(表示装置の一例)の画面に表示させる(表示制御処理の一例)。電子黒板2cの通信制御部81(送信手段の一例)は、重畳される画像からUI画像が除かれた、描画される画像が背景の画像に重畳された第2の重畳画像を示す表示データ(画像データの一例)を、画面の画像データとして伝送端末8(他の通信端末の一例)へ送信する(送信処理の一例)。これにより、描画された画像の表示機能を有する電子黒板2cが、伝送端末8へ画面を送信するときに、伝送端末8で、操作できないUI画像が出力されて、視認性が低下することを防ぐことができる。また、電子黒板2cは、描画される画像が背景画像に重畳された画像を伝送端末8へ送信することで、伝送端末8側で設定されている背景色と描画される画像の色が同じであっても、伝送端末8のユーザは、描画される画像を読み取ることができる。
スマートフォン等の通信端末は、通信ネットワーク9aに接続して、自端末に保存されている背景画像のファイルを、WebAPI(Web Application Programming Interface)等を利用して電子黒板2のいずれかに転送しても良い。電子黒板2は、転送されたファイルを受信して、画面の背景画像として表示する。通信端末に保存されるファイルは、MFP(Multifunction Peripheral)等の画像形成装置のスキャン機能により生成され、画像形成装置から通信端末へ転送されたファイルであってもよい。この場合、画像形成装置は、通信ネットワーク9aに接続して、スキャンにより生成したファイルを、画像形成装置のメール送信機能により通信端末に直接送信してもよい。また、画像形成装置は、スキャンにより生成されたファイルを、画像形成装置の遠隔フォルダ保存機能により、通信ネットワーク9aに接続しているファイルサーバーに転送し、ファイルサーバーにファイルを蓄積させてもよい。この場合は、通信端末は、ファイルサーバーに蓄積されたファイルを取得することにより所望のファイルを通信端末に保存することができる。
2 電子黒板
3 ディスプレイ
4 電子ペン
5 USBメモリ
6 ノートPC
7 通話端末
8 伝送端末
9a,9b 通信ネットワーク
20 クライアント部
21 通信制御部
22 描画制御部
22A ストローク処理部
22Y 重畳部
22Z ページ処理部
23 入力受付部
24 表示順制御部
25 コード処理部
220 ページデータ記憶部
30 中継装置
50 管理システム
60 データサーバ
61 通信制御部
69 記憶・読出部
71 通信制御部
72 撮像部
73 解析部
79 記憶・読出部
80 クライアント部
81 通信制御部
82 表示制御部
83 入力受付部
90 サーバ部
91 通信制御部
2000 記憶部
6000 記憶部
7000 記憶部
8000 記憶部
Claims (10)
- 描画される画像、及び前記描画の操作に係るユーザインタフェースの画像が背景の画像に重畳された第1の重畳画像を表示装置の画面に表示させる表示制御手段と、
重畳される画像から前記ユーザインタフェースの画像が除かれた、前記描画される画像が前記背景の画像に重畳された第2の重畳画像の画像データを、前記画面の画像データとして他の通信端末へ送信する送信手段と、
を有する通信端末。 - レンダリングにより、前記背景の画像、及び前記描画される画像の合成画像を生成する生成手段を有し、
前記送信手段は、前記生成手段によって生成された前記合成画像を前記画像データとして前記他の通信端末へ送信する
請求項1に記載の通信端末。 - 前記表示制御手段は、前記生成手段によって生成される前記合成画像に、前記背景の画像、前記描画される画像、及び前記ユーザインタフェースの画像が順に重畳された前記第1の重畳画像を前記表示装置の画面に表示させる請求項2に記載の通信端末。
- 第1の背景の画像を管理する管理手段と、
第2の背景の画像を入力するための入力手段と、を有し、
前記生成手段は、前記入力手段において前記第2の背景の画像が入力されていない場合には、前記第1の背景の画像、及び前記描画される画像の合成画像を生成し、前記入力手段において前記第2の背景の画像が入力されている場合には、前記第2の背景の画像、及び前記描画される画像の合成画像を生成する請求項2又は3に記載の通信端末。 - 前記他の通信端末との通信を管理する管理システムの利用が当該通信端末において設定されていない場合に、前記生成手段は、前記合成画像を生成しない請求項2乃至4のいずれか一項に記載の通信端末。
- 請求項1乃至5のいずれか一項に記載の通信端末と、
前記他の通信端末と、
を有する通信システム。 - 請求項5に記載の通信端末と、
前記他の通信端末と、
前記管理システムと、
を有する通信システム。 - 通信端末に、
描画される画像、及び前記描画の操作に係るユーザインタフェースの画像が背景の画像に重畳された第1の重畳画像を表示装置の画面に表示させる表示制御処理と、
重畳される画像から前記ユーザインタフェースの画像が除かれた、前記描画される画像が前記背景の画像に重畳された第2の重畳画像の画像データを、前記画面の画像データとして他の通信端末へ送信する送信処理と、
を実行させる送信方法。 - 通信端末に、
描画される画像、及び前記描画の操作に係るユーザインタフェースの画像が背景の画像に重畳された第1の重畳画像を表示装置の画面に表示させる表示制御処理と、
重畳される画像から前記ユーザインタフェースの画像が除かれた、前記描画される画像が前記背景の画像に重畳された第2の重畳画像の画像データを、前記画面の画像データとして他の通信端末へ送信する送信処理と、
を実行させるプログラム。 - 描画される画像、及び前記描画の操作に係るユーザインタフェースの画像が背景の画像に重畳された第1の重畳画像を表示装置の画面に表示させる表示制御手段を有する通信端末に、
重畳される画像から前記ユーザインタフェースの画像が除かれた、前記描画される画像が前記背景の画像に重畳された第2の重畳画像の画像データを、前記画面の画像データとして他の通信端末へ送信する送信処理
を実行させるプログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016193251 | 2016-09-30 | ||
JP2016193251 | 2016-09-30 | ||
JP2017099616A JP2018060513A (ja) | 2016-09-30 | 2017-05-19 | 通信端末、通信システム、送信方法、及びプログラム |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017099616A Division JP2018060513A (ja) | 2016-09-30 | 2017-05-19 | 通信端末、通信システム、送信方法、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022107608A true JP2022107608A (ja) | 2022-07-22 |
JP7255728B2 JP7255728B2 (ja) | 2023-04-11 |
Family
ID=61758782
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022075769A Active JP7255728B2 (ja) | 2016-09-30 | 2022-05-02 | 通信端末、通信システム、送信方法、及びプログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US20180095711A1 (ja) |
JP (1) | JP7255728B2 (ja) |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6747025B2 (ja) * | 2016-04-13 | 2020-08-26 | セイコーエプソン株式会社 | 表示システム、表示装置、及び、表示システムの制御方法 |
AU2017413152B2 (en) * | 2017-05-12 | 2022-08-11 | Samsung Electronics Co., Ltd. | Electronic apparatus and method for displaying a content screen on the electronic apparatus thereof |
JP6946825B2 (ja) | 2017-07-28 | 2021-10-06 | 株式会社リコー | 通信システム、通信方法、電子機器 |
JP6996367B2 (ja) * | 2018-03-14 | 2022-01-17 | 株式会社リコー | 電子黒板システム、電子黒板、方法、プログラム及び会議システム |
CN110070585A (zh) * | 2019-01-31 | 2019-07-30 | 北京字节跳动网络技术有限公司 | 图像生成方法、装置和计算机可读存储介质 |
US11061641B2 (en) | 2019-02-28 | 2021-07-13 | Ricoh Company, Ltd. | Screen sharing system, and information processing apparatus |
JP7467986B2 (ja) * | 2020-03-02 | 2024-04-16 | 株式会社リコー | 通信端末、通信システム、通信方法およびプログラム |
CN114025217A (zh) * | 2020-07-15 | 2022-02-08 | 华为技术有限公司 | 一种图像显示的方法、设备以及存储介质 |
JP2022049507A (ja) | 2020-09-16 | 2022-03-29 | 株式会社リコー | 通信システム、通信端末、画面共有方法、及びプログラム |
JP2022049600A (ja) * | 2020-09-16 | 2022-03-29 | 株式会社リコー | 情報処理装置、プログラム及び情報処理システム |
US11778137B2 (en) | 2021-07-26 | 2023-10-03 | Ricoh Company, Ltd. | Information processing device, information processing method, and non-transitory recording medium |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015070543A (ja) * | 2013-09-30 | 2015-04-13 | 株式会社リコー | 伝送端末、伝送方法、及びプログラム |
JP2015088943A (ja) * | 2013-10-31 | 2015-05-07 | 株式会社リコー | 伝送端末、伝送方法、及びプログラム |
JP2016143182A (ja) * | 2015-01-30 | 2016-08-08 | 株式会社リコー | 情報処理装置、プログラム |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8225335B2 (en) * | 2005-01-05 | 2012-07-17 | Microsoft Corporation | Processing files from a mobile device |
US20070121146A1 (en) * | 2005-11-28 | 2007-05-31 | Steve Nesbit | Image processing system |
US9928043B2 (en) * | 2014-10-03 | 2018-03-27 | Sap Se | User-driven evolving user interfaces |
US9749860B2 (en) * | 2015-09-11 | 2017-08-29 | Lenovo Enterprise Solutions (Singapore) Pte, Ltd. | Peer-to-peer wireless connection between server computing device and mobile client computing device for authentication and server management |
JP6623876B2 (ja) * | 2016-03-24 | 2019-12-25 | 富士通株式会社 | 描画処理装置、方法、及びプログラム |
-
2017
- 2017-07-31 US US15/663,943 patent/US20180095711A1/en not_active Abandoned
-
2022
- 2022-05-02 JP JP2022075769A patent/JP7255728B2/ja active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015070543A (ja) * | 2013-09-30 | 2015-04-13 | 株式会社リコー | 伝送端末、伝送方法、及びプログラム |
JP2015088943A (ja) * | 2013-10-31 | 2015-05-07 | 株式会社リコー | 伝送端末、伝送方法、及びプログラム |
JP2016143182A (ja) * | 2015-01-30 | 2016-08-08 | 株式会社リコー | 情報処理装置、プログラム |
Also Published As
Publication number | Publication date |
---|---|
JP7255728B2 (ja) | 2023-04-11 |
US20180095711A1 (en) | 2018-04-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7255728B2 (ja) | 通信端末、通信システム、送信方法、及びプログラム | |
US10742932B2 (en) | Communication terminal, communication system, moving-image outputting method, and recording medium storing program | |
US9959084B2 (en) | Communication terminal, communication system, communication control method, and recording medium | |
EP3304323B1 (en) | Communication terminal, communication control method and recording medium for sharing and displaying stroke data | |
US10628117B2 (en) | Communication terminal, communication system, display control method, and recording medium | |
US20150249696A1 (en) | Transmission terminal, transmission system, transmission method, and recording medium storing transmission control program | |
US10511700B2 (en) | Communication terminal with first application displaying status of second application | |
US10297058B2 (en) | Apparatus, system, and method of controlling display of image, and recording medium for changing an order or image layers based on detected user activity | |
JP2015225400A (ja) | 通信システム、転送制御装置、通信方法およびプログラム | |
US20150249695A1 (en) | Transmission terminal, transmission system, transmission method, and recording medium storing transmission control program | |
WO2017138233A1 (ja) | 画像処理装置、画像処理システム及び画像処理方法 | |
JP2018060513A (ja) | 通信端末、通信システム、送信方法、及びプログラム | |
JP6911595B2 (ja) | 通信端末、通信システム、出力方法、及びプログラム | |
US10356361B2 (en) | Communication terminal, communication system, and display method | |
JP6589621B2 (ja) | 表示装置、カメラ位置制御方法、およびプログラム | |
JP6773145B2 (ja) | 電子黒板、通信システム、通信制御方法、及びプログラム | |
JP2019135567A (ja) | 情報処理装置、管理システム、画像共有システム、画像共有方法およびプログラム | |
JP6776905B2 (ja) | 通信端末、通信システム、表示制御方法、及びプログラム | |
JP2017153062A (ja) | 通信端末、通信システム、出力方法、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220527 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221213 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230213 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230228 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230313 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7255728 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |