JP7373712B2 - 通信端末、通信システム、データ共有方法およびプログラム - Google Patents
通信端末、通信システム、データ共有方法およびプログラム Download PDFInfo
- Publication number
- JP7373712B2 JP7373712B2 JP2019149693A JP2019149693A JP7373712B2 JP 7373712 B2 JP7373712 B2 JP 7373712B2 JP 2019149693 A JP2019149693 A JP 2019149693A JP 2019149693 A JP2019149693 A JP 2019149693A JP 7373712 B2 JP7373712 B2 JP 7373712B2
- Authority
- JP
- Japan
- Prior art keywords
- data
- communication
- information
- screen
- communication terminal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000004891 communication Methods 0.000 title claims description 336
- 238000000034 method Methods 0.000 title claims description 63
- 238000003860 storage Methods 0.000 claims description 96
- 230000004044 response Effects 0.000 claims description 11
- 230000003247 decreasing effect Effects 0.000 claims description 2
- 238000012545 processing Methods 0.000 description 67
- 238000010586 diagram Methods 0.000 description 44
- 230000006870 function Effects 0.000 description 39
- 230000005540 biological transmission Effects 0.000 description 21
- 238000010801 machine learning Methods 0.000 description 4
- 238000002360 preparation method Methods 0.000 description 3
- 238000012546 transfer Methods 0.000 description 3
- 238000012217 deletion Methods 0.000 description 2
- 230000037430 deletion Effects 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000005674 electromagnetic induction Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 238000005304 joining Methods 0.000 description 2
- 238000012015 optical character recognition Methods 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 239000003999 initiator Substances 0.000 description 1
- 230000000977 initiatory effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 230000002787 reinforcement Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0483—Interaction with page-structured environments, e.g. book metaphor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/02—Details
- H04L12/16—Arrangements for providing special services to substations
- H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
- H04L12/1813—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
- H04L12/1822—Conducting the conference, e.g. admission, detection, selection or grouping of participants, correlating users to one or more conference sessions, prioritising transmission
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/15—Conference systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0482—Interaction with lists of selectable items, e.g. menus
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2340/00—Aspects of display data processing
- G09G2340/12—Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2340/00—Aspects of display data processing
- G09G2340/14—Solving problems related to the presentation of information to be displayed
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2370/00—Aspects of data communication
- G09G2370/02—Networking aspects
- G09G2370/022—Centralised management of display operation, e.g. in a server instead of locally
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2370/00—Aspects of data communication
- G09G2370/10—Use of a protocol of communication by packets in interfaces along the display data pipeline
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2370/00—Aspects of data communication
- G09G2370/20—Details of the management of multiple sources of image data
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Information Transfer Between Computers (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Description
●通信ルート
まず、図1を用いて、複数の電子黒板1a,1b間で描画しながらビデオ会議を行なうための通信システムについて説明する。図1は、実施形態に係る通信システムにおける通信ルートの一例を示した概略図である。なお、「ビデオ会議」は、「テレビ会議」、「遠隔会議」等と呼ばれる場合もある。また、「ビデオ会議」「テレビ会議」または「遠隔会議」の会議は、複数の端末の間で画像データおよびストロークデータを共有するセッションの一例である。例えば、画像データおよびストロークデータを共有するセッションは、遠隔授業、遠隔診察、打ち合わせ、単なる会話等を行う、会議以外のセッションであってもよい。また、画像データおよびストロークデータを共有するセッションは、一方向での情報の提示に使用されてもよい。
図2は、実施形態に係る電子黒板の使用イメージについて説明するための図である。電子黒板1は、図2に示されているように、電子黒板1は、下部側に複数のキャスタが設けられた脚部151、脚部151の上部側に設けられた支柱152、支柱152上部側に設けられた電子黒板1の本体153、および本体153の前面に設けられたディスプレイ180によって構成されている。本体153には、後述のCPU101等が内蔵されている。そして、利用者は、電子ペン190を用いて、ディスプレイ180に文字等のストローク画像を入力(描画)することができる。ディスプレイ180は、表示部の一例である。
次に、図3および図4を用いて、通信システムを構成する各装置または端末のハードウエア構成について説明する。なお、図3および図4に示されているハードウエア構成は、必要に応じて構成要素が追加または削除されてもよい。
図3は、実施形態に係る電子黒板のハードウエア構成の一例を示す図である。図3に示されているように、電子黒板1は、CPU(Central Processing Unit)101、ROM(Read Only Memory)102、RAM(Random Access Memory)103、SSD(Solid State Drive)104、ネットワークI/F(Interface)105、および外部機器接続I/F106を備えている。
図4は、実施形態に係る通信管理装置、中継装置および画像保存装置のハードウエア構成の一例を示す図である。通信管理装置5の一例としてのコンピュータは、CPU501、ROM502、RAM503、HD(Hard Disk)504、HDD(Hard Disk Drive)コントローラ505、ディスプレイ506、外部機器接続I/F(Interface)508、ネットワークI/F509、キーボード511、ポインティングデバイス512、DVD-RW(Digital Versatile Disk ReWritable)ドライブ514、メディアI/F516、およびバスライン510を備えている。
続いて、図5を用いて、通信システムの全体構成について説明する。図5は、実施形態に係る通信システムのシステム構成の一例を示す図である。
次に、図6乃至図11を用いて、本実施形態に係る通信システムの機能構成について説明する。図6は、実施形態に係る通信システムの機能構成の一例を示す図である。なお、図6では、図5に示されている各端末、装置およびサーバのうち、後述の処理または動作に関連しているものが示されている。
まず、図6を用いて、電子黒板1a,1b,1cの機能構成について説明する。なお、電子黒板1a1b,1cが有している機能は同様であるため、ここでは、電子黒板1が有している機能として説明する。電子黒板1は、送受信部11、受付部12、画像・音処理部13、表示制御部14、判断部15、画像処理部16、近距離通信部18および記憶・読出処理部19を有している。これら各部は、図3に示されている各構成要素のいずれかが、SSD104からRAM103上に展開されたプログラムに従ったCPU101からの命令によって動作することで実現される機能、または機能する手段である。また、電子黒板1は、図3に示されているRAM103、SSD104またはUSBメモリ130によって構築される記憶部1000を有している。
図7は、実施形態に係る描画画面情報の一例を概略的に説明するための図である。図7は、描画画面管理DB1001に記憶されている電子黒板1に表示される描画画面の状態の一例のイメージを示している。
ここで、図8を用いて、電子黒板1で実行された描画画面に対する操作を示す操作情報について説明する。図8は、実施形態に係る操作情報の一例を概略的に説明するための図である。図8に示されている操作情報には、電子黒板1に表示される描画画面に対して実行された操作の情報が記憶されている。図8に示されている操作情報には、ストロークデータを識別するためのストロークID(Id)、ストロークデータが描画されたページを識別するためのページID(DistId)、描画画面に対して実行された操作の種類を示す操作種別情報(Operation Type)、操作対象となるデータの種別を示すデータ種別情報(Data Type)、操作対象となるデータの内容を示すデータ詳細情報(Date)が含まれている。
続いて、図6を用いて、中継装置3の機能構成について説明する。中継装置3は、転送部を兼ねた送受信部31、判断部35および記憶・読出処理部39を有している。これら各部は、図4に示されている各構成要素のいずれかが、HD304からRAM303上に展開された中継用プログラムに従ったCPU501からの命令によって動作することで実現される機能、または機能する手段である。また、中継装置3は、図4に示されているRAM303、HD304または記録メディア315によって構築される記憶部3000を有している。
続いて、図6を用いて、通信管理装置5の機能構成について説明する。通信管理装置5は、送受信部51、認証部52、判断部53、端末管理部54、セッション管理部55、中継装置管理部56、描画画面情報管理部57および記憶・読出処理部59を有している。これら各部は、図4に示されている各構成要素のいずれかが、HD504からRAM503上に展開された通信管理用プログラムに従ったCPU501からの命令によって動作することで実現される機能または機能する手段である。また、通信管理装置5は、図4に示されているRAM503、HD504または記録メディア515によって構築される記憶部5000を有している。
図9(A)は、実施形態に係る認証管理テーブルの一例を示す概念図である。記憶部5000には、図9(A)に示されているような認証管理テーブルによって構成されている認証管理DB5001が構築されている。この認証管理テーブルでは、通信管理装置5によって管理される全ての電子黒板1の各端末IDに対して、各パスワードが関連づけられて管理される。例えば、図9(A)に示されている認証管理テーブルにおいて、電子黒板1a(通信端末)の端末IDは「01aa」で、パスワードは「aaaa」であることが示されている。なお、パスワードは認証情報の一例であり、認証情報にはアクセストークンも含まれる。
図9(B)は、実施形態に係る端末管理テーブルの一例を示す概念図である。記憶部5000には、図9(B)に示されているような端末管理テーブルによって構成されている端末管理DB5002が構築されている。この端末管理テーブルでは、各電子黒板1(通信端末)を識別するための端末ID毎に、各電子黒板1を宛先とした場合の宛先名、各電子黒板1の稼動状態、後述のログイン要求情報が通信管理装置5で受信された受信日時、および各電子黒板1(通信端末)のIPアドレスが関連づけられて管理される。例えば、図9(B)に示されている端末管理テーブルにおいて、端末IDが「01aa」の電子黒板1aは、端末名が「日本 東京事業所 AA端末」で、稼動状態が「Online(通信可能)」で、通信管理装置5でログイン要求情報が受信された日時が「2019年2月10日の13時40分」で、この端末1aaのIPアドレスが「1.2.1.3」であることが示されている。なお、端末ID、宛先名、および端末のIPアドレスは、各電子黒板1が、通信管理装置5によるサービスの提供を受けるために事前登録する際に記憶される。
図10(A)は、実施形態に係る宛先リスト管理テーブルの一例を示す概念図である。記憶部5000には、図10(A)に示されているような宛先リスト管理テーブルによって構成されている宛先リスト管理DB5003が構築されている。この宛先リスト管理テーブルでは、通信の開始を要求する電子黒板1(開始端末)の端末IDに対して、電子黒板1(宛先端末)の候補として登録されている宛先端末の端末IDが全て関連づけられて管理される。例えば、図10(A)に示されている宛先リスト管理テーブルにおいて、端末IDが「01aa」である開始端末(電子黒板1a)から通信の開始を要求することができる宛先端末の候補は、端末IDが「01ba」の電子黒板1b等であることが示されている。この宛先端末の候補は、任意の開始端末から通信管理装置5に対する追加または削除の要請により、追加または削除されることで更新される。
図10(B)は、実施形態に係るセッション管理テーブルの一例を示す概念図である。記憶部5000には、図10(B)に示されているようなセッション管理テーブルによって構成されているセッション管理DB5004が構築されている。このセッション管理テーブルでは、各電子黒板1(通信端末)と中継装置3との間で相互通信を行なうためのセッションを識別するためのセッションID毎に、使用される中継装置3の中継装置ID、電子黒板1(開始端末)の端末ID、電子黒板1(宛先端末)の端末ID、宛先端末において拠点画像データが受信される際の受信の遅延時間(ms)、およびこの遅延時間が示されている遅延情報を宛先端末から送られて来て通信管理装置5で受信された受信日時が関連づけられて管理される。例えば、図10(B)に示されているセッション管理テーブルにおいて、セッションID「se01」を用いて実行された通信セッションで、中継装置(中継装置ID「111a」)は、端末IDが「01aa」の電子黒板と、端末IDが「01db」の電子黒板との間で、拠点画像データおよび音データを中継しており、電子黒板(宛先端末)において「2019年2月10日の13時41分」時点における拠点画像データの遅延時間が200(ms)であることが示されている。
図10(C)は、実施形態に係る中継装置管理テーブルの一例を示す概念図である。記憶部5000には、図10(C)に示されているような中継装置管理テーブルによって構成されている中継装置管理DB5005が構築されている。この中継装置管理テーブルでは、中継装置3の中継装置ID毎に、各中継装置3の稼動状態、稼動状態が示される状態情報が通信管理装置5で受信された受信日時、中継装置3のIPアドレス、および、中継装置3における最大データ伝送速度(Mbps)が関連づけられて管理される。例えば、図10(C)に示されている中継装置管理テーブルにおいて、中継装置IDが「111a」の中継装置3は、稼動状態が「Online」で、通信管理装置5で状態情報が受信された日時が「2019年2月10日の13時30分」で、この中継装置3のIPアドレスが「1.2.1.2」で、この中継装置3における最大データ伝送速度が100Mbpsであることが示されている。
図11は、実施形態に係る描画画面情報管理テーブルの一例を示す概念図である。記憶部5000には、図11に示されているような描画画面情報管理テーブルによって構成されている描画画面情報管理DB5006が構築されている。この描画画面情報管理テーブルには、各電子黒板1(通信端末)と中継装置3との間で相互通信を行なうためのセッションを識別するためのセッションID毎に、電子黒板1の間で共有される描画画面に関する各種データが記憶されて管理されている。描画画面情報管理テーブルに示されているデータは、各電子黒板1の描画画面管理DB1001に記憶されている描画画面の状態(図7参照)に対応している。
次に、図6を用いて、画像保存装置7の機能構成について説明する。画像保存装置7は、送受信部71、生成部73および記憶・読出処理部79を有している。これら各部は、図4に示されている各構成要素のいずれかが、HD704からRAM703上に展開された画像保存用プログラムに従ったCPU701からの命令によって動作することで実現される機能、または機能する手段である。また、画像保存装置7は、図4に示されているRAM703、HD704または記録メディア715によって構築される記憶部7000を有している。
続いて、図12乃至図20を用いて、本実施形態に係る通信システムにおける処理または動作を説明する。
まず、図12および図13を用いて、ログイン要求端末としての電子黒板1aが行なう通信の準備処理を説明する。図12は、電子黒板間で遠隔通信を開始する準備段階の処理の一例を示すシーケンス図である。図13は、電子黒板に表示される宛先リスト画面の一例を示す図である。なお、電子黒板1bがログイン共有を行う処理も電子黒板1aの処理と同様であるため、説明を省略する。
続いて、図14を用いて、電子黒板1aが電子黒板1bに対して遠隔通信を開始する処理を説明する。図14は、遠隔通信を開始する処理の一例を示すシーケンス図である。
続いて、図15乃至図19を用いて、電子黒板1の間でデータを共有する処理について説明する。図15乃至図18は、実施形態に係る通信システムにおける電子黒板間でデータを共有する処理の一例を示すシーケンス図である。ここでは、電子黒板1a,1bで背景画像データおよびストロークデータを共有する場合であって、電子黒板1aで表示された背景画像および入力されたストローク画像が、電子黒板1bでも表示される場合について説明する。また、図15乃至図18の処理において、図7等に示されているページ4に対応する画面データが共有されるものとする。
続いて、図20乃至図22を用いて、複数の拠点の電子黒板1を用いて行われている遠隔会議(ビデオ会議)中において、他の拠点の電子黒板1が途中参加する場合の例を説明する。図20および図21は、実施形態に係る通信システムにおける途中参加端末に対してデータを共有する処理の一例を示したシーケンス図である。以下の例では、電子黒板1aと電子黒板1bとの間で行われている遠隔会議(ビデオ会議)に、電子黒板1cが途中参加する場合の例を説明する。また、電子黒板1aおよび電子黒板1bは、それぞれ図7に示されている「ページ1」~「ページ4」の画面データによって構成される描画画面情報を共有しているものとして説明する。さらに、電子黒板1aおよび電子黒板1bには、「ページ4」の画面データに対応する描画画面(例えば、図19(D)に示されている描画画面200d)が表示されているものとする。ここで、電子黒板1cは、通信端末の一例であり、電子黒板1aまたは電子黒板1bは、他の通信端末の一例である。
以上説明したように、本発明の一実施形態に係る電子黒板1cは、他の通信端末(例えば、電子黒板1aまたは電子黒板1b)との間においてデータを共有する通信端末である。電子黒板1cは、他の通信端末との間で共有されるデータを管理する通信管理装置5に対して、他の通信端末との遠隔会議への参加を要求する参加要求を送信し、遠隔会議において他の通信端末によって生成された複数の画面データのうち、他の通信端末に表示されている描画画面(表示画面の一例)を構成する画面データを、通信管理装置5から受信する。そして、電子黒板1cは、受信された画面データに係る描画画面を、ディスプレイ180(表示部の一例)に表示させる。これにより、電子黒板1cは、他の通信端末に表示されている描画画面を構成する画面データを優先的にダウンロードすることで、電子黒板1cの利用者に迅速に遠隔会議の話題に参加させることできるとともに、円滑なコミュニケーションに寄与することができる。
上記で説明した実施形態の各機能は、一または複数の処理回路によって実現することが可能である。ここで、本明細書における「処理回路」とは、電子回路により実装されるプロセッサのようにソフトウエアによって各機能を実行するようプログラミングされたプロセッサや、上記で説明した各機能を実行するよう設計されたASIC(Application Specific Integrated Circuit)、DSP(digital signal processor)、FPGA(field programmable gate array)や従来の回路モジュール等のデバイスを含むものとする。
1b 電子黒板(他の通信端末の一例)
1c 電子黒板(通信端末の一例)
3 中継装置
5 通信管理装置
6 サーバシステム
7 画像保存装置
11a,11b 送受信部(通信手段の一例)
11c 送受信部(送信手段の一例、受信手段の一例)
14 表示制御部(表示制御手段の一例)
15 判断部(特定手段の一例)
180 ディスプレイ(表示部の一例)
Claims (12)
- 他の通信端末との間において画像データ及びストロークデータを共有する通信端末であって、
前記他の通信端末との間で共有される前記画像データ及び前記ストロークデータを管理する通信管理装置に対して、前記他の通信端末との遠隔会議への参加を要求する参加要求を送信する送信手段と、
前記遠隔会議において前記他の通信端末によって生成された、前記画像データ及び前記ストロークデータにより構成される複数の画面データのうち、前記他の通信端末に表示されている表示画面を構成する画面データを、前記通信管理装置から受信する受信手段と、
前記受信された前記画面データに係る表示画面を、表示部に表示させる表示制御手段と、
前記参加要求に応じて前記通信管理装置から送信された前記遠隔会議の情報を示す会議情報に基づいて、前記他の通信端末によって生成された複数の画面データのうち、前記他の通信端末に表示されている表示画面を特定するとともに、前記会議情報に含まれる前記表示画面を構成する複数の前記画面データを識別する識別情報に基づいて、共有する画面データの優先度を特定する特定手段と、
を備え、
前記送信手段は、前記優先度に応じて共有される前記表示画面に対応する画面データの取得を要求するデータ取得要求を、前記通信管理装置に対して送信し、
前記受信手段は、前記データ取得要求に応じて前記通信管理装置から送信された前記画面データを受信する、
通信端末。 - 前記特定手段は、前記優先度に応じて優先的に共有するデータとして特定した前記画面データ以外の優先度を、それぞれの画面データが生成された順番、又はデータ量が小さい順番、に特定する請求項1に記載の通信端末。
- 前記特定手段は、前記会議情報に示されている複数の前記画面データを識別するための識別情報に基づいて、前記他の通信端末に現在表示されている表示画面を特定する請求項1又は2に記載の通信端末。
- 前記特定手段は、前記会議情報に示されている前記識別情報に基づいて、前記画面データに対応するデータをダウンロードする優先順位を特定する請求項1乃至3のいずれか一項に記載の通信端末。
- 前記画面データは、前記表示画面を構成するストロークデータを識別するストロークデータ識別情報を含み、
前記受信手段は、受信された前記画面データに含まれているストロークデータ識別情報により識別されるストロークデータを、前記通信管理装置からダウンロードする請求項1乃至4のいずれか一項に記載の通信端末。 - 前記画面データは、前記表示画面を構成する背景画像に係る背景画像データを識別する画像データ識別情報を含み、
前記受信手段は、受信された前記画面データに含まれている画像データ識別情報により識別される背景画像データを、当該背景画像データが記憶された画像保存装置からダウンロードする請求項1乃至5のいずれか一項に記載の通信端末。 - 請求項6に記載の通信端末であって、
前記表示制御手段は、ダウンロードされた前記ストロークデータを用いて生成されるストローク画像、およびダウンロードされた前記背景画像データに係る背景画像を、表示部に表示させる通信端末。 - 前記遠隔会議において前記他の通信端末によって生成された複数の画面データは、複数の前記他の通信端末の間で共有されている画面データである請求項1乃至7のいずれか一項に記載の通信端末。
- 請求項6に記載の通信端末と、前記他の通信端末と、
前記通信管理装置と、前記画像保存装置と、を備える通信システム。 - 請求項9に記載の通信システムであって、
前記他の通信端末は、
前記画像保存装置に対して当該他の通信端末に表示された背景画像に係る前記背景画像データを送信するとともに、前記通信管理装置に対して当該他の通信端末によって描画されたストロークに係る前記ストロークデータを送信する通信手段を備える通信システム。 - 他の通信端末との間において画像データ及びストロークデータを共有する通信端末が実行するデータ共有方法であって、
前記他の通信端末との間で共有される前記画像データ及び前記ストロークデータを管理する通信管理装置に対して、前記他の通信端末との遠隔会議への参加を要求する参加要求を送信する送信ステップと、
前記遠隔会議において前記他の通信端末によって生成された、前記画像データ及び前記ストロークデータにより構成される複数の画面データのうち、前記他の通信端末に表示されている表示画面を構成する画面データを、前記通信管理装置から受信する受信ステップと、
前記受信された前記画面データに係る表示画面を、表示部に表示させる表示制御ステップと、
前記参加要求に応じて前記通信管理装置から送信された前記遠隔会議の情報を示す会議情報に基づいて、前記他の通信端末によって生成された複数の画面データのうち、前記他の通信端末に表示されている表示画面を特定するとともに、前記会議情報に含まれる前記表示画面を構成する複数の前記画面データを識別する識別情報に基づいて、共有する画面データの優先度を特定する特定ステップと、
を実行し、
前記送信ステップにおいて、前記優先度に応じて共有される前記表示画面に対応する画面データの取得を要求するデータ取得要求を、前記通信管理装置に対して送信し、
前記受信ステップにおいて、前記データ取得要求に応じて前記通信管理装置から送信された前記画面データを受信する、
データ共有方法。 - コンピュータに、請求項11に記載の方法を実行させるプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019149693A JP7373712B2 (ja) | 2019-08-19 | 2019-08-19 | 通信端末、通信システム、データ共有方法およびプログラム |
US16/989,889 US11416202B2 (en) | 2019-08-19 | 2020-08-11 | Communication terminal, communication system, method of sharing data, and recording medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019149693A JP7373712B2 (ja) | 2019-08-19 | 2019-08-19 | 通信端末、通信システム、データ共有方法およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021033408A JP2021033408A (ja) | 2021-03-01 |
JP7373712B2 true JP7373712B2 (ja) | 2023-11-06 |
Family
ID=74645336
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019149693A Active JP7373712B2 (ja) | 2019-08-19 | 2019-08-19 | 通信端末、通信システム、データ共有方法およびプログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US11416202B2 (ja) |
JP (1) | JP7373712B2 (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2022025652A (ja) | 2020-07-29 | 2022-02-10 | 株式会社リコー | 通信端末、通信システム、通信方法及びプログラム |
US11553012B2 (en) * | 2020-09-30 | 2023-01-10 | Ringcentral, Inc. | System and method of intelligently sharing conference content |
US11539801B1 (en) * | 2021-08-04 | 2022-12-27 | Lemon Inc. | Shared augmented reality sessions for rendering video effects |
US11627182B2 (en) | 2021-08-04 | 2023-04-11 | Lemon Inc. | Share based augmented reality content service system |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011192036A (ja) | 2010-03-15 | 2011-09-29 | Ricoh Co Ltd | 画面共有システム、管理サーバ、情報処理装置、画面共有管理方法、プログラムおよび記録媒体 |
JP2013232124A (ja) | 2012-04-27 | 2013-11-14 | Ideep Solutions Corp | 電子会議システム |
JP2015099424A (ja) | 2013-11-18 | 2015-05-28 | 株式会社リコー | 情報処理端末、情報処理方法、プログラム、及び情報処理システム |
JP2015103131A (ja) | 2013-11-27 | 2015-06-04 | 株式会社リコー | 端末装置、プログラム、画面共有方法及び画面共有システム |
JP2015127944A (ja) | 2013-11-28 | 2015-07-09 | 株式会社リコー | 情報処理システム、情報処理装置、情報処理方法、及びプログラム |
WO2015129550A1 (ja) | 2014-02-28 | 2015-09-03 | 株式会社リコー | 伝送制御システム、伝送システム、伝送制御方法、及び記録媒体 |
JP2016171424A (ja) | 2015-03-12 | 2016-09-23 | 株式会社リコー | 通信システム、伝送端末、通信方法、プログラム |
JP2016212482A (ja) | 2015-04-30 | 2016-12-15 | 株式会社リコー | 情報処理システム、情報取得方法、情報処理装置及びプログラム |
JP2017134735A (ja) | 2016-01-29 | 2017-08-03 | 株式会社リコー | 情報処理装置、参加者数確認方法、プログラム及び情報処理システム |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8504624B2 (en) * | 2009-09-08 | 2013-08-06 | Ricoh Co., Ltd. | Stroke and image aggregation and analytics |
EP2355472B1 (en) * | 2010-01-22 | 2020-03-04 | Samsung Electronics Co., Ltd. | Apparatus and method for transmitting and receiving handwriting animation message |
JP2011254442A (ja) | 2010-05-06 | 2011-12-15 | Ricoh Co Ltd | 遠隔通信端末、遠隔通信方法、及び遠隔通信用プログラム |
JP2012058799A (ja) | 2010-09-06 | 2012-03-22 | Ricoh Co Ltd | 画像表示システム、画像表示方法およびプログラム |
JP6343897B2 (ja) | 2013-09-30 | 2018-06-20 | 株式会社リコー | 伝送端末、伝送方法、及びプログラム |
EP3072039B1 (en) * | 2013-11-19 | 2019-08-14 | Wacom Co., Ltd. | Method and system for ink data generation, ink data rendering, ink data manipulation and ink data communication |
EP3098717B1 (en) * | 2014-01-22 | 2018-11-28 | Ricoh Company, Limited | Data transmission system, terminal device, program, and data transmission method |
JP2015207819A (ja) * | 2014-04-17 | 2015-11-19 | 株式会社リコー | 情報処理装置、情報処理システム、通信制御方法およびプログラム |
US20160036873A1 (en) * | 2014-08-01 | 2016-02-04 | Smart Technologies Ulc | Custom input routing using messaging channel of a ucc system |
JP5846270B2 (ja) | 2014-09-04 | 2016-01-20 | 株式会社リコー | 画像処理システム、情報処理装置 |
CN107534704B (zh) * | 2015-05-07 | 2020-11-06 | 株式会社理光 | 一种经由通信网络连接的信息处理方法、设备和介质 |
JP6269609B2 (ja) * | 2015-07-28 | 2018-01-31 | 株式会社リコー | 情報処理装置、画像表示方法、通信システム、プログラム |
US10868923B2 (en) | 2018-11-30 | 2020-12-15 | Ricoh Company, Ltd. | Communication management system, communication system, communication control method, and recording medium |
-
2019
- 2019-08-19 JP JP2019149693A patent/JP7373712B2/ja active Active
-
2020
- 2020-08-11 US US16/989,889 patent/US11416202B2/en active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011192036A (ja) | 2010-03-15 | 2011-09-29 | Ricoh Co Ltd | 画面共有システム、管理サーバ、情報処理装置、画面共有管理方法、プログラムおよび記録媒体 |
JP2013232124A (ja) | 2012-04-27 | 2013-11-14 | Ideep Solutions Corp | 電子会議システム |
JP2015099424A (ja) | 2013-11-18 | 2015-05-28 | 株式会社リコー | 情報処理端末、情報処理方法、プログラム、及び情報処理システム |
JP2015103131A (ja) | 2013-11-27 | 2015-06-04 | 株式会社リコー | 端末装置、プログラム、画面共有方法及び画面共有システム |
JP2015127944A (ja) | 2013-11-28 | 2015-07-09 | 株式会社リコー | 情報処理システム、情報処理装置、情報処理方法、及びプログラム |
WO2015129550A1 (ja) | 2014-02-28 | 2015-09-03 | 株式会社リコー | 伝送制御システム、伝送システム、伝送制御方法、及び記録媒体 |
JP2016171424A (ja) | 2015-03-12 | 2016-09-23 | 株式会社リコー | 通信システム、伝送端末、通信方法、プログラム |
JP2016212482A (ja) | 2015-04-30 | 2016-12-15 | 株式会社リコー | 情報処理システム、情報取得方法、情報処理装置及びプログラム |
JP2017134735A (ja) | 2016-01-29 | 2017-08-03 | 株式会社リコー | 情報処理装置、参加者数確認方法、プログラム及び情報処理システム |
Also Published As
Publication number | Publication date |
---|---|
US11416202B2 (en) | 2022-08-16 |
JP2021033408A (ja) | 2021-03-01 |
US20210055904A1 (en) | 2021-02-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7373712B2 (ja) | 通信端末、通信システム、データ共有方法およびプログラム | |
US11146695B2 (en) | Communication management system, communication system, communication control method, and recording medium | |
JP7413693B2 (ja) | 通信端末、通信システム、データ共有方法およびプログラム | |
JP7326963B2 (ja) | 通信端末、通信システム、画像共有方法およびプログラム | |
JP7400345B2 (ja) | 通信端末、通信システム、データ共有方法およびプログラム | |
JP6720513B2 (ja) | 通信端末、通信システム、通信制御方法、及びプログラム | |
JP2020149338A (ja) | 通信端末、通信システム、表示制御方法およびプログラム | |
JP6314539B2 (ja) | 伝送端末、伝送システム、伝送方法及びプログラム | |
JP2022049507A (ja) | 通信システム、通信端末、画面共有方法、及びプログラム | |
JP2021022041A (ja) | 通信端末、通信システム、表示制御方法およびプログラム | |
JP7243323B2 (ja) | 通信端末、通信システム、表示制御方法およびプログラム | |
JP7476586B2 (ja) | 通信端末、通信システム、画面共有方法およびプログラム | |
JP7467986B2 (ja) | 通信端末、通信システム、通信方法およびプログラム | |
JP7396136B2 (ja) | 通信管理装置、通信システム、通信方法およびプログラム | |
JP7476596B2 (ja) | 通信端末、方法、プログラム、およびシステム | |
JP2020198078A (ja) | 情報処理装置、情報処理システム及び情報処理方法 | |
JP7358934B2 (ja) | 通信管理システム、通信システム、通信方法、及びプログラム | |
JP7476548B2 (ja) | 通信端末、通信システム、表示方法、及びプログラム | |
JP7487542B2 (ja) | 通信端末、通信システム、通信方法、プログラム | |
JP7215341B2 (ja) | 通信端末、通信システム、表示制御方法およびプログラム | |
JP2022029341A (ja) | 通信システム、通信端末、通信方法、及びプログラム | |
JP2021039617A (ja) | 情報処理システム、情報処理装置、画像表示方法、プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220622 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230317 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230411 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230607 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230919 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20231011 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231002 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7373712 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |