JP2023166433A - 通信端末、管理システム、表示方法、及びプログラム - Google Patents

通信端末、管理システム、表示方法、及びプログラム Download PDF

Info

Publication number
JP2023166433A
JP2023166433A JP2023134382A JP2023134382A JP2023166433A JP 2023166433 A JP2023166433 A JP 2023166433A JP 2023134382 A JP2023134382 A JP 2023134382A JP 2023134382 A JP2023134382 A JP 2023134382A JP 2023166433 A JP2023166433 A JP 2023166433A
Authority
JP
Japan
Prior art keywords
event
user
time
data
communication terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2023134382A
Other languages
English (en)
Inventor
拓郎 真野
Takuro Mano
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2019075767A external-priority patent/JP7338214B2/ja
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Publication of JP2023166433A publication Critical patent/JP2023166433A/ja
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2458Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
    • G06F16/2477Temporal data queries
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/438Presentation of query results
    • G06F16/4387Presentation of query results by the use of playlists
    • G06F16/4393Multimedia presentations, e.g. slide shows, multimedia albums
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/44Browsing; Visualisation therefor
    • G06F16/447Temporal browsing, e.g. timeline
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04812Interaction techniques based on cursor appearance or behaviour, e.g. being affected by the presence of displayed objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47217End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks

Abstract

【課題】会議等のイベントにおいて、イベント全体の中の重要ポイントを容易に探し出すことができる、通信端末、管理システム、表示方法及びプログラムを提供する。【解決手段】電子黒板、ビデオ会議端末、カーナビゲーション装置、PC等の通信端末と、共用支援サーバ、スケジュール管理サーバ及び音声テキスト変換サーバが、通信ネットワークを介して通信する共用システムにおいて、通信端末は、実行されたイベントにおいて発生した音声データから変換されたテキストデータ及びイベントにおいてスナップショットによって発生した画面の画像データに係る画像を、それぞれ発生時間順に並列に表示手段に表示させる表示制御手段を備える。【選択図】図34

Description

本開示内容は、通信端末、管理システム、表示方法、及びプログラムに関する。
近年、企業や教育機関、行政機関等における会議等において、大型ディスプレイに背景画像を表示させ、この背景画像の上にユーザが文字や数字、図形等のストローク画像を描画可能な電子黒板が利用されている(特許文献1参照)。
また、会議等のイベントを行った場合、サーバがイベントにおける音声データをテキストデータに変換し、端末がテキストデータに係る画像を表示することで、自動的に議事録を作成する技術が知られている(特許文献2参照)。
しかしながら、従来の方法では、利用者は、議事録の中から所望のテキストデータに係る画像を探し出すため、テキストの内容を最初から読み進めなければならないため、イベント全体の中の重要ポイントを容易に探し出すことができないという課題が生じる。
上述した課題を解決すべく、請求項1に係る発明は、実行されたイベントにおいて発生した音声データから変換されたテキストデータに係る画像及び前記イベントにおいてスナップショットによって発生した画面の画像データに係る画像を、それぞれ発生時間順に並列に表示手段に表示させる表示制御手段を有することを特徴とする通信端末である。
本発明によれば、テキストデータ及びスナップショットによる画像データに係る画像を発生時間順に並列に表示させるため、利用者は、上記画像を閲覧すれば容易にイベント全体の中の重要ポイントを探し出すことができる。これにより、イベント全体の中の重要ポイントを容易に探し出すことができるという効果を奏する。
本実施形態に係る共用システムの概略図である。 電子黒板のハードウェア構成図である。 ビデオ会議端末のハードウェア構成図である。 カーナビゲーション装置のハードウェア構成図である。 PC、サーバのハードウェア構成図である。 共用システムの機能ブロック図である。 (A)は利用者認証管理テーブルの概念図、(B)はアクセス管理テーブルの概念図、(C)は予定管理テーブルの概念図である。 (A)は実行イベント管理テーブルの概念図、(B)コンテンツ管理テーブルの概念図である。 (A)は利用者認証管理テーブルの概念図、(B)は利用者管理テーブルの概念図、(C)は共用体管理テーブルの概念図である。 (A)は共用体予約管理テーブルの概念図、(B)はイベント管理テーブルの概念図である。 (A)は共用体予約管理テーブルの概念図、(B)はプロジェクトメンバ管理テーブルの概念図である。 (A)実行イベント履歴管理テーブルの概念図、(B)実行イベント管理テーブルの概念図である。 スケジュールの登録処理を示したシーケンス図である。 サインイン画面を示した図である。 PCの初期画面の例である。 スケジュール入力画面を示した図である。 イベントの開始処理を示したシーケンス図である。 共用体の予約リスト画面を示した図である。 イベントの開始処理を示したシーケンス図である。 プロジェクトリスト画面を示した図である。 イベントの詳細情報画面を示した図である。 利用者が電子黒板を利用する状態を示したイメージ図である。 実行イベント履歴の登録処理を示したシーケンス図である。 実行イベント履歴の登録処理を示したシーケンス図である。 アクションアイテムの登録処理を示したフォローチャートである。 アクションアイテムを認識する画面例である。 アクションアイテムを実行する候補者リストを示す画面例である。 アクションアイテムの期限日を選択するためのカレンダを示す画面例である。 イベントの終了処理を示したシーケンス図である。 実行イベント履歴の閲覧処理を示したシーケンス図である。 実行イベント履歴の閲覧処理を示したシーケンス図である。 PC上にプロジェクトリスト画面を示した図である。 PC上に実行イベントリスト画面を示した図である。 PC上に実行イベント履歴画面を示した図である。 PC上にアクションアイテム画面を示した図である。 ページネーションによる表示の変更処理を示したフローチャートである。 PC上に実行イベント履歴画面を示した図である。 PC上に実行イベント履歴画面を示した図である。
以下に図面を用いて、本実施形態に係る共用システム1を詳細に説明する。なお、本実施形態において「ファイル」は、「電子ファイル」を示す。
〔システム構成の概略〕
まず、共用システム1の構成の概略について説明する。図1は、本実施形態に係る共用システムの概略図である。
図1に示されているように、本実施形態の共用システム1は、電子黒板2、ビデオ会議端末3、カーナビゲーション装置4、PC(Personal Computer、パーソナルコンピュータ)5、共用支援サーバ6、スケジュール管理サーバ8及び音声テキスト変換サーバ9によって構築されている。
また、電子黒板2、ビデオ会議端末3、カーナビゲーション装置4、PC5、共用支援サーバ6、スケジュール管理サーバ8及び音声テキスト変換サーバ9は、通信ネットワーク10を介して通信することができる。通信ネットワーク10は、インターネット、移動体通信網、LAN(Local Area Network)等によって構築されている。通信ネットワーク10には、有線通信だけでなく、3G(3rd Generation)、WiMAX(Worldwide Interoperability for Microwave Access)またはLTE(Long Term Evolution)等の無線通信によるネットワークが含まれてもよい。
また、電子黒板2は、会議室Xで利用される。ビデオ会議端末3は、会議室Yで利用される。また、共用体は、各利用者による予約対象となる。カーナビゲーション装置4は、車両αで利用される。この場合の車両αは、カーシェアリングの対象となる車両である。車両には、車、バイク、自転車、車椅子等が含まれている。
「共用体」は、複数の人または団体が共同で使用する物、サービス、空間(部屋)、場所、または情報示す。会議室X、会議室Y及び車両αは、複数の利用者が共用する共用体の一例である。共用体に付与された情報の例として、アカウントの場合が挙げられる。例えば、Webで提供されている特定のサービスにおいて、使用されるアカウントが1つに制限されているような場合である。
電子黒板2、ビデオ会議端末3、及びカーナビゲーション装置4は、通信端末の一例である。「通信端末」は、例えば、ユーザによるサインイン(後述のS32参照)で使用可能となる端末である。なお、車両αで利用される通信端末は、カーナビゲーション装置4だけでなく、カーナビゲーションのアプリケーションがインストールされたスマートフォン又はスマートウォッチ等も含む。
PC5は、情報処理装置であり、スケジュール管理サーバ8に対して、各共用体の利用の予約の登録及び各利用者が実行予定のイベントを登録する登録装置又は通信端末の一例である。イベントは、例えば、会議、会合、集い、寄り合い、相談、打ち合わせ、運転、乗車または移動等である。
共用支援サーバ6は、コンピュータであり、各通信端末に対して遠隔的に共用体を共用する場合の支援を行う。
スケジュール管理サーバ8は、コンピュータであり、各共用体の予約及び各利用者の予定のスケジュールを管理する。
音声テキスト変換サーバ9は、コンピュータであり、外部のコンピュータ(例えば、共用支援サーバ6)から受信した音(音声)データを、テキストデータに変換する。
ここで、共用支援サーバ6、スケジュール管理サーバ8及び音声テキスト変換サーバ9は、管理システムと称する。なお、管理システムは、例えば、共用支援サーバ6、スケジュール管理サーバ8及び音声テキスト変換サーバ9の各機能の全てまたは一部を担うサーバであってもよい。
〔ハードウェア構成〕
続いて、図2乃至図5を用いて、共用システム1を構築する装置または端末のハードウェア構成を説明する。
<電子黒板のハードウェア構成>
図2は、電子黒板のハードウェア構成図である。図2に示されているように、電子黒板2は、CPU(Central Processing Unit)201、ROM(Read Only Memory)202、RAM(Random Access Memory)203、SSD(Solid State Drive)204、ネットワークI/F205及び外部機器接続I/F(Interface)206を備えている。
これらのうち、CPU201は、電子黒板2全体の動作を制御する。ROM202は、CPU201やIPL(Initial Program Loader)等のCPU201の駆動に用いられるプログラムを記憶する。RAM203は、CPU201のワークエリアとして使用される。SSD204は、電子黒板用のプログラム等の各種データを記憶する。ネットワークI/F205は、通信ネットワーク10との通信を制御する。外部機器接続I/F206は、USB(Universal Serial Bus)メモリ2600、PC2700、外付け機器(マイク2200、スピーカ2300、カメラ2400、)との通信を制御する。
また、電子黒板2は、キャプチャデバイス211、GPU212、ディスプレイコントローラ213、接触センサ214、センサコントローラ215、電子ペンコントローラ216、近距離通信回路219、近距離通信回路219のアンテナ219a、及び電源スイッチ222を備えている。
これらのうち、キャプチャデバイス211は、ディスプレイコントローラ213を介してディスプレイ220上に表示されている画像データを取得し、RAM203等に保存する。GPU(Graphics Processing Unit)212は、グラフィクスを専門に扱う半導体チップである。ディスプレイコントローラ213は、キャプチャデバイス211またはGPU212からの出力画像をディスプレイ220等へ出力するために、画面表示の制御及び管理を行う。接触センサ214は、ディスプレイ220上に電子ペン2500やユーザの手H等が接触したことを検知する。センサコントローラ215は、接触センサ214の処理を制御する。接触センサ214は、赤外線遮断方式による座標の入力及び座標の検出を行う。この座標の入力及び座標の検出する方法は、ディスプレイ220の上側両端部に設置された2つ受発光装置が、ディスプレイ220に平行して複数の赤外線を放射し、ディスプレイ220の周囲に設けられた反射部材によって反射されて、受光素子が放射した光の光路と同一の光路上を戻って来る光を受光する方法である。接触センサ214は、物体によって遮断された2つの受発光装置が放射した赤外線のIDをセンサコントローラ215に出力し、センサコントローラ215が、物体の接触位置である座標位置を特定する。電子ペンコントローラ216は、電子ペン2500と通信することで、ディスプレイ220へのペン先のタッチやペン尻のタッチの有無を判断する。近距離通信回路219は、NFC(Near Field Communication)、Bluetooth(登録商標)等の通信回路である。電源スイッチ222は、電子黒板2の電源のON/OFFを切り換えるためのスイッチである。
さらに、電子黒板2は、バスライン210を備えている。バスライン210は、図2に示されているCPU201等の各構成要素を電気的に接続するためのアドレスバスやデータバス等である。
なお、接触センサ214は、赤外線遮断方式に限らず、静電容量の変化を検知することにより接触位置を特定する静電容量方式のタッチパネル、対向する2つの抵抗膜の電圧変化によって接触位置を特定する抵抗膜方式のタッチパネル、接触物体が表示部に接触することによって生じる電磁誘導を検知して接触位置を特定する電磁誘導方式のタッチパネル等の種々の検出手段を用いてもよい。また、電子ペンコントローラ216が、電子ペン2500のペン先及びペン尻だけでなく、電子ペン2500のユーザが握る部分や、その他の電子ペンの部分のタッチの有無を判断するようにしてもよい。
<ビデオ会議端末のハードウェア構成>
図3は、ビデオ会議端末のハードウェア構成図を示した図である。図3に示されているように、ビデオ会議端末3は、CPU301、ROM302、RAM303、フラッシュメモリ304、SSD305、メディアI/F307、操作ボタン308、電源スイッチ309、バスライン310、ネットワークI/F311、CMOS(Complementary Metal Oxide Semiconductor)センサ312、撮像素子I/F313、マイク314、スピーカ315、音入出力I/F316、ディスプレイI/F317、外部機器接続I/F318、近距離通信回路319及び近距離通信回路319のアンテナ319aを備えている。これらのうち、CPU301は、ビデオ会議端末3全体の動作を制御する。ROM302は、IPL等のCPU301の駆動に用いられるプログラムを記憶する。RAM303は、CPU301のワークエリアとして使用される。フラッシュメモリ304は、通信用プログラム、画像データ及び音データ等の各種データを記憶する。SSD305は、CPU301の制御にしたがってフラッシュメモリ304に対する各種データの読み出しまたは書き込みを制御する。なお、SSDに代えてHDDを用いてもよい。メディアI/F307は、フラッシュメモリ等の記録メディア306に対するデータの読み出しまたは書き込み(記憶)を制御する。操作ボタン308は、ビデオ会議端末3の宛先を選択する場合等に操作されるボタンである。電源スイッチ309は、ビデオ会議端末3の電源のON/OFFを切り換えるためのスイッチである。
また、ネットワークI/F311は、インターネット等の通信ネットワーク10を利用してデータ通信をするためのインターフェースである。CMOSセンサ312は、CPU301の制御に従って被写体を撮像して画像データを得る内蔵型の撮像手段の一種である。撮像素子I/F313は、CMOSセンサ312の駆動を制御する回路である。マイク314は、音声を入力する内蔵型の集音手段の一種である。音入出力I/F316は、CPU301の制御に従ってマイク314及びスピーカ315との間で音信号の入出力を処理する回路である。ディスプレイI/F317は、CPU301の制御に従って外付けのディスプレイ320に画像データを送信する回路である。外部機器接続I/F318は、各種の外部機器を接続するためのインターフェースである。近距離通信回路319は、NFC、Bluetooth等の通信回路である。
また、バスライン310は、図3に示されているCPU301等の各構成要素を電気的に接続するためのアドレスバスやデータバス等である。
ディスプレイ320は、被写体の画像や操作用アイコン等を表示する液晶や有機ELによって構成された表示手段の一種である。また、ディスプレイ320は、ケーブル320cによってディスプレイI/F317に接続される。このケーブル320cは、アナログRGB(VGA)信号用のケーブルであってもよいし、コンポーネントビデオ用のケーブルであってもよいし、DisplayPort、HDMI(登録商標)(High-Definition Multimedia Interface)(登録商標)やDVI(Digital Video Interactive)信号用のケーブルであってもよい。
なお、CMOSセンサ312ではなく、CCD(Charge Coupled Device)センサ等の撮像素子であってもよい。外部機器接続I/F318には、USBケーブル等によって、外付けカメラ、外付けマイク及び外付けスピーカ等の外部機器がそれぞれ接続可能である。外付けカメラが接続された場合には、CPU301の制御に従って、内蔵型のCMOSセンサ312に優先して、外付けカメラが駆動する。同じく、外付けマイクが接続された場合や、外付けスピーカが接続された場合には、CPU301の制御に従って、それぞれが内蔵型のマイク314や内蔵型のスピーカ315に優先して、外付けマイクや外付けスピーカが駆動する。
また、記録メディア306は、ビデオ会議端末3に対して着脱自在な構成となっている。また、CPU301の制御にしたがってデータの読み出しまたは書き込みを行う不揮発性メモリであれば、フラッシュメモリ304に限らず、EEPROM等を用いてもよい。
<カーナビゲーション装置のハードウェア構成>
図4は、カーナビゲーション装置のハードウェア構成図である。図4に示されているように、カーナビゲーション装置4は、CPU401、ROM402、RAM403、EEPROM404、電源スイッチ405、加速度・方位センサ406、メディアI/F408及びGPS受信部409を備えている。
これらのうち、CPU401は、カーナビゲーション装置4全体の動作を制御する。ROM402は、IPL等のCPU401の駆動に用いられるプログラムを記憶する。RAM403は、CPU401のワークエリアとして使用される。EEPROM404は、CPU401の制御にしたがって、カーナビゲーション装置4用プログラム等の各種データの読み出しまたは書き込みを行う。電源スイッチ405は、カーナビゲーション装置4の電源のON/OFFを切り換えるためのスイッチである。加速度・方位センサ406は、地磁気を検知する電子磁気コンパスやジャイロコンパス、加速度センサ等の各種センサである。メディアI/F408は、フラッシュメモリ等の記録メディア407に対するデータの読み出しまたは書き込み(記憶)を制御する。GPS受信部409は、GPS衛星からGPS信号を受信する。
また、カーナビゲーション装置4は、遠距離通信回路411、遠距離通信回路411のアンテナ411a、CMOSセンサ412、撮像素子I/F413、マイク414、スピーカ415、音入出力I/F416、ディスプレイ417、ディスプレイI/F418、外部機器接続I/F419、近距離通信回路420及び近距離通信回路420のアンテナ420aを備えている。
これらのうち、遠距離通信回路411は、車外のインフラから提供される渋滞情報、道路工事情報、交通事故情報等を受信し、逆に、自車位置や緊急時の救命信号等を外部へ発信するための回路である。外部のインフラは、例えば、VICS(登録商標)(Vehicle Information and Communication System)システム等の道路情報案内システムである。CMOSセンサ412は、CPU401の制御に従って被写体を撮像して画像データを得る内蔵型の撮像手段の一種である。撮像素子I/F413は、CMOSセンサ412の駆動を制御する回路である。マイク414は、音声を入力する内蔵型の集音手段の一種である。音入出力I/F416は、CPU401の制御に従ってマイク414及びスピーカ415との間で音信号の入出力を処理する回路である。ディスプレイ417は、被写体の画像や各種アイコン等を表示する液晶や有機EL等の表示手段の一種であり、タッチパネルの機能を有している。タッチパネルは、利用者がカーナビゲーション装置4を操作するための入力手段の一種である。ディスプレイI/F418は、ディスプレイ417に画像を表示させる回路である。外部機器接続I/F419は、各種の外部機器を接続するためのインターフェースである。近距離通信回路420は、NFCやBluetooth等の通信回路である。また、カーナビゲーション装置4は、バスライン410を備えている。バスライン410は、図4に示されているCPU401等の各構成要素を電気的に接続するためのアドレスバスやデータバス等である。
<PC、サーバのハードウェア構成>
図5は、PC、サーバのハードウェア構成図である。PC5は、コンピュータによって構築されており、図5に示されているように、CPU501、ROM502、RAM503、HD504、HDD(Hard Disk Drive)コントローラ505、記録メディア506、メディアI/F507、ディスプレイ508、ネットワークI/F509、キーボード511、マウス512、CD-RWドライブ514及びバスライン510を備えている。
これらのうち、CPU501は、PC5全体の動作を制御する。ROM502は、IPL等のCPU501の駆動に用いられるプログラムを記憶する。RAM503は、CPU501のワークエリアとして使用される。HD504は、プログラム等の各種データを記憶する。HDD(Hard Disk Drive)コントローラ505は、CPU501の制御にしたがってHD504に対する各種データの読み出しまたは書き込みを制御する。メディアI/F507は、フラッシュメモリ等の記録メディア506に対するデータの読み出しまたは書き込み(記憶)を制御する。ディスプレイ508は、カーソル、メニュー、ウィンドウ、文字または画像等の各種情報を表示する。ネットワークI/F509は、通信ネットワーク10を利用してデータ通信をするためのインターフェースである。キーボード511は、文字、数値、各種指示等の入力のための複数のキーを備えた入力手段の一種である。マウス512は、各種指示の選択や実行、処理対象の選択、カーソルの移動等を行う入力手段の一種である。CD-RWドライブ514は、着脱可能な記録媒体の一例としてのCD-RW(Compact Disc-ReWritable)513に対する各種データの読み出しまたは書き込みを制御する。スピーカ515は、CPU501の制御に従って音信号の出力を行う。
また、PC5は、バスライン510を備えている。バスライン510は、図5に示されているCPU501等の各構成要素を電気的に接続するためのアドレスバスやデータバス等である。
また、共用支援サーバ6は、コンピュータによって構築されており、図5に示されているように、CPU601、ROM602、RAM603、HD604、HDDコントローラ605、記録メディア606、メディアI/F607、ディスプレイ608、ネットワークI/F609、キーボード611、マウス612、CD-RWドライブ614、及びバスライン610を備えている。これらは、それぞれPC5において、CPU501、ROM502、RAM503、HD504、HDDコントローラ505、記録メディア506、メディアI/F507、ディスプレイ508、ネットワークI/F509、キーボード511、マウス512、CD-RWドライブ514、及びバスライン510と同様の構成であるため、説明を省略する。
さらに、スケジュール管理サーバ8は、コンピュータによって構築されており、図5に示されているように、CPU801、ROM802、RAM803、HD804、HDDコントローラ805、記録メディア806、メディアI/F807、ディスプレイ808、ネットワークI/F809、キーボード811、マウス812、CD-RWドライブ814、及びバスライン810を備えている。これらは、それぞれPC5において、CPU501、ROM502、RAM503、HD504、HDDコントローラ505、記録メディア506、メディアI/F507、ディスプレイ508、ネットワークI/F509、キーボード511、マウス512、CD-RWドライブ514、及びバスライン510と同様の構成であるため、説明を省略する。
また、音声テキスト変換サーバ9は、コンピュータによって構築されており、図5に示されているように、CPU901、ROM902、RAM903、HD904、HDDコントローラ905、記録メディア906、メディアI/F907、ディスプレイ908、ネットワークI/F909、キーボード911、マウス912、CD-RWドライブ914、及びバスライン910を備えている。これらは、それぞれPC5において、CPU501、ROM502、RAM503、HD504、HDDコントローラ505、記録メディア506、メディアI/F507、ディスプレイ508、ネットワークI/F509、キーボード511、マウス512、CD-RWドライブ514、及びバスライン510と同様の構成であるため、説明を省略する。
なお、上記各プログラムは、インストール可能な形式または実行可能な形式のファイルで、コンピュータで読み取り可能な記録媒体に記録して流通させるようにしてもよい。記録媒体の例として、CD-R(Compact Disc Recordable)、DVD(Digital Versatile Disk)、ブルーレイディスク、SDカード等が挙げられる。また、記録媒体は、プログラム製品(Program Product)として、国内または国外へ提供されることができる。
さらに、共用支援サーバ6は、単一のコンピュータによって構築されてもよいし、各部(機能、手段または記憶部)を分割して任意に割り当てられた複数のコンピュータによって構築されていてもよい。スケジュール管理サーバ8及び音声テキスト変換サーバ9についても同様である。
〔共用システムの機能構成〕
続いて、図6乃至図10を用いて、本実施形態の機能構成について説明する。図6は、共用システムの機能ブロック図である。なお、図6では、図1に示されている各端末、装置、サーバのうち、後述の処理または動作に関連しているものが示されている。
<電子黒板の機能構成>
図6に示されているように、電子黒板2は、送受信部21、受付部22、画像・音処理部23、表示制御部24、判断部25、認識部26、取得・提供部28、記憶・読出処理部29を有している。これら各部は、図2に示されている各構成要素のいずれかが、SSD204からRAM203上に展開されたプログラムに従ったCPU201からの命令によって動作することで実現される機能、または機能する手段である。また、電子黒板2は、図2に示されているRAM203、SSD204又はUSBメモリ2600によって構築される記憶部2000を有している。
(電子黒板の各機能構成)
次に、電子黒板2の各構成要素について説明する。送受信部21は、図2に示されているCPU201からの命令、並びにネットワークI/F205及び外部機器接続I/F206によって実現され、通信ネットワーク10を介して他の端末、装置またはシステムと各種データ(または情報)の送受信を行う。
受付部22は、主に、図2に示されているCPU201からの命令、並びに接触センサ214及び電子ペンコントローラ216によって実現され、利用者による各種入力を受け付ける。
画像・音処理部23は、図2に示されているCPU201からの命令、及びキャプチャデバイス211によって実現され、ディスプレイ220上に表示されている画像データを保存する。また、画像・音処理部23は、図2に示されているCPU201からの命令、及びGPU212によって実現され、ディスプレイ220に画像を表示するための画像処理を行う。さらに、画像・音処理部23は、カメラ2400が被写体を撮像して得た画像データに対しての画像処理を行なう。また、画像・音処理部23は、マイク2200によって利用者の音声が音声信号に変換された後、この音声信号に係る音データに対して音声処理を行なう。さらに、画像・音処理部23は、音データに係る音声信号をスピーカ2300に出力し、スピーカ2300から音声を出力させる。また、画像・音処理部23は、利用者によって電子ペン2500や手Hでディスプレイ220上に描画されることで得た描画像データを座標データに変換する処理を行なう。例えば、任意の拠点の電子黒板(2a)が、他の拠点の電子黒板(2b)に座標データを送信すると、電子黒板(2b)は、座標データに基づいて他の電子黒板(2b)側のディスプレイ220上に同じ内容の描画を表示する。
表示制御部24は、図2に示されているCPU201からの命令、及び図2に示されているディスプレイコントローラ213によって実現され、ディスプレイ220に描画像を表示させたり、Webブラウザを用いて共用支援サーバ6にアクセスして各種画面データを表示させたりする。表示制御部24は、OS(Operating Ssystem)上で動作するLauncher、及び外部アプリを起動・実行することで、OSが提供するAPI(Application Programming Interface)によって描画される各種画面を、ディスプレイ220に表示させる。
判断部25は、図2に示されているCPU201からの命令によって実現され、各種判断を行う。
認識部26は、図2に示されているCPU201からの命令によって実現され、後述の図26に示されているように、ディスプレイ220上で囲まれた指定領域262を認識する。
取得・提供部28は、図2に示されているCPU201からの命令、並びに近距離通信回路219及びアンテナ219aによって実行され、ICカードやスマートフォン等の専有端末との間で、近距離通信により、データの取得及び提供を行なう。
記憶・読出処理部29は、図2に示されているCPU201からの命令及びSSD204によって実行され、記憶部2000に各種データを記憶したり、記憶部2000または記録媒体2100に記憶された各種データを読み出したりする処理を行う。さらに、記憶部2000には、他の電子黒板やビデオ会議端末との通信を行う際に受信される画像データ及び音データが、受信される度に上書き記憶される。このうち、上書きされる前の画像データによってディスプレイ220に画像が表示され、上書きされる前の音データによってスピーカ2300から音声が出力される。記録媒体2100は、図2に示されているUSBメモリ2600によって実現される。
なお、ビデオ会議端末3及びカーナビゲーション装置4は、受付部22以外は電子黒板2と同様の機能を有するため、ここでは説明を省略する。
<PCの機能構成>
PC5は、送受信部51、受付部52、表示制御部54、生成部56、音制御部58及び記憶・読出処理部59を有している。これら各部は、図5に示されている各構成要素のいずれかが、HD504からRAM503上に展開されたプログラムに従ったCPU501からの命令によって動作することで実現される機能または機能する手段である。また、PC5は、図5に示されているHD504により構築される記憶部5000を有している。
(PCの各機能構成)
次に、PC5の各構成要素について説明する。送受信部51は、図5に示されているCPU501からの命令及びネットワークI/F509によって実現され、通信ネットワーク10を介して他の端末、装置またはシステムと各種データ(または情報)の送受信を行う。
受付部52は、主に、図5に示されているCPU501からの命令、並びにキーボード511及びマウス512によって実現され、利用者による各種入力を受け付ける。
表示制御部54は、図5に示されているCPU501からの命令によって実現され、ディスプレイ508に画像を表示させたり、Webブラウザを用いて共用支援サーバ6にアクセスして各種画面データを表示させたりする。表示制御部54は、例えば、OS上で動作する議事録アプリまたはブラウザを起動・実行することで、共用支援サーバ6又はスケジュール管理サーバ8にアクセスする。そして、表示制御部54は、例えば、HTML(HyperText Markup Language)を少なくとも含み、CSS(Cascading Style Sheets)又はJAVA SCRIPT(登録商標)等を含むWebAPP(WebApplication)をダウンロードし、そのWebAPPによって生成された各種画像データを、ディスプレイ508に表示させる。表示制御部54は、例えば、XML(Extensible Markup Language)、JSON(JavaScript Object Notation)またはSOAP(Simple Object Access Protocol)形式等のデータを含むHTML5によって生成された画像データを、ディスプレイ508に表示させる。
生成部56は、図5に示されているCPU501からの命令によって実現され、ディスプレイ508に表示させる各種画像データを生成する。例えば、生成部56は、送受信部51によって受信されたコンテンツデータを用いて、各種画像データを生成する。また、生成部56は、コンテンツデータであるテキストデータをレンダリングし、レンダリングされたデータを表示させるために、コンテンツ画像データであるテキストデータに係る画像データを生成する。レンダリングとは、Webページ記述用の言語(HTML、CSSまたはXML等)で記述されたデータを解釈し、実際に画面に表示される文字や画像データ等の配置を計算する処理である。
音制御部58は、図5に示されているCPU501からの命令によって実現され、スピーカ515から音信号を出力する機能である。音制御部58は、スピーカ515から出力させる音データを設定し、設定した音データに係る音信号をスピーカ515から出力することにより、音データを再生する。
記憶・読出処理部59は、図5に示されているCPU501からの命令、及びHDDコントローラ505等によって実行され、記憶部5000に各種データを記憶したり、記憶部5000から各種データを読み出したりする処理を行う。
<共用支援サーバの機能構成>
共用支援サーバ6は、送受信部61、認証部62、作成部63、生成部64、判断部65及び記憶・読出処理部69を有している。これら各部は、図5に示されている各構成要素のいずれかが、HD604からRAM603上に展開された共用支援用プログラムに従ったCPU601からの命令によって動作することで実現される機能または機能する手段である。また、共用支援サーバ6は、図5に示されているHD604等により構築される記憶部6000を有している。
(利用者認証管理テーブル)
図7(A)は、利用者認証管理テーブルを示す概念図である。記憶部6000には、図7(A)に示されているような利用者認証管理テーブルによって構成されている利用者認証管理DB6001が構築されている。この利用者認証管理テーブルでは、利用者を識別するための利用者ID、利用者名、利用者が属する組織を識別するための組織ID及びパスワードが関連付けられて管理されている。なお、組織IDには、通信ネットワーク上の複数のコンピュータを管理するためのグループや組織を表すドメイン名も含まれる。
(アクセス管理テーブル)
図7(B)は、アクセス管理テーブルを示す概念図である。記憶部6000には、図7(B)に示されているようなアクセス管理テーブルによって構成されているアクセス管理DB6002が構築されている。このアクセス管理テーブルでは、組織ID、スケジュール管理サーバ8へアクセスする際の認証に必要なアクセスID及びアクセスパスワードが関連付けて管理されている。このアクセスID及びアクセスパスワードは、共用支援サーバ6が、HTTP(Hypertext Transfer Protocol)またはHTTPS(Hypertext Transfer Protocol Secure)のプロトコルを用いて、WebAPI(Application Programming Interface)等を介して、スケジュール管理サーバ8によって提供されるサービス(機能)を利用するために必要である。スケジュール管理サーバ8は、複数のスケジューラを管理しており、組織が異なれば使用するスケジューラも異なることがあるため、アクセス管理テーブルで管理が必要である。
(予定管理テーブル)
図7(C)は、予定管理テーブルを示す概念図である。記憶部6000には、図7(C)に示されているような予定管理テーブルによって構成されている予定管理DB6003が構築されている。この予定管理テーブルでは、予定イベントID及び実行イベントID毎に、組織ID、予約者の利用者ID、この予約者の参加の有無、予約者名、開始予定時刻、終了予定時刻、イベント名、他の参加者の利用者ID、この他の参加者の参加の有無、及び他の参加者名が関連付けられて管理されている。
これらのうち、予定イベントIDは、予約されたイベントを識別するための識別情報である。予定イベントIDは、実行予定のイベントを識別するための予定イベント識別情報の一例である。
実行イベントIDは、予約されたイベントのうち実際に実行されたイベントを識別するための識別情報である。実行イベントIDは、実行されているイベントを識別するための実行イベント識別情報の一例である。
予約者名は、共用体を予約した者の名前であり、共用体が会議室の場合は例えば主催者の名前であり、共用体が車両の場合は例えば運転者の名前である。開始予定時刻は、共用体の利用開始予定時刻を示している。終了予定時刻は、共用体の利用終了予定時刻を示している。イベント名は、予約者が実行予定のイベントの名称を示している。他の参加者の利用者IDは、予約者以外の参加者を識別するための識別情報である。他の参加者名は、予約者以外の参加者の名前であり、共用体も含まれる。つまり、この場合の利用者には、予約者及び他の参加者のほか、共用体も含まれる。
(実行イベント管理テーブル)
図8(A)は、実行イベント管理テーブルを示す概念図である。記憶部6000には、図8(A)に示されているような実行イベント管理テーブルによって構成されている実行イベント管理DB6004が構築されている。この実行イベント管理テーブルでは、プロジェクトID毎に、実行イベントIDが関連付けられて管理されている。プロジェクトIDは、プロジェクトを識別するための識別情報(プロジェクト識別情報の一例)である。プロジェクトは、特定の目標、計画または企画等を達成するために複数のメンバにより構成されるグループ、チームまたは集団を示す。同じプロジェクトに属するメンバは、プロジェクトIDに関連付けられたイベントの議事録等の実行イベント履歴を共有することができる。プロジェクトIDは、後述の図20に示されているように、来年度方針、顧客開拓等のプロジェクト毎に割り振られている。なお、プロジェクトIDは、グループIDまたはチームIDと称されてもよい。
(コンテンツ管理テーブル)
図8(B)は、コンテンツ管理テーブルを示す概念図である。記憶部6000には、図8(B)に示されているようなコンテンツ管理テーブルによって構成されているコンテンツ管理DB6005が構築されている。このコンテンツ管理テーブルでは、実行イベントID毎に、コンテンツ処理ID、コンテンツ処理の種類、コンテンツの内容、並びにコンテンツ処理の開始日時及び終了日時が関連付けられて管理されている。ここで、コンテンツは、あるプロジェクトにおける会議等のイベントで発生した実行イベントの内容、または当該イベントで用いた資料等である。コンテンツ処理の種類には、録音、スナップショット、音声テキスト受信、アクションアイテムの発生及び資料送付等が含まれる。また、コンテンツ処理IDは、各イベントで発生したコンテンツの処理を識別するための識別情報である。
ここで、コンテンツには、イベントの実行内容を示す履歴情報と、実行されたイベントによって生じたアクションアイテムとが含まれている。履歴情報は、録音データ、スナップショット、音声テキストまたは資料等のデータである。スナップショットとは、実行中のイベントのある時点における表示画面を画像データとして取得する処理である。なお、スナップショットは、例えば、キャプチャまたは画像認識とも称される。
コンテンツ処理の種類が「録音」である場合、コンテンツの内容は、録音された音データの保存先を示すURLを含む。また、コンテンツ処理の種類が「スナップショット」である場合、コンテンツの内容は、スナップショット(キャプチャ)によって取得された画面の画像データの保存先を示すURLを含む。キャプチャとは、ディスプレイ200に表示されている画像(静止画像、動画像)を、画像データとして保存することである。さらに、コンテンツ処理の種類が「音声テキスト受信」である場合、コンテンツの内容は、受信された音声テキストのテキストデータの保存先を示すURLを含む。
ここで、アクションアイテムは、あるプロジェクトにおける会議等のイベントで発生し、イベントに関連する者が対応すべき行動の内容を示す。コンテンツ処理の種類が「アクションアイテム発生」である場合、コンテンツの内容は、アクションアイテムの実行者の利用者ID、アクションアイテムを完了させる期限日、及びアクションアイテムを示す画像データの保存先を示すURLを含む。
(共用支援サーバの各機能構成)
次に、共用支援サーバ6の各機能構成について詳細に説明する。なお、以下では、共用支援サーバ6の各機能構成を説明するにあたって、図5に示されている各構成要素のうち、共用支援サーバ6の各機能構成を実現させるための主な構成要素との関係も説明する。
図6に示されている共用支援サーバ6の送受信部61は、図5に示されているCPU601からの命令、及び図5に示されているネットワークI/F609によって実現され、通信ネットワーク10を介して他の端末、装置またはシステムと各種データ(または情報)の送受信を行う。
認証部62は、図5に示されているCPU601からの命令によって実現され、通信端末から送られて来る情報(利用者ID、組織ID及びパスワード)が、利用者認証管理DB6001に予め登録されている情報であるかを判断することで、認証を行う。
作成部63は、図5に示されているCPU601からの命令によって実現され、スケジュール管理サーバ8から送られて来た予約情報及び予定情報に基づいて、後述の図18に示されているような予約リスト画面230を作成する。
生成部64は、図5に示されているCPU601からの命令によって実現され、実行イベントID、コンテンツ処理ID及び保存先のURLを生成する。
判断部65は、図5に示されているCPU601からの命令によって実現され、各種判断を行う。この判断については後述する。
記憶・読出処理部69は、図5に示されているCPU601からの命令、及び図5に示されているHDDコントローラ605によって実現され、記憶部6000に各種データを記憶したり、記憶部6000に記憶された各種データを読み出したりする処理を行う。
<スケジュール管理サーバの機能構成>
スケジュール管理サーバ8は、送受信部81、認証部82及び記憶・読出処理部89を有している。これら各部は、図6に示されている各構成要素のいずれかが、HD804からRAM803上に展開されたスケジュール管理用プログラムに従ったCPU801からの命令によって動作することで実現される機能または機能する手段である。また、スケジュール管理サーバ8は、図5に示されているHD804により構築される記憶部8000を有している。
(利用者認証管理テーブル)
図9(A)は、利用者認証管理テーブルを示す概念図である。記憶部8000には、図9(A)に示されているような利用者認証管理テーブルによって構成されている利用者認証管理DB8001が構築されている。この利用者認証管理テーブルでは、利用者を識別するための利用者IDに、利用者が属する組織を識別するための組織ID及びパスワードが関連付けられて管理されている。
(利用者管理テーブル)
図9(B)は、利用者管理テーブルを示す概念図である。記憶部8000には、図9(B)に示されているような利用者管理テーブルによって構成されている利用者管理DB8002が構築されている。この利用者管理テーブルでは、組織ID毎に、利用者ID及び利用者IDで示される利用者の名称(利用者名)が関連付けられて管理されている。
(共用体管理テーブル)
図9(C)は、共用体管理テーブルを示す概念図である。記憶部8000には、図9(C)に示されているような共用体管理テーブルによって構成されている共用体管理DB8003が構築されている。この共用体管理テーブルでは、組織ID毎に、共用体を識別するための共用体ID及び共用体の名称(共用体名)が関連付けられて管理されている。
(共用体予約管理テーブル)
図10(A)は、共用体予約管理テーブルを示す概念図である。記憶部8000には、図10(A)に示されているような共用体予約管理テーブルによって構成されている共用体予約管理DB8004が構築されている。この共用体予約管理テーブルでは、各情報が関連付けられた状態の予約情報が管理されている。予約情報には、組織ID毎に、共用体ID、共用体名、予約者の利用者ID、利用開始予定日時、利用終了予定日時及びイベント名が含まれている。これらのうち、利用開始予定日時は、共用体の利用開始予定日時を示している。利用終了予定日時は、共用体の利用終了予定日時を示している。各日時は、年・月・日・時・分・秒・タイムゾーンを示しているが、図10(A)では紙面の関係上、年・月・日・時・分まで表している。
(イベント管理テーブル)
図10(B)は、イベント管理テーブルを示す概念図である。記憶部8000には、図10(B)に示されているようなイベント管理テーブルによって構成されているイベント管理DB8005が構築されている。このイベント管理テーブルでは、各情報が関連付けられた状態の予定情報が管理されている。予定情報には、組織ID毎に、利用者ID、利用者名、イベント開始予定日時、イベント終了予定日時及びイベント名が関連付けられて管理されている。これらのうち、イベント開始予定日時は、イベントを実行する場合の開示予定日時を示している。イベント終了予定日時は、イベントの実行する場合の終了予定日時を示している。各日時は、年・月・日・時・分・秒・タイムゾーンを示しているが、図10(B)では紙面の関係上、年・月・日・時・分まで表している。
(サーバ認証管理テーブル)
図11(A)は、サーバ認証管理テーブルを示す概念図である。記憶部8000には、図11(A)に示されているようなサーバ認証管理テーブルによって構成されているサーバ認証管理DB8006が構築されている。このサーバ認証管理テーブルでは、アクセスID及びアクセスパスワードが関連付けて管理されている。アクセスID及びアクセスパスワードは、共用支援サーバ6のアクセス管理DB6002で管理されているアクセスID及びアクセスパスワードと同じ概念である。
(プロジェクトメンバ管理テーブル)
図11(B)は、プロジェクトメンバ管理テーブルを示す概念図である。記憶部8000には、図11(B)に示されているようなプロジェクトメンバ管理テーブルによって構成されているプロジェクトメンバ管理DB8007構築されている。このプロジェクトメンバ管理テーブルでは、組織ID毎に、プロジェクトID、プロジェクト名及び各プロジェクトメンバの利用者IDが関連付けて管理されている。なお、プロジェクトメンバ管理テーブルは、利用者のPC5によって、スケジュール管理サーバ8にサインインした後に登録される。
(実行イベント履歴管理テーブル)
図12(A)は、実行イベント履歴管理テーブルを示す概念図である。記憶部8000には、図12(A)に示されているような実行イベント履歴管理テーブルによって構成されている実行イベント履歴管理DB8008が構築されている。この実行イベント履歴管理テーブルでは、プロジェクトID及び実行イベントID毎に、コンテンツ処理ID、コンテンツ処理の種類、コンテンツの内容、並びにコンテンツ処理の開始日時及び終了日時が関連付けられて管理されている。この実行イベント履歴管理DB8008は、コンテンツ管理DB6005と一部同じデータを管理している。同じデータは、実行イベントID、コンテンツ処理ID、コンテンツ処理の種類、コンテンツ処理の開始日時及び終了日時である。コンテンツの内容は、コンテンツデ-タの保存先の表記方法(http://またはc://)が異なるのみで、保存先は同じである。
(実行イベント管理テーブル)
図12(B)は、実行イベント管理テーブルを示す概念図である。記憶部8000には、図12(B)に示されているような実行イベント管理テーブルによって構成されている実行イベント管理DB8009が構築されている。この実行イベント管理テーブルでは、実行イベントID毎に、イベント名、イベントの開始日時及び終了日時が関連付けられて管理されている。この実行イベント管理DB8009は、イベント管理DB8005において管理されている予定情報のうち、実際に実行されたイベントに関する情報を管理している。
(スケジュール管理サーバの各機能構成)
次に、スケジュール管理サーバ8の各機能構成について詳細に説明する。なお、以下では、スケジュール管理サーバ8の各機能構成を説明するにあたって、図5に示されている各構成要素のうち、スケジュール管理サーバ8の各機能構成を実現させるための主な構成要素との関係も説明する。
図6に示されているスケジュール管理サーバ8の送受信部81は、図5に示されているCPU801からの命令、及び図5に示されているネットワークI/F809によって実現され、通信ネットワーク10を介して他の端末、装置、またはシステムと各種データ(または情報)の送受信を行う。
認証部82は、図5に示されているCPU801からの命令によって実現され、共用体から送られて来る情報(利用者ID、組織ID及びパスワード)が、利用者認証管理DB8001に予め登録されている情報であるかを判断することで、認証を行う。また、認証部82は、共用支援サーバ6から送られて来る情報(アクセスID及びアクセスパスワード)が、サーバ認証管理DB8006に予め登録されている情報であるかを判断することで、認証を行う。
記憶・読出処理部89は、図5に示されているCPU801からの命令、及び図5に示されているHDDコントローラ805によって実現され、記憶部8000に各種データを記憶したり、記憶部8000に記憶された各種データを読み出したりする処理を行う。
<音声テキスト変換サーバの機能構成>
音声テキスト変換サーバ9は、送受信部91、変換部93、及び記憶・読出処理部99を有している。これら各部は、図5に示されている各構成要素のいずれかが、HD904からRAM903上に展開されたプログラムに従ったCPU901からの命令によって動作することで実現される機能または機能する手段である。また、音声テキスト変換サーバ9は、図5に示されているHD904により構築される記憶部9000を有している。
(音声テキスト変換サーバの各機能構成)
次に、音声テキスト変換サーバ9の各機能構成について詳細に説明する。なお、以下では、音声テキスト変換サーバ9の各機能構成を説明するにあたって、図5に示されている各構成要素のうち、音声テキスト変換サーバ9の各機能構成を実現させるための主な構成要素との関係も説明する。
図6に示されている音声テキスト変換サーバ9の送受信部91は、図5に示されているCPU901からの命令、及び図5に示されているネットワークI/F909によって実現され、通信ネットワーク10を介して他の端末、装置、またはシステムと各種データ(または情報)の送受信を行う。
変換部93は、図5に示されているCPU901からの命令によって実現され、送受信部91により通信ネットワーク10を介して受信された音データを、テキストデータに変換する。
記憶・読出処理部99は、図5に示されているCPU901からの命令、及び図5に示されているHDDコントローラ905によって実現され、記憶部9000に各種データを記憶したり、記憶部9000に記憶された各種データを読み出したりする処理を行う。
なお、上記各IDは、識別情報の一例である。また、組織IDには、社名、事業所名、部署名、地域名等が含まれる。利用者IDには、社員番号、運転免許書番号、日本の社会保障・税番号制度におけるマイナンバー等が含まれる。
〔実施形態の処理または動作〕
以降、各実施形態の処理または動作について説明する。
<スケジュールの登録処理>
ここでは、図13乃至図16用いて、予約者A(理光太郎)がPC5からスケジュール管理サーバ8に自己のスケジュールを登録する処理について説明する。図13は、スケジュールの登録処理を示したシーケンス図である。図14は、サインイン画面を示した図である。図16は、スケジュール入力画面を示した図である。
まず、利用者AがPC5のキーボード511等を操作することで、PC5の表示制御部54が、図14に示されているように、ディスプレイ508上にサインインを行うためのサインイン画面530を表示させる(ステップS11)。このサインイン画面530には、利用者の利用者ID及び組織IDを入力する入力欄531、及びパスワードを入力する入力欄532、サインインを行う場合に押下されるサインインボタン533、サインインを中止する場合に押下されるキャンセルボタン534が含まれている。ここでは、利用者ID及び組織IDが、利用者Aの電子メールアドレスになっている。電子メールアドレスのユーザ名部分が利用者IDで、ドメイン名部分が組織IDを示している。なお、入力欄531は、電子メールアドレスではなく、利用者ID及び組織IDを別々に入力する入力欄であってもよい。
次に、利用者Aが、入力欄531に自己の利用者ID及び組織IDを入力し、入力欄532に自己のパスワードを入力し、サインインボタン533を押下すると、受付部52が、サインインの要求を受け付ける(ステップS12)。そして、PC5の送受信部51は、スケジュール管理サーバ8に対して、サインインの要求を示すサインイン要求情報を送信する(ステップS13)。このサインイン要求情報には、ステップS12によって受け付けられた情報(利用者ID、組織ID、及びパスワード)が含まれている。これにより、スケジュール管理サーバ8の送受信部81は、サインイン要求情報を受信する。
次に、スケジュール管理サーバ8の認証部82は、利用者ID、組織ID、及びパスワードを利用して利用者Aの認証を行なう(ステップS14)。具体的には、記憶・読出処理部89は、利用者認証管理DB8001(図9(A)参照)において、ステップS13によって受信された利用者ID、組織ID、及びパスワードの組に対応する利用者ID、組織ID及びパスワードの組を検索する。対応する組がある場合には、認証部82は、要求元の利用者Aを正当な利用者であると判断する。対応する組がない場合には、認証部82は、利用者Aを不当な(正当でない)利用者であると判断する。正当でない場合には、送受信部81がPC5に対して、正当でない旨の通知を行うが、ここでは、正当である場合について説明を続ける。
次に、送受信部81は、PC5に対して、認証結果を送信する(ステップS15)。これにより、PC5の送受信部51は、認証結果を受信する。
次に、PC5では、送受信部51によって正当である旨の認証結果が受信された場合、生成部56が初期画面を生成し、表示制御部54が、ディスプレイ508上に、図15に示されているような初期画面540を表示させる(ステップS16)。この初期画面540は、スケジュールを登録するための「スケジュール登録」ボタン541、及びアクションアイテムを閲覧するための「実行イベント履歴閲覧」ボタン543が含まれている。ここで、利用者が「スケジュール登録」ボタン541を押下すると、受付部52は、スケジュール登録を受け付ける(ステップS17)。そして、送受信部51は、スケジュール管理サーバ8に対して、スケジュール登録要求を送信する(ステップS18)。これにより、スケジュール管理サーバ8の送受信部81は、スケジュール登録要求を受信する。
次に、スケジュール管理サーバ8の記憶・読出処理部89は、ステップS13で受信された組織IDを検索キーとして利用者管理DB8002(図9(B)参照)を検索することにより、対応する全ての利用者ID及び全ての利用者名を読み出す(ステップS19)。そして、送受信部81は、PC5に対して、スケジュール入力画面情報を送信する(ステップS20)。このスケジュール入力画面情報には、ステップS19で読み出された全ての利用者ID及び全ての利用者名が含まれている。全ての利用者名には、ステップS12でサインインのための入力を行った利用者Aである予約者の名称(名前)も含まれている。これにより、PC5の送受信部51は、スケジュール入力画面情報を受信する。
次に、PC5では、生成部56がスケジュール入力画面を生成し、表示制御部24がディスプレイ508上に、図16に示されているようなスケジュール入力画面550を表示させる(ステップS21)。
このスケジュール入力画面550には、イベント名を入力するための入力欄551、共用体ID又は共用体名を入力するための入力欄552、イベントの実行(共用体の利用)開始予定日時を入力するための入力欄553、イベントの実行(共用体の利用)終了予定日時を入力するための入力欄554、アジェンダ等のメモを入力するための入力欄555、予約者名を表示するための表示領域556、予約者以外の他の参加者の参加者名を選択するための選択メニュー557、予約を登録する場合に押下されるための「OK」ボタン558、入力中又は入力された内容をキャンセルするための「CANCEL」ボタン559が含まれている。予約者名は、ステップS12でPC5にサインインのための入力を行った利用者の名称である。また、マウスポインタp1も表示されている。
なお、入力欄552には、電子メールアドレスを入力してもよい。また、選択メニュー557で、共用体名が選択されると、共用体も他の参加者として追加される。
次に、利用者Aが、入力欄551~555に所定の事項を入力し、マウスポインタp1を利用して選択メニュー557からイベントに参加させたい利用者の名称(利用者名)を選択し、「OK」ボタン558を押下すると、受付部52は、スケジュール情報の入力を受け付ける(ステップS22)。そして、送受信部51は、スケジュール管理サーバ8に対して、スケジュール情報を送信する(ステップS23)。このスケジュール情報には、イベント名、共用体ID(又は共用体名)、開始予定日時、終了予定日時、各参加者の利用者ID、及びメモが含まれている。なお、スケジュール入力画面550において、入力欄552に共用体IDが入力された場合には、この共用体IDが送信され、入力欄552に共用体名が入力された場合には、この共用体名が送信される。また、スケジュール入力画面550では、選択メニュー557で利用者名が選択されるが、ステップS20で利用者IDも受信されているため、利用者名に対応する利用者IDが送信される。これにより、スケジュール管理サーバ8の送受信部81は、スケジュール情報を受信する。
次に、スケジュール管理サーバ8では、ステップS23によって受信された共用体ID(又は共用体名)を検索キーとして共用体管理DB8003(図9(C)参照)を検索することにより、対応する共用体名(又は共用体ID)を読み出す(ステップS24)。
次に、記憶・読出処理部89は、共用体予約管理DB8004(図10(A)参照)に対して、予約情報を記憶する(ステップS25)。この場合、記憶・読出処理部89は、予め登録しているスケジューラで管理されている共用体予約管理DB8004の共用体予約管理テーブルに1レコード分の予約情報を追加する。予約情報は、ステップS23によって受信されたスケジュール情報、及びステップS24によって読み出された共用体名(又は共用体ID)に基づいて構成されている。なお、共用体予約管理DB8004における利用開始予定日時は、スケジュール情報における開始予定日時に相当する。また、共用体予約管理DB8004における利用終了予定日時は、スケジュール情報における終了予定日時に相当する。
更に、記憶・読出処理部89は、イベント管理DB8005(図10(B)参照)に対して、予定情報を記憶する(ステップS26)。この場合、記憶・読出処理部89は、予め登録しているスケジューラで管理されているイベント管理DB8005のイベント管理テーブルに1レコード分の予定情報を追加する。予定情報は、ステップS23によって受信されたスケジュール情報に基づいて構成されている。なお、イベント管理DB8005におけるイベント開始予定日時は、スケジュール情報における開始予定日時に相当する。また、イベント管理DB8005におけるイベント終了予定日時は、スケジュール情報における終了予定日時に相当する。
以上により、利用者Aは、スケジュール管理サーバ8に自己のスケジュールを登録することができる。
<イベント開始処理>
ここでは、図17乃至図22用いて、予約者A(理光太郎)が予約しておいた会議室Xで、電子黒板2を利用して他の参加者と会議をする処理について説明する。図17及び図19は、イベントの開始処理を示したシーケンス図である。図18は、共用体の予約リスト画面を示した図である。図20は、プロジェクトリスト画面を示した図である。図21は、イベントの詳細情報画面を示した図である。図22は、利用者が電子黒板を利用する状態を示したイメージ図である。
まず、利用者が電子黒板2の電源スイッチ222を押下することで、電子黒板2の受付部22が、利用者から電源ONを受け付ける(ステップS31)。この場合、受付部22によって電源ONが受け付けられることで、上述のLauncherが起動する。そして、電子黒板2の表示制御部24は、ディスプレイ220上にサインインを行うためのサインイン画面を表示させる。このサインイン画面には、利用者Aが自己のICカードを用いてサインインを行う場合に押下される選択アイコン、利用者Aが自己の電子メールアドレスおよびパスワードを入力することによってサインインを行う場合に押下される選択アイコン、およびサインインを行わずに電源OFFする場合に押下される電源アイコンが含まれている。
次に、利用者Aが、選択アイコンを押下して、ICカードリーダ等の近距離通信回路219に対する通信を行うか、又は、利用者Aが、選択アイコンを押下して、利用者Aによる自己の電子メールアドレスおよびパスワードを入力が行うことで、受付部22が、サインインの要求を受け付ける。
そして、送受信部21は、共用支援サーバ6に対して、サインイン要求を示すサインイン要求情報を送信する(ステップS32)。この場合、利用者が電源スイッチ222を押下するだけで、サインイン画面を表示させずに、送受信部21が自動的にサインイン要求情報を送信してもよい。このサインイン要求情報には、電子黒板2が設置されている国または地域のタイムゾーン情報、通信端末(ここでは電子黒板2)の利用者ID及び組織ID、パスワードが含まれている。これにより、共用支援サーバ6の送受信部61は、サインイン要求情報を受信する。
次に、共用支援サーバ6の認証部62は、利用者ID、組織ID及びパスワードを利用して利用者Aの認証を行なう(ステップS33)。具体的には、記憶・読出処理部69は、ステップS33によって受信された利用者ID、組織ID及びパスワードを検索キーとして、利用者認証管理DB6001(図7(A)参照)において、上記受信された利用者ID、組織ID及びパスワードの組に対応する利用者ID、組織ID及びパスワードの組を検索する。対応する組がある場合、認証部82は、要求元の利用者Aを正当な利用者であると判断する。対応する組がない場合、認証部82は、要求元の利用者Aを不当な(正当でない)利用者であると判断する。正当でない場合には、送受信部61が電子黒板2に対して、正当でない旨の通知を行うが、ここでは、正当である場合について説明を続ける。
次に、共用支援サーバ6の記憶・読出処理部69は、ステップS32で受信された組織IDを検索キーとしてアクセス管理DB6002(図7(B)参照)を検索することにより、対応するアクセスID及びアクセスパスワードを読み出す(ステップS34)。
次に、送受信部61は、スケジュール管理サーバ8に対して、共用体の予約情報の要求を示す予約要求情報及び利用者の予定情報の要求を示す予定要求情報を送信する(ステップS35)。予約要求情報及び予定要求情報には、ステップS32で受信された、タイムゾーン情報、通信端末の利用者ID及び組織ID、並びにステップS34で読み出された、アクセスID及びパスワードが含まれている。これにより、スケジュール管理サーバ8の送受信部81は、予約要求情報及び予定要求情報を受信する。
次に、スケジュール管理サーバ8の認証部82は、アクセスID及びアクセスパスワードを利用して共用支援サーバ6の認証を行なう(ステップS36)。具体的には、記憶・読出処理部89は、サーバ認証管理DB8006(図11(A)参照)において、ステップS35によって受信されたアクセスID及びアクセスパスワードの組に対応するアクセスID及びアクセスパスワードの組を検索する。対応する組がある場合、認証部82は、要求元の共用支援サーバ6を正当なアクセス者であると判断する。対応する組がない場合、認証部82は、要求元の共用支援サーバ6を不当な(正当でない)アクセス者であると判断する。正当でない場合には、送受信部81が共用支援サーバ6に対して、正当でない旨の通知を行うが、ここでは、正当である場合について説明を続ける。
スケジュール管理サーバ8の記憶・読出処理部89は、ステップS35によって受信された通信端末の利用者IDを検索キーとして、上記特定しているスケジューラで管理している共用体予約管理DB8004(図10(A)参照)を検索することにより、対応する予約情報を読み出す(ステップS37)。この場合、記憶・読出処理部89は、利用開始予定日時が本日である予約情報を読み出す。
さらに、記憶・読出処理部89は、ステップS35によって受信された通信端末の利用者IDを検索キーとして、上記特定しているイベント管理DB8005(図10(B)参照)を検索することにより、対応する予定情報を読み出す(ステップS38)。この場合、記憶・読出処理部89は、イベント開始予定日時が本日である予定情報を読み出す。スケジュール管理サーバ8が、電子黒板2等の通信端末とは別の国や地域にあった場合には、タイムゾーン情報に基づいて、タイムゾーンを通信端末が設置されている国や地域に併せて調整している。
次に、記憶・読出処理部89は、ステップS35によって受信された通信端末の利用者IDを検索キーとして、プロジェクトメンバ管理DB8007(図11(B)参照)を検索することにより、通信端末の利用者IDを含む全プロジェクトのプロジェクトID及びプロジェクト名を読み出す(ステップS39)。
次に、送受信部81は、共用支援サーバ6に対して、ステップS37で読み出された予約情報、ステップS38で読み出された予定情報、並びにステップS39で読み出された全プロジェクトID及び全プロジェクト名を送信する(ステップS40)。これにより、共用支援サーバ6の送受信部61は、予約情報、予定情報、全プロジェクトID及び全プロジェクト名を受信する。
次に、共用支援サーバ6の作成部63は、ステップS40によって受信された予約情報及び予定情報に基づいて、予約リストを作成する(ステップS41)。そして、送受信部61は、電子黒板2に対して、予約リストの内容を示す予約リスト情報、並びに、全プロジェクトID及び全プロジェクト名を送信する(ステップS42)。これにより、電子黒板2の送受信部21は、予約リスト情報、並びに、全プロジェクトID及び全プロジェクト名を受信する。
次に、電子黒板2では、表示制御部24が、ディスプレイ220上に、図18に示されているような予約リスト画面230を表示させる(ステップS43)。この予約リスト画面230には、共用体名(ここでは場所名)を表示する表示領域231、及び本日の日時を表示する表示領域232が含まれている。さらに、予約リスト画面230には、本日の本共用体(ここでは、会議室X)を利用するイベントを示すイベント情報235,236,237等が表示されている。各イベント情報には、イベント毎に、本共用体の利用開始予定時刻及び利用終了予定時刻、イベント名、本共用体を予約した予約者の名称(予約者名)が含まれている。イベント情報には、利用者が開始するイベントを特定する場合に押下される開始ボタン235s,236s,237s等が含まれている。
次に、図19において、利用者Aが、例えば、電子ペン2500等で開始ボタン235sを押下すると、受付部22が、イベント情報235で示されるイベントの選択を受け付ける(ステップS51)。そして、表示制御部24は、ステップS42によって受信されたプロジェクトID及びプロジェクト名に基づいて、ディスプレイ220上に、図20に示されているようなプロジェクトリスト画面240を表示させる(ステップS52)。プロジェクトリスト画面240には、各プロジェクトを示すプロジェクトアイコン241~246が含まれている。また、プロジェクトリスト画面240は、選択されたプロジェクトアイコンを確定する場合に押下されるための「OK」ボタン248、プロジェクトアイコンの選択をキャンセルするための「CANCEL」ボタン249が含まれている。
次に、図19において、利用者Aが、例えば、電子ペン2500等で、プロジェクトアイコン241を押下すると、受付部22が、プロジェクトアイコン241で示されるプロジェクトの選択を受け付ける(ステップS53)。
次に、電子黒板2の送受信部21は、共用支援サーバ6に対して、上記ステップS51で選択された予定イベントを示す予定イベントID、及び上記ステップS53で選択されたプロジェクトを示すプロジェクトIDを送信する(ステップS54)。ステップS54の処理は、実行イベント識別情報の送信要求処理である。これにより、共用支援サーバ6の送受信部61は、選択された予定イベントID及び選択されたプロジェクトIDを受信する。
次に、共用支援サーバ6では、生成部64が、固有の実行イベントIDを生成する(ステップS55)。そして、記憶・読出処理部69が、ステップS55で生成された実行イベントID、ステップS54で受信された予約イベントID、予約者の利用者ID及び組織ID、並びにイベント情報を関連付けて管理する(ステップS56)。なお、予約者の利用者ID及び組織ID、並びにイベント情報は、ステップS40で受信された予約情報及び予定情報に基づくID及び情報である。なお、この時点では、予約管理テーブル(図7(C)参照)における参加有無欄への入力はない。
次に、記憶・読出処理部69は、上記ステップS54によって受信されたプロジェクトID、及び上記ステップS55によって生成された実行イベントIDを関連付けて管理する(ステップS57)。そして、送受信部61は、電子黒板2に対して、ステップS55で生成された実行イベントIDを送信する(ステップS58)。これにより、電子黒板2の送受信部21は、実行イベントIDを受信する。
次に、電子黒板2では、記憶・読出処理部29は、記憶部2000に、実行イベントIDを記憶しておく(ステップS59)。そして、表示制御部24は、ディスプレイ220上に、図18に示されているように、選択されたイベントの詳細情報画面250を表示させる(ステップS60)。このイベントの詳細情報画面250には、イベント名の表示領域251、イベントの実施予定時間(開始予定時間及び終了予定時間)の表示領域252、及び予約者名の表示領域253が含まれている。更に、イベントの詳細情報画面250には、メモの内容を表示するための表示領域256、及び参加予定者名を表示するための表示領域257が表示されている。この表示領域257には、図15で示された予約者名及び選択された他の参加者名が表示されると共に、各参加予定者名には実際に会議に参加している人をチェックするためのチェックボックスが表示されている。また、イベントの詳細情報画面250の右下側には、この画面250を閉じるための「閉じる」ボタン259が含まれている。
次に、利用者が、参加予定者名のうち、実際に参加している利用者のチェックボックスにチェックして、「閉じる」ボタン259を押下すると、受付部22は、参加者の選択を受け付ける(ステップS61)。そして、送受信部21は、共用支援サーバ6に対して、各参加予定者の利用者ID及び参加の有無を示す情報を送信する(ステップS62)。これにより、共用支援サーバ6の送受信部61は、各参加予定者の利用者ID及び参加の有無を示す情報を受信する。
次に、共用支援サーバ6では、予定管理DB6003において、入力されていなかった参加有無欄に、参加の有無を記憶して管理する(ステップS63)。
以上により、利用者Aは、共用体(ここでは、会議室X)及び通信端末(ここでは、電子黒板2)を利用して、イベント(ここでは、方針決定会議)を開始する。そして、図22に示されているように、利用者Aは、会議室Xで、電子黒板2を利用して会議を行うことができる。なお、表示制御部24は、ディスプレイ220の右上領域に、本共用体を利用可能な残り時間を表示している。この場合、表示制御部24は、現在時刻から、ステップS51で選択されたイベント情報で示される終了予定時刻までの間の時間(残り時間)を表示する。
また、表示制御部24は、アクションアイテムを登録する場合に押下されるアイコンr1、及び実行イベント履歴を閲覧する場合に押下されるアイコンr2を表示する。
<実行イベント履歴の登録処理>
続いて、図23乃至図28を用いて、実行イベント履歴の登録処理について説明する。図23及び図24は、実行イベント履歴の登録処理を示したシーケンス図である。
まず、電子黒板2の判断部25は、開始されているイベントにおけるコンテンツの処理の種類を判断する(ステップS71)。具体的には、コンテンツが画像・音処理部23による録音によって生じる音データの場合には、判断部25は、コンテンツの処理の種類が「録音」であると判断する。コンテンツが画像・音処理部23によるスナップショット(キャプチャ)によって取得された画像データの場合には、判断部25は、コンテンツの処理の種類が「スナップショット」であると判断する。コンテンツが送受信部21によって送信された資料ファイルデータの場合には、判断部25は、コンテンツの処理の種類が「資料送信」であると判断する。
次に、送受信部21は、共用支援サーバ6へ、発生したコンテンツの登録要求を示す登録要求情報を送信する(ステップS72)。この場合、送受信部21は、コンテンツが発生するたびに自動的に登録要求情報を送信する。この登録要求情報には、実行イベントID、コンテンツの送信元の利用者ID、コンテンツデータ、コンテンツ処理の種類情報、コンテンツの処理(録音、スナップショット、送信)の開始日時及び終了日時が含まれている。これにより、共用支援サーバ6の送受信部61は、登録要求情報を受信する。
次に、共用支援サーバ6の判断部65は、送受信部61によって受信された登録要求情報に含まれる種類情報に基づいて、受信されたコンテンツ処理の種類を判断する(ステップS73)。そして、共用支援サーバ6の送受信部61は、判断部65によってコンテンツ処理の種類が「録音」であると判断された場合、音声テキスト変換サーバ9へ、コンテンツデータである音データを送信する(ステップS74)。これにより、音声テキスト変換サーバ9の送受信部91は、音データを受信する。なお、コンテンツ処理の種類が「録音」以外である場合、共用支援サーバ6は、ステップS74~ステップS76の処理は行わずに、ステップS77の処理へ移行する。
次に、音声テキスト変換サーバ9の変換部93は、送受信部91によって受信された音データを、テキストデータに変換する(ステップS75)。そして、送受信部91は、変換部93によって変換されたテキストデータを、共用支援サーバ6へ送信する(ステップS76)。これにより、共用支援サーバ6の送受信部61は、テキストデータを受信する。
次に、生成部64は、イベントにより発生したコンテンツ処理を識別するための固有のコンテンツ処理IDを生成する(ステップS77)。また、生成部64は、コンテンツの内容を示したコンテンツデータのURLを生成する(ステップS78)。そして、記憶・読出処理部69は、コンテンツ管理DB6005に対して、ステップS72で受信された実行イベントID毎に、コンテンツ処理の種類、コンテンツ処理の開始日時及び終了日時、ステップS77で生成されたコンテンツ処理ID、並びにステップS78で生成されたコンテンツの保存先を示すURLを関連付けて管理する(ステップS79)。
次に、図24において、共用支援サーバ6の記憶・読出処理部69は、ステップS72で受信された実行イベントIDを検索キーとして実行イベント管理DB6004を検索することにより、対応するプロジェクトIDを読み出す(ステップS91)。次に、記憶・読出処理部69は、コンテンツの送信元の利用者IDを検索キーとして利用者認証管理DB6001を検索することにより、対応する組織IDを読み出す(ステップS92)。
次に、記憶・読出処理部69は、ステップS92で読み出した組織IDを検索キーとしてアクセス管理DB6002を検索することにより、対応するアクセスID及びアクセスパスワードを読み出す(ステップS93)。
次に、送受信部61は、スケジュール管理サーバ8に対して、コンテンツデータの登録要求を示すコンテンツの登録要求情報を送信する(ステップS94)。このコンテンツの登録要求情報には、ステップS91で読み出されたプロジェクトID、ステップS72で受信された実行イベントID、送信元の利用者ID、コンテンツデータ、コンテンツ処理の開始日時及び終了日時、ステップS77で生成されたコンテンツ処理ID、ステップS78で生成されたコンテンツデータのURL、ステップS93で読み出されたアクセスID及びアクセスパスワードが含まれている。これにより、スケジュール管理サーバ8の送受信部81は、コンテンツの登録要求情報を受信する。
次に、スケジュール管理サーバ8では、認証部82が、アクセスID及びアクセスパスワードを利用して共用支援サーバ6の認証を行なう(ステップS95)。この認証は、ステップS36と同様の処理であるため、説明を省略する。ここでは、正当である場合について説明を続ける。
次に、記憶・読出処理部89は、実行イベント履歴管理DB8008に対して、ステップS94で受信された各種データ(情報)を記憶して管理する(ステップS96)。記憶・読出処理部89は、ステップS94によって受信されたプロジェクトID及び実行イベントIDに関連付けて、各種データ(情報)を、実行イベント履歴管理DB8008に記憶する。これにより、スケジュール管理サーバ8は、共用支援サーバ6側と同様の内容のデータを管理する。
以上により、電子黒板2は、所定のプロジェクトにおけるイベントのイベントIDと、対応するイベントが実行されたことによって生じたコンテンツを、スケジュール管理サーバ8へ送信することができる。また、スケジュール管理サーバ8は、受信したコンテンツを、プロジェクトIDに関連付けられたイベントIDごとに、実行イベント履歴管理DB8008に記憶することができる。これによって、共用システム1は、利用者にイベントの開始時に、どのプロジェクトに属するイベントかを選択させることで、イベントにより生じたコンテンツを、プロジェクトごとに記憶することができる。
(アクションアイテムの登録処理)
ここで、図25乃至図28を用いて、発生したコンテンツがアクションアイテムである場合の処理について説明する。図25は、アクションアイテムの登録処理を示したフローチャートである。図26は、アクションアイテムを認識する画面例である。図27は、アクションアイテムを実行する候補者リストを示す画面例である。図28は、アクションアイテムの期限日を選択するためのカレンダを示す画面例である。
まず、図22において、利用者が、アイコンr1を押下すると、受付部22は、アクションアイテムの登録要求を受け付ける(ステップS71-1)。次に、図26に示されているように、利用者が電子ペン2500を用いて、電子黒板2の描画画面260a上にアクションアイテム(ここでは「議事録を提出」)を描画した後に、アクションアイテムの内容を示した画像(描画像)261を線(指定領域)262で囲うと、受付部22は、画像261を含む所定領域の指定を受け付け、認識部26は、所定領域に含まれている画像261を認識する(ステップS71-2)。なお、図33は、画像(描画像)261が線(指定領域)262で囲まれる例を説明したが、認識部26は、指定領域262から任意の距離離れた領域を、画像261として認識する構成であってもよい。所定の領域の指定は、例えば、円または多角形のような予め設定された所定の形状を電子ペン2500によって描画されることによって行われる。
次に、表示制御部24は、図27に示されているように、描画画面260b上に、アクションアイテムの実行者の候補者リスト265を表示する(ステップS71-3)。そして、利用者は、電子ペン2500を用いて、アクションアイテムを実行する特定の実行者を選択すると、受付部22は、特定の実行者の選択を受け付ける(ステップS71-4)。
次に、表示制御部24は、図28に示されているように、描画画面260c上に、アクションアイテムの実行期限日の指定を受け付けるためのカレンダ267を表示する(ステップS71-4)。そして、利用者は、電子ペン2500を用いて、特定の期限日を選択すると、受付部22は、特定の期限日の選択を受け付ける(ステップS71-5)。なお、カレンダ267は、期限日指定画面の一例である。期限指定画面は、曜日等が記載されていない日付リスト等であってもよい。
このような処理によって、電子黒板2は、コンテンツ登録要求として、アクションアイテムの登録要求を示すコンテンツの登録要求情報を、共用支援サーバ6へ送信する。このコンテンツの登録要求情報には、アクションアイテムが発生したイベントを示す実行イベントID、ステップS71-4で選択されたアクションアイテムの実行者の利用者ID、ステップS71-2で認識されたアクションアイテムの画像データ(ここでは、「議事録を提出」の画像データ)、及びステップ306で受け付けられたアクションアイテムの実行の期限日が含まれている。すなわち、送受信部21は、所定領域内の画像のデータを実行されているイベントで生じたアクションアイテムの内容を示した画像データとして送信する。これにより、共用支援サーバ6の送受信部61は、コンテンツの登録要求情報を受信する。なお、共用支援サーバ6がコンテンツの登録要求情報を受信した後の処理は、図23及び図24で示した処理と同様であるため、説明を省略する。
<イベントの終了処理>
続いて、図29を用いて、実行中のイベントを終了する処理について説明する。図29は、イベントの終了処理を示したシーケンス図である。
図22において、利用者がディスプレイ220に表示されている画面を閉じることによって、受付部22は、実行されているイベントの終了を受け付ける(ステップS101)。
そして、送受信部21は、共用支援サーバ6に対して、実行イベントの開始日時及び終了日時を示す実行イベント開始終了情報を送信する(ステップS102)。この実行イベント開始終了情報には、実行イベントID、イベント名、イベントの開始日時、イベントの終了日時が含まれる。これにより、共用支援サーバ6の送受信部61は、実行イベント開始終了情報を受信する。
次に、共用支援サーバ6の送受信部61は、電子黒板2から送信された実行イベント開始終了情報を、スケジュール管理サーバ8へ送信する(ステップS103)。これによって、スケジュール管理サーバ8の送受信部81は、実行イベント開始終了情報を受信する。
そして、スケジュール管理サーバ8の記憶・読出処理部89は、実行イベント管理DB8009(図12(B)参照)に対して、ステップS103によって受信された実行イベント開始終了情報を記憶する(ステップS104)。この場合、記憶・読出処理部89は、実行イベント管理DB8009の実行イベント管理テーブルに1レコード分の実行イベント開始終了情報を追加する。
これにより、利用者は、実行されたイベントの開催時間(開始日時及び終了日時)を、スケジュール管理サーバ8に登録することができる。
<実行イベント履歴の閲覧処理>
続いて、図30乃至図35を用いて、実行イベント履歴の閲覧処理について説明する。図30及び図31は、実行イベント履歴の閲覧処理を示したシーケンス図である。図32は、PC上にプロジェクトリスト画面を示した図である。図33は、PC上に実行イベントリスト画面を示した図である。図34は、実行イベント履歴画面を示した図である。図35は、PC上にアクションアイテム画面を示した図である。なお、図31のステップS111~S116の処理は、図13のステップS11~S16の処理と同様であるため、説明を省略する。
次に、図15に示されている初期画面540において、利用者が「実行イベント履歴閲覧」ボタン543を押下すると、受付部52は、実行イベント履歴の閲覧を受け付ける(ステップS117)。
そして、送受信部51は、スケジュール管理サーバ8に対して、実行イベント履歴閲覧要求を示す実行イベント履歴閲覧要求情報を送信する(ステップS118)。これにより、スケジュール管理サーバ8の送受信部81は、実行イベント履歴閲覧要求情報を受信する。
次に、スケジュール管理サーバ8の記憶・読出処理部89は、ステップS113で受信された利用者ID及び組織IDを検索キーとしてプロジェクトメンバ管理DB8007を検索することにより、対応するプロジェクトID及びプロジェクト名を読み出す(ステップS119)。そして、送受信部81は、PC5に対して、プロジェクトID及びプロジェクト名を送信する(ステップS120)。
次に、PC5では、表示制御部54がディスプレイ508上に、図32に示されているようなプロジェクトリスト画面560を表示させる(ステップS121)。このプロジェクトリスト画面560は、図20に示されているように、電子黒板2で表示されたプロジェクトリスト画面240と同様の内容を示している。すなわち、図32のプロジェクトアイコン561~566、ボタン568,569は、それぞれ、図20のプロジェクトアイコン241~246、ボタン248,249に相当する。
次に、図32において、利用者Aが、例えば、マウス512等で、プロジェクトアイコン561を押下すると、受付部52が、プロジェクトアイコン561で示されるプロジェクトの選択を受け付ける(ステップS122)。
次に、PC5の送受信部51は、スケジュール管理サーバ8に対して、上記ステップS122で選択されたプロジェクトのプロジェクトIDを送信する(ステップS123)。これにより、スケジュール管理サーバ8は、プロジェクトIDを受信する。
次に、スケジュール管理サーバ8では、記憶・読出処理部89が、ステップS123で受信されたプロジェクトIDを検索キーとして実行イベント履歴管理DB8008を検索することにより、対応する実行イベントIDを読み出す(ステップS124)。この場合、記憶・読出処理部89は、ステップS123によって受信されたプロジェクトIDに関連付けられた、すべての実行イベントIDを読み出す。そして、記憶・読出処理部89は、ステップS124によって読み出された実行イベントIDを検索キーとして実行イベント管理DB8009を検索することにより、対応する実行イベント開始終了情報を読み出す(ステップS125)。この実行イベント開始終了情報は、実行イベントID、イベント名、開始日時及び終了日時が含まれる。
そして、送受信部81は、PC5に対して、ステップS125によって読み出された実行イベントID、イベント名、開始日時及び終了日時を送信する(ステップS126)。これにより、PC5の送受信部51は、実行イベントID、イベント名、開始日時及び終了日時を受信する。
次に、PC5では、表示制御部54は、ステップS126によって受信されたデータ(情報)に基づき、ディスプレイ508上に図33に示されているような実行イベントリスト画面570を表示させる(ステップS127)。図33に示されているように、実行イベントリスト画面570には、実行イベントを示す情報571~573が含まれている。例えば、実行イベントを示す情報571~573には、実行イベント名、イベントの開始日時及び終了日時が含まれている。実行イベントを示す情報571~573は、イベントの実行内容を示す履歴情報を表示させるための選択を受け付ける履歴情報選択領域の一例である。また、実行イベントリスト画面570の右下部分には、実行イベントリスト画面570を閉じる場合に押下される「閉じる」ボタン575が含まれている。さらに、実行イベントリスト画面570の左下部分には、アクションアイテムを閲覧する場合に押下される「アクションアイテム」ボタン577が含まれている。「アクションアイテム」ボタン577は、アクションアイテムを表示させるための選択を受け付けるアクションアイテム選択領域の一例である。
次に、PC5の受付部52は、実行イベントリスト画面570に含まれる実行イベントの選択を受け付ける(ステップS128)。具体的には、利用者が実行イベントリスト画面570に含まれる実行イベントを示す情報を選択した場合、受付部52が実行イベントを示す情報の選択を受け付ける。そして、PC5の送受信部51は、受付部52によって選択された実行イベントの実行イベントIDを、スケジュール管理サーバ8へ送信する(ステップS129)。これにより、スケジュール管理サーバ8の送受信部81は、実行イベントIDを受信する。
次に、スケジュール管理サーバ8の記憶・読出処理部89は、ステップS129によって受信された実行イベントIDを検索キーとして実行イベント履歴管理DB8008を検索することにより、対応する実行イベント履歴情報を読み出す(ステップS130)。この実行イベント履歴情報には、コンテンツ処理ID、コンテンツ処理の種類、コンテンツ処理の開始日時及び終了日時が含まれている。
そして、記憶・読出処理部89は、ステップS130によって読み出された実行イベント履歴の内容を示すコンテンツデータの保存先から、実行イベント履歴の内容を示すコンテンツデータを読み出す(ステップS131)。そして、送受信部81は、読み出されたコンテンツ処理ID、コンテンツ処理の種類、コンテンツ処理の開始日時及び終了日時並びにコンテンツデータを、PC5へ送信する(ステップS132)。これにより、PC5の送受信部51は、各種データ(情報)を受信する。なお、コンテンツ処理の開始日時及び終了日時は、第1の時間情報及び第2の時間情報の一例である。
次に、PC5の表示制御部54は、送受信部51によって受信されたデータ(情報)に基づいて、ディスプレイ508上に図34に示されているような実行イベント履歴画面580を表示させる(ステップS133)。また、PC5の音制御部58は、予め利用者AによってPC5に設定された再生箇所の音データを再生する。この場合、音制御部58は、受信されたコンテンツ処理の開始日時に関連付けられた音データに対応する再生箇所を、音データの再生箇所として設定する。
図34に示されているように、実行イベント履歴画面580には、実行されたイベントによって生じたコンテンツのデータが、コンテンツ処理の種類ごとに示されている。実行イベント履歴画面580には、録音データの再生箇所を表示する再生箇所表示領域581、音声テキストを表示するテキストデータ表示領域582、スナップショットを表示するスナップショット表示領域583、アクションアイテムを閲覧する場合に押下される「アクションアイテム」ボタン584、イベントで用いた資料を閲覧する場合に押下される「資料ファイル」ボタン585、及び後述のページネーション表示領域589を表示する場合に押下される「ページネーションボタン」588が含まれている。
ここで、再生箇所表示領域581には、音声データの全再生時間における再生箇所を示す再生ポインタ581pが表示されている。テキストデータ表示領域582には、テキストデータに係る画像582a,582b,582c,582d,582eが上から下に向けて時系列に表示されている。同様に、スナップショット表示領域583には、スナップショット(キャプチャ)画像583a,583b,583cが上から下に向けて時系列に表示されている。このように、テキストデータ表示領域582及びスナップショット表示領域583は、時系列に並列に表示されている。これにより、利用者は、例えば、画像583bを閲覧すれば、会議で円グラフを説明した時間帯を容易に把握することができるため、この画像583bと並列に表示されているテキストデータに係る画像582c,582dを容易に探し出すことができる。この場合、画像583a,583bは、ディスプレイ220全体のスナップショット画像である。また、画像583cは、上記ステップS71-2で画像認識(スナップショット)されたアクションアイテムの画像である。
なお、利用者が再生ポインタ581pを移動させた場合には、受付部52が移動を受け付けて、表示制御部54が、テキストデータ表示領域582及びスナップショット表示領域583の表示内容を、移動後の箇所の時間帯におけるテキストデータに係る画像及びスナップショット画像に変更する。
これにより、共用システム1は、同じプロジェクトに属するイベントにより生じた実行イベント履歴を、同じプロジェクトに属するメンバ間で簡単に共有することができる。また、共用システム1は、PC5に表示されるプロジェクト登録画面520を用いて、プロジェクトに属するメンバの登録または変更を行うことによって、利用者がプロジェクトごとに管理されている実行イベント履歴を閲覧するために、実行されたイベントごとの閲覧設定等の処理を省略することできる。
一方で、ステップS128において、PC5の受付部52が、実行イベントリスト画面570の「アクションアイテム」ボタン577の選択を受け付けた場合、表示制御部54は、ディスプレイ508上に図35に示されているようなアクションアイテム画面590を表示させる。図35に示されているように、アクションアイテム画面590には、アクションアイテム情報591~594が含まれている。例えば、アクションアイテム情報591には、図26で識別されたアクションアイテムの内容を示す画像、図27で選択された利用者名、及び図28で指定された期限日が含まれている。また、アクションアイテム画面590の右下部分には、アクションアイテム画面590を閉じる場合に押下される「閉じる」ボタン599が含まれている。図35に示されているアクションアイテム画面590には、ステップS122によって選択が受け付けられたプロジェクトIDに関連づけられているすべてのアクションアイテムが表示される。図34に示されている実行イベント履歴画面580において、受付部52が、「アクションアイテム」ボタン584の選択を受け付けた場合も、同様に、表示制御部54は、ディスプレイ508上にアクションアイテム画面590を表示させる。
なお、図30及び図31では、PC5によって実行イベント履歴を閲覧する場合について説明したが、図22において、利用者がアイコンr2を押下した場合であっても同様の処理によって、電子黒板2で実行イベント履歴を閲覧することができる。
<ページネーションの表示処理>
続いて、図36乃至図38を用いて、ページネーションの表示処理について説明する。図36は、ページネーションによる表示の変更処理を示す図である。図36及び図37は、PC上に実行イベント履歴画面を示した図である。
なお、ページネーション(Pagination)は、情報が複数ページに展開・分割されている場合に、そのページ間を移動するために設けられたナビゲーションである。例えば、Webページの場合、「ページネーション」は、内容の多いページを複数のページに分割し、各ページへのリンクを並べることを示す。「ページネーション」を用いることで、利用者がアクセスしやすくなり、利用者がどのページを見ているかを把握しやすくなる。なお、「ページネーション」は、「ページ分割」、「ページ送り」、「ページング」、「ページャ」とも称される。
図34において、利用者が「ページネーション」ボタン588を押下すると、受付部52が、「ページネーション」ボタン588の押下を受け付ける(ステップS133-1,YES)。これにより、表示制御部54は、図37に示されているように、実行イベント履歴画面580の下部に、ページネーション表示領域589を表示させる(ステップS133-2)。このページネーション表示領域589には、例えば、会議等のイベントにおけるコンテンツの発生時間帯(ここでは、5分毎)が示されており、再生ポインタ581pの再生箇所の時間と同じ発生時間帯が枠で囲まれている。なお、「ページネーション」ボタン588の押下を受け付けるまでは、受付部52は、押下の待ち状態となる(ステップS133-1,NO)。
この例では、利用者が「<<」ボタンを押すと、表示制御部54は再生箇所表示領域581及びテキストデータ表示領域582における表示内容を最初の時間00:00に移動させ、利用者が「>>」ボタンを押すと、表示制御部54は再生箇所表示領域581及びテキストデータ表示領域582における表示内容最後の時間1:00:00の時間帯に移動させる。また、利用者が「<」ボタンを押すと、表示制御部54は再生箇所表示領域581及びテキストデータ表示領域582における表示内容を現在の時間帯から5分前の時間帯に移動させ、利用者が「>」ボタンを押すと、表示制御部54は再生箇所表示領域581及びテキストデータ表示領域582における表示内容を現在の時間帯から5分後の時間帯に移動させる。
なお、図37の例では、5分毎にページを分割しているが、1分毎や10分毎等の所定時間毎にページを分割してもよい。また、利用者が所定時間を設定するようにしてもよい。また、図37では、時間単位による所定時間を示しているが、会議等のイベントが日、月、年での行なわれることが想定される場合に、日単位(1/1,1/2,1/3,・・・)による所定日、月単位(1月、2月、3月・・・)等の所定月、年単位(2018年、2019年、2020年、・・・)による所定年にしてもよい。さらに、利用者が、時間単位、日単位、月単位、年単位のいずれかを設定するようにしてもよい。
次に、利用者が、マウス507等でマウスポインタp1を移動させて、例えば、図38に示されているように、「10:00」の発生時間帯を選択すると、受付部52が、発生時間帯の変更を受け付ける(ステップS133-3,YES)。これにより、表示制御部54は、図38に示されているように、テキストデータ表示領域582内において、生成部56によって生成された変更後の発生時間帯におけるテキストデータに係る画像582f,582g,582h,582i,582jを上から下に向けて時系列に表示すると共に、スナップショット表示領域583内において、生成部56によって生成されたスナップショット(キャプチャ)画像583d,583e,583fを上から下に向けて時系列に表示させる(ステップS133-4)。更に、このステップS133-4において、表示制御部54が、再生箇所表示領域581において、全再生時間における変更後の再生箇所に再生ポインタ581pを移動(変更)させる。
なお、図30乃至図38に示されている処理及び画面例は、PC5だけでなく、電子黒板2、ビデオ会議端末3、及びカーナビゲーション装置4においても同様の処理及び同様の画面の表示を行ってもよい。
〔実施形態の主な効果〕
本実施形態によれば、図34に示されているように、テキストデータ表示領域582及びスナップショット表示領域583は、時系列に並列に表示されている。これにより、利用者は、例えば、画像583bを閲覧すれば、会議で円グラフを説明した時間帯を容易に把握することができるため、この画像583bと並列に表示されているテキストデータ582c,582dを容易に探し出すことができる。
また、表示制御部54は、図34において、スナップショット表示領域583内に、ディスプレイ220全体のスナップショット画像583a,583bと同等の扱いで、上記ステップS71-2で画像認識(スナップショット)されたアクションアイテムの画像583cを表示させる。これにより、利用者は、アクションアイテムが会議等のイベントの実行時間内のどの時間帯で発生したか、及びどのような話をしている最中に発生したかを容易に把握することができる。
更に、図37及び図38に示されているように、利用者は、ページネーションにおける発生時時間帯から、容易にスナップショットにより取得された画像データに係る画像を探し出し、更に左側に表示されているコンテンツデータに係る画像を探し出すことができる。
図26、図27、及び図28に示されているように、利用者は会議で使用中の電子黒板2で、アクションアイテムの内容、アクションアイテムの実行者、及び期限日を設定することができる。これにより、会議等で発生したアクションアイテムの実行漏れを防ぐため、利用者は、PC5等を使用して、スケジューラのサーバ等にアクセスしてアクションアイテムを登録する必要がなく、手間が掛かることを抑制することができるという効果を奏する。
また、図26に示されているように、利用者は、電子ペン2500で描画したアクションアイテムの内容を示した画像(ここでは「議事録を提出」)261を線262で囲うだけで、電子黒板2はアクションアイテムの画像であると認識するため、アクションアイテムの内容を容易に特定することができるという効果を奏する。
更に、図27に示されているように、電子黒板2は、アクションアイテムを実行する各候補者を示す候補者リスト265を表示して、利用者の選択を促すため、利用者は、わざわざ実行者名を入力する必要がないという効果を奏する。
また、図28に示されているように、電子黒板2は、アクションアイテムの実行期限日を選択するカレンダ267を表示して、利用者の選択を促すため、利用者は、わざわざ期限日を入力する必要がないという効果を奏する。
1 共用システム
2 電子黒板(通信端末の一例)
3 ビデオ会議端末(通信端末の一例)
4 カーナビゲーション装置(通信端末の一例)
5 PC(通信端末の一例)
6 共用支援サーバ(管理システムの一例)
8 スケジュール管理サーバ(管理システムの一例)
9 音声テキスト変換サーバ
10 通信ネットワーク
21 送受信部
23 画像・音処理部(画像処理手段の一例、音処理手段の一例)
51 送受信部
52 受付部(受付手段の一例)
54 表示制御部(表示制御手段の一例)
508 ディスプレイ(表示手段の一例)
特開2016-105241号公報 特開2017-129720号公報

Claims (10)

  1. 実行されたイベントにおいて発生した音声データから変換されたテキストデータ及び前記イベントにおいてスナップショットによって発生した画面の画像データに係る画像を、それぞれ発生時間順に並列に表示手段に表示させる表示制御手段を有することを特徴とする通信端末。
  2. 前記画像には、前記イベントで発生したアクションアイテムの内容を示す画像が含まれていることを特徴とする請求項1に記載の通信端末。
  3. 共用体で行われる前記イベントで発生した前記音声データ及び前記画像データを管理する管理システムと通信可能な請求項1又は2に記載の通信端末であって、
    前記管理システムよって送信された、前記テキストデータ、及び前記音声データから当該テキストデータに変換された時間に関する第1の時間情報、並びに、前記画像データ、及び当該画像データが発生された時間に関する第2の時間情報を受信する受信手段を有し、
    前記表示制御手段は、前記受信手段によって受信された、前記テキストデータ、前記第1の時間情報、前記画像データ、及び前記第2の時間情報に基づいて、前記テキストデータ及び前記画像データを、それぞれ発生時間順に並列に表示手段に表示させることを特徴とする通信端末。
  4. 前記表示制御手段は、前記音声データの全再生時間における再生箇所を表示することを特徴とする請求項1乃至3のいずれか一項に記載の通信端末。
  5. 請求項4に記載の通信端末であって、
    前記再生箇所の変更を受け付ける受付手段を有し、
    前記表示制御手段は、前記変更で示される時間に対応する前記テキストデータ及び画像データを、それぞれ発生時間順に並列に前記表示手段に表示させることを特徴とする通信端末。
  6. 前記通信端末は、パーソナルコンピュータであることを特徴とする請求項1乃至5のいずれか一項に記載の通信端末。
  7. 前記通信端末は、
    収音した音声から前記音声データを作成する音処理手段と、
    描画された画像から前記画像データを作成する画像処理手段と、
    を有する電子黒板であることを特徴とする請求項1乃至5のいずれか一項に記載の通信端末。
  8. 請求項1乃至7のいずれか一項に記載の通信端末と、
    前記共用体で行われる前記イベントで発生した前記音声データ及び前記画像データを管理する管理システムと、
    を有する共用システムであって、
    前記管理システムは、前記通信端末が受信するように、前記テキストデータ、及び前記音声データから当該テキストデータに変換された時間に関する第1の時間情報、並びに、前記画像データ、及び当該画像データが発生された時間に関する第2の時間情報を送信することを特徴とする共用システム。
  9. 実行されたイベントにおいて発生した音声データから変換されたテキストデータ及び前記イベントにおいてスナップショットによって発生した画面の画像データに係る画像を、それぞれ発生時間順に並列に表示手段に表示させることを特徴とする表示方法。
  10. コンピュータに、請求項9に記載の方法を実行させるプログラム。
JP2023134382A 2018-04-20 2023-08-22 通信端末、管理システム、表示方法、及びプログラム Pending JP2023166433A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2018081617 2018-04-20
JP2018081617 2018-04-20
JP2019075767A JP7338214B2 (ja) 2018-04-20 2019-04-11 通信端末、管理システム、表示方法、及びプログラム

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2019075767A Division JP7338214B2 (ja) 2018-04-20 2019-04-11 通信端末、管理システム、表示方法、及びプログラム

Publications (1)

Publication Number Publication Date
JP2023166433A true JP2023166433A (ja) 2023-11-21

Family

ID=66476358

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2023134382A Pending JP2023166433A (ja) 2018-04-20 2023-08-22 通信端末、管理システム、表示方法、及びプログラム

Country Status (3)

Country Link
US (2) US11669534B2 (ja)
EP (1) EP3557440A1 (ja)
JP (1) JP2023166433A (ja)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7302270B2 (ja) 2019-05-10 2023-07-04 株式会社リコー 表示端末、共用システム、表示制御方法およびプログラム
EP3886005A1 (en) * 2020-03-23 2021-09-29 Ricoh Company, Ltd. Information processing system, user terminal, method of processing information, and carrier means
US11625155B2 (en) * 2020-03-23 2023-04-11 Ricoh Company, Ltd. Information processing system, user terminal, method of processing information
US11349888B2 (en) 2020-03-31 2022-05-31 Ricoh Company, Ltd. Text data transmission-reception system, shared terminal, and method of processing information
JP2021163250A (ja) 2020-03-31 2021-10-11 株式会社リコー 会議登録システム、ユーザ端末、管理システム、情報処理方法、及びプログラム
US11822873B2 (en) * 2020-12-14 2023-11-21 Citrix Systems, Inc. Document generation from applications
US11868607B2 (en) 2022-03-10 2024-01-09 Ricoh Company, Ltd. Display apparatus, display method, and non-transitory recording medium

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8635531B2 (en) * 2002-02-21 2014-01-21 Ricoh Company, Ltd. Techniques for displaying information stored in multiple multimedia documents
US20060203278A1 (en) 2005-03-10 2006-09-14 Kabushiki Kaisha Toshiba Multi-function terminal device, document data management method and document data management program
US7554576B2 (en) * 2005-06-20 2009-06-30 Ricoh Company, Ltd. Information capture and recording system for controlling capture devices
US8639032B1 (en) * 2008-08-29 2014-01-28 Freedom Scientific, Inc. Whiteboard archiving and presentation method
JP2012043046A (ja) 2010-08-16 2012-03-01 Konica Minolta Business Technologies Inc 議事録作成システムおよびプログラム
US9858271B2 (en) * 2012-11-30 2018-01-02 Ricoh Company, Ltd. System and method for translating content between devices
US20150149540A1 (en) * 2013-11-22 2015-05-28 Dell Products, L.P. Manipulating Audio and/or Speech in a Virtual Collaboration Session
JP6447066B2 (ja) 2014-12-01 2019-01-09 株式会社リコー 画像処理装置、画像処理方法、及びプログラム
US9779389B2 (en) * 2015-03-24 2017-10-03 Getgo, Inc. Generation of screenshots for a visual summary of an online meeting under diverse and/or varying network and/or client computer performance conditions
US20160349928A1 (en) * 2015-05-27 2016-12-01 International Business Machines Corporation Generating summary of activity on computer gui
JP6746923B2 (ja) 2016-01-20 2020-08-26 株式会社リコー 情報処理システム、情報処理装置、情報処理方法および情報処理プログラム
US10121474B2 (en) * 2016-02-17 2018-11-06 Microsoft Technology Licensing, Llc Contextual note taking
JP2018032912A (ja) * 2016-08-22 2018-03-01 株式会社リコー 情報処理装置、情報処理方法、情報処理プログラムおよび情報処理システム

Also Published As

Publication number Publication date
EP3557440A1 (en) 2019-10-23
US20190324963A1 (en) 2019-10-24
US20230259513A1 (en) 2023-08-17
US11669534B2 (en) 2023-06-06

Similar Documents

Publication Publication Date Title
JP2023166433A (ja) 通信端末、管理システム、表示方法、及びプログラム
JP7302270B2 (ja) 表示端末、共用システム、表示制御方法およびプログラム
JP7205697B2 (ja) 通信端末、共用システム、表示制御方法およびプログラム
US20190327104A1 (en) Communication terminal, sharing system, data transmission control method, and recording medium
US20200259673A1 (en) Shared terminal, sharing system, sharing assisting method, and non-transitory computer-readable medium
US11049053B2 (en) Communication terminal, sharing system, communication method, and non-transitory recording medium storing program
JP7338214B2 (ja) 通信端末、管理システム、表示方法、及びプログラム
JP7413660B2 (ja) 通信端末、共用システム、記憶制御方法およびプログラム
JP7338211B2 (ja) 通信端末、共用システム、通信方法およびプログラム
JP7371333B2 (ja) 共用支援サーバ、共用システム、共用支援方法、及びプログラム
JP7284449B2 (ja) 表示端末、表示制御方法およびプログラム
JP7087556B2 (ja) 共用支援サーバ、共用システム、支援方法、及びプログラム
JP7322480B2 (ja) 通信端末、管理システム、表示方法、及びプログラム
JP7395825B2 (ja) 表示端末、共用システム、表示制御方法およびプログラム
JP2020095689A (ja) 表示端末、共用システム、表示制御方法およびプログラム
JP7255243B2 (ja) 通信端末、共用システム、通信方法、及びプログラム
JP7115014B2 (ja) 情報処理装置、共用システム、表示方法およびプログラム
JP7395845B2 (ja) 共用システム
JP7183558B2 (ja) 共用支援サーバ、共用システム、共用支援方法、及びプログラム
JP7380109B2 (ja) 情報処理装置、通信システム、情報処理方法およびプログラム
JP7413735B2 (ja) サーバ装置、情報処理方法および情報処理システム
JP2019175444A (ja) 通信端末、共用システム、通信方法、及びプログラム
JP2023176774A (ja) 情報処理装置、表示方法、通信システム、プログラム
US20190306031A1 (en) Communication terminal, sharing system, communication method, and non-transitory recording medium storing program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230915

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20231023

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20240313

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240319