以下、本発明の実施の形態の1つにおける電子会議システムについて説明する。
電子会議システムは、端末装置、表示装置、及びサーバとして機能するMFP(画像形成装置)などで構成されている。各装置は、ネットワークを介して接続されている。端末装置は、無線接続により、ネットワークに接続されている。
端末装置は、例えば、電子ペーパーやディスプレイなどのタッチパネルを有するものである。端末装置は、タッチ操作可能な操作表示部(例えば複数か所を同時にタッチ操作できるいわゆるマルチタッチ型のもの)、画像又は文書を記憶する記憶部、指向性が比較的高く表示装置との間で位置検出するための通信部、表示装置やサーバなどと画像データや画像サイズ情報の通信が可能な転送部、及び各部の制御を行う制御部などを有している。
表示装置は、例えば、電子黒板、ホワイトボード、又はディスプレイなどである。表示装置は、表示部、通信部、位置特定部や端末特定部として機能する制御部、抽出部、記憶部、転送部などを有している。表示部には、端末装置から送信された画像や、電子ペンなどにより直接記入された画像などが表示される。通信部は、表示画面上の多数位置に埋め込まれている。通信部は、指向性が比較的高く、端末装置との間で端末装置が近接したこと(接近したこと又は接触したことの)を検出する。位置特定部は、表示画面上での端末装置の接触位置を特定する。端末特定部は、表示部に近接した端末を特定する。抽出部は、近接した位置(以下、接触位置ということがある)を基準に、表示部の画像のうち所定領域の画像を切り出す。記憶部は、表示部に表示する画像データや所定領域の画像データなどを記憶する。転送部は、端末装置やサーバなどと画像データや画像サイズ情報の通信を行う。
サーバとしてのMFPは、画像を印刷(プリント)するための部位のほか、画像又は文書を記憶する記憶部、制御部、及び端末装置や表示装置などと画像データの通信を行う転送部などを有している。MFPは、用紙などをローラにより搬送しその用紙に印刷を行うプリント機能や、文書データなどを記憶部などに保存するサーバ機能などを有している。
本実施の形態において、例えば表示装置は、取り込み機能を実行する電子会議支援装置として機能する。取り込み機能によれば、ユーザは、表示装置の表示部に表示されている画像のうち所望の位置に端末装置をかざすことで、その画像データを端末装置に取り込むことができる。なお、例えばMFPが電子会議支援装置として機能するようにしたり、端末装置が電子会議支援装置として機能したりするようにしてもよい。
取り込み機能は、次のようにして行われる。すなわち、端末装置が表示部に近接すると、表示装置が、端末装置が表示部に近接していることを検知する。表示装置は、端末装置が近接している位置を特定し、特定した位置を基準に、所定領域に表示されている画像を抽出する(画像を切り出す)。また、表示装置は、接触した端末を特定する。抽出された画像は、特定された端末装置に送られ、端末装置に取り込まれる。
複数人で表示装置を用いながら意見集約を行うような電子会議の場において、参加者であるユーザは、直感的に、表示部に表示されている画像の一部のデータを容易に取り出すことができる。ユーザの操作性が高くなり、電子会議システムの利便性が向上する。
なお、端末装置において、予め取り込みたい表示画像の大きさを設定できるようにしてもよい。このとき、表示装置は、端末装置で設定された大きさに基づき、特定された位置に表示されている情報を切り出す制御を行う。
また、端末装置に取り込まれる画像は、表示部に表示されている各画像の属性に応じて制限されるようにしてもよい。例えば、端末装置に取り込まれる画像は、種々の端末装置などにより貼り付けられた画像のみに制限されるように制御されてもよい。このとき、あるユーザが保持する特定の端末装置に取り込み可能な画像としては、その端末装置により貼り付けられた画像に制限されるようにしてもよいし、他ユーザが保持する端末により貼り付けられた画像に制限されるようにしてもよい。また、取り込み可能な画像をこのように制限するか否か、ユーザやその他の管理者が選択し、その選択結果に基づいて、表示装置が端末装置に送信する画像を制限するようにしてもよい。
端末装置において、上述のようにして取り込んだ画像についての編集などが行われたとき、その編集された画像を、端末装置を表示部に近接させることで表示部の画像に貼り付けられるようにしてもよい。
[実施の形態]
図1は、本発明の実施の形態の1つにおける電子会議システムの構成を示すブロック図である。
図1に示されるように、電子会議システム11は、例えばネットワーク801にそれぞれ接続された複数の装置を有している。すなわち、電子会議システム11は、MFP(サーバ;画像形成装置)101と、複数の端末装置201と、表示装置301と、複数のPC401などを有している。複数の端末装置201としては、例えば、第1の端末装置(端末装置1)201a、第2の端末装置(端末装置2)201b、…、第nの端末装置(端末装置n)201などが用いられている。ここでは、これらを区別せず、それぞれを端末装置201という。また、複数のPC401としては、例えば、第1のPC(PC1)401a、第2のPC(PC2)401b、…、第nのPC(PCn)401などが用いられている。ここでは、これらを区別せず、それぞれをPC401という。
ネットワーク801は、例えば構内情報通信網(LAN)である。MFP101、表示装置301、及びPC401などは、それぞれ、例えば有線通信可能にネットワーク801に接続されている。これらの機器は、無線通信可能にネットワーク801に接続されていてもよい。他方、端末装置201は、無線通信可能にネットワーク801に接続されている。端末装置201は、ユーザが手に持って自由に移動できる携帯可能なものである。
[MFP101の構成]
図2は、MFP101を示す斜視図である。図3は、MFP101のハードウェア構成を示すブロック図である。
図2に示すように、MFP101は、給紙カセット103と、排紙トレイ105と、操作パネル111と、制御部121と、印刷部131と、スキャナ部141とを備える。制御部121は、MFP101の動作を制御する。制御部121、印刷部131、及びスキャナ部141などは、MFP101の筐体の内部に配置されている。
このMFP101は、3つの給紙カセット103(給紙カセット103a,103b,103c)を有している。それぞれの給紙カセット103には、例えば、互いに異なるサイズの用紙(B5サイズ、A4サイズ、及びA3サイズなど)が装てんされている。給紙カセット103は、MFP101の下部に、MFP101の筐体に抜き差し可能に配置されている。各給紙カセット103に装てんされた用紙は、印字時に、1枚ずつ給紙カセット103から給紙され、印刷部131に送られる。なお、給紙カセット103の数は3つに限られず、それより多くても少なくてもよい。
排紙トレイ105は、MFP101の筐体のうち印刷部131が収納されている部位の上方でスキャナ部141が配置されている部位の下方に配置されている。排紙トレイ5には、印刷部131により画像が形成された用紙が筐体の内部から排紙される。
印刷部131は、大まかに、トナー像形成部(図示せず)と、用紙搬送部(図示せず)と、定着装置(図示せず)とを有している。印刷部131は、例えば電子写真方式で用紙に画像を形成する。
用紙搬送部は、給紙ローラ、搬送ソーラ、及びそれらを駆動するモータなどで構成されている。用紙搬送部は、用紙を給紙カセット103から給紙して、MFP101の筐体の内部で搬送する。また、用紙搬送部は、画像が形成された用紙をMFP101の筐体から排紙トレイ105などに排出する。
定着装置は、加熱ローラ及び加圧ローラを有している。定着装置は、加熱ローラと加圧ローラとでトナー像が形成された用紙を挟みながら搬送し、その用紙に加熱及び加圧を行う。これにより、定着装置は、用紙に付着したトナーを溶融させて用紙に定着させ、用紙に画像を形成する。
スキャナ部141は、MFP101の筐体の上部に配置されている。スキャナ部141は、ADF(Auto Document Feeder)143を有している。スキャナ部141は、上述のスキャナ機能を実行する。スキャナ部141は、透明な原稿台に配置された原稿をコンタクトイメージセンサにより走査して、それを画像データとして読み取る。また、スキャナ部141は、原稿トレイにセットされた複数の原稿を1枚ずつADF143により順次取り込みながら、コンタクトイメージセンサにより原稿を読み取り、画像データとする。
スキャナ部141により読み取られた画像は、制御部121により、仕上がり画像に変換される。制御部121は、生成した仕上がり画像を外部装置などに送信したり、仕上がり画像に基づいて印刷部131により用紙に画像を形成したりできる。例えば、制御部121は、読み取られた画像を、表示装置301に送り、表示装置301で表示させたりすることができる。
操作パネル111は、MFP101の上部前面(図2において正面)側に配置されている。操作パネル111には、ユーザにより押下操作可能な操作ボタンが配置されている。また、操作パネル111には、情報をユーザに表示する表示部112が配置されている。
図3に示されるように、MFP101は、上述の各部のほか、画像処理部123と、記憶部125と、転送部151とを有している。
制御部121は、MFP101の各部に、信号を送受可能に接続されている。制御部121は、例えば、CPU,ROM,RAMなどで構成されている。制御部121のROMなどには、例えば、MFP101の制御プログラム121aが記憶されている。制御部121は、制御プログラム121aなどを実行することにより、MFP101の種々の動作を制御する。
画像処理部123は、制御部121により制御されて、スキャナ部141により読み取られた画像や外部装置から送られた画像などについて、画像処理を実行する。
記憶部125は、例えば、HDD(Hard Disk Drive)などである。記憶部125は、いわゆるBOXと呼ばれ、MFP101に接続されている外部装置などから送られた印刷ジョブのデータや、スキャナ部141で読み取った画像データなどを記憶する。記憶部125には、MFP101の設定情報や、その他の制御プログラムなどが記憶されていてもよい。
転送部151は、例えばネットワークインターフェイスである。転送部151は、ネットワーク801に接続されている外部の中継装置などに、LANケーブルなどを介して接続されている。転送部151は、MFP101をネットワーク801に接続する。
操作パネル111の表示部112は、タッチパネルである。表示部112は、例えば、液晶ディスプレイ(LCD)である。表示部112は、ユーザに案内画面を表示したり、操作ボタンを表示してユーザからのタッチ操作を受け付けたりする。ユーザが表示部112に触れたとき、その情報が制御部121に送られ、制御部121は、その情報に基づいて、操作パネル111の制御を行う。すなわち、ユーザは、表示部112に触れて操作を加えることで、操作パネル111の操作を行うことができる。
[端末装置の構成]
図4は、端末装置201のハードウェア構成を示すブロック図である。
図4を参照して、端末装置201は、操作表示部211と、制御部221と、記憶部225と、転送部251と、端末通信部261などを有している。本実施の形態において、端末装置201は、例えば、いわゆるタブレット型の携帯端末である。なお、端末装置201は、例えば、携帯電話機や、ラップトップ型パーソナルコンピュータや、携帯型ゲーム機など、いずれの携帯型端末であってもよい。
操作表示部211は、例えば、液晶タッチパネルである。制御部221による制御に基づいて、操作表示部211に種々の画像や端末装置の操作を行うための操作画像などが表示される。ユーザは、操作表示部211に表示されている操作画像についてタッチ操作などを行うことで、端末装置201に対して指令を行い、端末装置201に所望の動作を実行させることができる。
制御部221は、制御部121と同様に、CPU,ROM,RAMなどを有している。制御部221は、ROMなどに記憶されている制御プログラム221aを実行することで、端末装置201の種々の動作を制御する。
記憶部225は、例えば、フラッシュメモリである。記憶部225には、端末装置201で実行させる種々のプログラムや、各プログラムに用いられる文書データや画像データなどが記憶されている。なお、記憶部225は、例えばHDDであってもよい。
転送部251は、例えばネットワークインターフェイスである。本実施の形態において、転送部251は、いわゆる無線LANを介してネットワーク801に接続されている。これにより、端末装置201は、ネットワーク801との間で無線通信可能である。
端末通信部261は、例えば、近距離無線通信技術を用いて他の通信部との間で機器間相互通信などを行えるように構成されている。端末通信部261は、後述のように端末装置201が表示装置301に近接したとき、表示装置301側の通信部361(図5に示す。)との間で通信を行う。
[表示装置301の構成]
図5は、表示装置301のハードウェア構成を示すブロック図である。
図5を参照して、表示装置301は、表示部311と、制御部321と、記憶部325と、転送部351と、複数の通信部361と、抽出部371とを有している。表示装置301は、いわゆる電子黒板であって、表示部311に、種々の画像を表示させたり、ユーザによる表示部311への書き込みを反映させたりする。
表示部311は、例えば、プロジェクタ(図示せず)により画像が投影表示されるスクリーンである。表示部311は、例えば、対応する電子ペンやユーザの指が表示部311上に触れたとき、そのこと及びその位置を検知可能である。
制御部321は、CPU,ROM,RAMなどで構成されている。制御部321のROMなどには、制御プログラム321aが記憶されている。制御部321は、制御プログラム321aを実行することで、表示装置301の制御を行う。
記憶部325は、例えば不揮発性メモリやHDDなどである。記憶部325には、表示装置311が表示する画像や文書などの情報が記憶されている。制御部321は、記憶部325などに記憶されている情報に基づいて、表示部311に画像を表示させたり、その他の制御などを行ったりする。記憶部325には、例えば、MFP101や端末装置201などから送信された、表示部311に表示するための情報を記憶できる。
転送部351は、例えば、MFP101の転送部151と同様のネットワークインターフェイスである。転送部351は、表示装置301をネットワーク801に接続する。これにより、表示装置301は、MFP101、端末装置201、及びPC401などと、ネットワーク801を介して通信可能である。
抽出部371は、後述のように、表示部311に表示される画像の所定の領域の切り出し、すなわち抽出処理を行う。抽出部371は、後述のような取り込み機能の実行時に、抽出処理を行う。
図6は、表示装置301の概略構成を示す正面図である。
図6を参照して、複数の通信部361は、表示装置301の表示部311に、m行n列のマトリクス状に配置されている。すなわち、複数の通信部361は、略水平方向にn個(例えば、最上段は通信部(1,1)〜(n,1))が並び、縦方向にm個(例えば、再左列は通信部(1,1)〜(1,m))が並ぶようにして設けられている。各通信部361は、表示部311の表示面の背面に配置されている。すなわち、実際には、図6に示されるように表示部311よりも手前側に露出しているわけではない。
各通信部361は、制御部321に接続されている。制御部321は、複数の通信部361のうち、いずれにより通信が行われているか、通信が行われたかを把握可能である。
図7は、表示装置301に端末装置201が近接したときの状態の一例を説明する正面図である。
各通信部361は、端末装置201の端末通信部261が近接したとき、すなわち表示部311に端末装置201が近接したとき、端末通信部261との間で近距離無線通信(非接触通信)を行う。ここで、表示部311に端末装置201が近接しているとは、例えば、表示部311に端末装置201が接触している状態か、通信部361と端末通信部261とが互いに通信可能となるように近接している状態のことをいう。
通信部361と端末通信部261との間では、例えば、端末装置201が有する情報や、表示装置301が有する情報が転送可能である。このような情報としては、例えば、端末装置201を識別するための情報や、各通信部361を特定するための情報などが該当する。なお、画像データなどを転送可能であってもよい。
図7に示されるように、表示装置301の表示部311に端末装置201が近接すると、その端末装置201の端末通信部261に近い通信部361と、端末通信部261とが通信可能になる。図7においては、端末装置201が、表示部311の各通信部361のうち、左上から3行7列目のものに近接している場合の例が示されている。
このように表示部311に端末装置201が近接すると、表示装置301の制御部321は、端末通信部261と通信を開始する通信部361がいずれであるかを判別し、近接した端末装置201の情報とを取得する。これにより、表示装置301は、端末装置201が近接したこと、近づいた端末装置の別、及び表示部311上で端末装置201が近接した位置などを判別できる。
[取り込み機能の説明]
ここで、本実施の形態において、表示装置301は、取り込み機能を実行する電子会議支援装置として機能する。ユーザは、表示部311の所望の位置に端末装置201をかざし、端末装置201を表示部311に近接させる動作を行うことにより、その所望の位置に表示されている画像の画像データを端末装置201に取り込むことができる。
図8は、取り込み機能の使用例を説明する図である。
図8には、3人のユーザ(会議の参加者)901,902,903が1つの表示装置301を囲んで会議を行う場合の例が示されている。各ユーザ901,902,903は、それぞれ、自己の端末装置201,201b,201cを手に持って保持している。表示装置301の表示部311には、種々の文字や図形などの画像が表示されている。ここでは、例えば、表示部311に表示されている画像には、3つの画像951,961,971が含まれている場合を想定する。
このような場合において、ユーザ901は、画像951を自己の端末装置201に取り込みたいと考えた場合には、次のようにすることができる。すなわち、ユーザ901は、端末装置201の動作モードを画像取り込みモードにし、その端末装置201を画像951に近接させる。表示装置301は、表示部311上に端末装置201が近接したこととその位置とを検知すると、端末装置201が近接した部位にある画像951の画像データをネットワーク801経由で端末装置201に送信する。端末装置201は、その画像データを受信し、画像データに基づいて、操作表示部211に画像952を表示させる。これにより、端末装置201の操作表示部211に、画像951に対応する画像952が表示される。なお、画像952は、画像951をそのまま表示させたものであってもよいし、画像951について画像処理(例えば表示部311と操作表示部211との間のサイズや解像度の関係に応じて拡大、縮小するなど)を行ったものなどであってもよい。
ユーザ902が画像961を自己の端末装置201bに取り込みたいと考えた場合や、ユーザ903が画像971を自己の端末装置201cに取り込みたいと考えた場合にも、これと同様にすることができる。すなわち、ユーザ902は、端末装置201bを、画像961が表示されている位置に近接させることで、画像961に対応する画像962を、端末装置201bに取り込み、表示させることができる。また、ユーザ903は、端末装置201cを画像971が表示されている位置に近接させることで、画像971に対応する画像972を、端末装置201cに取り込み、表示させることができる。
図9は、取り込み機能の実行時の流れを説明するシーケンス図である。
取り込み機能は、ユーザの操作に応じて、端末装置201と、電子会議支援装置としても機能する表示装置301との間で行われる。取り込み機能の実行時において、端末装置201が表示装置301に近接したことが検知されると、表示装置301の抽出部371が、端末装置201に送信する画像を抽出する。抽出された画像の画像データが作成され、端末装置201に送られることで、端末装置201で画像表示が行われる。すなわち、表示部311に表示されている画像の一部が端末装置201に送信され、端末装置201に取り込まれる。なお、図9では、表示装置301と抽出部371とが分けられて示されているが、これは、表示装置301及び抽出部371で行われる動作の例をより詳細に説明するためである。
図9に示されるように、取り込み機能では、次のような順番でユーザの操作が行われる。すなわち、ステップS11において、ユーザは、端末装置201の動作モードとして、画像取り込みモードを選択し、端末装置201の動作モードを画像取り込みモードにする。ユーザは、端末装置201に所定の操作を行うことで、動作モードを変更可能である。なお、ユーザが表示装置301やMFP101などに所定の操作を行うことで、端末装置201の動作モードが変更されるようにしてもよい。
ステップS13において、ユーザは、端末装置201を表示部311にかざす。このとき、ユーザは、表示部311のうち、取り込みたい画像が表示されている位置に端末装置201をかざす。
ステップS13の動作が行われると、その後、端末装置201と表示装置301との間で後述のように処理が行われることで、端末装置201の操作表示部211に画像が表示される。
取り込み機能は、表示部311に端末装置201が近接するのに伴い、表示装置301と、表示装置301の内部の抽出部371と、端末装置201とが、次のように処理を行うことで実現されている。これらの処理は、表示装置301の制御部321や、端末装置201の制御部221による制御の下で、表示装置301の各部や端末装置201の各部が動作することで行われる。
取り込み機能が開始される前には、表示装置301の表示部311には、画像が表示されている(ステップS101)。このとき表示されている画像は、例えば、各ユーザから表示するように指示されたものであったり、MFP101やPC401などから送られたものであったりする。
上述のような、ユーザにより画像取り込みモードを選択する動作などが行われると(S11)、ステップS103において、端末装置201の動作モードが、画像取り込みモードになる。すなわち、端末装置201において、画像取り込みモードが開始し、取り込み機能がスタートする。
ユーザによって端末装置201が表示部311にかざされると(S13)、ステップS105,S106において、端末通信部261と通信部361とが通信を行う。これにより、端末装置201は、表示装置301に近接していることを検出する(ステップS107)。また、表示装置301は、端末装置201が近接していることを検出する。
ステップS111において、端末装置201は、所定のサイズ指定情報を送信する。サイズ指定情報は、ネットワーク801を介して、表示装置301の抽出部371に送信される。ここで、サイズ指定情報は、画像を取り込む範囲を示す情報であり、例えば、任意の基準位置からの取り込むべき範囲を指定する情報である。すなわち、後述のように、サイズ指定情報に応じた領域の画像が抽出され、端末装置201に取り込まれることになる。サイズ指定情報は、画像取り込みモードが選択されるときにユーザによって指定されたものであってもよいし、一定の値として定められているものであってもよい。また、他の機器から取得されるものであってもよい。
ステップS113において、抽出部371は、端末装置201から送られたサイズ指定情報を受信する。
ステップS115において、抽出部371は、第1の情報及び第2の情報を取得し、記憶する。情報は、例えば記憶部325などに記憶される。ここで、第1の情報及び第2のは、それぞれ次のようなものである。
第1の情報は、表示部311上で、端末装置201に近接している位置に関する情報である。すなわち、第1の情報は、ユーザが端末装置201を近接させることで表示部311上で指定された位置を示す情報である。端末通信部261と複数の通信部361のうちいずれかとが通信し、端末装置201が表示部311に近接したことが検出されたとき、その通信部361がいずれのものであるかに応じて、第1の情報が取得される。
第2の情報は、表示部311に近接している端末装置201を特定するための情報であって、例えば各端末装置201に固有の識別番号などである。端末通信部261と通信部361のとが通信し、端末装置201が表示部311に近接したことが検出されたとき、その端末装置201の識別番号が表示装置301に送られる。これにより、第2の情報が取得される。
抽出部371は、このような第1の情報及び第2の情報を記憶すると、ステップS117において、表示部311上で端末装置201を検出した検出位置を判別し、確認する。検出位置は、第1の情報に基づいて判別することができる。
ステップS119において、表示装置301は、表示部311に表示している画像に関する画像情報を、抽出部371に送る。このとき送信される画像情報には、例えば、表示部311に表示されているそれぞれの画像の位置、大きさ、属性などが含まれるようにすればよい。画像の属性とは、例えば、画像のデータ形式や、表示された日時若しくは生成された日時や、表示させたユーザなどに関する情報が含まれるものとすればよい。なお、表示部311に複数のレイヤが重ねて表示されている場合において、画像情報として、上述の情報に代えて、その画像が属するレイヤに関する情報が含まれるようにしてもよい。
ステップS121において、抽出部371は、画像情報を取得する。
ステップS123において、抽出部371は、端末装置201に送信するべき画像(送信画像)を抽出する。送信画像は、例えば、表示部311に表示されている画像から選択される(抽出される)画像である。
このとき、抽出部371は、端末装置201の検出位置と、画像情報と、サイズ指定情報とに基づいて、送信画像を抽出する。すなわち、検出位置とサイズ指定情報とに基づいて特定される表示部311上の所定の領域において、表示部311に表示されている画像の有無が画像情報に基づいて判別される。所定の領域に画像があれば、その画像が送信画像として抽出される。
なお、抽出部371は、画像の抽出を、画像情報に応じて、種々の条件下で行うことができる。例えば、抽出部371は、各画像の属性に基づいて、各画像が所定の条件に合致するものであるか否かを判別し、条件に合致する画像のみを抽出することを決定するようにしてもよい。
ステップS125において、抽出部371は、抽出した送信画像を、端末装置201に対して送信するべき旨の送信指示を行う。ここで、送信画像の送信対象は、第2の情報に基づいて特定される、表示部311に近接している端末装置201とされる。
抽出部371で送信指示がなされると、ステップS127において、表示装置301では、送信画像についての画像データが作成される。
ステップS129において、表示装置301は、作成された画像データを、第2の情報に基づいて特定された端末装置201に送信する。送信は、例えば、転送部351により、ネットワーク801を介して行われる。
ステップS131において、端末装置201では、表示装置301から送信された画像データを受信する。これにより、画像データが端末装置201に取り込まれる。
ステップS133において、端末装置201は、受信した画像データに基づいて、画像を、操作表示部211に表示する。これにより、一連の取り込み機能がいったん完了する。
[再貼り付け機能]
ここで、本実施の形態において、取り込み機能により端末装置201に取り込まれた画像を、再度、表示部311に表示させる(貼り付ける)こともできる(再貼り付け機能)。これは、取り込み機能により画像が端末装置201に送信された後、ユーザが、端末装置201を表示部311に再度近接させることで行うことができる。
再貼り付け機能は、例えば、端末装置201において、画像の切り出しに関する処理モードとして「画像切り出し編集」モード(編集モード)が選択されたときに、取り込み機能と共に実行される。すなわち、編集モードが選択されたとき、端末装置201を表示装置301にかざすと、上述のように表示画像が切り出され、表示装置301に近接した端末装置201に送信される。また、それと同時に、上記第1の情報及び第2の情報が記憶される。その後、ユーザが、端末装置201において取り込んだ画像の編集を行い、再度、端末装置201を表示部311上で元の画像の周辺位置にかざすと、記憶された情報に基づいて、元の画像の位置が特定される。そして、端末装置201から編集後の画像(更新された画像)が表示装置301に転送され、表示装置301では、その画像を、特定した位置に表示させる。
図10は、取り込み機能の実行後の再貼り付け機能の一例を示すシーケンス図である。
図10においては、取り込み機能により取り込んだ画像を編集し、その後、編集した画像を表示部311に貼り付けるときの動作の流れが示されている。
すなわち、S15により、ユーザは、端末装置201に取り込んだ画像について、編集操作を行う。編集操作としては、例えば、画像のサイズの変更や、画像の色の変更や、文字や図形の追加、削除などを行う操作が該当する。
ステップS135において、端末装置201は、ユーザによる編集操作に応じて、画像更新を行う。
画像の更新が完了すると、ステップS17において、ユーザは、端末装置201を表示部311にかざす。
端末装置201が表示部311にかざされると、ステップS137〜S140において、ステップS105〜S108と同様の動作が行われる。すなわち、通信部361と端末通信部261とが通信を行う。そして、端末装置201は、表示部311に近接したことを検出し、表示装置301は、端末装置201に近接したことを検出する。
ステップS143において、端末装置201は、更新された画像の画像データを送信する。画像データは、例えば、転送部251により、ネットワーク801を介して送信される。
ステップS145において、表示装置301は、端末装置201から送信された画像データを受信する。
ステップS147において、抽出部371は、表示装置301が受信した画像データに基づいて、表示制御を行う。例えば、抽出部371は、前回、端末装置201に対して送信するために抽出を行った画像(元の画像)を特定する。そして、その元の画像に代えて、端末装置201から送信された画像データが表示されるように、制御を行う。この制御は、例えば、記憶されている第1の情報や第2の情報などに基づいて行うことができる。
ステップS149において、表示装置301は、表示部311に、更新された画像を表示する。表示は、抽出部371の表示制御に基づいて行われる。これにより、取り込み機能により端末装置201に取り込まれた表示部311上の元の画像が、端末装置201において更新された画像に置き換わる。
なお、表示部311上において元の画像が表示されている位置とは離れた位置に端末装置201を近接させる動作が行われたとき、又は所定の動作モードが設定されたとき、編集後の画像は、元の画像とは別に表示部311上に貼り付けられる(表示される)ようにしてもよい。
[取り込み設定の説明]
なお、本実施の形態において、ユーザは、取り込み機能の実行に先だって、どのように画像を取り込むかなどについて設定することができる(取り込み設定)。取り込み設定は、例えば、端末装置201において、操作表示部211に取り込み設定画面を表示させつつ、所定の入力操作を行うことで行うことができる。
図11は、端末装置201の取り込み設定画面を示す図である。
取り込み設定画面は、例えば、画像取り込みモードを選択するときに操作表示部211に表示される画面である。図11に示されるように、取り込み設定画面では、端末装置201をどの種の動作モードにするかを設定するための選択肢が表示されている。例えば、手書き、ファイル読み込み、ファイル書き込み、特殊処理などを選択可能である。
ユーザは、図11に示されるように適切な選択肢を選択することで、例えば画像取り込みモードを選択することができる。すなわち、「特殊処理」を選択すると、特殊処理に該当する下位カテゴリの処理(例えば、画像貼り付け、画像切り出し、画像切り出し編集など)の選択肢が表示される。ここでは、「画像切り出し編集」モードを選択する。そして、具体的な処理として、切り出し(取り込み)を行うか、貼り付けを行うかを選択する。ここでは、切り出しを選択する。
この状態で、ユーザは、切り出しモード及び切り出しサイズなど、種々の細かな動作モードについて設定することができる。
切り出しモードとしては、例えば、通常切り出し、貼り付け表示画像のみ、又は他端末貼り付け表示画像のみを選択できる。「通常切り出し」は、特に画像の属性には関係なく、端末装置201の近接位置に対応する画像を取り込むためのモードである。「貼り付け表示画像のみ」は、例えば、端末装置201の近接位置に対応する画像のうち、いずれかのユーザによって貼り付けられた画像、すなわちいずれかのユーザの端末装置201に対応付けられている画像のみを対象として取り込むためのモードである。このモードでは、MFP101やPC401などから指示されることで表示されている画像を除き、端末装置201から貼り付けられた表示画像のみを切り出すことができる。「他端末貼り付け表示画像のみ」は、端末装置201の近傍位置に対応する画像のうち、そのユーザ以外のユーザによって貼り付けられた画像、すなわち他のユーザの端末装置201に対応付けられている画像のみを対象として取り込むためのモードである。なお、ユーザ本人の端末装置201によって貼り付けられた画像のみを対象として取り込むためのモードが選択可能であってもよい。
切り出しサイズとしては、例えば、基準位置について、画像を切り出す範囲を寸法(例えば、長さ単位や、画素数単位など)で指定できる。例えば端末装置201が表示部311に近接している位置を基準位置として、ここで指定された寸法で特定される領域の画像が抽出され、端末装置201に送られる。
ユーザは、切り出しモード及び切り出しサイズを設定した状態で、取り込み機能を実行することで、所望の画像を容易に端末装置201に取り込むことができる。
例えば、表示部311上で、それぞれ属性付けられているユーザが異なる複数の画像が互いに近い位置にある場合において、そのうち他のユーザに属性付けられた画像(例えば、他のユーザの端末装置201によって貼り付けられた画像)を取り込みたい場合を想定する。このとき、ユーザは、切り出しモードの設定として「他端末貼り付け表示画像のみ」を選択して、当該画像の位置に端末装置201を近接させる動作を行うことで、取り込みたい画像のみを容易に取り込むことができる。なお、どの画像を端末装置201に送信するかは、例えば、上述の図9のステップS123において、抽出部371が、各画像の属性に関する情報や、近接した端末装置201に関する第2の情報などに基づいて、条件に該当する画像を抽出することで、決定される。
また、例えば、表示部311上で、比較的大きなサイズの画像や小さなサイズの画像が表示されている場合において、その画像を取り込みたい場合を想定する。このとき、ユーザは、切り出しサイズを取り込みたい画像に応じた大きさに設定した上で、取り込み機能を実行させる。これにより、端末装置201が近接している位置から所望の範囲にある画像を抽出して取り込むことができる。意図に反して、若干離れた位置にある別の画像もあわせて取り込んでしまったり、取り込みたい画像のサイズが大きすぎてその画像の全部を取り込むことができなかったりすることを防止できる。なお、切り出しサイズを設定すると、その設定内容は、その後実行される取り込み機能において、サイズ指定情報として反映される。これにより、切り出しサイズの設定内容に応じた範囲で画像の抽出及び端末装置201への取り込みが行われる。
以上説明したように、本実施の形態によれば、電子会議システム11において、表示装置301が電子会議支援装置として機能し、取り込み機能が実行可能となる。取り込み機能では、ユーザは、直感的に、かつ容易に、表示部311に表示されている画像の一部を端末装置201に送信させ、端末装置201に取り込み、その操作表示部211に表示させることができる。したがって、ユーザの操作性が高く、利便性が高い電子会議システム11を実現することができる。
また、電子会議システム11によれば、ユーザは、端末装置201を表示部311に近接させるだけの動作を行うことで、取り込み機能で端末装置201に取り込んだ画像を、再度、端末装置201から表示装置301に送信し、表示部311に表示させる(貼り付ける)ことができる。このとき、再度貼り付ける画像は、取り込んだ元の画像の位置に、例えばその元の画像に置き換えて表示させたり、元の画像とは異なる位置に表示させたりすることができる。したがって、ユーザは、容易な動作で、取り込んだ画像を編集して再度貼り付けたりすることができ、電子会議システム11の利便性がさらに高くなる。
なお、画像の取り込み(切り出し)は、1つのまとまりがある単位の画像(例として、1つにグループ化された画像や、一式のつながりのあるベクター形式の画像など)毎に取り込むことができるようにしてもよいし、単に、表示部311上で所定領域に納まる画素で構成される画像を1つの画像として取り込むことができるようにしてもよい。例えば、表示装置のビデオメモリなどに表示面に表示されている画像データが記憶されている場合において、ビデオメモリに記憶されているデータのうち、端末装置201が近接している位置に該当する領域のデータが切り出されて、端末装置201に送信されるようにしてもよい。
また、表示部311に表示される1画面が、複数の層の画像(レイヤ)を含むものである場合において、抽出部371は、各画像がどのレイヤに属する画像であるか否か(属性の1態様)に応じて、画像の抽出や、再貼り付け時の元の画像の特定などを行うようにしてもよい。
[電子会議支援装置として機能する装置の変型例]
上記のような取り込み機能や再貼り付け機能などを司る電子会議支援装置としての役割を担うのは、表示装置301に限られない。例えば、MFP101が電子会議支援装置として機能するようにしたり、端末装置201が電子会議支援装置として機能したりするようにしてもよい。
図12は、MFP101が電子会議支援装置として機能する場合の変形例に係る画像取り込み機能の流れを示すシーケンス図である。
図12において、図12と同様に画像取り込み機能の流れを示す図9と対比して、端末装置201及び表示装置301が行う役割は概ね同じであるが、抽出部371に代えてMFP101が画像の抽出や画像データの送信を行う点が相違する。この場合でも、ユーザが行う操作は、図9に示されるそれと同様である。
まず、画像取り込みモードの実行前においては、次のようにして、MFP101が保有する画像データに基づいて、表示装置301で画像の表示が行われている。すなわち、ステップS201において、表示装置301は、MFP101に対して、表示されるべき画像の画像データを要求する(画像データ取得要求)。
ステップS203において、MFP101は、画像データ取得要求に対して、画像データを送信する。
ステップS205,S207において、表示装置301は、MFP101から送られた画像データを受信し、その画像データに基づいて、表示部311に画像を表示する。これにより、MFP101にある画像データに基づいて、表示装置301に画像が表示される。
ここで、ユーザにより画像取り込みモードが選択され(ステップS11)、端末装置201が表示部311にかざされると(ステップS13)、ステップS209〜S214において、上述の実施の形態のステップS103〜S108と同様の処理が行われ、表示装置301と端末装置201とがお互いが近接していることを検出する。そして、ステップS217において、端末装置201からMFP101に、ネットワーク801経由で、サイズ指定情報が送信される。
ステップS219〜S229において、MFP101が抽出部371に代わって処理を行うほか、ステップS113〜S123と同じ処理が行われる。すなわち、画像情報は、表示装置301からMFP101に送信され、MFP101が、送信画像の抽出までを行う。
ステップS231,S233において、MFP101は、抽出した送信画像に対応する画像データを作成し、そのデータを、表示部311に近接している端末装置201に送信する。
ステップS235,S237において、端末装置201は、ステップS131,S133と同様に、画像データを受信し、受信した画像データに基づいて操作表示部211に画像を表示する。
図13は、MFP101が電子会議支援装置として機能する場合の変形例に係る再貼り付け機能の流れを示すシーケンス図である。
再貼り付け機能についても、上記の実施の形態において表示装置301と抽出部371が行っていた一部の動作(例えば、画像データの受信や表示制御など)をMFP101が行うほか、上述の実施の形態と同様の動作が行われる。ユーザが行う操作は、図10に示されるそれと同様である。
すなわち、例えば端末装置201で画像が更新され(ステップS241)、ユーザの操作(ステップS15,S17)に応じて再貼り付け機能が開始されると、ステップS243〜S249において、表示装置301と端末装置201とがお互いが近接していることを検出し、端末装置201からMFP101に画像データが送信される。
ステップS251,S253において、MFP101は、送信された画像データを受信する。そして、その画像データを、表示装置301で表示させるために、表示装置301に送信する。
ステップS255において、表示装置301は、送信された画像データを受信する。なお、ステップS249で送信された画像データがそのまま表示装置301のみに送信されるようにしたり、表示装置301及びMFP101に送信されるようにしたりしてもよい。
ステップS257において、MFP101は、上記の実施の形態において抽出部371が行うのと同じように、表示制御を行う。
ステップS259において、表示装置301は、MFP101の表示制御に基づいて、受信した画像データに応じた画像すなわち更新された画像を表示部311に表示する。
図14は、端末装置201自身が電子会議支援装置として機能する場合の変形例に係る画像取り込み機能の流れを示すシーケンス図である。
本変型例では、上述の実施の形態と比較して、抽出部371に代えて、端末装置201自身が、画像の抽出や画像データの送信を行う点が相違する。この場合でも、ユーザが行う操作は、図9に示されるそれと同様である。表示装置301の表示部311に表示される画像のデータは、基本的に、表示装置301内に保有されている。
図14に示されるように、画像取り込み機能が開始され、表示装置301と端末装置201とがお互いが近接していることを検出するまでの動作(ステップS301〜S308)は、上述の実施の形態と同様である。
ステップS311において、端末装置201は、サイズ指定情報を自身から取得する。
ステップS313〜S331において、端末装置201及び表示装置301は、上述の実施の形態のステップS115〜S133と同様の処理を行う。すなわち、端末装置201は、送信画像を抽出し、表示装置301は、その抽出結果に応じて、表示装置301から端末装置201に送る画像データを作成及び送信する。端末装置201は、画像データを受信すると、それに基づいて画像表示を行う。
図15は、端末装置201自身が電子会議支援装置として機能する場合の変形例に係る再貼り付け機能の流れを示すシーケンス図である。
再貼り付け機能についても、上記の実施の形態において表示装置301と抽出部371が行っていた一部の動作を端末装置201が行うほか、上述の実施の形態と同様の動作が行われる。ユーザが行う操作は、図10に示されるそれと同様である。
すなわち、例えば端末装置201で画像が更新され(ステップS333)、ユーザの操作(ステップS15,S17)に応じて再貼り付け機能が開始されると、ステップS335〜S341において、端末装置201と表示装置301とが互いに近接していることが検知された後、端末装置201から表示装置301に画像データが送信される。
ステップS343において、表示装置301は、送信された画像データを受信する。
ステップS345において、端末装置201は、上記の実施の形態において抽出部371が行うのと同じように、表示制御を行う。
ステップS347において、表示装置301は、端末装置201の表示制御に基づいて、受信した画像データに応じた画像すなわち更新された画像を表示部311に表示する。
[その他]
上述の実施形態において、各部の特徴を適宜組み合わせたり、一部の特徴を除いたりしてもよい。
取り込み機能によって画像が端末装置に取り込まれたとき、表示部上に表示されている元の画像は、表示されたままであってもよいし、非表示となってもよい。
端末装置が表示装置の表示部に近接しているか否か及びその位置などは、近距離無線通信により検出されるものに限られない。例えば、表示部に対面して設けられた光学的センサを用いて得られた情報や、表示部に対面して設けられた撮像装置を用いて撮影された映像などを解析することなどによって、端末装置が表示部に近接しているか否かが検出されるようにしてもよい。
電子会議システムを構成する種々の機器は、それぞれ、無線によりネットワークに接続されていてもよいし、有線によりネットワークに接続されていてもよい。
端末通信部と表示装置の通信部とは、表示装置の表示部と端末装置とが近接したことを検知するのみならず、その後の画像データの転送やその他の情報の通信を両者間で実現させるようにしてもよい。この場合において、端末装置は、ネットワークには接続されず、表示装置などの電子会議支援装置として機能する装置に直接接続されるようにしてもよい。このとき、端末装置側に接触スイッチなどを設け、そのスイッチのオンオフを合わせて検知することで、端末装置が表示部に接触したタイミングにおける近接している位置の検出を行うようにしてもよい。また、端末装置が近接することによる静電容量の変化により、近接していること及び近接している位置を検知してもよい。表示部が種々の方式のタッチパネルであって、端末装置が表示部に接触していること及び接触している位置が検知されてもよい。
表示装置は、プロジェクタ型の電子黒板に限られない。例えば、液晶ディスプレイや他の方式のディスプレイを用いるものであってもよい。
上述の実施の形態における処理は、ソフトウェアによって行っても、ハードウェア回路を用いて行ってもよい。
上述の実施の形態における処理を実行するプログラムを提供することもできるし、そのプログラムをCD−ROM、フレキシブルディスク、ハードディスク、ROM、RAM、メモリカードなどの記録媒体に記録してユーザに提供することにしてもよい。プログラムはインターネットなどの通信回線を介して、装置にダウンロードするようにしてもよい。上記のフローチャートで文章で説明された処理は、そのプログラムに従ってCPUなどにより実行される。
上記実施の形態は、すべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味及び範囲内でのすべての変更が含まれることが意図される。