JP6051521B2 - 画像合成システム - Google Patents

画像合成システム Download PDF

Info

Publication number
JP6051521B2
JP6051521B2 JP2011286230A JP2011286230A JP6051521B2 JP 6051521 B2 JP6051521 B2 JP 6051521B2 JP 2011286230 A JP2011286230 A JP 2011286230A JP 2011286230 A JP2011286230 A JP 2011286230A JP 6051521 B2 JP6051521 B2 JP 6051521B2
Authority
JP
Japan
Prior art keywords
handwritten
position information
unit
information
screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2011286230A
Other languages
English (en)
Other versions
JP2013135422A (ja
Inventor
陽平 藤田
陽平 藤田
藤田　健
健 藤田
哲郎 轡田
哲郎 轡田
増田　明
明 増田
皓一 西出
皓一 西出
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to JP2011286230A priority Critical patent/JP6051521B2/ja
Priority to US13/724,158 priority patent/US9875571B2/en
Publication of JP2013135422A publication Critical patent/JP2013135422A/ja
Application granted granted Critical
Publication of JP6051521B2 publication Critical patent/JP6051521B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/10—Geometric effects
    • G06T15/20—Perspective computation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/169—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being an integrated pointing device, e.g. trackball in the palm rest area, mini-joystick integrated between keyboard keys, touch pads or touch stripes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • G06F3/0383—Signal control means within the pointing device
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/37—Details of the operation on graphic patterns
    • G09G5/377—Details of the operation on graphic patterns for mixing or overlaying two or more graphic patterns
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/39—Control of the bit-mapped memory
    • G09G5/395—Arrangements specially adapted for transferring the contents of the bit-mapped memory to the screen
    • G09G5/397—Arrangements specially adapted for transferring the contents of two or more bit-mapped memories to the screen simultaneously, e.g. for mixing or overlay
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/038—Indexing scheme relating to G06F3/038
    • G06F2203/0383—Remote input, i.e. interface arrangements in which the signals generated by a pointing device are transmitted to a PC at a remote location, e.g. to a PC in a LAN
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/12—Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels

Description

本発明は、画像合成システムに関する。
従来から、プロジェクタが、ネットワークを介して投影用の画像データをモバイル端末に配信し、モバイル端末が、配信された画像データに対して入力した手書き情報の画像データを、ネットワークを介してプロジェクタに転送し、プロジェクタが、投影用の画像データと手書き情報の画像データとを合成して投影する技術が知られている。
このような技術の類似技術として、例えば特許文献１には、カメラで撮影された撮影画像の画像データとタブレットで入力された手書き情報の画像データとを、ネットワークを介して外部サーバに送信し、外部サーバで両画像データを合成して表示用の画像データを生成する技術が開示されている。
しかしながら、上述したような従来技術では、ネットワーク上で手書き情報の画像データを通信させているため、ネットワークに負荷がかかってしまうという問題がある。
本発明は、上記事情に鑑みてなされたものであり、ネットワークにかかる負荷を低減することができる画像合成システムを提供することを目的とする。
また、本発明の別の態様にかかる画像合成システムは、第１端末装置と、当該第１端末装置とネットワークを介して接続される画像合成装置とを、備える画像合成システムであって、前記第１端末装置は、前記画像合成装置から画面用の画像データである画面データを受信する受信部と、前記画面データに基づく画面を変倍操作で設定された変倍率で変倍して表示部に表示させる表示制御部と、前記変倍して表示された画面に対するタッチ入力を受け付ける毎に、当該タッチ入力が行われた位置を示す第１手書き位置情報を取得し、当該第１手書き位置情報を前記変倍率の逆数で変倍する取得部と、前記第１手書き位置情報が取得されて変倍される毎に、当該変倍された第１手書き位置情報を前記画像合成装置に送信する送信部と、を備え、前記画像合成装置は、前記画面データを前記第１端末装置に配信する配信部と、前記第１端末装置から前記変倍された第１手書き位置情報が送信される毎に、当該変倍された第１手書き位置情報を受信し、手書き位置情報記憶部に記憶する受信部と、前記変倍された第１手書き位置情報が前記手書き位置情報記憶部に記憶される毎に、当該手書き位置情報記憶部に記憶されている前記変倍された第１手書き位置情報を用いて、前記タッチ入力に基づいて描画された第１手書き情報の画像データである第１手書き画像データを生成する生成部と、前記第１手書き画像データが生成される毎に、前記画面データと当該第１手書き画像データとを合成して合成画面データを生成する合成部と、を備える。
また、本発明の別の態様にかかる画像合成システムは、画像合成装置と、当該画像合成装置とネットワークを介して接続されるコンピュータで実行されるプログラムとを、備える画像合成システムであって、前記プログラムは、前記画像合成装置から画面用の画像データである画面データを受信する受信部と、前記画面データに基づく画面を変倍操作で設定された変倍率で変倍して表示部に表示させる表示制御部と、前記変倍して表示された画面に対するタッチ入力を受け付ける毎に、当該タッチ入力が行われた位置を示す手書き位置情報を取得し、当該手書き位置情報を前記変倍率の逆数で変倍する取得部と、前記手書き位置情報が取得されて変倍される毎に、当該変倍された手書き位置情報を前記画像合成装置に送信する送信部として、前記コンピュータを機能させ、前記画像合成装置は、前記画面データを前記コンピュータに配信する配信部と、前記コンピュータから前記変倍された手書き位置情報が送信される毎に、当該変倍された手書き位置情報を受信し、手書き位置情報記憶部に記憶する受信部と、前記変倍された手書き位置情報が前記手書き位置情報記憶部に記憶される毎に、当該手書き位置情報記憶部に記憶されている前記変倍された手書き位置情報を用いて、前記タッチ入力に基づいて描画された手書き情報の画像データである手書き画像データを生成する生成部と、前記手書き画像データが生成される毎に、前記画面データと当該手書き画像データとを合成して合成画面データを生成する合成部と、を備える。
本発明によれば、ネットワークにかかる負荷を低減することができるという効果を奏する。
図１は、第１実施形態の画像合成システムの構成の一例を示すブロック図である。 図２は、第１実施形態のプロジェクタの構成の一例を示すブロック図である。 図３は、第１実施形態の画面データの一例を示す図である。 図４は、第１実施形態の手書き位置情報記憶部に記憶されている手書き位置情報の一例を示す図である。 図５は、第１実施形態の手書き位置情報記憶部に記憶されている手書き位置情報の一例を示す図である。 図６は、第１実施形態の手書き画像データの一例を示す図である。 図７は、第１実施形態の合成画面データの一例を示す図である。 図８は、第１実施形態のタブレットの構成の一例を示すブロック図である。 図９は、第１実施形態の取得部の手書き位置情報の取得手法の一例を示す説明図である。 図１０は、第１実施形態の画像合成システムで実行される配信処理の一例を示すシーケンス図である。 図１１は、第１実施形態の画像合成システムで実行される投影処理の一例を示すシーケンス図である。 図１２は、第１実施形態のタブレットで実行される手書き位置情報送信処理の一例を示すフローチャート図である。 図１３は、第１実施形態のプロジェクタで実行される投影処理の一例を示すフローチャート図である。 図１４は、変形例１のタブレットで実行される手書き位置情報送信処理の一例を示すフローチャート図である。 図１５は、変形例２の手書き位置情報記憶部に記憶されている手書き位置情報及び削除位置情報の一例を示す図である。 図１６は、変形例２の手書き画像データの一例を示す図である。 図１７は、変形例２の合成画面データの一例を示す図である。 図１８は、変形例３の手書き位置情報記憶部に記憶されている手書き位置情報の一例を示す図である。 図１９は、変形例３の画像合成システムで実行される投影処理の一例を示すシーケンス図である。 図２０は、第２実施形態の画像合成システムの構成の一例を示すブロック図である。 図２１は、第２実施形態のタブレットの構成の一例を示すブロック図である。 図２２は、第２実施形態のプロジェクタの構成の一例を示すブロック図である。 図２３は、第２実施形態の手書き位置情報記憶部に記憶されている手書き位置情報の一例を示す図である。 図２４は、第２実施形態の手書き画像データの一例を示す図である。 図２５は、第２実施形態の画像合成システムで実行される投影処理の一例を示すシーケンス図である。 図２６は、第３実施形態の画像合成システムのプロジェクタの構成の一例を示すブロック図である。 図２７は、第３実施形態の合成色テーブル記憶部に記憶されている合成色テーブルの一例を示す図である。 図２８は、第４実施形態の画像合成システムのプロジェクタの構成の一例を示すブロック図である。 図２９は、第４実施形態の合成判別テーブル記憶部に記憶されている合成判別テーブルの一例を示す図である。 図３０は、第４実施形態の画像合成システムで実行される合成判別テーブル更新処理の一例を示すシーケンス図である。 図３１は、第５実施形態の画像合成システムのプロジェクタの構成の一例を示すブロック図である。 図３２は、第５実施形態の同期判別テーブル記憶部に記憶されている同期判別テーブルの一例を示す図である。 図３３は、第５実施形態の画像合成システムのタブレットの構成の一例を示すブロック図である。 図３４は、第５実施形態のプロジェクタで実行される配信処理の一例を示すフローチャート図である。 図３５は、第５実施形態の画像合成システム５００で実行される同期判別テーブル更新処理の一例を示すシーケンス図である。
以下、添付図面を参照しながら、本発明にかかる画像合成システムの実施形態を詳細に説明する。以下の各実施形態では、画像合成装置、端末装置として、それぞれ、プロジェクタ、タブレットを例に取り説明するが、これらに限定されるものではない。画像合成装置は、画像合成が可能な装置であればよく、例えば、サーバ装置など通常のコンピュータを利用した装置であってもよい。端末装置は、手書き入力が可能な装置であればよく、例えば、スマートフォンなどであってもよい。
（第１実施形態）
図１は、第１実施形態の画像合成システム１００の構成の一例を示すブロック図である。図１に示すように、画像合成システム１００は、プロジェクタ１１０と、タブレット１６０とを、備える。
プロジェクタ１１０とタブレット１６０とは、ネットワーク１０１を介して接続されている。ネットワーク１０１は、プロジェクタ１１０とタブレット１６０とを通信可能に接続できればよく、例えば、インターネットやＬＡＮ（Local Area Network）などにより実現できる。
プロジェクタ１１０は、投影用の画像データである画面データに基づく画面を投影する。またプロジェクタ１１０は、画面データをタブレット１６０に配信するとともに、タブレット１６０から、画面データに基づく画像に対して入力された手書き情報の位置を示す手書き位置情報を受信する。そしてプロジェクタ１１０は、手書き位置情報の画像データである手書き画像データを生成し、画面データと手書き画像データとを合成して合成画面データを生成し、合成画面データに基づく画面を投影する。
図２は、第１実施形態のプロジェクタ１１０の構成の一例を示すブロック図である。図２に示すように、プロジェクタ１１０は、通信部１２０と、記憶部１３０と、制御部１４０と、投影部１５０とを、備える。
通信部１２０は、ネットワーク１０１を介して、タブレット１６０と通信するものであり、通信インタフェースなどの通信装置により実現できる。
記憶部１３０は、プロジェクタ１１０で実行されるプログラムやプロジェクタ１１０で行われる各種処理に使用されるデータなどを記憶する。記憶部１３０は、例えば、ＨＤＤ（Hard Disk Drive）、ＳＳＤ（Solid State Drive）、メモリカード、光ディスク、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）などの磁気的、光学的、又は電気的に記憶可能な記憶装置の少なくともいずれかにより実現できる。
記憶部１３０は、画像データ記憶部１３１と、手書き位置情報記憶部１３２とを、含む。画像データ記憶部１３１は、後述の投影部１５０により投影される画面用の画像データである画面データなど各種画像データを記憶する。画面データの一例を図３に示す。手書き位置情報記憶部１３２には、手書き位置情報が記憶される。なお、手書き位置情報の詳細については、後述する。
制御部１４０は、プロジェクタ１１０の各部を制御するものであり、ＣＰＵ（Central Processing Unit）などの制御装置により実現できる。制御部１４０は、配信部１４１と、受信部１４２と、生成部１４３と、合成部１４４とを、含む。
配信部１４１は、画面データをタブレット１６０に配信する。具体的には、配信部１４１は、タブレット１６０から画面データの配信要求を受け付け、配信要求を受け付けた画面データを画像データ記憶部１３１から取得してタブレット１６０に配信する。第１実施形態では、画面データにアスペクト比が含まれているものとするが、これに限定されるものではない。例えば、配信部１４１は、タブレット１６０から図３に示す画面データの配信要求を受け付け、図３に示す画面データを画像データ記憶部１３１から取得してタブレット１６０に配信する。
受信部１４２は、タブレット１６０上でユーザにより画面データに基づく画面に対して入力された手書き情報の位置を示す手書き位置情報を受信し、手書き位置情報記憶部１３２に記憶する。手書き情報とは、例えば、手書きで描かれた文字、記号、又は絵などが該当する。第１実施形態では、手書き位置情報は、画面上の２次元座標（ｘ，ｙ）を示すものとするが、これに限定されるものではない。なお第１実施形態では、画面左上を２次元座標の原点（０，０）とする。
具体的には、タブレット１６０は、手書き情報の入力（例えば、ユーザのタッチ操作の入力）が行われている間、手書き位置情報として、前回（１つ前）の座標と最新の座標との座標のペアを順次プロジェクタ１１０に送信するものとする。このため、受信部１４２は、タブレット１６０で手書き情報の入力が行われている間、タブレット１６０から座標のペアを順次受信し、座標のペアのうち最新の座標を手書き位置情報として手書き位置情報記憶部１３２に記憶する。
図４は、第１実施形態の手書き位置情報記憶部１３２に記憶されている手書き位置情報の一例を示す図である。図４に示す例では、手書き位置情報（座標（ｘ，ｙ））は、下に進むほど時系列が新しくなるものとする。例えば、受信部１４２は、タブレット１６０から、手書き位置情報として、前回の座標（４０，５５）、最新の座標（４５，５０）の座標のペアを受信したとする。この場合、受信部１４２は、図４に示す一番下の座標（４０，５５）が座標のペアのうちの前回の座標（４０，５５）と一致することを確認し、図５に示すように、座標のペアのうちの最新の座標（４５，５０）を一番下（図４に示す一番下の座標（４０，５５）の下）に追加記憶する。
但し、タブレット１６０は、座標のペアではなく最新の座標を順次プロジェクタ１１０に送信し、プロジェクタ１１０は、タブレット１６０から最新の座標を順次受信するようにしてもよい。
生成部１４３は、受信部１４２により受信された手書き位置情報を用いて手書き情報の画像データである手書き画像データを生成する。具体的には、生成部１４３は、手書き位置情報記憶部１３２に記憶されている手書き位置情報を用いて手書き画像データを生成し、画像データ記憶部１３１に記憶する。生成部１４３は、例えば、図５に示す手書き位置情報を用いて、時系列で隣接する座標を線で結ぶことにより、図６に示す手書き画像データを生成する。
合成部１４４は、画面データと生成部１４３により生成された手書き画像データとを合成して合成画面データを生成する。具体的には、合成部１４４は、画像データ記憶部１３１に記憶されている画面データと手書き画像データとを合成して合成画面データを生成し、画像データ記憶部１３１に記憶する。第１実施形態では、画像データ記憶部１３１に記憶されている画像データは、レイヤーで管理されているため、合成部１４４は、画面データが描かれたレイヤーと手書き画像データが描かれたレイヤーとを重ねることで合成画面データを生成する。合成部１４４は、例えば、図３に示す画面データと図６に示す手書き画像データとを重ねることで、図７に示す合成画面データを生成する。
投影部１５０は、画像を投影するものであり、例えば、液晶プロジェクタなどの投影装置により実現できる。投影部１５０は、画面データに基づく画面を投影する。具体的には、投影部１５０は、制御部１４０により画像データ記憶部１３１に記憶されている画面データが転送されると、当該画面データに基づく画面を投影する。例えば、投影部１５０は、制御部１４０により画像データ記憶部１３１から図３に示す画面データが転送されると、当該画面データに基づく画面を投影する。
また投影部１５０は、合成部１４４により合成画面データが生成されると、当該合成画面データに基づく画面を投影する。具体的には、投影部１５０は、制御部１４０により画像データ記憶部１３１に記憶されている合成画面データが転送されると、当該合成画面データに基づく画面を投影する。例えば、投影部１５０は、制御部１４０により画像データ記憶部１３１から図７に示す合成画面データが転送されると、当該合成画面データに基づく画面を投影する。
タブレット１６０は、プロジェクタ１１０に対して画面データの配信を要求して当該画面データを受信し、受信した画面データに基づく画面を表示する。そしてタブレット１６０は、表示している画面に対するユーザからの手書き情報の入力を受け付け、受け付けた手書き情報の位置を示す手書き位置情報を取得し、取得した手書き位置情報をプロジェクタ１１０に送信する。
図８は、第１実施形態のタブレット１６０の構成の一例を示すブロック図である。図８に示すように、タブレット１６０は、通信部１７０と、操作表示部１７２と、記憶部１７４と、制御部１８０とを、備える。
通信部１７０は、ネットワーク１０１を介して、プロジェクタ１１０と通信するものであり、通信インタフェースなどの通信装置により実現できる。
操作表示部１７２は、各種操作の入力や各種画面を表示するものであり、タッチパネル式ディスプレイなどの操作表示装置により実現できる。
記憶部１７４は、タブレット１６０で実行されるプログラムやタブレット１６０で行われる各種処理に使用されるデータなどを記憶する。記憶部１７４は、例えば、ＨＤＤ、ＳＳＤ、メモリカード、光ディスク、ＲＯＭ、ＲＡＭなどの磁気的、光学的、又は電気的に記憶可能な記憶装置の少なくともいずれかにより実現できる。
制御部１８０は、タブレット１６０の各部を制御するものであり、ＣＰＵ（Central Processing Unit）などの制御装置により実現できる。制御部１８０は、受信部１８１と、表示制御部１８２と、取得部１８３と、合成部１８４と、送信部１８５とを、含む。
受信部１８１は、プロジェクタ１１０から画面データを受信する。具体的には、受信部１８１は、プロジェクタ１１０に対して画面データの配信を要求して当該画面データを受信し、記憶部１７４に記憶する。第１実施形態では、画面データにアスペクト比が含まれているものとするが、これに限定されるものではない。例えば、受信部１８１は、プロジェクタ１１０に対して図３に示す画面データの配信を要求して当該画面データを受信し、記憶部１７４に記憶する。
表示制御部１８２は、受信部１８１により受信された画面データに基づく画面を操作表示部１７２に表示させる。具体的には、表示制御部１８２は、記憶部１７４に記憶されている画面データを取得し、取得した画面データに含まれるアスペクト比で、取得した画面データに基づく画面を操作表示部１７２に表示させる。例えば、表示制御部１８２は、記憶部１７４から図３に示す画面データを取得し、取得した画面データに基づく画面を操作表示部１７２に表示させる。
また表示制御部１８２は、後述の合成部１８４により合成画面データが生成されると、当該合成画面データに基づく画面を操作表示部１７２に表示させる。具体的には、表示制御部１８２は、記憶部１７４に記憶されている合成画面データを取得し、取得した合成画面データに基づく画面を操作表示部１７２に表示させる。例えば、表示制御部１８２は、記憶部１７４から図７に示す合成画面データを取得し、取得した合成画面データに基づく画面を操作表示部１７２に表示させる。
取得部１８３は、操作表示部１７２に表示されている画面に対するユーザからの手書き情報の入力（例えば、操作表示部１７２に対するユーザのタッチ操作の入力）を受け付け、当該手書き情報の位置を示す手書き位置情報を取得し、記憶部１７４に記憶する。これにより、例えば、図５に示す手書き位置情報が記憶部１７４に記憶される。
図９は、第１実施形態の取得部１８３の手書き位置情報の取得手法の一例を示す説明図である。図９に示す例では、操作表示部１７２に表示されている画面上で手書き位置情報が、点Ｐ１、点Ｐ２、点Ｐ３、点Ｐ４の順序で描かれたとする。この場合、取得部は、ユーザにより点Ｐ１がタッチされると点Ｐ１の座標（３０，２５）を取得して記憶部１７４に記憶し、タッチ位置が点Ｐ１から点Ｐ２に移動されると点Ｐ２の座標（３５，３０）を取得して記憶部１７４に記憶し、タッチ位置が点Ｐ２から点Ｐ３に移動されると点Ｐ３の座標（４０，２５）を取得して記憶部１７４に記憶し、タッチ位置が点Ｐ３から点Ｐ４に移動されると点Ｐ４の座標（４５，２０）を取得して記憶部１７４に記憶する。
合成部１８４は、取得部１８３により取得された手書き位置情報を用いて手書き情報の画像データである手書き画像データを生成し、記憶部１７４に記憶する。そして合成部１８４は、生成した手書き画像データと記憶部１７４に記憶されている画面データとを合成して合成画面データを生成し、記憶部１７４に記憶する。
例えば、合成部１８４は、記憶部１７４に記憶されている図５に示す手書き位置情報を用いて、図６に示す手書き画像データを生成し、図６に示す手書き画像データと記憶部１７４に記憶されている図３に示す画面データとを合成して図７に示す合成画面データを生成する。
送信部１８５は、取得部１８３により取得された手書き位置情報をプロジェクタ１１０に送信する。第１実施形態では、送信部１８５は、取得部１８３により手書き位置情報が取得されている間、手書き位置情報として、前回（１つ前）の座標と最新の座標との座標のペアを順次プロジェクタ１１０に送信する。
図９に示す例の場合、送信部１８５は、点Ｐ２の座標が取得されると、点Ｐ１の座標（３０，２５）と点Ｐ２の座標（３５，３０）との座標のペアをプロジェクタ１１０に送信し、点Ｐ３の座標が取得されると、点Ｐ２の座標（３５，３０）と点Ｐ３の座標（４０，２５）との座標のペアをプロジェクタ１１０に送信し、点Ｐ４の座標が取得されると、点Ｐ３の座標（４０，２５）と点Ｐ４の座標（４５，２０）との座標のペアをプロジェクタ１１０に送信する。
図１０は、第１実施形態の画像合成システム１００で実行される配信処理の一例を示すシーケンス図である。
まず、タブレット１６０の受信部１８１は、プロジェクタ１１０に対して画面データの配信を要求する（ステップＳ１０１）。
続いて、プロジェクタ１１０の配信部１４１は、タブレット１６０から画面データの配信要求を受け付け、配信要求を受け付けた画面データを画像データ記憶部１３１から取得し（ステップＳ１０２）、取得した画面データをタブレット１６０に配信する（ステップＳ１０３）。
続いて、タブレット１６０の受信部１８１は、プロジェクタ１１０から画面データを受信し、タブレット１６０の表示制御部１８２は、受信部１８１により受信された画面データに基づく画面を操作表示部１７２に表示させる（ステップＳ１０４）。
図１１は、第１実施形態の画像合成システム１００で実行される投影処理の一例を示すシーケンス図である。なお、図１１に示す処理は、タブレット１６０上でユーザからの手書き情報の入力が行われている間、所定の周期で繰り返し行われる。
まず、タブレット１６０の取得部１８３は、操作表示部１７２に表示されている画面に対するユーザからの手書き情報の入力を受け付け、当該手書き情報の位置を示す手書き位置情報を取得する（ステップＳ２０１）。
続いて、タブレット１６０の送信部１８５は、取得部１８３により取得された手書き位置情報をプロジェクタ１１０に送信する（ステップＳ２０２）。
続いて、プロジェクタ１１０の受信部１４２は、タブレット１６０から手書き位置情報を受信し、手書き位置情報記憶部１３２に記憶する。そして、プロジェクタ１１０の生成部１４３は、手書き位置情報記憶部１３２に記憶されている手書き位置情報を用いて手書き画像データを生成し、画像データ記憶部１３１に記憶する（ステップＳ２０３）。
続いて、プロジェクタ１１０の合成部１４４は、画像データ記憶部１３１に記憶されている画面データと手書き画像データとを合成して合成画面データを生成し、画像データ記憶部１３１に記憶する（ステップＳ２０４）。
続いて、プロジェクタ１１０の投影部１５０は、制御部１４０により画像データ記憶部１３１に記憶されている合成画面データが転送されると、当該合成画面データに基づく画面を投影する（ステップＳ２０５）。
図１２は、第１実施形態のタブレット１６０で実行される手書き位置情報送信処理の一例を示すフローチャート図である。
まず、受信部１８１は、プロジェクタ１１０に対して画面データの配信を要求して当該画面データを受信し、記憶部１７４に記憶する（ステップＳ３０１）。
続いて、表示制御部１８２は、記憶部１７４に記憶されている画面データを取得し、取得した画面データに基づく画面を操作表示部１７２に表示させる（ステップＳ３０２）。
続いて、取得部１８３は、ユーザにより操作表示部１７２に表示されている画面に対するタッチを待機し（ステップＳ３０３でＮｏ）、画面に対するタッチが行われると（ステップＳ３０３でＹｅｓ）、タッチ位置の座標を取得し、記憶部１７４に記憶する（ステップＳ３０４）。
続いて、取得部１８３は、画面に対するタッチ位置が移動すると（ステップＳ３０５でＹｅｓ）、移動後のタッチ位置の座標を取得し、記憶部１７４に記憶する（ステップＳ３０６）。
続いて、送信部１８５は、手書き位置情報として、前回の座標と最新の座標との座標のペアをプロジェクタ１１０に送信し（ステップＳ３０７）、ステップＳ３０５へ戻る。最新の座標は、直前のステップＳ３０６で取得された座標である。前回の座標は、送信部１８５による手書き位置情報の最初の送信であれば、ステップＳ３０４で取得された座標であり、送信部１８５による手書き位置情報の２回目以降の送信であれば、前回のステップＳ３０６で取得された座標となる。
なお、ステップＳ３０５において、タッチ位置が移動しないが（ステップＳ３０５でＮｏ）、画面に対するタッチが継続されている場合（ステップＳ３０８でＹｅｓ）、ステップＳ３０５へ戻る。一方、ステップＳ３０５において、タッチ位置が移動せず（ステップＳ３０５でＮｏ）、画面に対するタッチも行われていない場合（ステップＳ３０８でＮｏ）、処理は終了となる。
図１３は、第１実施形態のプロジェクタ１１０で実行される投影処理の一例を示すフローチャート図である。
まず、受信部１４２は、タブレット１６０から座標のペアを受信すると（ステップＳ４０１でＹｅｓ）、座標のペアのうち最新の座標を手書き位置情報として手書き位置情報記憶部１３２に記憶する（ステップＳ４０２）。
続いて、生成部１４３は、手書き位置情報記憶部１３２に記憶されている手書き位置情報を用いて手書き画像データを生成し、画像データ記憶部１３１に記憶する（ステップＳ４０３）。
続いて、合成部１４４は、画像データ記憶部１３１に記憶されている画面データと手書き画像データとを合成して合成画面データを生成し、画像データ記憶部１３１に記憶する（ステップＳ４０４）。
続いて、投影部１５０は、制御部１４０により画像データ記憶部１３１に記憶されている合成画面データが転送されると、当該合成画面データに基づく画面を投影し（ステップＳ４０５）、ステップＳ４０１へ戻る。
なお、ステップＳ４０１において、タブレット１６０による座標のペアの送信が終了し、座標のペアの受信が終了すると（ステップＳ４０１でＮｏ）、処理は終了となる。
以上のように第１実施形態では、タブレット１６０は、入力された手書き情報を画像データにしてプロジェクタ１１０に送信するのではなく、入力された手書き情報の手書き位置情報をオンラインでプロジェクタ１１０に順次送信する。そして、プロジェクタ１１０は、受信した手書き位置情報から手書き画像データを生成し、画面データと合成して合成画面データを生成し、投影する。
このため第１実施形態によれば、タブレット１６０からプロジェクタ１１０に送信するデータ量を少なくできるため、ネットワーク１０１にかかる負荷を低減することができる。これにより、プロジェクタ１１０では、合成画面データの生成をリアルタイムで行うことが可能となり、タブレット１６０に手書き情報を入力すると、この手書き情報に基づく合成画面データをプロジェクタ１１０でリアルタイムに投影することが可能となる。
（変形例１）
変形例１では、タブレット１６０が画面を変倍する例について説明する。なお以下では、第１実施形態との相違点の説明を主に行い、第１実施形態と同様の機能を有する構成要素については、その説明を省略する。
変形例１のタブレット１６０について説明する。
表示制御部１８２は、操作表示部１７２に表示されている画面に対するユーザからの変倍操作の入力を受け付け、変倍操作で設定された変倍率で画面を変倍して操作表示部１７２に表示させる。例えば、操作表示部１７２がマルチタップ機能を有するタッチパネル式ディスプレイであれば、変倍操作は、操作表示部１７２に対するピンチアウト操作やピンチイン操作が該当する。そして、表示制御部１８２は、ピンチアウト操作が行われた部分の画面を中心にピンチアウト操作で設定された変倍率（拡大率）で操作表示部１７２に拡大表示させ、ピンチイン操作が行われた部分の画面を中心にピンチイン操作で設定された変倍率（祝勝率）で操作表示部１７２に縮小表示させる。
取得部１８３は、操作表示部１７２に表示されている変倍後の画面に対するユーザからの手書き情報の入力を受け付け、当該手書き情報の手書き位置情報を取得し、記憶部１７４に記憶する。
また取得部１８３は、取得した手書き位置情報を変倍後の画面の変倍率の逆数（１／変倍率）で変倍し、記憶部１７４に記憶する。これにより、変倍後の画面の手書き位置情報（座標）を元の画面（変倍されていない画面）の手書き位置情報（座標）に変換できる。
合成部１８４は、取得部１８３により取得された手書き位置情報（変倍率の逆数で変倍されていない手書き位置情報）を用いて手書き情報の画像データである手書き画像データを生成する。
送信部１８５は、取得部１８３により変倍率の逆数で変倍された手書き位置情報をプロジェクタ１１０に送信する。
図１４は、変形例１のタブレット１６０で実行される手書き位置情報送信処理の一例を示すフローチャート図である。
ステップＳ５０１〜Ｓ５０２までの処理は、図１２のフローチャートのステップＳ３０１〜Ｓ３０２までの処理と同様である。
続いて、表示制御部１８２は、操作表示部１７２に表示されている画面に対するユーザからの変倍操作の入力を受け付け（ステップＳ５０３）、変倍操作で設定された変倍率で画面を変倍して操作表示部１７２に表示させる（ステップＳ５０４）。
続いて、取得部１８３は、ユーザにより操作表示部１７２に表示されている画面に対するタッチを待機し（ステップＳ５０５でＮｏ）、画面に対するタッチが行われると（ステップＳ５０５でＹｅｓ）、タッチ位置の座標を取得し、変倍後の画面の変倍率の逆数（１／変倍率）で変倍し、記憶部１７４に記憶する（ステップＳ５０６）。
続いて、取得部１８３は、画面に対するタッチ位置が移動すると（ステップＳ５０７でＹｅｓ）、移動後のタッチ位置の座標を取得し、変倍後の画面の変倍率の逆数（１／変倍率）で変倍し、記憶部１７４に記憶する（ステップＳ５０８）。
続いて、送信部１８５は、手書き位置情報として、前回の座標と最新の座標との座標のペアをプロジェクタ１１０に送信し（ステップＳ５０９）、ステップＳ５０７へ戻る。最新の座標は、直前のステップＳ５０８で変倍された座標である。前回の座標は、送信部１８５による手書き位置情報の最初の送信であれば、ステップＳ５０６で変倍された座標であり、送信部１８５による手書き位置情報の２回目以降の送信であれば、前回のステップＳ５０８で変倍された座標となる。
なお、ステップＳ５０７において、タッチ位置が移動しないが（ステップＳ５０７でＮｏ）、画面に対するタッチが継続されている場合（ステップＳ５１０でＹｅｓ）、ステップＳ５０７へ戻る。一方、ステップＳ５０７において、タッチ位置が移動せず（ステップＳ５０７でＮｏ）、画面に対するタッチも行われていない場合（ステップＳ５１０でＮｏ）、処理は終了となる。
以上のように変形例１によれば、タブレット１６０は、画面が変倍された場合であっても、元の画面（変倍されていない画面）のサイズに合わせた手書き位置情報をプロジェクタ１１０に送信するので、プロジェクタ１１０において画面の変倍の影響を受けずに合成画面データを生成し、投影することができる。これにより、タブレット１６０での画面の変倍が可能となり、例えば、画面を拡大することにより、小さなスペースに対しても手書き情報を正確に入力する（書き込む）ことが可能となる。
なお、変形例１では、タブレット１６０側で手書き位置情報を元の画面（変倍されていない画面）のサイズに合わせるようにしたが、プロジェクタ１１０側で手書き位置情報を元の画面（変倍されていない画面）のサイズに合わせるようにしてもよい。この場合、タブレット１６０は、取得部１８３により取得された手書き位置情報とともに画面の変倍率をプロジェクタ１１０に送信すればよい。
（変形例２）
変形例２では、タブレット１６０が手書き情報を削除する例について説明する。なお以下では、第１実施形態との相違点の説明を主に行い、第１実施形態と同様の機能を有する構成要素については、その説明を省略する。
変形例２のタブレット１６０について説明する。
取得部１８３は、操作表示部１７２に表示された画面上に描かれている手書き情報の少なくとも一部を削除する削除情報の入力（例えば、画面上に描かれている手書き情報のうちの削除部分に対するユーザのタッチ操作の入力）を受け付け、当該削除情報の位置を示す削除位置情報を取得し、記憶部１７４に記憶する。変形例２では、削除情報は、手書き位置情報同様、画面上の２次元座標（ｘ，ｙ）を示すものとするが、これに限定されるものではない。
また変形例２では、制御部１８０は、手書き情報の入力モードと削除情報の入力モードとを管理しており、手書き情報の入力モードにおいて画面に対するユーザのタッチ操作の入力が行われた場合、取得部１８３は、手書き情報の入力を受け付け、削除情報の入力モードにおいて画面に対するユーザのタッチ操作の入力が行われた場合、取得部１８３は、削除情報の入力を受け付ける。
合成部１８４は、取得部１８３により取得された手書き位置情報及び削除位置情報を用いて手書き画像データを生成し、記憶部１７４に記憶する。
送信部１８５は、取得部１８３により取得された削除位置情報をプロジェクタ１１０に送信する。送信部１８５は、手書き位置情報の送信同様、取得部１８３により削除位置情報が取得されている間、削除位置情報として、前回（１つ前）の座標と最新の座標との座標のペアを順次プロジェクタ１１０に送信する。
なお変形例２では、送信部１８５は、手書き位置情報を送信する場合、手書き位置情報の座標のペアであることを示す識別子を座標のペアとともに送信し、削除位置情報を送信する場合、削除位置情報の座標のペアであることを示す識別子を座標のペアとともに送信する。
変形例２のプロジェクタ１１０について説明する。
受信部１４２は、手書き情報のうち削除される部分の位置を示す削除位置情報を受信し、手書き位置情報記憶部１３２に記憶する。具体的には、受信部１４２は、手書き位置情報の受信同様、タブレット１６０で削除情報の入力が行われている間、タブレット１６０から座標のペアを順次受信し、座標のペアのうち最新の座標を削除位置情報として手書き位置情報記憶部１３２に記憶する。
なお変形例２では、受信部１４２は、手書き位置情報を受信する場合、手書き位置情報の座標のペアであることを示す識別子とともに座標のペアを受信し、座標のペアのうち最新の座標に当該識別子を対応付けて手書き位置情報記憶部１３２に記憶する。同様に、受信部１４２は、削除位置情報を受信する場合、削除位置情報の座標のペアであることを示す識別子とともに座標のペアを受信し、座標のペアのうち最新の座標に当該識別子を対応付けて手書き位置情報記憶部１３２に記憶する。
図１５は、変形例２の手書き位置情報記憶部１３２に記憶されている手書き位置情報及び削除位置情報の一例を示す図である。図１５に示す例では、種別“１”が手書き位置情報を示し、種別“０”が削除位置情報を示している。これにより、手書き位置情報記憶部１３２に記憶されている座標が、手書き位置情報の座標であるか削除情報の座標であるかを識別できる。
生成部１４３は、受信部１４２により受信された手書き位置情報及び削除位置情報を用いて手書き画像データを生成する。生成部１４３は、例えば、図１５に示す手書き位置情報及び削除位置情報を用いて、時系列で隣接する手書き位置情報の座標を線で結ぶとともに、時系列で隣接する削除位置情報の座標を結ぶ線を削除することにより、図１６に示す手書き画像データを生成する。
合成部１４４は、画面データと生成部１４３により生成された手書き画像データとを合成して合成画面データを生成する。合成部１４４は、例えば、図３に示す画面データと図１６に示す手書き画像データとを合成することで、図１７に示す合成画面データを生成する。
以上のように変形例２によれば、タブレット１６０は、手書き情報を削除した場合、削除位置情報をプロジェクタ１１０に送信するので、プロジェクタ１１０において手書き情報の削除を反映した合成画面データを生成し、投影することができる。
（変形例３）
変形例３では、指定された入力時刻に入力された手書き情報を画面に合成して投影する例について説明する。なお以下では、第１実施形態との相違点の説明を主に行い、第１実施形態と同様の機能を有する構成要素については、その説明を省略する。
変形例３のプロジェクタ１１０について説明する。
受信部１４２は、タブレット１６０から手書き位置情報を受信し、受信した手書き位置情報と当該手書き位置情報の入力時刻を示す入力時刻情報とを対応付けて手書き位置情報記憶部１３２に記憶する。具体的には、受信部１４２は、タブレット１６０で手書き情報の入力が行われている間、タブレット１６０から座標のペアを順次受信し、座標のペアのうち最新の座標と当該座標の入力時刻を示す入力時刻情報とを対応付けて手書き位置情報記憶部１３２に記憶する。図１８は、変形例３の手書き位置情報記憶部１３２に記憶されている手書き位置情報の一例を示す図である。図１８に示す例では、手書き位置情報の座標に当該座標の入力時刻が対応付けられている。
なお変形例２では、手書き位置情報の入力時刻は、受信部１４２が当該手書き位置情報を受信した時刻とするが、これに限定されるものではない。例えば、手書き位置情報の入力時刻は、タブレット１６０に入力された時刻としてもよい。この場合、受信部１４２は、手書き位置情報の入力時刻をタブレット１６０から受信する。
また受信部１４２は、タブレット１６０から、手書き情報のうち再現する部分の入力時刻を指定する時刻指定情報を受信する。
生成部１４３は、手書き位置情報記憶部１３２から、手書き位置情報のうち受信部１４２により受信された時刻指定情報で指定された入力時刻に対応する部分の手書き位置情報を取得し、取得した手書き位置情報を用いて、手書き情報のうち再現する部分の手書き画像データを生成する。
例えば、受信部１４２により受信された時刻指定情報で指定された入力時刻が１０：００〜１０：０５であるとする。この場合、生成部１４３は、手書き位置情報記憶部１３２から、図１８に示す手書き位置情報のうち入力時刻が１０：００に対応付けられた手書き位置情報を取得し、取得した手書き位置情報を用いて、図１６に示す手書き画像データを生成する。
合成部１４４は、画面データと生成部１４３により生成された手書き画像データとを合成して合成画面データを生成する。合成部１４４は、例えば、図３に示す画面データと図１６に示す手書き画像データとを合成することで、図１７に示す合成画面データを生成する。
変形例３のタブレット１６０について説明する。
送信部１８５は、手書き情報のうち再現する部分の入力時刻を指定する時刻指定情報をプロジェクタ１１０に受信する。
図１９は、変形例３の画像合成システム１００で実行される投影処理の一例を示すシーケンス図である。
まず、タブレット１６０の制御部１８０は、プロジェクタ１１０に対して手書き位置情報の入力時刻情報を要求する（ステップＳ６０１）。
続いて、プロジェクタ１１０の制御部１４０は、タブレット１６０から入力時刻情報の要求を受け付け、手書き位置情報記憶部１３２から入力時刻情報を取得し（ステップＳ６０２）、取得した入力時刻情報（入力時刻の範囲）をタブレット１６０に送信する（ステップＳ６０３）。例えば、制御部１４０は、図１８に示す手書き位置情報の場合、１０：００〜１０：１０を示す入力時刻情報をタブレット１６０に送信する。
続いて、タブレット１６０の制御部１８０は、プロジェクタ１１０から入力時刻情報を受信し、受信した入力時刻情報を操作表示部１７２に表示させ、ユーザから時刻指定情報の入力を受け付ける。そして、タブレット１６０の送信部１８５は、入力された時刻指定情報をプロジェクタ１１０に送信する（ステップＳ６０４）。
続いて、プロジェクタ１１０の受信部１４２は、タブレット１６０から時刻指定情報を受信する。そして、プロジェクタ１１０の生成部１４３は、手書き位置情報記憶部１３２から、手書き位置情報のうち受信部１４２により受信された時刻指定情報で指定された入力時刻に対応する部分の手書き位置情報を取得し、取得した手書き位置情報を用いて、手書き情報のうち再現する部分の手書き画像データを生成し、画像データ記憶部１３１に記憶する（ステップＳ６０５）。
続いて、プロジェクタ１１０の合成部１４４は、画像データ記憶部１３１に記憶されている画面データと手書き画像データとを合成して合成画面データを生成し、画像データ記憶部１３１に記憶する（ステップＳ６０６）。
続いて、プロジェクタ１１０の投影部１５０は、制御部１４０により画像データ記憶部１３１に記憶されている合成画面データが転送されると、当該合成画面データに基づく画面を投影する（ステップＳ６０７）。
以上のように変形例３によれば、プロジェクタ１１０は、特定の時間帯に入力された手書き情報のみを反映した合成画面データを生成し、投影することができるので、会議や授業などに好適である。
（第２実施形態）
第２実施形態では、タブレットが複数存在する例について説明する。なお以下では、第１実施形態との相違点の説明を主に行い、第１実施形態と同様の機能を有する構成要素については、第１実施形態と同様の名称・符号を付し、その説明を省略する。
図２０は、第２実施形態の画像合成システム２００の構成の一例を示すブロック図である。図２０に示すように、画像合成システム２００は、プロジェクタ２１０と、複数のタブレット２６０Ａ〜２６０Ｂとを、備える。プロジェクタ２１０と複数のタブレット２６０Ａ〜２６０Ｂは、ネットワーク１０１を介して接続されている。なお、タブレットの台数は、２台以上であれば何台であってもよい。
図２１は、第２実施形態のタブレット２６０Ａ、Ｂの構成の一例を示すブロック図である。タブレット２６０Ａ、Ｂは、制御部２８０の送信部２８５が第１実施形態のタブレット１６０と相違する。
送信部２８５は、取得部１８３により取得された手書き位置情報とともに自身のタブレットを識別する端末識別情報をプロジェクタ１１０に送信する。例えば、タブレット１６０Ａの送信部２８５であれば、タブレット１６０Ａの端末識別情報を送信し、タブレット１６０Ｂの送信部２８５であれば、タブレット１６０Ｂの端末識別情報を送信する。これにより、プロジェクタ２１０において、いずれのタブレットの手書き位置情報か識別できる。
図２２は、第２実施形態のプロジェクタ２１０の構成の一例を示すブロック図である。プロジェクタ２１０は、記憶部２３０の画像データ記憶部２３１及び手書き位置情報記憶部２３２、並びに制御部２４０の配信部２４１、受信部２４２、生成部２４３、及び合成部２４４が第１実施形態のプロジェクタ１１０と相違する。
配信部２４１は、画面データをタブレット２６０Ａ、Ｂに配信する。
受信部２４２は、タブレット２６０Ａ、Ｂから手書き位置情報を受信し、手書き位置情報記憶部２３２に記憶する。受信部２４２は、送信元のタブレットの端末識別情報とともに手書き位置情報を受信するので、タブレットの端末識別情報毎に手書き位置情報を手書き位置情報記憶部２３２に記憶する。
図２３は、第２実施形態の手書き位置情報記憶部２３２に記憶されている手書き位置情報の一例を示す図である。図２３に示す例では、“Ａ”を示す端末識別情報、“Ｂ”を示す端末識別情報それぞれに、座標が対応付けられている。なお、“Ａ”はタブレット２６０Ａを表し、“Ｂ”はタブレット２６０Ｂを表す。これにより、手書き位置情報記憶部１３２に記憶されている座標が、タブレット２６０Ａの座標であるかタブレット２６０Ｂの座標であるかを識別できる。
生成部２４３は、受信部２４２により受信されたタブレット２６０Ａの手書き位置情報を用いてタブレット２６０Ａの手書き画像データを生成するとともに、受信部２４２により受信されたタブレット２６０Ｂの手書き位置情報を用いてタブレット２６０Ｂの手書き画像データを生成する。
例えば、生成部２４３は、手書き位置情報記憶部２３２から、図２３に示す手書き位置情報のうち“Ａ”を示す端末識別情報に対応付けられている手書き位置情報を取得し、図１６に示すタブレット２６０Ａの手書き画像データを生成して、画像データ記憶部２３１に記憶する。また例えば、生成部２４３は、手書き位置情報記憶部２３２から、図２３に示す手書き位置情報のうち“Ｂ”を示す端末識別情報に対応付けられている手書き位置情報を取得し、図２４に示すタブレット２６０Ｂの手書き画像データを生成して、画像データ記憶部２３１に記憶する。
合成部２４４は、画面データ、生成部２４３により生成されたタブレット２６０Ａの手書き画像データ、及びタブレット２６０Ｂの手書き画像データを合成して合成画面データを生成し、画像データ記憶部２３１に記憶する。合成部３４４は、例えば、図３に示す画面データと図１６に示すタブレット２６０Ａの手書き画像データと図２４に示すタブレット２６０Ｂの手書き画像データとを合成することで、図７に示す合成画面データを生成する。
図２５は、第２実施形態の画像合成システム２００で実行される投影処理の一例を示すシーケンス図である。
まず、タブレット２６０Ｂの取得部１８３は、操作表示部１７２に表示されている画面に対するユーザからの手書き情報の入力を受け付け、当該手書き情報の位置を示す手書き位置情報を取得する（ステップＳ７０１）。
続いて、タブレット２６０Ｂの送信部２８５は、取得部１８３により取得された手書き位置情報をプロジェクタ２１０に送信する（ステップＳ７０２）。
続いて、タブレット２６０Ａの取得部１８３は、操作表示部１７２に表示されている画面に対するユーザからの手書き情報の入力を受け付け、当該手書き情報の位置を示す手書き位置情報を取得する（ステップＳ７０３）。
続いて、タブレット２６０Ａの送信部２８５は、取得部１８３により取得された手書き位置情報をプロジェクタ２１０に送信する（ステップＳ７０４）。
続いて、プロジェクタ２１０の受信部２４２は、タブレット２６０Ａ、Ｂから手書き位置情報を受信し、タブレット毎に手書き位置情報を手書き位置情報記憶部２３２に記憶する。そして、プロジェクタ２１０の生成部２４３は、手書き位置情報記憶部２３２に記憶されているタブレット２６０Ａの手書き位置情報を用いてタブレット２６０Ａの手書き画像データを生成するとともに、タブレット２６０Ｂの手書き位置情報を用いてタブレット２６０Ｂの手書き画像データを生成し、画像データ記憶部２３１に記憶する（ステップＳ７０５）。
続いて、プロジェクタ２１０の合成部２４４は、画像データ記憶部２３１に記憶されている画面データとタブレット２６０Ａの手書き画像データとタブレット２６０Ｂの手書き画像データを合成して合成画面データを生成し、画像データ記憶部２３１に記憶する（ステップＳ７０６）。
続いて、プロジェクタ２１０の投影部１５０は、制御部２４０により画像データ記憶部２３１に記憶されている合成画面データが転送されると、当該合成画面データに基づく画面を投影する（ステップＳ７０７）。
以上のように第２実施形態によれば、複数のタブレットから入力された手書き情報を反映した合成画面データを生成し、投影することができるので、会議や授業などに好適である。
（第３実施形態）
第３実施形態では、タブレットに応じて手書き画像データの合成色を変更する例について説明する。なお以下では、第２実施形態との相違点の説明を主に行い、第２実施形態と同様の機能を有する構成要素については、第２実施形態と同様の名称・符号を付し、その説明を省略する。
図２６は、第３実施形態の画像合成システム３００のプロジェクタ３１０の構成の一例を示すブロック図である。プロジェクタ３１０は、記憶部３３０が合成色テーブル記憶部３３３を含む点、及び制御部３４０の合成部３４４が第２実施形態のプロジェクタ２１０と相違する。
合成色テーブル記憶部３３３は、タブレットを識別する端末識別情報と手書き画像データの合成色を示す色情報とを対応付けた合成色テーブルを記憶する。図２７は、第３実施形態の合成色テーブル記憶部３３３に記憶されている合成色テーブルの一例を示す図である。図２７に示す例では、“Ａ”を示す端末識別情報と赤を示す色情報とが対応付けられており、“Ｂ”を示す端末識別情報と青を示す色情報とが対応付けられている。
合成部３４４は、合成色テーブルを参照し、タブレット２６０Ａの端末識別情報に対応付けられた色情報が示す色でタブレット２６０Ａの手書き画像データを画面データに合成し、タブレット２６０Ｂの端末識別情報に対応付けられた色情報が示す色でタブレット２６０Ｂの手書き画像データを画面データに合成する。
例えば、合成部３４４は、図２７に示す合成色テーブルを参照し、“Ａ”を示す端末識別情報に対応付けられた色情報が示す赤色でタブレット２６０Ａの手書き画像データを画面データに合成し、“Ｂ”を示す端末識別情報に対応付けられた色情報が示す青色でタブレット２６０Ｂの手書き画像データを画面データに合成する。
以上のように第３実施形態によれば、複数のタブレットから入力された手書き情報を反映した合成画面データを生成して投影する場合に、タブレットに応じて手書き情報を色分けすることができるので、視認性を高めることができ、会議や授業などに好適である。
（第４実施形態）
第４実施形態では、タブレットに応じて手書き画像データを合成するか否かを切り替える例について説明する。なお以下では、第２実施形態との相違点の説明を主に行い、第２実施形態と同様の機能を有する構成要素については、第２実施形態と同様の名称・符号を付し、その説明を省略する。
図２８は、第４実施形態の画像合成システム４００のプロジェクタ４１０の構成の一例を示すブロック図である。プロジェクタ４１０は、記憶部４３０が合成判別テーブル記憶部４３３を含む点、及び制御部４４０の合成部４４４が第２実施形態のプロジェクタ２１０と相違する。
合成判別テーブル記憶部４３３は、タブレットを識別する端末識別情報と手書き画像データを合成するか否かを示す合成有無情報とを対応付けた合成判別テーブルを記憶する。図２９は、第４実施形態の合成判別テーブル記憶部４３３に記憶されている合成判別テーブルの一例を示す図である。図２９に示す例では、“Ａ”を示す端末識別情報と有を示す合成有無情報とが対応付けられており、“Ｂ”を示す端末識別情報と無を示す合成有無情報とが対応付けられている。
合成部４４４は、合成判別テーブルを参照し、タブレット２６０Ａの端末識別情報に対応付けられた合成有無情報が合成有を示す場合、タブレット２６０Ａの手書き画像データを画面データに合成し、タブレット２６０Ｂの端末識別情報に対応付けられた合成有無情報が合成無を示す場合、タブレット２６０Ｂの手書き画像データを画面データに合成する。
例えば、合成部４４４は、図２９に示す合成判別テーブルを参照し、“Ａ”を示す端末識別情報に対応付けられた合成有無情報が有を示すので、タブレット２６０Ａの手書き画像データを画面データに合成する。一方、合成部４４４は、“Ｂ”を示す端末識別情報に対応付けられ合成有無情報が無を示すので、タブレット２６０Ｂの手書き画像データは画面データに合成しない。つまり、合成部４４４は、タブレット２６０Ａの手書き画像データのみを画面データに合成して合成画面データを生成する。
図３０は、第４実施形態の画像合成システム４００で実行される合成判別テーブル更新処理の一例を示すシーケンス図である。
まず、タブレット２６０Ａの制御部２８０は、プロジェクタ４１０に対して合成判別テーブルを要求する（ステップＳ８０１）。
続いて、プロジェクタ４１０の制御部４４０は、タブレット２６０Ａから合成判別テーブルの要求を受け付け、合成判別テーブル記憶部４３３から合成判別テーブルを取得し（ステップＳ８０２）、取得した合成判別テーブルをタブレット２６０Ａに送信する（ステップＳ８０３）。
続いて、タブレット２６０Ａの制御部２８０は、プロジェクタ４１０から合成判別テーブルを受信し、受信した合成判別テーブルを操作表示部１７２に表示させ、ユーザから更新入力を受け付け、合成判別テーブルの内容（合成有無情報）を更新する（ステップＳ８０４）。そして、制御部２８０は、更新された合成判別テーブルをプロジェクタ４１０に送信する（ステップＳ８０５）。
続いて、プロジェクタ４１０の制御部４４０は、タブレット２６０Ａから合成判別テーブルを受信し、受信した合成判別テーブルで合成判別テーブル記憶部４３３に記憶されている合成判別テーブルを更新する（ステップＳ８０６）。
なお、図３０では、タブレット２６０Ａが合成判別テーブルを更新する例について説明したが、いずれのタブレットからでも合成判別テーブルを更新できる。
以上のように第４実施形態によれば、複数のタブレットから入力された手書き情報のうち特定のタブレットから入力された手書き情報のみを反映した合成画面データを生成して投影するので、会議や授業などに好適である。また第４実施形態によれば、いずれのタブレットからでも手書き情報を反映させるタブレットを切り替えることができるので、会議や授業などに好適である。
（第５実施形態）
第５実施形態では、タブレットの表示画面をプロジェクタの投影画面と同期する例について説明する。なお以下では、第２実施形態との相違点の説明を主に行い、第２実施形態と同様の機能を有する構成要素については、第２実施形態と同様の名称・符号を付し、その説明を省略する。
図３１は、第５実施形態の画像合成システム５００のプロジェクタ５１０の構成の一例を示すブロック図である。プロジェクタ５１０は、記憶部５３０が同期判別テーブル記憶部５３３を含む点、記憶部５３０の画像データ記憶部５３１、並びに制御部５４０の配信部５４１及び合成部５４４が第２実施形態のプロジェクタ２１０と相違する。
同期判別テーブル記憶部５３３は、タブレットを識別する端末識別情報と、投影されている画面と同期するか否かを示す同期有無情報と、を対応付けた同期判別テーブルを記憶する。なお同期判別テーブルは、同期無を示す同期有無情報には、合成対象の手書き情報が生成された端末装置の端末識別情報である同期対象端末識別情報を対応付ける。
図３２は、第５実施形態の同期判別テーブル記憶部５３３に記憶されている同期判別テーブルの一例を示す図である。図３２に示す例では、“Ａ”を示す端末識別情報と有を示す同期有無情報とが対応付けられており、“Ｂ”を示す端末識別情報と無を示す同期有無情報とが対応付けられている。なお、“Ｂ”を示す端末識別情報には、無を示す同期有無情報が対応付けられているため、“Ａ”を示す同期対象端末識別情報が対応付けられている。
合成部５４４は、合成画面データを生成する。例えば、合成部４４４は、図７に示す合成画面データを生成する。
合成部５４４は、更に、同期判別テーブルを参照し、同期対象端末識別情報が示すタブレットの手書き情報から生成された手書き画像データと画面データとを合成して配信用合成画面データを生成し、画像データ記憶部５３１に記憶する。例えば、合成部５４４は、図３２に示す同期判別テーブルを参照し、“Ｂ”を示す端末識別情報に対応付けられた同期対象端末識別情報が“Ａ”を示すので、図１６に示すタブレット２６０Ａの手書き画像データを図３に示す画面データに合成して、図１７に示す配信用合成画面データを生成する。
配信部５４１は、同期判別テーブルを参照し、タブレット５６０Ａ、５６０Ｂのうち同期有を示す同期有無情報に対応付けられたタブレットに合成画面データを配信する。例えば、配信部５４１は、図３２に示す同期判別テーブルを参照し、“Ａ”を示す端末識別情報に対応付けられた同期有無情報が有を示すので、タブレット５６０Ａに図７に示す合成画面データを配信する。
また配信部５４１は、同期判別テーブルを参照し、タブレット５６０Ａ、５６０Ｂのうち同期対象端末識別情報が対応付けられた端末識別情報が示すタブレットに配信用合成画面データを配信する。例えば、配信部５４１は、図３２に示す同期判別テーブルを参照し、“Ｂ”を示す端末識別情報に対応付けられた同期対象端末識別情報が“Ａ”を示すので、タブレット５６０Ｂに図１７に示す配信用合成画面データを配信する。
図３３は、第５実施形態の画像合成システム５００のタブレット５６０Ａ、Ｂの構成の一例を示すブロック図である。タブレット５６０Ａ、Ｂは、記憶部５７４、制御部５８０の受信部５８１、表示制御部５８２、及び合成部５８４が第２実施形態のプロジェクタ２１０と相違する。
受信部５８１は、プロジェクタ５１０から合成画面データ又は配信用合成画面データを受信する。例えば、タブレット５６０Ａの受信部５８１であれば、プロジェクタ５１０から図７に示す合成画面データを受信し、タブレット５６０Ｂの受信部５８１であれば、プロジェクタ５１０から図１７に示す配信用合成画面データを受信する。
表示制御部５８２は、受信部５８１により受信された合成画面データ又は配信用合成画面データに基づく画面を操作表示部１７２に表示させる。例えば、タブレット５６０Ａの表示制御部５８２であれば、受信部５８１により受信された図７に示す合成画面データに基づく画面を操作表示部１７２に表示させ、タブレット５６０Ｂの表示制御部５８２であれば、受信部５８１により受信された図１７に示す配信用合成画面データに基づく画面を操作表示部１７２に表示させる。
合成部５８４は、生成した手書き画像データと受信部５８１により受信された合成画面データ又は配信用合成画面データとを合成して合成画面データを生成する。
図３４は、第５実施形態のプロジェクタ５１０で実行される配信処理の一例を示すフローチャート図である。
ステップＳ９０１〜Ｓ９０２までの処理は、図１３のフローチャートのステップＳ４０４〜Ｓ４０５までの処理と同様である。
続いて、合成部５４４は、同期判別テーブルにおいて全てのタブレットの同期有無の確認を完了していなければ（ステップＳ９０３でＹｅｓ）、未確認の端末識別情報に対応付けられた同期有無情報が有を示すか否かを確認する（ステップＳ９０４）。なお、同期判別テーブルにおいて全てのタブレットの同期有無の確認を完了している場合（ステップＳ９０３でＮｏ）、処理は終了となる。
同期有無情報が有を示す場合（ステップＳ９０４でＹｅｓ）、配信部５４１は、当該同期有無情報が対応付けられた端末識別情報が示すタブレットに合成画面データを配信し（ステップＳ９０５）、ステップＳ９０３に戻る。
一方、同期有無情報が無を示す場合（ステップＳ９０４でＮｏ）、合成部５４４は、当該同期有無情報が対応付けられた同期対象端末識別情報が示すタブレットの手書き画像データを画面データに合成して配信用合成画面データを生成し（ステップＳ９０６）、当該同期有無情報が示すタブレットに当該配信用合成画面データを配信し（ステップＳ９０７）、ステップＳ９０３に戻る。
図３５は、第５実施形態の画像合成システム５００で実行される同期判別テーブル更新処理の一例を示すシーケンス図である。
まず、タブレット５６０Ａの制御部５８０は、プロジェクタ５１０に対して同期判別テーブルの自身（タブレット５６０Ａ）の情報を要求する（ステップＳ１００１）。
続いて、プロジェクタ５１０の制御部５４０は、タブレット５６０Ａからの要求を受け付け、同期判別テーブル記憶部５３３から同期判別テーブルのタブレット５６０Ａの情報を取得し（ステップＳ１００２）、取得した情報をタブレット５６０Ａに送信する（ステップＳ１００３）。
続いて、タブレット５６０Ａの制御部５８０は、プロジェクタ５１０からタブレット５６０Ａの情報を受信し、受信したタブレット５６０Ａの情報を操作表示部１７２に表示させ、ユーザから更新入力を受け付け、タブレット５６０Ａの情報の内容（同期有無情報、同期対象端末識別情報）を更新する（ステップＳ１００４）。そして、制御部５８０は、更新されたタブレット５６０Ａの情報をプロジェクタ５１０に送信する（ステップＳ１００５）。
続いて、プロジェクタ５１０の制御部５４０は、タブレット５６０Ａから更新後のタブレット５６０Ａの情報を受信し、受信したタブレット５６０Ａの情報で同期判別テーブルのタブレット５６０Ａの情報を更新する（ステップＳ１００６）。
なお、図３５では、タブレット５６０Ａが同期判別テーブルの自身の情報を更新する例について説明したが、いずれのタブレットからでも同期判別テーブルの自身の情報を更新できる。
以上のように第５実施形態によれば、タブレットの表示画面をプロジェクタの投影画面と同期できるので、会議や授業などに好適である。また第５実施形態によれば、タブレットの表示画面をいずれのタブレットの手書き情報を合成した画面とすることができるので、会議や授業などに好適である。
（変形例４）
なお、本発明は、上記各実施形態に限定されるものではなく、種々の変形が可能である。例えば、変形例１〜３、第２〜第５実施形態を適宜組み合わせたりするようにしてもよい。
（ハードウェア構成）
上記各実施形態及び変形例のプロジェクタは、ＣＰＵなどの制御装置と、ＲＯＭやＲＡＭなどの記憶装置と、ＨＤＤやリムーバブルドライブ装置などの外部記憶装置と、投影装置と、通信インタフェースなどの通信装置とを備えており、通常のコンピュータを利用したハードウェア構成となっている。
上記各実施形態及び変形例のタブレットは、ＣＰＵなどの制御装置と、ＲＯＭやＲＡＭなどの記憶装置と、ＨＤＤやリムーバブルドライブ装置などの外部記憶装置と、ディスプレイなどの表示装置と、キーボードやマウスなどの入力装置と、通信インタフェースなどの通信装置とを備えており、通常のコンピュータを利用したハードウェア構成となっている。
上記各実施形態及び変形例のプロジェクタやタブレットで実行されるプログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ−ＲＯＭ、ＣＤ−Ｒ、メモリカード、ＤＶＤ（Digital Versatile Disk）、フレキシブルディスク（ＦＤ）等のコンピュータで読み取り可能な記憶媒体に記憶されて提供される。
また、上記各実施形態及び変形例のプロジェクタやタブレットで実行されるプログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するようにしてもよい。また、上記各実施形態及び変形例のプロジェクタやタブレットで実行されるプログラムを、インターネット等のネットワーク経由で提供または配布するようにしてもよい。また、上記各実施形態及び変形例のプロジェクタやタブレットで実行されるプログラムを、ＲＯＭ等に予め組み込んで提供するようにしてもよい。
上記各実施形態及び変形例のプロジェクタやタブレットで実行されるプログラムは、上述した各部をコンピュータ上で実現させるためのモジュール構成となっている。実際のハードウェアとしては、ＣＰＵがＨＤＤからプログラムをＲＡＭ上に読み出して実行することにより、上記各部がコンピュータ上で実現されるようになっている。
１００、２００、３００、４００、５００ 画像合成システム
１０１ ネットワーク
１１０、２１０、３１０、４１０、５１０ プロジェクタ
１２０ 通信部
１３０、２３０、３３０、４３０、５３０ 記憶部
１３１、２３１、５３１ 画像データ記憶部
１３２、２３２ 手書き位置情報記憶部
１４０、２４０、３４０、４４０、５４０ 制御部
１４１、２４１、５４１ 配信部
１４２、２４２ 受信部
１４３、２４３ 生成部
１４４、２４４、３４４、４４４、５４４ 合成部
１５０ 投影部
１６０、２６０Ａ、２６０Ｂ、５６０Ａ、５６０Ｂ タブレット
１７０ 通信部
１７２ 操作表示部
１７４、５７４ 記憶部
１８０、２８０、５８０ 制御部
１８１、５８１ 受信部
１８２、５８２ 表示制御部
１８３ 取得部
１８４、５８４ 合成部
１８５、２８５ 送信部
３３３ 合成色テーブル記憶部
４３３ 合成判別テーブル記憶部
５３３ 同期判別テーブル記憶部
特開２００５−７９９１３号公報

Claims (10)

  1. 第１端末装置と、当該第１端末装置とネットワークを介して接続される画像合成装置とを、備える画像合成システムであって、
    前記第１端末装置は、
    前記画像合成装置から画面用の画像データである画面データを受信する受信部と、
    前記画面データに基づく画面を変倍操作で設定された変倍率で変倍して表示部に表示させる表示制御部と、
    前記変倍して表示された画面に対するタッチ入力を受け付ける毎に、当該タッチ入力が行われた位置を示す第１手書き位置情報を取得し、当該第１手書き位置情報を前記変倍率の逆数で変倍する取得部と、
    前記第１手書き位置情報が取得されて変倍される毎に、当該変倍された第１手書き位置情報を前記画像合成装置に送信する送信部と、を備え、
    前記画像合成装置は、
    前記画面データを前記第１端末装置に配信する配信部と、
    前記第１端末装置から前記変倍された第１手書き位置情報が送信される毎に、当該変倍された第１手書き位置情報を受信し、手書き位置情報記憶部に記憶する受信部と、
    前記変倍された第１手書き位置情報が前記手書き位置情報記憶部に記憶される毎に、当該手書き位置情報記憶部に記憶されている前記変倍された第１手書き位置情報を用いて、前記タッチ入力に基づいて描画された第１手書き情報の画像データである第１手書き画像データを生成する生成部と、
    前記第１手書き画像データが生成される毎に、前記画面データと当該第１手書き画像データとを合成して合成画面データを生成する合成部と、を備える画像合成システム。
  2. 前記受信部は、前記第１手書き情報のうち削除される部分の位置を示す第１削除位置情報を更に受信し、
    前記生成部は、前記第１削除位置情報を更に用いて前記第１手書き画像データを生成する請求項１に記載の画像合成システム。
  3. 前記受信部は、前記変倍された第１手書き位置情報と前記第１手書き情報の入力時刻を示す入力時刻情報とを対応付けて前記手書き位置情報記憶部に記憶し、
    前記受信部は、更に、前記第１手書き情報のうち再現する部分の入力時刻を指定する時刻指定情報を受信し、
    前記生成部は、前記手書き位置情報記憶部から、前記時刻指定情報で指定された入力時刻を示す入力時刻情報に対応付けられた第１手書き位置情報を取得し、当該第１手書き位置情報を用いて、前記第１手書き情報のうち再現する部分の手書き画像データを生成する請求項２に記載の画像合成システム。
  4. 前記画像合成装置は、第２端末装置とネットワークを介して更に接続され、
    前記配信部は、前記画面データを前記第２端末装置に更に配信し、
    前記受信部は、前記第２端末装置上で前記画面データに基づく画面に対してタッチ入力が行われた位置を示す第２手書き位置情報を更に受信して、前記手書き位置情報記憶部に記憶し、
    前記生成部は、前記第２手書き位置情報が前記手書き位置情報記憶部に記憶される毎に、当該手書き位置情報記憶部に記憶されている前記第２手書き位置情報を用いて、前記第２端末装置上でのタッチ入力に基づいて描画された第２手書き情報の画像データである第２手書き画像データを更に生成し、
    前記合成部は、前記第２手書き画像データを更に合成して前記合成画面データを生成する請求項２又は３に記載の画像合成システム。
  5. 前記画像合成装置は、
    端末装置を識別する端末識別情報と手書き画像データの合成色を示す色情報とを対応付けた合成色テーブルを記憶する合成色テーブル記憶部を更に備え、
    前記受信部は、前記第１手書き位置情報とともに前記第１端末装置の端末識別情報である第１端末識別情報を受信し、前記第２手書き位置情報とともに前記第２端末装置の端末識別情報である第２端末識別情報を受信し、
    前記合成部は、前記合成色テーブルを参照し、前記第１端末識別情報に対応付けられた色情報が示す合成色で前記第１手書き画像データを前記画面データに合成し、前記第２端末識別情報に対応付けられた色情報が示す合成色で前記第２手書き画像データを前記画面データに合成する請求項４に記載の画像合成システム。
  6. 前記画像合成装置は、
    端末装置を識別する端末識別情報と手書き画像データを合成するか否かを示す合成有無情報とを対応付けた合成判別テーブルを記憶する合成判別テーブル記憶部を更に備え、
    前記受信部は、前記第１手書き位置情報とともに前記第１端末装置の端末識別情報である第１端末識別情報を受信し、前記第２手書き位置情報とともに前記第２端末装置の端末識別情報である第２端末識別情報を受信し、
    前記合成部は、前記合成判別テーブルを参照し、前記第１端末識別情報に対応付けられた合成有無情報が合成有を示す場合、前記画面データに前記第１手書き画像データを合成し、前記第２端末識別情報に対応付けられた合成有無情報が合成有を示す場合、前記画面データに前記第２手書き画像データを合成する請求項４又は５に記載の画像合成システム。
  7. 前記画像合成装置は、
    前記画面データに基づく画面を投影し、前記合成画面データが生成されると、当該合成画面データに基づく画面を投影する投影部を更に備える請求項１〜６のいずれか１つに記載の画像合成システム。
  8. 前記画像合成装置は、
    前記画面データに基づく画面を投影し、前記合成画面データが生成されると、当該合成画面データに基づく画面を投影する投影部と、
    端末装置を識別する端末識別情報と、投影されている画面と同期するか否かを示す同期有無情報と、を対応付けた同期判別テーブルを記憶する同期判別テーブル記憶部とを更に備え、
    前記配信部は、前記同期判別テーブルを参照し、前記第１端末装置及び前記第２端末装置のうち同期有を示す同期有無情報に対応付けられた端末装置に前記合成画面データを配信する請求項４〜６のいずれか１つに記載の画像合成システム。
  9. 前記同期判別テーブルは、同期無を示す同期有無情報に、合成対象の手書き情報が生成された端末装置の端末識別情報である同期対象端末識別情報を対応付け、
    前記合成部は、前記同期判別テーブルを参照し、前記同期対象端末識別情報が示す端末装置の手書き情報から生成された手書き画像データと前記画面データとを合成して配信用合成画面データを生成し、
    前記配信部は、前記同期判別テーブルを参照し、前記第１端末装置及び前記第２端末装置のうち前記同期対象端末識別情報が対応付けられた前記端末識別情報が示す端末装置に前記配信用合成画面データを配信する請求項８に記載の画像合成システム。
  10. 画像合成装置と、当該画像合成装置とネットワークを介して接続されるコンピュータで実行されるプログラムとを、備える画像合成システムであって、
    前記プログラムは、
    前記画像合成装置から画面用の画像データである画面データを受信する受信部と、
    前記画面データに基づく画面を変倍操作で設定された変倍率で変倍して表示部に表示させる表示制御部と、
    前記変倍して表示された画面に対するタッチ入力を受け付ける毎に、当該タッチ入力が行われた位置を示す手書き位置情報を取得し、当該手書き位置情報を前記変倍率の逆数で変倍する取得部と、
    前記手書き位置情報が取得されて変倍される毎に、当該変倍された手書き位置情報を前記画像合成装置に送信する送信部として、前記コンピュータを機能させ、
    前記画像合成装置は、
    前記画面データを前記コンピュータに配信する配信部と、
    前記コンピュータから前記変倍された手書き位置情報が送信される毎に、当該変倍された手書き位置情報を受信し、手書き位置情報記憶部に記憶する受信部と、
    前記変倍された手書き位置情報が前記手書き位置情報記憶部に記憶される毎に、当該手書き位置情報記憶部に記憶されている前記変倍された手書き位置情報を用いて、前記タッチ入力に基づいて描画された手書き情報の画像データである手書き画像データを生成する生成部と、
    前記手書き画像データが生成される毎に、前記画面データと当該手書き画像データとを合成して合成画面データを生成する合成部と、を備える画像合成システム。
JP2011286230A 2011-12-27 2011-12-27 画像合成システム Expired - Fee Related JP6051521B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2011286230A JP6051521B2 (ja) 2011-12-27 2011-12-27 画像合成システム
US13/724,158 US9875571B2 (en) 2011-12-27 2012-12-21 Image combining apparatus, terminal device, and image combining system including the image combining apparatus and terminal device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011286230A JP6051521B2 (ja) 2011-12-27 2011-12-27 画像合成システム

Publications (2)

Publication Number Publication Date
JP2013135422A JP2013135422A (ja) 2013-07-08
JP6051521B2 true JP6051521B2 (ja) 2016-12-27

Family

ID=48654075

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011286230A Expired - Fee Related JP6051521B2 (ja) 2011-12-27 2011-12-27 画像合成システム

Country Status (2)

Country Link
US (1) US9875571B2 (ja)
JP (1) JP6051521B2 (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6464692B2 (ja) 2014-11-19 2019-02-06 セイコーエプソン株式会社 情報処理装置、情報処理システム、情報処理方法及びプログラム
JP6623876B2 (ja) * 2016-03-24 2019-12-25 富士通株式会社 描画処理装置、方法、及びプログラム
JP6747025B2 (ja) * 2016-04-13 2020-08-26 セイコーエプソン株式会社 表示システム、表示装置、及び、表示システムの制御方法
JP7310252B2 (ja) 2019-04-19 2023-07-19 株式会社リコー 動画生成装置、動画生成方法、プログラム、記憶媒体
TWI737138B (zh) * 2020-01-22 2021-08-21 明基電通股份有限公司 投影機推薦方法及投影機推薦系統

Family Cites Families (61)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5886588A (ja) 1981-11-18 1983-05-24 株式会社東芝 付加表示機能を有する表示システム
JPH01125187A (ja) * 1987-11-10 1989-05-17 Mitsubishi Electric Corp 電子会議システム
JPH02188818A (ja) * 1989-01-18 1990-07-24 Hitachi Ltd 手書き入出力装置並びにこの手書き入出力装置を用いた手書き入力システム
JP3059228B2 (ja) * 1991-02-28 2000-07-04 株式会社日立製作所 情報処理装置
US6141000A (en) * 1991-10-21 2000-10-31 Smart Technologies Inc. Projection display system with touch sensing on screen, computer assisted alignment correction and network conferencing
JP3178871B2 (ja) 1991-12-18 2001-06-25 松下電器産業株式会社 画像通信装置
JP3526067B2 (ja) * 1993-03-15 2004-05-10 株式会社東芝 再生装置及び再生方法
US5818616A (en) * 1993-08-23 1998-10-06 Canon Kabushiki Kaisha Optical communication apparatus and conference system
JP3237339B2 (ja) * 1993-09-30 2001-12-10 日立ソフトウエアエンジニアリング株式会社 手書き入力会議システム
US5583980A (en) * 1993-12-22 1996-12-10 Knowledge Media Inc. Time-synchronized annotation method
US5730602A (en) * 1995-04-28 1998-03-24 Penmanship, Inc. Computerized method and apparatus for teaching handwriting
JP2827984B2 (ja) 1995-09-29 1998-11-25 日本電気株式会社 プレゼンテーション装置
US6084584A (en) * 1996-10-01 2000-07-04 Diamond Multimedia Systems, Inc. Computer system supporting portable interactive graphics display tablet and communications systems
US6388654B1 (en) * 1997-10-03 2002-05-14 Tegrity, Inc. Method and apparatus for processing, displaying and communicating images
JPH11237866A (ja) 1998-02-20 1999-08-31 Ricoh Co Ltd 画像表示装置
CA2267733A1 (en) * 1998-04-06 1999-10-06 Smart Technologies, Inc. Method for editing objects representing writing on an electronic writeboard
US6211863B1 (en) * 1998-05-14 2001-04-03 Virtual Ink. Corp. Method and software for enabling use of transcription system as a mouse
JP2000043484A (ja) * 1998-07-30 2000-02-15 Ricoh Co Ltd 電子黒板システム
US7330875B1 (en) * 1999-06-15 2008-02-12 Microsoft Corporation System and method for recording a presentation for on-demand viewing over a computer network
US6763373B2 (en) * 1999-10-13 2004-07-13 Datahouse Labs, Inc. Method and system for creating and sending handwritten or handdrawn messages
JP4348831B2 (ja) * 2000-04-28 2009-10-21 ブラザー工業株式会社 手書き入力データ表示システム，座標データ入力装置，表示装置及び手書き入力データ表示装置
MC200048A1 (fr) * 2000-07-31 2002-07-02 Gerard Popineau Dispositif de commande d'un systeme informatique
CA2425746C (en) * 2000-11-13 2010-01-12 Gtco Cal Comp Collaborative input system
US7346841B2 (en) * 2000-12-19 2008-03-18 Xerox Corporation Method and apparatus for collaborative annotation of a document
US7120320B2 (en) * 2001-09-21 2006-10-10 Anoto Ab Method and apparatus for displaying a handwritten message based on position and time data
US6983370B2 (en) * 2001-11-27 2006-01-03 Motorola, Inc. System for providing continuity between messaging clients and method therefor
TW532679U (en) * 2001-12-20 2003-05-11 Ace Cad Entpr Co Ltd Mobile phone pen-type input device
JP2003198870A (ja) * 2001-12-25 2003-07-11 Seiko Epson Corp プロジェクタのワイヤレス制御システム及びワイヤレス制御方法
US7018043B2 (en) * 2001-12-26 2006-03-28 Infocus Corporation Projector device user interface system
JP4147807B2 (ja) * 2002-04-15 2008-09-10 株式会社日立製作所 消去機能付電子ペン
CN1268122C (zh) * 2002-07-23 2006-08-02 精工爱普生株式会社 显示方法及投影机
JP4087203B2 (ja) * 2002-09-20 2008-05-21 株式会社リコー 画面データ管理装置、画面データ管理システム、画面データ管理方法、および画面データ管理プログラム
JP4244614B2 (ja) * 2002-10-31 2009-03-25 株式会社日立製作所 手書き入力装置、プログラムおよび手書き入力方法システム
US7129934B2 (en) * 2003-01-31 2006-10-31 Hewlett-Packard Development Company, L.P. Collaborative markup projection system
BRPI0406218A (pt) * 2003-03-31 2005-08-09 Samsung Electronics Co Ltd Aparelho de gravação e/ou reprodução que reproduz dados de áudio e/ou vìdeo (av) lidos de uma mìdia de armazenamento em um modo interativo, aparelho de gravação e/ou reprodução que reproduz primeiros dados e dados interativos lidos de uma mìdia de armazenamento em um modo interativo, método de gerenciamento de uma memória de armazenamento temporário ("buffer") de enav em um aparelho interativo para utilização em um modo interativo, método de gerenciamento de uma memória de armazenamento temporário ("buffer") para um serviço de "chat" em um dispositivo interativo possuindo uma memória de armazenamento temporário ("buffer") de enav, mìdia passìvel de leitura em computador, método de gerenciamento de uma memória de armazenamento temporário ("buffer") de um aparelho de gravação e/ou reprodução que reproduz primeiros dados e dados interativos lidos de uma mìdia de armazenamento em um modo interativo, e mìdia de armazenamento de informações
US20040228531A1 (en) * 2003-05-14 2004-11-18 Microsoft Corporation Instant messaging user interfaces
JP4565232B2 (ja) 2003-08-29 2010-10-20 学校法人慶應義塾 講義ビデオ作成システム
JP2005092158A (ja) 2003-09-19 2005-04-07 Ricoh Co Ltd 疑似電子白板装置、疑似電子白板投影方法、および疑似電子白板投影プログラム
US7692636B2 (en) * 2004-09-30 2010-04-06 Microsoft Corporation Systems and methods for handwriting to a screen
JP4235838B2 (ja) * 2006-09-04 2009-03-11 セイコーエプソン株式会社 プロジェクタ、プログラムおよび情報記憶媒体
KR100850313B1 (ko) * 2006-11-01 2008-08-04 이용직 필기형 유무선 복합 인스턴트 메신저 서비스 시스템 및 그서비스 방법
JP2008245005A (ja) * 2007-03-28 2008-10-09 Canon Inc 電子描画装置、その制御方法、及びコンピュータプログラム
US8707176B2 (en) * 2007-04-25 2014-04-22 Canon Kabushiki Kaisha Display control apparatus and display control method
TWI399970B (zh) * 2007-10-12 2013-06-21 Inventec Appliances Corp 行動通訊裝置即時互動方法
JP4865671B2 (ja) * 2007-10-17 2012-02-01 シャープ株式会社 情報表示装置及び情報表示システム
US8187005B1 (en) * 2007-11-13 2012-05-29 Einstruction Corporation Interactive chalkboard
US8275197B2 (en) * 2008-06-14 2012-09-25 Microsoft Corporation Techniques to manage a whiteboard for multimedia conference events
JP5049908B2 (ja) * 2008-07-30 2012-10-17 富士フイルム株式会社 コンテンツ文書再生データ作成装置、方法およびプログラム
JP2010146086A (ja) * 2008-12-16 2010-07-01 Konica Minolta Business Technologies Inc データ配信システム、データ配信装置、データ配信方法およびデータ配信プログラム
JP5170771B2 (ja) * 2009-01-05 2013-03-27 任天堂株式会社 描画処理プログラム、情報処理装置、情報処理システムおよび情報処理制御方法
US9134947B2 (en) * 2009-03-31 2015-09-15 Ricoh Company, Ltd. Annotating digital files of a host computer using a peripheral device
JP5487695B2 (ja) * 2009-04-13 2014-05-07 コニカミノルタ株式会社 中継装置、会議支援システム及びプログラム
JP5658547B2 (ja) * 2009-12-29 2015-01-28 シャープ株式会社 ネットワークシステム、通信方法、および通信端末
EP2348487A3 (en) * 2010-01-22 2017-09-13 Samsung Electronics Co., Ltd. Method and apparatus for creating animation message
EP2355472B1 (en) * 2010-01-22 2020-03-04 Samsung Electronics Co., Ltd. Apparatus and method for transmitting and receiving handwriting animation message
JP4957821B2 (ja) * 2010-03-18 2012-06-20 コニカミノルタビジネステクノロジーズ株式会社 会議システム、情報処理装置、表示方法および表示プログラム
KR101182090B1 (ko) * 2010-03-18 2012-09-13 삼성전자주식회사 필기 애니메이션 메시지를 전송하기 위한 장치 및 방법
JP5640468B2 (ja) * 2010-06-01 2014-12-17 大日本印刷株式会社 情報処理システム及びプログラム
US9086798B2 (en) * 2011-03-07 2015-07-21 Ricoh Company, Ltd. Associating information on a whiteboard with a user
US9075561B2 (en) * 2011-07-29 2015-07-07 Apple Inc. Systems, methods, and computer-readable media for managing collaboration on a virtual work of art
US9575712B2 (en) * 2012-11-28 2017-02-21 Microsoft Technology Licensing, Llc Interactive whiteboard sharing

Also Published As

Publication number Publication date
US20130162671A1 (en) 2013-06-27
JP2013135422A (ja) 2013-07-08
US9875571B2 (en) 2018-01-23

Similar Documents

Publication Publication Date Title
CN104221047B (zh) 用于共享演示数据和注释的方法和设备
JP6051521B2 (ja) 画像合成システム
US20130290421A1 (en) Visualization of complex data sets and simultaneous synchronization of such data sets
JP6303446B2 (ja) 情報処理装置、プログラム、情報処理システム、及び情報処理方法
CN106708452B (zh) 一种信息共享方法及终端
JP2015018296A (ja) 表示制御装置、プログラム及び記録媒体
CN102880823A (zh) 信息处理方法及信息处理系统
JP2015087982A (ja) 情報処理装置及び表示拡大方法、並びにコンピュータ・プログラム
JP6321959B2 (ja) 表示制御装置、表示制御方法、及び、プログラム
JP5842392B2 (ja) コンテンツ共有システム、コンテンツ共有端末、サーバ、コンテンツ共有方法、および、コンピュータ・プログラム
JP2016038728A (ja) 画像表示装置、画像表示装置の制御方法、及びプログラム
JP2011151613A (ja) 情報共有装置、情報共有方法及びプログラム
JP5830055B2 (ja) 画像処理装置および画像処理システム
JP6267381B1 (ja) 看板設置データ生成送信プログラム、看板設置データ生成送信プログラムを実行する情報処理通信端末、情報処理通信サーバ
KR20190137939A (ko) 표시 제어 장치 및 표시 제어 방법
JP2004184576A (ja) プレゼンテーションシステム
JP5678753B2 (ja) 画面同期システムおよび情報処理装置
Chen et al. AR-Span: A Multi-Screen Adaptive Displaying System Using Smart Handheld Devices Based on Mobile Networks
JP2011198012A (ja) プロジェクターおよび投写方法
JP6784966B1 (ja) 画像表示方法、画像表示システム、及び画像表示プログラム
KR101849384B1 (ko) 3d 이미지 표시 시스템
JP2004054828A (ja) 画像処理装置
JP2017111251A (ja) 画像表示システムおよび画像表示方法
JP2017056607A (ja) データ処理装置、データ処理方法、プログラム
JP2014056367A (ja) 画像共有システム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20141118

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150916

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20151027

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20151217

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160524

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160715

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20161101

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20161114

R151 Written notification of patent or utility model registration

Ref document number: 6051521

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

LAPS Cancellation because of no payment of annual fees