JP5516882B2 - プログラム、情報記憶媒体、端末装置、表示システムおよび画像生成方法 - Google Patents

プログラム、情報記憶媒体、端末装置、表示システムおよび画像生成方法 Download PDF

Info

Publication number
JP5516882B2
JP5516882B2 JP2010170620A JP2010170620A JP5516882B2 JP 5516882 B2 JP5516882 B2 JP 5516882B2 JP 2010170620 A JP2010170620 A JP 2010170620A JP 2010170620 A JP2010170620 A JP 2010170620A JP 5516882 B2 JP5516882 B2 JP 5516882B2
Authority
JP
Japan
Prior art keywords
image
information
display
icon
configuration
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2010170620A
Other languages
English (en)
Other versions
JP2012032933A (ja
Inventor
壱星 横山
朋弘 野溝
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Priority to JP2010170620A priority Critical patent/JP5516882B2/ja
Priority to US13/192,582 priority patent/US9170767B2/en
Publication of JP2012032933A publication Critical patent/JP2012032933A/ja
Application granted granted Critical
Publication of JP5516882B2 publication Critical patent/JP5516882B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04803Split screen, i.e. subdividing the display area or the window area into separate subareas
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/04Changes in size, position or resolution of an image

Description

本発明は、プログラム、情報記憶媒体、端末装置、表示システムおよび画像生成方法に関する。
例えば、特開2004−54783号公報では、複数の端末機器からサイズ変換処理されたキャプチャー画像データを受信して1画面の画像データに合成して表示する表示システムが記載されている。また、当該公報では、ユーザーが、表示装置のリモコン(リモートコントローラー)を操作することにより、特定の端末装置の画像を拡大表示したり、消去したり、追加したりすることが記載されている。
特開2004−54783号公報
しかし、例えば、会議等では参加者からの要求に応じてプレゼンターがリモコンで当該参加者の使用する端末装置の画像の拡大等を行う場合、プレゼンターが、当該画像の特定、要求内容の把握、要求に応じたリモコン操作を行わなければならず、操作に時間がかかってしまう。また、上記公報では、拡大表示させる分割画面等を端末機器側からも指定することが可能であると記載されているが、具体的な手法は記載されていない。さらに、参加者が、自分の端末装置を用いて、表示装置が表示する画像の構成変更等を行う場合、構成変更等の操作を行いやすくする必要がある。
本発明にかかるいくつかの態様は、上記課題を解決することにより、表示装置によって端末装置からの画像情報に基づく個別画像を含む全体画像が表示される場合に、全体画像の構成を変更する際の操作をより行いやすくすることが可能なプログラム、情報記憶媒体、端末装置、表示システムおよび画像生成方法を提供するものである。
本発明の態様の1つであるプログラムは、入力部を含む端末装置の有するコンピューターに、1台以上の端末装置からの画像情報に基づく個別画像を含み、表示装置によって表示される全体画像であって、当該全体画像における前記個別画像の配置を示し、かつ、複数の表示対象領域に区分された個別画像配置領域と、前記端末装置ごとのアイコンを含むアイコン配置領域とを含むように、前記全体画像の構成を変更するための構成変更画像を生成させ、前記構成の変更に関する操作を示す操作情報として、前記アイコン配置領域から前記表示対象領域への前記アイコンのドラッグアンドドロップ操作による第1の操作情報および前記ドラッグアンドドロップ操作以外の操作による第2の操作情報が前記入力部に入力されると、前記第1の操作情報または前記第2の操作情報に基づき、当該操作情報で示されるアイコンに対応したマーク画像を前記表示対象領域に配置した前記構成変更画像を生成させることを特徴とする。
また、本発明の態様の1つである情報記憶媒体は、入力部を含む端末装置の有するコンピューターにより読み取り可能なプログラムを記憶した情報記憶媒体であって、上記プログラムを記憶したことを特徴とする。
また、本発明の態様の1つである端末装置は、1台以上の端末装置からの画像情報に基づく個別画像を含み、表示装置によって表示される全体画像の構成を変更するための構成変更画像を生成する画像生成部と、前記構成の変更に関する操作を示す操作情報が入力される入力部と、を含む端末装置であって、前記構成変更画像は、前記全体画像における前記個別画像の配置を示し、かつ、複数の表示対象領域に区分された個別画像配置領域と、前記端末装置ごとのアイコンを含むアイコン配置領域とを含み、前記入力部は、前記操作情報として、前記アイコン配置領域から前記表示対象領域への前記アイコンのドラッグアンドドロップ操作による第1の操作情報および前記ドラッグアンドドロップ操作以外の操作による第2の操作情報が入力され、前記画像生成部は、前記第1の操作情報または前記第2の操作情報に基づき、当該操作情報で示されるアイコンに対応したマーク画像を前記表示対象領域に配置した前記構成変更画像を生成することを特徴とする。
また、本発明の態様の1つである表示システムは、1台以上の端末装置からの画像情報に基づく個別画像を含み、表示装置によって表示される全体画像の構成を変更するための構成変更画像を生成する画像生成部と、前記構成の変更に関する操作を示す操作情報が入力される入力部と、前記個別画像が表示される場合に、当該個別画像を示す画像情報を前記表示装置へ向け送信する送信部と、を含む端末装置と、前記画像情報を受信する受信部と、前記画像情報に基づき、前記全体画像を生成する表示側画像生成部と、前記全体画像を表示する表示側表示部と、を含む前記表示装置と、を含む表示システムであって、前記構成変更画像は、前記全体画像における前記個別画像の配置を示し、かつ、複数の表示対象領域に区分された個別画像配置領域と、前記端末装置ごとのアイコンを含むアイコン配置領域とを含み、前記入力部は、前記操作情報として、前記アイコン配置領域から前記表示対象領域への前記アイコンのドラッグアンドドロップ操作による第1の操作情報および前記ドラッグアンドドロップ操作以外の操作による第2の操作情報が入力され、前記画像生成部は、前記第1の操作情報または前記第2の操作情報に基づき、当該操作情報で示されるアイコンに対応したマーク画像を前記表示対象領域に配置した前記構成変更画像を生成することを特徴とする。
また、本発明の態様の1つである画像生成方法は、端末装置が、1台以上の端末装置からの画像情報に基づく個別画像を含み、表示装置によって表示される全体画像の構成を変更するための構成変更画像を生成する画像生成方法であって、前記構成変更画像は、前記全体画像における前記個別画像の配置を示し、かつ、複数の表示対象領域に区分された個別画像配置領域と、前記端末装置ごとのアイコンを含むアイコン配置領域とを含み、前記端末装置は、前記構成の変更に関する操作を示す操作情報として、前記アイコン配置領域から前記表示対象領域への前記アイコンのドラッグアンドドロップ操作による第1の操作情報および前記ドラッグアンドドロップ操作以外の操作による第2の操作情報が入力され、前記第1の操作情報または前記第2の操作情報に基づき、当該操作情報で示されるアイコンに対応したマーク画像を前記表示対象領域に配置した前記構成変更画像を生成することを特徴とする。
本発明によれば、端末装置等は、ドラッグアンドドロップ操作以外の操作にも対応することにより、表示装置によって端末装置からの画像情報に基づく個別画像を含む全体画像が表示される場合に、全体画像の構成を変更する際の操作をより行いやすくすることができる。
また、前記第2の操作情報は、前記アイコンが操作の対象として強調表示された状態での操作による情報であってもよい。これによれば、端末装置等は、アイコンが操作の対象として強調表示された状態での操作に応じてマーク画像の配置を行うことができる。
また、前記第2の操作情報は、マウスポインターが前記アイコンと重なった状態での操作による情報であってもよい。これによれば、端末装置等は、マウスポインターがアイコンと重なった状態での操作に応じてマーク画像の配置を行うことができる。
また、前記第2の操作情報は、マウスポインターが前記アイコンと重なった状態でのダブルクリック操作による情報であってもよい。これによれば、端末装置等は、マウスポインターがアイコンと重なった状態でのダブルクリック操作に応じてマーク画像の配置を行うことができる。
また、前記プログラムは、前記コンピューターに、前記第2の操作情報に基づき、当該第2の操作情報で示されるアイコンに対応したマーク画像を、前記表示対象領域に前記マーク画像が配置されていない空き領域がある場合は当該空き領域に配置させ、前記空き領域がない場合は最も優先度の低い前記表示対象領域に配置させてもよい。これによれば、端末装置等は、空き領域等に自動的にマーク画像を配置することができる。
第1の実施例における全体画像の表示状況を示す図である。 第1の実施例におけるプロジェクターの機能ブロック図である。 第1の実施例におけるPCの機能ブロック図である。 第1の実施例におけるPCの画像表示手順を示すフローチャートである。 第1の実施例におけるプロジェクターの画像表示手順を示すフローチャートである。 第1の実施例におけるPCとプロジェクターでの情報のやりとりを示すシーケンス図である。 第1の実施例における検索画像の一例を示す図である。 第1の実施例における構成変更画像の一例を示す図である。 第1の実施例における各装置における画像遷移の一例を示す図である。 第1の実施例における各装置における画像遷移の他の一例を示す図である。 第1の実施例における各装置における画像遷移の他の一例を示す図である。 その他の実施例における構成変更画像の一例を示す図である。
以下、本発明をPC(Personal Computer)等に適用した実施例について、図面を参照しつつ説明する。なお、以下に示す実施例は、特許請求の範囲に記載された発明の内容を何ら限定するものではない。また、以下の実施例に示す構成のすべてが、特許請求の範囲に記載された発明の解決手段として必須であるとは限らない。
(第1の実施例)
図1は、第1の実施例における全体画像20の表示状況を示す図である。本実施例では、1台のプロジェクター100と、4台のPC200−1〜200−4が、アクセスポイント300を介して無線接続されており、プロジェクター100が、各PC200からの画像情報に基づき、最大4つの個別画像30〜33を含む全体画像20をスクリーン10に投写する。例えば、会議に参加する参加者は、自分のPC200に表示される構成変更画像のアイコン等を操作することにより、全体画像20における個別画像30〜33の構成を変更することができる。なお、プロジェクター100は表示装置の一種であり、PC200は端末装置の一種であり、プロジェクター100と各PC200は同じ部屋に配置されてもよいし、異なる部屋に配置されてもよい。次に、このような機能を有するプロジェクター100とPC200の機能ブロックについて説明する。
図2は、第1の実施例におけるプロジェクター100の機能ブロック図である。プロジェクター100は、アクセスポイント300を介してPC200と通信を行う表示側通信部110と、表示側情報生成部120と、表示側画像生成部130と、表示側記憶部140と、表示側記憶部140内のデータを更新する表示側更新部150と、表示側表示部の一種である投写部190を含んで構成されている。また、表示側記憶部140は、PC200からの画像情報等を示す画像データ142、全体画像20および構成変更画像の構成を示す画像構成データ144、通信対象の装置を示す装置管理データ146等を記憶している。なお、表示側通信部110は、PC200から画像情報等を受信する受信部の一種である。
図3は、第1の実施例におけるPC200の機能ブロック図である。PC200は、アクセスポイント300を介してプロジェクター100と通信を行う端末側通信部210と、端末側情報生成部220と、端末側画像生成部230と、端末側記憶部240と、端末側記憶部240内のデータを更新する端末側更新部250と、端末側表示部290を含んで構成されている。また、端末側記憶部240は、画像情報等を示す画像データ242、構成変更画像の構成を示す画像構成データ244、通信対象の装置を示す装置管理データ246等を記憶している。なお、端末側通信部210は、プロジェクター100へ向け画像情報等を送信する送信部の一種である。
また、プロジェクター100およびPC200は、以下のハードウェアを用いてこれらの各部として機能してもよい。例えば、プロジェクター100およびPC200は、表示側通信部110、端末側通信部210は無線通信ユニット等、表示側情報生成部120、表示側更新部150、端末側情報生成部220、端末側更新部250はCPU等、表示側画像生成部130、端末側画像生成部230は画像処理回路等、表示側記憶部140、端末側記憶部240はRAM等、入力部260はキーボードやマウス等に接続されるUSB(Universal Serial Bus)ポート等、投写部190はランプ、液晶パネル、液晶駆動回路、レンズ等、端末側表示部290はバックライト、液晶パネル、液晶駆動回路等を用いてもよい。また、PC200の有するコンピューターは、情報記憶媒体280に記憶されたプログラムを読み取って端末側画像生成部230等として機能してもよい。このような情報記憶媒体280としては、例えば、CD−ROM、DVD−ROM、ROM、RAM、HDD等を適用できる。
次に、プロジェクター100とPC200を用いた画像の構成変更要求に応じた全体画像20の投写手順について説明する。図4は、第1の実施例におけるPC200の画像表示手順を示すフローチャートである。また、図5は、第1の実施例におけるプロジェクター100の画像表示手順を示すフローチャートである。また、図6は、第1の実施例におけるPC200とプロジェクター100での情報のやりとりを示すシーケンス図である。
まず、図4を用いて、PC200の画像表示手順について説明する。会議の参加者は、自分のPC200をプロジェクター100に接続させるため、PC200のキーボードやマウス等を操作することにより、プロジェクター検索プログラムの実行指示を行う。プロジェクター検索プログラムは、あらかじめPC200にインストールされているものとする。端末側情報生成部220は、入力部260からの当該実行指示を示す情報に基づき、ネットワークにおける各装置の接続状態等を確認するための状態確認情報を生成し、端末側通信部210は、当該状態確認情報をプロジェクター100へ向け送信し、プロジェクター100から各装置の接続状態等を示す状態通知情報を受信する。端末側更新部250は、当該状態通知情報に基づき、装置管理データ246を更新し、端末側画像生成部230は、画像データ242と、装置管理データ246に基づき、プロジェクターの検索結果を示す検索画像を生成し、端末側表示部290は、当該検索画像を表示する(ステップS1)。
図7は、第1の実施例における検索画像400の一例を示す図である。検索画像400は、上述したプロジェクター検索プログラムをPC200において実行することにより、PC200の画面に表示される画像であり、装置管理データ246で示されるプロジェクターの状態、プロジェクター名、IPアドレス等を示す検索結果表示領域410、接続先のプロジェクターを示す接続プロジェクターリスト表示領域420、最新の検索結果を得るための更新ボタン画像430、接続プロジェクターリスト表示領域420をクリアーするためのクリアーボタン画像440、接続プロジェクターリスト表示領域420に新たなプロジェクターを登録するための登録ボタン画像450、オプション設定ボタン画像460、会議に参加する(PC200をプロジェクター100に接続する)ための参加ボタン画像470等を含む。
参加者は、PC200のマウスを用いて、参加ボタン画像470をクリックすることにより、会議への参加指示を行う。端末側情報生成部220は、入力部260からの当該参加指示を示す情報に基づき、参加要求情報を生成し、端末側通信部210は、当該参加要求情報をプロジェクター100へ向け送信し、プロジェクター100から状態通知情報を受信する。端末側更新部250は、当該状態通知情報に基づき、装置管理データ246を更新する(ステップS2)。
端末側更新部250は、端末側通信部210がプロジェクター100から構成変更画像の構成を示す画像構成情報を受信したかどうかを判定する(ステップS3)。画像構成情報が受信された場合、端末側更新部250は、当該画像構成情報に基づき、画像構成データ244を更新する。端末側画像生成部230は、画像構成データ244に基づき、構成変更画像を生成し、端末側表示部290は、構成変更画像を表示する(ステップS4)。
図8は、第1の実施例における構成変更画像500の一例を示す図である。構成変更画像500は、全体画像20を構成する個別画像の個数を変更するための表示モードボタン画像510〜514、2行2列の4つの表示対象領域531〜534で構成される個別画像配置領域530、全体画像20の表示を指示するための表示ボタン画像520、全体画像20に代えてユーザーロゴ画像等を表示する指示を行うための画像ミュートボタン画像522、現在の全体画像20の表示を維持する指示を行うための一時停止ボタン画像524、アイコン550〜556が配置されるアイコン配置領域540、操作に応じて表示対象領域531〜534を移動し、表示する個別画像を選択させるための矩形状のカーソル画像590等を含む。また、構成変更画像500は、「ファイル」、「ツール」、「ヘルプ」を示すメニュー画像、接続プロジェクター名を示す画像等を含む。
例えば、図8に示す構成変更画像500は、PC200−1(コンピューター名は「CPA」)の画面で表示される画像である。個別画像配置領域530において、左上領域にある表示対象領域531にCPAを示すマーク画像570が配置され、右上領域にある表示対象領域532にCPB(PC200−2)を示すマーク画像572が配置され、左下領域にある表示対象領域533にCPC(PC200−3)を示すマーク画像574が配置され、右下領域にある表示対象領域534には、マーク画像が配置されていないため、マーク画像が窪んだ形状である窪み画像580が配置されている。また、全体画像20において表示中である場合はマーク画像570〜574の背景が白で表示され、表示中でない場合はマーク画像570〜574の背景がグレーで表示される。例えば、図8に示す例では、マーク画像570、572の背景が白になっており、全体画像20にPC200−1、200−2の2つの個別画像が左右に並んで配置されていることを示す。なお、窪み画像580の背景はグレーである。
また、アイコン配置領域540において、右側の他装置領域544には参加順(プロジェクター100への接続順)に左から他のPC200を示すアイコン552〜556が配置され、左側の自装置領域542には参加順にかかわらず固定的に自装置を示すアイコン550が配置される。また、アイコン550〜556の背景は個別画像配置領域530における表示状態に応じて変化する。例えば、図8に示す例では、マーク画像が表示され、かつ、個別画像が表示されている表示中状態であるアイコン550、552の背景にあるアイコン背景画像560、562は白(第1の状態)で表示され、マーク画像が表示され、かつ、個別画像が表示されていない表示待機状態であるアイコン554の背景にあるアイコン背景画像564はグレー(第2の状態)で表示され、マーク画像が表示されていない非表示状態であるアイコン556の背景には何も表示されていない(第3の状態)。さらに、自端末装置のアイコン550は他端末装置のアイコン552〜556より大きく表示され、自端末装置のマーク画像570は他端末装置のマーク画像572、574より大きく表示されている。また、アイコン550〜556はそれぞれが異なる色で表示され、マーク画像570〜574もそれぞれが異なる色で表示される。さらに、アイコン550〜556およびマーク画像570〜574にはPC200のホスト名(ユーザーによる名称設定も可能)が付加されて表示される。
本実施形態においては、プロジェクター100とPC200とが接続を確立したときに、プロジェクター100によって割り当てられたPC200に固有の色情報を含む第1の状態通知情報が、PC200に通知される。ここで、色情報はアイコンおよびマーク画像に使用する色を指定するための情報であり、あらかじめ設定された色に対応する数値であってもよいし、色の名称を表すテキストデータであってもよい。また、所定のビット数で表されるRGB値であってもよい。新たにプロジェクター100との接続を確立したPC200は、プロジェクター100によって割り当てられたPC200に固有の色情報を含む第2の状態通知情報を、既にプロジェクター100との接続を確立している他のPC200他端末装置に通知する。新たにPC100との接続を確立したPC200からの色情報を受け取った他のPC200は、それぞれ自端末装置に割り当てられた色情報を含む第3の状態通知情報を、プロジェクター100との接続を確立している他のPC200に通知する。これにより、構成変更画像500のアイコン配置領域540に配置されるアイコンの色と、プロジェクター100との接続を確立したPC200との対応は、どのPC200においても同じとなるため、各参加者は、複数のPC200がプロジェクター100との接続を確立している場合でも、アイコンの色で所望のPC200を容易に特定することが可能となる。なお、プロジェクター100がすべてのPC200の色情報を含む第1の状態通知情報を送信する場合には第3の状態通知情報の通知は不要である。
各PC200を操作する各参加者は、各PC200の画面に検索画像400および構成変更画像500を表示して操作することが可能であり、例えば、アイコン550〜556をアイコン配置領域540から個別画像配置領域530にドラッグアンドドロップすることにより、個別画像配置領域530の構成を変更することができる。例えば、各参加者は、PC200−2(CPB)のアイコン552の位置にマウスポインターを重ねてクリックした状態で、右上の表示対象領域532までマウスポインターを移動させて(アイコン552はアイコン配置領域540に残ったまま、アイコン552と同一形態のアイコンがマウスポインターと連動して移動する)マウスから指を離すことにより、表示対象領域532にPC200−2に対応したマーク画像572を配置することができ、PC200−2の個別画像を含む全体画像20をプロジェクター100に投写させることが可能になる。端末側情報生成部220は、入力部260からの情報に基づき、構成変更操作があったかどうかを判定する(ステップS5)。端末側情報生成部220は、構成変更操作があった場合、構成変更要求情報を生成し、端末側通信部210は、当該構成変更要求情報をプロジェクター100へ向け送信する(ステップS6)。
また、端末側情報生成部220は、端末側通信部210によってプロジェクター100から画像情報の送信開始要求情報が受信されたかどうかを判定する(ステップS7)。端末側情報生成部220は、送信開始要求情報が受信された場合、画像データ242に基づき、図1に示すグラフ画像等を示す画像情報を生成し、端末側通信部210は、当該画像情報をプロジェクター100へ向け送信する(ステップS8)。なお、端末側画像生成部230は、図1に示すグラフ画像等を生成し、当該グラフ画像等を連続的にキャプチャーして画像データ242として端末側記憶部240に記憶する。
また、端末側情報生成部220は、端末側通信部210によってプロジェクター100から画像情報の送信停止要求情報が受信されたかどうかを判定する(ステップS9)。端末側情報生成部220は、送信停止要求情報が受信された場合、画像情報の生成を停止し、端末側通信部210は、画像情報の送信を停止する(ステップS10)。なお、この場合、端末側画像生成部230は、画像のキャプチャーを停止してもよい。
また、参加者は、構成変更画像500の「ツール」のサブメニューから「退出」を選択することにより自分のPC200の通信を切断することができ、当該サブメニューから「会議の終了」を選択することにより、すべてのPC200の通信を切断することができる。端末側情報生成部220は、入力部260からの情報に基づき、「会議の終了」が選択されたかどうかを判定する(ステップS11)。端末側情報生成部220は、「会議の終了」が選択された場合、終了要求情報を生成し、端末側通信部210は、当該終了要求情報をプロジェクター100へ向け送信する(ステップS12)。また、端末側情報生成部220は、終了要求情報の受信に応じてプロジェクター100から送信される終了通知情報が端末側通信部210によって受信されたかどうかを判定する(ステップS13)。PC200は、終了要求情報を送信した場合または終了通知情報を受信した場合、上述した一連の処理を終了して検索画像400を表示し、終了しない場合、上述したステップS3〜S13の処理を繰り返し実行する。なお、端末側情報生成部220は、「会議の終了」が選択された場合、「会議に参加中の全ユーザーはプロジェクターから切断され、検索画面に戻ります。会議を終了しますか?」といった文字列を示す確認画像を生成してもよく、終了通知情報が受信された場合、「他のユーザーが会議を終了しました。検索画面に戻ります。」といった文字列を示す通知画像を生成してもよい。
次に、図5を用いて、プロジェクター100における処理手順について説明する。表示側情報生成部120は、表示側通信部110によってPC200から状態確認情報が受信されたかどうかを判定する(ステップP1)。表示側情報生成部120は、状態確認情報が受信された場合、装置管理データ146に基づき、状態通知情報を生成し、表示側通信部110は、当該状態通知情報を送信元のPC200へ向け送信する(ステップP2)。
また、表示側更新部150は、表示側通信部110によってPC200から参加要求情報が受信されたかどうかを判定する(ステップP3)。表示側更新部150は、参加要求情報が受信された場合、当該参加要求情報に基づき、装置管理データ146を更新する。また、この場合、表示側情報生成部120は、装置管理データ146に基づき、状態通知情報を生成し、状況に応じて画像構成データ144に基づき、画像構成情報を生成する。表示側通信部110は、当該状態通知情報および当該画像構成情報を、参加中の各PC200へ向け送信する(ステップP4)。
また、表示側更新部150は、表示側通信部110によってPC200から構成変更要求情報が受信されたかどうかを判定する(ステップP5)。表示側更新部150は、構成変更要求情報が受信された場合、当該構成変更要求情報に基づき、画像構成データ144を更新する。また、この場合、表示側情報生成部120は、画像構成データ144に基づき、画像構成情報を生成し、状況に応じて、送信開始要求情報、送信停止要求情報を生成する。より具体的には、例えば、表示側情報生成部120は、新たに個別画像を表示する必要が生じた場合に当該個別画像の画像情報の送信元となるPC200に対して送信開始要求情報を生成し、個別画像を表示する必要がなくなった場合に当該個別画像の画像情報の送信元となっているPC200に対して送信停止要求情報を生成する。表示側通信部110は、当該画像構成情報、当該送信開始要求情報および当該送信停止要求情報を、参加中の各PC200へ向け送信する。また、表示側画像生成部130は、画像データ142、画像構成データ144に基づき、画像の構成に応じて全体画像20を生成し、投写部190は、当該全体画像20を投写する(ステップP6)。
また、表示側更新部150は、表示側通信部110によってPC200から画像情報が受信されたかどうかを判定する(ステップP7)。表示側更新部150は、画像情報が受信された場合、当該画像情報に基づき、画像データ142を更新する。また、この場合、表示側画像生成部130は、画像データ142、画像構成データ144に基づき、全体画像20を生成し、投写部190は、当該全体画像20を投写する(ステップP8)。
表示側情報生成部120は、表示側通信部110によってPC200から終了要求情報が受信されたかどうかを判定する(ステップP9)。表示側情報生成部120は、終了要求情報が受信された場合、終了通知情報を生成する。表示側通信部110は、当該終了通知情報を各PC200へ向け送信する。表示側更新部150は、会議の終了に伴い、装置管理データ146、画像構成データ144を、例えば、初期状態等に更新する(ステップP10)。プロジェクター100は、投写終了指示があるかどうかを判定し(ステップP11)、投写終了指示があった場合は上述した一連の処理を終了する。
ここで、プロジェクター100とPC200−1〜200−4における画像遷移についてより詳細に説明する。図9は、第1の実施例における各装置における画像遷移の一例を示す図である。図10は、第1の実施例における各装置における画像遷移の他の一例を示す図である。図11は、第1の実施例における各装置における画像遷移の他の一例を示す図である。ここでは、説明を簡単にするため、PC200−1(CPA)が画像Aを表示し、PC200−2(CPB)が画像Bを表示し、PC200−3(CPC)が画像Cを表示し、PC200−4(CPD)が画像Dを表示しているものとする。また、後述する時点t1〜t12は連続した時点であるものとする。
時点t1においては、会議に参加しているPC200は存在せず、プロジェクター100(EMP00000000)は、単色の画像を投写している。時点t2において、最初にCPAが会議に参加した場合、プロジェクター100は、当該参加に応じてCPAの画像Aを含む全体画像20を投写する。一方、時点t3において、CPBが参加した場合、プロジェクター100は、自動的に画像Bを投写せず、CPAの画像Aを含む全体画像20の投写を継続する。さらに、時点t4において、CPCおよびCPDが参加した場合、プロジェクター100は、自動的に画像Cおよび画像Dを投写せず、CPAの画像Aを含む全体画像20の投写を継続する。すなわち、プロジェクター100は、最初に参加したPC200の画像を、明示的な表示指示の有無にかかわらず自動的に投写するが、2番目以降に参加したPC200の画像は明示的な表示指示がなければ、投写しない。
時点t5において、CPAを操作する参加者が、PC200−1に表示された構成変更画像500において、CPBのアイコンを個別画像配置領域530の右上領域にドラッグアンドドロップした場合、表示モードは1画面のままであるため、プロジェクター100が投写する全体画像20は変化しない。なお、アイコンをアイコン配置領域540から個別画像配置領域530にドラッグアンドドロップしても、当該アイコンはアイコン配置領域540に残り、個別画像配置領域530に当該アイコンに対応したマーク画像が追加される。時点t6において、CPAを操作する参加者が、PC200−1に表示された構成変更画像500において、2画面の表示モードボタン画像512をクリックした場合、プロジェクター100は、カーソル画像590の存在している行位置にあるマーク画像に対応した画像Aおよび画像Bを含む全体画像20を投写する。また、この場合、各PC200の個別画像配置領域530における右上の表示対象領域532の背景がグレーから白に変化する。
時点t7において、CPAを操作する参加者が、PC200−1に表示された構成変更画像500において、CPCのアイコンを個別画像配置領域530の左下領域にドラッグアンドドロップし、CPDのアイコンを個別画像配置領域530の右下領域にドラッグアンドドロップした場合、各PC200の表示対象領域533、534における窪み画像がマーク画像に変化するが、プロジェクター100が投写する全体画像20は変化しない。
時点t8において、CPAを操作する参加者が、PC200−1に表示された構成変更画像500において、4画面の表示モードボタン画像514をクリックした場合、プロジェクター100は、個別画像配置領域530にある各マーク画像に対応した画像A、画像B、画像Cおよび画像Dを含む全体画像20を投写する。また、この場合、各PC200の個別画像配置領域530における左下の表示対象領域533および右下の表示対象領域534の背景がグレーから白に変化し、CPC、CPDのアイコンのアイコン背景画像もグレーから白に変化する。
時点t9において、CPAを操作する参加者が、PC200−1に表示された構成変更画像500において、カーソル画像590を左下の表示対象領域533に移動し、2画面の表示モードボタン画像512をクリックした場合、プロジェクター100は、個別画像配置領域530にある各マーク画像に対応した画像Cおよび画像Dを含む全体画像20を投写する。また、この場合、各PC200の個別画像配置領域530における左上の表示対象領域531および右上の表示対象領域532の背景が白からグレーに変化し、CPA、CPBのアイコンのアイコン背景画像も白からグレーに変化する。なお、カーソル画像590は、各PC200で独立して動作するため、図11に示すように、PC200−1がカーソル画像590を移動させた場合であっても、他のPC200−2〜200−4のカーソル画像590は移動しない。
時点t10において、CPAを操作する参加者が、PC200−1に表示された構成変更画像500において、CPB、CPCのマーク画像をアイコン配置領域540にドラッグアンドドロップした場合、プロジェクター100は、画像Cのあった部分を白にし、画像Dを含む全体画像20を投写する。また、この場合、各PC200の個別画像配置領域530における右上の表示対象領域532および左下の表示対象領域533からマーク画像が消え、CPB、CPCのアイコンのアイコン背景画像も消える。なお、マーク画像は移動やドラッグアンドドロップによって元の場所から消え、マーク画像がなくなった表示対象領域には窪み画像580が表示される。
時点t11において、CPAを操作する参加者が、PC200−1に表示された構成変更画像500において、左上にあるCPAのマーク画像を左下の表示対象領域533にドラッグアンドドロップした場合、プロジェクター100は、画像Aおよび画像Dを含む全体画像20を投写する。また、この場合、各PC200のアイコン配置領域540におけるCPAのアイコンのアイコン背景画像がグレーから白に変化する。
時点t12において、CPAを操作する参加者が、PC200−1に表示された構成変更画像500において、マウスカーソルがCPBのアイコンに重なった状態でCPBのアイコンをダブルクリックした場合、CPBのマーク画像が、表示対象領域531〜534のうち、マーク画像が配置されていない空き領域のうち、最も優先度の高い左上の表示対象領域531に表示され、CPBのアイコンにグレーのアイコン背景画像が付加される。なお、個別画像配置領域530に空き領域がない状態でアイコン配置領域540内の選択可能なアイコンがダブルクリックされた場合、最も優先度の低い右下の表示対象領域534にあるマーク画像が消え、表示対象領域534にダブルクリックされたアイコンに対応したマーク画像が表示される。また、入力部260は、通常のドラッグアンドドロップ操作による第1の操作情報だけでなく、ダブルクリック操作による第2の操作情報も入力され、端末側画像生成部230は、第1の操作情報だけでなく、第2の操作情報にも対応して構成変更画像500を生成することが可能である。さらに、PC200−1に接続されたキーボードからも第2の操作情報を入力することができる。例えば、参加者が、キーボードのTABキーの入力によってアイコン配置領域540内のアイコンを選択することにより、当該アイコンが強調表示され、キーボードのEnterキーの入力によって選択されたアイコンに対応するマーク画像を個別画像配置領域530に表示させるように構成してもよい。この場合、必ずしもマウスカーソルが所望のアイコンと重なっている必要はない。簡単なキーボード操作によってアイコンを選択することができるので、ポインティングデバイスの操作に慣れていないユーザーでも、容易に全体画像の構成を変更することが可能となる。
以上のように、本実施例によれば、PC200は、自端末装置のアイコン550を他端末装置のアイコン552〜556と異なる形態で示す画像を、アイコン配置領域540に生成することにより、ユーザーは、他端末装置のアイコン552〜556と比べて操作する頻度が高い自端末装置のアイコン550を操作しやすくなるため、プロジェクター100によってPC200からの画像情報に基づく個別画像を含む全体画像20が表示される場合に、全体画像20の構成を変更する際の操作をより行いやすくすることができる。これにより、各参加者がそれぞれのPC200を用いて全体画像20の構成を変更する場合においても、各参加者は効率的に所望の操作を行うことができる。
また、本実施例によれば、PC200は、自端末装置のアイコン550およびマーク画像570を他端末装置の552〜556およびマーク画像572、574よりも大きく表示することにより、ユーザーは、他端末装置のアイコン等と比べて操作する頻度が高い自端末装置のアイコン等を操作しやすくなる。また、本実施例によれば、PC200は、マーク画像570〜574が配置されていない表示対象領域534に窪んだ状態の窪み画像580を表示することにより、ユーザーは、表示対象領域534に平坦な状態の画像を表示する場合と比べ、ドラッグアンドドロップ操作を想起しやすく、アイコン550〜556の移動先を把握しやすくなる。また、本実施例によれば、PC200は、自端末装置のアイコン550の表示位置を固定することにより、ユーザーは、他端末装置のアイコン552〜556と比べて操作する頻度が高い自端末装置のアイコンを操作しやすくなる。
また、本実施例によれば、PC200は、プロジェクター100によって表示される全体画像20における個別画像30〜33の配置を示す個別画像配置領域530を含む構成変更画像500を生成することにより、全体画像20の構成をわかりやすく提示することができる。また、本実施例によれば、PC200は、参加者を模したアイコンを識別名(ホスト名等)とともに表示するアイコン配置領域540を構成変更画像500に含めて表示することにより、各参加者は、現在の参加者を把握することができ、遠隔地間の会議等においても参加者を把握しやすい。また、本実施例によれば、PC200は、操作に応じて個別画像配置領域530の表示状態を変化させることにより、全体画像20の構成が変化した場合でも、当該変化を迅速に個別画像配置領域530の表示に反映することができる。さらに、本実施例によれば、PC200は、操作対象となるアイコンの背景にあるアイコン背景画像を個別画像配置領域530の表示状態に応じて変化させることにより、ユーザーは、視覚的に表示状態を把握しやすく、迅速な操作を行うことが可能になる。
また、本実施例によれば、PC200は、マーク画像の割り当て状態等に応じてアイコン背景画像を変化させることにより、ユーザーは、表示状態に応じてアイコンに関する操作を行う際に操作しやすくなる。また、本実施例によれば、PC200は、3つの表示状態に応じてアイコン背景画像を3つの異なる状態に変化させることにより、ユーザーは、表示状態に応じてアイコンに関する操作を行う際に操作しやすくなる。また、本実施例によれば、PC200は、カーソル画像590の位置を示す操作情報と、表示ボタン画像520〜524の押下操作を示す操作情報に基づいて個別画像の表示有無を決定することにより、ユーザーは、より多様な操作によって個別画像の表示を変化させることができる上、迅速に全体画像20の構成を変更することができる。
また、本実施例によれば、PC200は、ドラッグアンドドロップ操作以外の操作であるダブルクリック操作にも対応することにより、プロジェクター100によってPC200からの画像情報に基づく個別画像30〜33を含む全体画像20が表示される場合に、全体画像20の構成を変更する際の操作をより行いやすくすることができる。例えば、携帯情報端末等での操作はタッチパネル等による操作であるため、ドラッグアンドドロップ操作が困難だったり、時間がかかったりする場合もあるが、本実施例によれば、ユーザーは、ダブルクリック操作(連続したタッチ操作)で全体画像20の構成を変更することができるため、携帯情報端末等を使用する場合であっても、快適に所望の操作を行うことができる。また、本実施例によれば、PC200は、マウスポインターがアイコンと重なった状態でのダブルクリック操作に応じてマーク画像の配置を行うことができ、空き領域に自動的にマーク画像を配置することができる。
また、本実施例によれば、プロジェクター100は、最初に参加要求情報を送信したPC200からの画像情報に基づく個別画像を、明示的な表示指示の有無にかかわらず、表示し、参加要求情報を送信した2台目以降のPC200からの画像情報に基づく個別画像を、明示的な表示指示がない状態では表示せず、明示的な表示指示があった場合に表示することにより、複数台のPC200から参加要求等を受け付ける場合であっても、適切かつ迅速に全体画像を表示することができる。また、例えば、表示装置が、参加要求情報を送信した2台目以降のPC200からの画像情報に基づく個別画像を表示すると、既存の全体画像の構成が変化してしまい、プレゼンテーション等の妨げになってしまうが、本実施例によれば、プロジェクター100は、既存の全体画像の構成を変化させることなく、2台目以降のPC200からの参加要求等を受け付けることができる。一方、例えば、表示装置が、参加要求情報を送信したすべてのPC200からの画像情報に基づく個別画像を表示しないと、1台目のPC200が常に明示的な表示指示を行わなければならず、利便性が低下してしまうが、本実施例によれば、プロジェクター100は、最初に参加要求情報を送信したPC200からの画像情報に基づく個別画像を即座に表示することができるため、利便性を向上させることができる。
また、本実施例によれば、プロジェクター100は、PC200からの構成変更要求情報に基づき、全体画像20を生成することにより、適切に全体画像20を表示することができる。また、本実施例によれば、プロジェクター100は、画像構成データ144等を用いることにより、適切に全体画像20を表示することができる。また、本実施例によれば、プロジェクター100は、全体画像20の構成および参加中のPC200を各PC200に通知することができるため、PC200は、最新の状態を反映した構成変更画像500を生成することができる。
また、本実施例によれば、PC200は、画像構成データ244等を用いることにより、最新の状態を反映した構成変更画像500を生成することができる。また、本実施例によれば、PC200は、構成の変更に関する操作に応じて構成変更要求情報をプロジェクター100へ向け送信することにより、プロジェクター100は、構成の変更に関する操作に応じて全体画像20の構成を変更することができる。
(その他の実施例)
なお、本発明の適用は上述した実施例に限定されず、変形が可能である。例えば、PC200の台数は4台に限定されず、3台以下であってもよいし、5台以上であってもよい。また、プロジェクター100の台数も2台以上であってもよい。図12は、その他の実施例における構成変更画像501の一例を示す図である。例えば、会議に参加中のPC200の台数が6台以上になり、5台目のCPEのアイコン558までしか他装置領域544に表示できない場合、端末側画像生成部230は、他装置領域544にスクロールバー画像592を追加し、スクロールバー画像592のスクロールによって6台目以降のPC200のアイコンが他装置領域544に表示されるように、構成変更画像501を生成してもよい。
また、上述した実施例では、端末側画像生成部230は、個別画像配置領域530の表示状態に応じてアイコン背景画像の形態を変化させたが、アイコンの形態を変化させてもよい。また、形態の変化は、色の変化に限定されず、例えば、模様の変化、形状の変化、点滅等による強調効果の変化等であってもよい。
また、第2の操作情報に該当するドラッグアンドドロップ操作以外の操作は、ダブルクリック操作に限定されず、例えば、マウスの右クリックで表示されるメニューにおける項目の選択による操作、キーボードのキー操作、携帯情報端末等のタッチパネル等における接触操作等であってもよい。例えば、端末側更新部250または端末側情報生成部220は、入力部260からの情報に基づき、タッチパネル等における接触位置の変化(例えば、移動方向、移動方向および移動速度、移動方向および移動量等)に応じてユーザーが指示した個別画像配置領域530における表示対象領域を決定してもよい。例えば、端末側更新部250は、図8に示す状態で、ユーザーが、アイコン550を左側に基準値以上の速度(または基準値以上の移動量)で移動させた場合は左上にある表示対象領域531を指示したと判定し、アイコン550を左側に基準値未満の速度(または基準値未満の移動量)で移動させた場合は左下にある表示対象領域533を指示したと判定してもよい。また、第2の操作情報に応じて表示対象領域を決定する手法は、上述した優先順位に応じた手法に限定されず、例えば、ランダムに決定する手法、ダブルクリックされたアイコンに最も近い表示対象領域に決定する手法、カーソル画像590の位置にある表示対象領域に決定する手法、上記の接触位置の変化に応じて決定する手法等であってもよい。
また、検索画像400および構成変更画像500は、画像情報の元になるグラフ画像等とは異なるレイヤーに生成される画像(例えば、OSD画像等)であってもよく、グラフ画像等と一緒にキャプチャーされる画像であってもよい。構成変更画像500等がOSの仕様等によってグラフ画像等と一緒にキャプチャーされる場合であっても、ユーザーは、構成変更画像500等を最小化表示したり、PC200の画面からはみ出る形で右端に寄せて表示したりすることにより、全体画像20における構成変更画像500等の表示を目立たなくさせることができる。特に、構成変更画像500は、左側に操作用のボタン画像が集中しているため、ユーザーは、構成変更画像500を画面からはみ出るように右側に移動させた場合であっても、操作用のボタン画像を操作することができる。
また、上述したように、各ユーザーが、各自のPC200において構成変更画像500、501における他のPC200のアイコン等も操作することが可能であるが、同時に異なる操作を行ってもよい。例えば、プロジェクター100は、競合する操作が行われた場合、受付番号等を用いることにより、最も早く受け付けた操作を優先したり、最も遅く受け付けた操作を優先したりすることが可能である。
また、端末側通信部210は、画像情報だけでなく、参加者の発言等を示す音声情報をプロジェクター100へ向け送信し、プロジェクター100の有する音声出力部は、当該音声情報に基づく音声を出力してもよい。
また、プロジェクター100とPC200の接続形態は、図1に示す無線接続に限定されず、例えば、LAN等による有線接続であってもよい。また、表示装置は、プロジェクター100に限定されず、例えば、テレビ、液晶モニター、投写機能を有する電子機器(例えば、デジタルカメラ、携帯電話等)等であってもよい。また、端末装置は、PC200に限定されず、例えば、携帯電話、携帯情報端末等であってもよい。
また、プロジェクター100の有するコンピューターは、情報記憶媒体に記憶されたプログラムを読み取って表示側画像生成部130等として機能してもよい。このような情報記憶媒体としては、例えば、CD−ROM、DVD−ROM、ROM、RAM、HDD等を適用できる。
また、プロジェクター100は、液晶プロジェクター(透過型、LCOS等の反射型)に限定されず、例えば、デジタルマイクロミラーデバイスを用いたプロジェクター等であってもよい。また、投写部190は、ランプの代わりに有機EL素子、シリコン発光素子、レーザーダイオード、LED等の固体光源を含む自己発光素子を採用してもよい。また、プロジェクター100の機能を複数の装置(例えば、PCとプロジェクター等)に分散してもよい。
10 スクリーン、20 全体画像、30〜33 個別画像、100 プロジェクター(表示装置)、110 表示側通信部(受信部)、120 表示側情報生成部、130 表示側画像生成部、140 表示側記憶部、142、242 画像データ、144、244 画像構成データ、146、246 装置管理データ、150 表示側更新部、190 投写部(表示側表示部)、200 PC(端末装置)、210 端末側通信部(送信部)、220 端末側情報生成部、230 端末側画像生成部、240 端末側記憶部、250 端末側更新部、260 入力部、280 情報記憶媒体、290 端末側表示部、300 アクセスポイント、400 検索画像、410 検索結果表示領域、420 接続プロジェクターリスト表示領域、430 更新ボタン画像、440 クリアーボタン画像、450 登録ボタン画像、460 オプション設定ボタン画像、470 参加ボタン画像、500、501 構成変更画像、510〜514 表示モードボタン画像、520 表示ボタン画像、522 画像ミュートボタン画像、524 一時停止ボタン画像、530 個別画像配置領域、531〜534 表示対象領域、540 アイコン配置領域、542 自装置領域、544 他装置領域、550〜558 アイコン、560〜564 アイコン背景画像、570〜574 マーク画像、580 窪み画像、590 カーソル画像、592 スクロールバー画像

Claims (9)

  1. 入力部を含む端末装置の有するコンピューターに、
    1台以上の端末装置からの画像情報に基づく個別画像を含み、表示装置によって表示される全体画像であって、当該全体画像における前記個別画像の配置を示し、かつ、複数の表示対象領域に区分された個別画像配置領域と、前記端末装置ごとのアイコンを含むアイコン配置領域とを含むように、前記全体画像の構成を変更するための構成変更画像の構成を示す画像構成情報を前記表示装置から受信し、
    前記受信した画像構成情報に基づいて前記構成変更画像を生成して表示部に表示し、
    前記構成の変更に関する操作を示す操作情報として、前記アイコン配置領域から前記表示対象領域への前記アイコンのドラッグアンドドロップ操作による第1の操作情報および前記ドラッグアンドドロップ操作以外の操作による第2の操作情報が前記入力部に入力されると、前記第1の操作情報または前記第2の操作情報に基づき、当該操作情報で示されるアイコンに対応したマーク画像を前記表示対象領域に配置した前記構成変更画像を生成するとともに、前記第1の操作情報または前記第2の操作情報の入力に基づいて構成変更要求情報を生成して前記表示装置に送信し、
    前記表示装置から送信された構成変更要求情報に基づく画像情報の送信開始要求情報又は送信停止要求情報を受信すると、当該受信した情報に基づいて画像情報の送信又は送信停止を実行する、プログラム。
  2. 請求項1に記載のプログラムにおいて、
    前記第2の操作情報は、前記アイコンが操作の対象として強調表示された状態での操作による情報である、
    プログラム。
  3. 請求項1または請求項2に記載のプログラムにおいて、
    前記第2の操作情報は、マウスポインターが前記アイコンと重なった状態での操作による情報である、
    プログラム。
  4. 請求項3に記載のプログラムにおいて、
    前記第2の操作情報は、マウスポインターが前記アイコンと重なった状態でのダブルクリック操作による情報である、
    プログラム。
  5. 請求項1〜4のいずれかに記載のプログラムにおいて、
    前記コンピューターに、前記第2の操作情報に基づき、当該第2の操作情報で示されるアイコンに対応したマーク画像を、前記表示対象領域に前記マーク画像が配置されていない空き領域がある場合は当該空き領域に配置させ、前記空き領域がない場合は最も優先度の低い前記表示対象領域に配置させるプログラム。
  6. 入力部を含む端末装置の有するコンピューターにより読み取り可能なプログラムを記憶した情報記憶媒体であって、
    請求項1〜5のいずれかに記載のプログラムを記憶した情報記憶媒体。
  7. 表示装置と通信を実行し、前記表示装置から送信された画像構成情報を受信する通信部と、
    前記画像構成情報に基づいて、1台以上の端末装置からの画像情報に基づく個別画像を含み、前記表示装置によって表示される全体画像の構成を変更するための構成変更画像を生成する画像生成部と、
    前記構成の変更に関する操作を示す操作情報が入力される入力部と、
    前記構成変更画像を表示する表示部と、
    を含む端末装置であって、
    前記構成変更画像は、前記全体画像における前記個別画像の配置を示し、かつ、複数の表示対象領域に区分された個別画像配置領域と、前記端末装置ごとのアイコンを含むアイコン配置領域とを含み、
    前記入力部は、前記操作情報として、前記アイコン配置領域から前記表示対象領域への前記アイコンのドラッグアンドドロップ操作による第1の操作情報および前記ドラッグアンドドロップ操作以外の操作による第2の操作情報が入力され、
    前記画像生成部は、前記第1の操作情報または前記第2の操作情報に基づき、当該操作情報で示されるアイコンに対応したマーク画像を前記表示対象領域に配置した前記構成変更画像を生成し、
    前記通信部は、前記第1の操作情報または前記第2の操作情報の入力に基づいて構成変更要求情報を生成して前記表示装置に送信するとともに、前記表示装置から送信された前記構成変更要求情報に基づく画像情報の送信開始要求情報又は送信停止要求情報を受信し、前記受信した送信開始要求情報又は送信停止要求情報に基づいて画像情報の送信又は送信停止を実行する、端末装置。
  8. 表示装置と通信を行うとともに、前記表示装置から送信された画像構成情報を受信する通信部と、
    前記画像構成情報に基づいて、1台以上の端末装置からの画像情報に基づく個別画像を含み、表示装置によって表示される全体画像の構成を変更するための構成変更画像を生成する画像生成部と、
    前記構成の変更に関する操作を示す操作情報が入力される入力部と、
    前記構成変更画像を表示する表示部と、
    を含む端末装置と、
    前記端末装置から送信された画像情報を受信する受信部と、
    前記画像情報に基づき、前記全体画像を生成する表示側画像生成部と、
    前記全体画像を表示する表示側表示部と、
    を含む前記表示装置と、
    を含む表示システムであって、
    前記構成変更画像は、前記全体画像における前記個別画像の配置を示し、かつ、複数の表示対象領域に区分された個別画像配置領域と、前記端末装置ごとのアイコンを含むアイコン配置領域とを含み、
    前記入力部は、前記操作情報として、前記アイコン配置領域から前記表示対象領域への前記アイコンのドラッグアンドドロップ操作による第1の操作情報および前記ドラッグアンドドロップ操作以外の操作による第2の操作情報が入力され、
    前記画像生成部は、前記第1の操作情報または前記第2の操作情報に基づき、当該操作情報で示されるアイコンに対応したマーク画像を前記表示対象領域に配置した前記構成変更画像を生成し、
    前記通信部は、前記第1の操作情報または前記第2の操作情報の入力に基づいて構成変更要求情報を生成して前記表示装置に送信するとともに、前記表示装置から送信された前記構成変更要求情報に基づく画像情報の送信開始要求情報又は送信停止要求情報を受信し、前記受信した送信開始要求情報又は送信停止要求情報に基づいて画像情報の送信又は送信停止を実行する、表示システム。
  9. 端末装置が、1台以上の端末装置からの画像情報に基づく個別画像を含み、表示装置によって表示される全体画像の構成を変更するための構成変更画像を生成する画像生成方法であって、
    前記構成変更画像は、前記全体画像における前記個別画像の配置を示し、かつ、複数の表示対象領域に区分された個別画像配置領域と、前記端末装置ごとのアイコンを含むアイコン配置領域とを含み、
    前記端末装置は、
    前記画像構成情報を前記表示装置から受信し、当該受信した画像構成情報に基づいて前記構成変更画像を生成して表示部に表示し、
    前記構成の変更に関する操作を示す操作情報として、前記アイコン配置領域から前記表示対象領域への前記アイコンのドラッグアンドドロップ操作による第1の操作情報および前記ドラッグアンドドロップ操作以外の操作による第2の操作情報が入力され、
    前記第1の操作情報または前記第2の操作情報に基づき、当該操作情報で示されるアイコンに対応したマーク画像を前記表示対象領域に配置した前記構成変更画像を生成するとともに、前記第1の操作情報または前記第2の操作情報の入力に基づいて構成変更要求情報を生成して前記表示装置に送信し、
    前記表示装置から送信された構成変更要求情報に基づく画像情報の送信開始要求情報又は送信停止要求情報を受信すると、当該受信した情報に基づいて画像情報の送信又は送信停止を実行する、画像生成方法。
JP2010170620A 2010-07-29 2010-07-29 プログラム、情報記憶媒体、端末装置、表示システムおよび画像生成方法 Active JP5516882B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2010170620A JP5516882B2 (ja) 2010-07-29 2010-07-29 プログラム、情報記憶媒体、端末装置、表示システムおよび画像生成方法
US13/192,582 US9170767B2 (en) 2010-07-29 2011-07-28 Information storage medium, terminal device, display system, and image generating method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010170620A JP5516882B2 (ja) 2010-07-29 2010-07-29 プログラム、情報記憶媒体、端末装置、表示システムおよび画像生成方法

Publications (2)

Publication Number Publication Date
JP2012032933A JP2012032933A (ja) 2012-02-16
JP5516882B2 true JP5516882B2 (ja) 2014-06-11

Family

ID=45527982

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010170620A Active JP5516882B2 (ja) 2010-07-29 2010-07-29 プログラム、情報記憶媒体、端末装置、表示システムおよび画像生成方法

Country Status (2)

Country Link
US (1) US9170767B2 (ja)
JP (1) JP5516882B2 (ja)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120030595A1 (en) * 2010-07-29 2012-02-02 Seiko Epson Corporation Information storage medium, terminal apparatus, and image generation method
US9448708B1 (en) * 2011-10-19 2016-09-20 Google Inc. Theming for virtual collaboration
KR101925832B1 (ko) * 2012-06-13 2018-12-06 삼성전자주식회사 전자칠판 시스템 및 그 제어방법과, 디스플레이장치
JP6221400B2 (ja) * 2013-06-21 2017-11-01 富士ゼロックス株式会社 送信装置及び情報伝送システム
JP6364949B2 (ja) * 2013-08-12 2018-08-01 セイコーエプソン株式会社 情報処理装置および情報処理方法
WO2015049931A1 (ja) * 2013-10-04 2015-04-09 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
US20150138061A1 (en) * 2013-11-15 2015-05-21 Google Inc. Synchronous communication system and method
US8984445B1 (en) * 2014-01-31 2015-03-17 Google Inc. System and method for geo-locating images
CN106233709B (zh) * 2014-05-08 2020-12-01 索尼公司 成像装置
KR102389038B1 (ko) * 2015-09-02 2022-04-21 엘지전자 주식회사 전자 기기 및 전자 기기의 제어 방법
JP6747025B2 (ja) * 2016-04-13 2020-08-26 セイコーエプソン株式会社 表示システム、表示装置、及び、表示システムの制御方法
CN106227480B (zh) * 2016-07-22 2020-02-07 上海资文建设工程咨询有限公司 一种服务器、客户端和多屏互动方法、系统
US10452255B2 (en) * 2016-12-08 2019-10-22 Sap Se Logical set operations
CN107222630B (zh) * 2017-06-21 2021-01-22 努比亚技术有限公司 设备控制方法、移动终端以及计算机可读介质

Family Cites Families (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5404442A (en) * 1992-11-30 1995-04-04 Apple Computer, Inc. Visible clipboard for graphical computer environments
US5413345A (en) * 1993-02-19 1995-05-09 Nauck; George S. Golf shot tracking and analysis system
US6057844A (en) * 1997-04-28 2000-05-02 Adobe Systems Incorporated Drag operation gesture controller
US6028603A (en) * 1997-10-24 2000-02-22 Pictra, Inc. Methods and apparatuses for presenting a collection of digital media in a media container
JP2001024826A (ja) * 1999-07-06 2001-01-26 Canon Inc 複合画像処理装置およびデータ処理装置およびデータ処理方法およびコンピュータが読み出し可能なプログラムを格納した記憶媒体
JP2001282846A (ja) * 2000-03-29 2001-10-12 Canon Inc 画像検索方法及び装置
JP4487383B2 (ja) * 2000-05-01 2010-06-23 ソニー株式会社 情報処理装置および方法、並びにプログラム格納媒体
JP4431918B2 (ja) * 2000-05-01 2010-03-17 ソニー株式会社 情報処理装置、情報処理方法、および記録媒体
JP2001312730A (ja) * 2000-05-01 2001-11-09 Sony Corp 情報処理装置および方法、並びにプログラム格納媒体
US6822663B2 (en) * 2000-09-12 2004-11-23 Adaptview, Inc. Transform rule generator for web-based markup languages
US7694218B2 (en) * 2000-09-13 2010-04-06 Canon Kabushiki Kaisha Information processing apparatus, method therefor, and computer-readable memory
US7895530B2 (en) * 2000-11-09 2011-02-22 Change Tools, Inc. User definable interface system, method, support tools, and computer program product
US7177045B2 (en) * 2001-04-13 2007-02-13 Electronics For Imaging, Inc. Process and system for mixed page imposition
US20040125143A1 (en) * 2002-07-22 2004-07-01 Kenneth Deaton Display system and method for displaying a multi-dimensional file visualizer and chooser
JP4010199B2 (ja) 2002-07-23 2007-11-21 セイコーエプソン株式会社 表示システム
CN1268122C (zh) * 2002-07-23 2006-08-02 精工爱普生株式会社 显示方法及投影机
US7565618B2 (en) * 2003-02-13 2009-07-21 LumaPix Inc. Method and system for distributing multiple dragged objects
US7995090B2 (en) * 2003-07-28 2011-08-09 Fuji Xerox Co., Ltd. Video enabled tele-presence control host
JP2007527065A (ja) * 2004-03-02 2007-09-20 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 画像グループを表すアイコンを生成する方法、当該方法を実行するよう構成されるコンピュータシステム、コンピュータプログラムプロダクト及びデータキャリア
US20070044028A1 (en) * 2004-04-01 2007-02-22 Dunn Michael H Virtual flip chart method and apparatus
US8274534B2 (en) * 2005-01-31 2012-09-25 Roland Wescott Montague Methods for combination tools that zoom, pan, rotate, draw, or manipulate during a drag
US7528978B2 (en) * 2005-05-20 2009-05-05 Xerox Corporation Systems and method for controlling hide and hold jobs in a network
JP2008039906A (ja) * 2006-08-02 2008-02-21 Casio Comput Co Ltd 情報処理システム、情報処理装置、画像表示装置及びそのプログラム
JP2008059088A (ja) * 2006-08-29 2008-03-13 Toshiba Corp 画像表示システム、及び画像表示装置
JP4885768B2 (ja) * 2007-03-02 2012-02-29 株式会社リコー 表示処理装置、表示処理方法、および表示処理プログラム
EP2140378A1 (en) * 2007-04-23 2010-01-06 ZI Corporation of Canada, Inc. Language independent index storage system and retrieval method
JP4696194B2 (ja) * 2007-07-19 2011-06-08 株式会社ソニー・コンピュータエンタテインメント 情報処理装置および記録媒体
JP2009044328A (ja) 2007-08-07 2009-02-26 Seiko Epson Corp 会議システム、サーバ、画像表示方法、コンピュータプログラム及び記録媒体
JP4481339B2 (ja) 2008-05-16 2010-06-16 シャープ株式会社 情報処理装置、情報処理方法、情報処理プログラムおよびそれを記録したコンピュータ読み取り可能な記録媒体
US8083148B2 (en) * 2008-12-16 2011-12-27 Hand Held Products, Inc. Indicia reading terminal including frame processing
US8370762B2 (en) * 2009-04-10 2013-02-05 Cellco Partnership Mobile functional icon use in operational area in touch panel devices
KR20100134948A (ko) * 2009-06-16 2010-12-24 삼성전자주식회사 터치스크린을 구비하는 장치의 메뉴 표시 방법
KR101677621B1 (ko) * 2010-03-12 2016-11-18 엘지전자 주식회사 콘텐츠 제어 장치 및 그 방법
US8387881B2 (en) * 2010-12-01 2013-03-05 Hand Held Products, Inc. Terminal with screen reading mode

Also Published As

Publication number Publication date
US20120030594A1 (en) 2012-02-02
JP2012032933A (ja) 2012-02-16
US9170767B2 (en) 2015-10-27

Similar Documents

Publication Publication Date Title
JP5516882B2 (ja) プログラム、情報記憶媒体、端末装置、表示システムおよび画像生成方法
JP2012032508A (ja) 表示装置、表示システムおよび表示方法
US20120030595A1 (en) Information storage medium, terminal apparatus, and image generation method
JP5585506B2 (ja) プログラム、情報記憶媒体、端末装置、及び表示システム
US9298412B2 (en) Conferencing system, server, image display method, and computer program product
JP5522381B2 (ja) 表示装置、端末装置、表示システム、プログラム、情報記憶媒体、表示方法および画像変更方法
JP2015090570A (ja) 情報処理装置および制御方法
US20050128530A1 (en) Image projection control apparatus capable of displaying a plurality of images
JP2004054134A (ja) ネットワーク対応表示装置および表示制御プログラム
EP2897043B1 (en) Display apparatus, display system, and display method
JP4176603B2 (ja) 画像表示装置、画像表示システム、画像表示装置選択方法及びプログラム
CN114296580A (zh) 显示设备及用户界面的控制方法
JP2012032934A (ja) プログラム、情報記憶媒体、端末装置、表示システムおよび画像生成方法
JP5413605B2 (ja) プログラム、情報記憶媒体、端末装置、表示システムおよび画像生成方法
WO2018109876A1 (ja) 表示装置、電子黒板システム及びユーザーインターフェース設定方法
JP2012194324A (ja) 画像表示装置、端末装置、画像表示システムおよび画像表示方法
JP5944000B2 (ja) 画像表示システム、情報端末、情報端末の制御方法及び制御プログラム
JP5472569B2 (ja) 投写システム
KR102082433B1 (ko) 프로젝터-카메라 기반의 로봇형 디바이스와 헤드 마운트 디스플레이를 사용하는 원격 협업 시스템 및 이를 이용한 원격 인터랙션 방법
KR101663315B1 (ko) 디스플레이 장치 및 디스플레이 장치의 제어 방법
JP2005292876A (ja) 画像表示システム
JP2011197380A (ja) 表示装置、表示システムおよび表示方法
JP2018046443A (ja) 情報端末、電子情報ボード及びプログラム
JP6213597B2 (ja) 表示制御装置、表示制御方法及びプログラム
JP2012195730A (ja) 情報提供装置、プロジェクター、画像表示装置、画像表示システムおよび画像表示方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130425

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20131009

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20131016

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20131213

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140305

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140318

R150 Certificate of patent or registration of utility model

Ref document number: 5516882

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350