JP2022145191A - 表示装置、プログラム、表示方法、表示システム - Google Patents

表示装置、プログラム、表示方法、表示システム Download PDF

Info

Publication number
JP2022145191A
JP2022145191A JP2021046492A JP2021046492A JP2022145191A JP 2022145191 A JP2022145191 A JP 2022145191A JP 2021046492 A JP2021046492 A JP 2021046492A JP 2021046492 A JP2021046492 A JP 2021046492A JP 2022145191 A JP2022145191 A JP 2022145191A
Authority
JP
Japan
Prior art keywords
display
comment
information
column
display device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2021046492A
Other languages
English (en)
Inventor
浩史郎 堀
Koshiro Hori
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to JP2021046492A priority Critical patent/JP2022145191A/ja
Priority to US17/669,377 priority patent/US11907466B2/en
Publication of JP2022145191A publication Critical patent/JP2022145191A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G06F3/04162—Control or interface arrangements specially adapted for digitisers for exchanging data with external devices, e.g. smart pens, via the digitiser sensing hardware
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03545—Pens or stylus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03542—Light pens for emitting or receiving light
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147—Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/103—Formatting, i.e. changing of presentation of documents
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/166—Editing, e.g. inserting or deleting
    • G06F40/169—Annotation, e.g. comment data or footnotes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04803—Split screen, i.e. subdividing the display area or the window area into separate subareas
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

【課題】表示装置が情報を表示した場合にオブジェクトを把握可能な表示装置を提供できる。【解決手段】本発明は、情報が存在する旨を示す表示部品をオブジェクトと共に表示する表示装置２であって、前記表示部品の選択を受け付けた場合、前記表示部品及び前記オブジェクトと共に、前記表示部品に対応付けられている前記情報を表示するための情報表示欄を前記表示画面に表示する表示制御手段、を有する。【選択図】図１

Description

本発明は、表示装置、プログラム、表示方法、及び、表示システムに関する。
タッチパネル式のディスプレイにユーザーが専用の電子ペンや指などの入力手段でストロークを描画し、いくつかのストロークで形成される手書きデータを表示する電子黒板などの表示装置が知られている。比較的大型のタッチパネルを備えた表示装置は会議室や公共施設などに配置され、複数のユーザーにより電子黒板などとして利用される。
手書きデータなどに対しユーザーがコメントを記入することができる表示装置が知られている（例えば、特許文献１参照。）。特許文献１には、コメント等の情報が記入された場所にアイコンをユーザーが配置して、アイコンを選択することにより、情報を表示させる技術が開示されている。
しかしながら、従来の技術は、表示装置が情報を表示した場合に情報により手書きデータ等のオブジェクトが隠れてしまうという問題があった。この場合、例えば、コメントの表示によって隠れてしまった手書きデータの内容を把握したり、複数のユーザーが複数の拠点から会議を行う際に隠れてしまった手書きデータの内容を共有したりする妨げになっていた。
本発明は、上記課題に鑑み、表示装置が情報を表示した場合にオブジェクトを把握可能な表示装置を提供することを目的とする。
上記課題に鑑み、本発明は、情報が存在する旨を示す表示部品をオブジェクトと共に表示する表示装置であって、前記表示部品の選択を受け付けた場合、前記表示部品及び前記オブジェクトと共に、前記表示部品に対応付けられている前記情報を表示するための情報表示欄を前記表示画面に表示する表示制御手段、を有する。
本発明によれば、表示装置が情報を表示した場合にオブジェクトを把握可能な表示装置を提供できる。
コメントアイコンの表示例を示す図である。 表示装置の概略斜視図の一例を示す図である。 表示装置のハードウェア構成の一例を示す図である。 表示装置の機能をブロック状に分けて説明する機能ブロック図の一例を示す図である。 コメントの入力方法を説明する図である。 コメントアイコンの表示例を示す図である。 コメントアイコンが押下された場合に表示されるコメント欄の一例を示す図である。 ユーザーが記入したコメントを示すコメントアイコンの一例を示す図である。 コメントアイコンが押下された場合に表示されるコメント欄の一例を示す図である。 図７に対し追加されたコメントアイコンを説明する図である。 ユーザーの操作によりプルダウンメニューが表示するコメントの連番のリストを示す図である。 プルダウンメニューで選択されたコメントの表示例を示す図である。 ディスプレイの左側と右側に存在するコメントアイコンの一例を示す図である。 コメントの内容が表示された状態のコメント欄の一例を示す図である。 空きスペースに表示されたコメントの内容の一例を示す図である。 空きスペースがない表示範囲の一例を示す図である。 空きスペースがない場合に表示されたコメントの内容の一例を示す図である。 空きスペースの有無の判断方法を説明する図である。 表示装置がコメント欄とコメント内容を表示する手順を示すフローチャート図の一例である。 プルダウンメニューに表示されるコメントの連番が押下された場合のコメントの内容の表示方法を説明するフローチャート図の一例である。 表示システムの概略構成図の一例である。 表示装置の他の構成例を示す図である。 表示装置の他の構成例を示す図である。 表示装置の他の構成例を示す図である。 表示装置の他の構成例を示す図である。
以下、本発明を実施するための形態の一例として、表示装置と表示装置における表示方法について実施例を挙げながら説明する。
＜動作の概略＞
図１は、コメントアイコン９の表示例を示す。コメントとは、注釈やメモ書きなどの付加的な情報であり、コメントアイコン９は付加的な情報が存在することを示す表示部品である。付加的な情報がある場所にはコメントアイコン９が配置される。また、付加的な情報をコメントの内容という。
図１（ａ）では、表示範囲１２にすでにコメントアイコン９が表示されている。ユーザーがコメントの内容を確認したい場合、コメントアイコン９を指やペンなどの入力手段で押下する。表示装置２はコメントアイコン９の位置がディスプレイ２２０（表示画面）の左端と右端のどちらに近いかを判断し、近い側にコメント欄１１を表示する。
図１（ｂ）は、コメント欄１１の一例を示す。コメントアイコン９がディスプレイ２２０の左端に近かったので、ディスプレイ２２０の左側にコメント欄１１が表示されている。なお、ディスプレイ２２０の一部のみを画面領域として表示装置２が使用できる場合、コメントアイコン９が画面領域の左端と右端のどちらに近いかが判断される。
このように、表示装置２は、コメントの内容専用の領域（コメント欄１１）でコメントの内容を表示することで、表示範囲１２の手書きデータ等を隠すことなくコメントの内容を表示することができる。
また、ユーザーがコメントアイコン９を押下した時の立ち位置に近い場所に、表示装置２がコメント欄１１を表示することで、ユーザーは立ち位置を変えることなく、コメント欄１１のコメントに対し編集等を行える。
＜用語について＞
本実施形態の表示装置は、ディスプレイに表示される表示範囲よりも広い、入力可能領域を有している。表示範囲は入力可能領域の一部である。表示範囲とは現在、ディスプレイに表示されている範囲をいう。
入力手段とはタッチパネルに座標を指定して手書きが可能な手段であればよい。例えば、ペン、人の指や手、棒状部材などがある。
ユーザーがディスプレイに入力手段を押しつけてから連続的に移動させた後、ディスプレイから離すという一連の操作をストロークという。ストロークデータとは、入力手段により入力される座標の軌跡に基づいてディスプレイに表示される情報である。ストロークデータは適宜、補間されてよい。手書きデータとは、１つ以上のストロークデータを有するデータである。手書き入力とは、ユーザーによって、手書きデータが入力されることを示している。
手書きデータが文字認識して変換された文字列には、テキストデータの他、「済」などの決まった文字やマークとして表示されるスタンプ、円、矩形、直線、星などの図形、吹き出し、及び、付箋など、ユーザーの操作に基づいて表示されたデータも含まれてよい。文字列とは、コンピュータで扱われる１つ以上の文字である。文字列の実態は文字コードである。文字には、数字、アルファベット、及び、記号等が含まれる。文字列はテキストデータとも言われる。
ディスプレイに表示される表示物をオブジェクトという。オブジェクトとは対象という意味であるが、本実施形態では表示対象などの意味である。本実施形態では、手書きデータ、図形（円、矩形、矢印等）、スタンプ、吹き出し、付箋、及び、画像などもオブジェクトである。
表示範囲１２とは、ディスプレイ２２０に表示されている範囲を言う。入力可能領域とは、ユーザーが手書きデータ等を入力しうる範囲である。表示範囲１２は入力可能領域の一部である。
表示部品とは、画面を形成する色や形などの表示である。部品として表示装置２から分解できるものではなく、人間が視覚的に他と区別して認識できればよい。例えば、コメントアイコン９は表示部品である。
情報はどのような態様でも良く、例えば、手書きデータ、文字列、図形、又は、画像など、表示装置２にユーザーが表示できる情報であればよい。情報は、本実施形態では、コメントという用語で説明される。
情報が存在する旨を示す表示部品は、表示部品により全てが表示されていない何らかの情報が存在することが知らされることをいう。例えば、図１（ａ）において、表示範囲１２にコメントアイコン９が表示されているものの、表示内容は「（１）」のみであり、コメントの内容までは表示されていない。コメントアイコン９を選択することで、図１（ｂ）において、コメントの内容が表示される。
情報表示欄とは、表示部品に対応する情報が表示される欄である。本実施形態では、コメント欄という用語で説明される。
＜構成例＞
図２は、表示装置２の概略斜視図の一例を示す。表示装置２をユーザー（利用者）が利用している。本実施形態の表示装置２は、ユーザーが手Ｈ又は電子ペン２５００などの入力手段でディスプレイ２２０上に手書きを行うことができる。
図２の表示装置２は横置きされているが、縦置きすることも可能である。ユーザーは表示装置２をディスプレイ２２０の中心を軸に回転させて、横置きと縦置きを切り替えることができる。
＜ハードウェア構成例＞
図３は、表示装置２のハードウェア構成の一例を示す図である。本実施形態の表示装置２は、ＣＰＵ(Central Processing Unit)２０１、ＲＯＭ(Read Only Memory)２０２、ＲＡＭ(Random Access Memory)２０３、ＳＳＤ(Solid State Drive)２０４、ネットワークコントローラ２０５、及び、外部機器接続Ｉ／Ｆ２０６(Interface)を備えており、複数の利用者により情報を共有するための共有端末である。
これらのうち、ＣＰＵ２０１は、表示装置２全体の動作を制御する。ＲＯＭ２０２は、ＣＰＵ２０１やＩＰＬ(Initial Program Loader)等のＣＰＵ２０１の駆動に用いられるプログラムを記憶する。ＲＡＭ２０３は、ＣＰＵ２０１のワークエリアとして使用される。
ＳＳＤ２０４は、表示装置２用のプログラム等の各種データを記憶する。このプログラムは汎用的なＯＳ(Windows（登録商標）、Mac OS（登録商標）、Android（登録商標）、iOS（登録商標）等)を搭載した情報処理装置で動作するアプリケーションでもよい。この場合、表示装置２は、普段は汎用的な情報処理端末として利用されるが、ユーザーがインストールされたアプリケーションプログラムを実行すると、表示装置としての専用機と同様、ユーザーが手書き等することができる。
ネットワークコントローラ２０５は、ネットワークとの通信を制御する。外部機器接続Ｉ／Ｆ２０６は、ＵＳＢ(Universal Serial Bus)メモリー２６００、外付け機器（カメラ２９００、スピーカ２８００、マイク２７００）との通信を制御する。
また、表示装置２は、キャプチャデバイス２１１、ＧＰＵ２１２、ディスプレイコントローラ２１３、接触センサ２１４、センサコントローラ２１５、電子ペンコントローラ２１６、近距離通信部２１９、及び近距離通信部２１９のアンテナ２１９ａを備えている。
これらのうち、キャプチャデバイス２１１は、ＰＣ１０のディスプレイ２２０に対して映像情報を静止画又は動画として表示させる。ＧＰＵ(Graphics Processing Unit)２１２は、グラフィクスを専門に扱う半導体チップである。ディスプレイコントローラ２１３は、ＧＰＵ２１２からの出力画像をディスプレイ２２０等へ出力するために画面表示の制御及び管理を行う。
接触センサ２１４は、ディスプレイ２２０上に電子ペン２５００やユーザーの手Ｈ等が接触したことを検知する。電子ペン２５００と手Ｈを区別しない場合、入力手段２９１という。
センサコントローラ２１５は、接触センサ２１４の処理を制御する。接触センサ２１４は、赤外線遮断方式による座標の入力及び座標の検出を行う。この座標の入力及び座標の検出する方法は、ディスプレイ２２０の上側両端部に設置された２つ受発光装置が、ディスプレイ２２０に平行して複数の赤外線を放射し、ディスプレイ２２０の周囲に設けられた反射部材によって反射されて、受光素子が放射した光の光路と同一の光路上を戻って来る光を受光する方法であっても良い。
接触センサ２１４は、物体によって遮断された２つの受発光装置が放射した赤外線のＩＤをセンサコントローラ２１５に出力し、センサコントローラ２１５が、物体の接触位置である座標位置を特定する。すなわち、接触センサ２１４はタッチパネルを形成する。電子ペンコントローラ２１６は、電子ペン２５００と通信することで、ディスプレイ２２０へのペン先のタッチやペン尻のタッチの有無を判断する。近距離通信部２１９は、ＮＦＣ、Ｂｌｕｅｔｏｏｔｈ（登録商標）等の通信回路である。
更に、表示装置２は、バスライン２１０を備えている。バスライン２１０は、ＣＰＵ２０１等の各構成要素を電気的に接続するためのアドレスバスやデータバス等である。
なお、接触センサ２１４は、赤外線遮断方式に限らず、静電容量の変化を検知することにより接触位置を特定する静電容量方式のタッチパネルでもよい。接触センサ２１４は、対向する２つの抵抗膜の電圧変化によって接触位置を特定する抵抗膜方式のタッチパネルでもよい。接触センサ２１４は、接触物体が表示部に接触することによって生じる電磁誘導を検知して接触位置を特定する電磁誘導方式のタッチパネルでもよい。接触センサ２１４は、これら種々の検出手段を用いて良い。また、電子ペンコントローラ２１６が、電子ペン２５００のペン先及びペン尻だけでなく、電子ペン２５００のユーザーが握る部分や、その他の電子ペンの部分のタッチの有無を判断するようにしても良い。
＜機能について＞
図４は、表示装置２の機能をブロック状に分けて説明する機能ブロック図の一例を示す図である。図４に示す表示装置２は、受付部２１、描画データ生成部２２、表示制御部２３、コメント制御部２４、データ記録部２５、及び、操作受付部２６を有する。
表示装置２が有する各機能は、図３に示されている各構成要素のいずれかが、ＲＡＭ２０３上に展開されたアプリケーションに従ったＣＰＵ２０１からの命令によって動作することで実現される機能又は手段である。
受付部２１は、入力手段２９１（指又は電子ペン２５００）がディスプレイ２２０の接触した座標に基づいて接触位置を検出する。受付部２１は所定の時間ごとに接触位置を検出し、座標点列を取得する。
描画データ生成部２２は、入力手段２９１の接触した座標を受付部２１から取得する。描画データ生成部２２はこの座標点列を補間することで連続したストロークデータを生成する。
表示制御部２３は、手書きデータ、手書きデータから変換された文字列、図形、画像、及び、ユーザーが操作するためのメニュー等をディスプレイ２２０に表示する。
コメント制御部２４は、コメントを管理する。コメント制御部２４は、各コメントについて採番されたコメントＩＤ、各コメントの位置（X座標、Y座標）、及び、コメントの内容を管理している。
データ記録部２５は、表示装置２に手書きされた手書きデータ、文字列、図形、画像等のオブジェクトを記憶部２９に記憶する。上記のコメントもデータ記録部２５により記憶部２９に保存される。記憶部２９が記憶しているコメント情報の一例を表１に示す。
操作受付部２６は、表示装置２に表示されたユーザーが操作するためのメニューの操作を受け付ける。
Figure 2022145191000002
 表１は、記憶部２９に記憶されている情報のうち、コメントに関するコメント情報を示す。記憶部２９には、コメントＩＤ、位置（X座標、Y座標）、及び、コメントの内容が対応付けて保存される。
・コメントＩＤは、入力可能領域のコメントを識別する識別情報である。入力可能領域は表示範囲１２より広いので、コメントＩＤは入力可能範囲に対し一意である。
・Ｘ座標は入力可能領域におけるコメントアイコン９のＸ座標である。
・Ｙ座標は入力可能領域におけるコメントアイコン９のＹ座標である。
・コメントの内容はコメント本文である。コメントの内容は、手書きデータでもよいし、文字認識により変換された文字列でもよい。また、コメントの内容は、図形、アイコン、画像又は音声データでもよい。
＜コメントの表示例＞
図５～図９を参照して、コメントの内容の表示例を説明する。まず、図５（ａ）は、コメントの入力方法を説明する図である。ユーザーは例えば会議で文字列３０１を入力した。文字列３０１は手書きデータでもよい。更に、ユーザーは、文字列３０１をマーカー３０２で強調した。マーカーとは半透明の色つきのストロークで任意のオブジェクトを目立たせるため等に使用される。このマーカー３０２による入力により、コメント制御部２４が表示制御部２３にコメントダイアログ３０３を表示させる。
図５（ｂ）はコメントダイアログ３０３の一例を示す。ここではユーザーがコメントダイアログ３０３に「重要な情報へのアクセス権限を絞る」と入力した。つまりコメントは、所定の手書きデータ（マーカー３０２）の入力に応じて入力される。
なお、コメントの入力方法は表示装置２の操作方法に従うものとする。他の入力方法としては、コメント用のボタンをユーザーが押して、入力先の位置を指定する。同様に表示装置２がコメントダイアログ３０３を表示するので、ユーザーが任意のコメントを入力する方法がある。
コメントの入力後、ユーザーがコメントダイアログ３０３を閉じると、コメントアイコン９がマーカー３０２の左上などに表示された状態となる。したがって、マーカー３０２を使用したコメントの入力方法によれば、コメントアイコン９の位置はマーカー３０２の周囲になる。コメントアイコン９の位置はマーカー３０２の右上、左下、右下などでもよい。
図６はコメントアイコン９の表示例を示す。なお、ユーザーは、コメントアイコン９を入力手段２９１で長押しして、その後、ドラッグすることでコメントアイコン９の位置を移動できる。
図６の状態のコメント情報を表２に示す。
Figure 2022145191000003
 表２では、図６のコメントアイコン９に対応する１つのコメントが登録されている。
続いて、図６の状態で、ユーザーがコメントアイコン９を押下した場合に表示されるコメント欄１１について説明する。
図７は、コメントアイコン９が押下された場合に表示されるコメント欄１１の一例である。ユーザーがコメントアイコン９を押下すると、押下されたことを操作受付部２６が受け付け、表２のコメント情報を参照し、入力手段２９１の接触位置に基づいてコメントＩＤを特定する。操作受付部２６がコメント制御部２４にコメントＩＤと共にコメントアイコン９が押されたことを通知する。
コメント制御部２４は、コメント欄１１が表示中かどうかを判別する。表示されていない場合、コメント制御部２４は、押下されたコメントアイコン９のコメントＩＤに対応付けられている位置を表２のコメント情報で参照し、コメントアイコン９の位置がディスプレイ２２０の中央より右側か左側かを判別する。この判別は、ディスプレイ２２０のサイズ（横幅）の画面の解像度画素数に基づいて、コメントアイコン９の位置がその半分よりも右か左かに基づいて判断される。例えば、画面の解像度が１２８０×１０２４ピクセル（ＳＸＧＡ：Super eXtended Graphics Array）の場合、コメントアイコン９の位置（コメントアイコン９を囲む四角の左下の点を指す）が画面左端から数えて０から６４０ピクセルまでの範囲にあれば画面左側にあると判断し、６４１から１２８０ピクセルまでの範囲にあれば画面右側にあると判断する。なお画面の解像度が変更された場合には、変更された後の解像度の数値に基づいて左側か右側かを判断する。
図７では、コメントアイコン９が左側にあると判断されたため、表示制御部２３がディスプレイ２２０の左側（左端）にコメント欄１１を表示している。つまり、表示制御部２３は、選択を受け付けたコメントアイコン９に近い領域にコメント欄１１を表示する。なお、この処理は後述する図１９のフローチャート図のステップS2、S4に相当する。以下では処理に図１９又は図２０のステップ番号を付すものとする。
コメント制御部２４はディスプレイ２２０の左側から、例えば決まった幅のコメント欄１１を用意する。元から表示されている文字列３０１を表示制御部２３がコメント欄１１の幅だけ全体的に右側に移動させる。つまり、表示制御部２３は、コメント欄１１の表示前に表示されていた表示範囲１２を、コメント欄１１とは反対方向に移動する。
コメント制御部２４は、コメントアイコン９に対応付けられているコメントの内容を記憶部２９から取得し、表示制御部２３がコメント欄１１にコメントの内容を表示する（図１９：ステップS6）。
このように、コメント欄１１が表示されるので、コメントの内容とコメント欄１１が文字列３０１とは別々の位置に配置されて表示され、コメントの内容と文字列３０１が重なって、ユーザーが見にくいなどの不都合を抑制できる。
また、コメント欄１１は、プルダウンメニュー１３を有している。プルダウンメニュー１３は、表示範囲１２に複数のコメントアイコン９が存在する場合、ユーザーがコメント欄１１に表示するコメントの内容の選択を受け付ける。
また、コメント欄１１は、閉じるボタン１４を有している。閉じるボタン１４は、ユーザーによるコメント欄１１を閉じる操作を受け付ける。
なお、コメント欄１１の幅は予め定められていてもよいし、コメントの幅に応じて最適化されてもよい。コメントの内容の表示処理は、コメントが手書きデータと文字列の場合で処理が異なる。
コメントの内容が手書きデータの場合、予め定められている最小限のコメント欄１１の幅（例えば、ディスプレイ２２０の幅の１／４）で手書きデータを表示できるかどうかをコメント制御部２４が判断する。予め定められている最小限のコメント欄１１の幅で手書きデータを表示できない場合、コメント制御部２４は予め定められている最大限のコメント欄１１の幅（例えば、ディスプレイ２２０の幅の１／３）で手書きデータを表示できるかどうかを判断する。予め定められている最大限のコメント欄１１の幅に手書きデータが入る場合は、手書きデータの幅に合わせてコメント欄１１の幅を決定する。この場合、コメント欄１１の幅は手書きデータの幅とほぼ等しい。予め定められている最大限のコメント欄１１の幅に手書きデータが入らない場合は、予め定められている最大限のコメント欄１１の幅に入るように手書きデータをコメント制御部２４が縮小する。コメントの内容が小さく見にくい等の場合、ユーザーがコメント欄１１の幅をマニュアルで変更できることが好ましい。
コメントの内容が文字列の場合、予め定められている最小限のコメント欄１１の幅に、コメント制御部２４がコメントの内容を流し込めばよい。つまり、コメント欄１１の幅でコメントの内容（文字列）が改行されて表示される。
また、図７のようにコメント欄１１が表示されると、当然ながら表示範囲１２が狭くなる。表示制御部２３は、表示範囲１２が狭くなることで文字列３０１を表示しきれない場合、例えば文字列３０１を縮小してもよい。コメント欄１１がディスプレイ２２０の左側に表示される場合、文字列３０１の先頭は表示範囲１２に残るので（左から右の横書きの場合）、必ずしも縮小しなくてもよい。この場合、表示範囲１２からはみ出した文字列３０１は一時的に非表示となる。
また、文字列３０１を縮小するのでなく、表示範囲１２の右側の入力可能範囲に手書きデータ等がなければ、コメント制御部２４が一時的に利用することもできる。この場合も、文字列３０１の全体は表示されないが、入力可能範囲にはみ出した文字列３０１は非表示のまま存在し続ける。
次に、コメント欄１１がディスプレイ２２０の右側に表示される場合を説明する。コメント欄１１がディスプレイ２２０の右側に表示される場合も、コメント内容の表示方法は同様でよい。
図８は、ユーザーが記入したコメントを示すコメントアイコン９の一例を示す。図８の説明では主に図７との相違を説明する。
ユーザーは例えば会議で文字列３０１を入力した。文字列３０１は手書きデータでもよい。更に、図５と同様の方法で（マーカー３０２で）ユーザーは、文字列３０１の近くにコメントを入力した。図８では、マーカー３０２の左上に、コメントアイコン９が表示されている。
図８の状態のコメント情報を表３に示す。
Figure 2022145191000004
 表３のコメント情報は、Ｘ座標以外、表２と同様である。
続いて、図８の状態で、ユーザーがコメントアイコン９を押下した場合に表示されるコメント欄１１について説明する。
図９は、コメントアイコン９が押下された場合に表示されるコメント欄１１の一例である。ユーザーがコメントアイコン９を押下すると、押下されたことを操作受付部２６が受け付け、表３のコメント情報を参照し、入力手段２９１の接触位置に基づいてコメントＩＤを特定する。操作受付部２６がコメント制御部２４にコメントＩＤと共にコメントアイコン９が押されたことを通知する。
コメント制御部２４は、コメント欄１１が表示中かどうかを判別する。表示されていない場合、コメント制御部２４は、押下されたコメントアイコン９のコメントＩＤに対応付けられている位置（Ｘ座標）を表３のコメント情報で参照し、コメントアイコン９の位置がディスプレイ２２０の中央より右側か左側かを判別する。判断方法は図７と同じでよい。
図９では、コメントアイコン９が右側にあると判断されたため、表示制御部２３がディスプレイ２２０の右側にコメント欄１１を表示している（図１９：ステップS2、S4）。コメント制御部２４は、ディスプレイ２２０の右側（右端）から例えば決まった幅のコメント欄１１を用意する。元から表示されている文字列３０１を表示制御部２３が、コメント欄１１の幅だけ全体的に左側に移動する。
コメント制御部２４は、コメントアイコン９に対応付けられているコメントの内容を表３のコメント情報から取得し、表示制御部２３がコメント欄１１にコメントの内容を表示する（図１９：ステップS5）。
このように、コメント欄１１が表示されるので、コメントの内容とコメント欄１１が文字列３０１とは別々の位置に配置されて表示され、コメントの内容と文字列３０１が重なって、ユーザーが見にくいなどの不都合を抑制できる。
＜コメントの追加＞
続いて、ユーザーがコメントを追加した場合を説明する。
図１０は、図７の表示装置２に対し追加されたコメントアイコン９を説明する図である。コメントの記入方法は図５と同様でよい。コメントアイコン９を区別する場合、コメントアイコン９にアルファベットa,bを付与して説明する。コメントアイコン９ａはマーカー３０２の手書きにより入力されたコメントに対応付けられている。コメントアイコン９ｂはマーカー３０４の手書きにより入力されたコメントに対応付けられている。
コメントの追加により、記憶部２９のコメント情報にも新たに１つのコメント（１レコード）が登録される。
Figure 2022145191000005
 表４は、図１０の状態におけるコメント情報を示す。表４では２つのコメントが登録されている。
複数のコメントが記入された場合、コメント制御部２４は、プルダウンメニュー１３にコメントを識別するための連番などを選択可能に表示する。この連番は、コメントアイコン９にも表示されており、ユーザーはコメントアイコン９とプルダウンメニュー１３に表示される連番との対応を把握できる。なお、連番は、コメントＩＤの下一桁でもよいし、コメント情報の各行ごとに別途、採番されてもよい。
図１１は、ユーザーの操作によりプルダウンメニュー１３が表示するコメントの連番のリスト１５を示す。図１１では、ディスプレイ２２０に記入された２つのコメントアイコンが有する連番（(１)，(２)）が表示されている。ユーザーはプルダウンメニュー１３のコメントの連番を入力手段２９１で選択する。操作受付部２６が選択されたコメントの連番を受け付け、表示制御部２３が選択された連番の輝度や色を変更する（図２０：ステップS101）。
ただし、プルダウンメニュー１３内で表示されるコメントの連番は表示範囲１２（ディスプレイ２２０全体のうちユーザーが見える範囲）にあるものに限られる。ユーザーがコメント欄１１で表示したいのは、表示範囲１２のコメントである場合が多いと考えられるためである。しかし、ユーザーの操作に応じて、コメント制御部２４は入力可能範囲にある全てのコメントの連番をプルダウンメニュー１３に表示してもよい。
図１２は、プルダウンメニュー１３で選択されたコメントの表示例を示す。操作受付部２６が選択されたコメントの連番をコメント制御部２４に通知し、コメント制御部２４が記憶部２９からコメントの連番で特定されるコメントの内容を記憶部２９から取得する。表示制御部２３はコメント欄１１にコメントの内容を表示する（図２０：ステップS102、S103）。
なお、図１３に示すように、コメントアイコン９がディスプレイ２２０の左側と右側に存在する場合、コメント欄１１は、最初に選択されたコメントアイコン９に応じてディスプレイ２２０の左側か右側に表示される。つまり、ユーザーがプルダウンメニュー１３で図１３のどのコメントの連番を選んでも、選ぶたびにコメント欄１１が左右に移動したりしない。
＜複数のコメントの同時表示＞
コメント欄１１が一度に表示できるコメントの数には制限がある（例えば、１つなど）。このため、制限されている以上の数のコメントを同時にユーザーが表示したい場合、表示装置２はコメント欄１１以外にコメントの内容を表示する。例えば、表示装置２は表示範囲１２の空きスペースにコメントの内容を表示する。
図１４は、コメントの内容が表示された状態のコメント欄１１を示す。図１４のコメント欄１１のコメントの内容はコメントアイコン９ｂのものとする。ユーザーがコメントアイコン９ａを押下すると、押下されたことを操作受付部２６が受け取る。操作受付部２６がコメント制御部２４にコメントアイコン９ａが押下されたことを通知し、コメント制御部２４は、コメント欄１１を表示しているかを判別する（図１９：ステップS1、S2）。
コメント制御部２４は、押下されたコメントアイコン９ａのコメントＩＤとコメント欄１１に表示されているコメントのコメントＩＤが一致するかを判別し、一致しない時、押下されたコメントアイコン９ａのコメントの内容を記憶部２９から取得する（図１９：ステップS3）。
そして、コメント制御部２４は、コメントの内容をディスプレイ２２０の空きスペースに表示できるかを判別する。空きスペースに表示できる場合は、図１５に示すように、表示制御部２３がコメントの内容を空きスペースに表示する（図１９：ステップS7、S8）。空きスペースの有無の判断方法については図１８にて説明する。
こうすることで、表示装置２は複数のコメントをコメント欄１１と表示範囲１２に同時に表示できる。
図１６は、図１４と同様の画面であるが、表示範囲１２に空きスペースがない場合を示す。ディスプレイ２２０にコメントの内容を表示させる空きスペースがない場合、コメント制御部２４は押下されたコメントアイコン９ａの下の領域をコメントの内容の表示位置に決定する。
コメント制御部２４は、図１７に示すように、コメントの内容を表示するための領域３０８のオブジェクトの濃度を濃くし、コメントの内容を例えば半透明で表示する（図１９：ステップS7、S9、S10）。図１７では、作図の都合で見にくいが、コメントアイコン９ａに対応するコメントの内容３０７が半透明で表示され、文字列３０１が透けて見えている。なお、濃度とは彩度ともいい、濃度を濃くするとは、例えば彩度を下げることである。表示制御部２３は、単に、ＲＧＢの値をそれぞれ高くしてもよい。
コメントの内容が表示される領域３０８は、コメントの内容のサイズに応じて決定されることが好ましい。コメントの内容が手書きデータの場合、例えば、領域３０８は、コメントの内容の外接矩形である。コメントの内容が文字列の場合、例えば、領域３０８の幅は表示範囲１２と同じでよく、高さは文字数に応じて決定される。
こうすることで、表示範囲１２に空きスペースがない場合でも、表示範囲１２のオブジェクトを視認可能な状態で、表示装置２がコメントの内容を表示できる。
なお、表示範囲１２に表示されたコメントの内容は、コメントアイコン９ａの押下により表示制御部２３が消去する。
図１８は、空きスペースの有無の判断方法を説明する図である。コメント制御部２４は、ディスプレイ２２０の端部からオブジェクトの端部までの距離Ｌと、コメントの内容の幅Ｗとを比較する。コメント欄１１がディスプレイ２２０の左側の場合、ディスプレイ２２０の端部は右端部であり、コメント欄１１がディスプレイ２２０の右側の場合、ディスプレイ２２０の端部は左端部である。コメント欄１１がディスプレイ２２０の左側の場合、オブジェクトの端部は右端部であり、コメント欄１１がディスプレイ２２０の右側の場合、オブジェクトの端部は左端部である。
コメントの内容が手書きデータの場合、コメント制御部２４は距離Ｌが幅Ｗ以上であれば、空きスペースがあると判断する。そうでなければ、コメント制御部２４は空きスペースがないと判断する。なお、距離Ｌが幅Ｗ以上でない場合でも、コメントの内容を縮小して、空きスペースの有無をコメント制御部２４が判断してもよい。縮小率には制限が設けられることが好ましい。
コメントの内容が文字列の場合、文字列は改行により空きスペースに入りきる場合が多い。このため、コメント制御部２４は距離Ｌが閾値以上であれば、空きスペースがあると判断する。閾値を設けるのは、改行が多いと読みにくいためである。
＜動作手順＞
図１９は、表示装置２がコメント欄１１とコメント内容を表示する手順を示すフローチャート図の一例である。図１９の処理は、ユーザーがコメントアイコン９を入力手段２９１で押下することでスタートする（Ｓ１）。操作受付部２６は、入力手段２９１がディスプレイ２２０に接触した座標に基づいて、押下されたコメントアイコン９を特定する。
コメント制御部２４は、すでにコメント欄１１が表示されているか否かを判断する（Ｓ２）。コメント欄１１はコメント制御部２４が表示するので、コメント欄１１を表示しているかどうかはコメント制御部２４が管理している。
ステップＳ２の判断がＹｅｓの場合、コメント制御部２４は、押下されたコメントアイコン９とコメント欄１１に表示されているコメントの内容が一致するか否かを判断する（Ｓ３）。コメント欄１１に表示しているコメントＩＤはコメント制御部２４が管理している。
ステップＳ３の判断がＹｅｓの場合、すでにコメントの内容が表示されているので、コメント制御部２４は、何もしないで処理を終了する。
ステップＳ３の判断がＮｏの場合、ユーザーはコメント欄１１で表示中のコメントとは別のコメントを表示しようとした。つまり、ユーザーは、表示範囲１２にもコメントの内容を表示しようとした。このため、コメント制御部２４は、ディスプレイ２２０にコメントを表示する空きスペースがあるか否かを判断する（Ｓ７）。
ステップＳ７の判断がＹｅｓの場合、コメント制御部２４は、空きスペースにコメントの内容を表示する（Ｓ８）。
ステップＳ７の判断がＮｏの場合、コメント制御部２４は、コメントを半透明にする（Ｓ９）。コメント以外のオブジェクトにコメントが重なっても、オブジェクトを見やすくするためである。コメント制御部２４は、更に、コメントの内容が表示される領域（コメントアイコン９の下側の領域）と重なるオブジェクトの濃度を濃くするとよい。あるいは、コメント制御部２４は表示範囲１２の全体の濃度を濃くしてもよい。
表示制御部２３は、コメントアイコン９の例えば右下にコメントの内容を表示する（Ｓ１０）。
ステップＳ２の判断がＮｏの場合、コメント制御部２４は、押下されたコメントアイコン９の位置がディスプレイ２２０の中央より右側か否かを判断する（Ｓ４）。
ステップＳ４の判断がＹｅｓの場合、コメント制御部２４は、コメント欄１１をディスプレイ２２０の右側に表示すると決定し、表示制御部２３がディスプレイ２２０の右側にコメント欄１１を表示する（Ｓ５）。表示制御部２３はコメント欄１１に、押下されたコメントアイコン９の位置に基づいて決定されたコメントの内容を表示する。
ステップＳ４の判断がＮｏの場合、コメント制御部２４は、コメント欄１１をディスプレイ２２０の左側に表示すると決定し、表示制御部２３がディスプレイ２２０の左側にコメント欄１１を表示する（Ｓ６）。表示制御部２３はコメント欄１１に、押下されたコメントアイコン９の位置に基づいて決定されたコメントの内容を表示する。
ステップＳ５、Ｓ６の場合、コメント制御部２４は、記憶部２９を参照して、表示範囲１２にあるコメントアイコン９を特定する。入力可能範囲における表示範囲１２の座標は既知なので、コメント制御部２４がこの座標の範囲にあるコメントアイコン９を特定すればよい。コメント制御部２４は、表示範囲１２にあるコメントの連番をプルダウンメニュー１３に設定する。プルダウンメニュー１３の連番が押下された場合の処理については図２０にて説明する。
＜＜プルダウンメニューの連番が押下によるコメントの内容表示＞＞
図２０は、プルダウンメニュー１３に表示されるコメントの連番が押下された場合のコメントの内容の表示方法を説明するフローチャート図の一例である。
ユーザーがプルダウンメニュー１３の連番を押下する（Ｓ１０１）。操作受付部２６が連番を受け付け、連番をコメント制御部２４に通知する。コメント制御部２４は連番に基づいてコメントＩＤを特定する。
コメント制御部２４は、現在、コメント欄１１に表示中のコメントが変更されか否かを判断する（Ｓ１０２）。なお、コメント制御部２４は、コメント欄１１に表示中のコメントを管理しているため、コメント欄１１に表示中のコメントが変更されか否かを容易に判断できる。
ステップＳ１０２の判断がＮｏの場合、コメント制御部２４は、何もせず処理が終了する。
ステップＳ１０２の判断がＹｅｓの場合、コメント制御部２４は、コメント欄１１に表示されるコメントの内容を、ユーザーが選択したコメントの内容に切り替える（Ｓ１０３）。
＜主な効果＞
以上説明したように、表示装置２は、コメントの内容専用の領域（コメント欄１１）でコメントの内容を表示することで、表示範囲１２を隠すことなくコメントの内容を表示することができる。
また、ユーザーがコメントアイコン９を押下した時の立ち位置に近い場所に、表示装置２がコメント欄１１を表示することで、ユーザーは立ち位置を変えることなく、コメント欄１１の操作を行える。
また、表示装置２は、コメント欄１１とは別に、コメントを表示範囲１２に表示できる。
本実施例では、サーバー装置３２を介して、表示装置２と端末装置３１が通信する表示システム１９について説明する。
図２１は、表示システム１９の概略構成図の一例である。インターネット等のネットワークを介して表示装置２と端末装置３１がそれぞれサーバー装置３２と接続されている。端末装置３１はＷｅｂブラウザ又は専用アプリが動作すればよく、例えば、ＰＣ、スマートフォン、タブレット端末、ゲーム機、ＰＤＡ（Personal Digital Assistant）、ウェアラブルＰＣ（Personal Computer）、カーナビなどでよい。
表示装置２の機能はサーバー装置３２と通信する他は、実施例１と同様でよい。表示装置２の通信制御部２７はサーバー装置３２にオブジェクトデータ（表示されるデータ）を送信する。サーバー装置３２は、表示装置２と端末装置３１が共通にアクセスする会議用のＵＲＬを表示装置２に送信するので、表示装置２はＵＲＬをメール等で端末装置３１に送信する。これにより、端末装置３１はサーバー装置３２と通信して、表示装置２が送信したオブジェクトデータを受信できる。なお、端末装置３１がＷｅｂブラウザでオブジェクトを表示する場合、サーバー装置３２はＨＴＭＬなどで画面情報を生成する。端末装置３１が専用アプリでオブジェクトを表示する場合、サーバー装置３２は主にオブジェクトと座標を画面情報として端末装置３１に送信すればよい。
また、端末装置３１がタッチパネルを有する場合、ユーザーは端末装置３１を表示装置２と同様に使用して表に手書きデータを入力したり、清書したりすることができる。清書されたオブジェクトデータはサーバー装置３２を経由して表示装置２に送信される。
このように、表示システム１９によれば、表示装置２と端末装置３１がインタラクティブにオブジェクトを処理できる。
また、図２１のような構成では、表示装置２の処理をサーバー装置３２が行ってもよい。この場合、表示装置２はストロークデータを表示すると共に、各種のイベントをサーバー装置３２に送信する。サーバー装置３２は、清書などを行って表示装置２の画面情報を生成し、表示装置２に送信する。
以下の実施例では表示装置２の別の構成例について説明する。
＜＜表示装置の別の構成例１＞＞
本実施形態の表示装置２は大型のタッチパネルを有するものとして説明されているが、表示装置２はタッチパネルを有するものに限られない。
図２２は、表示装置２の他の構成例を示す図である。図２２では、通常のホワイトボード４１３の上辺にプロジェクター４１１が設置されている。このプロジェクター４１１が表示装置２に相当する。通常のホワイトボード４１３とは、タッチパネルと一体のフラットパネルディスプレーではなく、ユーザーがマーカーで直接、手書きするホワイトボードである。なお、ホワイトボードは黒板でもよく、映像を投影するだけの広さの平面であればよい。
プロジェクター４１１は超短焦点の光学系を有しており、１０ｃｍ程度から歪みの少ない映像をホワイトボード４１３に投影できる。この映像は、無線又は有線で接続されたＰＣから送信されてもよいし、プロジェクター４１１が記憶していてもよい。
ユーザーは専用の電子ペン２５０１を使ってホワイトボード４１３に手書きする。電子ペン２５０１は、ユーザーが手書きのためにホワイトボード４１３に押しつけるとスイッチがＯＮになり発光する発光部を例えば先端部に有している。光の波長は近赤外や赤外なのでユーザーの目には見えない。プロジェクター４１１はカメラを有しており、発光部を撮像して画像を解析し電子ペン２５０１の方向を特定する。また、電子ペン２５０１は発光と共に音波を発信しており、プロジェクター４１１は音波の到達時間により距離を算出する。プロジェクター４１１は方向と距離により電子ペン２５０１の位置を特定できる。電子ペン２５０１の位置には手書きされたデータが描画（投影）される。
プロジェクター４１１はメニュー４３０を投影するので、ユーザーが電子ペン２５０１でボタンを押下すると、プロジェクター４１１が電子ペン２５０１の位置とスイッチのＯＮ信号により押下されたボタンを特定する。例えば、保存ボタン４３１が押下されると、ユーザーが手書きした手書きされたデータ（座標点列）がプロジェクター４１１で保存される。プロジェクター４１１は、予め定められたサーバー４１２又はＵＳＢメモリー２６００等に手書き情報を保存する。手書き情報はページごとに保存されている。画像データではなく座標のまま保存されるので、ユーザーが再編集することができる。ただし、本実施形態では操作コマンドを手書きで呼び出せるのでメニュー４３０は表示されなくてもよい。
＜＜表示装置の別の構成例２＞＞
図２３は、表示装置２の他の構成例を示す図である。図２３の例では、表示装置２が、端末装置６００、画像投影装置７００Ａ、及び、ペン動作検出装置８１０を有する。
端末装置６００は、画像投影装置７００Ａ及びペン動作検出装置８１０と有線で接続されている。画像投影装置７００Ａは、端末装置６００により入力された画像データをスクリーン８００に投影させる。
ペン動作検出装置８１０は、電子ペン８２０と通信を行っており、スクリーン８００の近傍における電子ペン８２０の動作を検出する。具体的には、電子ペン８２０は、スクリーン８００上において、電子ペン８２０が示している点を示す座標情報を検出し（検出方法は図２２と同様でよい）、端末装置６００へ送信する。
端末装置６００は、ペン動作検出装置８１０から受信した座標情報に基づき、電子ペン８２０によって入力される手書きデータの画像データを生成し、画像投影装置７００Ａによって手書きデータの画像をスクリーン８００に描画させる。
また、端末装置６００は、画像投影装置７００Ａに投影させている背景画像と、電子ペン８２０によって入力された手書データの画像とを合成した重畳画像を示す重畳画像データを生成する。
＜＜表示装置の別の構成例３＞＞
図２４は、表示装置２の構成例を示す図である。図２４の例では、表示装置２が、端末装置６００と、ディスプレイ８００Ａと、ペン動作検出装置８１０Ａとを有する。
ペン動作検出装置８１０Ａは、ディスプレイ８００Ａの近傍に配置され、ディスプレイ８００Ａ上に、電子ペン８２０Ａが示している点を示す座標情報を検出し（検出方法は図２２と同様でよい）、端末装置６００へ送信する。なお、図２４の例では、電子ペン８２０Ａは、端末装置６００によってＵＳＢコネクタを介して充電されても良い。
端末装置６００は、ペン動作検出装置８１０Ａから受信した座標情報に基づき、電子ペン８２０Ａによって入力される手書データの画像の画像データを生成し、ディスプレイ８００Ａに表示させる。
＜＜表示装置の別の構成例４＞＞
図２５は、表示装置２の構成例を示す図である。図２５の例では、表示装置２が、端末装置６００と、画像投影装置７００Ａとを有する。
端末装置６００は、電子ペン８２０Ｂと無線通信（Ｂｌｕｅｔｏｏｔｈ（登録商標）等）を行って、スクリーン８００上において電子ペン８２０Ｂが示す点の座標情報を受信する。座標情報は、スクリーン８００に形成された微小な位置情報を電子ペン８２０Ｂが読み取ってもよいし、スクリーン８００から座標情報を受信してもよい。
そして、端末装置６００は、受信した座標情報に基づき、電子ペン８２０Ｂにより入力される手書データの画像の画像データを生成し、画像投影装置７００Ａに手書データの画像を投影させる。
また、端末装置６００は、画像投影装置７００Ａに投影させている背景画像と、電子ペン８２０Ｂによって入力された手書データの画像とを合成した重畳画像を示す重畳画像データを生成する。
以上のように、上記した各実施形態は、様々なシステム構成において適用することができる。
＜その他の適用例＞
以上、本発明を実施するための最良の形態について実施例を用いて説明したが、本発明はこうした実施例に何等限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々の変形及び置換を加えることができる。
例えば、本実施形態では、直立型の表示装置２を説明したが、平置き型の表示装置２でも本実施形態を同様に適用できる。平置き型の表示装置２では、ディスプレイの左右だけでなく四辺のうちいずれか一辺にコメント欄１１が表示されてよい。
例えば、本実施形態では電子黒板を一例として説明したが、電子黒板は、電子ホワイトボード、電子情報ボード、などと呼ばれてよい。また、本実施形態は、タッチパネルを有する情報処理装置であれば好適に適用できる。タッチパネルを搭載した情報処理装置としては、例えば、ＰＪ（Projector：プロジェクター）、デジタルサイネージ等の出力装置、ＨＵＤ（Head Up Display）装置、産業機械、撮像装置、集音装置、医療機器、ネットワーク家電、ノートＰＣ（Personal Computer）、携帯電話、スマートフォン、タブレット端末、ゲーム機、ＰＤＡ（Personal Digital Assistant）、デジタルカメラ、ウェアラブルＰＣ又はデスクトップＰＣ等であってもよい。
また、本実施形態の表示装置２は、ペン先の座標をタッチパネルで検知する方法でペンの座標を検出したが、ペン先の座標を超音波により検出してもよい。また、ペンは発光と共に超音波を発信しており、表示装置２は超音波の到達時間により距離を算出する。表示装置２は方向と距離によりペンの位置を特定できる。ペンの軌跡をストロークデータとしてプロジェクターが描画（投影）する。
また、図４などの構成例は、表示装置２による処理の理解を容易にするために、主な機能に応じて分割したものである。処理単位の分割の仕方や名称によって本願発明が制限されることはない。表示装置２の処理は、処理内容に応じて更に多くの処理単位に分割することもできる。また、１つの処理単位が更に多くの処理を含むように分割することもできる。
また、表示装置２が行う処理の一部を、表示装置２とネットワークを介して接続されたサーバーが行ってもよい。
また、上記で説明した実施形態の各機能は、一又は複数の処理回路によって実現することが可能である。ここで、本明細書における「処理回路」とは、電子回路により実装されるプロセッサのようにソフトウェアによって各機能を実行するようプログラミングされたプロセッサや、上記で説明した各機能を実行するよう設計されたASIC(Application Specific Integrated Circuit)、DSP（digital signal processor）、FPGA（field programmable gate array）や従来の回路モジュール等のデバイスを含むものとする。
なお、受付部２１は受付手段の一例である。コメント制御部２４は情報表示制御手段の一例である。表示制御部２３は表示制御手段の一例である。
２ 表示装置
特開2019－204431号公報

Claims (13)

  1. 情報が存在する旨を示す表示部品をオブジェクトと共に表示画面に表示する表示装置であって、
    前記表示部品の選択を受け付けた場合、前記表示部品及び前記オブジェクトと共に、前記表示部品に対応付けられている前記情報を表示するための情報表示欄を前記表示画面に表示する表示制御手段、
    を有する表示装置。
  2. 前記表示部品の選択を受け付けた場合、前記表示部品に対応付けられている前記情報を表示するための情報表示欄を生成する情報表示制御手段、
    をさらに有する請求項１に記載の表示装置。
  3. 前記表示制御手段は、選択を受け付けた前記表示部品に近い領域に前記情報表示欄を表示する請求項１に記載の表示装置。
  4. 選択を受け付けた前記表示部品がディスプレイの中央よりも左側の場合、前記表示制御手段は前記ディスプレイの左端に前記情報表示欄を表示し、
    選択を受け付けた前記表示部品がディスプレイの中央よりも右側の場合、前記表示制御手段は前記ディスプレイの右端に前記情報表示欄を表示する請求項３に記載の表示装置。
  5. 前記表示制御手段は、前記情報表示欄の表示前に表示されていた、前記オブジェクトが表示されている表示範囲を、前記情報表示欄とは反対方向に移動する請求項１～４のいずれか１項に記載の表示装置。
  6. 前記表示部品に対応する前記情報は、所定の手書きデータの入力に応じて入力される請求項５に記載の表示装置。
  7. 前記表示制御手段は、前記情報の幅に応じて決定された幅を有する前記情報表示欄を表示する請求項１～６のいずれか１項に記載の表示装置。
  8. 前記表示範囲に、複数の前記表示部品が表示されてる場合、
    前記表示制御手段は、複数の表示部品に対応する前記情報の識別情報を選択可能に前記情報表示欄に表示し、前記表示範囲の前記表示部品に前記情報の識別情報を表示し、
    前記情報表示欄の前記情報の識別情報から選択を受け付けた前記情報を、前記情報表示欄に表示する請求項５に記載の表示装置。
  9. 前記情報表示欄が表示されている状態で、前記オブジェクトが表示されている表示範囲の選択を受け付けた場合、前記情報表示制御手段は、選択を受け付けた前記情報を前記表示範囲に表示するスペースがあるか否かを判断し、
    前記表示制御手段は、前記スペースがある場合は、前記スペースに前記情報を表示する請求項２に記載の表示装置。
  10. 前記表示制御手段は、前記スペースがない場合は、選択を受け付けた前記表示部品の周囲に、半透明の前記情報を表示する請求項９に記載の表示装置。
  11. 情報が存在する旨を示す表示部品をオブジェクトと共に表示画面に表示する表示装置を、
    前記表示部品の選択を受け付けた場合、前記表示部品及び前記オブジェクトと共に、前記表示部品に対応付けられている前記情報を表示するための情報表示欄を前記表示画面に表示する表示制御手段、
    として機能させるためのプログラム。
  12. 情報が存在する旨を示す表示部品をオブジェクトと共に表示画面に表示する表示装置が行う表示方法であって、
    表示制御手段が、前記表示部品の選択を受け付けた場合、前記表示部品及び前記オブジェクトと共に、前記表示部品に対応付けられている前記情報を表示するための情報表示欄を前記表示画面に表示するステップと、
    を有する表示方法。
  13. サーバー装置と表示装置がネットワークを介して通信する表示システムであって、
    前記表示装置は、情報が存在する旨を示す表示部品をオブジェクトと共に表示画面に表示し、
    情報が存在する旨を示す表示部品の選択を受け付けた場合、前記表示部品及びオブジェクトと共に、前記表示部品に対応付けられている前記情報を表示するための情報表示欄を前記表示画面に表示する表示制御手段、
    を有する表示システム。
JP2021046492A 2021-03-19 2021-03-19 表示装置、プログラム、表示方法、表示システム Pending JP2022145191A (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2021046492A JP2022145191A (ja) 2021-03-19 2021-03-19 表示装置、プログラム、表示方法、表示システム
US17/669,377 US11907466B2 (en) 2021-03-19 2022-02-11 Apparatus and method which displays additional information along with a display component in response to the display component being selected

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2021046492A JP2022145191A (ja) 2021-03-19 2021-03-19 表示装置、プログラム、表示方法、表示システム

Publications (1)

Publication Number Publication Date
JP2022145191A true JP2022145191A (ja) 2022-10-03

Family

ID=83284747

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021046492A Pending JP2022145191A (ja) 2021-03-19 2021-03-19 表示装置、プログラム、表示方法、表示システム

Country Status (2)

Country Link
US (1) US11907466B2 (ja)
JP (1) JP2022145191A (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11630504B2 (en) * 2021-03-16 2023-04-18 Htc Corporation Handheld input device and electronic system
CN113949901A (zh) * 2021-10-15 2022-01-18 北京字节跳动网络技术有限公司 评论分享方法、装置和电子设备

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001306553A (ja) 2000-04-25 2001-11-02 Ricoh Co Ltd 付箋表示制御方法及び該方法を実行するためのプログラムを格納したコンピュータ読み取り可能な記憶媒体
JP4021249B2 (ja) 2002-06-04 2007-12-12 株式会社リコー 情報処理装置及び情報処理方法
US20050091578A1 (en) 2003-10-24 2005-04-28 Microsoft Corporation Electronic sticky notes
US9720574B2 (en) * 2012-03-19 2017-08-01 Microsoft Technology Licensing, Llc Personal notes on a calendar item
US10032135B2 (en) * 2012-03-19 2018-07-24 Microsoft Technology Licensing, Llc Modern calendar system including free form input electronic calendar surface
JP2017058855A (ja) * 2015-09-15 2017-03-23 株式会社リコー 情報処理装置、プログラム、情報処理システム及び画像処理装置
JP2019204431A (ja) 2018-05-25 2019-11-28 株式会社野村総合研究所 コンピュータプログラムおよび方法
US11250208B2 (en) * 2019-04-08 2022-02-15 Microsoft Technology Licensing, Llc Dynamic whiteboard templates

Also Published As

Publication number Publication date
US11907466B2 (en) 2024-02-20
US20220300134A1 (en) 2022-09-22

Similar Documents

Publication Publication Date Title
US11093086B2 (en) Method and apparatus for data entry input
US20120056804A1 (en) Apparatus, Methods And Computer Program Products Providing Finger-Based And Hand-Based Gesture Commands For Portable Electronic Device Applications
CN105493023A (zh) 对表面上的内容的操纵
GB2470654A (en) Data input on a virtual device using a set of objects.
US11907466B2 (en) Apparatus and method which displays additional information along with a display component in response to the display component being selected
KR20140105385A (ko) 터치스크린에서 필기 입력을 통한 컨텐츠 작성 방법 및 장치
KR200477008Y1 (ko) 마우스 겸용 스마트폰
JP5342806B2 (ja) 表示方法および表示装置
KR101564089B1 (ko) 손동작 인식을 이용한 프리젠테이션 실행시스템
JP2015026189A (ja) 画像処理システム、携帯端末装置、表示装置及びコンピュータプログラム
US11782594B2 (en) Display apparatus, display system, and display method
JP2022138285A (ja) 表示装置、表示方法、プログラム
KR102288431B1 (ko) 가상현실을 이용한 이미지입력시스템 및 이를 이용한 이미지데이터 생성방법
JP2021197024A (ja) 表示装置、表示方法及びプログラム
US11726654B2 (en) Display apparatus capable of displaying icon corresponding to shape of hand-drafted input, display method, and non-transitory computer-executable medium storing program thereon
Athira Touchless technology
JP7480608B2 (ja) 表示装置、表示方法、プログラム
JP2022147297A (ja) 表示装置、表示方法、プログラム
US11816327B2 (en) Display apparatus, method for displaying, and non-transitory recording medium
JP7467842B2 (ja) 表示装置、表示方法、表示プログラム
JP7508916B2 (ja) 表示装置、表示方法およびプログラム
US11727896B2 (en) Apparatus and method for display control, and recording medium
JP7331578B2 (ja) 表示装置、画像表示方法、プログラム
JP2022146853A (ja) 表示装置、プログラム、表示方法、表示システム
US20210264681A1 (en) Input display control device, input display control method, and input display system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20240119

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20240806

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240820