JP2003308310A

JP2003308310A - 表示方法、表示装置、表示プログラム、および表示プログラムを記録した記録媒体

Info

Publication number: JP2003308310A
Application number: JP2002112714A
Authority: JP
Inventors: Masashi Hirozawa; 昌司広沢
Original assignee: Sharp Corp
Current assignee: Sharp Corp
Priority date: 2002-04-15
Filing date: 2002-04-15
Publication date: 2003-10-31
Anticipated expiration: 2022-04-15
Also published as: JP4008280B2

Abstract

(57)【要約】【課題】コンテンツに手書きデータやテキストデータ
などからなるメモを付けて表示する場合に、コンテンツ
のレイアウトが変更されても、メモや、メモとコンテン
ツの部分との関連付け表示が動的に追従して自動的に変
更され、かつコンテンツとメモとができるだけ重ならず
に表示される表示方法を提供する。【解決手段】コンテンツのレイアウトデータから余白
範囲を抽出し（S6-4-1）、抽出した余白範囲の中で、メ
モデータをコンテンツとできるだけ重ならないようにレ
イアウトできる適切な余白範囲を探し（S6-4-5,6-4-7,6
-4-9）、メモデータをレイアウトする余白範囲を特定す
る（S6-4-6,6-4-8,6-4-10）。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、文字、文字列また
は画像等の表示対象要素を座標空間にレイアウト（配
置）して、表示装置に表示する方法、その方法を実施す
るための装置、プログラムおよびプログラム媒体に関す
る。

【０００２】

【従来の技術】従来、文書などを電子的に見るプログラ
ムや装置において、書き込みやメモ（付箋）を貼り付け
ることができるものが存在する。

【０００３】例えば、Ａｄｏｂｅ社の文書処理プログラ
ムＡｃｒｏｂａｔＥｘｃｈａｎｇｅでは、レイアウト
上にメモを追加することができ、テキストを入力でき
る。文書の本文は固定したレイアウトで表示され、メモ
はユーザによって指定された位置に表示される。もし既
存の本文レイアウトと重なるような位置にメモを表示し
た場合、メモの表示で重なる部分の本文の表示は隠れて
しまう。

【０００４】また、Ｍｉｃｒｏｓｏｆｔ社のワープロ
（ワードプロセッサ）ソフトＷｏｒｄは、文字の大きさ
などの変更によってレイアウトが動的に変わるが、選択
したテキストに対して「コメント」（メモ）情報を関連
付けることができ、テキストや音声データ、画像などを
貼り付けることができる。また、レイアウトの変更があ
れば追従してコメントの位置も変化する。文書ウィンド
ウ上で、コメントに対応するテキスト部分はハイライト
表示され、マウスカーソルを重ねることで、文書ウィン
ドウ上にコメントの内容がポップアップウィンドウとし
て表示される。コメントの編集は、文書表示範囲とは別
のウィンドウで行う。コメントにはそれぞれ固有の識別
文字列が自動的に振られ、選択したテキストと編集ウィ
ンドウの対応は識別文字列によって視認可能となってい
る。

【０００５】また、電子書籍コンソーシアムの電子書籍
リーダーＰＣＶｉｅｗｅｒでは、文書は固定したレイ
アウトで表示され、文書の上に直接、手書き入力するこ
とができる。レイアウトが固定されているので、入力さ
れた手書きデータに対応する文字などを選択する必要は
なく、必要ならば対応するテキストに対して下線や矢印
を手書き入力したりするなどして対応関係を示すことが
できる。また独立したウィンドウとして「付箋」を貼り
付けることができ、付箋内にテキストや手書き文字を入
力することができる。付箋はＡｃｒｏｂａｔＥｘｃｈ
ａｎｇｅ同様、固定したレイアウト上の位置情報を持っ
ている。

【０００６】また、Ｍｉｃｒｏｓｏｆｔ社のワープロソ
フトＰｏｃｋｅｔＷｏｒｄでは、テキストと手書き文
字、手書き図を一緒に扱うことができる。手書き文字は
通常のテキストと同様、「文字」として扱われ、編集の
対象となり、属する行があり、その行内では他のテキス
ト文字と重なることはない。手書き図は手書き文字のよ
うには分離できず、全体が一塊となって表示され、その
一塊を単位として編集の対象となり、属する行がある
が、その属する行以外では他のテキスト文字と重ねて表
示される。

【０００７】

【発明が解決しようとする課題】ところが、上記従来の
表示方法では、メモを本文の該当個所と関連付けた状態
で、かつ本文がメモに隠されないように、メモをレイア
ウトして表示するという使い勝手の良い表示状態を得る
ことが困難である。

【０００８】また、上記の使い勝手の良い表示状態が得
られたとしても、本文のレイアウトを変更した場合に
は、その表示状態が崩れてしまうという問題点もある。

【０００９】具体的には、ＡｃｒｏｂａｔＥｘｃｈａ
ｎｇｅやＰＣＶｉｅｗｅｒなどは固定レイアウトの文
書データを持つので、表示デバイスの大きさや文字の大
きさなどを変更してレイアウトし直して表示することは
できず、小さな表示デバイス上ではスクロールや縮小表
示などをせねばならず、またユーザが見やすいように文
字の大きさなどを自由に変更することもできないという
欠点がある。

【００１０】また、Ｗｏｒｄは、動的にレイアウトを変
更でき、レイアウトの変更に伴い、コメントに関連付け
られたテキスト部分も追従して移動するが、コメントの
内容の表示は、編集時は文書ウィンドウに隣接する別ウ
ィンドウで、閲覧時は文書ウィンドウに重ねて表示され
て下の文書の一部が隠れてしまうようなポップアップウ
ィンドウで行われる。

【００１１】紙の本に手で書き込むメモは、通常は関連
する本文の近くに書き込むので、対応関係が分かりやす
いが、Ｗｏｒｄの様に編集時に隣接する別ウィンドウで
表示させると、コメントに関連付けられたテキストと距
離的に離れて表示されるので、対応関係が分かりにくい
欠点がある。

【００１２】また、紙の本に手で書き込むメモは、通常
は関連する本文と重ならない様に、あるいは読むのに支
障が無い程度にしか重ならない様に書き込まれるが、Ｗ
ｏｒｄの様に閲覧時にポップアップウィンドウでメモが
表示されると、文書に重ねて表示されるため、下の文書
の一部が隠れてしまう。すなわち、文書とコメントを同
時に見ることができないという欠点がある。

【００１３】また、紙の本に手で書き込むメモでは、複
数のテキストや図などの間で矢印などで関連付けの表現
をしたり、複数のテキストや図などに対して同じ内容の
メモを関連付けたりすることができる。これに対し、Ｗ
ｏｒｄのコメントの関連付けは、一つのコメントに対し
て一つのテキスト範囲だけであり、一つのコメントに対
して複数のテキスト範囲を関連付けたり、一つのテキス
ト範囲に対して複数のコメントを関連付けたりすること
はできないという欠点がある。

【００１４】また、ＰｏｃｋｅｔＷｏｒｄでは、手書き
文字や手書き図をレイアウト変更に追従して移動させる
ことはできるが、それらは通常の文字同様、本文の一部
となっている為に追従できるだけであり、そのレイアウ
ト範囲は、本文のレイアウト範囲内にとどまる。また、
他の本文の部分を参照するような情報も持っていない。
従って、紙の本に書き込むような、本文のレイアウト範
囲の外（行間など）で、本文の一部を下線や矢印で参照
するような形では表示させることができないという欠点
がある。

【００１５】また、手書き入力は複数の行にまたがった
ようなものも入力できるが、属する行は１つであり、手
書き文字は属する行内では他の文字とは重ならないが、
その行をはみでる部分は他の行の表示と重なってしまう
欠点がある。

【００１６】また、手書き図は属する行内でも重なって
しまう欠点がある。

【００１７】本発明の目的は、レイアウトを動的に変更
できるという紙の本にない特徴を持ちながら、手書きデ
ータやテキストデータなどからなるメモで、本文のレイ
アウト変更に追従して自動的にメモのレイアウトを変更
して表示したり、紙の書籍と同じような使い勝手、すな
わち文書本文とメモの表示ができるだけ重ならずに同時
に視認できることや、本文の該当個所と関連付けて使え
ること、該当個所とメモの関連付けがお互いに複数に対
して行えることなど、を実現する表示方法、その方法を
実施するための装置、プログラムおよびプログラム媒体
を提供することにある。

【００１８】

【課題を解決するための手段】本発明に係る表示方法
は、上記の課題を解決するために、表示対象要素の一つ
以上を座標空間上に配置したレイアウトの中から、表示
対象要素が配置されていない余白範囲を、上記レイアウ
トを記述したレイアウトデータを用いて特定する余白特
定ステップと、メモを表すメモデータを、上記余白範囲
に配置することによって、表示対象要素との重なりが無
い、あるいは所定割合以下、あるいは所定面積以下とな
るメモデータのレイアウトを記述したメモレイアウトデ
ータを生成するメモレイアウト生成ステップとを有する
ことを特徴とする。

【００１９】ここで、「表示対象要素」とは、文字、文
字列、画像などのレイアウトされる単位を意味し、レイ
アウトとは、座標空間における表示対象要素の配置を意
味する。したがって、座標空間における表示対象要素の
配置、すなわちレイアウトに従って、出力先の表示装
置、印刷装置等における出力／表示媒体に、表示対象要
素を出力／表示することができる。

【００２０】分かり易くする為に「表示対象要素」と呼
んでいるが、必ずしも「表示」だけに限らず、印刷やデ
ータ出力、ファイル出力などのあらゆる「出力」に関わ
る要素を含むものである。したがって、ここで使われて
いる「表示」という言葉は全て「出力」の意味も含まれ
ている。なお、以降、単に「要素」と述べた場合は、
「表示対象要素」を意味する。

【００２１】また、表示対象要素の数は、レイアウトの
枠組みの中に１つ以上あれば、特に限定されない。例え
ば、出力先の表示媒体が印刷用紙の場合に、白い紙面中
の一部領域に写真が１枚、あるいは文字が１文字、レイ
アウトされるような場合や、２枚の紙面にまたがるよう
に写真が１枚、レイアウトされるような場合にも本発明
が適用される。

【００２２】「余白範囲」は、レイアウトの枠組みの中
で表示対象要素をレイアウトした残り部分を指す。デー
タとして説明すると、レイアウトの枠組みに対応する座
標空間に、表示対象要素のデータの一つ以上の集まりと
してのコンテンツデータをレイアウトした残り部分であ
り、メモデータをレイアウトできる範囲を指す。

【００２３】よりわかりやすく「余白範囲」を言い表せ
ば、紙面（全レイアウト範囲＝最大のレイアウト可能範
囲）の周囲の余白部分と、コンテンツデータのレイアウ
トの行間の余白部分とに大きく分けられる。厳密に言え
ば、文字間や文字や図形の中の空白部なども余白と言え
なくもないが、実際にメモデータをレイアウト可能な範
囲と考えると、周囲と行間が主な余白範囲となる。

【００２４】なお、上記の「紙面（全レイアウト範囲）
の周囲の余白部分」とは、表示対象要素をレイアウトで
きる範囲として、例えば行内文字数および頁内行数の指
定等によって設定されるレイアウト可能範囲と、レイア
ウト可能範囲の最大範囲としての全レイアウト範囲との
差分に相当する。

【００２５】そこで、本発明に係る表示方法によれば、
表示対象要素の一つ以上を座標空間上に配置したレイア
ウト範囲を得たら、得られたレイアウト範囲を全レイア
ウト範囲から除いた範囲も求めることができるので、そ
れを余白範囲として余白特定ステップで特定する。

【００２６】次に、ユーザが入力する、あるいは別ファ
イルとして保存された文書中から複写するなどして得ら
れたメモデータを、余白特定ステップで得られた余白範
囲に配置してみることで、表示対象要素との重なり具合
を求めることができる。その重なり具合が、重なりが無
い、あるいは所定割合以下、あるいは所定面積以下とな
る時のメモデータのレイアウトを選ぶことで、このよう
な重なり具合の条件を満たしたメモデータのレイアウト
を記述したメモレイアウトデータをメモレイアウト生成
ステップで生成することができる。

【００２７】これによって、例えば文字サイズ、行内文
字数、頁内行数のような表示設定を変更する等してコン
テンツのレイアウトが動的に変更されても、変更された
レイアウトについて余白範囲を特定するので、レイアウ
トの変更に追従して、上述した重なり具合の条件を常に
満たすメモデータのレイアウトを得ることができる。

【００２８】したがって、それらのレイアウトに従って
コンテンツデータ及びメモデータを出力することで、文
字サイズ等の表示設定を読みやすい様に動的に変えるな
どという紙の本にない特徴を持ちながら、手書きデータ
やテキストデータなどからなるメモで、紙の書籍と同じ
ような使い勝手、すなわち文書本文とメモの表示が同時
に視認できるという効果が出てくる。

【００２９】言い換えれば、コンテンツのレイアウトを
例えば見やすく変更しても、常に文書本文に重ならない
ように、新たな余白にレイアウトし直された状態でメモ
を見ることができるという、特有の効果を得ることがで
きる。

【００３０】また、コンテンツがメモデータに影響され
ずにレイアウトされるので（例えば余白や行間の大きさ
がメモデータによって変えられることがない）、コンテ
ンツのレイアウトをコンテンツデータが最も見やすい状
態でレイアウトすることができるという効果が出てく
る。

【００３１】なお、表示対象要素とメモとの重なりが全
く無いことを、メモデータのレイアウトを決めるときの
第１条件とし、この第１条件を満たせないときに、重な
りが所定割合以下または所定面積以下となる第２条件を
満たすようにメモデータのレイアウトを決めてもよい。

【００３２】また、メモと関連付けたい表示対象要素の
できるだけ近くにメモを配置することを第１条件とし、
その場合の重なりが所定割合以下または所定面積以下と
なるようにメモデータのレイアウトを決めてもよい。

【００３３】また、メモデータが大き過ぎて、余白特定
ステップで特定した余白範囲にメモを配置し切れない場
合には、配置できるだけのメモの一部のレイアウトデー
タを生成してもよいし、メモレイアウトデータの生成を
行わないか、あるいはメモデータが大き過ぎることを知
らせるメッセージ表示を行うような他のルーチンへ処理
を移行するようにしてもよい。

【００３４】本発明に係る表示方法は、上記の課題を解
決するために、表示対象要素のデータの１つ以上の集ま
りとしてのコンテンツデータの内、メモと対応付けたい
参照部分のコンテンツデータと、前記メモデータとを関
連付ける情報を得る関連付け情報取得ステップを有する
ことを特徴とする。

【００３５】上記の処理により、参照部分のコンテンツ
データとメモデータとを関連付ける情報(以下、関連付
け情報と呼ぶ)が得られるので、例えば、あるメモデー
タのレイアウトを作成する際、そのメモデータに関連付
けられた参照部分を特定することができる。あるいは、
メモと参照部分とを線で結んだ状態で表示する等によっ
て、メモと参照部分との関連付けを示す場合、関連付け
情報を利用することができる。

【００３６】これによって、メモデータのレイアウトを
作成したり、参照部分やメモデータを表示する際に、関
連付け情報を利用した処理が行えるようになる。

【００３７】具体的な処理としては、例えば、メモデー
タのレイアウトを作成する際、表示対象要素のレイアウ
トは既に存在しているので、参照部分の表示対象要素の
レイアウト範囲も得ることができる。余白特定ステップ
から得られた余白範囲の中から、得られた参照部分のレ
イアウト範囲に近い余白範囲を関連付け情報を用いて選
ぶことで、参照部分に近い位置にメモデータをレイアウ
トすることができるようになる。

【００３８】あるいは、例えば、表示の際、参照部分の
レイアウト位置とメモデータのレイアウト位置とが分か
るので、関連付け情報を用いて両者を線分で結ぶ、ある
いはそれぞれの背景部分を通常の背景部分と異なる表示
色を用いて同色に揃えるなどといった関連付け表示も可
能となる。

【００３９】また、例えば、表示の際、参照部分やメモ
データのレイアウトが、ペンやマウスなどによって選択
された状態になった時、それに関連付けられた他方の参
照部分やメモデータをハイライト表示するなど目立たせ
て表示させることが可能になる。

【００４０】本発明に係る表示方法は、上記の課題を解
決するために、前記メモレイアウト生成ステップにおい
て、前記参照部分のレイアウトの近くにメモデータを配
置したメモレイアウトデータを生成することを特徴とす
る。

【００４１】前述の関連付け情報取得ステップから、参
照部分とメモデータとを関連付ける情報が得られるの
で、あるメモデータのレイアウトを作成する際、そのメ
モデータに関連付けられた参照部分を特定することがで
きる。メモデータのレイアウトを作成する際、表示対象
要素のレイアウトは既に存在しているので、参照部分の
表示対象要素のレイアウト範囲も得ることができる。余
白特定ステップから得られた余白範囲の中から、参照部
分のレイアウト位置の近くで、コンテンツデータの表示
対象要素のレイアウトと重ならない／重なりが少ない範
囲を選べば良い。

【００４２】これによって、関連付けられた参照部分と
メモデータが近くにレイアウトされるので、両者を一度
に見易くなり、理解しやすくなるという利点が出てく
る。

【００４３】本発明に係る表示方法は、上記の課題を解
決するために、前記関連付ける情報に基づいて、前記参
照部分と前記メモデータとを関連付けて自動的に表示す
る表示ステップを有することを特徴とする。

【００４４】前述の関連付け情報取得ステップから参照
部分とメモデータとを関連付ける情報が得られるので、
表示の際、表示対象要素のレイアウトデータとメモレイ
アウトデータとから、参照部分のレイアウト位置と、参
照部分のデータに関連付けられたメモデータのレイアウ
ト位置を特定することができる。これにより、両者を線
分で結んだ表示を行ったり、矢印で結んだ表示を行った
り、参照部分からメモデータを吹き出し表示にしたり、
それぞれの背景部分を通常の背景部分と異なる表示色を
用いて同色に揃えるなどといった関連付け表示も可能と
なる。

【００４５】これによって、両者に関係のあることが視
覚的に分かり易くなる、などといった効果がある。

【００４６】本発明に係る表示方法は、上記の課題を解
決するために、表示対象要素をレイアウト可能なレイア
ウト可能範囲を得るレイアウト可能範囲取得ステップを
有し、前記余白特定ステップにおいて、前記レイアウト
可能範囲の最大範囲としての全レイアウト範囲から前記
レイアウト可能範囲を除いた部分を余白範囲として特定
することを特徴とする。

【００４７】コンテンツデータがレイアウトされていな
い余白範囲には、大きく分けて、レイアウト可能範囲の
外側の余白範囲と内側の余白範囲とがある。一般に、外
側の余白範囲は紙の本で言う紙面周囲の余白に相当し、
内側の余白範囲は行間の余白に相当する。従って、余白
特定ステップで、全レイアウト範囲からレイアウト可能
範囲を除いた場合、外側の余白範囲が抽出されることに
なる。

【００４８】この余白範囲にメモデータをレイアウトす
ることで、コンテンツデータとの重なりが無くなった
り、少なくしたりすることができるようになる。また、
レイアウト可能範囲の内側の余白範囲にメモデータをレ
イアウトする場合に比べて、コンテンツデータとメモデ
ータとが混在しないので、コンテンツデータの見やすさ
の点で優れている。

【００４９】また、行間などの余白を抽出するには行や
文字のレイアウトデータが必要だが、レイアウト可能範
囲を使う場合は行や文字のレイアウトデータが不要なの
で、抽出処理も簡単に素早く行うことができる利点があ
る。また、レイアウト可能範囲は、コンテンツデータの
レイアウト処理前に決まっているので、コンテンツデー
タのレイアウト前に余白の抽出処理を行うことが可能と
なる利点もある。

【００５０】また、コンテンツデータは必ずレイアウト
可能範囲内にレイアウトされているが、レイアウト可能
範囲の外側の余白部分にメモデータを表示することで、
レイアウト全体としてみると一部が飛び出した形にな
り、結果的にその部分にメモデータの書き込みがあるこ
とを視覚的に目立たせることができる効果が出てくる。

【００５１】本発明に係る表示方法は、上記の課題を解
決するために、前記余白特定ステップにおいて、前記レ
イアウト可能範囲取得ステップから得られたレイアウト
可能範囲の中で、前記表示対象要素が配置されていない
部分を余白範囲として特定することを特徴とする。

【００５２】上で説明した通り、一般に、レイアウト可
能範囲の外側の余白は紙の本で言う紙面周囲の余白に相
当し、内側の余白は行間の余白に相当する。従って、余
白特定ステップで、レイアウト可能範囲取得ステップで
得られたレイアウト可能範囲内で、コンテンツデータが
レイアウトされていない部分を余白範囲とした場合、行
間などの余白が抽出されることになる。

【００５３】この行間等の余白範囲にメモデータをレイ
アウトすることで、コンテンツデータとの重なりが無く
なったり、少なくしたりすることができるようになる。
また、周囲の余白範囲にメモデータをレイアウトする場
合と比べ、関連付けられたコンテンツデータとメモデー
タとの表示の距離を、多くの場合、近くすることができ
る。

【００５４】これによって、コンテンツデータとメモデ
ータの重なりを無くす／少なくすることができるので、
見やすくなるという効果があり、また、多くの場合、両
者の距離を近くして表示することができるので、メモと
対応付けたい表示対象要素の参照部分とメモとの対応関
係がより分かり易くなる効果が出てくる。

【００５５】また、コンテンツデータのレイアウトが規
則正しくレイアウトされていれば、例えば、行の高さが
ほぼ同じで、行間もほぼ同じ場合、行間にメモデータを
表示することで、レイアウト全体としてみるとメモデー
タのレイアウト部分が行のレイアウトの規則正しさを乱
す形になり、結果的にその部分にメモデータの書き込み
があることを視覚的に目立たせることができる効果が出
てくる。

【００５６】本発明に係る表示方法は、上記の課題を解
決するために、前記関連付ける情報に含まれる、関連付
け表示の仕方に関する関連付け表示情報に基づいて、メ
モと対応付けたい表示対象要素の参照部分とメモとを線
で結んで表示する表示ステップを有することを特徴とす
る。

【００５７】コンテンツデータのレイアウトとメモデー
タのレイアウトとは取得できているので、後はその間を
直線や折れ線、曲線などの線で結んで、関連付けを視覚
化すればよい。

【００５８】ところで、関連付け表示情報は表示態様を
指定する情報であり、関連付け表示の対象にする参照部
分とメモとが特定できてさえいれば、コンテンツデータ
のレイアウトに依存せずに、メモと参照部分とを線で結
んで表示する表示処理を行わせることができる。

【００５９】これによって、コンテンツデータのレイア
ウトが変わった場合、例えば文字の大きさを変えた場
合、メモデータのレイアウトもそれに応じて変わり、メ
モデータのレイアウト位置と参照部分のレイアウト位置
とが両方変わることになるが、その変化に応じて、メモ
と参照部分とが線で結んで表示される。したがって、レ
イアウトの変更に応じて自動的に対応関係の表示が適切
なものに更新されるという利点がある。

【００６０】また、関連付け表示によって、参照部分と
メモとの対応関係が分かり易くなるという効果が出てく
る。メモデータのレイアウトと関連付けられた参照部分
のコンテンツデータのレイアウトが、レイアウト的に離
れていたとしても、線で結んで表示することで、両者に
対応関係があることを視覚的に理解しやすくするという
効果がある。

【００６１】本発明に係る表示方法は、上記の課題を解
決するために、前記関連付ける情報に含まれる、メモと
対応付けたい表示対象要素の複数の参照部分のコンテン
ツデータと一つのメモデータとを関連付ける情報と、関
連付け表示の仕方に関する関連付け表示情報とに基づい
て、一つのメモから複数の参照部分に対して、線で結ん
で表示する表示ステップを有することを特徴とする。

【００６２】上記関連付け表示情報の特性については既
に説明したとおりなので、これによって、一つのコンテ
ンツデータの部分に対して、異なる内容のメモを関連付
けることができる効果があり、あるコンテンツ部分が複
数のメモデータを持っていることが同時に視覚的に一目
でわかるという効果も出てくる。メモしたい内容が複数
ある場合、一つのメモにまとめるより複数のメモに分け
た方が別の内容であることが視覚的に分かり易くなると
いう効果もある。

【００６３】本発明に係る表示方法は、上記の課題を解
決するために、前記関連付ける情報に含まれる、メモと
対応付けたい表示対象要素の一つの参照部分のコンテン
ツデータに、複数のメモデータを関連付ける情報と、関
連付け表示の仕方に関する関連付け表示情報とに基づい
て、一つの参照部分から関連付けられた複数のメモに対
して、線で結んで表示する表示ステップを有することを
特徴とする。

【００６４】上記関連付け表示情報の特性については既
に説明したとおりなので、これによって、複数の参照部
分に共通するメモデータをまとめることができ、まとめ
ない場合に比べて無駄なメモデータの表示を抑える効果
があり、また、複数の参照部分に同じ内容のメモデータ
を対応付けていることが視覚的に一目でわかるという効
果も出てくる。

【００６５】本発明に係る表示方法は、上記の課題を解
決するために、前記メモデータが、表示の有無を表す情
報を持ち、前記メモデータが表示しないという情報を持
つ場合は、前記メモデータのレイアウトの表示とそのメ
モデータに関連付けられた関連付ける情報に基づく関連
付け表示を行わないことを特徴とする。

【００６６】この処理によれば、コンテンツデータやメ
モデータのレイアウトを取得する際、また、関連付ける
情報を表示する際、メモデータの表示の有無を表す情報
を参照し、メモデータ表示をしない時はコンテンツデー
タのレイアウトだけを取得して表示することで、コンテ
ンツデータだけの表示と、メモデータや関連付ける情報
の表示を含んだ表示とを切り替えることができるように
なる。

【００６７】これによって、コンテンツだけに集中して
理解したい時とメモなどを参照しながら理解したい時と
を切り替えられるという効果が出てくる。

【００６８】また、各メモデータが個別に表示の有無の
情報を持つことで、全メモデータの表示の有無ではな
く、個別に表示の有無を切り替えることができる利点が
ある。

【００６９】本発明に係る表示装置は、上記の課題を解
決するために、表示対象要素の一つ以上を座標空間上に
配置したレイアウトを記述したレイアウトデータが入力
され、レイアウトの中から、表示対象要素が配置されて
いない余白範囲を特定する余白レイアウトデータを、上
記レイアウトデータを用いて生成する余白特定手段と、
メモを表すメモデータが入力され、上記余白レイアウト
データに従ってメモデータを上記余白範囲に配置するこ
とにより、表示対象要素との重なりが無い、あるいは所
定割合以下、あるいは所定面積以下となるメモデータの
レイアウトを記述したメモレイアウトデータを生成する
メモレイアウト生成手段とを有することを特徴とする。

【００７０】上記の構成によれば、レイアウトデータに
は、座標空間上における表示対象要素の配置が記述され
ているから、座標空間上における表示対象要素の配置さ
れていない余白範囲をレイアウトデータから求めること
ができる。この余白範囲を特定する処理、言い換えれば
余白範囲を記述した余白レイアウトデータを生成する処
理を余白特定手段が行う。

【００７１】余白特定手段によって余白範囲が特定され
るので、メモレイアウト生成手段は、入力されたメモデ
ータを余白範囲に配置することができる。すなわち、メ
モデータを余白レイアウトデータに従って、余白範囲に
配置し、メモデータのレイアウトを記述したメモレイア
ウトデータを生成することができる。

【００７２】このメモレイアウトデータの生成にあたっ
て、メモデータをレイアウトする条件が課される。その
結果、メモレイアウト生成手段は、メモと表示対象要素
との重なりが無い、あるいは所定割合以下、あるいは所
定面積以下となるメモレイアウトデータを生成する。

【００７３】これによる種々の効果は、上記表示装置の
構成に対応する表示方法による効果として、前述したと
おりである。

【００７４】本発明に係る表示装置は、上記の課題を解
決するために、表示対象要素のデータの一つ以上の集ま
りとしてのコンテンツデータの内、メモと対応付けたい
参照部分のコンテンツデータと、前記メモデータとを関
連付ける情報を得る関連付け情報取得手段を有すること
を特徴としている。

【００７５】上記の構成により、関連付け情報取得手段
が、参照部分のコンテンツデータとメモデータとを関連
付ける情報(以下、関連付け情報と呼ぶ)を得るので、例
えば、メモレイアウト生成手段が、あるメモデータのレ
イアウトを作成する際、そのメモデータに関連付けられ
た参照部分を特定することができる。あるいは、メモと
参照部分とを線で結んだ状態で表示する等によって、メ
モと参照部分との関連付けを示す場合、関連付け情報を
利用することができる。

【００７６】これによる種々の効果は、上記表示装置の
構成に対応する表示方法による効果として、前述したと
おりである。

【００７７】本発明に係る表示プログラムは、上記の課
題を解決するために、上記表示方法が備える各ステップ
をコンピュータに実行させることを特徴とする。

【００７８】本発明に係る表示プログラムは、上記の課
題を解決するために、上記表示装置が備える各手段とし
て、コンピュータを機能させることを特徴とする。さら
に、本発明に係る記録媒体は、上記の課題を解決するた
めに、上記表示プログラムを記録したことを特徴とす
る。これにより、上記記録媒体、またはネットワークを
介して、一般的なコンピュータに表示プログラムをイン
ストールすることによって、該コンピュータを用いて上
記の表示方法を実現する、言い換えれば、該コンピュー
タを表示装置として機能させることができる。

【００７９】

【発明の実施の形態】以下、本発明の実施の形態を図面
を参照して説明する。

【００８０】「表示」とは、一般には何らかの情報を視
覚的に認知できるような状態で表示／出力媒体に対して
出力することを言い、通常はモニターなどのディスプレ
イに画素として表示することになる。ここでは、モニタ
ーなどへの表示の他にも、紙への印刷出力やＰＤＦなど
のレイアウト情報を有したデータ形式でのデータ出力
（ファイル出力）なども含まれるとする。「出力」とい
う言葉とほぼ同様の意味だが、ここでは分かりやすいよ
うに「表示」としている。

【００８１】「表示対象要素」は、表示手段に表示する
ことのできる要素をさしており、例えば文字、画像、図
などがある。

【００８２】「レイアウト」は、表示対象要素を表示範
囲に収まるように配置することであり、２次元または３
次元の座標空間における表示対象要素の表示位置、大き
さ、外形などの情報を持っている。出力手段では、表示
対象要素のレイアウトを記述したレイアウトデータに従
い、指定された表示位置に指定された大きさや外形で表
示対象要素を表示する。

【００８３】図１は、レイアウトを説明する図である。
例えば、２次元の座標空間に全ての表示対象要素を配置
した状態を表すレイアウト全体４０（レイアウトの枠組
み）の中に表示対象要素４１、４２、４３などが配置さ
れている。図ではわかり易いように表示対象要素のそれ
ぞれを点線の枠で囲ってあるが、実際に表示する際はこ
の枠は表示されない。なお以降、特に必要が無ければ表
示対象要素を、中身の表示を省略して、空の単なる枠線
で示すことがある。

【００８４】テキストの場合、表示対象要素として文字
が配置され、図１のように縦あるいは横に文字が並んで
行を構成するのが一般的である。表示する際は、レイア
ウト全体４０の中で、表示／出力媒体の表示可能な大き
さによって規定される表示範囲４４（後述するレイアウ
ト可能範囲に相当する）に含まれる表示対象要素だけが
表示される。

【００８５】なお、「レイアウトされたコンテンツデー
タ」のことを「レイアウト」と呼ぶこともある（コンテ
ンツデータについては後述する）。

【００８６】図２は、表示対象要素のレイアウトデータ
構造例を説明する図である。各行が一つの表示対象要素
のレイアウトデータで、全体は複数のレイアウトデータ
の配列になっており、それぞれのレイアウトデータにイ
ンデックス番号でアクセスできる。

【００８７】各レイアウトデータの中身は、図のよう
に、「種類」、位置「Ｘ」「Ｙ」、大きさ「Ｗ」
「Ｈ」、「データ位置」、「内容」からなる。

【００８８】「種類」は、文字（ＣＨＡＲ）や画像（Ｉ
ＭＡＧＥ）など、表示対象要素の種類を示す。

【００８９】幅「Ｗ」と高さ「Ｈ」は、表示対象要素を
表示させた時の大きさを示す。表示させた時の形状は実
際には様々だが、ここでは簡単に矩形で統一してある。

【００９０】Ｘ座標位置「Ｘ」とＹ座標位置「Ｙ」は、
表示対象要素をＸ−Ｙ座標空間に表示させた時の位置を
示す。ここでは、位置「Ｘ」「Ｙ」を、各表示対象要素
に割り当てた矩形領域の１隅の点の座標位置とする。レ
イアウト全体４０の左上隅を原点とする座標系を使う場
合、各矩形領域の左上隅の点を使って座標位置を表すこ
とが多い。

【００９１】「内容」は、表示対象要素の種類によって
変わり、例えば文字（ＣＨＡＲ）なら文字コードやその
フォント情報（フォントサイズやフォント色など）、画
像ならビットマップデータやその記憶場所を指し示すデ
ータなどとなる。すなわち、「内容」は、コンテンツデ
ータの構成要素データに相当する。

【００９２】「データ位置」は、コンテンツデータ中
で、このレイアウトデータを作成する元となったデータ
範囲を特定する情報である。単位は様々なものが考えら
れるが、例えば先頭からの表示対象要素としての順番で
あるとか、コンテンツデータの先頭から見て、その表示
対象要素を記述する構成要素データのバイト位置などが
ある。さらに細かい情報を求めるのならば、１つの表示
対象要素内部のどこであるかまで「データ位置」として
指定しても良い。例えば画像内部の座標位置などであ
る。ここでは「データ位置」を、ひとまず先頭から何番
目の表示対象要素であるかにしておく。

【００９３】図３は、行のレイアウトを説明する図であ
る。レイアウトは必ず行の構造を持っているとは限らな
いが、テキストなどが主体となるコンテンツは多くの場
合、行構造を持ったレイアウトを作成することが多いの
で、ここでは行を使ったレイアウトで説明する。

【００９４】行は、位置「Ｘ」「Ｙ」、大きさ「Ｗ」
「Ｈ」、表示対象要素のレイアウトの配列を持つ。１行
が持つ配列の個数はレイアウト結果によって変わってく
る。図３では、図２の表示対象要素のレイアウトデータ
そのものではなく、表示対象要素のレイアウトデータの
「参照データを特定する情報」（参照情報と略記する）
を持たせている。

【００９５】すなわち、行８０は、１〜５番目の表示対
象要素の参照情報を配列として持ち、行８１は６〜１１
番目の表示対象要素の参照情報を配列として持つ。位置
「Ｘ」「Ｙ」、大きさ「Ｗ」「Ｈ」は、各行８０・８１
等に配列された表示対象要素の全てを包含する矩形の属
性情報である。

【００９６】「参照データを特定する情報」とは、参照
されている構成要素データが記録されている場所などを
示す情報であり、例えば主記憶上に記録されているな
ら、その主記憶アドレスなどである。

【００９７】「手書きデータ」は、例えばマウスやタブ
レットなどを使ってユーザがフリーハンドで入力したデ
ータで、データ形式としては上下左右斜めの方向を持っ
たストロークの集まりとして表現されることが多いが、
ビットマップ画像として表現されることもある。いずれ
にしろ、「手書きデータ」は表示単位としては一塊のデ
ータであり、データを分解して、再レイアウトして表示
することはできないものとここでは定義しておく。

【００９８】なお、分解して、再レイアウトして表示で
きるデータとしては、例えばキーボードなどを使って入
力された「テキストデータ」などがあり、ワープロなど
では１行の文字数を変更したり文字の大きさを変更した
りしてレイアウトを変更して表示させることができる。
もし、前述のＰｏｃｋｅｔＷｏｒｄの様に、手書き入力
された文字ではあるが、文字単位で分解でき、再レイア
ウトできるのならば、テキストデータの一種と解釈して
もよい。

【００９９】「メモデータ」は、手書きデータやテキス
トデータなど、ユーザがコンテンツデータに対して入力
したデータの総称である。テキストデータの様に分解し
て再レイアウトできるものも、手書きデータの様に分
解、再レイアウトできないものも含んでいる。なお、手
書きデータやテキストデータ以外でも、表示できる対象
ならばほとんどのデータはメモデータとして扱え、例え
ば画像なども含まれる。

【０１００】「コンテンツデータ」は、ここでは、表示
対象要素を表す構成要素データの一つ以上の集まりから
なり、文字サイズなどの表示設定によって表示対象要素
のレイアウトが変わるようなデータとしている。例えば
エディタやワープロ、ＷＷＷ（ＷｏｒｌｄＷｉｄｅ
Ｗｅｂ）ブラウザなどで扱うデータが相当するが、文字
サイズや全レイアウト範囲（ウィンドウ）の大きさなど
を変えると、コンテンツデータは再レイアウトされ、表
示結果は異なってくる。

【０１０１】「関連付け情報」とは、コンテンツデータ
の一部とメモ情報とを関連付ける情報である。なお、以
降、メモ情報と関連付けられたコンテンツデータの一部
を、「参照部分」や「参照データ」と呼ぶことにする。

【０１０２】例えば、コンテンツとしての文書中のある
文章に対して下線を引き、そこから引き込み線を余白ま
で引っ張り、余白にその文章に対するコメントなどをユ
ーザがメモとして記したとすると、下線を引いた文章が
参照部分であり、参照部分とメモとを下線や引き込み線
などを使って関連付けたことになる。

【０１０３】視覚的にはこのような形で表現されるが、
データ的には関連付け情報とは、例えば参照部分、すな
わち参照データとメモデータとの対応関係を特定する情
報であり、参照データのデータ範囲をコンテンツデータ
内で特定するような情報やメモデータを特定するような
情報の組ということになる。特定の仕方については後で
述べる。対応関係は１対１に限らず、１対多、多対１、
多対多なども可能である。

【０１０４】また、対応関係の情報だけに限らず、参照
部分をどのように指定したのか（先の例では「下線」と
「引き込み線」を使っている）とか、どこにメモを記し
たのか（先の例では余白部分）、などの情報も関連付け
情報は含むが、このような情報はメモデータに持たすこ
とも可能である。１対１の場合はどちらが持っても良い
が、１対多、多対１、多対多などでメモデータや参照デ
ータが複数の時、メモデータ毎に関連付けの表示の仕方
を変えたいという場合にはメモデータに持たせた方が良
い場合もある。

【０１０５】関連付け情報に関しては、後で図１３を用
いて具体的に詳しく説明する。

【０１０６】「余白範囲」は、メモデータをレイアウト
できる範囲を指し、基本的に表示範囲４４にコンテンツ
データをレイアウトした残り部分が対象となる。したが
って、余白範囲は、紙面（全レイアウト範囲）の周囲の
部分と、コンテンツデータのレイアウトの行間の部分と
に大きく分けられる。厳密に言えば、文字間や文字や図
形の中の空白部なども余白と言えなくもないが、実際に
メモデータをレイアウト可能な範囲と考えると、周囲と
行間が主な余白範囲となる。

【０１０７】図４は、本発明の実施の一形態に係り、後
述する表示方法を実施する表示装置を示す構成図であ
る。

【０１０８】すなわち、表示装置の要部を、メモデータ
レイアウト範囲取得手段５９、入力手段６０、表示範囲
取得手段６１、コンテンツデータ取得手段６２、メモデ
ータ取得手段６３、関連付け情報取得手段６４、コンテ
ンツデータレイアウト取得手段６５、メモデータレイア
ウト取得手段６６、レイアウト出力手段６７、コンテン
ツレイアウト範囲取得手段６８、およびコンテンツ余白
特定手段６９の主要な機能ブロックに展開して示すこと
ができる。

【０１０９】処理の概要をこれら各手段５９〜６９間の
データの授受の観点から説明する。

【０１１０】まず、表示範囲取得手段６１では、レイア
ウト出力手段６７に接続されたモニターやプリンタで使
用される印刷用紙等の表示／出力媒体のサイズに相当す
るレイアウト可能範囲を得て、レイアウト出力手段６
７、コンテンツレイアウト範囲取得手段６８、コンテン
ツ余白特定手段６９に送る。

【０１１１】なお、表示／出力媒体のレイアウト可能範
囲とは、コンテンツデータやメモデータも含めて、表示
対象要素をレイアウトして表示が可能となる範囲であ
り、表示／出力媒体の表示できない端の部分や、ウィン
ドウ枠その他の表示に使われるのでコンテンツデータや
メモデータのレイアウト／表示に使えない部分を除いた
部分、本当はレイアウト可能だが見易くするためにわざ
とレイアウトさせない端の部分（先に説明した意味では
なく、一般的に言う「余白」）などを除いた範囲であ
る。ここでは説明を簡単にする為、図１の表示範囲４４
の全てがレイアウト可能範囲として得られるとする。

【０１１２】上記のレイアウト可能範囲は、後で詳述す
るように、キーボード、マウス等を介したユーザの操作
や、文書表示プログラムや、表示／出力先の装置によっ
て指定され、表示範囲取得手段６１に入力される。

【０１１３】次に、コンテンツレイアウト範囲取得手段
６８は、表示範囲取得手段６１から得たレイアウト可能
範囲や、ユーザが指定した行内文字数の情報、余白の設
定情報などを元に、コンテンツデータをレイアウトする
範囲（以下、コンテンツレイアウト範囲と呼ぶ）を得
る。

【０１１４】コンテンツレイアウト範囲は、通常、レイ
アウト可能範囲より上下左右に余白を取った分、狭い範
囲として得られる。得られたコンテンツレイアウト範囲
は、コンテンツデータレイアウト取得手段６５、コンテ
ンツ余白特定手段６９へ送られる。

【０１１５】コンテンツデータ取得手段６２は、コンテ
ンツデータを外部記憶装置や、ユーザが操作するキーボ
ード、マウス等などから得て、コンテンツデータレイア
ウト取得手段６５へ送る。

【０１１６】コンテンツデータレイアウト取得手段６５
は、コンテンツレイアウト範囲取得手段６８から得たコ
ンテンツレイアウト範囲の中で、コンテンツデータ取得
手段６２から得たコンテンツデータ（の各表示対象要
素）をレイアウトする。これによって、コンテンツデー
タの各表示対象要素のレイアウト位置が決まり、コンテ
ンツデータを表示できることになる。コンテンツデータ
のレイアウトを記述したレイアウトデータは、コンテン
ツデータレイアウト取得手段６５で生成された後、コン
テンツ余白特定手段６９、メモデータレイアウト取得手
段６６、レイアウト出力手段６７へ送られる。

【０１１７】コンテンツデータのレイアウトデータを生
成する構成を説明したので、次に、メモデータのレイア
ウトデータを生成する構成を説明する。

【０１１８】入力手段６０は、タブレット、ペン、キー
ボードなどで入力されたデータを受け取り、メモデータ
取得手段６３、関連付け情報取得手段６４へ送る。

【０１１９】メモデータ取得手段６３は、入力手段６０
から得た入力データを解釈したり、外部記憶装置などに
記録されたデータからメモデータを読み取ったりして、
メモデータを取得し、メモデータレイアウト取得手段６
６、メモデータレイアウト範囲取得手段５９へ送る。

【０１２０】同様に、関連付け情報取得手段６４は、入
力手段６０から得た入力データを解釈したり、外部記憶
装置などに記録されたデータから関連付け情報を読み取
ったりして、関連付け情報を取得し、メモデータレイア
ウト取得手段６６、レイアウト出力手段６７へ送る。

【０１２１】コンテンツ余白特定手段６９では、表示範
囲取得手段６１から得たレイアウト可能範囲、コンテン
ツレイアウト範囲取得手段６８から得たコンテンツレイ
アウト範囲、コンテンツデータレイアウト取得手段６５
から得たコンテンツデータ（の各表示対象要素）のレイ
アウトデータから、コンテンツデータがレイアウトされ
ていない余白範囲を特定して抽出する。抽出された余白
範囲は、メモデータレイアウト範囲取得手段５９へ送ら
れる。

【０１２２】メモデータレイアウト範囲取得手段５９
は、コンテンツ余白特定手段６９から得た余白範囲と、
メモデータ取得手段６３から得たメモデータとから、コ
ンテンツデータ（の各表示対象要素）のレイアウトと重
なりが無い、あるいは所定割合以下、あるいは所定面積
以下のメモデータのレイアウト範囲（以下、メモレイア
ウト範囲と呼ぶ）を得る。得られたメモレイアウト範囲
は、メモデータレイアウト取得手段６６へ送られる。

【０１２３】メモデータレイアウト取得手段６６は、関
連付け情報取得手段６４から得た関連付け情報とコンテ
ンツデータレイアウト取得手段６５から得たコンテンツ
データのレイアウトデータとから、レイアウトされてい
るコンテンツデータに関連付けられたメモデータを得
る。

【０１２４】続いて、メモデータレイアウト取得手段６
６は、そのメモデータのレイアウト方針（ユーザまたは
表示プログラム等によって設定される）などに従って、
メモデータレイアウト範囲取得手段５９から得たメモレ
イアウト範囲の中で、メモデータ取得手段６３から得た
メモデータをレイアウトし、メモデータのレイアウトを
記述したメモレイアウトデータを生成する。生成された
メモレイアウトデータは、レイアウト出力手段６７へ送
られる。

【０１２５】なお、メモデータレイアウト範囲取得手段
５９およびメモデータレイアウト取得手段６６は、メモ
レイアウト生成手段に相当する。

【０１２６】レイアウト出力手段６７は、コンテンツデ
ータレイアウト取得手段６５から得たコンテンツデータ
のレイアウトデータと、メモデータレイアウト取得手段
６６で生成されたメモレイアウトデータとに従って、コ
ンテンツデータおよびメモデータを、関連付け表示情報
などに基づいて関連付けて、モニターなどに表示する。
なお、関連付け表示情報は、関連付け情報取得手段６４
から得られた関連付け情報に含まれている。

【０１２７】図５は、図４の各手段５９〜６９を具体的
に実現する装置の構成例である。

【０１２８】ＣＰＵ（central processing unit）７０
は、メモデータレイアウト範囲取得手段５９、上記入力
手段６０、表示範囲取得手段６１、コンテンツデータ取
得手段６２、メモデータ取得手段６３、関連付け情報取
得手段６４、コンテンツデータレイアウト取得手段６
５、メモデータレイアウト取得手段６６、レイアウト出
力手段６７、コンテンツレイアウト範囲取得手段６８、
およびコンテンツ余白特定手段６９として機能し、これ
ら各手段５９〜６９による処理手順が記述されたプログ
ラムを主記憶７４、外部記憶７５、通信デバイス７７が
仲介するネットワークなどから得る。

【０１２９】なお、主記憶７４または外部記憶７５は、
本発明の表示プログラムを記録した記録媒体に相当す
る。

【０１３０】また、ＣＰＵ７０は、ＣＰＵ７０を含めて
バス７９を通じ相互に接続されたディスプレイ７１、プ
リンター７２、タブレット７３、主記憶７４、外部記憶
７５、マウス７６、通信デバイス７７、キーボード７８
とデータのやりとりを行ないながら、既に説明した各処
理を行なう。

【０１３１】なお、データのやりとりは、バス７９を介
して行う形態に限定されるものではなく、データを送受
信できるならば、通信ケーブルや無線通信装置などを介
する形態でもよい。また、各手段５９〜６９の実現手段
としては、ＣＰＵに限らず、ＤＳＰ(digital signal pr
ocessor)や処理手順が回路として組み込まれているロジ
ック回路などを用いることもできる。

【０１３２】主記憶７４は、通常はＤＲＡＭ（dynamic
random access memory）やフラッシュメモリなどのメモ
リデバイスで構成される。外部記憶７５は、ＨＤＤ（ha
rd disk drive）やＰＣ（personal computer) カードな
どの装脱着可能な記憶手段である。あるいはＣＰＵ７０
とネットワークを介して有線または無線で接続された他
のネットワーク機器に取り付けられた主記憶や外部記憶
を外部記憶７５として用いることもできる。

【０１３３】ユーザの指示を入力する手段として、マウ
ス７６、タブレット７３、キーボード７８などがあり、
ユーザの指示はバス７９を介して入力手段６０に入力さ
れる。この他にもボタン、マイクによる音声入力など、
様々な手段が使用可能である。

【０１３４】ディスプレイ７１は、通常はグラフィック
カードなどと組み合わされて実現され、グラフィックカ
ード上にＶＲＡＭ（video random access memory）を有
し、ＶＲＡＭ上のデータを表示信号に変換して、モニタ
ーなどのディスプレイ（表示／出力媒体）に送り、ディ
スプレイは表示信号を画像として表示する。

【０１３５】プリンタ７２は、バス７９を介して得た印
刷データを用紙（表示／出力媒体）に印刷する。通信デ
バイス７７は、ネットワークカードなどにより実現さ
れ、無線や有線などにより接続された他のネットワーク
機器とデータをやりとりする。

【０１３６】図４の表示範囲取得手段６１としてのＣＰ
Ｕ７０は、表示／出力範囲（レイアウト可能範囲）のデ
ータを主記憶７４、外部記憶７５、ネットワークなどか
ら読み取られるプログラムから得たり、ユーザの操作に
よりマウス７６、タブレット７３、キーボード７８から
入力されたデータとして得たり、ディスプレイ７１、主
記憶７４、外部記憶７５、プリンタ７６、ネットワーク
からデータとして得たりする。

【０１３７】例えばディスプレイ７１上に表示されてい
るウィンドウのサイズをレイアウト可能範囲とするなら
ば、ＣＰＵ７０は、主記憶７４上のウィンドウサイズデ
ータを参照したり、ウィンドウサイズ取得ＡＰＩを呼び
出すなどしてレイアウト可能範囲のデータを得る。また
印刷ならば、プリンタ７２、あるいは用紙設定が記録さ
れた主記憶７４や外部記憶７５上の用紙設定データをＣ
ＰＵ７０が参照したり、用紙サイズ取得ＡＰＩを呼び出
すなどして用紙サイズのデータを得ればよい。

【０１３８】コンテンツレイアウト範囲取得手段６８と
してのＣＰＵ７０は、主記憶７４、外部記憶７５、ネッ
トワークなどから既に設定済みのコンテンツレイアウト
範囲を得たり、あるいは主記憶７４、外部記憶７５、ネ
ットワークなどから読み取られるプログラムに基づき、
表示範囲取得手段６１から得たレイアウト可能範囲など
を元に、コンテンツレイアウト範囲を得る。コンテン
ツデータ取得手段６２としてのＣＰＵ７０は、主記憶７
４、外部記憶７５、ネットワークなどからコンテンツデ
ータを得る。コンテンツデータは予め用意されていると
する。

【０１３９】コンテンツデータレイアウト取得手段６５
としてのＣＰＵ７０は、主記憶７４、外部記憶７５、ネ
ットワークなどから既に作成済みのレイアウトデータを
得たり、あるいは、コンテンツデータ取得手段６２から
得たコンテンツデータ（の各表示対象要素）を、コンテ
ンツレイアウト範囲取得手段６８から得たコンテンツレ
イアウト範囲の中でレイアウトし、レイアウトデータを
生成する。なお、レイアウトデータの生成処理は、主記
憶７４、外部記憶７５、ネットワークなどから読み取ら
れるプログラムに基づく。

【０１４０】図４の入力手段６０としてのＣＰＵ７０
は、ユーザからの入力データを、ユーザの操作によりマ
ウス７６、タブレット７３、キーボード７８などから入
力されたデータとして得、必要に応じて、主記憶７４、
外部記憶７５、ネットワークなどから読み取られるプロ
グラムを利用してその入力データを加工してから、他の
手段に渡したりする。

【０１４１】例えば、タブレット７３やマウス７６から
入力されたペンやマウス７６の動きデータをストローク
データの形式にしたり、そのストロークデータを手書き
文字認識してテキストデータに変換したり、キーボード
から得られる文字を仮名漢字変換して漢字仮名混じりの
テキストにしたり、マイクから入力された音声を認識し
てテキストデータに変換したり、などといった処理など
を入力手段６０が実行する。

【０１４２】メモデータ取得手段６３としてのＣＰＵ７
０は、主記憶７４、外部記憶７５、ネットワークなどか
らメモデータを得たり、あるいは主記憶７４、外部記憶
７５、ネットワークなどから読み取られるプログラムに
基づき、入力手段６０から得たユーザ入力を処理してメ
モデータとして解釈してメモデータを得る。主記憶７
４、外部記憶７５、ネットワークなどから直接メモデー
タを読み込む時は、予め用意されているとする。

【０１４３】関連付け情報取得手段６４としてのＣＰＵ
７０は、主記憶７４、外部記憶７５、ネットワークなど
から関連付け情報を得たり、あるいは、入力手段６０か
ら得たユーザ入力を処理して関連付け情報として解釈し
た後、関連付け情報を取得する。なお、ユーザ入力を処
理して関連付け情報を取得する処理は、主記憶７４、外
部記憶７５、ネットワークなどから読み取られるプログ
ラムに基づく。また、主記憶７４、外部記憶７５、ネッ
トワークなどから直接関連付け情報を読み込む時は、予
め用意されているとする。

【０１４４】なお、メモデータと関連付け情報とはお互
いに対応しているデータなので、記録する時は一体のデ
ータとして記録した方が多くの場合、扱いが便利であ
る。コンテンツデータと一体とした方が便利かどうかは
使い方による。

【０１４５】コンテンツ余白特定手段６９としてのＣＰ
Ｕ７０は、取得したレイアウト可能範囲と、コンテンツ
レイアウト範囲取得手段６８から得たコンテンツレイア
ウト範囲と、コンテンツデータレイアウト取得手段６５
から得たコンテンツデータ（の各表示対象要素）のレイ
アウトデータとから、コンテンツデータがレイアウトさ
れていない余白範囲を抽出する。

【０１４６】なお、ＣＰＵ７０は、主記憶７４、外部記
憶７５、ネットワークなどから既に設定済みのレイアウ
ト可能範囲を得たり、あるいは主記憶７４、外部記憶７
５、ネットワークなどから読み取られるプログラムに基
づき、表示範囲取得手段６１からレイアウト可能範囲を
取得する。

【０１４７】メモデータレイアウト範囲取得手段５９と
してのＣＰＵ７０は、主記憶７４、外部記憶７５、ネッ
トワークなどから読み取られるプログラムに基づき、コ
ンテンツ余白特定手段６９から得られた余白範囲と、メ
モデータ取得手段６３から得られたメモデータとから、
コンテンツデータ（の各表示対象要素）のレイアウトと
重なりが無い、あるいは所定割合以下、あるいは所定面
積以下のメモレイアウト範囲を得る。

【０１４８】メモデータレイアウト取得手段６６として
のＣＰＵ７０は、主記憶７４、外部記憶７５、ネットワ
ークなどから既に作成済みのメモデータを得たり、ある
いは、レイアウトされているコンテンツデータに関連付
けられたメモデータをメモデータ取得手段６３から得
て、メモデータレイアウト範囲取得手段５９から得られ
たメモレイアウト範囲の中で、そのメモデータのレイア
ウト方針などに従って、レイアウトし、メモレイアウト
データを得る。

【０１４９】なお、メモデータレイアウト取得手段６６
は、主記憶７４、外部記憶７５、ネットワークなどから
読み取られるプログラムに基づき、関連付け情報取得手
段６４から得られた関連付け情報とコンテンツデータレ
イアウト取得手段６５から得られたコンテンツデータの
レイアウトデータとから、コンテンツデータに関連付け
られたメモデータを取得する。

【０１５０】レイアウト出力手段６７としてのＣＰＵ７
０は、主記憶７４、外部記憶７５、ネットワークなどか
ら読み取られるプログラムに基づき、コンテンツデータ
レイアウト取得手段６５から得られたコンテンツデータ
のレイアウトデータと、メモデータレイアウト取得手段
６６から得られたメモレイアウトデータとに従って、コ
ンテンツデータおよびメモデータを、関連付け情報に含
まれる関連付け表示情報などに基づいて関連付けて、デ
ィスプレイ７１、プリンター７２などに表示／出力す
る。

【０１５１】図６は、本発明に係る表示装置の外観例を
示している。本体９０上に表示部兼タブレット９１があ
り、入力手段としてペン９２がある。表示部兼タブレッ
ト９１は出力先の装置（ディスプレイ７１およびタブレ
ット７３等）に相当し、図では表示部兼タブレット９１
の大きさがレイアウト可能範囲の大きさとなる。

【０１５２】表示部兼兼タブレット９１上でペン９２を
操作することで、手書きデータなどが入力できる。表示
部兼タブレット９１の表示機能は図５のディスプレイ７
１に相当し、表示部兼タブレット９１のタブレット機能
とペン９２の組み合わせが図５のタブレット７３に相当
する。表示部兼タブレット９１上には、図６のように、
コンテンツ（例えば文章）のレイアウト、メモのレイア
ウト、関連付け情報（例えば下線）などが表示される。

【０１５３】この装置を使った操作例として、あるテキ
ストにメモを関連付けて、メモを表示させる一連の操作
について説明する。

【０１５４】図７は、表示部兼タブレット９１を抜き出
して書いたもので、コンテンツデータとして、「従来、
文書・・」というテキストがレイアウトされて表示され
ている。この時点ではメモデータは存在しないとする。

【０１５５】図８は、表示部兼タブレット９１上で、ペ
ン９２を用いて、コンテンツデータのテキストの一部を
選択している状態を示す図である。図８では、テキスト
中の「文書」という部分を選択している。この「文書」
がメモの参照部分となる。選択の方法は、マウスやキー
ボードなどを使った方法など色々あるが、ここではペン
９２によって、選択部分の範囲をドラッグするという方
法であるとする。選択されたテキスト部分が分かり易い
ように、選択されたテキスト部分の色を反転させて表示
している。

【０１５６】なお、これらの選択方法は、ＧＵＩ（Ｇｒ
ａｐｈｉｃａｌＵｓｅｒＩｎｔｅｒｆａｃｅ）を扱
うＯＳ（ＯｐｅｒａｔｉｎｇＳｙｓｔｅｍ）やアプリ
ケーションならば一般的な方法なので、具体的な実現方
法についての説明は省略する。

【０１５７】コンテンツデータのテキストの一部を選択
したら、メモデータを設定する。設定方法は様々考えら
れるが、図９は、設定を行うダイアログウィンドウを表
示させた例である。このダイアログウィンドウは、コン
テンツデータのテキスト表示の上に重ねて表示されてい
るとする。

【０１５８】図９の「テキスト」部分の横の枠内は文字
入力することができ、ユーザがメモの内容を入力する入
力部である。図９では、「ドキュメント」という内容を
入力した状態になっている。

【０１５９】なお、テキストの入力に関しては、ペン９
２と表示部兼タブレット９１を使った文字認識やソフト
キーボード、あるいは外部キーボードなどによって入力
されるとする。

【０１６０】図９のダイアログウィンドウにおいて、
「テキスト」の下の「表示位置」は、メモをコンテンツ
データの参照部分に対してどのような位置の余白に表示
するかを指定する入力部である。ここでは、余白として
「行間」と「周囲」がラジオボタンで選択でき、図９で
は「行間」が指定されている。

【０１６１】その下の「参照表示」は、コンテンツデー
タの参照部分の表示の仕方をどうするかを指定する入力
部である。ここでは、「下線」と「枠」とがラジオボタ
ンで選択でき、図９では「下線」が指定されている。

【０１６２】メモデータの設定は、「表示位置」や「参
照表示」以外にも様々な種類の設定が考えられるが、こ
こでは説明の為、この２つに絞っただけであり、実際に
は必要に応じてユーザが設定できるようにしておけばよ
い。

【０１６３】図９でメモ設定ダイアログによる設定が終
われば、「ＯＫ」ボタンを押して、設定を確定する。す
ると後で説明するようなメモデータとコンテンツデータ
のレイアウト処理と表示処理が行われ、後で説明する図
１０のように参照部分「文書」に下線が引いて表示さ
れ、その下の行間に「文書」に関連付けられたメモの内
容「ドキュメント」が表示される。なお、図１０では後
で説明に使う必要上、行範囲に点線で枠が描かれている
が、これは説明上のもので実際には表示されない。

【０１６４】以上、コンテンツデータの表示から、参照
部分の選択、メモデータの設定、レイアウト、表示とい
う一連の手順の概要を説明した。以降、主にレイアウト
と表示の処理に関して、詳しく説明する。

【０１６５】図１１は、本発明の実施の一形態に係る表
示方法を示すフローチャート図である。前述した表示装
置の各手段上で実施される処理に対応する。

【０１６６】まずステップＳ１（以下、「ステップＳ」
を「Ｓ」と略記する。）でメモデータ取得手段６３がメ
モデータを取得すると、Ｓ２へ処理が進む。メモデータ
の定義については、先に説明した通りである。メモデー
タの取得方法は本発明の主旨ではないので詳しい説明は
省くが、入力手段６０から得たデータ、すなわちキーボ
ード７８やタブレット７３などで入力され、入力手段６
０の処理を経たテキストデータや手書きデータであった
り、あるいは主記憶７４や外部記憶７５に予め記録され
ていたデータから読み込んだデータであったりする。

【０１６７】図１２はメモデータ構造の一例を説明する
図である。各横行１〜３が一つのメモデータで、全体は
複数のメモデータの配列になっており、それぞれのメモ
データにインデックス番号でアクセスできる。

【０１６８】各メモデータの中身は、図のように、「種
類」、位置「Ｘ」「Ｙ」、大きさ「Ｗ」「Ｈ」、「関連
付けデータ」、「内容」、「レイアウト」からなる。

【０１６９】「種類」は、テキスト（ＴＥＸＴ）、手書
きデータ（ＦＲＥＥＨＡＮＤ）、画像（ＩＭＡＧＥ）な
どのように、メモデータの種類を示す。

【０１７０】位置「Ｘ」「Ｙ」は、全レイアウト（レイ
アウト全体４０）中の位置であり、図１の表示対象要素
の位置と同じ座標系である。

【０１７１】大きさ「Ｗ」「Ｈ」は、メモデータを表示
させた時の標準的な大きさであり、テキストデータのよ
うに分解、再レイアウトが可能なものは、大きさは「可
変」であり、手書きデータや画像などは固定した大きさ
を持つ（但し、手書きデータや画像などを全体として伸
縮することも不可能ではない）。

【０１７２】「関連付けデータ」は、このメモと関連付
けされている関連付け情報のデータへのアクセス手段を
示す。例えばメモリ中に関連付けデータを保持する形態
では、「関連付けデータ」は、そのデータのアドレスな
どになる。ここでは分かり易くする為に、図１３の関連
付けデータに付与した番号で表現しておく。場合によっ
ては、関連付けデータは、複数となることもある。

【０１７３】「内容」は、メモデータの種類によって変
わり、例えばテキストデータなら文字列やそのフォント
情報、手書きデータならばストロークデータ（ｓｔｒｏ
ｋｅｄａｔａ）、画像ならビットマップデータ（ｉｍａ
ｇｅｄａｔａ）やその記録場所を指し示すデータなど
となる。

【０１７４】「レイアウト」は後で作成するメモデータ
のレイアウトデータを指す。

【０１７５】Ｓ２（関連付け情報取得ステップ）では、
関連付け情報取得手段６４が参照データとメモデータと
の関連付け情報を得て、Ｓ３へ処理が進む。関連付け情
報の定義については、先に説明した通りである。関連付
け情報取得手段６４におけるデータの入手方法について
はメモデータと同様、キーボード７８やタブレット７３
などで入力され、入力手段６０の処理を経たテキストデ
ータや手書きデータに併せて入力された関連付けの仕方
に関する情報であったり、あるいは主記憶７４や外部記
憶７５に予め記録されていた関連付け情報を読み込んだ
データであったりする。

【０１７６】図１３は関連付け情報のデータ構造の一例
を説明する図である。点線で囲われたデータ１０、２
０、３０が一つの関連付けデータで、全体は複数の関連
付けデータの配列になっており、それぞれの関連付けデ
ータにインデックス番号でアクセスできる。関連付けデ
ータは、大きく「メモデータリスト」、「参照データリ
スト」、「関連表示方法」の３つに分けられる。

【０１７７】「メモデータリスト」は、関連付けデータ
によって関連付けられている「メモデータに関する情
報」の配列である。ここでは、「メモデータに関する情
報」を、「メモデータを特定する情報」と「メモデータ
を表示する方法についての情報」の組としている。

【０１７８】「メモデータを特定する情報」は、例え
ば、図１３では、データ１１、２１、３１、３３であ
り、ここでは図１２に示すメモデータの番号を記録して
ある。「メモデータを表示する方法についての情報」
は、図１３では、データ１２、２２、３２、３４である
が、データの中身の意味については、後で説明する。

【０１７９】「参照データリスト」は、関連付けデータ
で関連付けられている「参照データに関する情報」の配
列である。ここでは、「参照データに関する情報」とし
て、「参照データを特定する情報」と「参照部分を視認
可能に表示する方法（参照データの関連表示を表示する
方法）についての情報」の組としている。図１３では、
「参照データを特定する情報」はデータ１３、２３、２
５、３５であり、「参照部分を視認可能に表示する方法
についての情報」はデータ１４、２４、２６、３６であ
る。

【０１８０】「参照データを特定する情報」は、図２の
表示対象要素のレイアウトデータの「データ位置」に対
応するものとなる。例えば、先頭から５番目の表示対象
要素から７番目の表示対象要素までを参照部分とするな
ら、参照データを特定する情報は、「５〜７」となる。

【０１８１】「参照部分を視認可能に表示する方法につ
いての情報」の意味については、後で説明する。

【０１８２】「関連表示方法」は、参照データとメモデ
ータとの関連付けを表示する方法を表しており、図１３
ではデータ１５、２７、３７である。データの中身の意
味については後で説明する。

【０１８３】Ｓ３では、コンテンツデータ取得手段６２
がコンテンツデータを取得する。コンテンツデータの定
義については、先に説明した通りである。以降では、説
明を分かり易くする為、プレーンテキストで記述されて
いるとする。コンテンツデータは、コンテンツデータ取
得手段６２が主記憶７４や外部記憶７５に予め記録され
ていたコンテンツデータを読み込んだり、ネットワーク
を介して読み込むことで得られる。

【０１８４】Ｓ４では、メモデータレイアウト取得手段
６６が、メモ表示を行うかどうかの情報を得て、Ｓ５へ
処理が進む。。

【０１８５】メモ表示を行うかどうかの情報（メモＯＮ
／ＯＦＦ情報と呼ぶ）は、本発明を実施するアプリケー
ションや装置などから得ることがある。つまり、主記憶
７４や外部記憶７５に予め記録されたメモＯＮ／ＯＦＦ
情報を、メモデータレイアウト取得手段６６が取得す
る。また、ユーザに尋ねることによって、メモデータレ
イアウト取得手段６６が入力手段６０を介してメモＯＮ
／ＯＦＦ情報を取得する場合もある。あるいはそれぞれ
のメモデータに既にその情報が含まれていて、メモデー
タレイアウト取得手段６６がメモデータと合わせてメモ
ＯＮ／ＯＦＦ情報を取得することもある。

【０１８６】メモ表示を行うかどうかは、予めアプリケ
ーションあるいは装置の設定によって全てのメモデータ
に対して一律に決める場合もあれば、それぞれのメモデ
ータ毎に、またはメモデータの種類毎に決める場合もあ
る。

【０１８７】ここでは、アプリケーションあるいは装置
の設定によって全てのメモデータに関してまとめて決め
るとしておく。なお、ここではメモＯＮ／ＯＦＦ情報を
メモデータ全体で一括した値として得ているが、図１２
のメモデータや図１３の関連付け情報にメモＯＮ／ＯＦ
Ｆ情報をメモデータ毎に持たせる形態を採用すれば、メ
モデータ毎に表示の有無を指定することができる。

【０１８８】Ｓ５では、Ｓ４で得られたメモＯＮ／ＯＦ
Ｆ情報に基づき、メモデータレイアウト取得手段６６が
メモを表示させるか否かを判断する。メモを表示させる
場合は、連結点Ｐ１０（以降、「連結点Ｐ」を「Ｐ」と
略記する）を経てＳ６へ処理が進み、メモを表示させな
い場合はＳ５からＳ７へ処理が進み、コンテンツデータ
の表示処理を行う。なお、Ｓ７の内容については、後述
のＳ６−６の説明が該当する。

【０１８９】Ｓ６（表示ステップ）では、コンテンツデ
ータのレイアウトをメモデータ表示の為に変更せずにコ
ンテンツデータやメモデータなどをレイアウト出力手段
６７によって表示させて、Ｐ１００を経て処理を終了す
る。Ｓ６での処理の詳細は後で述べる。

【０１９０】これによって、メモデータとコンテンツデ
ータとを関連付けて表示させる一連の処理を行うことが
できる。なお、Ｓ１〜Ｓ３の処理の順番は特にこの順で
なくても良く、適宜入れ替わっても良い。

【０１９１】図１４は、図１１のＳ６の処理、すなわち
レイアウト出力手段６７が、レイアウトされたメモデー
タおよびコンテンツデータを、例えば前述の表示部兼タ
ブレット９１に表示する処理の一詳細例を説明するフロ
ーチャート図である。

【０１９２】Ｐ１０からＳ６−１（レイアウト可能範囲
取得ステップ）に進むと、表示範囲取得手段６１が表示
／出力媒体のレイアウト可能範囲を取得して、Ｓ６−２
へ処理が進む。すなわち、Ｓ６−１では、レイアウト可
能範囲は、キーボード、マウス等を介したユーザの操作
や、文書表示プログラムや、表示／出力先の装置によっ
て指定され、表示範囲取得手段６１に入力される。

【０１９３】Ｓ６−２では、コンテンツレイアウト範囲
取得手段６８がコンテンツデータの表示レイアウト範囲
（コンテンツレイアウト範囲）を取得して、Ｓ６−３へ
処理が進む。コンテンツレイアウト範囲取得手段６８
は、前述したように、主記憶７４、外部記憶７５、ネッ
トワークなどから既に設定済みのコンテンツレイアウト
範囲を得たり、あるいは主記憶７４、外部記憶７５、ネ
ットワークなどから読み取られるプログラムに基づき、
表示範囲取得手段６１から得たレイアウト可能範囲など
を元に、コンテンツレイアウト範囲を得る。

【０１９４】例えば図１では、Ｘ軸方向のコンテンツレ
イアウト範囲は、左右の余白ＸＬ，ＸＲを除いた行の幅
ＣＷの部分、Ｘ座標値で言えば、ＸＬ〜（ＸＬ＋ＣＷ）
の範囲となる。Ｙ軸方向のコンテンツレイアウト範囲
は、上下の余白ＹＴ，ＹＢを除いた部分であり、Ｙ座標
値で言えば、ＹＴ〜（ＹＴ＋ＣＨ）の範囲であるが、コ
ンテンツデータのレイアウトはまだ取得されていないの
で、ＣＨの値はまだ確定していない。逆に、コンテンツ
データのレイアウトが決まり、ＣＨが確定してから、
（ＹＴ＋ＣＨ＋ＹＢ）をレイアウト全体４０の高さと設
定することになる。従って、コンテンツデータのレイア
ウト範囲の高さがＣＨの値によって制限される訳ではな
く、実際上はＹＴの値にだけに制限されることになる。

【０１９５】Ｓ６−３では、コンテンツデータレイアウ
ト取得手段６５がコンテンツデータの表示レイアウト
（各表示対象要素のレイアウトデータ）を取得ないし生
成して、Ｐ３０を経てＳ６−４へ処理が進む。すなわ
ち、コンテンツデータレイアウト取得手段６５は、既に
作成済みのレイアウトデータを主記憶７４、外部記憶７
５、ネットワークなどから取得する。

【０１９６】あるいは、コンテンツデータレイアウト取
得手段６５は、Ｓ３で取得されたコンテンツデータをコ
ンテンツデータ取得手段６２から得、Ｓ６−２で取得さ
れたコンテンツレイアウト範囲をコンテンツレイアウト
範囲取得手段６８から得て、レイアウトデータを生成す
る。

【０１９７】ここでは、コンテンツデータの表示レイア
ウトは行の配列からなり、各行は図３のように表示対象
要素の配列を持ち、表示対象要素のレイアウトは図２の
ようになっているとする。

【０１９８】一般に図２のレイアウトデータは、位置
Ｘ、Ｙ以外は、Ｓ６−３でレイアウトする前に設定する
ことができる。例えば文字や画像の大きさなどは予め設
定されていて、知ることができる（なお、文字の大きさ
が表示設定によって変わるとしても、表示設定を知るこ
とができれば、文字の大きさも知ることができる、とい
う意味である）。

【０１９９】従って、レイアウトを作成するとは、図２
に示すように、レイアウトに即して配列させた表示対象
要素のデータ（構成要素データ）であって、ＸとＹの項
以外のデータが予め定められた各構成要素データに対し
て、ＸとＹの項を設定することである。

【０２００】また、図３に示すような行構造のレイアウ
トデータを作成する場合は、行の位置（Ｘ，Ｙ）、大き
さ（Ｗ，Ｈ）、どの行にどの表示対象要素を入れるか
（表示対象要素配列）、なども設定することになる。

【０２０１】以降、コンテンツデータのレイアウト範囲
に、コンテンツデータ（表示対象要素）をレイアウトす
る方法を説明する。

【０２０２】例えば、プレーンテキストを横方向の行に
図１のレイアウト範囲内（幅ＣＷ）でレイアウトすると
する。レイアウト範囲の上余白をＹＴ，文字の大きさは
全て同じで（ＷＣ、ＨＣ）、文字間幅をＩＣ、行間高さ
をＩＬとする。

【０２０３】まず、最初の文字をレイアウトする。位置
を余白ぎりぎりの左上位置（ＸＬ、ＹＴ）と決める。そ
して現在の行８０（図３参照）の表示対象要素配列の項
に最初の文字（表示対象要素）の識別情報（例えばデー
タ位置）を代入する。ここでは、行８０の表示対象要素
配列として、最初の文字のデータ位置である１が代入さ
れる。

【０２０４】表示対象要素配列を更新したら、行の位置
（Ｘ，Ｙ）、大きさ（Ｗ，Ｈ）も更新する。上記の場
合、表示対象要素は最初の文字なので、行８０の位置
（ＸＬ、ＹＴ）はそのまま変わらず、大きさ（Ｗ，Ｈ）
には文字の大きさ（ＷＣ、ＨＣ）が代入される。

【０２０５】次の文字をレイアウトする場合、まず、次
の文字の識別情報（データ位置の２）を行８０の表示対
象要素配列に追加する。なお、次の文字の位置は、（そ
の前の文字の幅＋文字間幅）だけ横にずらした位置（Ｘ
Ｌ＋ＷＣ＋ＩＣ、ＹＴ）となる。行８０の位置は変わら
ず、大きさとして（（１文字分の幅）＋（文字間幅））
だけ幅が増えて（ＷＣ×２＋ＩＣ、ＨＣ）となる。

【０２０６】同様にその次の文字をレイアウトすると、
文字の位置は（ＸＬ＋（ＷＣ＋ＩＣ）×２、ＹＴ）、行
８０の位置は変わらず、大きさが（ＷＣ×３＋ＩＣ×
２、ＨＣ）となる。

【０２０７】同様の要領で、次々と文字を行に追加して
いくことができる。表示対象要素が行の横方向に追加さ
れるので、表示対象要素のＹ座標値は全て同じで、Ｘ座
標値だけが増えていくことになる。また、行の位置と高
さは変わらず、幅だけが増えていくことになる。

【０２０８】そして、レイアウト範囲の幅を超えてしま
う時、すなわち、１行に配列されるｎ番目の文字で、（文字の右端位置）−（レイアウト範囲右端位置）＝
（ＸＬ＋ＷＣ×ｎ＋ＩＣ×（ｎ−１））−（ＸＬ＋Ｃ
Ｗ）＜０となった時、次の行８１にレイアウトすべき行が変わ
る。あるいは、改行文字が来た場合も、次の行８１がレ
イアウトすべき行となる。

【０２０９】次の行８１に最初に追加する文字のＸ座標
値は、前の行８０の行頭の位置に戻してＸＬとし、Ｙ座
標値は（前行位置＋前行の高さ＋行間高さ）とすれば良
い。従って、次の行８１の最初の文字の位置（＝次の行
８１の位置）は、（ＸＬ，ＹＴ＋ＨＣ＋ＩＬ）となる。

【０２１０】これらの処理を繰り返すことで、行構造を
持つ表示対象要素のレイアウトを作成することができ
る。

【０２１１】コンテンツデータによっては、もっと複雑
なレイアウト処理を行う必要がある場合もあるが、ここ
ではＳ６−２で得たコンテンツレイアウト範囲を定め
て、コンテンツデータレイアウト取得手段６５にコンテ
ンツデータを流し込んでいけば、上記のレイアウト処理
をベースとするような処理が同手段６５で行われ、レイ
アウトデータが得られるとする。

【０２１２】Ｓ６−４では、コンテンツ余白特定手段６
９が求めたレイアウトの余白範囲に基づいて、メモデー
タレイアウト範囲取得手段５９が、メモデータの表示レ
イアウト範囲、すなわちメモレイアウト範囲を求め、Ｐ
４０を経てＳ６−５へ処理が進む。ここでの処理の詳細
は後で述べる。

【０２１３】Ｓ６−５（メモレイアウト生成ステップ）
では、メモデータレイアウト取得手段６６がメモレイア
ウトデータを生成して、Ｓ６−６へ処理が進む。すなわ
ち、Ｓ６−５では、Ｓ６−４で生成されたメモレイアウ
ト範囲に、Ｓ１で得たメモデータをレイアウトすること
になる。

【０２１４】メモデータのレイアウトは、メモデータの
種類によって異なるが、基本的なデータ構造は図２と同
じと考えてよい。例えば、メモデータが分解、再レイア
ウトできない画像や手書きデータならば、大きさ（Ｗ，
Ｈ）は固定で、位置（Ｘ，Ｙ）のみが変更可能である。
従って、メモデータをそのままレイアウトして、位置決
めするだけになる。

【０２１５】一方、分解、再レイアウトできるようなテ
キストデータの場合は、それぞれの文字が表示対象要素
となり、メモレイアウトデータは複数の構成要素データ
の配列となる。

【０２１６】なお、決められたメモレイアウト範囲内で
の各表示対象要素のレイアウト方法は、Ｓ６−３のコン
テンツデータのレイアウト方法と同様である。

【０２１７】Ｓ６−６では、Ｓ６−３でコンテンツデー
タレイアウト取得手段６５が取得したコンテンツデータ
のレイアウトデータに従って、Ｓ６−１で表示範囲取得
手段６１が取得したレイアウト可能範囲に対して、レイ
アウト出力手段６７が、コンテンツを表示／出力媒体に
表示する。Ｓ６−６の処理が済むと、Ｐ９０を経て、Ｓ
６−７へ処理が進む。

【０２１８】Ｓ６−７では、Ｓ６−５でメモデータレイ
アウト取得手段６６が得たメモレイアウトデータに従っ
て、Ｓ１でメモデータ取得手段６３が取得したメモデー
タと、Ｓ２で関連付け情報取得手段６４が得た関連付け
情報とをレイアウト出力手段６７が表示して、Ｐ１００
へ処理が抜ける。ここでの処理の詳細については後で処
理例と共に述べる。

【０２１９】これらＳ６−１〜Ｓ６−７の処理によっ
て、図１１のＳ６の処理、すなわちメモデータやコンテ
ンツデータをレイアウトして表示する処理を行うことが
できる。

【０２２０】図１５は、図１４のＳ６−４の処理、すな
わちメモデータレイアウト範囲取得手段５９が、メモレ
イアウト範囲を求める処理の一詳細例を説明するフロー
チャート図である。ここでの処理は、Ｓ６−７の表示処
理とも絡んで、どのような方針でレイアウトを行うかに
よって変わってくる。ここでの説明では、ユーザの指定
に沿い、参照部分の近くで、重なりの少ないメモデータ
のレイアウト範囲をできるだけ求めるようにする一つの
処理例を示している。

【０２２１】図１６は、メモレイアウト範囲を定める為
の余白範囲を説明する図である。図１のレイアウト全体
図と同様に、コンテンツデータのレイアウトは、ここで
は処理し易い様に、斜線部の行８０〜８５のように行単
位で示してある。余白範囲は、範囲１０１〜１３６で示
されている。ここではコンテンツデータのレイアウト、
すなわち行８０〜８５と重なりが全く無い余白範囲を示
している。

【０２２２】図１７は、図１６の範囲１０１〜１３６の
データ構造とデータ例を説明する図である。各範囲１０
１〜１３６は、「種類」、「Ｘ」、「Ｙ」、「Ｗ」，
「Ｈ」、「隣接余白範囲配列」のデータを持つ。「種
類」は、範囲の種類を表すが、ここではレイアウト全体
４０の中での配置をもとに、余白範囲の種類（周囲、行
間等）を表している。

【０２２３】例えば、「種類」の具体的な情報として、
「Ｌｔ」（「Ｌｅｆｔ」の略号）は左端に配置された余
白範囲を意味し、「Ｒｔ」（Ｒｉｇｈｔ）は右端、「Ｔ
ｐ」（Ｔｏｐ）は上端、「Ｂｍ」（Ｂｏｔｔｏｍ）は下
端にそれぞれ配置された余白範囲を意味する。

【０２２４】また、「Ｂｄ」（Ｂｏｒｄｅｒ）は、コン
テンツレイアウト範囲の周囲の余白範囲を意味する。さ
らに、「ＢＬ」（ＢｅｔｗｅｅｎＬｉｎｅｓ）は行
間、「ＯＬ」（ＯｎＬｉｎｅ）は行の延長上に配置さ
れた余白範囲を意味する。

【０２２５】なお、これらの種類は、複合して持つこと
ができる。また、ここでは分かり易くする為に「種類」
の情報を文字列で示しているが、通常は文字列でなくフ
ラグのような形で持つことが多い。

【０２２６】「Ｘ」、「Ｙ」、「Ｗ」，「Ｈ」は、Ｘ位
置、Ｙ位置、幅、高さを表す。位置は、ここでは各範囲
１０１〜１３６の左上隅の位置で表す。そのための座標
系には、前記と同様、レイアウト全体４０の左上隅を原
点とし、右方向を＋Ｘ方向、下方向を＋Ｙ方向としたＸ
−Ｙ直交座標系を用いる。

【０２２７】「隣接余白範囲配列」は、着目した範囲に
隣接する範囲を示す。ここでは斜めに位置する範囲は
「隣接余白範囲配列」に含めず、上下左右に位置する範
囲だけに限定している。また、行のレイアウト範囲８０
〜８５も、隣接する範囲の対象には含めていない。

【０２２８】図１５に示すＰ３０を経たＳ６−４−１
（余白特定ステップ）では、コンテンツ余白特定手段６
９が、コンテンツデータがレイアウトされていない余白
範囲を特定し、余白レイアウトデータを生成する。Ｓ６
−４−１の処理が完了すると、Ｐ３１を経て、Ｓ６−４
−２へ処理が進む。ここでの余白特定処理については後
で詳しく述べるとし、処理の結果、図１７のような余白
レイアウトデータが得られるとする。

【０２２９】Ｓ６−４−２では、メモデータレイアウト
取得手段６６が、Ｓ２で関連付け情報取得手段６４が得
た関連付け情報からコンテンツデータの参照部分の位置
を得て、Ｓ６−４−３へ処理が進む。

【０２３０】参照部分の位置に関しては、図１３の「参
照データリスト」中の「参照データを特定する情報」
（データ１３、２３、３５、または３５）から参照デー
タのデータ位置が得られる。例えば図１３の関連付け情
報１０の参照データを特定する情報１３の場合、参照デ
ータのデータ位置は「５〜７」となっている。これによ
って、参照部分が５番目から７番目の表示対象要素であ
ることが分かる。

【０２３１】また、それらがどの行範囲に属するかも、
図３の各行８０…の表示対象要素配列の中に、参照部分
として特定されたデータ位置の表示対象要素が含まれる
かどうかで判断できる。参照部分が属する行は１行の場
合も複数行の場合もあるので、参照部分が属する行の情
報を、行の配列として得ておく。

【０２３２】そして、メモデータレイアウト取得手段６
６が、図２のコンテンツレイアウトデータを順に走査し
ていき、図２の「データ位置」と図１３の参照データの
データ位置とを比較して等しいときに、そのデータ位置
の表示対象要素をメモデータに対応する参照データとし
て特定できたことになる。

【０２３３】そして、その参照データのレイアウトデー
タ（図２）の位置「Ｘ」、「Ｙ」、「Ｗ」、「Ｈ」を見
れば、その参照データのレイアウト範囲が得られる。例
えば後で説明する図１６では、参照部分として行８１中
のやや右寄りに位置する範囲１００が得られたとする。
なお、参照部分が複数の表示対象要素からなる場合は、
参照データはそれらの構成要素データの配列となるが、
参照データが各表示対象要素に分かれていると扱いにく
い。そこで、同じ行に含まれる複数の表示対象要素は、
それらの外接矩形としての一つの範囲に属するとしてし
まった方が扱い易い。

【０２３４】また、図１３のデータ３０のように、一つ
の参照データに対して、複数のメモデータが関連付けら
れている場合は、Ｓ６−４−３以降の処理で、関連付け
られたメモデータ分だけループ処理して、レイアウトの
生成処理や表示処理をしてやればよい。但し、ここでは
説明を簡単にする為、ループ処理に関しては、図１５な
どでは省いている。

【０２３５】また、図１３のデータ２０のように、一つ
のメモデータが複数の参照データと関連付けられている
場合もある。この場合、先にレイアウトされた参照デー
タが処理された時点で、メモレイアウトが決まってしま
う。従って、後から処理された参照データは、メモレイ
アウトを再度作成する必要はない。

【０２３６】メモレイアウトが既に作成されているかど
うかは、図１２の「レイアウト」の項を見れば分かる。
もし、メモレイアウトが既に作成されている場合は、そ
のメモデータに関して、Ｓ６−４−２以降の処理とＳ６
−５の処理とを行う必要はない。但し、ここでは説明を
簡単にする為、Ｓ６−４−２以降とＳ６−５のステップ
では、既にメモレイアウトを作成済みかどうかをチェッ
クするステップは省いている。

【０２３７】Ｓ６−４−３では、メモデータレイアウト
取得手段６６が、メモデータに関して指定されている指
定レイアウト方法（レイアウトの仕方）を取得して、Ｓ
６−４−４へ処理が進む。指定レイアウト方法とは、メ
モを作成した時に、レイアウト可能範囲の中でユーザが
メモを書き込んだ場所や表示方法などに関する情報であ
り、図９などに示すダイアログウィンドウでユーザから
指定されるなどして設定される。

【０２３８】例えば、メモを行間に表示させるのなら
「行間」、余白に表示させるのなら「余白」などが、レ
イアウトの仕方に関する情報である。これは、Ｓ２で関
連付け情報取得手段６４が、関連付け情報を読み込んだ
際、図１３の「メモデータを表示する方法についての情
報」（データ１２、２２、３２、または３４）から得ら
れる。

【０２３９】メモの作成位置でメモの意味が変わった
り、分かりやすさや記憶のとどまり具合などが変わった
りするので、できるだけオリジナルの作成位置にメモを
表示する方が良いと思われる為、ここで指定レイアウト
方法に関する情報を得ている。特に指定がなければ適当
に「行間」などをデフォルトとして設定してしまえばよ
い。

【０２４０】Ｓ６−４−４では、メモデータレイアウト
取得手段６６が、指定レイアウト方法が「行間」かどう
か判断し、行間だったらＰ３２を経由してＳ６−４−５
へ処理が進み、そうでなかったらＰ３４を経由してＳ６
−４−７へ処理が進む。

【０２４１】Ｓ６−４−５では、メモデータレイアウト
取得手段６６が、参照部分の近くの行間にメモデータが
入りきるかどうかを判断し、入りきればＰ３３を経由し
てＳ６−４−６へ処理が進み、入りきらないならばＰ３
４を経由してＳ６−４−７へ処理が進む。Ｓ６−４−５
での処理は後で詳しく説明する。

【０２４２】なお、Ｓ６−４−５では、メモデータレイ
アウト取得手段６６が、参照部分の近くの行間を特定す
る。このとき、メモデータレイアウト取得手段６６は、
Ｓ６−４−１でコンテンツ余白特定手段６９から得た余
白範囲を基にして行間の特定を行う。

【０２４３】Ｓ６−４−６では、メモデータレイアウト
取得手段６６が、Ｓ６−４−５で特定した余白範囲をメ
モレイアウト範囲に設定して、Ｐ４０へ処理が抜ける。

【０２４４】Ｓ６−４−７では、Ｓ６−４−４で指定レ
イアウト方法が「行間」ではない場合、あるいはＳ６−
４−５で参照部分の近くの行間にメモデータが入りきら
ない場合に、メモデータレイアウト取得手段６６が、参
照部分の近くの周囲の余白にメモデータが入りきるかど
うか判断する。その結果、入りきるならばＰ３５を経由
してＳ６−４−８へ処理が進み、入りきらないならばＰ
３６を経由してＳ６−４−９へ処理が進む。Ｓ６−４−
７での処理は、後で詳しく説明する。

【０２４５】Ｓ６−４−８では、Ｓ６−４−７でメモデ
ータが入りきるとメモデータレイアウト取得手段６６が
判断した余白範囲を、同手段６６がメモデータのレイア
ウト範囲に設定して、処理がＰ４０へ抜ける。

【０２４６】Ｓ６−４−９では、Ｓ６−４−７で参照部
分の近くの周囲の余白にもメモデータが入りきらない場
合に、参照部分にできるだけ近い大きな余白部分にメモ
データが入りきるかどうかをメモデータレイアウト取得
手段６６が判断し、入りきるならばＰ３７を経由してＳ
６−４−１０へ処理が進み、入りきらないならばＰ３８
を経由してＳ６−４−１１へ処理が進む。Ｓ６−４−９
での処理は、後で詳しく説明する。

【０２４７】Ｓ６−４−１０では、Ｓ６−４−９で得た
大きな余白範囲を、同手段６６がメモデータのレイアウ
ト範囲に設定して、処理がＰ４０へ抜ける。

【０２４８】Ｓ６−４−１１では、Ｓ６−４−９でもメ
モデータが入りきる余白を特定できない場合に、レイア
ウトされたコンテンツとメモとができるだけ重なりの少
ない範囲をメモデータレイアウト取得手段６６が探し、
その結果特定した余白範囲をメモデータのレイアウト範
囲に設定して、Ｐ４０へ処理が抜ける。ここで特定する
余白範囲は、後述するＳ６−４−８−２で保持してある
最も重なりが少ない余白範囲から選択すればよい。

【０２４９】メモレイアウト範囲に関しては、表示のさ
せ方にも関係するので、Ｓ６−７の詳細処理の説明でも
関連して述べる。

【０２５０】これらのＳ６−４−１からＳ６−４−１１
の処理によって、図１４のＳ６−４の処理を行うことが
できる。

【０２５１】図１８は、図１５のＳ６−４−１の処理の
一詳細例を説明するフローチャート図である。

【０２５２】Ｐ３０を経たＳ６−４−１−１では、Ｓ６
−１で表示範囲取得手段６１が得たレイアウト可能範囲
と、Ｓ６−２でコンテンツレイアウト範囲取得手段６８
が取得ないし生成したコンテンツレイアウト範囲との差
の範囲を、コンテンツ余白特定手段６９が求める。続い
て、同手段６９は、この差の範囲を、図１６に示すよう
に、各行８０…の外枠の延長線で分割して新たな余白範
囲として特定し、図１７に示すように、各範囲のＸ、
Ｙ、Ｗ、Ｈ、隣接余白配列を設定し、Ｓ６−４−１−２
に処理を進める。

【０２５３】図１９はこの処理を説明する図であり、図
の基本構造は図１６と同様であるが、図１６のようには
まだ範囲が細かく分かれていない。図１９では、レイア
ウト可能範囲はレイアウト全体４０として示され、コン
テンツレイアウト範囲はレイアウト範囲１４０として斜
線で示されている。

【０２５４】レイアウト可能範囲とコンテンツレイアウ
ト範囲との差の範囲とは、ここではレイアウト全体４０
からレイアウト範囲１４０を除いた部分であり、レイア
ウト範囲１４０の周囲の白い部分である。

【０２５５】図１９では既にその白い部分が、範囲１０
１、１１３、１１４、１２６、１２７、１３６、１４
１、１４２に分割されているが、この範囲１０１、１１
３、１１４、１２６、１２７、１３６、１４１、１４２
を求めるには、まずレイアウト範囲１４０の上下左右の
端の線を延ばして、レイアウト全体４０を分割する。図
１９では分割線を点線で示してある。

【０２５６】上下左右の余白ＹＴ、ＹＢ、ＸＬ、ＸＲが
０で無ければ、レイアウト全体４０は全部で９個の範囲
に分かれる。その中からレイアウト範囲１４０と同じ範
囲を除いた残りが（余白）範囲１０１、１１３、１１
４、１２６、１２７、１３６、１４１、１４２となる。

【０２５７】各範囲１０１…の位置と大きさの値は、レ
イアウト全体４０の大きさとレイアウト範囲１４０の位
置、大きさとを使って求めることができる。例えば、範
囲１０１の大きさは、（Ｗ（１０１）、Ｈ（１０１））
＝（Ｘ（１４０）、Ｙ（１４０））＝（ＸＬ、ＹＴ）、
となり、範囲１４２の位置は、（Ｘ（１４２）、Ｙ（１４２））＝（Ｘ（１４０）＋Ｗ（１４０）、Ｙ（１４０））＝（ＸＬ＋ＣＷ、ＹＴ）、となる。

【０２５８】同様にして各範囲１０１…の位置と大きさ
などを求めたデータが図２０である。図２０に示す各項
目は図１７と同じである。隣接余白配列は、この時点で
は求める必要はないのだが、念のため記しておく。隣接
余白配列の求め方は後で説明する。なお、ここでは上下
左右の余白ＹＴ、ＹＢ、ＸＬ、ＸＲの値は全て２０、行
と行間の高さは全て１４としてある。

【０２５９】例えば、範囲１０１は、原点に位置し、大
きさは２０×２０である。範囲１１３、１１４、１２
６、１２７、１３６、１４１、１４２も同様の形で記録
されている。

【０２６０】Ｓ６−４−１−１での処理と説明の為、レ
イアウト全体４０とレイアウト範囲１４０に関するデー
タも図２０に示してある。レイアウト全体４０は、原点
に位置し、大きさ１４０×１９４であり、そこから上下
左右に２０の余白を取ったレイアウト範囲１４０は、
（２０，２０）に位置し、その大きさは１００×１５４
である。

【０２６１】Ｓ６−４−１−２では、コンテンツ余白特
定手段６９がＳ６−４−１−１で得た図２０の範囲１０
１、１１３、１１４、１２６、１２７、１３６、１４
１、１４２の種類を設定して、Ｓ６−４−１−３へ処理
を進める。範囲１０１、１１３、１１４、１２６、１２
７、１３６、１４１、１４２は、レイアウト範囲１４０
の周囲の範囲なので、「Ｂｄ」の値を全て持つ。

【０２６２】Ｓ６−４−１−３では、コンテンツ余白特
定手段６９が、レイアウト範囲１４０と図１９、図２０
の範囲１０１、１１３、１１４、１２６、１２７、１３
６、１４１、１４２を、図１６の行８０〜８５の各外枠
の延長線で分割し、行８０〜８５の範囲を除き、て新た
な範囲１０２〜１１２、１１５〜１２５を生成し、各範
囲１０２〜１１２、１１５〜１２５のＸ、Ｙ、Ｗ、Ｈ、
隣接余白配列を設定し、Ｓ６−４−１−４へ処理を進め
る。

【０２６３】レイアウト全体４０を分割して、行８０〜
８５の範囲を除いた範囲が、図１６の（余白）範囲１０
１〜１３６である。図１９同様、分割線は点線で示して
ある。例えば、図１９の範囲１４１は、行８０〜８５の
外枠線で分割されて、範囲１０２〜１１２に分割されて
いる。範囲１２７、１４２、１３６も同様に分割されて
いる。

【０２６４】また、レイアウト範囲１４０を分割して行
８０〜８５の範囲を除いた範囲は、範囲１２８〜１３５
である。行８０〜８２、８４、８５は同じ幅であるが、
行８３は短いので、範囲１３０〜１３４は細かく分割さ
れている。

【０２６５】各余白範囲の位置と大きさの値は、行８０
〜８５の位置と大きさ（図３）と図２０のデータなどを
使って求めることができる。

【０２６６】例えば、範囲１０３の位置と大きさは、範
囲１０３を分割に寄与した行８０、８１を「上行」、
「下行」と表現すれば、（Ｘ（１０３）、Ｙ（１０３））＝（０、Ｙ（上行）＋Ｈ（上行））＝（０、Ｙ（８０）＋Ｈ（８０））（Ｗ（１０３）、Ｈ（１０３））＝（Ｗ（１４１）、Ｙ（下行）−Ｙ（１０３））＝（Ｗ（１４１）、Ｙ（８１）−Ｙ（８０）−Ｈ（８０））となる。

【０２６７】また、範囲１３２の位置と大きさは、行８
３を「同行」と表現すれば、（Ｘ（１３２）、Ｙ（１３２））＝（Ｘ（同行）＋Ｗ（同行）、Ｙ（同行））＝（Ｘ（８３）＋Ｗ（８３）、Ｙ（８３））（Ｗ（１３２）、Ｈ（１３２））＝（Ｗ（１４０）−Ｗ（同行）、Ｈ（同行））＝（Ｗ（１４０）−Ｗ（８３）、Ｈ（８３））となる。

【０２６８】同様にして求めたデータが、図１７の１０
１〜１３６の位置と大きさとなる。

【０２６９】Ｓ６−４−１−４では、コンテンツ余白特
定手段６９が範囲１０１〜１３６の種類を設定して、Ｓ
６−４−１−５へ処理を進める。

【０２７０】範囲１４１、１４２は分割されて、範囲１
０２〜１１２、１１５〜１２５になっているが、レイア
ウト範囲１４０の周囲の余白であるという状態は変わら
ないので、範囲１４１，１４２の種類「Ｂｄ」はそのま
ま引き継ぎ、必要に応じて種類を追加する。

【０２７１】レイアウト全体４０にどこかで接している
場合、Ｌｔ（左端）、Ｔｐ（上端）、Ｒｔ（右端）、Ｂ
ｍ（下端）などの値を持つことになる。判定条件は、Ｌｔの場合：Ｘ（範囲）＝０Ｔｐの場合：Ｙ（範囲）＝０Ｒｔの場合：Ｘ（範囲）＋Ｗ（範囲）＝Ｗ（４０）Ｂｍの場合：Ｙ（範囲）＋Ｈ（範囲）＝Ｈ（４０）の各式を満たすかどうかで決まる。

【０２７２】範囲１０１〜１２６、１２７、１３６は、
レイアウト全体４０にどこかで接しているので、Ｌｔ、
Ｒｔ、Ｔｐ、Ｂｍのうち少なくとも一つの値は持つこと
になる。例えば、範囲１０１は、レイアウト全体４０の
左端と上端とに接しているので、種類が「Ｌｔ、Ｔｐ、
Ｂｄ」となっている。

【０２７３】範囲１０２、１０４、１０６、１０８、１
１０、１１２、１１５、１１７、１１９、１２１、１２
３、１２５、１３２には、種類「ＯＬ」（行の延長上）
が追加される。これはＹ座標で考えて、各範囲に、行８
０〜８５が含まれるかどうかを比較すれば良い。式で表
すならば、Ｙ（行）＋Ｈ（行）＜Ｙ（余白範囲）あるいは、Ｙ（余白範囲）＋Ｈ（余白範囲）＜Ｙ（行）のどちらかを満たすならば「ＯＬ」でなく、それ以外は
「ＯＬ」となる。

【０２７４】図の例で言えば、範囲１０２は行８０の左
横に位置するので、「ＯＬ」となり、範囲１０３は、行
８０と行８１の間に位置し、行８０、８１とＹ座標に関
して重なる範囲がないので、「ＯＬ」ではない。

【０２７５】レイアウト範囲１４０を分割して生成した
範囲１２８〜１３５の中で、Ｙ（行）＋Ｈ（行）＜＝Ｙ（余白範囲）かつ、Ｙ（余白範囲）＋Ｈ（余白範囲）＜＝Ｙ（次行）を満たすものは、行間「ＢＬ」の値を持つ。従って、範
囲１３２以外は「ＢＬ」の値を持つことになる。

【０２７６】Ｓ６−４−１−５では、コンテンツ余白特
定手段６９が範囲１０１〜１３６の隣接余白配列を設定
して、Ｐ３１へ処理が抜ける。

【０２７７】隣接余白配列を設定する場合、分割手順を
使って、どの余白は隣接になりうるかの候補を絞った
り、あるいは分割する度に相互に隣接しているという情
報を加えていっても良いのだが、ここでは単純に全ての
範囲と相互に比較する方法で説明する。

【０２７８】範囲Ａと範囲Ｂは、（Ａの右にＢが隣接）：Ｘ（Ａ）＋Ｗ（Ａ）＝Ｘ（Ｂ）（Ａの下にＢが隣接）：Ｙ（Ａ）＋Ｈ（Ａ）＝Ｙ（Ｂ）（Ａの左にＢが隣接）：Ｘ（Ｂ）＋Ｗ（Ｂ）＝Ｘ（Ａ）（Ａの上にＢが隣接）：Ｙ（Ｂ）＋Ｈ（Ｂ）＝Ｙ（Ａ）のいずれかの条件を満たせば、互いに隣接していること
になる。

【０２７９】この条件検索処理を全ての余白範囲同士に
関して、行えば良い。行範囲８０〜８５と余白範囲１０
１〜１３６の間でも同様の処理方法を使うことで、行範
囲に隣接する余白範囲の配列を図３のように求めること
ができる。

【０２８０】以上のＳ６−４−１−１〜Ｓ６−４−１−
５の処理により、図１５のＳ６−４−１の処理を行うこ
とができ、図１６、図１７の余白範囲を特定できること
になる。

【０２８１】図２１は、図１５のＳ６−４−５の処理の
一詳細例を説明するフローチャート図である。

【０２８２】Ｐ３２を経たＳ６−４−５−１では、メモ
データレイアウト取得手段６６が、Ｓ６−４−２で同手
段６６が得た参照部分の属する行（以降、参照行と呼
ぶ）に隣接する、種類がＢＬの余白範囲を得る。

【０２８３】行に隣接する余白範囲は、図３のデータの
隣接余白配列から得られるので、この隣接余白配列の中
から、ＢＬ（行間）の種類の余白範囲を抜き出せば良
い。

【０２８４】着目した行の上下に隣接する行間が存在す
る場合や、行間が横方向に分かれている場合（図１６に
示す範囲１３０，１３１など）もあるので、得られる余
白範囲は配列の形態を取る。例えば、図１６の参照部分
１００の場合、隣接する余白範囲は、参照部分１００が
属する行８１に対して上の範囲１２８と下の範囲１２９
となる。

【０２８５】なお、この時点で例えば上の行間と下の行
間のどちらかに絞る／優先度をつける処理をしても良
い。どちらにするかは、図１３のメモデータリストの
「メモデータを表示する方法についての情報」において
「上の行間」、または「下の行間」という指定を行うよ
うにすれば良い。これにより、メモデータレイアウト取
得手段６６が、図１３の関連付け情報を記憶した外部記
憶７５等にアクセスし、指定された行間の情報を取得す
ることができる。指定がなければ、どちらかに予め決め
るルーチンを設定しておいても良い。

【０２８６】Ｓ６−４−５−２では、メモデータレイア
ウト取得手段６６が、Ｓ６−４−５−１で余白範囲が得
られたかどうかを判断し、余白範囲が得られた場合はＳ
６−４−５−３へ処理が進み、得られない場合はＰ３４
へ処理が抜ける。

【０２８７】Ｓ６−４−５−３では、メモデータレイア
ウト取得手段６６が、Ｓ６−４−５−１で得られた余白
範囲を拡張して、Ｓ６−４−５−４へ処理が進む。この
拡張は必ずしも行わなくても良いが、後で説明する図３
７のように、Ｓ６−４−５−１で得られた余白範囲だけ
ではメモを配置するのに足りない場合に、周囲の余白に
まで、メモのテキストをレイアウトする場合を想定して
いる。

【０２８８】但し、拡張する際も拡張の方針は決めてお
かないと、際限なく拡張が行われてしまう。例えば、最
初の行間の余白に関しては、横に隣接する余白範囲に拡
張しても良い、という方針の場合、図１６の範囲１２９
の行間から左右の範囲１０５、１１８には拡張できるこ
とになる。あるいは、右方向と下方向に隣接する余白範
囲は全て拡張して良いとすると、範囲１３０から拡張す
る場合、範囲１３１〜１３４、１２０〜１２６が拡張で
きることになる。横行の場合、右方向および下方向は自
然な拡張方向なので、馴染みやすいという利点がある。
隣接を調べる方法は、Ｓ６−４−１−５で既に説明した
とおりである。

【０２８９】Ｓ６−４−５−４で、メモデータレイアウ
ト取得手段６６が、Ｓ６−４−５−３で得られた余白範
囲にメモデータをレイアウトできるかどうかを判定し、
レイアウトできる場合はＰ３３へ処理が抜け、できない
場合はＰ３４へ処理が抜ける。

【０２９０】レイアウトできるかどうかは、同手段６６
が通常のレイアウト処理を試してみることで判断でき
る。例えば、図１２のＦＲＥＥＨＡＮＤやＩＭＡＧＥの
メモデータの場合、大きさは固定なので、その大きさ
を、特定した余白範囲の大きさと比較すれば良い。

【０２９１】ＴＥＸＴのメモデータの場合、１文字１文
字をレイアウトしていくことになるので、図１４のＳ６
−３でコンテンツデータのレイアウトについて説明した
処理と同様の処理を行えばよい。この時、余白範囲の高
さが文字の高さより低い場合は、行のレイアウトとメモ
のレイアウトとが重ならないように、メモをレイアウト
することはできないことになる。レイアウトの方針とし
て、コンテンツのレイアウトとメモのレイアウトとの重
なりが全く無いことを定めている場合は、この時点でメ
モのレイアウトが不可能と判断することになる。

【０２９２】レイアウトの方針として、コンテンツのレ
イアウトとメモのレイアウトの重なりが所定の面積ある
いは所定の割合以下の時は、レイアウト可能とすること
を定めている場合、メモの１文字をレイアウトする度、
重なり部分の面積や割合を計算して、所定の面積あるい
は所定の割合以下かどうかを、上記手段６６が判断すれ
ばよい。

【０２９３】行レイアウトとメモの文字レイアウト（表
示対象要素）の重なりは、Ｓ６−４−５−３で得た全て
の余白範囲に対して、文字レイアウトの範囲と重なる部
分を除いて、残った範囲として求められる。

【０２９４】重なる部分を除くとは、例えば、Ｙ（余
白）＜Ｙ（文字）＜Ｙ（余白）＋Ｈ（余白）＜Ｙ（文
字）＋Ｈ（文字）などという場合、文字の上側部分、す
なわちＹ（文字）からＹ（余白）＋Ｈ（余白）の範囲、
が余白と重なっている。従って、重なっている文字の上
側部分を除いた文字の下側部分は、Ｙ（余白）＋Ｈ（余
白）からＹ（文字）＋Ｈ（文字）の範囲となるので、文
字の下側部分の位置Ｙ'（文字残り）と高さＨ'（文字
残り）は、Ｙ’（文字残り）＝Ｙ（余白）＋Ｈ（余白）Ｈ’（文字残り）＝Ｙ（文字）＋Ｈ（文字）−Ｙ’（文
字）、となる。Ｘ方向についても同様に、Ｘ’（文字残り）、
Ｗ’（文字残り）が求められる。

【０２９５】この部分は、余白範囲から外れているの
で、行と重なっている。つまり、もしこの状態でメモを
表示させたら、メモと本文行が重なって見えてしまう。
この時、メモと本文行の重なり部分の面積ＳＯ（文字重
なり）は、ＳＯ（文字重なり）＝Ｈ’（文字残り）×Ｗ（文字）＋
Ｈ（文字）×Ｗ’（文字残り）−Ｈ’（文字残り）×
Ｗ’（文字残り）、となる。

【０２９６】これを全ての文字について足し合わせれ
ば、重なった部分の面積ＳＯ（全文字重なり）が求めら
れる（なお、重なった部分が上下２つの余白範囲に分か
れる場合は、重なった部分を範囲の配列として個別に重
なった部分などを管理し、面積などの計算ではそれらを
足し合わせばよい）。

【０２９７】一方、レイアウトされた１文字の面積ＳＬ
（文字）は、ＳＬ（文字）＝Ｗ（文字）×Ｈ（文字）、であり、これを全ての文字について足し合わせれば、メ
モのレイアウト部分の面積ＳＬ（全文字）が求められ
る。

【０２９８】重なりが所定の面積以下かどうかを判断す
るならば、ＳＯ（全文字重なり）が所定の面積を超えた
時点で、メモをレイアウトできないと判断し、最後の文
字までレイアウトしても、ＳＯ（全文字重なり）が所定
の面積を超えなければメモのレイアウトが可能と判断す
る。

【０２９９】重なりの面積が所定の割合以下かどうかを
判断するなら、（ＳＯ（全文字重なり）／ＳＬ（全文
字））が、所定の割合を超えたらメモをレイアウトでき
ないと判断し、超えない場合はメモのレイアウトが可能
と判断する。なお、割合の場合、判断を１文字ずつ逐次
的に行う場合と、最後の文字までレイアウトして最終的
に割合を比較する場合とが考えられる。

【０３００】なお、余白範囲が範囲１０５、１２９、１
１８などのように横一列に並んでいる場合は、余白範囲
の高さとメモの文字の高さとに基づいて、各文字がコン
テンツのレイアウトと重なりあう面積や割合は求まるの
で、上記手段６６の判断処理を簡易化することもでき
る。

【０３０１】また、メモの文字サイズが一定の場合、メ
モの文字の高さから余白範囲の高さを引き算した正の値
（重なり高さ）が、行の高さに対してどのくらいの割合
になるかを求め、この割合が所定値以下になることを、
メモのレイアウトを許可する条件としてもよい。

【０３０２】なお、メモデータと本文データのレイアウ
トが所定の割合や面積以下ならば重なってもよいと判断
した場合、表示結果はメモデータと本文データのレイア
ウトが一部重なってしまうが、この状態を「上書き表
示」と呼ぶことにする。

【０３０３】以上のＳ６−４−５−１〜Ｓ６−４−５−
４の処理によって、図１５のＳ６−４−５を処理するこ
とができる。

【０３０４】図２２は、図１５のＳ６−４−７の処理の
一詳細例を説明するフローチャート図である。

【０３０５】図２１とほぼ同様の処理で、Ｓ６−４−７
−１だけ異なる。

【０３０６】Ｐ３４を経たＳ６−４−７−１では、メモ
データレイアウト取得手段６６が、Ｓ６−４−１で参照
部分が属する行に隣接する、種類がＢｄの余白範囲を得
る。

【０３０７】行に隣接する余白範囲は、図３のデータの
隣接余白配列から得られるので、この隣接余白配列の中
から、種類がＢｄ（周囲）の余白範囲を抜き出せば良
い。該当する余白範囲が、行の上下左右に存在する場合
もあるので、得られる余白範囲は配列の形態を取る。例
えば、図１６の参照部分１００の場合、隣接する種類が
Ｂｄの余白範囲は左の範囲１０４と右の範囲１１７とな
る。

【０３０８】なお、この時点で例えば左の範囲と右の範
囲のどちらかに絞る／優先度をつける処理を行っても良
い。どちらにするかは、図１３のメモデータリストの
「メモデータを表示する方法についての情報」において
上下左右のどちらの方向に絞るか／優先するかの指定を
行うようにしても良い。指定がなければ、いずれかに予
め決めるルーチンを設定しておいても良い。あるいは、
参照部分から一番距離的に近い余白範囲を選ぶ、あるい
は一番幅が大きい（ＸＬ、ＸＲ、ＹＴ、ＹＢの間で一番
大きい）余白範囲を選ぶ、という方法もある。

【０３０９】例えば距離で選ぶ場合、図１６では、参照
部分１００が行範囲８１の中で少し右よりなので、範囲
１０４より近い範囲１１７の方を選ぶということにな
る。

【０３１０】以上の処理によって、図１５のＳ６−４−
７を処理することができる。

【０３１１】図２３は、図１５のＳ６−４−９の処理の
一詳細例を説明するフローチャート図である。

【０３１２】Ｐ３６を経たＳ６−４−９−１では、メモ
データレイアウト取得手段６６が、「余白範囲最大矩形
リスト」を得て、Ｐ３７を経てＳ６−４−９−２へ処理
が進む。

【０３１３】「余白範囲最大矩形」とは、ある余白範囲
に隣接する余白範囲を、矩形となるような状態で統合し
て余白範囲を拡張していき、もう拡張しきれない状態の
余白範囲の集まりを言う。例えば、図１６の範囲１３１
を拡張していくと、範囲１３１、１３２、１３４、１２
０〜１２２の６つの範囲を統合した矩形が得られる。ま
た、範囲１３０を拡張していくと、範囲１０７、１３
０、１３１、１２０を統合した横長の矩形が得られる。
「余白範囲最大矩形リスト」とは、このようにして定め
られた余白範囲最大矩形が複数集まったものである。

【０３１４】Ｓ６−４−９−１の処理の詳細は後で説明
する。

【０３１５】Ｓ６−４−９−２では、メモデータレイア
ウト取得手段６６が、Ｓ６−４−９−１で得られた余白
範囲最大矩形リスト中の余白範囲最大矩形から、メモを
レイアウト可能な余白範囲最大矩形を抽出して、Ｓ６−
４−９−３へ処理が進む。レイアウト可能かどうかは、
Ｓ６−４−５−４と同様の判断方法によればよい。抽出
の結果、該当する余白範囲最大矩形は無い場合もある
し、複数の場合もある。

【０３１６】なお、Ｓ６−４−１１での処理用に、該当
する余白範囲最大矩形が無い場合でも、最も重なり（面
積、割合など）が少ない余白範囲最大矩形は、一つ保持
しておく。

【０３１７】Ｓ６−４−９−３では、上記手段６６が、
Ｓ６−４−９−２で得たメモが入りきる余白範囲最大矩
形があるかどうか判断し、あればＳ６−４−９−４へ処
理が進み、なければＰ３９へ処理が抜ける。

【０３１８】Ｓ６−４−９−４では、上記手段６６が、
Ｓ６−４−９−２で得たメモが入りきる余白範囲最大矩
形の内、参照部分に最も距離的に近いものを選び、Ｐ３
８へ処理が抜ける。

【０３１９】以上の処理によって、図１５のＳ６−４−
９を処理することができる。

【０３２０】図２４は、図２３のＳ６−４−９−１の処
理の一詳細例を説明するフローチャート図である。

【０３２１】Ｐ３６を経たＳ６−４−９−１−１では、
メモデータレイアウト取得手段６６が、図１７の隣接余
白配列を下記のループリストに設定し、ループリストの
最初の余白範囲をカレント余白矩形に設定し、Ｓ６−４
−９−１−２へ処理が進む。

【０３２２】「ループリスト」とは、Ｓ６−４−９−１
−２からＳ６−４−９−１−８の処理ループを回してい
く際に、カレント余白矩形を作成するもととなる余白矩
形のリストである。この時点では、ループリストに個々
の余白範囲が入っているだけだが、Ｓ６−４−９−１−
５で新たな余白範囲が追加されることもある。

【０３２３】「余白矩形」とは、余白範囲の一つ以上の
集まりからなるもので、隣接していて、全体として矩形
の形状になっているものである。

【０３２４】「カレント余白矩形」とは、現在ループ処
理中の余白矩形のことである。

【０３２５】Ｓ６−４−９−１−２では、同手段６６
が、カレント余白矩形が存在するかどうか判断し、存在
すればＳ６−４−９−１−３へ処理が進み、存在しなけ
ればＰ３７へ処理が抜ける。

【０３２６】Ｓ６−４−９−１−３では、同手段６６が
カレント余白矩形をワークリストに設定して、Ｓ６−４
−９−１−４へ処理が進む。

【０３２７】「ワークリスト」は、Ｓ６−４−９−１−
４からＳ６−４−９−１−６のループを処理する際に使
われるカレント余白矩形である。

【０３２８】Ｓ６−４−９−１−４では、同手段６６が
ワークリスト中の４隅の余白範囲を取得して、Ｓ６−４
−９−１−５へ処理が進む。４隅とはカレント余白矩形
の４隅であり、ワークリスト中の余白範囲が２行２列未
満の場合は、一部、重複することになる。

【０３２９】例えば、ワークリストが図１６に示す範囲
１３１〜１３４、１２０〜１２２ならば、４隅の余白範
囲は範囲１３１、１３４、１２０、１２２となる。ワー
クリストが範囲１３１、１３２ならば、４隅の余白範囲
は範囲１３１、１３２となる。ワークリストが範囲１３
１だけならば、４隅の余白範囲は範囲１３１となる。

【０３３０】Ｓ６−４−９−１−５では、同手段６６が
４隅の余白範囲を、矩形形状を保ったまま拡張する。

【０３３１】図２５は拡張の仕方を説明する説明図であ
る。斜線を引いた６つの余白範囲がワークリストだと
し、右上の範囲１５０を拡張する場合を考える。上に拡
張する場合は、範囲１５１だけを拡張しただけでは、右
上に飛び出た形状になってしまい、矩形にならない。そ
こで、範囲１５１から左方向に余白範囲を調べにいき、
左上隅の範囲１５６の上の範囲１５３まで全て、すなわ
ち範囲１５１、１５２、１５３全てを一度に拡張する。
例えば、範囲１５２が行範囲などである場合、余白範囲
のワークリストとして拡張はできないので、範囲１５０
から上へは拡張できないことが分かる。

【０３３２】範囲１５０から右に拡張する場合も同様
で、範囲１５４から下方向に余白範囲を調べにいき、右
下隅の範囲１５７の右の範囲１５５まで全て、すなわち
範囲１５４、１５５全てを一度に拡張する。

【０３３３】他の隅に関しても、余白範囲を調べる方向
を変えることで同様の拡張方法を実行することとなる。
但し、範囲１５６から上に拡張する場合、範囲１５０か
ら上に拡張する場合と同じになるので、実際は４隅全て
拡張できるか調べる必要はなく、対角となる２隅を調べ
れば十分である。図２５で言えば、範囲１５０と範囲１
５８の組、あるいは範囲１５６と範囲１５７の組のいず
れかが、対角となる２隅として選択される。

【０３３４】４隅から拡張が可能となる場合は、結局、
上下左右に４通り考えられるが、それぞれ拡張した結果
は異なる余白範囲となるので、ここで処理を分岐させる
必要がある。なお、以下、拡張して得られた新たな余白
範囲を余白矩形と呼ぶ。

【０３３５】ここでは簡易的に、ワークリストに登録す
る拡張した余白矩形は一つとし、残りの最大３通りの拡
張した余白矩形は次回以降に処理されるように、ループ
リストに登録しておく。

【０３３６】例えば図２５では、範囲１５０から上と右
に拡張可能だった場合、範囲１５１、１５３、１５８、
１５７を４隅とする余白矩形をワークリストに登録し、
範囲１５４、１５６、１５８、１５６を４隅とする余白
矩形はループリストに登録することとなる。

【０３３７】Ｓ６−４−９−１−６では、同手段６６が
Ｓ６−４−９−１−５で拡張が行われたかどうか判定
し、拡張が何も行われなかった場合は、Ｓ６−４−９−
１−７へ処理が進み、拡張が行われた場合はＳ６−４−
９−１−４へ処理が戻る。

【０３３８】Ｓ６−４−９−１−７では、同手段６６が
ワークリストを余白範囲最大矩形リストに追加して、Ｓ
６−４−９−１−８へ処理が進む。

【０３３９】Ｓ６−４−９−１−８では、同手段６６が
カレント余白矩形をループリスト中の次の余白矩形に設
定して、Ｓ６−４−９−１−２へ処理が戻る。

【０３４０】以上の処理によって、図２３のＳ６−４−
９−１を処理することができる。

【０３４１】ここまでの説明で主にコンテンツデータと
メモデータのレイアウトを作成する方法について述べた
ので、以降では、その表示の仕方について具体例を使っ
て説明する。

【０３４２】図１０は、参照部分がコンテンツデータの
「文書」の部分、それに関連付けられたメモデータが
「ドキュメント」というテキストデータとなっている状
態で関連付け表示を行った例である。図１０では、参照
部分とメモとの関連付けを下線を使って表し、メモを行
間にレイアウトしているが、表示の仕方については後で
説明するとし、本文のレイアウトが変わった際の表示の
変化について説明する。

【０３４３】図２６は、コンテンツデータとしてのテキ
ストの文字の大きさを倍にして、図１０に示すメモデー
タと関連付けて表示した例である。既に説明した処理に
よって、文字の大きさを倍にしたコンテンツデータをコ
ンテンツレイアウト範囲内に再レイアウトした結果、
「文書」の部分のレイアウト位置が、図１０のレイアウ
ト位置よりも右下に変更されている。これに対し、既に
説明した処理によってメモレイアウトが再作成された結
果、「文書」に関連付けられた「ドキュメント」のメモ
データは、参照部分「文書」のレイアウト位置変更に追
従して、メモの文字が参照部分に重ならないように、下
線と共にレイアウト位置が変更されている。

【０３４４】図２７は、本発明の技術を使わず、メモデ
ータの表示位置だけを単に記録していた場合の処理例で
ある。図１０の状態で適正な表示となるように下線と
「ドキュメント」というメモが入力されていたとする。
この状態の下線とメモの表示位置を記録していて、図２
６同様、コンテンツデータのテキストの文字の大きさを
倍にして再表示した状態が図２７である。

【０３４５】図１０の下線やメモの表示位置だけを記録
しているので、図１０と同じ位置に下線やメモの内容を
表示させると、コンテンツデータ本文の表示と重なって
しまうという不具合が生じている。また、下線の位置も
参照部分に対してずれてしまっているので、コンテンツ
とメモとの関連付けが誤って解釈されてしまうかもしれ
ないという不具合も生じている。

【０３４６】図２６と図２７を比較したら分かるよう
に、本発明の技術を使い、参照部分とメモデータを関連
付け、コンテンツデータのレイアウト後に、参照部分の
レイアウトに対応してメモデータのレイアウトを行うこ
とで、コンテンツデータのレイアウト位置の変更に追従
して、見易く、解釈間違いのないメモデータの表示を行
うことができる効果が出てくる。

【０３４７】図１４のＳ６−７での参照部分、メモデー
タ、関連付けなどの表示の仕方は様々な方法が考えられ
る。

【０３４８】まず、参照部分の表示の仕方であるが、こ
れは紙の本で人が文章などをマークする場合に行う方法
はほとんどそのまま適用できる。その場合、ユーザにと
ってなじみ易く、説明も不要であるという効果が出てく
る。

【０３４９】例えば、図１０は関連付けを下線で示した
例である。縦行ならば行の右側あるいは左側の傍線とな
る。図１３の参照データから、図２のような表示対象要
素のデータ中の参照部分となるべき表示対象要素を特定
できるので、特定された表示対象要素の位置や大きさの
データから下線を引くべき位置が求められる。

【０３５０】なお、文字や直線、曲線などの表示は、グ
ラフィカルデバイスを扱えるＯＳ（Ｏｐｅｒａｔｉｎｇ
Ｓｙｓｔｅｍ）ならば、ＡＰＩ（Ａｐｐｌｉｃａｔｉ
ｏｎｓＰｒｏｇｒａｍｍｉｎｇＩｎｔｅｒｆａｃ
ｅ）やライブラリなどで命令として用意されているのが
一般的なので、それらの命令を組み合わせることで、複
雑な形状の表示なども行うことができる。そこで、ここ
では詳細には説明せず、命令を作成する為に必要な表示
位置などの情報の取得方法などを説明するにとどめる。

【０３５１】下線は紙の本などでも最も一般的な表示方
式である。直線でなく、点線や波線にしたり、太さ、色
を変えたりというようなバリエーションも色々考えられ
る。また、線の太さを行と同じくらいの太さにして行に
重ねるようにすれば、蛍光ペンでマークを入れたのと同
じようになる。色も下の文字が透けるように透明度を持
たせた半透明にするとさらに蛍光ペンのマークのように
なり、下の文字を隠さない効果や目立たせる効果が出て
くる。

【０３５２】また、直線などの規則的な線分ではなく、
不規則に乱れた線分にして、手書きの線分のように見せ
ると目立ち易いという効果も得られる。線に関するこれ
らの工夫は関連情報の表示全てに当てはまるので、以降
では説明は省く。

【０３５３】下線などを使う場合、参照部分が短い時は
良いが、長くなって何行にも渡るようになると、線分が
多くなり、邪魔になってくる欠点がある。

【０３５４】図２８は、参照部分を線分で囲んだ例であ
る。囲み方も色々考えられ、矩形や多角形で囲んだり、
図２８のように矩形の角を丸めた形や楕円に近いような
形も考えられる。囲む範囲の位置と大きさは、参照部分
のレイアウトデータから得られる。

【０３５５】図２９は参照部分が複数の行に渡った場合
に、参照部分全体を線分で囲んだ例である。この方式
は、参照部分が長くなっても、図１０のような下線を用
いる方法に比べて線分がそれほど増えない利点がある。
図３の行データの表示対象要素配列と、参照部分のデー
タとを比較すれば、参照部分の属する行を特定できるの
で、その結果、参照部分が複数の行に渡っているかどう
かが判断できる。

【０３５６】１つのメモに対して参照部分が複数有る場
合は、メモデータを行間にレイアウトするよりは、図２
９のように周囲の余白部分にレイアウトした方が、一般
に見易い。

【０３５７】なお、参照部分が複数の行に渡っている場
合、個々の行内で参照部分を矩形などで囲ってもよい
し、図２９のようにそれらを統合した多角形としてもよ
い。統合するには、例えば、矩形の高さを矩形の上端、
下端が行間の真中にくるような高さにし、各行の参照部
分に矩形の上端、下端が重ならないようにする、などと
いう方法が考えられる。

【０３５８】また、参照部分の囲み部分の表示方法とし
て、内部を半透明色で塗りつぶしたり、斜線や網点など
の模様を上書きするという方法も考えられる。参照部分
を強調したい時などには有効である。

【０３５９】図３０は、参照部分を線分では囲まず、行
左右の余白部分での線分で参照部分を示した例である。
参照部分を線分で枠線として囲むよりは線分が少ない
分、視覚的に邪魔にならない効果がある。

【０３６０】以上の例は主に参照部分の特定の仕方に関
するものだが、表示の仕方によっては、別の意味を持た
せる効果が出てくることがある。

【０３６１】図３１は、打ち消し線を参照部分に上書き
したものである。打ち消しを示唆する表示をすること
で、関連付け表示に打ち消しという意味を与えることが
できる効果がある。また、打ち消し線は、誤った内容を
削除したい時に紙の文書で行われる手法であり、ユーザ
に取ってなじみ易く、説明も不要という効果も出てく
る。また、打消し線に加えてメモデータを参照部分付近
に表示させることで、そのメモデータに書き換えたこと
を示唆する効果が出てくる。打ち消し線の位置は、下線
の時と同様、参照部分のレイアウト範囲の情報から算出
できる。

【０３６２】図３２と図３３は、コンテンツの文章にメ
モを挿入する例である。図３２が割り込み、図３３が吹
き出しを使ってメモおよび関連付けを表示した例であ
る。割り込みの表示位置は、どの文字（表示対象要素）
とどの文字の間にメモを割り込ませれば良いかが参照デ
ータとして示されている（参照データでの具体的な表現
の仕方は後で説明する）。割り込みの表示位置の両側に
位置する文字のレイアウト位置は求めることができるの
で、割り込み位置も求めることができる。吹き出しの大
きさは、メモのレイアウトデータから外接矩形や外接楕
円などを算出することによって決める。

【０３６３】挿入を示唆する表示をすることで、関連付
け表示に挿入という意味を与えることができる効果があ
る。これは、行内で並んでいる表示対象要素間に、吹き
出しや割り込みの記号などを用いて書き込みを挿入した
い時に紙の文書で行われる手法であり、これもユーザに
取ってなじみ易く、説明も不要という効果も出てくる。

【０３６４】なお、挿入の場合、参照部分は表示対象要
素ではなく、複数の表示対象要素の間なので、「参照デ
ータを特定する情報」の扱いを工夫する必要がある。例
えば表示対象要素の先頭からの数を使う場合、１１文字
目と１２文字目の間に挿入したいときは、図１３にデー
タ３５として示すように、その中間の値を取って「１
２．５」番目とするとか、挿入であることが識別できる
ように負の値にして「−１３」番目とする方法や挿入を
示すフラグ情報の追加などが考えられる。同様に、先頭
からのバイト数の場合、１５バイト目の文字と１７バイ
ト目の文字の間なら、「１６」バイト目や「−１７」バ
イト目とする方法などが考えられる。

【０３６５】参照部分として、表示対象要素単位だけで
なく、表示対象要素内部の位置まで指定したい場合、内
部の座標位置をさらに使うということも可能である。例
えば地図画像の中のある場所を指し示したい時などであ
る。図３４はこの例を示しているが、この場合、例えば
地図画像の表示対象要素が５番目だとして、その地図画
像の中の（５０，５０）の座標値の位置を参照部分とし
たい場合、「参照データを特定する情報」を例えば、
「５：（５０，５０）」などという書式で表すようにす
れば良い。表示する際は、「：」がある場合は続く文字
列を座標値と解釈して、参照部分を指し示すような表示
を行えば良い。

【０３６６】また、メモデータの表示の仕方によって
は、参照部分は容易に推測できるので、特に参照部分を
示すことはしないという場合も考えられる。図３５はこ
れを示す例であり、参照部分の漢字「文書」にメモデー
タとして上ルビ「ぶんしょ」を振るケースである。この
場合、メモデータを参照部分のごく近く、できれば行間
に表示させる方が関連を推測し易くて良い。

【０３６７】メモデータの表示の仕方も色々考えられ
る。

【０３６８】メモデータの内容自体は、レイアウト可能
範囲が決まれば、通常はレイアウト可能範囲の中で文字
や手書きメモなどをレイアウトするだけだが、場合によ
っては、文字の大きさや色を変えたり、表示レイアウト
範囲に収まるように文字や全体の大きさを変えたりとい
うこともあるかもしれない。なお、文字の大きさや色な
どの属性情報は、メモデータに記録されていて、それに
従って文字などは表示されるとする。それらの属性情報
は、図９のメモデータ設定ダイアログなどでユーザが指
定、修正すればよい。

【０３６９】メモデータの内容表示の周囲や背景、位置
にはいろいろバリエーションが考えられる。以降では、
Ｓ６−４でメモデータのレイアウト範囲を決める例につ
いても同時に説明する。

【０３７０】図３６はＳ６−４での処理と異なり、コン
テンツデータがレイアウトされている範囲を考慮せずに
コンテンツに上書き表示している例である。参照部分の
近くではあるが、コンテンツデータとメモデータが重な
ってしまい、非常に見にくい。

【０３７１】このような場合には、図２８に示すよう
に、Ｓ６−４での処理の結果、コンテンツデータがレイ
アウトされている範囲を避けるように余白部分にメモを
表示することが好ましい。参照部分「文書」からメモデ
ータ「ドキュメント」は少し離れてしまっているが、コ
ンテンツデータとメモデータが重ならず、図３６よりは
見やすい。

【０３７２】図１０は参照部分の下の行間に表示させた
例である。メモの量が行間に表示できる程度の量である
ならば、参照部分を含む行の下あるいは上（縦書きの場
合は左か右）にメモを表示させるのがコンテンツに重な
らない範囲では最も参照部分に近い。図３５のルビや、
図３２の挿入、図３１の修正の例も同様の例と言える。

【０３７３】図３７は、行間に入りきらないような長い
メモデータを、行間と周囲の余白部分との両方に表示し
た例であり、図２８と図１０とを組み合わせた状態であ
る。Ｓ６−４の説明では行間か左右の余白かどちらかと
なっていたが、このように両者を結合して扱うことも可
能である。メモデータが多い場合などには有効である。

【０３７４】なお、図３７の場合、メモレイアウト範囲
は矩形ではなく、行間と左右の余白が結合された多角形
となる。これは、図２１などのＳ６−４−５−３の処理
により、行間から周囲の余白にまで、メモデータをレイ
アウトする余白範囲を拡張したことによる。横行の場
合、右方向および下方向は余白範囲の拡張方向として自
然なので、馴染みやすいという利点がある。

【０３７５】図３０では、大きな参照部分をまとめて指
示する括弧のような曲線の横にメモデータを表示してい
る。参照部分の近くというより、正確には参照部分を示
す関連情報表示の近くであるが、参照部分と参照部分を
示す関連情報表示は一体と考えれば、これも参照部分の
近くに表示している例に含まれると言える。

【０３７６】図３８は、コンテンツレイアウト範囲の中
でコンテンツデータが配置されていない余白範囲にメモ
データを表示した例である。メモがレイアウトできる周
囲や行間の余白がうまく発見できなかった場合などに、
離れた余白が使われる。そのための処理は、図１５のＳ
６−４−１０における処理に対応している。コンテンツ
データとメモデータの重なりが少ないので、メモと参照
部分とが多少離れても、関連付けを矢印などでうまく表
示することで、見やすくなる効果が出てくる。

【０３７７】次にメモデータの周囲や背景を強調する表
示についてだが、短いメモデータならば、そのような強
調は特に必要ない場合が多い。ある程度長くなったり、
参照部分から離れている時、上書き表示している時など
に特に有効である。（なお、「上書き表示」とは、Ｓ６
−４−５で説明したように、メモレイアウトと本文デー
タレイアウトが重なった状態をいう）。

【０３７８】図３３はメモデータの表示の周囲を吹き出
し線で囲って、メモを強調している例である。メモが他
のメモと近接している時などに、参照部分がどちらのメ
モと関連付けられているのかを判断しやすくなる効果が
ある。

【０３７９】さらに、参照部分の表示とメモデータの表
示の間を結ぶ関連付けの表示に関しても、いつくか種類
はある。

【０３８０】一番シンプルなのは、図１０のように参照
部分の表示（下線）とメモデータの表示以外は何も書か
ない場合である。

【０３８１】図２８は、参照部分とメモデータとを引き
出し線で結んでいる。このような引き出し線は、図１３
の関連付けデータにおけるデータ１５、２７などによっ
て指定される。引き出し線を使うことで、メモデータを
参照部分から多少離れた場所に配置する時でも、対応関
係がわかり易いという効果がある。メモデータがコンテ
ンツ上に重なると、例えば文字と文字が重なるので、非
常に見にくくなるが、一般に１本の引き出し線程度なら
ば、コンテンツデータの上に重なってもそれほど見にく
くはならない。

【０３８２】また、図２８のように引き出し線に矢印を
つけると、方向性を示せるので対応関係がより分かりや
すくなり、また、時間や論理展開の順序の意味など、他
の意味を加えることができる効果も出てくる。

【０３８３】これまでは主に参照部分とメモデータが１
対１の場合について説明してきたが、図１３のメモデー
タリストや参照データリストを見ると分かるように、複
数のメモデータや参照データとの関係を扱うこともでき
る。

【０３８４】図３８は、複数の参照部分と一つのメモデ
ータとを関連付けて表示した例である。この場合、図１
３のデータ２０のように、メモデータリストには１つの
メモデータが入り、参照データリストに２つの参照デー
タが入っている。同じ内容のメモデータならば、別々に
表示させるよりも引き出し線などを利用してまとめて表
示させた方が、無駄な表示をしなくて済むのでコンテン
ツの表示が多くできる点や、参照部分が同じメモに関連
付けられていることをユーザに視覚的に知らせることが
できる利点が出てくる。

【０３８５】図３９は、逆に、一つの参照部分に複数の
メモデータを関連付け表示させた例である。一つの参照
部分に対して、複数の異なるコメントをつけたい場合な
どに有効である。この場合、図１３のデータ３０のよう
に、メモデータリストには２つのメモデータが入り、参
照データリストに１つの参照データが入っている。

【０３８６】これによって、一つの参照部分に対して、
異なる内容のメモを関連付けることができる効果がある
と同時に、ある参照部分が複数のメモデータを持ってい
ることが視覚的に一目でわかるという効果も出てくる。
一つのメモにまとめるより複数のメモにした方が別の内
容であることが視覚的に分かり易くなるという効果もあ
る。

【０３８７】以上の様に、関連付け表示、メモデータ表
示には非常に多くのバリエーションがあるので、目的や
効果、レイアウトの状態などを見極めて、適したものを
選ぶようにすると良い。全てのメモについて同じ設定に
したり、メモ毎に、またはメモの種類毎に変更するよう
にしたり、メモデータや関連付けデータ毎にユーザに尋
ねたり（例えば、メモ作成時にユーザに指定してもら
う）、メモデータの種類や量、参照部分の種類や量に応
じて、表示の仕方を自動的に設定する、などが考えられ
る。

【０３８８】なお、メモデータの表示と関連付け情報の
表示の順番は、互いの表示が重なるのでなければほとん
どの場合、どちらが先でも良い。

【０３８９】また、ここではコンテンツデータのレイア
ウトを行った後にメモデータのレイアウトを決めている
が、両者のレイアウト処理を逐次的に行うことも可能で
ある。

【０３９０】以上説明したような処理で、コンテンツデ
ータのレイアウトに重ならない、あるいは重なりが所定
割合以下あるいは所定面積以下になるようなメモデータ
のレイアウトを得ることができるので、結果的に、参照
部分以外の部分も含めた文書の表示とメモの表示ができ
るだけ重ならずに同時に視認できるようになる効果が出
てくる。

【０３９１】また、メモデータをレイアウトする範囲と
して、コンテンツデータのレイアウトの周囲の余白にす
ることで、コンテンツデータとメモデータの重なりを無
くす／少なくすることができるという効果が出てきて、
上述した効果を引き出す。

【０３９２】また、関連付けられたコンテンツとメモデ
ータの表示をレイアウト的に近くにすることで、両者を
一度に見やすくなり、理解しやすくなるという効果が出
てくる。

【０３９３】また、メモデータをレイアウトする範囲と
して、コンテンツデータのレイアウトの間の行間にする
ことで、コンテンツデータとメモデータの重なりを無く
す／少なくすることができるので、見やすくなるという
効果があり、また、参照部分とメモとの距離を非常に近
くして表示することができるので参照部分とメモデータ
の対応関係がより分かり易くなる効果が出てくる。

【０３９４】また、コンテンツがメモデータに影響され
ずにレイアウトされるので（例えば余白や行間の大きさ
がメモデータによって変えられることがない）、コンテ
ンツのレイアウトをコンテンツデータが最も見やすい状
態でレイアウトすることができるという効果が出てく
る。

【０３９５】また、コンテンツデータとメモデータの関
連付け表示において、線で結んで表示することで、コン
テンツデータとメモデータの対応関係が分かり易くなる
という効果が出てくる。

【０３９６】また、メモデータと関連付け情報の表示の
有無を指定できることで、コンテンツだけに集中して理
解したい時とメモなどを参照しながら理解したい時を切
り替えられるという効果が出てくる。

【０３９７】このように、参照部分とメモデータを関連
付け表示させることで、レイアウトが動的に変更されて
も、それに追従してメモデータや関連付けデータが表示
されるので、文字サイズを読みやすい様に変えるなどと
いう紙の本にない特徴を持ちながら、手書きデータやテ
キストデータなどからなるメモで、紙の書籍と同じよう
な使い勝手、すなわち文書本文とメモの表示ができるだ
け重ならずに同時に視認できることや、本文の該当個所
と関連付けて使えること、該当個所とメモの関連付けが
お互いに複数に対して行えることなど、を実現すること
ができるようになる。

【０３９８】また、本発明の目的は、前述した実施形態
の機能を実現するソフトウェアのプログラムコードを記
録した記憶媒体を、システムあるいは装置に供給し、そ
のシステムあるいは装置のコンピュータ（またはＣＰＵ
やＭＰＵ）が記憶媒体に格納されたプログラムコードを
読み出し実行することによっても、達成されることは言
うまでもない。

【０３９９】この場合、記憶媒体から読み出されたプロ
グラムコード自体が前述した実施形態の機能を実現する
ことになり、そのプログラムコードを記憶した記憶媒体
は本発明を構成することになる。

【０４００】プログラムコードを供給するための記憶媒
体としては、例えば、フロッピディスク，ハードディス
ク，光ディスク，光磁気ディスク，磁気テープ，不揮発
性のメモリカード，等を用いることができる。

【０４０１】また、上記プログラムコードは、通信ネッ
トワークのような伝送媒体を介して、他のコンピュータ
システムから表示装置の主記憶７４または外部記憶７５
へダウンロードされるものであってもよい。

【０４０２】また、コンピュータが読み出したプログラ
ムコードを実行することにより、前述した実施形態の機
能が実現されるだけでなく、そのプログラムコードの指
示に基づき、コンピュータ上で稼働しているＯＳ（オペ
レーティングシステム）などが実際の処理の一部または
全部を行い、その処理によって前述した実施形態の機能
が実現される場合も含まれることは言うまでもない。

【０４０３】さらに、記憶媒体から読み出されたプログ
ラムコードが、コンピュータに挿入された機能拡張ボー
ドやコンピュータに接続された機能拡張ユニットに備わ
るメモリに書込まれた後、そのプログラムコードの指示
に基づき、その機能拡張ボードや機能拡張ユニットに備
わるＣＰＵなどが実際の処理の一部または全部を行い、
その処理によって前述した実施形態の機能が実現される
場合も含まれることは言うまでもない。

【０４０４】本発明を上記記憶媒体に適用する場合、そ
の記憶媒体には、先に説明したフローチャートに対応す
るプログラムコードを格納することになる。

【０４０５】本発明は上述した各実施形態に限らず、請
求項に示した範囲で種々の変更が可能である。

【０４０６】

【発明の効果】本発明に係る表示方法は、以上のよう
に、表示対象要素の一つ以上を座標空間上に配置したレ
イアウトの中から、表示対象要素が配置されていない余
白範囲を、上記レイアウトを記述したレイアウトデータ
を用いて特定する余白特定ステップと、メモを表すメモ
データを、上記余白範囲に配置することによって、表示
対象要素との重なりが無い、あるいは所定割合以下、あ
るいは所定面積以下となるメモデータのレイアウトを記
述したメモレイアウトデータを生成するメモレイアウト
生成ステップとを有することを特徴とする。

【０４０７】これによって、コンテンツのレイアウトが
動的に変更されても、それに追従してコンテンツのレイ
アウトと重ならないような、あるいは重なりが少ないよ
うなメモデータのレイアウトが得られるので、それらの
レイアウトに従ってコンテンツデータ及びメモデータを
出力することで、文字サイズを読みやすい様に動的に変
えるなどという紙の本にない特徴を持ちながら、手書き
データやテキストデータなどからなるメモで、紙の書籍
と同じような使い勝手、すなわち本文の該当個所とメモ
を関連付けて使えることや、文書本文とメモの表示が同
時に視認しやすいこと、などの効果が出てくる。

【０４０８】また、コンテンツがメモデータに影響され
ずにレイアウトされるので（例えば余白や行間の大きさ
がメモデータによって変えられることがない）、コンテ
ンツのレイアウトをコンテンツデータが最も見やすい状
態でレイアウトすることができるという効果が出てく
る。

【０４０９】本発明に係る表示方法は、以上のように、
表示対象要素の一つ以上の集まりとしてのコンテンツデ
ータの内、メモと対応付けたい参照部分のコンテンツデ
ータと、前記メモデータとを関連付ける情報を得る関連
付け情報取得ステップを有することを特徴とする。

【０４１０】これにより、参照部分のコンテンツデータ
とメモデータを関連付ける情報が得られるので、例え
ば、あるメモデータのレイアウトを作成する際、そのメ
モデータに関連付けられた参照部分を特定することがで
きる。あるいは、メモと参照部分との関連付けを示す場
合、関連付け情報を利用することができる。

【０４１１】これによって、メモデータのレイアウトを
作成したり、参照部分やメモデータを表示する際に、関
連付け情報を利用した処理（参照部分に近い位置にメモ
データをレイアウトする、参照部分とメモとを関連付け
を視認できるように表示する等）が行えるようになる。

【０４１２】本発明に係る表示方法は、以上のように、
前記メモレイアウト生成ステップにおいて、前記参照部
分のレイアウトの近くにメモデータを配置したメモレイ
アウトデータを生成することを特徴とする。

【０４１３】これによって、関連付けられた参照部分と
メモデータが近くにレイアウトされるので、両者を一度
に見易くなり、理解しやすくなるという利点が出てく
る。

【０４１４】本発明に係る表示方法は、以上のように、
前記関連付ける情報に基づいて、前記参照部分と前記メ
モデータを関連付けて自動的に表示する表示ステップを
有することを特徴とする。

【０４１５】これによって、両者に関係があることが視
覚的に分かり易くなる、などといった効果がある。

【０４１６】本発明に係る表示方法は、以上のように、
表示対象要素をレイアウト可能なレイアウト可能範囲を
得るレイアウト可能範囲取得ステップを有し、前記余白
特定ステップにおいて、前記レイアウト可能範囲の最大
範囲としての全レイアウト範囲から前記レイアウト可能
範囲を除いた部分を余白範囲として特定することを特徴
とする。

【０４１７】これによって、コンテンツデータとメモデ
ータの重なりを無くす／少なくすることができるので、
見やすくなるという効果が出てくる。

【０４１８】また、行間などの余白を抽出するには行や
文字のレイアウト範囲が必要だが、レイアウト可能範囲
を使う場合は行や文字のレイアウト範囲が不要なので、
抽出処理も簡単に素早く行うことができる利点がある。
また、レイアウト可能範囲は、コンテンツデータのレイ
アウト処理前に決まっているので、コンテンツデータの
レイアウト前に余白の抽出処理を行うことが可能となる
利点もある。

【０４１９】また、コンテンツデータは必ずレイアウト
可能範囲内にレイアウトされているが、レイアウト可能
範囲の外側の余白部分にメモデータを表示することで、
レイアウト全体としてみると一部が飛び出した形にな
り、結果的にその部分にメモデータの書き込みがあるこ
とを視覚的に目立たせることができる効果が出てくる。

【０４２０】本発明に係る表示方法は、以上のように、
前記余白特定ステップにおいて、前記レイアウト可能範
囲取得ステップから得られたレイアウト可能範囲の中
で、前記表示対象要素が配置されていない部分を余白範
囲として特定することを特徴とする。

【０４２１】これによって、コンテンツデータとメモデ
ータの重なりを無くす／少なくすることができるので、
見やすくなるという効果があり、また、多くの場合、関
連付けられたコンテンツデータとメモデータとの表示の
距離を近くすることができるので、参照部分とメモとの
対応関係がより分かり易くなる効果が出てくる。

【０４２２】また、コンテンツデータのレイアウトが規
則正しくレイアウトされていれば、例えば、行の高さが
ほぼ同じで、行間もほぼ同じ場合、行間にメモデータを
表示することで、レイアウト全体としてみるとメモデー
タのレイアウト部分が行のレイアウトの規則正しさを乱
す形になり、結果的にその部分にメモデータの書き込み
があることを視覚的に目立たせることができる効果が出
てくる。

【０４２３】本発明に係る表示方法は、以上のように、
前記関連付ける情報に含まれる、関連付け表示の表示の
仕方に関する関連付け表示情報に基づいて、メモと対応
付けたい表示対象要素の参照部分とメモとを線で結んで
表示することを特徴とする。

【０４２４】これによって、コンテンツデータのレイア
ウトが変わった場合、例えば文字の大きさを変えた場
合、メモデータのレイアウトもそれに応じて変わり、メ
モデータのレイアウト位置と関連付けられたコンテンツ
データ部分のレイアウト位置が両方変わることになる
が、その変化に応じて、メモと参照部分とが線で結んで
表示される。したがっ、レイアウトの変更に応じて自動
的に対応関係の表示が適切なものに更新されるという利
点がある。

【０４２５】また、関連付け表示によって、参照部分と
メモとの対応関係が分かり易くなるという効果が出てく
る。メモデータのレイアウトと関連付けられた参照部分
のコンテンツデータのレイアウトが、レイアウト的に離
れていたとしても、線で結んで表示することで、両者に
対応関係があることが視覚的に理解しやすくするという
効果がある。

【０４２６】本発明に係る表示方法は、以上のように、
前記関連付ける情報に含まれる、メモと対応付けたい表
示対象要素の複数の参照部分のコンテンツデータと一つ
のメモデータとを関連付ける情報と、関連付け表示の仕
方に関する関連付け表示情報とに基づいて、一つのメモ
から複数の参照部分に対して、線で結んで表示する表示
ステップを有することを特徴とする。

【０４２７】これによって、一つのコンテンツデータの
部分に対して、異なる内容のメモを関連付けることがで
きる効果があり、あるコンテンツ部分が複数のメモデー
タを持っていることが同時に視覚的に一目でわかるとい
う効果も出てくる。メモしたい内容が複数ある場合、一
つのメモにまとめるより複数のメモにした方が別の内容
であることが視覚的に分かり易くなるという効果もあ
る。

【０４２８】本発明に係る表示方法は、以上のように、
前記関連付ける情報に含まれる、メモと対応付けたい表
示対象要素の一つの参照部分のコンテンツデータに、複
数のメモデータを関連付ける情報と、関連付け表示の仕
方に関する関連付け表示情報とに基づいて、一つの参照
部分から関連付けられた複数のメモに対して、線で結ん
で表示する表示ステップを有することを特徴とする。

【０４２９】これによって、複数の参照部分に共通する
メモデータをまとめることができ、まとめない場合に比
べて無駄なメモデータの表示を抑える効果があり、ま
た、複数の参照部分に同じ内容のメモデータを対応付け
ていることが視覚的に一目でわかるという効果も出てく
る。

【０４３０】本発明に係る表示方法は、以上のように、
前記メモデータが、表示の有無を表す情報を持ち、前記
メモデータが表示しないという情報を持つ場合は、前記
メモデータのレイアウトの表示とそのメモデータに関連
付けられた関連付け情報に基づく関連付け表示を行わな
いことを特徴とする。

【０４３１】これによって、コンテンツだけに集中して
理解したい時とメモなどを参照しながら理解したい時と
を切り替えられるという効果が出てくる。

【０４３２】また、各メモデータが個別に表示の有無の
情報を持つことで、全メモデータの表示の有無ではな
く、個別に表示の有無を切り替えることができる利点が
ある。

【０４３３】本発明に係る表示装置は、以上のように、
表示対象要素の一つ以上を座標空間上に配置したレイア
ウトを記述したレイアウトデータが入力され、レイアウ
トの中から、表示対象要素が配置されていない余白範囲
を特定する余白レイアウトデータを、上記レイアウトデ
ータを用いて生成する余白特定手段と、メモを表すメモ
データが入力され、上記余白レイアウトデータに従って
メモデータを上記余白範囲に配置することにより、表示
対象要素との重なりが無い、あるいは所定割合以下、あ
るいは所定面積以下となるメモデータのレイアウトを記
述したメモレイアウトデータを生成するメモレイアウト
生成手段とを有することを特徴とする。

【０４３４】また、本発明に係る表示装置は、表示対象
要素のデータの一つ以上の集まりとしてのコンテンツデ
ータの内、メモと対応付けたい参照部分のコンテンツデ
ータと、前記メモデータとを関連付ける情報を得る関連
付け情報取得手段を有することを特徴としている。

【０４３５】これによる種々の効果は、上記表示装置の
構成に対応する表示方法による効果として、前述したと
おりである。

【０４３６】本発明に係る表示プログラムは、以上のよ
うに、上記表示方法が備える各ステップをコンピュータ
に実行させることを特徴とする。

【０４３７】本発明に係る表示プログラムは、上記表示
装置が備える各手段としてコンピュータを機能させるこ
とを特徴とする。さらに、本発明に係る記録媒体は、上
記出力処理プログラムを記録したことを特徴とする。こ
れにより、上記記録媒体、またはネットワークを介し
て、一般的なコンピュータに表示プログラムをインスト
ールすることによって、該コンピュータを用いて上記の
表示方法を実現する、言い換えれば、該コンピュータを
表示装置として機能させることができる。

【図面の簡単な説明】

【図１】全レイアウト範囲に対するレイアウト可能範囲
と、レイアウト可能範囲にコンテンツをレイアウトした
状態とを説明する図である。

【図２】表示対象要素のレイアウトデータ構造を説明す
る図である。

【図３】行レイアウトのデータ構造例を説明する図であ
る。

【図４】本発明の表示装置の機能的な構成を示すブロッ
ク図である。

【図５】上記表示装置の一実施形態における構成例を示
すブロック図である。

【図６】上記表示装置の概観例を示す模式的な斜視図で
ある。

【図７】表示部兼タブレット上に、コンテンツデータの
テキストの一部をレイアウトして表示した状態を示す説
明図である。

【図８】表示部兼タブレット上で、ペンを用いて、コン
テンツデータのテキストの一部を選択している状態を示
す説明図である。

【図９】メモデータの設定を行うダイアログウィンドウ
を表示させた状態を説明する説明図である。

【図１０】参照部分を下線で示した表示例を示す説明図
である。

【図１１】本発明の表示方法による表示処理の手順を示
すフローチャート図である。

【図１２】メモデータ構造を説明する図である。

【図１３】関連付けデータ構造を説明する図である。

【図１４】図７のコンテンツのレイアウトに合わせてメ
モデータのレイアウトを設定する処理の手順を示すフロ
ーチャート図である。

【図１５】図１４のＳ６−４におけるメモデータのレイ
アウト範囲を設定する処理の一方法を説明するフローチ
ャート図である。

【図１６】メモデータの表示レイアウト範囲を設定する
為の余白範囲を説明する説明図である。

【図１７】図１６に示す余白範囲のデータ構造を説明す
る説明図である。

【図１８】図１５のＳ６−４−１におけるメモデータの
表示レイアウト範囲を取得する処理の一方法を説明する
フローチャート図である。

【図１９】コンテンツレイアウト範囲の周囲に設定され
た余白を示す説明図である。

【図２０】図１９に示す余白範囲のデータ構造を説明す
る説明図である。

【図２１】図１５のＳ６−４−５の処理の詳細であっ
て、行間にメモデータをレイアウトできるかどうかを判
断する処理の手順を示すフローチャート図である。

【図２２】図１５のＳ６−４−７の処理の詳細であっ
て、周囲の余白にメモデータをレイアウトできるかどう
かを判断する処理の手順を示すフローチャート図であ
る。

【図２３】図１５のＳ６−４−９の処理の詳細であっ
て、コンテンツレイアウト範囲内の大きな余白にメモデ
ータをレイアウトできるかどうかを判断する処理の手順
を示すフローチャート図である。

【図２４】図２３のＳ６−４−９−１の処理の詳細であ
って、余白範囲最大矩形リストを生成する処理の手順を
示すフローチャート図である。

【図２５】特定された余白範囲を上下左右に拡張する処
理を示す説明図である。

【図２６】図１０の表示状態に対し、コンテンツの文字
サイズを２倍にするレイアウト変更を行っても、メモデ
ータが参照部分に追随してレイアウトし直された状態を
示す説明図である。

【図２７】図１０の表示状態に対し、コンテンツのレイ
アウト変更を行ったときに、従来の処理によってメモデ
ータをレイアウトした結果を示す説明図である。

【図２８】１行内の参照部分を線分で囲ってメモとの関
連付けを示した表示例を示す説明図である。

【図２９】複数行に渡る参照部分を線分で囲ってメモと
の関連付けを示した表示例を示す説明図である。

【図３０】複数行に渡る参照部分に線分を付してメモと
の関連付けを示した表示例を示す説明図である。

【図３１】参照部分の打ち消しを打ち消し線表示で示し
た表示例を示す説明図である。

【図３２】参照部分へのメモ挿入を割り込み表示で示し
た表示例を示す説明図である。

【図３３】参照部分へのメモ挿入を吹き出し表示で示し
た表示例を示す説明図である。

【図３４】表示対象要素内部の一部を参照部分としてメ
モと関連付けた表示例を示す説明図である。

【図３５】参照部分を特に示さずに、ルビとしてメモの
表示を行った表示例を示す説明図である。

【図３６】コンテンツデータがレイアウトされている範
囲を考慮しない従来方法のレイアウト処理によって、メ
モがコンテンツに上書きされた表示例を示す説明図であ
る。

【図３７】行間と周囲の余白部分にわたってメモデータ
をレイアウトした例を示す説明図である。

【図３８】コンテンツレイアウト範囲内の大きな余白を
利用して、複数の参照部分に１つのメモを関連付けてレ
イアウトした例を示す説明図である。

【図３９】一つの参照部分に複数のメモを関連付けて表
示した例を示す説明図である。

【符号の説明】

１横行（メモデータ）１０データ（関連付ける情報）１５データ（関連付け表示情報）４１表示対象要素４２表示対象要素４３表示対象要素４４表示範囲（レイアウト可能範囲）５９メモデータレイアウト範囲取得手段（メモレイア
ウト生成手段）６４関連付け情報取得手段６６メモデータレイアウト取得手段（メモレイアウト
生成手段）６９コンテンツ余白特定手段７０ＣＰＵ７４主記憶（記録媒体）７５外部記憶（記録媒体）８０行（レイアウトデータ）９０本体機器（表示装置）９１表示部兼タブレット９２ペン１００参照部分１０１範囲（余白範囲）１２７範囲（余白範囲）

Claims

【特許請求の範囲】

【請求項１】表示対象要素の一つ以上を座標空間上に配
置したレイアウトの中から、表示対象要素が配置されて
いない余白範囲を、上記レイアウトを記述したレイアウ
トデータを用いて特定する余白特定ステップと、メモを表すメモデータを、上記余白範囲に配置すること
によって、表示対象要素との重なりが無い、あるいは所
定割合以下、あるいは所定面積以下となるメモデータの
レイアウトを記述したメモレイアウトデータを生成する
メモレイアウト生成ステップと、を有することを特徴と
する表示方法。
【請求項２】表示対象要素のデータの一つ以上の集まり
としてのコンテンツデータの内、メモと対応付けたい参
照部分のコンテンツデータと、前記メモデータとを関連
付ける情報を得る関連付け情報取得ステップを有するこ
とを特徴とする請求項１に記載の表示方法。
【請求項３】前記メモレイアウト生成ステップにおい
て、前記参照部分のレイアウトの近くにメモデータを配置し
たメモレイアウトデータを生成することを特徴とする請
求項２に記載の表示方法。
【請求項４】前記関連付ける情報に基づいて、前記参照
部分と前記メモデータとを関連付けて自動的に表示する
表示ステップを有することを特徴とする請求項２、３の
いずれか一項に記載の表示方法。
【請求項５】表示対象要素をレイアウト可能なレイアウ
ト可能範囲を得るレイアウト可能範囲取得ステップを有
し、前記余白特定ステップにおいて、前記レイアウト可能範
囲の最大範囲としての全レイアウト範囲から前記レイア
ウト可能範囲を除いた部分を余白範囲として特定するこ
とを特徴とする請求項１から４のいずれか一項に記載の
表示方法。
【請求項６】前記余白特定ステップにおいて、前記レイアウト可能範囲取得ステップから得られたレイ
アウト可能範囲の中で、前記表示対象要素が配置されて
いない部分を余白範囲として特定することを特徴とする
請求項５に記載の表示方法。
【請求項７】前記関連付ける情報に含まれる、関連付け
表示の仕方に関する関連付け表示情報に基づいて、メモ
と対応付けたい参照部分とメモとを線で結んで表示する
表示ステップを有することを特徴とする請求項２から６
のいずれか一項に記載の表示方法。
【請求項８】前記関連付ける情報に含まれる、メモと対
応付けたい表示対象要素の複数の参照部分のコンテンツ
データと一つのメモデータとを関連付ける情報と、関連
付け表示の仕方に関する関連付け表示情報とに基づい
て、一つのメモから複数の参照部分に対して、線で結ん
で表示する表示ステップを有することを特徴とする請求
項２から６のいずれか一項に記載の表示方法。
【請求項９】前記関連付ける情報に含まれる、メモと対
応付けたい表示対象要素の一つの参照部分のコンテンツ
データに、複数のメモデータを関連付ける情報と、関連
付け表示の仕方に関する関連付け表示情報とに基づい
て、一つの参照部分から関連付けられた複数のメモに対
して、線で結んで表示する表示ステップを有することを
特徴とする請求項２から８のいずれか一項に記載の表示
方法。
【請求項１０】前記メモデータが、表示の有無を表す情
報を持ち、前記メモデータが表示しないという情報を持つ場合は、
前記メモデータのレイアウトの表示とそのメモデータに
関連付けられた関連付ける情報に基づく関連付け表示を
行わないことを特徴とする請求項４から９のいずれか一
項に記載の表示方法。
【請求項１１】表示対象要素の一つ以上を座標空間上に
配置したレイアウトを記述したレイアウトデータが入力
され、レイアウトの中から、表示対象要素が配置されて
いない余白範囲を特定する余白レイアウトデータを、上
記レイアウトデータを用いて生成する余白特定手段と、メモを表すメモデータが入力され、上記余白レイアウト
データに従ってメモデータを上記余白範囲に配置するこ
とにより、表示対象要素との重なりが無い、あるいは所
定割合以下、あるいは所定面積以下となるメモデータの
レイアウトを記述したメモレイアウトデータを生成する
メモレイアウト生成手段と、を有することを特徴とする
表示装置。
【請求項１２】前記コンテンツデータ中の表示対象要素
の一つ以上の集まりである参照部分と、前記メモデータ
を、関連付ける情報を得る関連付け情報取得手段を有す
ることを特徴とする請求項１１に記載の表示装置。
【請求項１３】請求項１ないし１０のいずれか一項に記
載の表示方法が備える各ステップを、コンピュータに実
行させるための表示プログラム。
【請求項１４】請求項１１または１２に記載の表示装置
が備える各手段として、コンピュータを機能させるため
の表示プログラム。
【請求項１５】請求項１３または１４に記載の表示プロ
グラムを記録した記録媒体。