JP7396970B2

JP7396970B2 - 情報処理装置、情報処理装置の制御方法および制御プログラム

Info

Publication number: JP7396970B2
Application number: JP2020147779A
Authority: JP
Inventors: 弘靖岩附; 健一藤田
Original assignee: Sharp Corp
Current assignee: Sharp Corp
Priority date: 2020-09-02
Filing date: 2020-09-02
Publication date: 2023-12-12
Anticipated expiration: 2040-09-02
Also published as: JP2022042367A

Description

本発明は、情報処理装置、情報処理装置の制御方法および制御プログラムに関する。

特許文献１には、電子筆記装置が記載されている。該電子筆記装置では、ユーザは、あらかじめ定められたエリア上に文字などの情報を筆記し、例えば「ＴＯＤＯ」という分類を指定する。これにより、筆記された内容を示すストロークデータが「ＴＯＤＯ」フォルダに振り分けられる。

特開２０１３－０２５６５９号公報（２０１３年２月４日公開）

しかしながら、上述のような従来技術は、情報処理装置における情報の入出力の方式または形式などに制約がある。そこで、情報の入力または出力（例えば、表示）の自由度を向上させて、利便性に優れた情報処理装置を実現することが求められる。

本発明の一態様は、情報の入出力の自由度を向上させることにより利便性に優れた情報処理装置を実現することを目的とする。

上述の課題を解決するために、本発明の一態様に係る情報処理装置は、表示対象データが表示された表示部における、ユーザが指定した位置に、該ユーザの入力操作を受け付け可能なＵＩ（User Interface）部品を表示させる表示制御部と、前記ＵＩ部品ごとに、前記ＵＩ部品と前記表示対象データとの位置関係に基づいて前記表示対象データのうちの注目データを特定する特定部と、前記ＵＩ部品と前記注目データとの対応関係を記憶部に記憶させる対応付け部とを備えている。

上述の課題を解決するために、本発明の一態様に係る制御方法は、表示部と記憶部とを備えた情報処理装置の制御方法であって、表示対象データが表示された前記表示部における、ユーザが指定した位置に、該ユーザの入力操作を受け付け可能なＵＩ部品を表示させる表示ステップと、前記ＵＩ部品ごとに、前記ＵＩ部品と前記表示対象データとの位置関係に基づいて前記表示対象データのうちの注目データを特定する特定ステップと、前記ＵＩ部品と前記注目データとの対応関係を前記記憶部に記憶させる対応付けステップとを含む。

本発明の一態様によれば、利便性に優れた情報処理装置を実現することができる。

情報処理装置の要部構成を示すブロック図である。情報処理装置の表示部に表示された表示対象データの具体例を示す図である。表示対象データに配置されたＵＩ部品の具体例を示す図である。配置されたＵＩ部品に基づいて注目データを特定する動作を説明する図である。記憶部に記憶されている管理テーブルのデータ構造の一例を示す図である。表示部に表示されたリストの具体例を示す図である。表示対象データが表示されたときに情報処理装置によって実行され得る処理の流れを示すフローチャートである。リストの表示が指示されたときに情報処理装置によって実行され得る処理の流れを示すフローチャートである。斜めに筆記された文字列の特定方法を説明する図である。表示対象データとして表示部に表示される訳語データの具体例を示す図である。リストとして表示部に表示される単語リストの具体例を示す図である。表示対象データに配置されたＵＩ部品の具体例を示す図である。日付指定支援ツールの具体例を示す図である。他の実施形態に係る管理テーブルのデータ構造の一例を示す図である。配置されたＵＩ部品の種類ごとに生成されるリストのいくつかの具体例を示す図である。表示対象データとして表示部に表示される地図データの具体例を示す図である。表示部に表示されるＴＯＤＯリストの具体例を示す図である。表示対象データとして表示部に表示される広告データの具体例を示す図である。表示部に表示される選択画面の一例を示す図である。リストから抽出された注目データが転記された後の表示対象データの具体例を示す図である。他の実施形態に係るリンク管理テーブルのデータ構造の一例を示す図である。表示対象データとして表示部に表示されるページデータの具体例を示す図である。表示部に表示される検索画面の一例を示す図である。表示部に表示される検索結果画面の一例を示す図である。他の実施形態に係るリンク管理テーブルのデータ構造の一例を示す図である。リンク部品が配置された後に表示部に表示される画面の遷移図である。

〔実施形態１〕
以下、本発明の一実施形態について、詳細に説明する。

＜情報処理装置の構成＞
図１は、本開示に係る情報処理装置の要部構成を示すブロック図である。本開示に係る情報処理装置は、ユーザによって入力された情報に基づいて、表示対象データを処理し、表示する機能を備えた各種の情報処理装置に適用可能である。本開示に係る情報処理装置は、一例として、電子ノート、電子辞書、ＰＣ（Personal Computer）、ノートＰＣ、スマートフォン、タブレット、ゲーム機などに広く好適に用いられる。本実施形態では、一例として、情報処理装置１は、ユーザがタッチペンなどの指示体を用いてタッチパネル上に筆記した文字を入力したり表示したりすることが可能な電子ノートである。

情報処理装置１は、制御部１０、記憶部１１、表示部１２、および、操作部１３を備えている。情報処理装置１は、図示されていないその他の部材、例えば、一般的な情報処理装置が備えている通信部、カメラ、マイク、スピーカ、ＧＰＳ（Global Positioning System）などを備えていてもよい。

制御部１０は、記憶部１１に記憶されているプログラムおよびデータ、外部の装置から受信したプログラムおよびデータなどに基づき、情報処理装置１における各ブロックを統括して制御する。

制御部１０は、例えば、ＣＰＵ（central processing unit）または専用プロセッサなどの制御装置により構成されてもよい。後述する制御部１０の各部は、ＣＰＵなどの制御装置が、ＲＯＭ（read only memory）などで実現された記憶装置（記憶部１１）に記憶されているプログラムをＲＡＭ（random access memory）などに読み出して実行することで実現できる。

記憶部１１は、制御部１０にて用いられる各種データを記憶するものであり、ＲＯＭおよびＲＡＭなどを含む。本実施形態では、記憶部１１は、一例として、管理テーブル５１を不揮発的に記憶している。その他、記憶部１１は、制御部１０が実行する不図示の各種プログラムを記憶していてもよい。また、記憶部１１は、表示制御部２０によって参照されるレイヤ情報５０を不揮発的に記憶している。

表示部１２は、制御部１０が処理した情報をユーザに視認可能に提示する出力装置である。例えば、表示部１２は、液晶表示装置（ＬＣＤ；Liquid Crystal Display）または有機ＥＬ（Electro-Luminescence）ディスプレイなどによって構成される。例えば、表示部１２には、レイヤ情報５０に含まれている各レイヤが表示される。

操作部１３は、ユーザの操作を受け付けるための入力装置である。操作部１３は、受け付けたユーザの操作に対応する指示信号を制御部１０に入力する。一例として、操作部１３は、表示部１２とともにタッチパネルを構成してもよい。操作部１３は、表示部１２の表示面でもある操作部１３の入力面に、ユーザの指またはタッチペンなどの指示体が接触または接近することを検知することが可能なデバイスを含んで構成される。接近を含めてまとめて「接触」と呼ぶ。

＜機能概要＞
情報処理装置１の制御部１０は、一例として、表示制御部２０、操作受付部２１、データ処理部３０、部品配置部３１、特定部３２、対応付け部３３、および、リスト処理部３４の各部を含む。

表示制御部２０は、制御部１０の各部によって処理されたレイヤ情報５０を表示部１２に表示させる。レイヤ情報５０には、制御部１０の各部によって処理されるレイヤが含まれている。各レイヤには、対応する制御部１０の各部によって情報処理された結果が反映される。表示制御部２０は、レイヤ情報５０に含まれている各レイヤのうち、各部の実行状況に応じて表示の対象となるレイヤを選択する。表示制御部２０は、複数の表示対象のレイヤに対して、必要に応じて、重畳処理または画面分割処理などを施し、これにより得られた映像信号を表示部１２に出力する。これにより、制御部１０の各部によって情報処理された結果が表示部１２に表示され、ユーザが視認することができる。

レイヤ情報５０には、一例として、データ処理部３０によって処理されるデータレイヤ１５１と、部品配置部３１によって処理される部品配置レイヤ１５２と、リスト処理部３４によって処理されるリストレイヤ１５３とが含まれている。

操作受付部２１は、操作部１３から入力された信号に基づいて、ユーザの入力操作を受け付ける。一例として、操作受付部２１は、ユーザが操作する指示体がタッチパネルに接触した位置、すなわち、タッチ位置を検知して、タッチパネルの座標系における該タッチ位置の座標情報を制御部１０の各部に伝達する。

データ処理部３０は、表示対象データを処理する。表示対象データは、表示部１２に表示される対象となる情報を含むデータである。本実施形態では、データ処理部３０は、電子ノートアプリケーションなどとして実装されてもよい。電子ノートアプリケーションにおいて、表示対象データは、ユーザによってタッチパネル上に筆記された手書き文字を含むノートデータである。データ処理部３０は、処理した表示対象データ、具体的には、ノートデータをデータレイヤ１５１に展開する。これにより、該ノートデータに含まれる手書き文字が表示制御部２０を介して表示部１２に表示される。

部品配置部３１は、ＵＩ（User Interface）部品を処理する。ＵＩ部品データは、情報処理装置１における情報の入出力に係るユーザの動作を支援するデータである。ＵＩ部品は、ユーザの入力操作を受け付けることが可能であって、特定のデータ型で構成された値を保持する。部品配置部３１は、操作部１３を介して指定された表示部１２における位置、つまり、タッチ位置にＵＩ部品を配置する。具体的には、部品配置部３１は、ＵＩ部品を、部品配置レイヤ１５２上のタッチ位置に対応する位置に配置する。また、部品配置部３１は、ＵＩ部品を介して受け付けられた入力操作にしたがって、ＵＩ部品が保持する値を新規に登録したり、更新したりする。部品配置部３１は、ＵＩ部品が保持している値に応じて、ＵＩ部品の表示部１２における表示態様を変化させてもよい。本実施形態では、一例として、ＵＩ部品はチェックボックスである。部品配置部３１は、ユーザのタッチ操作にしたがって部品配置レイヤ１５２を処理することにより、ユーザがタッチペンで指定した位置に、チェックボックスを配置することができる。

表示制御部２０は、データレイヤ１５１に部品配置レイヤ１５２を重畳させて、各レイヤを表示部１２に表示させる。これにより、ユーザは、表示部１２に表示されている表示対象データの任意の位置に、ＵＩ部品を重ねて置くことができる。

特定部３２は、表示されている表示対象データと、その上に重畳表示されたＵＩ部品との位置関係に基づいて、注目データを特定する。注目データとは、表示対象データのうち、重畳表示されたＵＩ部品に関連する部分を指す。一例として、特定部３２は、データレイヤ１５１上に配置されている表示対象データの情報のうち、部品配置レイヤ１５２上に配置されているＵＩ部品と近い位置に配置されている情報を注目データとして特定してもよい。

対応付け部３３は、ＵＩ部品と注目データとの対応関係を記憶部１１に記憶させる。具体的には、対応付け部３３は、配置されたＵＩ部品と、該ＵＩ部品に関連するとして特定された注目データとを対応付けて管理テーブル５１に登録する。

リスト処理部３４は、管理テーブル５１に登録されているＵＩ部品と注目データとの組を配列したリストを生成する。リスト処理部３４によって生成されたリストは、リストレイヤ１５３に配置され、表示制御部２０を介して、表示部１２に表示される。

操作受付部２１が、表示部１２に表示されたリストに対するユーザの入力操作が受け付けた場合には、リスト処理部３４は、該入力操作に応じて、管理テーブル５１を更新し、リストを再編成してもよい。

＜機能詳細＞
（データ処理部３０）
図２は、情報処理装置１の表示部１２に表示された表示対象データの具体例を示す図である。表示対象データは、一例として、データ処理部３０としての電子ノートアプリケーションで処理されるノートデータである。図示のとおり、ノートデータは、操作部１３としてのタッチパネルに対して、ユーザがタッチペンなどで筆記したことに伴って生成される手書き文字を含む。データ処理部３０は、操作部１３を介して検知されたタッチ位置にしたがって、手書き文字を生成し、ノートデータに追加する。データ処理部３０が、上述の手書き文字が追加されたノートデータをデータレイヤ１５１に配置すると、図２に示すとおり、手書き文字を含んだノートデータ２０１が、表示制御部２０によって表示部１２に表示される。

（部品配置部３１）
図３は、表示対象データに配置されたＵＩ部品の具体例を示す図である。本実施形態では、表示制御部２０は、ノートデータ２０１とともに、ノートデータ２０１に関するユーザの入力操作を支援するための入力支援ツールを表示させてもよい。一例として、表示制御部２０は、入力支援ツールとして、部品パレット２０２を表示させてもよい。

部品パレット２０２は、ノートデータ２０１上にＵＩ部品を置くための支援ツールである。図示の例では、部品パレット２０２には、１種類のＵＩ部品が用意されている。このＵＩ部品は、例えば、チェックボックス２０４である。

一例として、操作受付部２１が、タッチペンによるチェックボックス２０４の選択操作を受け付けると、部品配置部３１は、チェックボックス２０４を複製する。次に、操作受付部２１が、ドラッグ操作を受け付けると、部品配置部３１は、タッチペンの現在接触位置に追随するようにチェックボックス２０４を移動させる。操作受付部２１が、ドロップ操作を受け付けると、部品配置部３１は、ドロップ操作が受け付けられた位置に複製したチェックボックス２０４を配置する。

このように、ユーザは、部品パレット２０２を介して、ノートデータ２０１上の任意の位置にチェックボックス２０４を置くことができる。

表示制御部２０は、入力支援ツールとして、さらに、リスト化ボタン２０３を表示させてもよい。リスト化ボタン２０３は、１種類以上のＵＩ部品が配置されたノートデータ２０１に基づいてリストを表示するようにユーザが情報処理装置１に対して指示を入力するための支援ツールである。操作受付部２１が、リスト化ボタン２０３に対するタッチ操作を受け付けると、リスト処理部３４は、後述するように、ノートデータ２０１と配置された１種類以上のＵＩ部品とに基づいてリストを生成し、表示制御部２０を介して表示部１２に表示させる。

（特定部３２）
図４は、配置されたＵＩ部品に基づいて注目データを特定する動作を説明する図である。図示のとおり、チェックボックス２０４がドラッグアンドドロップ操作されることにより、部品配置部３１によってチェックボックス２１１が配置されたとする。

特定部３２は、注目データを矩形により特定してもよい。矩形を使えば、文字列を過不足なく適切に特定することが容易である。そのため、注目データを矩形により特定することは、表示対象データから抜き出したい情報が文字列である場合に有効である。

特定部３２は、一例として、チェックボックス２１１の位置に基づいて、注目データとしての矩形の上辺と下辺とを以下のように決定してもよい。例えば、特定部３２は、チェックボックス２１１の大部分を挟む上の罫線の位置を矩形の上辺の位置とし、下の罫線の位置を矩形の下辺の位置としてもよい。あるいは、特定部３２は、チェックボックス２１１の上端の位置を矩形の上辺の位置とし、チェックボックス２１１の下端の位置を矩形の下辺の位置としてもよい。あるいは、特定部３２は、チェックボックス２１１の中心から画面上方向へ所定距離にある位置を矩形の上辺の位置とし、該中心から画面下方向へ所定距離にある位置を矩形の下辺の位置としてもよい。

特定部３２は、一例として、チェックボックス２１１の位置に基づいて、注目データとしての矩形の右辺と左辺とを以下のように決定してもよい。例えば、特定部３２は、チェックボックス２１１の右端の位置を矩形の左辺の位置として特定してもよい。そして、特定部３２は、チェックボックス２１１の右側に配置されている連続する文字列の最後尾の文字の右端の位置を矩形の右辺の位置として特定してもよい。

以上の特定方法にしたがい、特定部３２は、チェックボックス２１１の位置に基づいて、ノートデータ２０１のうち矩形２２１の部分を注目データとして特定する。以下、矩形２２１は、必要に応じて注目データ２２１と称される。その他のチェックボックス２１２～２１５に関しても、注目データ２２２～２２５がそれぞれ特定される。

以上の特定方法は、横書き用の罫線に沿って文字が左から右に筆記されているような表示対象データに対して特に有効である。リストの箇条の先頭に付す行頭文字は、箇条の左端に付し、箇条を左から右へ読み進めることが一般的であり、ユーザは、リストの箇条にしたい文字列の左端にチェックボックス２１１を置くと考えられるからである。

他の特定方法として、特定部３２は、チェックボックス２１１の右端から表示部１２の画面右端までの横幅と、所定の固定値の縦幅とで特定される矩形を、チェックボックス２１１に関連する注目データとして特定してもよい。縦幅の所定の固定値は、例えば、罫線幅またはチェックボックスの高さに基づいて定められてもよい。

あるいは、特定部３２は、チェックボックス２１１の左端から表示部１２の画面左端までの横幅と、上述の所定の固定値の縦幅とで特定される矩形を、チェックボックス２１１に関連する注目データとして特定してもよい。

さらに、特定部３２は、チェックボックス２１１の右側と左側、いずれにある矩形を注目データとして採用するかについて以下の規則に基づいて決定してもよい。例えば、特定部３２は、横幅が長い方の矩形を採用してもよいし、含まれる文字数が多い方の矩形を採用してもよい。

上述の特定方法によれば、箇条にしたい文字列の左端にチェックボックスを置くスペースがなく、ユーザが該文字列の右側にチェックボックスを置いた場合であっても、適切に関連する注目データを特定することができる。

さらに他の特定方法として、特定部３２は、チェックボックス２１１の最も近くにある文字を含む連続した文字列を含む矩形を抽出データとして特定してもよい。

上述の特定方法によれば、箇条にしたい文字列の左右に余白がなく、ユーザが該文字列の直上または直下にチェックボックスを置いた場合であっても、適切に関連する注目データを特定することができる。

特定部３２は、チェックボックス２１１の位置を基点として最初に特定した矩形をユーザが視認可能なように表示部１２に表示させ、併せて、該矩形の大きさをユーザが変更するための図形編集ツールを表示させてもよい。

上述の特定方法によれば、ユーザが置いたチェックボックスに関連して、ユーザが意図する文字列が特定されていない場合に、ユーザがそれを訂正することができる。

特定部３２は、矩形に限らず、円、楕円、その他の図形、または、ユーザがフリーハンドで特定した閉曲線により囲われた図形などにより、注目データを特定してもよい。

あるいは、特定部３２は、上述のいずれかの特定方法のうち、ユーザが予め選択した特定方法にしたがって注目データを特定するように構成されていてもよい。

（対応付け部３３）
図５は、記憶部１１に記憶されている管理テーブル５１のデータ構造の一例を示す図である。管理テーブル５１は、一例として、ＵＩ部品番号、作成日時、データ型、値、値更新日、元データＩＤ、座標情報、注目データ、および、箇条更新日の各カラムで構成されている。各カラムには以下の情報が格納される。

ＵＩ部品番号は、表示対象データに配置された個々のＵＩ部品を一意に識別するための識別情報である。作成日時は、ＵＩ部品が最初に配置された日時を示す。データ型は、ＵＩ部品が保持する値のデータ型を示す。図示の例では、ＵＩ部品のデータ型は「２値」であり、該ＵＩ部品が０か１かの値を保持することを意味する。値更新日は、ＵＩ部品が保持する値が更新された日を示す。

元データＩＤは、ＵＩ部品が配置されたベースの表示対象データを一意に識別する識別情報である。図示の例において、「note-line.L4x85BQ」は、チェックボックス２１１～２１５が配置されているノートデータ２０１の識別情報である。

座標情報は、表示対象データの座標系における、ＵＩ部品が配置された位置を示す。例えば、座標情報は、表示対象データ上の任意の位置にある原点からＵＩ部品が配置された位置までの、Ｘ成分の距離およびＹ成分の距離を含む。

注目データは、該当するＵＩ部品に関連して、表示対象データから特定されたデータである。本実施形態では、一例として、注目データは、ノートデータ２０１から特定された矩形領域がトリミングされることにより得られる画像データである。他の例として、注目データは、矩形領域に含まれる手書き文字を示すテキストデータであってもよい。テキストデータは、手書き文字が文字認識されることにより得られる。さらに他の例として、注目データは、特定された矩形領域を定義する定義情報であってもよい。例えば、矩形領域の定義情報は、矩形の各頂点の座標情報であってもよい。

箇条更新日は、注目データの元になっている表示対象データが更新されたことに伴って、注目データの中身が更新された日を示す。箇条更新日については、本実施形態末尾の変形例にて詳述する。

表示対象データ上に配置されたＵＩ部品につき、注目データが特定されると、対応付け部３３は、該ＵＩ部品と該注目データとを対応付けて、管理テーブル５１に記憶する。具体的には、対応付け部３３は、ＵＩ部品についてＵＩ部品番号を採番する。対応付け部３３は、上述のＵＩ部品について、作成日時、データ型、値、値更新日、元データＩＤおよび座標情報の各カラムに格納する情報を部品配置部３１から取得して格納する。対応付け部３３は、上述のＵＩ部品に関連して、注目データおよび箇条更新日の各カラムに格納する情報を特定部３２から取得して格納する。

（リスト処理部３４）
図６は、情報処理装置１の表示部１２に表示されたリストの具体例を示す図である。リストは、一例として、リスト内の各箇条が示す「やるべき事」について実行済みか否かを管理するためのＴＯＤＯリストである。

リスト処理部３４は、管理テーブル５１に基づいてリストを生成する。リストが生成されるタイミングは、特に限定されない。リスト処理部３４は、対応付け部３３が管理テーブル５１を生成したり、更新したりしたときに、最新の管理テーブル５１に基づいて、リストを予め生成しておいてもよい。あるいは、リスト処理部３４は、図３に示すリスト化ボタン２０３が操作されたことに応答して、管理テーブル５１を記憶部１１から読み出し、リストを生成してもよい。表示制御部２０は、生成されたリストを含むリストレイヤ１５３をレイヤ情報５０から読み出して、表示部１２に表示させることができる。

リスト処理部３４は、管理テーブル５１に記憶されているＵＩ部品と、該ＵＩ部品に対応付けられた注目データとの組を配列してリストを生成する。具体的には、リスト処理部３４は、図５に示す管理テーブル５１に基づいて、図４に示す、チェックボックスと注目データとの５つの組を配列してＴＯＤＯリストを生成する。５つの組は、例えば、ＵＩ部品が配置された日時、すなわち、作成日時順にソートされてもよい。リスト処理部３４は、例えば、リスト化ボタン２０３がユーザによって操作されたことに応答して、５つの組が配列されたＴＯＤＯリストをリストレイヤ１５３に配置する。これにより、図６に示すとおり、ＴＯＤＯリスト２３０が、表示制御部２０によって表示部１２に表示される。

ＴＯＤＯリスト２３０は、ＵＩ部品配置列２３１と、箇条配置列２３２とを少なくとも含んでいる。ＵＩ部品配置列２３１は、ＵＩ部品、例えば、チェックボックスを配置するための領域である。箇条配置列２３２は、リストにおいて箇条となる注目データを配置するための領域である。本実施形態では、箇条配置列２３２には、表示対象データから矩形にトリミングされた画像データが配置される。

リスト処理部３４は、１つの組を１つの行に配置する。例えば、リスト処理部３４は、チェックボックス２１１と注目データ２２１との組に関して、チェックボックス２１１を１行目のＵＩ部品配置列２３１に、注目データ２２１を同じ１行目の箇条配置列２３２に配置する。残りの４組についても同様に配置される。

ＴＯＤＯリスト２３０が表示部１２に表示されると、リスト処理部３４は、操作受付部２１を介して、ＵＩ部品配置列２３１に配置された各チェックボックスに対するユーザ操作を受け付ける。リスト処理部３４は、チェックボックスが操作された場合には、操作にしたがって、操作されたチェックボックスの値を更新する。例えば、「未チェック状態」のチェックボックス２１４が、タッチペンなどでタッチされたとき、リスト処理部３４は、管理テーブル５１において、チェックボックス２１４の値を０から１に更新する。そして、リスト処理部３４は、チェックボックス２１４の表示態様を、図６に示すように、「チェック入り状態」の表示態様に変更する。

ＴＯＤＯリスト２３０の箇条配置列２３２に配置されている注目データに対して選択操作がなされたことに応答して、リスト処理部３４は、該注目データの抽出元である表示対象データを表示するようにデータ処理部３０に指示してもよい。これにより、ユーザは、ＴＯＤＯリスト２３０に挙げられている箇条が、元々どのような文脈で記載されたものであるのかを、元のノートデータ２０１に戻って容易に確認することができる。

（処理フロー）
図７は、表示対象データが表示されたときに情報処理装置１によって実行され得る処理の流れを示すフローチャートである。

Ｓ１０１では、データ処理部３０は、表示対象データを表示する。データ処理部３０は、情報処理の結果得られた表示対象データをデータレイヤ１５１に配置する。表示制御部２０は、データレイヤ１５１に対応する映像信号を表示部１２に出力し、表示対象データを表示部１２に表示させる。表示制御部２０は、ＵＩ部品を配置するための入力支援ツールとして部品パレット２０２を、上述の表示対象データとともに表示させる。

Ｓ１０２では、操作受付部２１は、ＵＩ部品を配置する位置を指定するためのユーザの操作を受け付ける。ＵＩ部品を配置する位置を指定する操作が受け付けられた場合、情報処理装置１は、Ｓ１０２のＹＥＳからＳ１０３の処理へ進む。

Ｓ１０３（表示ステップ）では、部品配置部３１は、ユーザによって指定された位置にＵＩ部品を配置する。部品配置部３１は、ユーザがドロップ操作をした位置に対応する部品配置レイヤ１５２上の位置に、ＵＩ部品を配置する。表示制御部２０は、表示対象データに重ねてＵＩ部品を表示させる。

Ｓ１０４（特定ステップ）では、特定部３２は、ＵＩ部品が配置された位置に基づいて、表示対象データから注目データを特定する。

Ｓ１０５（対応付けステップ）では、対応付け部３３は、ＵＩ部品と注目データとの対応関係を記憶部１１に記憶させる。対応付け部３３は、ＵＩ部品と注目データとを対応付けて管理テーブル５１に登録する。

Ｓ１０６では、操作受付部２１は、さらにＵＩ部品を配置する操作を受け付ける。別のＵＩ部品を配置する位置が指定された場合、情報処理装置１は、Ｓ１０６のＹＥＳからＳ１０３に戻り、以降の処理を繰り返す。ＵＩ部品を配置する操作が受け付けられずに、終了のイベントが発生した場合には、データ処理部３０は、Ｓ１０６のＮＯに進んで、表示対象データの表示を終了する。

図８は、リストの表示が指示されたときに情報処理装置１によって実行され得る処理の流れを示すフローチャートである。

Ｓ２０１では、操作受付部２１は、リストの表示を指示する操作を受け付ける。例えば、リスト化ボタン２０３に対するユーザのタッチ操作を受け付ける。リスト化ボタン２０３がタッチされた場合、情報処理装置１は、Ｓ２０１のＹＥＳからＳ２０２の処理に進む。

Ｓ２０２では、リスト処理部３４は、管理テーブル５１からリストの箇条とする注目データを読み出す。例えば、リスト処理部３４は、ＴＯＤＯリストを生成するとき、やるべき事を表した手書き文字列の画像データを読み出す。

Ｓ２０３では、リスト処理部３４は、ＵＩ部品と注目データとの組を配列してリストを生成する。例えば、リスト処理部３４は、チェックボックスと画像データとの組を一列に並べてＴＯＤＯリストを生成する。

Ｓ２０４では、表示制御部２０は、生成されたリストを表示部１２に表示させる。表示制御部２０は、リスト上でＵＩ部品をユーザの入力操作を受け付け可能に表示させる。

Ｓ２０５では、操作受付部２１は、ＵＩ部品に対するユーザの入力操作を受け付ける。ＵＩ部品がユーザによって操作された場合、情報処理装置１は、Ｓ２０５のＹＥＳからＳ２０６の処理に進む。

Ｓ２０６では、リスト処理部３４は、管理テーブル５１に格納されている、操作されたＵＩ部品が保持する値を、その操作にしたがって更新する。

Ｓ２０７では、操作受付部２１は、リスト上に表示されている注目データに対する操作を受け付けてもよい。例えば、やるべき事を表した文字列の画像データがタッチされると、情報処理装置１は、Ｓ２０７のＹＥＳからＳ２０８の処理に進む。

Ｓ２０８では、リスト処理部３４は、操作された注目データを含む表示対象データを表示するようにデータ処理部３０に指示する。

ＵＩ部品および注目データに対する操作が受け付けられずに、終了のイベントが発生した場合には、リスト処理部３４は、リストの表示を終了する。

図８に示すフローチャートは、ユーザからリストの表示が指示された場合に、リストを生成する処理の流れを表している（Ｓ２０３）。しかし、ＵＩ部品と注目データとの組を配列してリストを生成する処理は、このタイミングに限らず、Ｓ１０５の後からＳ２０１の前までの期間における任意のタイミングで実行されてよい。すなわち、リスト処理部３４は、Ｓ１０５～Ｓ２０１の期間の任意のタイミングにおいて、リストを予め生成し記憶部１１に格納しておいてもよい。Ｓ２０１までにリストが生成される場合、Ｓ２０３の処理は省略され、Ｓ２０２では、リスト処理部３４は、Ｓ２０１で指定されたリストを記憶部１１から読み出す。

＜作用効果＞
以上のとおり、実施形態１に係る情報処理装置１の構成によれば、ユーザは、自由に情報を筆記したノートデータ２０１において、ＴＯＤＯリスト２３０に箇条としてリストアップしたい文字列を、後からいつでも、指定することができる。具体的には、ユーザは、ノートデータ２０１上の箇条にしたい文字列の近傍にチェックボックスをドラッグアンドドロップ操作などで配置するだけでよい。

つまり、ユーザは、ノートデータ２０１のうち、簡易かつ直感的な操作で箇条にしたい情報を指定するだけで、簡単にノートデータ２０１からＴＯＤＯリスト２３０を作ることが可能となる。その上、ＴＯＤＯリスト２３０の各箇条は、ユーザ操作を受け付け可能なチェックボックスとともに表示される。そのため、ユーザは、表示されたＴＯＤＯリスト２３０を見るだけでなく、実際に操作して、やるべき事の管理に活用することができる。

例えば、ユーザは、会議に出席している最中は、ノートデータ２０１において自由にメモをとり、会議後に、重要な事項だけをピックアップしたＴＯＤＯリスト２３０を簡単に作成するといった使い方ができる。

結果として、情報の入出力の自由度が向上し、利便性に優れた情報処理装置（例えば、電子ノート）を実現することができる。

＜変形例＞
（斜めに筆記された文字）
特定部３２は、斜めに筆記された文字列を注目データとして適切に特定するために、例えば、以下のように構成されてもよい。

図９は、斜めに筆記された文字列の特定方法を説明する図である。本例では、表示対象データは、罫線が入っていない無地のフォーマットを有するノートデータ２０５である。無地のフォーマットを有するノートデータ２０５では、罫線付きのフォーマットを有するノートデータ２０１よりも、ユーザの手書き文字が斜めに連なることがしばしば起こり得る。

ノートデータ２０５において、斜めの手書き文字列の近くにチェックボックス２１６が配置されたとする。この場合、特定部３２は、実施形態１にて説明した特定方法にしたがって、チェックボックス２１６の右側に水平な矩形を特定した後、ユーザの指示にしたがって、該矩形を変形させてもよい。例えば、特定部３２は、先に特定した水平な矩形の周囲に、矩形を編集するための編集支援ツールを生成して、ユーザが矩形を任意の形状および傾きに編集することを支援してもよい。編集支援ツールは、例えば、回転ハンドル２４１およびサイズ変更ハンドル２４２などであり、特定部３２によって生成された編集支援ツールは、表示制御部２０によって表示部１２に表示される。

特定部３２は、回転ハンドル２４１に対するユーザの操作にしたがって、矩形を回転させてもよい。また、特定部３２は、サイズ変更ハンドル２４２に対するユーザの操作にしたがって、矩形のサイズを変更してもよい。これにより、ユーザは、例えば、斜めに筆記した文字列の傾きと平行になるように矩形を傾けることができ、また、箇条にしたい手書き文字が過不足なく含まれるように矩形のサイズを調整することができる。

特定部３２は、最初に特定した水平な矩形とともに回転ハンドル２４１およびサイズ変更ハンドル２４２を表示させた後、編集支援ツールがユーザによって操作されることなく一定時間が経過した場合に、該編集支援ツールを非表示にしてもよい。そして、特定部３２は、非表示にした時点における矩形の領域をチェックボックス２１６に関連する注目データとして特定してもよい。これにより、ユーザは、注目データとしてトリミングされる矩形の領域に対して編集が必要か否かをわざわざ情報処理装置１に対して入力する必要がなくなり、ユーザの操作性が向上する。

図９に示す注目データ２２６は、チェックボックス２１６の位置に基づいて定義された矩形に基づいてトリミングされた画像データである。該画像データは、特定部３２が、ユーザの操作にしたがって、矩形を、手書き文字列の傾きに平行になるように回転し、必要な文字列を過不足なく含むようにサイズを調整したことにより得られる。上述の構成によれば、特定部３２は、斜めに筆記された文字列であっても、リスト内の箇条として適切に配置されるように、注目データ２２６を特定することができる。

（注目データの更新）
データ処理部３０は、ノートデータを後から編集するための編集機能を有していてもよい。編集機能とは、例えば、一度書いた手書き文字を削除する機能（いわゆる、消しゴムツール）、書き換える機能、新しい文字を書き足す機能、文字にマーキングを追加する機能などが想定される。

このように、リスト化される前の元の表示対象データが更新された場合、場合によっては、リスト内の箇条、すなわち、一度特定された注目データにも、その更新内容が反映されている必要がある。

特定部３２は、データ処理部３０が表示対象データの一部を更新したとき、その更新された部分が、注目データに含まれているか否かを判定する。この判定のために、管理テーブル５１においては、注目データがトリミングされた矩形について、表示対象データ上の座標情報が格納されていることが好ましい。更新された部分が、注目データに含まれていると判定した場合には、特定部３２は、該注目データにも、その更新の内容が反映されるように注目データを更新してもよい。あるいは、特定部３２は、更新後の表示対象データから最新の注目データを特定しなおし、古いものと差し替えてもよい。

例えば、チェックボックス２１５に対応する注目データ２２５の「サンプル手配各色２台」という手書き文字列のうち、「各色２台」の部分が「各色３台」に書き換えられたとする。この場合、特定部３２は、書き換えられた後のノートデータ２０１から、チェックボックス２１５の位置に基づいて矩形を改めてトリミングする。そして、特定部３２は、「サンプル手配各色３台」の手書き文字を含む画像データを取得する。

対応付け部３３は、図５に示す管理テーブル５１において、チェックボックス２１５に対応する注目データのカラムにおいて、注目データを、新しくトリミングされた「サンプル手配各色３台」の手書き文字を含む画像データに差し替える。そして、対応付け部３３は、新しくトリミングされた日を、箇条更新日のカラムに格納する。

上述の構成によれば、元の表示対象データを変更した場合に、その変更の内容が、リストにも自動的に反映される。ユーザは、表示対象データの内容とリストの内容との整合性を意識することなく、２つのデータを用途に応じて使い分けることができる。

なお、元の表示対象データを変更したとしても、最初に作成したリスト内の箇条を変更したくないという需要も想定される。そこで、表示対象データが変更された場合に、リストの箇条にもその変更を反映させるのか、あるいは、最初に作成された内容を維持するのかについて、ユーザが自由に選択できてもよい。

（縦書き文字）
本実施形態に係る情報処理装置１は、文字が縦書きされた表示対象データからリストを生成することができる。特定部３２は、文字が上から下へ読まれることを考慮した特定方法にて、縦長の矩形にて注目データを特定することができる。

（タイピング文字）
本実施形態に係る情報処理装置１は、タイピングされた文字を含む表示対象データからリストを生成することができる。部品配置部３１は、文章またはテキストを編集するアプリケーションなどを用いて作成されたデジタル文書上の任意の位置に対応付けてＵＩ部品を配置することができる。あるいは、部品配置部３１は、文字が印刷された紙などの印刷媒体をスキャンして得られたスキャン画像上の任意の位置に対応付けてＵＩ部品を配置することができる。特定部３２は、ＵＩ部品の配置位置に基づいて、デジタル文書およびスキャン画像から注目データを特定することができる。

〔実施形態２〕
本発明の他の実施形態について、以下に説明する。なお、説明の便宜上、上記実施形態にて説明した部材と同じ機能を有する部材については、同じ符号を付記し、その説明を繰り返さない。

本実施形態では、一例として、情報処理装置１は、電子辞書である。電子辞書は、例えば、英単語から日本語の意味を検索するための辞書機能を有していてもよい。

本実施形態では、電子辞書としての情報処理装置１におけるデータ処理部３０は、上述の辞書機能に対応する。本実施形態では、記憶部１１には、不図示の英和辞書データベースが記憶されている。辞書データベースには、英単語ごとに、該英単語の発音、日本語の意味、用例などを含んだ訳語データが収録されている。本実施形態では、表示対象データは、訳語データである。データ処理部３０は、ユーザによって指定された英単語に対応する訳語データを辞書データベースから検索し、データレイヤ１５１に配置する。表示制御部２０は、図１０に示すとおり、データレイヤ１５１に含まれている訳語データ２５０を表示部１２に表示させる。

図１０は、表示対象データとして表示部１２に表示される訳語データの具体例を示す図である。

表示制御部２０は、訳語データ２５０と併せて、部品パレット２０２およびリスト化ボタン２０３を表示部１２に表示させてもよい。本実施形態では、リスト処理部３４は、一例として、リスト化ボタン２０３が操作されたことに応答して、英単語を一覧表示するための単語リストを表示させる。

ユーザは、タッチペンで部品パレット２０２を操作し、訳語データ２５０に含まれている単語のうち、単語リストに登録したい単語の近傍に、チェックボックスを置くことができる。部品配置部３１は、部品パレット２０２に対するユーザの操作にしたがって、チェックボックスを、データレイヤ１５１に重畳する部品配置レイヤ１５２上に配置する。

特定部３２は、例えば、実施形態１にて説明されたいずれかの特定方法にしたがって、各ＵＩ部品のそれぞれに関連する注目データをそれぞれ特定する。注目データを示す矩形の破線枠は、ユーザに可視であっても不可視であってもよい。

対応付け部３３は、実施形態１と同様に、配置されたチェックボックスと、特定された注目データとの対応関係を管理テーブル５１に記憶させる。対応付け部３３は、注目データとして、矩形の領域内の文字列に対応するテキストデータを特定部３２から取得してもよい。あるいは、対応付け部３３は、矩形の領域内の文字列について訳語データ上の場所を示す情報を、注目データとして特定部３２から取得してもよい。場所を示す情報は、例えば、矩形の領域内の文字列のうちの先頭の文字の行番号および列番号、ならびに、最後尾の文字の行番号および列番号を含んでいてもよい。

図１１は、リストとして表示部１２に表示される単語リストの具体例を示す図である。本実施形態では、リスト処理部３４は、単語リストを生成する。この単語リストは、一例として、管理テーブル５１に記憶されているチェックボックスと、該チェックボックスに対応付けられたテキストデータとしての注目データと、該チェックボックスの値が更新された日である値更新日との組を配列したものである。リスト処理部３４は、生成した単語リストを、例えば、図１０に示すリスト化ボタン２０３が操作されたことに応答してリストレイヤ１５３に配置する。これにより、図１１に示すとおり、単語リスト２６０が、表示制御部２０によって表示部１２に表示される。

単語リスト２６０は、一例として、ＵＩ部品配置列２６１と、箇条配置列２６２と、値更新日配置列２６３とを含んでいる。値更新日配置列２６３には、チェックボックスにチェックを入れた日またはチェックをはずした日の最新の日付が表示されてもよい。

例えば、ユーザは、箇条配置列２６２に配置されている英単語について、日本語の意味を学習し、覚えた場合に、該英単語のチェックボックスにチェックを入れる操作を行ってもよい。これにより、ユーザは、単語リスト２６０を活用して、学習の進捗を容易に把握することができる。

さらに、単語リスト２６０の箇条配置列２６２に配置されている注目データに対して選択操作がなされたことに応答して、リスト処理部３４は、該注目データの抽出元である表示対象データを表示するようにデータ処理部３０に指示してもよい。具体的には、リスト処理部３４は、タッチ操作されたテキストデータが含まれている訳語データを表示するようにデータ処理部３０に指示する。この指示にしたがって、例えば、データ処理部３０は、ユーザに選択されたテキストデータ２６４が含まれている訳語データ２５０をデータレイヤ１５１に配置する。これにより、表示制御部２０によって訳語データ２５０が表示部１２に表示される。

これにより、ユーザは、単語リスト２６０に挙げられている英単語の意味を忘れた時、あるいは詳細を確認したいと思った時などに、該英単語についての詳しい情報を、元の訳語データ２５０に戻って容易に確認することができる。

〔実施形態３〕
本発明の他の実施形態について、以下に説明する。なお、説明の便宜上、上記実施形態にて説明した部材と同じ機能を有する部材については、同じ符号を付記し、その説明を繰り返さない。

本実施形態では、一例として、情報処理装置１は、電子ノートである。データ処理部３０は、表示対象データとしてノートデータを処理するものである。

本実施形態では、部品配置部３１は、２値を保持するチェックボックスに限らず、別のデータ型の値を保持する別の種類のＵＩ部品を表示対象データ上に配置してもよい。例えば、部品配置部３１は、年月日の値を保持する日付スタンプ（日付オブジェクト）を別の種類のＵＩ部品として表示対象データ上に配置してもよい。さらに、部品配置部３１は、チェックボックスと日付スタンプとの両方を同じ表示対象データ上に配置してもよい。

本実施形態では、リスト処理部３４は、配置されるＵＩ部品の種類ごとに別のリストを生成する。一例として、リスト処理部３４は、実施形態１および２と同様に、チェックボックスが配置された注目データを配列してＴＯＤＯリストを生成する。そして、リスト処理部３４は、日付スタンプが配置された注目データを日付ごとに配列して別のリストを生成する。この別のリストは、以下では、スケジュール帳と称される。

図１２は、表示対象データに配置されたＵＩ部品の具体例を示す図である。表示制御部２０は、入力支援ツールとして、部品パレット２０２を表示させる。本実施形態では、部品パレット２０２には、チェックボックス２０４と日付スタンプ２０６との２種類のＵＩ部品が用意されている。

本実施形態では、部品パレット２０２の複数種類のＵＩ部品に基づいて、複数種類のリストが生成される。そこで、本実施形態では、リスト化ボタン２０３は、リストの種類ごとに設けられてもよい。例えば、リスト化ボタン２０３として、ＴＯＤＯリストの表示を指示するための第１ボタン２０３１と、スケジュール帳の表示を指示するための第２ボタン２０３２との２つのボタンが配置されてもよい。

ユーザは、ＴＯＤＯリストの箇条に挙げたい文字列の近傍に、チェックボックス２０４をドラッグアンドドロップすればよい。また、ユーザは、スケジュール帳に登録したい文字列の近傍に、日付スタンプ２０６をドラッグアンドドロップすればよい。

部品配置部３１は、ユーザのドラッグアンドドロップ操作にしたがって、指定されたＵＩ部品を指定された位置に配置する。本実施形態では、部品配置部３１は、日付スタンプ２０６を複製してノートデータ２７０に配置するとき、その日付スタンプに保持させる年月日の値をユーザに指定させる。具体的には、部品配置部３１は、日付スタンプ２０６をノートデータ２７０上に配置したとき、日付を指定させるための日付指定支援ツールを表示部１２に表示させる。

図１３は、日付指定支援ツールの具体例を示す図である。例えば、部品配置部３１は、カレンダー２３３を表示させて、ユーザに所望の日付を選択させてもよい。あるいは、部品配置部３１は、カレンダー２３３に代えて筆記エリア２３４を表示させて、ユーザに所望の日付を記入させてもよい。

図１４は、本実施形態に係る管理テーブル５１のデータ構造の一例を示す図である。本実施形態では、管理テーブル５１は、一例として、ＵＩ部品番号、作成日時、データ型、値、値更新日、元データＩＤ、座標情報、注目データ、および、箇条更新日の各カラムで構成されている。

対応付け部３３は、実施形態１および２と同様に、チェックボックス２１７と注目データ２２７との対応関係を管理テーブル５１に登録し、チェックボックス２１８と注目データ２２８との対応関係を管理テーブル５１に登録する。

対応付け部３３は、日付スタンプ３１１と注目データ３２１との対応関係を管理テーブル５１に登録し、日付スタンプ３１２と注目データ３２２との対応関係を管理テーブル５１に登録する。対応付け部３３は、各日付スタンプのデータ型「年月日」を部品配置部３１から取得して格納する。これにより、各日付スタンプは、データ型が「２値」であるチェックボックスと区別して管理される。対応付け部３３は、日付スタンプ３１１および日付スタンプ３１２の年月日の値を部品配置部３１から取得して、値のカラムに格納する。

図１５は、配置されたＵＩ部品の種類ごとに生成されるリストのいくつかの具体例を示す図である。リスト処理部３４は、図１４に示す管理テーブル５１において、ＵＩ部品番号「ＵＩ１００１」および「ＵＩ１００４」が付与されているチェックボックスとそのそれぞれに対応付けられた注目データとの組を記憶部１１から読み出す。本実施形態では、一例として、リスト処理部３４は、チェックボックスの組をＴＯＤＯリスト２３０に配列する。

また、リスト処理部３４は、管理テーブル５１においてＵＩ部品番号「ＵＩ１００２」の日付スタンプ３１１と注目データ３２１との組、および、「ＵＩ１００３」の日付スタンプ３１２と注目データ３２２との組を記憶部１１から読み出す。本実施形態では、一例として、リスト処理部３４は、日付スタンプの組をスケジュール帳２８０に配列する。スケジュール帳２８０は、年月日ごとに箇条を配置する領域が予め定められている。例えば、ＵＩ部品番号「ＵＩ１００２」の日付スタンプ３１１は、「２０２０／２／１０」の値を保持している。そこで、リスト処理部３４は、日付スタンプ３１１の注目データ３２１を、２０２０年２月１０日の領域２８１上に配置する。同様に、注目データ３２２は、日付スタンプ３１２が保持する年月日に基づいて、２０２０年２月１４日の領域に配置される。

リスト処理部３４は、ユーザによって入力されたリストを表示する指示に応答して、上述のようにして生成したＴＯＤＯリスト２３０およびスケジュール帳２８０をリストレイヤ１５３に配置する。これにより、表示制御部２０は、リストレイヤ１５３の映像信号を表示部１２に出力して、表示部１２にリストを表示させることができる。

表示制御部２０は、ＴＯＤＯリスト２３０およびスケジュール帳２８０の表示の切り替えを容易に行うための支援ツールとして、切替ボタン２０７をそれぞれのリストと併せて表示させてもよい。さらに、表示制御部２０は、入力支援ツールとしてリンク部品パレット２０８を表示させてもよい。この入力支援ツールについては、実施形態６にて詳述する。

本実施形態の情報処理装置１によれば、１つの表示対象データに含まれている情報を、その情報の性質に応じて、異なる複数のリストに容易に転記することが可能となる。例えば、ユーザは、ノートデータの中にＴＯＤＯリストにリストップしたい文字列が含まれていれば、その近傍にチェックボックスを置くだけでよい。一方、ユーザは、同じノートデータの中にスケジュール帳に登録したい文字列が含まれていれば、その近傍に日付スタンプを置くだけでよい。このように、ユーザは、配置するＵＩ部品の種類を使い分けるだけで、１つのノートデータから、複数のリストへ情報を振り分けることを簡単に行うことができる。

＜変形例＞
リスト処理部３４は、複数の異なる表示対象データから抜き出された情報を配列して１つのリストを生成するように構成されていてもよい。

例えば、情報処理装置１が、実施形態１に記載された電子ノートの機能と、実施形態２に記載された電子辞書の機能とを備えているとする。ユーザは、授業中にノートデータに筆記した手書きの英単語に、１つ目のチェックボックスを置き、さらに、辞書機能を使って表示させた訳語データに含まれている英単語にも同じ種類の２つ目のチェックボックスを置いたとする。

対応付け部３３は、１つ目のチェックボックスとノートデータの中の英単語との対応関係を管理テーブル５１に登録するとともに、２つ目のチェックボックスと訳語データの中の英単語との対応関係を同じ管理テーブル５１に登録する。

リスト処理部３４は、管理テーブル５１に基づいて、チェックボックスと英単語との２つの組を配列して１つの単語リストを生成してもよい。

〔実施形態４〕
本発明の他の実施形態について、以下に説明する。なお、説明の便宜上、上記実施形態にて説明した部材と同じ機能を有する部材については、同じ符号を付記し、その説明を繰り返さない。

本開示に係る情報処理装置１において、注目データとして特定される情報は、文字に限らず画像であってもよい。また、注目データは、特定された画像に基づいて取得された関連情報であってもよい。

本実施形態では、一例として、情報処理装置１は、表示対象データとして地図データを表示する地図表示機能を備えている。本実施形態に係る情報処理装置１は、例えば、スマートフォン、タブレット、ＰＣ、ノートＰＣ、カーナビゲーションシステムなどである。

本実施形態に係る情報処理装置１のデータ処理部３０は、上述の地図表示機能に対応する。本実施形態では、記憶部１１には不図示の地図データが記憶されている。データ処理部３０は、例えば、ユーザによって指定された場所または不図示のＧＰＳが取得した情報処理装置１の現在位置などを含む地図データの一部をデータレイヤ１５１に展開する。表示制御部２０は、図１６に示すとおり、データレイヤ１５１に含まれている地図データ２９０を表示部１２に表示させる。

図１６は、表示対象データとして表示部１２に表示される地図データの具体例を示す図である。

表示制御部２０は、地図データ２９０と併せて、部品パレット２０２およびリスト化ボタン２０３を表示部１２に表示させてもよい。本実施形態では、リスト処理部３４は、一例として、リスト化ボタン２０３が操作されたことに応答して、訪問先を一覧表示するためのＴＯＤＯリストを生成する。

ユーザは、タッチペンで部品パレット２０２を操作し、地図データ２９０上の訪問したい場所に、ピンアイコン２９１を置くことができる。ピンアイコン２９１は、チェックボックスの外観を有していないが、２値を保持するチェックボックスである。また、ピンアイコン２９１が保持する値に応じて、表示態様を異ならせてもよい。例えば、部品配置部３１は、「未訪問」を意味する「０」の値を保持するピンアイコン２９１を白で表示させてもよい。そして、部品配置部３１は、「訪問済」を意味する「１」の値を保持するピンアイコン２９１を赤で表示させてもよい。

このように、表示対象データ上に配置するときのＵＩ部品の外観は任意に設計することができる。また、ＵＩ部品の外観は、表示対象データ上に表示されるときと、リストに表示されるときとで異なっていてもよいし、同じでもよい。

特定部３２は、ピンアイコンが配置された位置に基づいて、各ピンアイコンに対応する注目データを特定する。先の各実施形態で述べた特定方法を採用することができるが、本実施形態では、以下の特定方法にしたがって注目データが特定されてもよい。

特定部３２は、ピンアイコン２９１が配置された位置に対応する地図データ２９０上の位置（以下、ピンナップ位置）の緯度経度情報を地図データから取得し、これを、ピンアイコン２９１の注目データとして特定してもよい。特定部３２は、ピンナップ位置の緯度経度に対応する住所情報を地図データから取得し、これを注目データとして特定してもよい。地図データにおいて緯度経度情報に施設名などが関連付けられている場合には、特定部３２は、ピンナップ位置の緯度経度情報に関連付けられている施設名を注目データとして特定してもよい。また、特定部３２は、ピンナップ位置を中心とし、所定距離を半径とする円の領域と重なる地図の画像を注目データとして特定してもよい。

対応付け部３３は、ピンアイコンと注目データとの対応関係を管理テーブル５１に記憶させる。本実施形態に係る管理テーブル５１のデータ構造は、図５に示すように実施形態１に係る管理テーブル５１と同じであってもよい。注目データのカラムには、地図データをトリミングして得た画像データに代えて、施設名および住所情報を示すテキストデータが格納されてもよい。

リスト処理部３４は、管理テーブル５１に基づいて、図１６に示す、ピンアイコン（チェックボックス）と注目データとの４つの組を配列してＴＯＤＯリストを生成する。生成されたＴＯＤＯリストは、例えば、ユーザの指示に応答して、図１７に示すように、表示制御部２０によって表示部１２に表示される。

図１７は、表示部１２に表示されるＴＯＤＯリストの具体例を示す図である。リストは、リスト内の各箇条が示す「訪問先」について訪問済みか否かを管理するためのＴＯＤＯリストである。

ＴＯＤＯリスト２３０は、ＵＩ部品配置列２３１と、箇条配置列２３２とを少なくとも含んでいる。ＵＩ部品配置列２３１に配置されるチェックボックスの外観は、地図データ上に配置されるピンアイコンと異なっていてもよい。本実施形態では、箇条配置列２３２には、地図データにおけるピンナップ位置に対応する施設名および住所が配置される。

ユーザは、ＵＩ部品配置列２３１に配置されたチェックボックスを操作して、各訪問先について訪問済みか否かを管理することができる。

リスト処理部３４は、ＴＯＤＯリスト２３０において、ユーザがＴＯＤＯリスト２３０に対して付けたリスト名を表示するための領域２３５を設けてもよい。ユーザは、訪問先リストに限らず、地図データを使って、住所録、旅程表などさまざま種類のＴＯＤＯリストを作成することができる。そして、多種多様なＴＯＤＯリストに、用途に合わせたリスト名を自由に付けて複数のＴＯＤＯリストを管理することができる。

〔実施形態５〕
本実施形態では、一例として、情報処理装置１は、表示対象データとして広告データを表示する広告表示機能を備えている。本実施形態に係る情報処理装置１は、例えば、スマートフォン、タブレット、ＰＣ、ノートＰＣなどである。

本実施形態に係る情報処理装置１のデータ処理部３０は、上述の広告表示機能に対応する。本実施形態では、データ処理部３０は、不図示の通信部を介して受信された広告データを、ユーザの指示に応じて、または、所定のイベントの発生をトリガにして、データレイヤ１５１に配置する。表示制御部２０は、図１８に示すとおり、データレイヤ１５１に含まれている広告データ３４０を表示部１２に表示させる。

図１８は、表示対象データとして表示部１２に表示される広告データの具体例を示す図である。

表示制御部２０は、広告データ３４０と併せて、部品パレット２０２およびリスト化ボタン２０３を表示部１２に表示させてもよい。本実施形態では、リスト処理部３４は、リスト化ボタン２０３が操作されると、買うべきものを一覧表示するためのＴＯＤＯリスト、いわゆる買物リストを生成する。

ユーザは、タッチペンで部品パレット２０２を操作し、買いたい商品の掲載欄にチェックボックス２０４を置くことができる。

特定部３２は、チェックボックスが配置された位置に基づいて、各チェックボックスに対応する注目データを特定する。先の各実施形態で述べた特定方法を採用することができるが、本実施形態では、以下の特定方法にしたがって注目データが特定されてもよい。

本実施形態では、表示対象データは、広告データ３４０のようにいくつかの区画に分かれて構成されており、１つの事物（商品）に関する情報が１つの区画に含まれている。特定部３２は、ＵＩ部品が表示された位置に対応する表示対象データ上の位置と同じ区画に含まれている各種の情報を注目データとして特定してもよい。

より具体的には、例えば、特定部３２は、商品「トマト」の掲載欄（区画）にチェックボックスが置かれた場合には、同一商品の掲載欄に含まれる、商品「トマト」の写真、商品名「トマト」、および、商品価格「７８円」などを注目データとして特定してもよい。特定部３２は、例えば、エッジ検出などを行って商品の写真をトリミングしてもよい。特定部３２は、例えば、文字認識処理を実行して、商品名および商品価格をテキストデータとして抽出してもよい。チラシなどにおいて、商品名と商品価格とのそれぞれにおいてフォントが統一されていることが多い。そこで、特定部３２は、商品名のフォントで記載された文字列「トマト」を商品名として抽出し、商品価格のフォントで記載された文字列「７８円」を商品価格として抽出し、これらのテキストデータを注目データとして採用してもよい。

対応付け部３３は、特定部３２によって特定された注目データを、ＵＩ部品と関連付けて記憶部１１に記憶される。具体的には、対応付け部３３は、チェックボックス３４１に、「みかん」および「４９８円」を対応付けて管理テーブル５１に登録する。また、対応付け部３３は、チェックボックス３４２に、「トマト」および「７８円」を対応付けて管理テーブル５１に登録する。

リスト処理部３４は、上述の管理テーブル５１に基づいて買物リストを生成する。買物リストでは、ユーザの入力操作を受け付け可能なチェックボックスと、商品名と、商品価格とが一覧表示される。

これにより、ユーザは、買い物に行く前に広告データを確認して、簡易な操作で容易に買物リストを作成することができる。このような買物リストを活用することにより、ユーザは、買い忘れを防止しつつ、買い物を手早く済ませることができる。また、無駄な購入を控えることもできる。

〔実施形態６〕
本実施形態では、情報処理装置１は、表示対象データを元にして生成したリストにおいて、リスト内の各箇条を、ユーザが指定したさらに別の表示対象データに転記することができる。さらに、情報処理装置１は、リストと上述の別の表示対象データとの間の表示の切り替えを円滑に行うための入力支援ツールをユーザに提供することができる。

このために、表示制御部２０は、リストを表示する画面（例えば、図１５）において、リンク部品パレット２０８をリストと併せて表示させてもよい。リンク部品パレット２０８は、リスト上にリンク部品を置くための入力支援ツールである。リンク部品は、リンク先を示すリンク情報を保持しており、該リンク情報が示す表示対象データまたはリストを表示するように情報処理装置１に対して指示を入力することができる入力支援ツールである。

図１５に示す例では、リンク部品パレット２０８には、１種類のリンク部品が用意されている。このリンク部品は、例えば、ノートスタンプ２０９（リンク部品）である。ノートスタンプ２０９は、スケジュール帳からノートデータへ表示を切り替える（ジャンプする）ことを情報処理装置１に対して指示するためのリンク部品である。

例えば、ユーザは、スケジュール帳の２月１２日に記載の２つの予定メモを、ノートデータにも転記したいと考えたとする。ユーザは、上段の第１の予定メモは、「Ｃ電機」関連の予定であるため、「Ｃ電機」関連のノートデータに転記したいと考えており、下段の第２の予定メモは、「Ａ商事」関連の予定であるため、「Ａ商事」関連のノートデータに転記したいと考えている。

ユーザが、第１の予定メモの近傍に、ノートスタンプ３５１をドラッグアンドドロップしたことに応答して、まず、特定部３２は、ノートスタンプ３５１に対応する注目データを特定する。具体的には、特定部３２は、第１の予定メモの文字列を含む画像データを注目データ３６１として特定する。

次に、データ処理部３０は、注目データ３６１の転記先のノートデータをユーザに選択させるための選択画面を表示部１２に表示させる。

図１９は、表示部１２に表示される選択画面の一例を示す図である。ユーザは、選択画面３５０を介して、第１の予定メモの転記先として所望するノートデータのアイコンをタッチ操作などで選択することができる。

まず、データ処理部３０は、転記先のノートデータの選択を受け付けると、選択されたノートデータ（ここでは、Ｃ電機のノートデータ）に、注目データ３６１を追加する。

図２０は、リストから抽出された注目データが転記された後の表示対象データの具体例を示す図である。

この注目データ３６１の転記元はスケジュール帳であり、注目データ３６１には、２０２０年２月１２日の年月日が紐付いている。そこで、データ処理部３０は、このことに基づいて、２０２０年２月１２日の値を保持する日付スタンプ３７１と対応付けて注目データ３６１をＣ電機のノートデータ３７０に配置してもよい。

次に、対応付け部３３は、転記先のノートデータの選択を受け付けると、ノートスタンプ３５１と、注目データ３６１と、該ノートスタンプ３５１に保持させるリンク情報とを対応付けてリンク管理テーブルに登録する。ここでは、リンク情報は、リンク先としてＣ電機のノートデータ３７０を指定している。リンク管理テーブルは、管理テーブル５１と同様に記憶部１１に記憶されていてもよい。

図２１は、本実施形態に係るリンク管理テーブルのデータ構造の一例を示す図である。リンク管理テーブルは、リンク部品番号、作成日時、リストＩＤ、座標情報、注目データ、および、リンク情報の各カラムで構成されている。リンク部品番号は、ノートスタンプ３５１を一意に識別する識別情報を示す。作成日時は、ノートスタンプ３５１が配置された日時を示す。リストＩＤは、リンク元のリスト、すなわち、スケジュール帳２８０を一意に識別する識別情報を示す。座標情報は、リンク元のリストにおいてノートスタンプ３５１が配置された位置を示す。注目データは、ノートスタンプ３５１に対応する注目データ３６１を示す。リンク情報は、ユーザが選択した転記先のノートデータ、具体的には、Ｃ電機のノートデータ３７０を一意に識別する識別情報を示す。

上述の構成によれば、ユーザは、作成したリストの箇条を、さらに、自身が選択した別の表示対象データに容易に転記することが可能となる。さらに、リンク部品を操作することにより、転記元のリストから、転記先の表示対象データへと表示を容易に切り替えることが可能となる。

さらに、転記先にも転記元に戻るためのリンク部品を配置できてもよい。これにより、ユーザは、リンク元とリンク先との間の切り替え表示を容易に行うことが可能となる。

他の例では、リンク部品パレット２０８から選択されたリンク部品が、リスト上に配置された場合、対応付け部３３は、該リンク部品に係る情報を、図１４に示す管理テーブル５１に登録してもよい。この例では、管理テーブル５１において、さらに、リンク情報を格納するためのリンク情報のカラムが設けられる。

例えば、図１５に示すスケジュール帳２８０上に、リンク部品パレット２０８から選択されたノートスタンプ３５１が配置されたとする。この場合、対応付け部３３は、ノートスタンプ３５１に、転記先のノートデータ３７０（図２０）を識別する識別情報をリンク情報として紐付けて管理テーブル５１に記憶する。ノートスタンプ３５１は、リンク部品であるため、「データ型」、「値」、「注目データ」などのＵＩ部品特有のカラムは、空値であってもよい。これに加えて、対応付け部３３は、転記先のノートデータ３７０においてリンク部品として配置された日付スタンプ３７１について、リンク情報と対応付けて管理テーブル５１に記憶する。具体的には、対応付け部３３は、日付スタンプ３７１と、リンク元に戻るためのリンク情報、すなわち、図１５に示すスケジュール帳２８０のページを特定する識別情報とを対応付けて管理テーブル５１に記憶する。

以上のとおり、注目データと対応付けられるＵＩ部品と、リンク情報と対応付けられるリンク部品とは、１つの管理テーブル５１において管理されてもよい。

〔実施形態７〕
リンク部品は、表示対象データ上の任意の位置に配置することができてもよい。そして、配置されたリンク部品に、ユーザが指定したさらに別の表示対象データのリンク情報を保持させる。これにより、情報処理装置１は、表示対象データと、別の表示対象データとの間の表示の切り替えを円滑に行うための入力支援ツールをユーザに提供することができる。

本実施形態では、一例として、情報処理装置１は、電子辞書である。電子辞書は、実施形態２に係る辞書機能だけでなく、複数の機能を有していてもよい。例えば、電子辞書としての情報処理装置１は、さらに、収録されている英文法の解説をユーザに提示するための参考書機能を有していてもよい。

本実施形態では、情報処理装置１におけるデータ処理部３０は、上述の辞書機能および参考書機能に対応する。本実施形態では、記憶部１１には、さらに不図示の参考書データベースが記憶されている。参考書データベースには、参考書のページごとに英文法の解説を含んだページデータが収録されている。本実施形態では、表示対象データは、電子辞書の訳語データまたは参考書のページデータである。データ処理部３０は、参考書機能を実行中に、ユーザによって指定されたキーワードを含むページデータを参考書データベースから検索し、データレイヤ１５１に配置する。表示制御部２０は、図２２に示すとおり、データレイヤ１５１に含まれているページデータ４００を表示部１２に表示させる。

図２２は、表示対象データとして表示部１２に表示されるページデータの具体例を示す図である。表示制御部２０は、ページデータ４００と併せて、リンク部品パレット２０８を表示部１２に表示させてもよい。図２２に示す例では、リンク部品パレット２０８には、１種類のリンク部品が用意されている。このリンク部品は、例えば、辞書スタンプ４０１（リンク部品）である。辞書スタンプ４０１は、参考書のページデータから電子辞書の訳語データへ表示を切り替える、または、訳語データからページデータへ表示を切り替えることを情報処理装置１に対して指示するためのリンク部品である。

ユーザは、参考書機能に基づくページデータ４００と連携して表示させたい、辞書機能に基づく訳語データがある場合に、ページデータ４００の任意の位置に、リンク部品パレット２０８から選んだ辞書スタンプ４０１を置くことができる。辞書スタンプ４０１は、ユーザが指定したリンク先を示すリンク情報を保持することができる。

部品配置部３１によって、ユーザが指定した位置に、辞書スタンプ４０１が配置されると、次に、データ処理部３０は、リンク先の訳語データをユーザに指定させるための検索画面を表示部１２に表示させる。

図２３は、表示部１２に表示される検索画面の一例を示す図である。ユーザは、検索画面４１０を操作することにより、連携させたい訳語データを検索し、該訳語データをリンク先として指定することができる。なお、データ処理部３０は、図示のように、リンク元のページデータ４００と、リンク先を検索するための検索画面４１０とを並べて表示させてもよい。

例えば、ユーザは、キーワードを入力するためのテキストボックス４１１に、連携させたい訳語データを検索するための英単語を入力し、検索ボタンをタッチする。データ処理部３０は、テキストボックス４１１に入力されている英単語に対応する訳語データを辞書データベースから検索する。データ処理部３０は、検索した訳語データを示す検索結果画面を表示部１２に表示させる。

図２４は、表示部１２に表示される検索結果画面の一例を示す図である。表示制御部２０は、さらに、検索結果画面と併せて、登録ボタン４２１を表示させてもよい。登録ボタン４２１は、検索結果画面に表示されている訳語データ４２０を、ページデータ４００の辞書スタンプ４０１のリンク先として指定するためのボタンである。

ユーザが登録ボタン４２１を操作すると、対応付け部３３は、辞書スタンプ４０１に、訳語データ４２０を示すリンク情報を対応付けてリンク管理テーブルに登録する。

図２５は、本実施形態に係るリンク管理テーブルのデータ構造の一例を示す図である。リンク管理テーブルは、リンク部品番号、作成日時、リンク元ＩＤ、座標情報、および、リンク情報の各カラムで構成されている。リンク部品番号は、辞書スタンプ４０１を一意に識別する識別情報を示す。作成日時は、辞書スタンプ４０１が配置された日時を示す。リンク元ＩＤは、辞書スタンプ４０１が配置されたリンク元の表示対象データ、ここでは、ページデータ４００を一意に識別する識別情報を示す。座標情報は、ページデータ４００において辞書スタンプ４０１が配置された位置を示す。リンク情報は、ユーザが、辞書スタンプ４０１のリンク先として指定した訳語データ４２０を一意に識別する識別情報を示す。

図２５に示すリンク管理テーブルが作成された後では、データ処理部３０は、ページデータ４００を表示部１２に表示させるとき、作成されたリンク管理テーブルに基づいて、ページデータ４００上に辞書スタンプ４０１を表示させる。

図２６は、リンク部品が配置された後に表示部１２に表示される画面の遷移図である。対応付け部３３は、図２５に示すとおり、リンク管理テーブルにおいて、リンク元のリンク部品とリンク先との対応関係を登録する。対応関係が登録された後では、データ処理部３０は、表示対象データ上のリンク部品に対するユーザの操作にしたがって、リンク元の表示対象データと、リンク先の表示対象データとの間で表示の切り替えを行う。

例えば、リンク元のページデータ４００は、リンク管理テーブルに基づいて、辞書スタンプ４０１とともに表示部１２に表示される。操作受付部２１が辞書スタンプ４０１に対するユーザの操作を受け付けると、データ処理部３０は、辞書スタンプ４０１に対応付けられているリンク情報が示す訳語データ４２０を表示部１２に表示させる。

リンク先の表示対象データに、リンク元に戻るためのリンク部品として参考書スタンプ４０２がリンク管理テーブルに登録されていてもよい。この場合、参考書スタンプ４０２がユーザによって操作されると、データ処理部３０は、リンク元のページデータ４００に戻すことができる。

上述の構成によれば、ユーザは、ある単語について、その単語の意味が載っている電子辞書の訳語データと、その単語に関する用例や文法などが解説されている参考書のページデータとの間を簡易な操作で行き来して学習を効率よく進めることができる。

＜変形例＞
特定部３２は、図２２に示すページデータ４００上に、辞書スタンプ４０１が配置された位置に基づいて、ページデータ４００から注目データを特定してもよい。そして、データ処理部３０は、図２３に示す検索画面４１０を表示させるとき、特定された注目データに基づいて推測した英単語をテキストボックス４１１に併せて表示させてもよい。

例えば、特定部３２は、図２２に示すページデータ４００において辞書スタンプ４０１が配置された位置に基づいて、辞書スタンプ４０１の最も近い位置にある英単語が「mention」であるとして、これを注目データとして特定する。

データ処理部３０は、テキストボックス４１１に「mention」が入力された状態で、検索画面４１０を表示させた上で、さらなるユーザ操作を受け付ける。ユーザは、リンクさせたい訳語ページを呼び出すための検索キーワードが意図どおりであれば、そのまま検索ボタンを押すだけで済む。

〔表示対象データとリストとの対応関係について〕
上述の各実施形態、例えば、実施形態１などでは、１つの表示対象データにつき、１つのリストを生成する情報処理装置について説明した。しかし、本開示に係る情報処理装置は、このような構成に限定されない。

情報処理装置は、該情報処理装置において生成された複数の表示対象データのそれぞれに含まれる各注目データを、１つのリストにまとめることができる。例えば、情報処理装置１のデータ処理部３０がノートデータＡを表示させているときに、部品配置部３１が、ユーザによる入力操作にしたがって、チェックボックスＡを配置したとする。この場合、対応付け部３３は、チェックボックスＡに、ノートデータＡ内の注目データＡを対応付けて管理テーブル５１に記憶する。また、データ処理部３０がノートデータＡとは別のノートデータＢを表示させているとき、部品配置部３１がチェックボックスＢを配置したとする。この場合、対応付け部３３は、チェックボックスＢに、ノートデータＢ内の注目データＢを対応付けて管理テーブル５１に記憶する。リスト処理部３４は、管理テーブル５１に記憶されている注目データＡおよび注目データＢを、１つのリストに配列することができる。

上述の構成によれば、ユーザが、複数種類のノートデータを使い分けている場合でも、ＴＯＤＯリストとしては１つに集約され、すべきことをもれなく一元管理することができる。

情報処理装置は、該情報処理装置において複数の表示対象データを生成した場合、表示対象データごとにリストを生成してもよい。例えば、情報処理装置１のデータ処理部３０がノートデータＡを表示させているときに、部品配置部３１が、チェックボックスＡを配置したとする。この場合、対応付け部３３は、チェックボックスＡに、ノートデータＡ内の注目データＡを対応付けるとともに、リストＡも対応付けて、管理テーブル５１に記憶する。ノートデータＢに表示中にチェックボックスＢが配置された場合には、対応付け部３３は、チェックボックスＢに、ノートデータＢ内の注目データＢを対応付けるとともに、リストＢも対応付けて、管理テーブル５１に記憶する。リスト処理部３４は、注目データを、元のノートデータに対応するリストに配列することができる。

上述の構成によれば、分野別に使い分けられているノートデータごとにＴＯＤＯリストも作成される。そのため、ユーザは、意図的に使い分けている分野ごとに、やるべきことを管理することができる。例えば、ユーザは、ノートデータを、「家事用」、「習い事用」、「仕事用」と使い分けているとする。この場合、ユーザは、家事に関してやるべきことがまとめられたＴＯＤＯリストと、習い事に関してやるべきことがまとめられたＴＯＤＯリストと、仕事に関してやるべきことがまとめられたＴＯＤＯリストと分けて作成することができる。

情報処理装置は、複数の表示対象データを作成するとともに、複数のリストを作成してもよい。そして、ユーザは、これらの表示対象データとリストとの対応関係を、あらかじめ任意に指定することができてもよい。

例えば、ユーザが、ノートデータＡおよびノートデータＢを、ＴＯＤＯリストＰに対応付けることを指定したとする。また、ユーザが、ノートデータＣを、ＴＯＤＯリストＷに対応付けることを指定したとする。

この場合、対応付け部３３は、ノートデータＡ上に配置されたチェックボックスＡに、ノートデータＡ内の注目データＡを対応付けるとともに、ＴＯＤＯリストＰを対応付けて、管理テーブル５１に記憶する。また、対応付け部３３は、ノートデータＢ上に配置されたチェックボックスＢに、ノートデータＢ内の注目データＢを対応付けるとともに、同じく、ＴＯＤＯリストＰを対応付けて、管理テーブル５１に記憶する。一方、ノートデータＣにチェックボックスＣが配置された場合には、対応付け部３３は、チェックボックスＣに、ノートデータＣ内の注目データＣを対応付けるとともに、今度は、ＴＯＤＯリストＷを対応付けて、管理テーブル５１に記憶する。

上述の構成によれば、用途に応じて使い分けられている複数のノートデータを、分野ごとに作成されたＴＯＤＯリストのいずれかに対応付けることができる。例えば、ユーザは、ノートデータを、「家事用」、「習い事用」、「仕事用」と使い分けているとする。この場合、ユーザは、「家事用」のノートデータおよび「習い事用」のノートデータを、プライベートのやるべきことをまとめるためのＴＯＤＯリストＰに対応付けることができる。一方、ユーザは、「仕事用」のノートデータを、仕事のやるべきことをまとめるためのＴＯＤＯリストＷに対応付けることができる。

さらに、ユーザは、表示対象データとリストとの対応関係を、チェックボックスを配置する度に自由に指定することができてもよい。

例えば、データ処理部３０がノートデータＡを表示させているときに、部品配置部３１が、チェックボックスＡ１を配置したとする。このとき、対応付け部３３は、配置されたチェックボックスＡ１に対応する注目データＡ１をどのリストに転記するのかをユーザに指定させるためのＵＩ部品を表示させて、リストの選択を受け付ける。ユーザが、注目データＡ１の転記先として、ＴＯＤＯリストＬを選択したとする。この場合、対応付け部３３は、ノートデータＡのチェックボックスＡ１に、注目データＡ１とＴＯＤＯリストＬとを対応付けて管理テーブル５１に記憶する。同じノートデータＡにおいて、別のチェックボックスＡ２が配置されたとき、対応付け部３３は、都度、上述のＵＩ部品を表示させてリストの選択を受け付ける。ユーザが、転記先としてＴＯＤＯリストＭを選択すると、対応付け部３３は、ノートデータＡのチェックボックスＡ２に、注目データＡ２とＴＯＤＯリストＭとを対応付けて管理テーブル５１に記憶する。別のノートデータＢにおいて、チェックボックスが配置されたときも、その都度、対応付け部３３は、転記先として、ＴＯＤＯリストＬおよびＴＯＤＯリストＭを選択できるようにＵＩ部品を表示する。こうして、複数のノートデータと複数のＴＯＤＯリストとにおける多対多の対応関係は、対応付け部３３によって管理テーブル５１に記憶される。

上述の構成によれば、どのノートデータに記載されたどの情報も、任意のＴＯＤＯリストに転記することが可能となり自由度が向上する。

情報処理装置１は、上述の例のノートデータからＴＯＤＯリストへの転記に限らず、スケジュール帳からＴＯＤＯリストへの転記、および、ノートデータからスケジュール帳への転記を行うことができる。スケジュール帳がＴＯＤＯリストの情報源になる場合、スケジュール帳は、表示対象データとして取り扱われ得る。

よって、対応付け部３３は、１つのノートデータ内の複数の注目データを、それぞれ、種類の異なるリスト（ＴＯＤＯリストおよびスケジュール帳）に対応付けることができる。また、対応付け部３３は、種類の異なる複数の表示対象データ（ノートデータおよびスケジュール帳）のそれぞれの注目データを、１つのＴＯＤＯリストに対応付けることもできる。

〔ソフトウェアによる実現例〕
情報処理装置１の制御ブロック（特に、表示制御部２０、操作受付部２１、データ処理部３０、部品配置部３１、特定部３２、対応付け部３３およびリスト処理部３４）は、集積回路（ＩＣチップ）等に形成された論理回路（ハードウェア）によって実現してもよいし、ソフトウェアによって実現してもよい。

後者の場合、情報処理装置１は、各機能を実現するソフトウェアであるプログラムの命令を実行するコンピュータを備えている。このコンピュータは、例えば少なくとも１つのプロセッサ（制御装置）を備えていると共に、上記プログラムを記憶したコンピュータ読み取り可能な少なくとも１つの記録媒体を備えている。そして、上記コンピュータにおいて、上記プロセッサが上記プログラムを上記記録媒体から読み取って実行することにより、本発明の目的が達成される。上記プロセッサとしては、例えばＣＰＵ（Central Processing Unit）を用いることができる。上記記録媒体としては、「一時的でない有形の媒体」、例えば、ＲＯＭ（Read Only Memory）等の他、テープ、ディスク、カード、半導体メモリ、プログラマブルな論理回路などを用いることができる。また、上記プログラムを展開するＲＡＭ（Random Access Memory）などをさらに備えていてもよい。また、上記プログラムは、該プログラムを伝送可能な任意の伝送媒体（通信ネットワークや放送波等）を介して上記コンピュータに供給されてもよい。なお、本発明の一態様は、上記プログラムが電子的な伝送によって具現化された、搬送波に埋め込まれたデータ信号の形態でも実現され得る。

〔まとめ〕
本発明の態様１に係る情報処理装置は、表示対象データが表示された表示部における、ユーザが指定した位置に、該ユーザの入力操作を受け付け可能なＵＩ部品を表示させる表示制御部２０と、前記ＵＩ部品ごとに、前記ＵＩ部品と前記表示対象データとの位置関係に基づいて前記表示対象データのうちの注目データを特定する特定部３２と、前記ＵＩ部品と前記注目データとの対応関係を記憶部１１に記憶させる対応付け部３３とを備えている。

前記の構成によれば、ユーザが指定した位置に配置されたＵＩ部品と、ＵＩ部品が配置された位置に応じて特定された表示対象データの内容、すなわち、注目データとの対応関係が記憶部に記憶される。これにより、ユーザが配置したＵＩ部品と、それに関連する表示の内容とを組にして、各種の情報処理に用いることができるようになる。

ユーザは、入出力の方式または形式にとらわれることなく、表示されている内容を見て任意の位置にＵＩ部品を配置するだけでよく、それによって、各種の情報処理に用いることが可能な上述の対応関係を得ることができる。結果として、情報の入出力の自由度を向上させ、利便性に優れた情報処理装置を実現することが可能となる。

本発明の態様２に係る情報処理装置では、前記態様１において、前記表示制御部は、前記ＵＩ部品と、該ＵＩ部品に対応付けられた前記注目データとの組を配列したリストを前記表示部に表示させてもよい。

前記の構成によれば、ＵＩ部品に関連する表示の内容を箇条としたリストが、ＵＩ部品とともに、表示部に表示される。ユーザは、元の表示対象データの任意の位置にＵＩ部品を置く場所を指定するだけでよく、それによって、ＵＩ部品を操作して各箇条を管理することが可能なリストを利用することができる。

本発明の態様３に係る情報処理装置は、前記態様１または２において、前記特定部は、前記表示対象データのうち、前記ＵＩ部品が表示された位置を基点として定まる所定形状および所定サイズの領域に含まれる部分を、前記注目データとして特定してもよい。

前記の構成によれば、ＵＩ部品と、表示対象データのうちの該ＵＩ部品に関連する情報として抽出された情報そのものとの組を、各種の情報処理に用いることができるようになる。

本発明の態様４に係る情報処理装置は、前記態様３において、前記表示制御部は、前記特定部によって特定された前記領域のサイズおよび傾きの少なくともいずれか一方の変更をユーザから受け付けるための編集支援ツール（回転ハンドル２４１、サイズ変更ハンドル２４２）を、前記領域とともに前記表示部に表示させ、前記特定部は、前記編集支援ツールを介して変更された領域に含まれる部分を、前記注目データとして特定してもよい。

前記の構成によれば、ユーザがＵＩ部品を配置したときに、該ＵＩ部品に関連付けたいと所望する範囲と、特定部によって特定された領域とが一致しない場合に、ユーザは、編集支援ツールを操作して、該領域が所望する範囲をカバーするように修正することができる。

本発明の態様５に係る情報処理装置は、前記態様３または４において、前記特定部は、前記領域に含まれる文字を注目データとして特定してもよい。

前記の構成によれば、ＵＩ部品と、表示対象データのうちの該ＵＩ部品に関連する情報として特定された文字の情報との組を、各種の情報処理に用いることができるようになる。例えば、文字の情報を、リストの箇条に用いることができる。

本発明の態様６に係る情報処理装置は、前記態様１から５において、前記特定部は、前記ＵＩ部品が表示された位置に対応する前記表示対象データ（地図データ）上の場所を示す情報を前記注目データとして特定してもよい。

前記の構成によれば、ＵＩ部品と、表示対象データのうちの該ＵＩ部品が表示された位置に対応する表示対象データ上の場所を示す情報との組を、各種の情報処理に用いることができるようになる。例えば、地図データ上の場所を示す情報（緯度経度情報、住所、施設名など）を、リストの箇条に用いることができる。

本発明の態様７に係る情報処理装置は、前記態様１から５において、前記表示対象データ（広告データ）は、複数の区画に分かれて構成されており、前記特定部は、前記ＵＩ部品が表示された位置に対応する前記表示対象データ上の位置と同じ区画に含まれている情報を前記注目データとして特定してもよい。

前記の構成によれば、ＵＩ部品と、表示対象データのうちの該ＵＩ部品が表示された位置に対応する表示対象データ上の位置と同じ区画に含まれている情報との組を、各種の情報処理に用いることができるようになる。例えば、広告データにおいてＵＩ部品が表示された位置と同じ区画に含まれる情報（商品の画像、商品名、商品価格など）を、リストの箇条に用いることができる。

本発明の態様８に係る情報処理装置は、前記態様２において、前記表示制御部は、前記ＵＩ部品としてのチェックボックスと、該チェックボックスに対応付けられた前記注目データとの組を配列した前記リスト（ＴＯＤＯリスト）を表示させてもよい。

前記の構成によれば、チェックボックスと関連する注目データを箇条としたＴＯＤＯリストが、表示部に表示される。ユーザは、元の表示対象データの任意の位置にチェックボックスを置く場所を指定するだけでよく、それによって得られたＴＯＤＯリストを利用して、各箇条に示されたやるべき事の進捗を管理することができる。

本発明の態様９に係る情報処理装置は、前記態様２または８において、前記表示制御部は、年月日の入力を受け付け可能な前記ＵＩ部品としての日付オブジェクト（日付スタンプ）に対応付けられた前記注目データを該日付オブジェクトにて受け付けられた年月日に対応付けて配列した前記リスト（スケジュール帳）を表示させてもよい。

前記の構成によれば、日付オブジェクトに関連する注目データを箇条としたスケジュール帳が、表示部に表示される。このとき、注目データは、スケジュール帳の内の、日付オブジェクトが保持する年月日に対応する領域に配列される。例えば、ユーザは、表示対象データの中で、スケジュール帳に登録したい情報が含まれている場所の近くに、年月日を指定した日付オブジェクトを配置するだけでよい。日付オブジェクトに関連して抽出された上述の情報は、スケジュール帳内の、日付オブジェクトが保持する年月日の欄に配列される。ユーザは、表示対象データに含まれている情報の任意の部分を抜き出して、スケジュール帳に容易に転記することができる。

本発明の態様１０に係る情報処理装置は、前記態様２において、前記表示制御部は、前記表示部に表示させた前記リスト上の、前記ユーザが指定した位置に、リンク先を示すリンク情報を保持するリンク部品（ノートスタンプ２０９）を表示させ、前記対応付け部は、前記リストの元となる前記表示対象データとは別の、前記ユーザによって指定された表示対象データを前記リンク先とするリンク情報を、前記リンク部品に対応付けて前記記憶部に記憶させてもよい。

前記の構成によれば、ユーザは、作成したリストの箇条を、さらに、自身が選択した別の表示対象データに容易に転記することが可能となる。さらに、リンク部品を操作することにより、転記元のリストから、転記先の表示対象データへと表示を容易に切り替えることが可能となる。

本発明の態様１１に係る情報処理装置は、前記態様１から１０において、前記表示制御部は、前記表示部に表示された第１の表示対象データ（ページデータ４００）上の、前記ユーザが指定した位置に、リンク先を示すリンク情報を保持するリンク部品（辞書スタンプ４０１）を表示させ、前記対応付け部は、前記ユーザによって指定された第２の表示対象データ（訳語データ４２０）を前記リンク先とする前記リンク情報を、前記リンク部品に対応付けて前記記憶部に記憶させてもよい。

前記の構成によれば、ユーザは、第１の表示対象データに含まれているある情報に関連して、別の第２の表示対象データとの紐付けを容易に行うことが可能となる。具体的には、リンク部品を操作することにより、リンク元の第１の表示対象データから、リンク先の第２の表示対象データへと表示を容易に切り替えることが可能となる。

本発明の態様１２に係る制御方法は、表示部と記憶部とを備えた情報処理装置の制御方法であって、表示対象データが表示された前記表示部における、ユーザが指定した位置に、該ユーザの入力操作を受け付け可能なＵＩ部品を表示させる表示ステップ（Ｓ１０３）と、前記ＵＩ部品ごとに、前記ＵＩ部品と前記表示対象データとの位置関係に基づいて前記表示対象データのうちの注目データを特定する特定ステップ（Ｓ１０４）と、前記ＵＩ部品と前記注目データとの対応関係を前記記憶部に記憶させる対応付けステップ（Ｓ１０５）とを含む。

本発明の各態様に係る情報処理装置は、コンピュータによって実現してもよく、この場合には、コンピュータを前記情報処理装置が備える各部（ソフトウェア要素）として動作させることにより前記情報処理装置をコンピュータにて実現させる情報処理装置の制御プログラム、およびそれを記録したコンピュータ読み取り可能な記録媒体も、本発明の範疇に入る。

本発明は上述した各実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能であり、異なる実施形態にそれぞれ開示された技術的手段を適宜組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。さらに、各実施形態にそれぞれ開示された技術的手段を組み合わせることにより、新しい技術的特徴を形成することができる。

１情報処理装置、１０制御部、１１記憶部、１２表示部、１３操作部、２０表示制御部、２１操作受付部、３０データ処理部、３１部品配置部、３２特定部、３３対応付け部、３４リスト処理部、５０レイヤ情報、５１管理テーブル、２４１回転ハンドル（編集支援ツール）、２４２サイズ変更ハンドル（編集支援ツール）

Claims

表示対象データが表示された表示部における、ユーザが指定した位置に、該ユーザの入力操作を受け付け可能なＵＩ（User Interface）部品を表示させる表示制御部と、
前記ＵＩ部品ごとに、前記ＵＩ部品と前記表示対象データとの位置関係に基づいて前記表示対象データのうちの注目データを特定する特定部と、
前記ＵＩ部品と前記注目データとの対応関係を記憶部に記憶させる対応付け部とを備えている、情報処理装置。
前記表示制御部は、前記ＵＩ部品と、該ＵＩ部品に対応付けられた前記注目データとの組を配列したリストを前記表示部に表示させる、請求項１に記載の情報処理装置。
前記特定部は、前記表示対象データのうち、前記ＵＩ部品が表示された位置を基点として定まる所定形状および所定サイズの領域に含まれる部分を、前記注目データとして特定する、請求項１または２に記載の情報処理装置。
前記表示制御部は、前記特定部によって特定された前記領域のサイズおよび傾きの少なくともいずれか一方の変更をユーザから受け付けるための編集支援ツールを、前記領域とともに前記表示部に表示させ、
前記特定部は、前記編集支援ツールを介して変更された領域に含まれる部分を、前記注目データとして特定する、請求項３に記載の情報処理装置。
前記特定部は、前記領域に含まれる文字を注目データとして特定する、請求項３または４に記載の情報処理装置。
前記特定部は、前記ＵＩ部品が表示された位置に対応する前記表示対象データ上の場所を示す情報を前記注目データとして特定する、請求項１から５のいずれか１項に記載の情報処理装置。
前記表示対象データは、複数の区画に分かれて構成されており、
前記特定部は、前記ＵＩ部品が表示された位置に対応する前記表示対象データ上の位置と同じ区画に含まれている情報を前記注目データとして特定する、請求項１から５のいずれか１項に記載の情報処理装置。
前記表示制御部は、前記ＵＩ部品としてのチェックボックスと、該チェックボックスに対応付けられた前記注目データとの組を配列した前記リストを表示させる、請求項２に記載の情報処理装置。
前記表示制御部は、年月日の入力を受け付け可能な前記ＵＩ部品としての日付オブジェクトに対応付けられた前記注目データを該日付オブジェクトにて受け付けられた年月日に対応付けて配列した前記リストを表示させる、請求項２または８に記載の情報処理装置。
前記表示制御部は、前記表示部に表示させた前記リスト上の、前記ユーザが指定した位置に、リンク先を示すリンク情報を保持するリンク部品を表示させ、
前記対応付け部は、前記リストの元となる前記表示対象データとは別の、前記ユーザによって指定された表示対象データを前記リンク先とするリンク情報を、前記リンク部品に対応付けて前記記憶部に記憶させる、請求項２に記載の情報処理装置。
前記表示制御部は、前記表示部に表示された第１の表示対象データ上の、前記ユーザが指定した位置に、リンク先を示すリンク情報を保持するリンク部品を表示させ、
前記対応付け部は、前記ユーザによって指定された第２の表示対象データを前記リンク先とする前記リンク情報を、前記リンク部品に対応付けて前記記憶部に記憶させる、請求項１から１０のいずれか１項に記載の情報処理装置。
表示部と記憶部とを備えた情報処理装置の制御方法であって、
表示対象データが表示された前記表示部における、ユーザが指定した位置に、該ユーザの入力操作を受け付け可能なＵＩ部品を表示させる表示ステップと、
前記ＵＩ部品ごとに、前記ＵＩ部品と前記表示対象データとの位置関係に基づいて前記表示対象データのうちの注目データを特定する特定ステップと、
前記ＵＩ部品と前記注目データとの対応関係を前記記憶部に記憶させる対応付けステップとを含む、情報処理装置の制御方法。
請求項１に記載の情報処理装置としてコンピュータを機能させるための制御プログラムであって、前記表示制御部、前記特定部および前記対応付け部としてコンピュータを機能させるための制御プログラム。