JP4238220B2 - テキスト及び画像の意味解釈のためのグラフィカル・フィードバック - Google Patents

テキスト及び画像の意味解釈のためのグラフィカル・フィードバック Download PDF

Info

Publication number
JP4238220B2
JP4238220B2 JP2004560506A JP2004560506A JP4238220B2 JP 4238220 B2 JP4238220 B2 JP 4238220B2 JP 2004560506 A JP2004560506 A JP 2004560506A JP 2004560506 A JP2004560506 A JP 2004560506A JP 4238220 B2 JP4238220 B2 JP 4238220B2
Authority
JP
Japan
Prior art keywords
entity
data
ontology
text
interpreted
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2004560506A
Other languages
English (en)
Other versions
JP2006510968A (ja
JP2006510968A5 (ja
Inventor
フォード、ダニエル
ポラック、クリスタル
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
International Business Machines Corp
Original Assignee
International Business Machines Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by International Business Machines Corp filed Critical International Business Machines Corp
Publication of JP2006510968A publication Critical patent/JP2006510968A/ja
Publication of JP2006510968A5 publication Critical patent/JP2006510968A5/ja
Application granted granted Critical
Publication of JP4238220B2 publication Critical patent/JP4238220B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/30Semantic analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/33Querying
    • G06F16/3331Query processing
    • G06F16/334Query execution
    • G06F16/3344Query execution using natural language analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Computational Linguistics (AREA)
  • Artificial Intelligence (AREA)
  • Library & Information Science (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Machine Translation (AREA)
  • Digital Computer Display Output (AREA)
  • User Interface Of Digital Computer (AREA)
  • Document Processing Apparatus (AREA)

Description

本発明は、テキスト及び画像の解釈された意味を表わすため、並びに、複数の意味の曖昧さをなくすための視覚的インターフェース、及びそのインターフェースを生成する基になる方法に関する。
ユーザが、コンピュータベースのシステム、例えば、以下に限定されるものではないが、電子カレンダー、予定メモ、又は、文書処理プログラムの中にテキストを入力する場合には、そのテキストの意味に基づいて、その入力に作用するように利用することができるツールがある。例えば、アクティブ・カレンダー(Ford他に付与された特許文献1に記載される)は、カレンダーの入力項目を解析して、自動的に、航空機の便の予約状況のチェック、会議室の予約、出席者の通知などを行うことができる。これらの機能を行うためには、カレンダープログラムがテキストの入力項目の意味を正確に解釈していることが必須である。「fly to CA」という入力は、Canadaへの飛行を表わすこともあるし、或いは、Californiaへの飛行を表わすこともある。ユーザが正しく、サンディエゴではなくサスカトゥーンに到着するように、システムは、利便性をもって、テキストがどのように解釈されたかをユーザに表わし、該システムが、コンテキストその他の手掛かりから固有の意味を識別できない場合には、代替的な意味の間で選択する方法を与えるべきである。
テキストを一つの意味又は他の意味に解釈する他のシステムも述べられているが、望ましい機能性を与えるものではない。その一例は、(Kupiecに付与された特許文献2)に記載されたものであり、これは、照会目的のために、音声(その他の機械作動不能フォーマット)を機械作動可能シンボル(文字、電話、又はワード)のストリングに転記するものである。次いで、コンピュータは、テキスト分析及び仮説検定を用いて曖昧さをなくす処理を行う。このシステムは、意味を表わす視覚的フィードバック機構も、曖昧さをなくす方法も与えない。
別の例は、(Heidin他に付与された特許文献3)に記載されている。ここでは、自然言語分析器がテキストを解釈するが、その結果は、テキスト自体とは別の、音声部分のテキスト表示を含む「入力の論理形態表現」である。
(特許文献4)においては、テキストパーサーが、ワードを「ピクチャ」(すなわち、名詞)又は「関係」(すなわち、形容詞又は動詞)として指定し、これらを別々のフォーマット(枠、括弧を用いて)で示すが、ここでも、意味を表わす視覚的フィードバック機構又は曖昧さをなくす方法を与えることはできない。
ロボットによるコマンド処理で曖昧さをなくすことは、(非特許文献1)に示されているが、ユーザは、ロボットにより、さらに別の情報について質問される。テキストと関連する視覚的表示は述べられていない。
したがって、テキスト部分(又は文書全体)の解釈された意味を表わす視覚的フィードバック機構をテキストの近くに有して、その選ばれた意味が正しいかどうかをユーザが検証できるようにすることが望ましい。さらに、この機構は、テキストが何を意味していたかについての曖昧さをなくす手段を与えることができる。
米国特許第6,480,830号明細書 米国特許第5,500,920号明細書 米国特許第5,386,556号明細書 米国特許第5,960,384号明細書 米国特許第6,480,803号明細書 Carnegie Mellon University、Proceedings of Workshop on Interactive Robotics in Entrtainment、Perzanowskiによる「Towards Seamles Integration in a Multimodal Interface」2000年6月
文書の一部分の解釈された意味を、該解釈された意味の表示を文書部分の近くに示すことにより表わす方法が述べられる。この部分は、テキストであってもよいし、画像のようなテキストではないものであってもよい。この表示は、シンボル(関連コードのない)であってもよいし、又は、アイコン(特定の機能を活性化するための関連コードをもつ)であってもよい。さらに、文書部分の少なくとも2つの代替的な解釈された意味の表示を提示し、選択されている解釈された意味のうちの1つに応答して、選択された解釈された意味の表示を示すことを含む、文書の一部分の曖昧さをなくすための方法が述べられる。
本発明の性質及び利点をより完全に理解するために、添付の図面と併せて取り上げられる以下の詳細な説明を参照されたい。
図1は、解釈されたテキストの意味を表わすように働く視覚的フィードバック機構の例を示す。これは、ユーザが「Fly to CA meet with Jones at IBM(IBM Corporationの商標)J2−609」と入力した、カレンダー入力項目100のサンプルである。ユーザが入力すると、システムはテキストの意味を解釈して、シンボル(関連コードなしで)又はアイコン(望ましい機能を行うための関連コードを活性化する選択)を、該システムが解釈したテキストの上に、或いはこのテキストの近くに示す。このシステムは、さらに、以前に生成されたテキストを解釈するのにも用いることができることに注目されたい。
ここでは、システムは、「CA」という用語に対して、2つの可能な意味、まずカナダ国旗のアイコン102により示されるCanada、又はカリフォルニア州旗のアイコン104により示されるCaliforniaを見出している。このシステムは、「IBM」、「Jones」及び「J2−609」(会議室)のような他のワードについての意味も解釈したことに注目されたい。解釈された意味は、コンテキスト(周囲テキストその他のディスプレイ上の情報)、或いは、オントロジー属性(以下を参照されたい)又は電子メールの外因性テキスト、又はウェブのアンカーテキストといった他の要因に基づく、最も可能性のある解釈による順序で示すことができる。ディスプレイ上の空間が限られている場合には、システムは、単純に、矢印又はプラス符号といった表示を単独で又は単一のアイコンと組み合わせて用いることにより、1つより多い意味が可能であることを表わすことができる。
用語の意味が曖昧な場合、すなわち、システムが、可能な意味を1つより多く認識した場合には、ユーザが、単純に、正確なアイコンを選んで(マウス、ポインタ、タッチスクリーンなどといった好適な入力装置により)、システムはディスプレイを更新する。内部解釈モデルは、各選択により更新されるため、このアイコンの更新は、他のアイコンもまた変更させることになる。例えば、CanadaとCaliforniaとの曖昧さをなくすことは、リスト表示される市の解釈を変更することになる。
或いは、ユーザ入力がないときに、システムが、単純に、「最初に」リスト表示された意味の解釈を受け入れた場合には、ユーザ入力は要求されない。このことは、例えば、ユーザが入力項目における1つのテキスト項目について好ましい解釈を選んだが、他はそのまま残した場合、又は、個々の解釈の受け入れを表わすことなく、全体的な方法により、入力項目全体の受け入れを表わした場合に、実施されることになる。このように自動的に曖昧さをなくすことは、例えば、ユーザが特定のテキストを入力したときに、そのユーザが何を意味しているかを、システムが或る時間にわたり「学んだ」場合のような特定の状況において、好ましいとすることができる。
図2は、システムが、いずれかの好適な画像認識ソフトウェアを用いて、画像(JPEG、MPEG、TIFF、PDFなどといったいずれかの認識可能なフォーマットにおける)を解釈することができる別の例を示す。ここでは、画像は、2人の個人(明らかに粗野に描かれた)を含み、システムは、ピクチャ要素の「意味」を2人の個人202及び206として解釈する。システムは、個人202を「Dan」として解釈して、その近くにアイコン204を挿入し、アイコン208及び210で示されるように、個人206を「Kristal」又は「Ali」のいずれかとして解釈した。アイコン208及び210は活性化することができ、Kristal及びAliのホームページへのリンクとして働くことができる。これらのページをブラウズすることにより、誰が本当にピクチャにいるかを識別するのを助けることができ、次いで、ユーザは画像に戻って適当なアイコンを選び、曖昧さをなくすことができる。
画像に関して解釈機能を用いる別の例は、ポルノグラフィのような好ましくないコンテンツの表示である。ここでは、好適なコンテンツフィルタ(例えば、Unlead Systems,Inc.からのiMira Screeningツール)を用いて、好ましくないコンテンツを検出し、システムは、画像の上にアイコンを重ねる。このアイコンは、画像の大部分を見ることができなくなるように重ねることができる。選択された場合には、このアイコンは、警告テキスト、又は連邦通信委員会に苦情を申し立てるためのウェブフォームに対するリンクを示すことができる。
図3は、システムのアーキテクチャを示す。以下の説明は、グラフィック上の解釈ではなくテキスト上の解釈に着目するものであるが、このシステムは両方に適用できる。世界知識のオントロジー302は、人、場所、もの、及びアイデアの階層的に組織化された概念のネットワークを生成する組織化されたデータセットである。オントロジー302は、例えば、拡張マークアップ言語規約(XML)によりシリアル化されたリソース記述フレームワーク(RDF)のような技術を用いて、テキスト形態で表わされる階層的又は関係型表現のデータ構造体である。
図4は、オントロジー302の構造を示す。オントロジーの階層における上部エンティティは、自然宇宙における概念であると定義されるエンティティ402である。ここでは、階層的表現においては、上部エンティティは、ここに示されるような「ツリー」形式表現の根本とすることができ、又は、有向非巡回グラフ(DAG)において親をもたないノードとすることができることに注目されたい。オントロジーにおけるエンティティの残りは、文書において述べられることになる事実上すべてのものを表わすことを試みる、より改良された下位概念を表わす。ここでは、Dan及びKristalに対するエンティティは、親エンティティとして「人間」404を有し、リンクはオントロジー内に格納されている。同様に、California406及びCanada408のエンティティは、親の州410及び国412のそれぞれを有し、これは我々が、国、州などといった人造の群を含むように定義した概念である「政治的区分」につながる。オントロジーは、各エンティティに対して少なくとも1つのキーワードを含み、このキーワードは、そのエンティティを参照するためにテキスト文書で用いられることになる識別子であることに注目されたい。例えば、「California」というエンティティは、「Canada」と同じように「CA」というキーワードを有することができる。エンティティは、多くの場合、1つより多いキーワードを有することができ、1つのキーワードは、1つより多いエンティティを表わすことができるため、エンティティとキーワードとの間には多数対多数の関係がある。エンティティは、さらに、1つより多い親を有することができる。
オントロジー402は、さらに、解釈のために最良のエンティティの選択を決定するために、解釈機能(以下を参照されたい)により調査することができる各入力項目に対する他の属性又はデータを含むことができる。他の属性の例は、URL(種々の関連する現実の世界のデータソースを指す)、住所、個人特性情報、アイコン、その他の楽譜又は発信音(視覚障害者によりシステムが用いられる場合に助けとなる)のような他のメディアファイルを含む。一般的な空港のアイデアといった、より抽象的なエンティティにおいては、すべての空港を記述するアイコンとすることができる。特定の空港においては、空港のロゴが利用可能である場合には、そのロゴを指すことができる。或る人間のアイデアにおいては、関連するアイコンは人の姿の輪郭とすることができ、特定の個人に対するオントロジーの入力項目には、そのピクチャに対するURLを含むことができる。オントロジーに階層的表現が用いられている場合には、オントロジーの各エンティティに対して、アイコンを明確に指定する必要はない。或るエンティティに対してどのようなアイコンも指定されていない場合には、そのエンティティの親と関連するアイコンが十分である可能性があり、容易に配置することができる。例えば、前述の例において、人々を個人的接触とビジネス上の接触とに分けたが、これらの各々に対して特定のアイコンがなかった場合には、その人のアイデアと関連するアイコンを用いることができる。
図3に戻ると、オントロジーの入力項目は、キーワード/URL/メディアのデータベース304において関連する入力項目を有する。データベース304は、オントロジーを前処理することにより取り込まれて、エンティティのキーワードとそのURL(それが見出される場合には)との間の関連性を生成する。オントロジーを表わすのに用いられる技術は、固有のURLを各入力項目と関連させることを可能にする。このURLは、特定の人、場所又はものに対する固有の識別子になる。アイコン(その他のメディア)に対するエンティティの関連するURLは、前処理中にデータベース入力項目の一部になるため、これらは、あらゆる検索中にエンティティのURLと併せて取得される。このURLは、エンティティがオントロジーに対してどこに位置しているかに関連するものであり、そのエンティティについてのウェブサイトを指すURLではないことに注目されたい。この種類のURLは、ある種のメディアになる。
図5は、図3からのキーワード/URL/メディアのデータベース304における2つの入力項目の単純化した例を示す。先のカレンダーの例においては、キーワードCAの検索は、2つのエンティティ、California502及びCanada504をもたらすものであった。Californiaは、www.ca.govという関連のURL、並びに、表示のためのアイコンを構築するのに用いられるファイル(州旗を示す)を含むcalflag.jpgというファイルを有する。同様に、Canadaは、canada.gc.ca、及びmapleleaf.jpg.に対するアイコンのためのリンクを有する。
再び図3に戻ると、意味解釈機能306は、テキストのシーケンスと、オントロジーにおけるエンティティのURLとの間の関連性の生成を担う。これは、ワードのシーケンスを調査し、次いで、必要に応じて、その「オピニオン」において、それらのワードにより記述されるオントロジーのURLの集合を生成する。このことは、テキストにおけるワードを、キーワード/URLのデータベース304への照会のためのソース材料として用いることにより行う。これらの照会の結果は、解釈機能306により処理されて、元のシーケンスからのワードと関連される(すなわち、格納される)。このように関連されたURLが1つだけである場合には、そのワードについての解釈は固有であり(依然として不正確である可能性はあるが)、URLが1つより多い場合には、解釈は曖昧である。
いずれの場合においても、ユーザは、画像及びテキストの意味解釈ディスプレイ308を用いて、解釈を拒否するか又は改良する機会を有する。このディスプレイは、ユーザがシステムと対話するインターフェースを表わす。これは、ユーザがテキストを入力して、マウスその他のポインティング装置をクリックすることにより、項目又は領域を選択するのを可能にすることができる。ディスプレイ308及び解釈機能306は、一連の「事象」を通して対話する。ディスプレイは、テキスト生成及びポインタ選択事象301を生成し、解釈機能は、テキスト及び画像の位置決めを操作するディスプレイ事象312を生成する。
作動においては、ユーザは、(タイピング、音声、その他の入力手段により)テキストをディスプレイに入力して、このテキストが、意味解釈機能306まで通信され、該解釈機能は、該テキストが解釈を有することを決定してもよいし又はしなくてもよい。解釈機能306がそうする場合には、該解釈機能306は、明らかに、特定のアイコン又は複数のアイコンを、テキストのワード又は複数のワードと関連させるように、ディスプレイがテキストと混ぜられたアイコンをドローするような事象を生成する。例えば、カレンダーの例においては、「Canada」というワードを入力することにより、「Canada」というワードの上に小さなカナダ国旗のアイコンが現れることになる。内部では、解釈機能は、エンティティ「Canada」(国)のURLをワード「Canada」(テキスト)と関連させる。1つより多い解釈がある場合には、解釈機能は、最も可能性のある解釈だと思われる順位を生成して、適当なアイコンすべてを(順位通りに)ディスプレイに与える。これらの複数のアイコン及びこれらの順位は、1つより多い方法で示すことができる。例えば、空間量が限られている場合には、最も可能性のある解釈を、最初に(左側に)提示して、「Jones」のテキスト項目に関して図1に示されるように、残りを矢印(さらにアイコンを表わす)の後ろに隠すことができる。
この手法の背景にあるアイデアは、ユーザが、どのような解釈がなされようとしているか、他の解釈があるか、ということを明確に見ることができることである。ユーザが「さらに」矢印をクリックした場合には、彼らは他のアイコンを見て、他のアイコンのうちの1つをクリックすることにより、解釈の順位を付け直すことができる。これらのユーザの動作は、すべて、解釈機能306まで報告し戻されて、該解釈機能は、その内部解釈モデルを更新できるようになる。このことは、解釈機能に、先の解釈の幾つかを再評価させることになる(例えば、ユーザがテキスト文書において国名の曖昧さをなくした場合には、市の名前は識別された国の中にある可能性がより高くなるため、解釈機能は、その解釈を再評価できるようになる)。
このようにして、ユーザにより入力されたテキストは解釈機能に報告され、該解釈機能は、次いで、その解釈を表わすアイコン(及びそれらの順番)をディスプレイに報告し戻す。ユーザは、これらのアイコンを見て、視覚的に、テキストとの関連性を検証する。これらがその関連性と合致した場合(良好な解釈機能及びオントロジーの場合に可能性がある)には何もする必要はなく、これらが合致しない場合には、代替的なアイコン(したがって、その解釈)を選択してもよいし、又は、正しいアイコン/解釈が存在しない場合には、そのように表わすこともできる(例えば「右クリック」により)。或いは、テキストが解釈できないものである場合には、システムは、ユーザが、直接URLを入力して、システムに開始点を与える機会を提供することができる。
このプロセスの最終生成物は、解釈機能の内部モデルのコンテンツである。これがオントロジー302を指すURLと、テキストにおけるワードとの間に有する関連性は、他のアプリケーション(例えば、電子商取引のような)により調査して、適当に処理することができる。他のアプリケーションの例は、カレンダー入力項目に関連する情報の自動取り出し、又は、航空機の切符その他の旅行に必要なものを予約するソフトウェアエージェントである。このようなアプリケーションは、(Active Calenderという題名のFord他に付与された特許文献5)に記載されている。
本発明の論理は、一連のコンピュータ実行可能命令としてプロセッサにより実行することができる。この命令は、以下に限定されるものではないが、コンピュータ・ディスケット、CD ROM、又はプログラムコードが格納された、コンピュータ使用可能媒体を有するDVD、DASDアレイ、磁気テープ、通常のハードディスクドライブ、電子読み出し専用メモリ、又は光学的格納装置といったコンピュータアクセス可能媒体をもつ好適なデータ格納装置に含むことができる。
要約すれば、ユーザが、選ばれた意味が正しいかどうかを検証するために、テキストの近くに、文書の一部分(又は文書全体)の解釈された意味を表わす視覚的フィードバック機構が述べられた。さらに、この機構は、テキストにより何が意味されたかについての曖昧さをなくす手段を与えることができる。
本発明が示され、特に、好ましい実施形態を参照して説明されたが、当業者であれば、本発明の精神及び範囲から離れることなく、その形態及び詳細に種々の変更を行うことができることが理解されるであろう。したがって、開示された発明は、例示的なものに過ぎず、特許請求の範囲で指定される範囲においてのみ制限される。
視覚的フィードバック機構の一例を示す。 画像に適用された視覚的フィードバック機構を示す。 システムのアーキテクチャを示す。 オントロジーの構造体を示す。 図3からのキーワード/URL/メディアのデータベースにおける入力項目の単純化された例を示す。

Claims (12)

  1. コンピュータを用いて、テキスト又は画像の一部分の解釈された意味を表示するための方法であって、
    複数のエンティティを有し、各エンティティに対して少なくとも1つのキーワードを含むことで各エンティティを参照することに用いられるように、テキスト形態で表現される階層的又は関係型データ構造体であるオントロジーを、コンピュータ上に形成するステップと、
    解釈された意味として、オントロジーにおけるエンティティの属性又はデータとの関連性を生成するステップと、
    キーワードを用いて、エンティティがオントロジーに対してどこに位置しているかを検索することで、エンティティに関連する属性又はデータを取得するステップと、
    前記取得された属性又はデータを、コンピュータのディスプレイ上に、解釈された意味として前記一部分の近くに表示するステップとを有する、方法。
  2. コンピュータを用いて、テキスト又は画像の一部分の解釈された意味を表示して、曖昧さをなくすための方法であって、
    複数のエンティティを有し、各エンティティに対して少なくとも1つのキーワードを含むことで各エンティティを参照することに用いられるように、テキスト形態で表現される階層的又は関係型データ構造体であるオントロジーを、コンピュータ上に形成するステップと、
    解釈された意味として、オントロジーにおけるエンティティの属性又はデータとの関連性を生成するステップと、
    キーワードを用いて、エンティティがオントロジーに対してどこに位置しているかを検索することで、エンティティに関連する属性又はデータを取得するステップと、
    前記取得された属性又はデータを、コンピュータのディスプレイ上に、少なくとも2つの代替的な解釈された意味として前記一部分の近くに表示するステップと、
    表示された意味のうちの1つが選択されることに応答して、この選択を曖昧さをなくすための情報としてコンピュータが認識するステップとを有する、方法。
  3. 表示された意味のうちの1つが選択されることに応答して、ディスプレイ上に表示している少なくとも2つの代替的な解釈されている意味のうちの、少なくとも1つの解釈されている意味を更新するステップとを有する、請求項2に記載の方法。
  4. 表示された意味のうちの1つが、ユーザによって入力装置により選ばれる、請求項2又は3の何れかに記載の方法。
  5. 前記表示される属性又はデータが、特定の機能を活性化するための関連コードをもつアイコンである請求項1〜4の何れかに記載の方法。
  6. 前記表示される属性又はデータが、どのような関連コードもないシンボルである請求項1〜4の何れかに記載の方法。
  7. 前記表示される属性又はデータが、前記画像の上に重ねられる請求項1〜6の何れかに記載の方法。
  8. 前記表示される属性又はデータが、矢印及びプラス符号のうちの少なくとも1つを含む請求項1〜6の何れかに記載の方法。
  9. 前記表示される属性又はデータが、前記テキスト内のコンテキストに基づいて順序付けられる請求項1〜8の何れかに記載の方法。
  10. 前記表示される属性又はデータが、前記文書の外にある関連する情報に基づいて順序付けられる請求項1〜8の何れかに記載の方法。
  11. テキスト又は画像の一部分の解釈された意味を表示するための装置であって、
    複数のエンティティを有し、各エンティティに対して少なくとも1つのキーワードを含むことで各エンティティを参照することに用いられるように、テキスト形態で表現される階層的又は関係型データ構造体であるオントロジーを、形成して記憶する手段と、
    解釈された意味として、オントロジーにおけるエンティティの属性又はデータとの関連 性を生成する手段と、
    キーワードを用いて、エンティティがオントロジーに対してどこに位置しているかを検索することで、エンティティに関連する属性又はデータを取得する手段と、
    前記取得された属性又はデータを、ディスプレイ上に、解釈された意味として前記一部分の近くに表示する手段とを有する、装置。
  12. テキスト又は画像の一部分の解釈された意味を表示して、曖昧さをなくすための装置であって、
    複数のエンティティを有し、各エンティティに対して少なくとも1つのキーワードを含むことで各エンティティを参照することに用いられるように、テキスト形態で表現される階層的又は関係型データ構造体であるオントロジーを、形成して記憶する手段と、
    解釈された意味として、オントロジーにおけるエンティティの属性又はデータとの関連性を生成する手段と、
    キーワードを用いて、エンティティがオントロジーに対してどこに位置しているかを検索することで、エンティティに関連する属性又はデータを取得する手段と、
    前記取得された属性又はデータを、ディスプレイ上に、少なくとも2つの代替的な解釈された意味として前記一部分の近くに表示する手段と、
    表示された意味のうちの1つが選択されることに応答して、この選択を曖昧さをなくすための情報として認識する手段とを有する、装置。
JP2004560506A 2002-12-18 2003-12-11 テキスト及び画像の意味解釈のためのグラフィカル・フィードバック Expired - Fee Related JP4238220B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US10/323,042 US20040117173A1 (en) 2002-12-18 2002-12-18 Graphical feedback for semantic interpretation of text and images
PCT/EP2003/050984 WO2004055614A2 (en) 2002-12-18 2003-12-11 Graphical feedback for semantic interpretation of text and images

Publications (3)

Publication Number Publication Date
JP2006510968A JP2006510968A (ja) 2006-03-30
JP2006510968A5 JP2006510968A5 (ja) 2007-01-25
JP4238220B2 true JP4238220B2 (ja) 2009-03-18

Family

ID=32507304

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004560506A Expired - Fee Related JP4238220B2 (ja) 2002-12-18 2003-12-11 テキスト及び画像の意味解釈のためのグラフィカル・フィードバック

Country Status (8)

Country Link
US (1) US20040117173A1 (ja)
EP (1) EP1611531A2 (ja)
JP (1) JP4238220B2 (ja)
KR (1) KR20050085012A (ja)
CN (1) CN100533430C (ja)
AU (1) AU2003299221A1 (ja)
TW (1) TWI242728B (ja)
WO (1) WO2004055614A2 (ja)

Families Citing this family (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2536265C (en) * 2003-08-21 2012-11-13 Idilia Inc. System and method for processing a query
US20070136251A1 (en) * 2003-08-21 2007-06-14 Idilia Inc. System and Method for Processing a Query
US9195766B2 (en) * 2004-12-14 2015-11-24 Google Inc. Providing useful information associated with an item in a document
US7681147B2 (en) * 2005-12-13 2010-03-16 Yahoo! Inc. System for determining probable meanings of inputted words
US9081609B2 (en) * 2005-12-21 2015-07-14 Xerox Corporation Image processing system and method employing a threaded scheduler
US20070219773A1 (en) * 2006-03-17 2007-09-20 Xerox Corporation Syntactic rule development graphical user interface
WO2008027503A2 (en) * 2006-08-31 2008-03-06 The Regents Of The University Of California Semantic search engine
US8977631B2 (en) * 2007-04-16 2015-03-10 Ebay Inc. Visualization of reputation ratings
US8103498B2 (en) * 2007-08-10 2012-01-24 Microsoft Corporation Progressive display rendering of processed text
US8548791B2 (en) * 2007-08-29 2013-10-01 Microsoft Corporation Validation of the consistency of automatic terminology translation
US20090313101A1 (en) * 2008-06-13 2009-12-17 Microsoft Corporation Processing receipt received in set of communications
US8788350B2 (en) 2008-06-13 2014-07-22 Microsoft Corporation Handling payment receipts with a receipt store
US8335889B2 (en) * 2008-09-11 2012-12-18 Nec Laboratories America, Inc. Content addressable storage systems and methods employing searchable blocks
US8949241B2 (en) * 2009-05-08 2015-02-03 Thomson Reuters Global Resources Systems and methods for interactive disambiguation of data
EP2383684A1 (en) * 2010-04-30 2011-11-02 Fujitsu Limited Method and device for generating an ontology document
US8849930B2 (en) 2010-06-16 2014-09-30 Sony Corporation User-based semantic metadata for text messages
CN102156608B (zh) * 2010-12-10 2013-07-24 上海合合信息科技发展有限公司 多字符连续书写的手写输入方法
US8996359B2 (en) 2011-05-18 2015-03-31 Dw Associates, Llc Taxonomy and application of language analysis and processing
TWI465940B (zh) * 2011-11-04 2014-12-21 Inventec Corp 輔助記憶雙語同義詞彙的系統及其方法
US9269353B1 (en) 2011-12-07 2016-02-23 Manu Rehani Methods and systems for measuring semantics in communications
EP2798531A1 (en) * 2011-12-27 2014-11-05 Koninklijke Philips Electronics N.V. Text analysis system
US9020807B2 (en) 2012-01-18 2015-04-28 Dw Associates, Llc Format for displaying text analytics results
US9667513B1 (en) 2012-01-24 2017-05-30 Dw Associates, Llc Real-time autonomous organization
CN103218157B (zh) * 2013-03-04 2016-08-17 东莞宇龙通信科技有限公司 一种移动终端及解说信息的管理方法
CN108647705B (zh) * 2018-04-23 2019-04-05 北京交通大学 基于图像和文本语义相似度的图像语义消歧方法和装置
US12093253B2 (en) * 2019-12-19 2024-09-17 Oracle International Corporation Summarized logical forms based on abstract meaning representation and discourse trees
US11829420B2 (en) 2019-12-19 2023-11-28 Oracle International Corporation Summarized logical forms for controlled question answering

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US550920A (en) * 1895-12-03 Cuff-holder
SE466029B (sv) * 1989-03-06 1991-12-02 Ibm Svenska Ab Anordning och foerfarande foer analys av naturligt spraak i ett datorbaserat informationsbehandlingssystem
US5924089A (en) * 1996-09-03 1999-07-13 International Business Machines Corporation Natural language translation of an SQL query
US5960384A (en) * 1997-09-03 1999-09-28 Brash; Douglas E. Method and device for parsing natural language sentences and other sequential symbolic expressions
AU2001271891A1 (en) * 2000-07-07 2002-01-21 Criticalpoint Software Corporation Methods and system for generating and searching ontology databases

Also Published As

Publication number Publication date
WO2004055614A3 (en) 2005-11-10
EP1611531A2 (en) 2006-01-04
JP2006510968A (ja) 2006-03-30
AU2003299221A1 (en) 2004-07-09
AU2003299221A8 (en) 2004-07-09
CN100533430C (zh) 2009-08-26
TW200422874A (en) 2004-11-01
TWI242728B (en) 2005-11-01
KR20050085012A (ko) 2005-08-29
WO2004055614A2 (en) 2004-07-01
US20040117173A1 (en) 2004-06-17
CN1745378A (zh) 2006-03-08

Similar Documents

Publication Publication Date Title
JP4238220B2 (ja) テキスト及び画像の意味解釈のためのグラフィカル・フィードバック
JP5744873B2 (ja) トラステッドクエリのシステムおよび方法
US9348872B2 (en) Method and system for assessing relevant properties of work contexts for use by information services
US8978033B2 (en) Automatic method and system for formulating and transforming representations of context used by information services
US9659084B1 (en) System, methods, and user interface for presenting information from unstructured data
US7743360B2 (en) Graph browser and implicit query for software development
US7739653B2 (en) Representing software development item relationships via a graph
US10133823B2 (en) Automatically providing relevant search results based on user behavior
CN112840335A (zh) 用于浏览器的以用户为中心的上下文信息
US8661035B2 (en) Content management system and method
CN115004190A (zh) 分析图形用户界面以促进自动交互
US20150286943A1 (en) Decision Making and Planning/Prediction System for Human Intention Resolution
US20140089287A1 (en) Information space exploration tool system and method
KR20000011423A (ko) 디스플레이스크린및윈도우크기와관련된웹페이지적응시스템
CA2392905A1 (en) Concept-based message/document viewer for electronic communications and internet searching
US11995139B2 (en) Knowledge attributes and passage information based interactive next query recommendation
US20100138414A1 (en) Methods and systems for associative search
KR101441219B1 (ko) 정보 엔터티들의 자동 연관
EP4359955A1 (en) Visual autocompletion for geospatial queries
Lancaster et al. Intelligent technologies in library and information service applications
JP2002215642A (ja) フィードバック型インターネット検索方法及びその方法を実施するためのシステムとプログラム記録媒体
JP4138048B2 (ja) 情報検索装置およびその装置としてコンピュータを機能させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体
US20240256624A1 (en) Knowledge attributes and passage information based interactive next query recommendation
JP2002288221A (ja) 文書表示装置、文書表示方法ならびに、プログラム
Zhao Information retrieval in digital libraries: the systems aspect.

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20061204

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20061204

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080826

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20081121

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20081216

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20081219

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111226

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees