JP5362328B2 - レイアウト調整によるタッチ・スクリーン移動体装置におけるリンク・ターゲット精度の改善 - Google Patents

レイアウト調整によるタッチ・スクリーン移動体装置におけるリンク・ターゲット精度の改善 Download PDF

Info

Publication number
JP5362328B2
JP5362328B2 JP2008289871A JP2008289871A JP5362328B2 JP 5362328 B2 JP5362328 B2 JP 5362328B2 JP 2008289871 A JP2008289871 A JP 2008289871A JP 2008289871 A JP2008289871 A JP 2008289871A JP 5362328 B2 JP5362328 B2 JP 5362328B2
Authority
JP
Japan
Prior art keywords
hyperlink
target
user
touch screen
select
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2008289871A
Other languages
English (en)
Other versions
JP2009129449A (ja
Inventor
パートリッジ カート
ダブリュー ニューマン マーク
ベゴール ジェイムズ
Original Assignee
パロ アルト リサーチ センター インコーポレイテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by パロ アルト リサーチ センター インコーポレイテッド filed Critical パロ アルト リサーチ センター インコーポレイテッド
Publication of JP2009129449A publication Critical patent/JP2009129449A/ja
Application granted granted Critical
Publication of JP5362328B2 publication Critical patent/JP5362328B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Description

本開示はコンピュータのユーザ・インターフェースに関する。より具体的には、本発明は、レイアウト調整によってリンク・ターゲット精度を改善するための、タッチ・スクリーン移動体装置用ユーザ・インターフェースに関する。
本特許又は出願書類は、少なくとも1つのカラー図面を含む。カラー図面付きの本特許又は特許出願公開の複写は、請求及び必要な手数料を支払うことで米国特許商標庁から提供される。
移動体コンピュータ技術の最近の発展により、単一のハンドヘルド・装置への多様な機能の前例の無い統合が可能となった。例えば、スマートフォンは、ユーザに、通話、インターネットアクセス、音声/映像エンターテインメント、ゲーム及び全地球測位情報を提供することができる。さらに、新しいディスプレイ技術によって、より高感度で正確なタッチ・スクリーン能力を有する、より大きく、より明るく、より高解像度のディスプレイが可能となった。これらの技術進歩が、より高速の移動体プロセッサ及びより安価でより大容量のメモリと組み合わされて、過去には不可能であった新しい用途のためのプラットフォームが現在では提供可能である。特に、新しい移動体ブラウザの開発により、移動体ユーザに、デスクトップコンピュータ・ユーザと同様のウェブ・ブラウズ体験が提供されている。
本発明の一実施形態は、タッチ・スクリーン・ディスプレイを有する移動体装置のリンク・ターゲットの精度を改善するためのシステムを提供する。動作中、システムは、タッチ・スクリーン上に、複数の選択可能なテキスト・オブジェクトを含むページを表示する。システムはさらに、1つのターゲットが1つの選択可能なテキスト・オブジェクトに関連付けられ、選択可能なテキスト・オブジェクトがそのターゲットによって起動できる、多数のターゲット領域をタッチ・スクリーン上に定める。システムはまた、ターゲット上をタッピングすることによって選択可能なテキスト・オブジェクトを選択することができることをユーザに示し、ターゲットは、他のターゲットから十分に分離しており、それにより、ユーザが実質的な精度で選択可能なテキスト・オブジェクトを選択することを可能にする。
本実施形態のバリエーションにおいて、ターゲットは、選択可能なテキスト・オブジェクトの一部であり、かつ選択可能なテキスト・オブジェクトの残りの部分から区別可能な、1つ又はそれ以上の文字を含む。
更なるバリエーションにおいて、文字は、文字の色及び/又は文字の背景色によって、選択可能なテキスト・オブジェクトの残りの部分から区別可能である。
更なるバリエーションにおいて、システムは、選択された文字と、1つ又はそれ以上の隣接する選択可能なテキスト・オブジェクトのターゲット文字との間の距離に基づいて、ターゲット用の文字を選択する。
本実施形態のバリエーションにおいて、ターゲットは、ターゲットの位置を示す図形要素を含み、ターゲットは、ユーザがターゲットの出現を起動させるまで任意に隠されている。
本発明の更なる実施形態は、タッチ・スクリーン・ディスプレイを有する移動体装置のリンク・ターゲットの精度を改善するシステムを提供する。システムは、タッチ・スクリーン上に、複数の選択可能なテキスト・オブジェクトを含むページを表示する。システムは、更に、ユーザが、指をタッチ・スクリーンの表面上でスライドさせることによって選択可能なテキスト・オブジェクトを選択することを可能にし、選択可能なテキスト・オブジェクトは、接触の開始中心及び指のスライド方向の両方に基づいて選択され、それによって、ユーザが実質的な精度で選択可能なテキスト・オブジェクトを選択することを可能にする。
本実施形態のバリエーションにおいて、システムは、ユーザが、指を選択可能なテキスト・オブジェクトの中心に置き、最も近い他の選択可能なテキスト・オブジェクトの中心から最も離れた方向へ指をスライドさせることによって、選択可能なテキスト・オブジェクトを選択することを可能にする。
本実施形態のバリエーションにおいて、システムは、推奨される方向を表示し、推奨される方向は、ユーザが推奨される方向の表示を起動させない限り、通常は隠されていることができる。
更なるバリーションにおいて、方向は、アイコン又はカラー・グラデーションによって示される。
タッチ・スクリーンを有するハンドヘルド移動体装置は、この十年の間に大きな人気を得てきたが、ユーザは、タッチ・スクリーン上のオブジェクトを正確に選択することの難しさに苦労することが多い。ウェブブラウザの場合のように、時にはオブジェクトはウェブページのハイパーリンクであり、またマルチメディアプレーヤの場合のように、時にはオブジェクトは歌の題名又はビデオクリップのタイトルである。タッチ・スクリーンを有するほとんどの移動体装置は、文字列又はアイコンであり得る選択可能なオブジェクトの画像をタップピングすることによって、ユーザに選択を行わせる。例えばMP3プレーヤにおける歌の題名のリストのように、隣接するオブジェクトが近接していると、ユーザが所望のオブジェクトを正確に選択することが困難になることが多い。
この問題は移動体ウェブブラウザにとってはより深刻である。ほとんどのウェブページは、ハンドヘルド装置での表示用には設計されておらず、通常のウェブページのオブジェクトは小さな画面上でしばしば過密状態で現れる。さらに、タッチ・スクリーンを有する今日の移動体ブラウザは、その小さい画面上でいかに近接してハイパーリンクが現れるかを考慮すること無しにウェブページをレンダリングする。図1(a)は、Google(登録商標)Newsウェブページを表示する移動体ブラウザのスクリーンショットを示す。タッチ・スクリーン・ディスプレイ110上で、ハイパーリンクは相互にかなり近接して現れ、ユーザが指によるタッピングで選択を行うことを非常に困難にしているということに留意されたい。このことは、ハイパーリンク101及び102のような相互に隣り合うハイパーリンクに特に当てはまる。タッチ・スクリーン・ディスプレイ110のフォント・サイズは必然的に小さい。図1(b)は、タッチ・スクリーン・ディスプレイ120上に中のフォント・サイズで表示された同じウェブページを示し、図1(c)は、タッチ・スクリーン・ディスプレイ130上の大のフォントでの同じ表示を示す。
より大きなフォントを使用することによって、ハイパーリンクの選択がし易くなるのは明白である。しかしながら、より小さいフォントの方が1ページで一度により多くのテキストが閲覧できるので、たいていのユーザは、ウェブページをより小さいフォントで表示するのを好む。さらに、最大のフォントで表示した場合でさえ、2つの隣接するライン上のハイパーリンクは、ユーザの親指でのタッピングによって区別するには、依然として相互に近接しすぎている。比較のために、図1(d)は、タッチ・スクリーン・ディスプレイ140上にボタン141、142及び143を表示し、これらのボタンの大きさは、親指のタッピングによってターゲットを正確に選択するために必要な、典型的な最小限のターゲットの大きさを反映している。ボタン141の高さは、ハイパーリンクが最大のフォントで表示されている図1(c)に示されるハイパーリンク131及び132の組み合わせよりも大きいということに留意されたい。
タッチ・スクリーン・ディスプレイ上のハイパーリンクが込み合っていると、ユーザが指のタッピングで所望のリンクを選択するのは困難になる。指先の広い面積、特に親指の広い面積は、しばしばリンクの誤選択を引き起こすことがある。例えば、ユーザは、親指でハイパーリンク・テキストをタッピングすることによってハイパーリンク102を選択したいと望むかもしれない。しかしながら、ハイパーリンク101が近接しているせいで、そのようなタッピングはハイパーリンク101に当たる可能性が非常に高く、その結果、ハイパーリンク101を望まないのに選択することになる。スタイラスの使用でハイパーリンク選択の精度を大いに高めることができるが、その様な操作はより複雑であり、両手の使用が必要である。従って、特にタッチ・スクリーンを片手で操作する場合に、タッチ・スクリーン上のリンク・ターゲットの精度を改善する方法を提供することが望ましい。
幾つかの移動体ブラウザは、かなり大きいフォントでウェブページを読み込む方式を採用しており、これは、ハイパーリンクの選択をより容易にするが、ウェブページ全体の内容を閲覧するためには、ユーザは上下ばかりではなく左右にもスクロールする必要がある。そのような大きなページを閲覧する場合、ユーザは自分の位置を忘れる傾向があるので、これは問題がある。移動体ブラウザによって採用される別の方式は、ユーザが、先ず縮小されたウェブページをスクロールし、興味のある場所を見つけ、次にズームインすることを可能にする。拡大されたページは、ハイパーリンクの選択をより容易にする。しかしながら、そのようなアプローチは、ズームイン操作がより長い相互作用時間を必要とするので、それ自体の問題がある。
本発明の実施形態は、タッチ・スクリーン移動体装置のユーザに、上記の問題の無い改善されたリンク・ターゲット精度を提供することができる方法を提供する。とりわけ、特にユーザが片手で移動体装置を操作する場合に、この方法の適用によって、ユーザが容易かつ正確にオブジェクトを選択することが可能となる。本発明の実施形態を用いて、ユーザは、いまや移動体装置を1本の指、又は装置を持つ手の親指で操作することが可能となる。
実証の目的のためだけに、以下の考察は、ウェブページでハイパーリンクを選択するために移動体ブラウザを使用する場合に基づく。しかしながら、本発明の異なる実施形態を、ユーザがタッチ・スクリーン・ディスプレイ上で選択をすることを必要とする他の移動体装置に適用することができることに留意すべきである。従って、本発明の範囲は、移動体ブラウザに限定されず、選択可能なテキスト・オブジェクトを表示するいかなるユーザ・インターフェースをも包含する。
動作中、タッチ・スクリーン・ディスプレイを有する移動体ブラウザは、先ずウェブページの内容を受信し、次にタッチ・スクリーン上にウェブページの内容をレンダリングして表示する。ウェブページは、ユーザがさらなる選択をするための複数のハイパーリンクを含むことが多い。ユーザがハイパーリンクの選択をする従来の方法は、指の先又はスタイラスでハイパーリンク・テキスト上をタッピングすることである。片手操作においては、ユーザは、しばしば移動体ブラウザを片手で保持し、ハイパーリンクを選択するためにタッチ・スクリーンをタッピングするために、この保持している手の親指を使用する。しかしながら、タッチ・スクリーンに表示されるハイパーリンクは、相互に非常に近接していることが多く、ユーザが所望のハイパーリンクを正確にタッピングするのは困難となる。例えば、図1(a)に示すように、ハイパーリンク101及び102は、互いにすぐ近くに隣接する。所望の選択がハイパーリンク102である場合に、ユーザがハイパーリンク101を偶然に選択してしまうことを避けるのは非常に難しい。
本発明の一実施形態は、移動体ブラウザのハイパーリンク選択の精度を改善し、それゆえにユーザが片手で移動体ブラウザを操作することを可能にする方法を提供する。ハイパーリンク全体の画像をタッピングする代わりに、ユーザはタッチ・スクリーン上に定められたターゲット領域をタッピングするよう指示される。ターゲット領域はハイパーリンク・テキストの一部とすることもできるし、あるいはハイパーリンク・テキストの外部とすることもできる。各ターゲットは、特定のハイパーリンクと関連付けられ、他のターゲットから実質的に分離している。従って、ユーザが指でターゲットをタッピングするときに、ターゲット間の実質的距離により、比較的容易で正確な選択を保証することができる。このことは、ユーザのタッピングが意図するターゲットをわずかに外した場合でさえ当てはまる。所望のターゲットがタッピングに最も近いターゲットである限りは、正しいハイパーリンクの選択が行われることになる。精度の改善に加えて、ターゲット間の距離の増大は、有効ターゲット・サイズの拡大をもたらすことができ、それにより、ユーザがウェブページをより速くナビゲートすることを可能にする。
本発明の別の実施形態は、タッチ・スクリーンの表面上で(ジェスチャを使用して)指をスライドすることによってハイパーリンクを選択するように、ユーザに示唆する方法を提供する。ハイパーリンクは、接触の開始中心及び指のスライド方向の両方に基づいて選択される。ジェスチャは、タッチ・スクリーン上の一回のタッピングと比較して、ユーザの意図についてより多くの情報を提供できるので、ジェスチャの使用よるハイパーリンクの選択は有利である。例えば、ジェスチャの方向を伴う持続時間は、曖昧さをより少なくして、ユーザの所望の選択についての情報を提供することができる。
図2は、ユーザが、既定のターゲットをタッピングすることによってハイパーリンクを選択し、ターゲットがハイパーリンクのテキストの一部である、一実施形態の例を提示する。この例においては、各ハイパーリンクの1つの特定の文字が、そのハイパーリンクに関連付けられたターゲットとして選択される。ターゲット文字の位置を示すために、ハイパーリンク・テキストの残りの部分から区別するための異なる視覚方式を用いることができる。そのような視覚方式の例は、選択された文字の色及び/又はフォントを変えることを含むが、それらに限定されない。
図2に示す例において、ハイパーリンクの最初の文字及び最後の文字が、ターゲットとして交互に選択される。例えば、文字「W」がハイパーリンク200のターゲット201として選択され、文字「d」がハイパーリンク210のターゲット211として選択される。他の選択される文字は、文字221、222、223、224及び225を含む。もしユーザがハイパーリンク210を選択しようと思うなら、そのユーザは、ハイパーリンク210の別の部分の画像をタッピングする代わりに、ターゲット211、つまり文字「d」の上をタッピングする必要がある。その結果として、ターゲット201と211との間の分離は、ハイパーリンク200と210の画像の分離よりかなり大きく、それゆえ、ユーザがより正確な選択をすることを可能にする。図2に示すように、ユーザの指230が、かなりの量でターゲット211を外れて、隣のハイパーリンク200をタッピングした場合でさえ、そのタッピングに一番近いターゲットがターゲット211である限りは、正しいハイパーリンク210が選択されることになる。
ターゲットはハイパーリンク・テキストの一部なので、ターゲットをハイパーリンクの残りの部分から区別することによって、ユーザにターゲットの位置を気付かせることが重要である。これは、通常、ターゲット文字をハイパーリンクの残りの部分から視覚的に区別することによって行われる。本発明の一実施形態においては、ターゲット文字の位置を示すために、カラー方式が使用される。例えば、ターゲット文字を、ハイパーリンクの残りの部分とは異なる色で表示することができる。ハイパーリンクが青で表示される標準的な場合では、ターゲット文字は、緑のような、青以外の色で表示されることができる。図2に示されるように、全てのハイパーリンクは青で表示され、全てのターゲット文字201、211及び221−225は緑で表示される。代替的なカラー方式は、ターゲット文字の背景色を変えて、それによりハイパーリンクの残りの部分から区別することである。さらに他のカラー方式は、ターゲット文字に対して、より濃い背景色を使用して、ターゲット文字から離れるにつれて透過的にするようなカラー・グラデーションを適用する(図10参照)。このカラー方式の使用は、ウェブページの外見をほとんど変えないので有利である。
ターゲット文字を区別する他の視覚的機構は、ターゲット文字をボールド体フォント又はイタリック体フォントで表示するような、フォントの変更を含む。さらに、ターゲット文字をハイパーリンク・テキストの残りの部分から区別するために、枠(box)又は円を用いてターゲット文字を囲むことができる。
本発明の一実施形態においては、ターゲット文字は、ターゲット文字間の相対距離に基づいて選択される。どの文字がターゲットとして選択されるべきかを算出するために、多数のアプローチを用いることができる。
図3は、全てのハイパーリンク対してターゲット文字を選択するための例示的なプロセスを示す。ステップ300において、ハイパーリンクを含むウェブページの内容が受信される。システムは、次に、あらゆるハイパーリンクのあらゆる文字の位置を検出する(ステップ302)。システムは、さらに、あらゆるリンクのあらゆる文字について、あらゆる他のリンクのあらゆる他の文字に対する距離を算出する(ステップ304)。次に、システムは、算出された距離を使用して、選択される文字間の距離を最大にする、ハイパーリンク毎に1つの文字の選択を求める(ステップ306)。
別のアプローチを図4に示す。動作中、システムは、ハイパーリンクを含むウェブページの内容を受信する(ステップ400)。システムは、次に、ターゲットを十分に区別する閾値を設定する(ステップ402)。サーチをより効率的にするために、リンク毎の文字の部分集合のみを考慮する。文字の部分集合は、ハイパーリンクの文字の一部又は全部であり得ることに留意されたい。システムは、さらに、ハイパーリンク毎に1つの部分集合を選択する(ステップ404)。部分集合内の文字の例は、最初及び最後の地点、中間点、3分の1及び3分の2地点等のような、極端な(extreme)位置の文字を含む。次に、システムは、あらゆる部分集合のあらゆる文字から、他のあらゆる部分集合の他のあらゆる文字までの距離を算出する(ステップ406)。理想的には、システムは、閾値に対して距離基準値(distance metric)の限度を定める(cap)(ステップ408)。閾値に対する距離基準値の限度を定めることによって、システムは、相互に近接しているが他の遠いターゲットからはさらに遠く離れている文字を選択することによってシステムが全体の距離を最大にするという、望ましく無い状況を回避することができる。最後に、システムは、算出された距離を使用して、選択される文字間の距離を最大にする、ハイパーリンク毎に1つの文字の選択を求める(ステップ410)。サーチ効率を向上させるために、システムは、もし2つのハイパーリンクが相互に十分に離れているなら、その2つのハイパーリンクはユーザによって簡単に区別できるので、その2つのハイパーリンクの文字間の距離を算出しないという選択をすることができることに留意されたい。
図5は、文字を選択するためのさらに別のアプローチを示す。ハイパーリンクを含むウェブページの内容が受信され(ステップ500)、ターゲットを十分に区別する閾値が設定される(ステップ502)。システムは、各ハイパーリンクにつき1文字をランダムに選択し(ステップ504)、選択された文字間の距離を算出する(ステップ506)。理想的には、システムは、閾値によって、算出される距離基準値の限度を定める(ステップ508)。続いて、システムは、限度を定めて算出された距離の合計が収束又は減少したかどうかをチェックする(ステップ510)。もしそうなら、動作は終了する。そうでない場合は、システムは、限度を定めて算出された距離の合計を増大させることが期待される調整を行い(ステップ512)、反復を続ける(ステップ506)。
ハイパーリンクに関連付けられたターゲット間の相対距離を最適化するための上記プロセスは、例示的な目的のためにのみ提示されると言うことは留意されるべきである。他の多くの一般的な目標の最適化方法を適用することもできる。
本発明のさらなる実施形態は、ハイパーリンク全体を1ターゲットとして扱うことであり、ユーザは、ハイパーリンク・テキスト上をタッピングする従来の方法を用いて、ハイパーリンクを選択する。しかしながら、ハイパーリンクのテキストは、ハイパーリンクが相互に近接しないような仕方でリフローされる。この技術によって、ウェブページを、従来のディスプレイ上に、まさに通常のウェブページのように現れる仕方で表示させることが可能となる。
図6は、ターゲットが追加的図形要素によって表示される、本発明の別の実施形態を示す。ハイパーリンクのターゲット領域は、ターゲット601及び611のように、ハイパーリンクのテキストから離れて配置される。これらのターゲットは、相互に十分に分離するような仕方で配置される。ターゲットの位置は、図形要素を有する透明な層をウェブページの上にオーバーレイすることによって示される。各ターゲットは、1つの特定のハイパーリンクと関連付けられる。それゆえ、ハイパーリンクの画像上をタッピングする代わりに、このシステムは、ユーザが所望のハイパーリンクから離れたターゲット上をタッピングするように示唆する。例えば、ターゲット601及び611は、それぞれハイパーリンク600及び610に関連付けられる。もしユーザがハイパーリンク610を選択することを望むなら、ユーザは、ハイパーリンク・テキスト610上をタッピングする代わりに、ターゲット611の上又は近くをタッピングすることになる。ハイパーリンク600及び610は相互に非常に近接しているが、ターゲット601及び611は実質的に分離しており、ユーザがターゲット上をタッピングすること、つまりはハイパーリンクを正確に選択することをより容易にすることに留意されたい。一実施形態においては、レイアウトの混雑を避けるために、ターゲットは通常の条件下では目に見えない。ユーザがハイパーリンクを選択しようとするとき、ユーザは、物理的相互作用によってターゲットの表示をトリガすることができる。そのような物理的相互作用の例は、装置上のボタンを押す、装置を振る又は傾ける、画面上の1つ又は2つの特定の地点に触れる、あるいは、静電容量型センサを有するタッチ・スクリーンの場合には、1つ又はそれ以上の指を画面の上方の空中に止める(poise)ことを含むが、それらに限定されることは無い。全てのハイパーリンクに対して外部ターゲットを提供することが必要なわけではないことに留意されたい。一実施形態においては、他のハイパーリンクによって十分に込み合っているリンクのみに外部ターゲット位置が割り当てられるが、一方、他のリンクは従来の方法で選択することができる。
図7は、ジェスチャに基づいてハイパーリンクを選択する一例を示す。ターゲット上をタッピングする代わりに、このシステムは、ハイパーリンクを選択するためにジェスチャが必要であることをユーザに示唆する。ジェスチャを行うために、ユーザは、先ず指先をタッチ・スクリーンの表面上に置き、次にある方向に指先をスライドさせる。ジェスチャは、ユーザの意図についての情報を、タッチ・スクリーンの表面上を単にタッピングするよりももっと多く提供できるので、ジェスチャに基づいてハイパーリンクを選択することは有利である。システムは、ユーザの意図を判断するために、接触の開始中心、ジェスチャの持続時間、及びジェスチャの方向のような情報を用いることができる。図7に示される例において、ユーザは、指先をハイパーリンクの一方の端から他方の端へドラッグすることによって、ハイパーリンクを選択する。例えば、ユーザは、指701を、文字「W」のあるハイパーリンク700の一方の端から、文字「e」のあるハイパーリンク700の他方の端へドラッグすることによって、ハイパーリンク700を選択することができる。ドラッグが、2つの隣接するハイパーリンク700及び710の間で行ったり来たりふらついたとしても、ジェスチャの持続時間又は長さを用いて、これらの2つのハイパーリンクの選択を区別することができる。ユーザは、ハイパーリンク710を選択するために、ハイパーリンク710の「7」と「d」との間で指先をドラッグすることもできることに留意されたい。
図8は、ユーザが、複数のハイパーリンクに渡ってジェスチャすることによって1つのハイパーリンクを選択する、ジェスチャに基づいてハイパーリンクを選択する別の例を示す。結果として、横切られた最小のハイパーリンクが選択される。図8に示される例においては、指先801は、ハイパーリンク800及び810に渡ってドラッグされる。ハイパーリンク810はハイパーリンク800と比べて短いテキストラインを有するので、ハイパーリンク810が選択されることになる。
図9は、ユーザが、先ずハイパーリンクの中心地点をタッピングし、次にその指を最も近いハイパーリンクの中心から最も離れた方向にわずかにスライドさせることによってハイパーリンクを選択する、ジェスチャに基づいてハイパーリンクを選択するさらに別の例を示す。例えば、ユーザは、先ず指先をハイパーリンク900の中心に置き、次に、上方向が最も近接するハイパーリンク910の中心から離れる向きなので、指を上方向にスライドさせることによってハイパーリンク900を選択する。一実施形態において、システムは、ジェスチャを、スタート中心よりもユーザの望むハイパーリンクについてのより多くの情報をもつものとして扱うように構成される。例えば、もしユーザがハイパーリンク910を選択したいと望むなら、ユーザは、先ず、ハイパーリンク910の中心をタッピングし、次に、右方向がハイパーリンク900及び920の中心から離れる向きなので、接触を右方向へロールさせる。ユーザは、ハイパーリンク910の中心をはずし、代わりにハイパーリンク900の中心をタッピングするかもしれないが、接触地点が右にロールされる限り、ハイパーリンク910が選択されることになる。ある状況の下では、例えばその中心がハイパーリンク920と940との間でだいたい直線的に中心に置かれている(linertly centered)ハイパーリンク930の選択のように、ジェスチャ方向の曖昧さがあるかもしれない。この場合には、ハイパーリンク930を選択するために、ユーザは、接触地点を、上及び右へ、又は下及び左へ、のどちらかにロールさせる必要がある。
ユーザがジェスチャに基づいてハイパーリンクを選択するのを補助するために、システムは、タッチ・スクリーンに各ハイパーリンクのための推奨されるジェスチャ方向が表示されるように構成することができる。本発明の一実施形態は、図9に示されるように、推奨される方向を示すためにアイコンを使用する。ハイパーリンク900と重なった、上方向を指す尖った先端を有するアイコン901は、ハイパーリンク900を選択するために上方向ジェスチャが必要であることを示唆する。同様に、右を指す尖った先端を有するアイコン911は、ユーザが、ハイパーリンク910を選択するために指を右にロールさせる(又はスライドさせる)ことができることを示唆する。各ハイパーリンクのための予め定められたジェスチャ方向は、ジェスチャ方向の曖昧さの問題を回避する。さらなる実施形態においては、ジェスチャ方向示唆アイコンは、ハイパーリンクを覆い隠さない。図9に示すように、ハイパーリンクのテキストと重なるよりむしろ、もしスペースがあるなら、アイコンは、ハイパーリンクの後に現れることができる。あるいは、移動体ブラウザは、ウェブページの一般的なレイアウトを妨げない方法で、これらのアイコンを付加することができる。すなわち、ウェブページは、あたかもアイコンが無いかのように、ブラウザによって最初にレンダリングされ、次に、レンダリングが済んだ後でアイコンが付加される。この方法で、ウェブページの作成者は、ハイパーリンクがスマートな選択のためのこの追加的機能を有するか否かにかかわらず、ハイパーリンクが、どのブラウザに対しても配置されることが期待される方法で配置されることに、依然として頼ることができる。
図10は、システムがハイパーリンクの選択の仕方を示すためにカラー・グラデーションを使用する、本発明の別の実施形態を示す。2つの選択肢がここに示されている。第一の選択肢は、ユーザがハイパーリンクを選択するために直接タッピングできる場所(例えば、より暗い背景色を有する部分のタッピング)を示すために、カラー方式が使用される。例えば、ユーザは、ハイパーリンク1000を選択するために、濃い紫色の背景を有する地点1001又はその周辺を直接タッピングすることができる。別の選択肢は、ジェスチャ方向(例えば、より濃い背景の位置から始めて、より濃い背景の位置からより薄い色の背景の位置へ指をドラッグする)を示すために、カラー・グラデーションを使用する。例えば、ユーザは、ハイパーリンク1010を選択するために、濃い紫色の背景を有する地点1011から、薄いピンク色の背景を有する地点1012まで、指をドラッグするように指示される。
スタート地点及びドラッグの長さの組み合わせに基づいてハイパーリンクを選択することは、選択の曖昧さをより少なくする。例えば、ハイパーリンク1010及び1020のスタート地点は相互に非常に近接しており、それゆえ、スタート地点の単なるタッピングでは、容易に誤選択という結果になることがある。しかしながら、カラー・グラデーションによって示唆されるように、ユーザは、ハイパーリンク1010を選択するためには、さらに右方向へ指をドラッグするように指示されるので、これが、ユーザのハイパーリンク1020の選択を明確に示す。図10は、水平のグラデーションのみを示すが、カラー・グラデーションは、水平又は垂直のどちらであってもよいことに留意されたい。本発明に組み込むことができる別の技術は、異なるジェスチャの方向を示すために、異なる色を使用することを含む。例えば、水平方向のジェスチャは、図10に示すように、紫からピンクのような1つのカラー・グラデーション方式を用いることができ、垂直方向のジェスチャは、紫色から緑色のような別のカラー・グラデーション方式を用いることができる。異なるジェスチャの向きに対して異なるカラー・グラデーション方式を用いることは、ユーザが左右と上下の間の区別をすることをより容易にする。このことは、ユーザが、ほんの数個の文字しか持たないハイパーリンクを選択しているときには特に有用である。カラー・グラデーションは、テキストの単一ライン内にはっきりとした色の違いを有する他の技術よりも判読しやすいウェブページになるので、有利である。
ジェスチャ方向指示アイコン及び/又はカラー・グラデーションの表示は、時としてウェブページの内容の読み取りを妨害することがある。それゆえ、ユーザがそれらの特徴を出現させる物理的相互作用を実行しない限り、これらの特徴を隠しておくことが望ましい。例えば、ユーザが1つの特定の地点又は2つの表面地点に触れたとき、又はユーザの手が画面上方の空中で止められたときを検出する装置には、静電容量型センサを装備することができる。代替的な物理的相互作用の方法は、加速度計の傾斜(accelerometer tilt)を組み込むことであり、この場合、ユーザが装置を振るとアイコン又はカラー・グラデーションの表示が起動する。さらに、ユーザは、アイコンの出現をトリガするために、装置上のボタンを単に押すこともできる。アイコンの出現をトリガするための他の物理的相互作用もまた可能であることに留意されたい。
上述のように、システムがウェブレイアウトを調整することによってハイパーリンク・ターゲットの精度を改善することができる、多数の方法がある。それゆえ、ウェブページ作成者が異なる方式の中から選択することを可能にする方法で、システムを構成することが望ましい。例えば、ウェブページ作成者は、ユーザにハイパーリンクの選択の仕方を視覚的に示唆するためにはどのようにページが修正されるべきかを示すために、ハイパーテキスト・マークアップ言語(HTML)、又は他のマークアップ言語の中にヒントを含めることができる。ウェブページ作成者は、自分が(図2及び図6−図10に示される技術のような)どの特定の技術を好むかということ、及び/又は技術の詳細を示すことができる。例えば、もしウェブページ作成者が図2に示される技術を使用することを選択するなら、作成者は、どの文字をターゲットとして使用すべきかを示すことができる。あるいは、もしウェブページ作成者が、図9に示される技術を選択するなら、作成者は、各ハイパーリンクが有すべきジェスチャ方向、及び/又はジェスチャ方向指示アイコンが出現すべき場所を示すことができる。
ハイパーリンク・ターゲットの精度を改善するための上記の技術は、本発明の実施形態の例にすぎないことに留意されたい。ハイパーリンク・ターゲットの精度を改善できる他の技術もまた可能である。
図11は、本発明の一実施形態による、ウェブレイアウト調整によってハイパーリンク・ターゲットの精度を改善するためのユーザ・インターフェースを有する、例示的なコンピュータ・システムを図示する。一実施形態において、コンピュータ及び通信システム1100は、出力装置及び入力装置の両方として働くタッチ・スクリーン・ディスプレイ1102と連結される。コンピュータ及び通信システム1100は、プロセッサ1104、メモリ1106、及び記憶装置1108を含む。
記憶装置1108は、ウェブブラウザ・アプリケーション1116、並びにアプリケーション1120及び1122のような他のアプリケーションを格納する。一実施形態において、ウェブブラウザ・アプリケーション1116は、さらに、片手操作を支持するユーザ・インターフェース1118を促進し、かつ1つ又はそれ以上の上記の方法を用いた向上したリンク選択精度でユーザを促進するプログラムを含む。
動作中、ウェブブラウザ・アプリケーション1116は、記憶装置1108からメモリ1106に読み込まれ、次にプロセッサ1104によって実行される。プログラムを実行している間、プロセッサ1104は、上記の機能を実行する。
(a)−(c)は、それぞれ、小、中及び大のフォント・サイズで移動体ブラウザ上に表示されたウェブページのスクリーンショットを示す。(d)は、ターゲットを正確に選択するための典型的な最小限のターゲットの大きさを示す。 本発明の一実施形態に従う、ハイパーリンクの一部である文字に基づくリンク・ターゲットの例を示す。 本発明の一実施形態に従う、文字をその相対距離に基づいて選択するプロセスを表すフローチャートを示す。 本発明の別の実施形態に従う、文字をその相対距離に基づいて選択するプロセスを表すフローチャートを示す。 本発明の第3の実施形態に従う、文字をその相対距離に基づいて選択するプロセスを示すフローチャートを示す。 本発明の一実施形態に従う、ターゲットの位置を示すために図形要素を使用する例を示す。 本発明の一実施形態に従う、ハイパーリンクを選択するためにジェスチャを用いる例を示す。 本発明の別の実施形態に従う、ハイパーリンクを選択するためにジェスチャを用いる例を示す。 本発明の一実施形態に従う、ジェスチャ方向を示すためにジェスチャ方向指示アイコンを用いる例を示す。 本発明の一実施形態に従う、ハイパーリンクの選択の仕方を示すためにカラー・グラデーションを使う例を示す。 本発明の一実施形態に従う、ウェブレイアウト調整によってハイパーリンク・ターゲットの精度を改善するための、ウェブブラウザ用のユーザ・インターフェースを有する例示的なコンピュータ・システムを示す。
符号の説明
110、120、130、140:タッチ・スクリーン・ディスプレイ
101、102、131、132、200、210、600、610、700、710、800、810、900、910、920、930、940、1000、1010、1020:ハイパーリンク
141、142、143:ボタン
201、211、221、222、223、224、225、601、611:ターゲット
701、801:指
901、911:アイコン

Claims (1)

  1. タッチ・スクリーン・ディスプレイを有する移動体装置のリンク・ターゲット精度を改善するための方法であって、
    前記タッチ・スクリーン上に、複数の選択可能なテキスト・オブジェクトを含むページを表示し、
    1つのターゲットが1つの選択可能なテキスト・オブジェクトに関連付けられ、前記選択可能なテキスト・オブジェクトが前記ターゲットによってのみ起動できる、多数のターゲット領域を前記タッチ・スクリーン上に定め、
    前記ターゲット上をタッピングすることによって前記選択可能なテキスト・オブジェクトを選択することができることをユーザに示す、
    ステップを含み、前記ターゲットは他のターゲットから十分に分離しており、それにより、ユーザが実質的な精度で前記選択可能なテキスト・オブジェクトを選択することを可能にし、そして、前記ターゲットが、前記選択可能なテキスト・オブジェクトの一部であり、かつ前記選択可能なテキスト・オブジェクトの残りの部分から区別可能な1つ又はそれ以上の文字を含むことを特徴とする方法。
JP2008289871A 2007-11-19 2008-11-12 レイアウト調整によるタッチ・スクリーン移動体装置におけるリンク・ターゲット精度の改善 Expired - Fee Related JP5362328B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US11/986,177 US8294669B2 (en) 2007-11-19 2007-11-19 Link target accuracy in touch-screen mobile devices by layout adjustment
US11/986,177 2007-11-19

Publications (2)

Publication Number Publication Date
JP2009129449A JP2009129449A (ja) 2009-06-11
JP5362328B2 true JP5362328B2 (ja) 2013-12-11

Family

ID=40328396

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008289871A Expired - Fee Related JP5362328B2 (ja) 2007-11-19 2008-11-12 レイアウト調整によるタッチ・スクリーン移動体装置におけるリンク・ターゲット精度の改善

Country Status (3)

Country Link
US (1) US8294669B2 (ja)
EP (1) EP2077493A3 (ja)
JP (1) JP5362328B2 (ja)

Families Citing this family (241)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8645137B2 (en) 2000-03-16 2014-02-04 Apple Inc. Fast, language-independent method for user authentication by voice
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US8018440B2 (en) 2005-12-30 2011-09-13 Microsoft Corporation Unintentional touch rejection
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
KR20100040844A (ko) * 2007-07-11 2010-04-21 가부시키가이샤 아쿠세스 휴대 정보 단말기
KR20090024541A (ko) * 2007-09-04 2009-03-09 삼성전자주식회사 하이퍼링크 선택 방법 및 이를 이용하는 이동통신 단말기
CN101809531A (zh) * 2007-10-02 2010-08-18 株式会社爱可信 终端装置、链接选择方法以及显示程序
TW200923758A (en) * 2007-11-27 2009-06-01 Wistron Corp A key-in method and a content display method of an electronic device, and the application thereof
US10002189B2 (en) 2007-12-20 2018-06-19 Apple Inc. Method and apparatus for searching using an active ontology
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US8677285B2 (en) 2008-02-01 2014-03-18 Wimm Labs, Inc. User interface of a small touch sensitive display for an electronic data and communication device
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
US10496753B2 (en) 2010-01-18 2019-12-03 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US8169414B2 (en) * 2008-07-12 2012-05-01 Lim Seung E Control of electronic games via finger angle using a high dimensional touchpad (HDTP) touch user interface
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US20100097322A1 (en) * 2008-10-16 2010-04-22 Motorola, Inc. Apparatus and method for switching touch screen operation
US20100107067A1 (en) * 2008-10-27 2010-04-29 Nokia Corporation Input on touch based user interfaces
US20100107116A1 (en) * 2008-10-27 2010-04-29 Nokia Corporation Input on touch user interfaces
US8291348B2 (en) * 2008-12-31 2012-10-16 Hewlett-Packard Development Company, L.P. Computing device and method for selecting display regions responsive to non-discrete directional input actions and intelligent content analysis
US9658760B2 (en) * 2009-05-07 2017-05-23 Creative Technology Ltd. Methods for searching digital files on a user interface
US8836648B2 (en) 2009-05-27 2014-09-16 Microsoft Corporation Touch pull-in gesture
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US9858925B2 (en) 2009-06-05 2018-01-02 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
US10706373B2 (en) 2011-06-03 2020-07-07 Apple Inc. Performing actions associated with task items that represent tasks to perform
US9431006B2 (en) 2009-07-02 2016-08-30 Apple Inc. Methods and apparatuses for automatic speech recognition
TWI407339B (zh) * 2009-08-06 2013-09-01 Htc Corp 追蹤觸控面板上碰觸輸入之移動軌跡的方法與電腦程式產品及其相關電子裝置
KR101478416B1 (ko) * 2009-12-28 2014-12-31 모토로라 모빌리티 엘엘씨 입력 제스처들을 사용해서 터치 스크린에서 객체들을 연관시키는 방법들
US20110167350A1 (en) * 2010-01-06 2011-07-07 Apple Inc. Assist Features For Content Display Device
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US10705794B2 (en) 2010-01-18 2020-07-07 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US10679605B2 (en) 2010-01-18 2020-06-09 Apple Inc. Hands-free list-reading by intelligent automated assistant
US10553209B2 (en) 2010-01-18 2020-02-04 Apple Inc. Systems and methods for hands-free notification summaries
US20110185299A1 (en) * 2010-01-28 2011-07-28 Microsoft Corporation Stamp Gestures
US20110185320A1 (en) * 2010-01-28 2011-07-28 Microsoft Corporation Cross-reference Gestures
US8261213B2 (en) 2010-01-28 2012-09-04 Microsoft Corporation Brush, carbon-copy, and fill gestures
US9411504B2 (en) 2010-01-28 2016-08-09 Microsoft Technology Licensing, Llc Copy and staple gestures
US20110191704A1 (en) * 2010-02-04 2011-08-04 Microsoft Corporation Contextual multiplexing gestures
US9519356B2 (en) 2010-02-04 2016-12-13 Microsoft Technology Licensing, Llc Link gestures
CN102844732A (zh) 2010-02-18 2012-12-26 罗姆股份有限公司 触摸板输入装置
JP2011197848A (ja) * 2010-03-18 2011-10-06 Rohm Co Ltd タッチパネル入力装置
US8799827B2 (en) 2010-02-19 2014-08-05 Microsoft Corporation Page manipulations using on and off-screen gestures
US20110209098A1 (en) * 2010-02-19 2011-08-25 Hinckley Kenneth P On and Off-Screen Gesture Combinations
US9965165B2 (en) 2010-02-19 2018-05-08 Microsoft Technology Licensing, Llc Multi-finger gestures
US9310994B2 (en) 2010-02-19 2016-04-12 Microsoft Technology Licensing, Llc Use of bezel as an input mechanism
US9367205B2 (en) 2010-02-19 2016-06-14 Microsoft Technolgoy Licensing, Llc Radial menus with bezel gestures
US9274682B2 (en) 2010-02-19 2016-03-01 Microsoft Technology Licensing, Llc Off-screen gestures to create on-screen input
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US9075522B2 (en) 2010-02-25 2015-07-07 Microsoft Technology Licensing, Llc Multi-screen bookmark hold gesture
US9454304B2 (en) 2010-02-25 2016-09-27 Microsoft Technology Licensing, Llc Multi-screen dual tap gesture
US8707174B2 (en) 2010-02-25 2014-04-22 Microsoft Corporation Multi-screen hold and page-flip gesture
US20110209089A1 (en) * 2010-02-25 2011-08-25 Hinckley Kenneth P Multi-screen object-hold and page-change gesture
US8751970B2 (en) 2010-02-25 2014-06-10 Microsoft Corporation Multi-screen synchronous slide gesture
US20110209058A1 (en) * 2010-02-25 2011-08-25 Microsoft Corporation Multi-screen hold and tap gesture
US9262041B2 (en) 2010-03-16 2016-02-16 Nokia Technologies Oy Methods and apparatus for determining a selection region
US8131898B2 (en) * 2010-05-27 2012-03-06 Adobe Systems Incorporated Event handling in an integrated execution environment
CN102339197A (zh) * 2010-07-26 2012-02-01 鸿富锦精密工业(深圳)有限公司 具有日期和时间调整功能的嵌入式系统及其调整方法
JP5039868B2 (ja) * 2010-08-16 2012-10-03 楽天株式会社 ウェブ管理装置、ウェブ管理方法、ウェブ管理プログラム、そのプログラムを記録するコンピュータ読み取り可能な記録媒体、及びウェブシステム
CN103140826B (zh) * 2010-09-22 2016-10-05 日本电气株式会社 信息终端装置以及触控面板的显示方法
US10503255B2 (en) * 2010-12-02 2019-12-10 Immersion Corporation Haptic feedback assisted text manipulation
US20120159395A1 (en) 2010-12-20 2012-06-21 Microsoft Corporation Application-launching interface for multiple modes
US8689123B2 (en) 2010-12-23 2014-04-01 Microsoft Corporation Application reporting in an application-selectable user interface
US8612874B2 (en) 2010-12-23 2013-12-17 Microsoft Corporation Presenting an application change through a tile
KR101838696B1 (ko) * 2011-01-24 2018-04-26 삼성전자주식회사 터치스크린 기반 웹브라이저 환경에서 링크 개체 선택 방법 및 장치
US20120233545A1 (en) * 2011-03-11 2012-09-13 Akihiko Ikeda Detection of a held touch on a touch-sensitive display
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
JP5768457B2 (ja) * 2011-04-19 2015-08-26 ソニー株式会社 電子機器、表示方法及びプログラム
JP5853406B2 (ja) * 2011-04-25 2016-02-09 カシオ計算機株式会社 電子機器、アイコン表示方法、プログラム
US9104307B2 (en) 2011-05-27 2015-08-11 Microsoft Technology Licensing, Llc Multi-application environment
US9104440B2 (en) 2011-05-27 2015-08-11 Microsoft Technology Licensing, Llc Multi-application environment
US9658766B2 (en) 2011-05-27 2017-05-23 Microsoft Technology Licensing, Llc Edge gesture
US8893033B2 (en) 2011-05-27 2014-11-18 Microsoft Corporation Application notifications
US9158445B2 (en) 2011-05-27 2015-10-13 Microsoft Technology Licensing, Llc Managing an immersive interface in a multi-application immersive environment
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
EP3754997B1 (en) 2011-08-05 2023-08-30 Samsung Electronics Co., Ltd. Method for controlling electronic apparatus based on voice recognition and motion recognition, and electronic apparatus applying the same
WO2013022222A2 (en) * 2011-08-05 2013-02-14 Samsung Electronics Co., Ltd. Method for controlling electronic apparatus based on motion recognition, and electronic apparatus applying the same
US8994660B2 (en) 2011-08-29 2015-03-31 Apple Inc. Text correction processing
US20130057587A1 (en) 2011-09-01 2013-03-07 Microsoft Corporation Arranging tiles
US9146670B2 (en) 2011-09-10 2015-09-29 Microsoft Technology Licensing, Llc Progressively indicating new content in an application-selectable user interface
US9612670B2 (en) 2011-09-12 2017-04-04 Microsoft Technology Licensing, Llc Explicit touch selection and cursor placement
JP5836105B2 (ja) * 2011-12-20 2015-12-24 シャープ株式会社 情報処理装置、情報処理装置の制御方法、情報処理装置制御プログラムおよび該プログラムを記録したコンピュータ読み取り可能な記録媒体
US8860763B2 (en) 2012-01-31 2014-10-14 Xerox Corporation Reversible user interface component
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
US9483461B2 (en) 2012-03-06 2016-11-01 Apple Inc. Handling speech synthesis of content for multiple languages
US9122390B2 (en) * 2012-04-24 2015-09-01 Behaviometrics Ab Method, application and/or service to collect more fine-grained or extra event data from a user sensor device
US9280610B2 (en) 2012-05-14 2016-03-08 Apple Inc. Crowd sourcing information to fulfill user requests
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US8823667B1 (en) 2012-05-23 2014-09-02 Amazon Technologies, Inc. Touch target optimization system
US11269486B2 (en) * 2012-05-29 2022-03-08 Samsung Electronics Co., Ltd. Method for displaying item in terminal and terminal using the same
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
CN103514149B (zh) 2012-06-29 2017-03-22 国际商业机器公司 调整超链接的版面大小的装置和方法
US9495129B2 (en) 2012-06-29 2016-11-15 Apple Inc. Device, method, and user interface for voice-activated navigation and browsing of a document
WO2014024281A1 (ja) * 2012-08-08 2014-02-13 富士通株式会社 電子機器、表示制御方法及びプログラム
US9032335B2 (en) * 2012-08-14 2015-05-12 Christopher V. Beckman User interface techniques reducing the impact of movements
CN102830936A (zh) * 2012-09-02 2012-12-19 广州市渡明信息技术有限公司 一种移动设备的浏览方法及移动设备
US10162492B2 (en) 2012-09-11 2018-12-25 Microsoft Technology Licensing, Llc Tap-to-open link selection areas
US9547647B2 (en) 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
CN103309908A (zh) * 2012-10-09 2013-09-18 三亚中兴软件有限责任公司 链接显示方法及装置
US9582122B2 (en) 2012-11-12 2017-02-28 Microsoft Technology Licensing, Llc Touch-sensitive bezel techniques
US20140152593A1 (en) * 2012-12-03 2014-06-05 Industrial Technology Research Institute Method And System For Operating Portable Devices
US20140157199A1 (en) * 2012-12-05 2014-06-05 Qriously, Inc. Systems and Methods for Collecting Information with a Mobile Device and Delivering Advertisements Based on the Collected Information
EP2743812B1 (en) * 2012-12-14 2018-09-05 Orange Method for selecting a plurality of entries on a user interface
US9575653B2 (en) 2013-01-15 2017-02-21 Blackberry Limited Enhanced display of interactive elements in a browser
KR102516577B1 (ko) 2013-02-07 2023-04-03 애플 인크. 디지털 어시스턴트를 위한 음성 트리거
KR20140126800A (ko) * 2013-04-22 2014-11-03 한국전자통신연구원 키워드를 이용한 하이퍼링크 표시 장치 및 방법
WO2014197336A1 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
US9582608B2 (en) 2013-06-07 2017-02-28 Apple Inc. Unified ranking with entropy-weighted information for phrase-based semantic auto-completion
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
KR101922663B1 (ko) 2013-06-09 2018-11-28 애플 인크. 디지털 어시스턴트의 둘 이상의 인스턴스들에 걸친 대화 지속성을 가능하게 하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
US10394442B2 (en) 2013-11-13 2019-08-27 International Business Machines Corporation Adjustment of user interface elements based on user accuracy and content consumption
US10296160B2 (en) 2013-12-06 2019-05-21 Apple Inc. Method for extracting salient dialog usage from live data
US9477337B2 (en) 2014-03-14 2016-10-25 Microsoft Technology Licensing, Llc Conductive trace routing for display and bezel sensors
US9842101B2 (en) 2014-05-30 2017-12-12 Apple Inc. Predictive conversion of language input
US10078631B2 (en) 2014-05-30 2018-09-18 Apple Inc. Entropy-guided text prediction using combined word and character n-gram language models
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
WO2015184186A1 (en) 2014-05-30 2015-12-03 Apple Inc. Multi-command single utterance input method
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US9785630B2 (en) 2014-05-30 2017-10-10 Apple Inc. Text prediction using combined word N-gram and unigram language models
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US9760559B2 (en) 2014-05-30 2017-09-12 Apple Inc. Predictive text input
US11023655B2 (en) * 2014-06-11 2021-06-01 Microsoft Technology Licensing, Llc Accessibility detection of content properties through tactile interactions
KR102249745B1 (ko) 2014-06-20 2021-05-10 삼성전자 주식회사 전자 장치 및 이의 제어 방법
US10659851B2 (en) 2014-06-30 2020-05-19 Apple Inc. Real-time digital assistant knowledge updates
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US10446141B2 (en) 2014-08-28 2019-10-15 Apple Inc. Automatic speech recognition based on user feedback
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10789041B2 (en) 2014-09-12 2020-09-29 Apple Inc. Dynamic thresholds for always listening speech trigger
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US9646609B2 (en) 2014-09-30 2017-05-09 Apple Inc. Caching apparatus for serving phonetic pronunciations
US9886432B2 (en) 2014-09-30 2018-02-06 Apple Inc. Parsimonious handling of word inflection via categorical stem + suffix N-gram language models
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US10552013B2 (en) 2014-12-02 2020-02-04 Apple Inc. Data detection
US10152299B2 (en) 2015-03-06 2018-12-11 Apple Inc. Reducing response latency of intelligent automated assistants
US9865280B2 (en) 2015-03-06 2018-01-09 Apple Inc. Structured dictation using intelligent automated assistants
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9899019B2 (en) 2015-03-18 2018-02-20 Apple Inc. Systems and methods for structured stem and suffix language models
US9842105B2 (en) 2015-04-16 2017-12-12 Apple Inc. Parsimonious continuous-space phrase representations for natural language processing
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US11567721B2 (en) * 2015-06-03 2023-01-31 Oracle International Corporation Determining suitable values of parameters controlling display characteristics of elements of interactive pages
US10127220B2 (en) 2015-06-04 2018-11-13 Apple Inc. Language identification from short strings
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US10101822B2 (en) 2015-06-05 2018-10-16 Apple Inc. Language input correction
US10186254B2 (en) 2015-06-07 2019-01-22 Apple Inc. Context-based endpoint detection
US10255907B2 (en) 2015-06-07 2019-04-09 Apple Inc. Automatic accent detection using acoustic models
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
JP5906344B1 (ja) * 2015-07-06 2016-04-20 ヤフー株式会社 情報処理装置、情報表示プログラムおよび情報表示方法
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US9697820B2 (en) 2015-09-24 2017-07-04 Apple Inc. Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
US11010550B2 (en) 2015-09-29 2021-05-18 Apple Inc. Unified language modeling framework for word prediction, auto-completion and auto-correction
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
JP6078135B2 (ja) * 2015-10-16 2017-02-08 アンリツ株式会社 携帯端末試験装置
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
DK179588B1 (en) 2016-06-09 2019-02-22 Apple Inc. INTELLIGENT AUTOMATED ASSISTANT IN A HOME ENVIRONMENT
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK179049B1 (en) 2016-06-11 2017-09-18 Apple Inc Data driven natural language event detection and classification
DK179343B1 (en) 2016-06-11 2018-05-14 Apple Inc Intelligent task discovery
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
US11281993B2 (en) 2016-12-05 2022-03-22 Apple Inc. Model and ensemble compression for metric learning
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
US11204787B2 (en) 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
US10417266B2 (en) 2017-05-09 2019-09-17 Apple Inc. Context-aware ranking of intelligent response suggestions
DK201770383A1 (en) 2017-05-09 2018-12-14 Apple Inc. USER INTERFACE FOR CORRECTING RECOGNITION ERRORS
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
DK201770439A1 (en) 2017-05-11 2018-12-13 Apple Inc. Offline personal assistant
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK201770427A1 (en) 2017-05-12 2018-12-20 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
DK201770432A1 (en) 2017-05-15 2018-12-21 Apple Inc. Hierarchical belief states for digital assistants
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
DK179560B1 (en) 2017-05-16 2019-02-18 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
US10311144B2 (en) 2017-05-16 2019-06-04 Apple Inc. Emoji word sense disambiguation
US10403278B2 (en) 2017-05-16 2019-09-03 Apple Inc. Methods and systems for phonetic matching in digital assistant services
US20180336275A1 (en) 2017-05-16 2018-11-22 Apple Inc. Intelligent automated assistant for media exploration
US10657328B2 (en) 2017-06-02 2020-05-19 Apple Inc. Multi-task recurrent neural network architecture for efficient morphology handling in neural language modeling
US10521106B2 (en) 2017-06-27 2019-12-31 International Business Machines Corporation Smart element filtering method via gestures
US10445429B2 (en) 2017-09-21 2019-10-15 Apple Inc. Natural language understanding using vocabularies with compressed serialized tries
US10755051B2 (en) 2017-09-29 2020-08-25 Apple Inc. Rule-based natural language processing
US10636424B2 (en) 2017-11-30 2020-04-28 Apple Inc. Multi-turn canned dialog
US10733982B2 (en) 2018-01-08 2020-08-04 Apple Inc. Multi-directional dialog
US10733375B2 (en) 2018-01-31 2020-08-04 Apple Inc. Knowledge-based framework for improving natural language understanding
US10789959B2 (en) 2018-03-02 2020-09-29 Apple Inc. Training speaker recognition models for digital assistants
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US10909331B2 (en) 2018-03-30 2021-02-02 Apple Inc. Implicit identification of translation payload with neural machine translation
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US10984780B2 (en) 2018-05-21 2021-04-20 Apple Inc. Global semantic word embeddings using bi-directional recurrent neural networks
US11386266B2 (en) 2018-06-01 2022-07-12 Apple Inc. Text correction
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
DK179822B1 (da) 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
DK201870355A1 (en) 2018-06-01 2019-12-16 Apple Inc. VIRTUAL ASSISTANT OPERATION IN MULTI-DEVICE ENVIRONMENTS
US10944859B2 (en) 2018-06-03 2021-03-09 Apple Inc. Accelerated task performance
DE102018113615A1 (de) * 2018-06-07 2019-12-12 Nicolas Bissantz Verfahren zur Darstellung von Daten auf einem mobilen Endgerät
US11010561B2 (en) 2018-09-27 2021-05-18 Apple Inc. Sentiment prediction from textual data
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
DK180129B1 (en) 2019-05-31 2020-06-02 Apple Inc. USER ACTIVITY SHORTCUT SUGGESTIONS
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
US11119647B2 (en) 2019-08-30 2021-09-14 International Business Machines Corporation Detecting gesture struggle
WO2021056255A1 (en) 2019-09-25 2021-04-01 Apple Inc. Text detection using global geometry estimators

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5119079A (en) * 1990-09-17 1992-06-02 Xerox Corporation Touch screen user interface with expanding touch locations for a reprographic machine
US5757358A (en) * 1992-03-31 1998-05-26 The United States Of America As Represented By The Secretary Of The Navy Method and apparatus for enhancing computer-user selection of computer-displayed objects through dynamic selection area and constant visual feedback
US7084859B1 (en) * 1992-09-18 2006-08-01 Pryor Timothy R Programmable tactile touch screen displays and man-machine interfaces for improved vehicle instrumentation and telematics
US5491494A (en) * 1993-11-19 1996-02-13 International Business Machines Corporation Pick correlation
JP3546337B2 (ja) 1993-12-21 2004-07-28 ゼロックス コーポレイション 計算システム用ユーザ・インタフェース装置及びグラフィック・キーボード使用方法
US5745099A (en) * 1995-12-18 1998-04-28 Intergraph Corporation Cursor positioning method
US6049326A (en) * 1997-05-12 2000-04-11 Siemens Information And Communication Networks, Inc. System and method for dual browser modes
US6874122B1 (en) * 1998-01-15 2005-03-29 International Business Machines Corporation Computer system, program product and method of adjusting the display positions of hypertext links to modify the relative alignment thereof
US7614008B2 (en) * 2004-07-30 2009-11-03 Apple Inc. Operation of a computer with touch screen interface
US8479122B2 (en) * 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
US7844914B2 (en) * 2004-07-30 2010-11-30 Apple Inc. Activating virtual keys of a touch-screen virtual keyboard
US6374272B2 (en) * 1998-03-16 2002-04-16 International Business Machines Corporation Selecting overlapping hypertext links with different mouse buttons from the same position on the screen
US6559833B2 (en) * 1998-10-01 2003-05-06 Hewlett-Packard Development Company Apparatus and method for achieving absolute and relative positioning of a graphics cursor
US6643824B1 (en) * 1999-01-15 2003-11-04 International Business Machines Corporation Touch screen region assist for hypertext links
US7750891B2 (en) * 2003-04-09 2010-07-06 Tegic Communications, Inc. Selective input system based on tracking of motion parameters of an input device
JP3477675B2 (ja) * 1999-06-04 2003-12-10 インターナショナル・ビジネス・マシーンズ・コーポレーション ポインタ操作の補助方法
GB2352154B (en) * 1999-07-16 2003-08-27 Ibm Automatic target enlargement for simplified selection
US6567070B1 (en) * 1999-08-10 2003-05-20 Intel Corporation Selection of objects in a graphical user interface
US7076743B2 (en) * 2000-05-04 2006-07-11 I-Lor, Llc Method for adding a plurality of user selectable functions to a hyperlink
US6925496B1 (en) * 2000-06-16 2005-08-02 I-Lor, Llc Method of enhancing hyperlinks by adding user selectable functions to hyperlinks for capturing displayable elements and the url associated with the hyperlinks and displaying a link snapshot based on the hyperlink
US7496831B2 (en) * 2001-02-22 2009-02-24 International Business Machines Corporation Method to reformat regions with cluttered hyperlinks
US7047503B1 (en) 2001-03-28 2006-05-16 Palmsource, Inc. Method and apparatus for the selection of records
JP2004118484A (ja) 2002-09-26 2004-04-15 Toshiba Corp リンク表示位置変更方法、リンク表示位置変更プログラム、文書表示装置、入出力装置及び計算機
US20060242607A1 (en) 2003-06-13 2006-10-26 University Of Lancaster User interface
US7603633B2 (en) 2006-01-13 2009-10-13 Microsoft Corporation Position-based multi-stroke marking menus
TWI328185B (en) 2006-04-19 2010-08-01 Lg Electronics Inc Touch screen device for potable terminal and method of displaying and selecting menus thereon
KR20100040844A (ko) 2007-07-11 2010-04-21 가부시키가이샤 아쿠세스 휴대 정보 단말기
US8122384B2 (en) 2007-09-18 2012-02-21 Palo Alto Research Center Incorporated Method and apparatus for selecting an object within a user interface by performing a gesture

Also Published As

Publication number Publication date
US20090128505A1 (en) 2009-05-21
US8294669B2 (en) 2012-10-23
EP2077493A2 (en) 2009-07-08
JP2009129449A (ja) 2009-06-11
EP2077493A3 (en) 2010-12-15

Similar Documents

Publication Publication Date Title
JP5362328B2 (ja) レイアウト調整によるタッチ・スクリーン移動体装置におけるリンク・ターゲット精度の改善
US10444961B2 (en) Hover-based interaction with rendered content
US10156974B2 (en) Information processing apparatus, display control method, and display control program
US9361284B2 (en) Causing display of comments associated with an object
US9400567B2 (en) Explicit touch selection and cursor placement
US10102010B2 (en) Layer-based user interface
CN104205098B (zh) 使用阵列模式在浏览器中的内容项之间进行导航
KR101731843B1 (ko) 아이템 디스플레이하는 방법 및 장치
JP2022191324A (ja) 電子デバイス上の手書き入力
US20100259562A1 (en) Display control apparatus, display control method and computer program
JP4518955B2 (ja) 接触エリアの移動させられた表現を用いたユーザインタフェース
EP2154603A2 (en) Display apparatus, display method, and program
US20110283212A1 (en) User Interface
US20130047100A1 (en) Link Disambiguation For Touch Screens
KR20150095540A (ko) 사용자 단말 장치 및 이의 디스플레이 방법
US20220391456A1 (en) Devices, Methods, and Graphical User Interfaces for Interacting with a Web-Browser
JP6004746B2 (ja) 情報表示装置、情報表示方法、情報表示プログラム、および、プログラム記録媒体
TWI623876B (zh) 用於控制顯示裝置、電腦程式產品、資料載體與資訊技術設備的方法及控制裝置的用途
JP7337520B2 (ja) 情報処理装置、情報処理装置の制御方法、プログラム、および記憶媒体

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20111111

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130121

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130422

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130805

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130904

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees