JP4542637B2 - Portable information device and information storage medium - Google Patents

Portable information device and information storage medium Download PDF

Info

Publication number
JP4542637B2
JP4542637B2 JP35072898A JP35072898A JP4542637B2 JP 4542637 B2 JP4542637 B2 JP 4542637B2 JP 35072898 A JP35072898 A JP 35072898A JP 35072898 A JP35072898 A JP 35072898A JP 4542637 B2 JP4542637 B2 JP 4542637B2
Authority
JP
Japan
Prior art keywords
image
finger
displayed
display
enlargement
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP35072898A
Other languages
Japanese (ja)
Other versions
JP2000163031A5 (en
JP2000163031A (en
Inventor
芳郁 千代
聡 根橋
洋一 若井
靖浩 野村
Original Assignee
セイコーエプソン株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by セイコーエプソン株式会社 filed Critical セイコーエプソン株式会社
Priority to JP35072898A priority Critical patent/JP4542637B2/en
Publication of JP2000163031A publication Critical patent/JP2000163031A/en
Publication of JP2000163031A5 publication Critical patent/JP2000163031A5/ja
Application granted granted Critical
Publication of JP4542637B2 publication Critical patent/JP4542637B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Description

【0001】
【発明の属する技術分野】
本発明は、携帯情報機器、電子ブック及びこれらに使用される情報記憶媒体に関する。
【0002】
【背景技術及び発明が解決しようとする課題】
近年、文字、画像、音声などの情報を、CD−ROMやFDなどの電子メディアに記録し、書籍のように利用する出版形態である電子ブック、携帯情報機器、が実用化されている。
【0003】
係る電子ブックや携帯情報機器は紙の本ではいきづまる物理的な限界を解消することができる。また非直線的読書スタイルも可能であり、読者はそれぞれの自由な視点から多角的に読書を楽しむことができる。
【0004】
さらに出版に金や手間がかからないため、だれもが手軽に出版することができたり、購読者が限定されるような専門的なものが出版できたりというような出版の理想像を実現することも可能となる。
【0005】
ところで、係る電子ブックや携帯情報機器に地図情報を格納しておくと、出かける際や旅行時に携帯して、地図画像の参照ができて便利である。特に電子ブックや携帯情報機器においては、通常の地図と異なり、必要な部分のみ自由に拡大したり、縮小したり、また必要な部分をスクロールしたり等の充実した機能を実現することが可能となる。電子ブックや携帯情報機器は、情報を検索、活用する上で通常の紙の本に比べて格段に充実した機能を実現することができるからである。
【0006】
しかし、いくら充実した機能を実現できても、操作が煩雑であったり困難であったり等使い勝手が悪い場合には、宝の持ち腐れとなってしまう。特に電子ブックや携帯情報機器は小型で携帯に便利に形成されているので、入力方法、操作方法もこれに適したものが望まれている。
【0007】
本発明は、以上のような課題に鑑みてなされたものであり、その目的とするところは、地図画像を表示可能な携帯情報機器や電子ブックにおいて、地図画像の回転、拡大、縮小、スクロール等の機能を使い勝手のよいヒューマンインターフェースで実現できる電子ブックや携帯情報機器及びこれらに使用する情報記憶媒体を提供することである。
【0008】
【課題を解決するための手段】
本発明は、地図画像を表示可能な表示部を含む携帯情報機器であって、地図画像が表示された表示部に接触させた指の移動履歴を検出する指動作検出手段と、前記指の移動履歴にもとづき、地図画像の回転、拡大、縮小及びスクロールの少なくとも1つの操作が入力されたと判断する操作内容判断手段と、前記判断に基づき、表示部に表示された地図画像に回転、拡大、縮小及びスクロールの少なくとも1つの操作を施した地図画像を生成する地図画像生成手段とを含むことを特徴とする。
【0009】
本発明によれば、ユーザーは指の移動履歴により、表示部に表示された地図画像の回転、拡大、縮小及びスクロールの少なくとも1つの操作を入力することができる。
【0010】
表示部に接触させた指の移動履歴とは、経時的要素を含む概念であり、単に指で入力マーク等をタッチする場合のように経時的要素を含まない操作とは区別される。
【0011】
本発明によれば指の移動履歴により各種操作を入力できるため、筐体にボタンやキーボード等のハードを設ける必要がなく、よりコンパクトな携帯情報機器を提供することができる。また画面上に操作用の入力マーク表示等も不要になるため、携帯に適した小さな画面の有効活用を促進し、より見やすい画面表示が可能となる。
【0012】
また、ボタン等では1回の操作で実行指示及び実行内容を同時に入力することは困難であるため、実行内容を指定する操作や実行指示を行う操作等の複数の操作が必要となり、煩雑である。しかし、本発明は指の動作により入力するため、指の指示範囲や移動範囲等を検出することにより、操作量や操作範囲を同時に指定することが可能となり、使い勝手のよいヒューマンインターフェースを提供することができる。
【0013】
また本発明は、前記操作内容判断手段が、前記指の移動履歴に基づき、地図画像の回転量、拡大量、縮小量及びスクロール量の少なくとも1つの操作量を決定し、前記地図画像生成手段が、決定された操作量に基づき表示部に表示された地図画像に回転、拡大、縮小及びスクロールの少なくとも1つの操作を施した地図画像を生成することを特徴とする。
【0014】
本発明によれば、ユーザーは指の移動履歴により、表示部に表示された地図画像の回転、拡大、縮小及びスクロールの少なくとも1つの操作の実行指示のみならず操作量をも同時に入力することができる。
【0015】
操作の実行指示とは、回転や拡大や縮小やスクロール等のいずれかの操作の実行の指示することを意味する。また操作量とは、例えば回転操作であればその回転量、拡大操作であればその拡大量、縮小操作であればその縮小量、スクロール操作であればそのスクロール量等や、拡大や縮小や回転やスクロールして表示させたい範囲の指定等を意味する。
【0016】
本発明によれば指の移動履歴により各種操作の操作量を入力できるため、ユーザーは、自己のニーズに応じて指動作を調節することにより、所望の操作量を入力することができるようになる。
【0017】
また、ボタンやタグでは、1回の操作で任意の操作量を指示して実行指示を行うことは困難であるため、操作量の指定や実行指示等の複数の操作が必要となり煩雑である。しかし、本発明は指の動作により入力するため、指の指示範囲や移動範囲等を検出することにより、操作量や操作範囲を同時に指定することが可能となり、簡単で使い勝手のよいヒューマンインターフェースを提供することができる。
【0018】
また本発明は、前記指動作検出手段が、地図画像が表示された表示部に接触させた2本の指を遠ざける動作を検出した場合には、前記操作内容判断手段が、地図画像の拡大操作が入力されたと判断し、前記地図画像生成手段が、拡大された地図画像を生成することを特徴とする。
【0019】
地図画像が表示された表示部に接触させた2本の指を遠ざける動作は、地図画像の拡大をイメージさせる動作であり、ユーザーは係る動作を拡大操作として違和感無く受け入れることができる。しかも、指の動作位置や動作量により、1回の動作で例えば拡大範囲や拡大量等の拡大内容を指定した実行指示も可能となる。
【0020】
従って本発明によれば、ユーザーに使い勝手のよい拡大操作が可能な携帯情報機器の提供が可能となる。
【0021】
なお、地図画像の拡大は、1回の動作により常に一定の割合で拡大される場合でも良いし、指の移動距離に応じた割合で拡大される場合でもよい。指の移動距離に応じた割合で拡大すると、ユーザーは拡大量を指定した実行指示1回の動作で行うことができ、使い勝手のよいインターフェースを提供することができる。
【0022】
また拡大された結果、表示部に表示される地図画像の範囲は、拡大前に指が接触していた位置の地図画像を含む範囲にすることが好ましい。このようにするとユーザーは拡大範囲を指定した実行指示を1回の動作で行うことができ使い勝手のよいインターフェースを提供することができる。
【0023】
また地図画像を拡大する態様は、単に縮尺を小さくする場合のみならず、たとえば、拡大前は主に地形や都市の位置等の情報を主体とした地図画像であったのを、都市の部分が拡大されて建物や道路等の情報を主体とした都市の詳細地図等になる場合も含まれる。
【0024】
また本発明は、前記指動作検出手段が、地図画像が表示された表示部に接触させた2本の指を近づける動作を検出した場合には、前記操作内容判断手段が、地図画像の縮小操作が入力されたと判断し、前記地図画像生成手段が、縮小された地図画像を生成することを特徴とする。
【0025】
地図画像が表示された表示部に接触させた2本の指を近づける動作は、地図画像の縮小をイメージさせる動作であり、ユーザーは係る動作を縮小操作として違和感無く受け入れることができる。しかも、指の動作位置や動作量により、1回の動作で例えば縮小範囲や縮小量等の縮小内容を指定した実行指示も可能となる。
【0026】
従って本発明によれば、ユーザーに使い勝手のよい縮小操作が可能な携帯情報機器の提供が可能となる。
【0027】
なお、地図画像の縮小は、1回の動作により常に一定の割合で縮小される場合でも良いし、指の移動距離に応じた割合で縮小される場合でもよい。指の移動距離に応じた割合で縮小するとユーザーは縮小量を指定した実行指示1回の動作で行うことができ使い勝手のよいインターフェースを提供することができる。
【0028】
また縮小された結果、表示部に表示される地図画像の範囲は、拡大前に指が接触していた位置の地図画像を含む範囲にすることが好ましい。このようにするとユーザーは縮小範囲を指定した実行指示を1回の動作で行うことができ使い勝手のよいインターフェースを提供することができる。
【0029】
また地図画像を縮小する態様は、単に縮尺を大きくする場合のみならず、たとえば、拡大前は主に建物や道路等の情報を主体としたタウンマップ風の地図画像であったのを、縮小することにより地形や都市の位置等の情報を主体とした地図画像等になる場合も含まれる。
【0030】
また本発明は、前記指動作検出手段が、地図画像が表示された表示部に接触させた1本の指を軸に表示部に接触させた他の1本の指を回転させる動作を検出した場合には、前記操作内容判断手段が、地図画像の回転操作が入力されたと判断し、前記地図画像生成手段が、回転された地図画像を生成することを特徴とする。
【0031】
地図画像が表示された表示部に接触させた1本の指を軸に表示部に接触させた他の1本の指を回転させる動作はコンパス使用時の動作に類似している。このため地図画像の回転をイメージさせ、ユーザーは係る動作を回転操作として違和感無く受け入れることができる。しかも、指の動作位置や動作量により、1回の動作で例えば回転範囲や回転量等の回転内容を指定した実行指示も可能となる。
【0032】
従って本発明によれば、ユーザーに使い勝手のよい回転操作が可能な携帯情報機器の提供が可能となる。
【0033】
また、現在ユーザーが向いている方位と画面上方位を一致させたい場合に、実際の地図の場合、地図自体を回転させることになる。しかし本発明の携帯情報機器の場合、表示された地図画像を回転させることにより同様の効果をえることができる。このため、ユーザーは簡単な操作で所望の方向に回転された地図画像をみることができ、実際の地図より使い勝手のよい提供携帯情報機器の提供が可能となる。
【0034】
なお、地図画像の回転は、1回の動作により常に一定の割合で回転される場合でも良いし、指の移動距離に応じた割合で回転される場合でもよい。指の移動距離に応じた割合で回転するとユーザーは回転量を指定した実行指示を1回の動作で行うことができ使い勝手のよいインターフェースを提供することができる。
【0035】
また回転された結果、表示部に表示される地図画像の範囲は、回転前に指が接触していた位置の地図画像を含む範囲にすることが好ましい。このようにするとユーザーは回転範囲を指定した実行指示を1回の動作で行うことができ使い勝手のよいインターフェースを提供することができる。
【0036】
また本発明は、前記記載の携帯情報機器であって、電子ブックとして使用されることを特徴とする。
【0037】
即ち、地図画像を表示可能な表示部を含む電子ブックであって、地図画像が表示された表示部に接触させた指の移動履歴を検出する指動作検出手段と、前記指の移動履歴にもとづき、地図画像の回転、拡大、縮小及びスクロールの少なくとも1つの操作が入力されたと判断する操作内容判断手段と、前記操作内容判断手段が判断に基づき、表示部に表示された地図画像に回転、拡大、縮小及びスクロールの少なくとも1つの操作を施した地図画像を生成する地図画像生成手段とを含むことを特徴とする。
【0038】
また前記電子ブックにおいて、前記操作内容判断手段が、前記指の移動履歴に基づき、地図画像の回転量、拡大量、縮小量及びスクロール量の少なくとも1つの操作量を決定し、前記地図画像生成手段が、決定された操作量に基づき表示部に表示された地図画像に回転、拡大、縮小及びスクロールの少なくとも1つの操作を施した地図画像を生成することを特徴とする。
【0039】
また前記電子ブックにおいて、前記指動作検出手段が、地図画像が表示された表示部に接触させた2本の指を遠ざける動作を検出した場合には、前記操作内容判断手段が、地図画像の拡大操作が入力されたと判断し、前記地図画像生成手段が、拡大された地図画像を生成することを特徴とする。
【0040】
また前記電子ブックにおいて、前記指動作検出手段が、地図画像が表示された表示部に接触させた2本の指を近づける動作を検出した場合には、前記操作内容判断手段が、地図画像の縮小操作が入力されたと判断し、前記地図画像生成手段が、縮小された地図画像を生成することを特徴とする。
【0041】
また前記電子ブックにおいて、前記指動作検出手段が、地図画像が表示された表示部に接触させた1本の指を軸に表示部に接触させた他の1本の指を回転させる動作を検出した場合には、前記操作内容判断手段が、地図画像の回転操作が入力されたと判断し、前記地図画像生成手段が、回転された地図画像を生成することを特徴とする。
【0042】
また本発明は、地図画像を表示可能な携帯情報機器及び電子ブックの少なくとも一方に使用する情報記憶媒体であって、地図画像が表示された表示部に接触させた指の移動履歴を検出するための情報と、前記指の移動履歴にもとづき、地図画像の回転、拡大、縮小及びスクロールの少なくとも1つの操作が入力されたと判断するための情報と、前記判断に基づき、表示部に表示された地図画像に回転、拡大、縮小及びスクロールの少なくとも1つの操作を施した地図画像を生成するための情報を含むことを特徴とする。
【0043】
また前記情報記憶媒体において、前記指の移動履歴に基づき、地図画像の回転量、拡大量、縮小量及びスクロール量の少なくとも1つの操作量を決定し、決定された操作量に基づき表示部に表示された地図画像に回転、拡大、縮小及びスクロールの少なくとも1つの操作を施した地図画像を生成するための情報を含むように構成することが好ましい。
【0044】
また前記情報記憶媒体において、地図画像が表示された表示部に接触させた2本の指を遠ざける動作を検出した場合には、地図画像の拡大操作が入力されたと判断し、拡大された地図画像を生成するための情報を含むように構成することが好ましい。
【0045】
また前記情報記憶媒体において、地図画像が表示された表示部に接触させた2本の指を近づける動作を検出した場合には、地図画像の縮小操作が入力されたと判断し、縮小された地図画像を生成するための情報を含むように構成することが好ましい。
【0046】
また前記情報記憶媒体において、地図画像が表示された表示部に接触させた1本の指を軸に表示部に接触させた他の1本の指を回転させる動作を検出した場合には、地図画像の回転操作が入力されたと判断し、回転された地図画像を生成するための情報を含むように構成することが好ましい。
【0047】
【発明の実施の形態】
1.本発明の特徴
本発明の特徴は、地図画像を表示可能な形態情報機器や電子ブックにおいて、表示された地図画像上で指動作を行うことにより、地図画像の回転、拡大、縮小、スクロール等を行える点にある。
【0048】
図1は、本発明の特徴的機能を有する形態情報機器や電子ブックの機能ブロック図である。
【0049】
指動作検出部10は、ユーザーが地図画像の拡大、縮小、回転、スクロール等の操作を入力するために、地図画像が表示された表示部上で行った指の移動履歴を検出するためのものである。指動作検出部10は、表示部60に透明なタッチパネル等を重ねて構成されている。指動作検出部10で得られた検出データは処理部20へ入力される。
【0050】
処理部20は、前記検出データ、所与のプログラム等基づいて地図画像を生成する処理を行うものである。この処理部20の機能は、CPU(CISC型、RISC型)、DSP、カスタム(ゲートアレーなど)IC、メモリなどのハードウエアにより実現できる。
【0051】
情報記憶媒体70は、プログラムやデータを記憶するためのものである。この情報記憶媒体70の機能は、CD−ROM、カセット、ICカード、MO、FD、DVD、ハードディスク、メモリ等のハードウエアにより実現できる。処理部20は、この情報記憶媒体70からのプログラム、データに基づいて種々の処理を行うことになる。
【0052】
処理部20は、操作内容判断部30、地図操作処理部40、画像生成部50を含んで構成される。
【0053】
操作内容判断部30は、指動作検出部10が検出した指の移動履歴に基づきユーザーが入力した操作内容を判断する。具体的には、指動作検出部10が検出した指の動作履歴が2本の指を遠ざける動作である場合には、地図画像の拡大操作が入力されたと判断する。また例えば、指動作検出部10が検出した指の動作履歴が2本の指が近づける動作である場合には、地図画像の縮小操作が入力されたと判断する。また例えば、指動作検出部10が検出した指の動作履歴が、1本の指を軸に他の1本の指を回転させる動作である場合には、地図画像の回転操作が入力されたと判断する。また例えば、指動作検出部10が検出した指の動作履歴が1本の指を移動させる動作である場合には、地図のスクロール操作が入力されたと判断する。
【0054】
地図操作処理部40は、操作内容判断部30で判断された操作が施された地図画像を生成するための処理を行うもので、拡大処理部42、縮小処理部44、回転処理部46、スクロール処理部48を含む。
【0055】
拡大処理部42は、2本の指が遠ざかる距離に応じて拡大された地図画像を生成するために必要な処理を行う。縮小処理部44は、2本の指が近づく距離に応じて縮小された地図画像を生成するために必要な処理を行う。回転処理部46は、1本の回転角に応じて回転された地図画像を生成するために必要な処理を行う。
【0056】
スクロール処理部48は、1本の指の移動に応じてスクロールされた地図画像を生成するために必要な処理を行う。
【0057】
画像生成部50は、地図操作処理部40が行った処理に基づき表示部に出力する地図画像を生成する。地図画像の生成は、最大の解像度の画像データを保持し、縮尺に応じて当該画像データを間引きして生成する手法でもよいし、データをすべてベクトルデータとして持ち必要に応じて演算を行い地図画像を生成する手法でもよい。
【0058】
2.本発明の好適な実施形態
以下、本発明の好適な実施形態について電子ブックを例にとり詳細に説明する。
【0059】
(1)電子ブックの外観
図2(A)(B)(C)は本実施の形態の電子ブックの外観図を示している。
図2(A)の110は本実施の形態の電子ブックを閉じた状態の外観正面図であり、120は側面図である。130は、本実施の形態の電子ブックを開いた状態を表した図である。本実施の形態の電子ブックは携帯に便利なように、110のように電子ブックを閉じた状態で文庫本程度の大きさになるよう構成されている。
【0060】
図2(B)は、電子ブックに使用するソフトを納めたディスク140を示した図である。本実施の形態の電子ブックは図2(C)に示すように、電子ブック本体150に各種ソフトを納めたディスク140をセットすることにより、各種ソフトの内容に対応した情報を提供することができる。
【0061】
(2)指動作による地図画像の操作処理
次に、本実施の形態の電子ブックにおける指動作による地図画像の操作の具体例について説明する。
【0062】
図3は、旅行情報ソフトをセットした場合に表示される画面例を表した図である。画面中央は主に情報表示領域として、画面の端領域は主に検索用タグ領域やツールバー表示領域として使用される。情報表示領域には、本の見開き1ページ分に記載されている内容が画像情報として表示されている。また検索用タグ領域には検索用タグ210〜230等が表示されている。また、表示領域の左右の端には「本の厚み」を模した画像240、242が表示されている。
【0063】
▲1▼ 地図の拡大操作
ユーザーが指250で検索用タグの「地図」220の欄をタッチすると、画面内に、「インド」の全体地図260が表示される(図4参照)。「ボンベイ」付近の情報を得たい場合には、図6(B)に示すように親指と人差し指を近づけた状態で画面上「ボンベイ」のあたりに親指と人差し指をおいて、親指と人差し指を遠ざける方向に動かす動作(地図の拡大ジェスチャー)を行う(図5参照)。
このようにすると、親指と人差し指の移動履歴に応じて拡大された地図画像が表示される。即ち、親指と人差し指の離れる度合いが大きい程、縮尺が小さくより詳細な地図が表示される。
【0064】
このとき、親指と人差し指を遠ざける動作にリアルタイムに対応して、画面上の地図を拡大させてもよい。また、指の動きが止まった時点で最終的な拡大量が確定してから、その拡大量に応じて拡大された地図画像を表示してもよい。
【0065】
また図7に示すように親指を固定して人差し指のみを親指から遠ざける方向に移動させた場合も地図の拡大ジェスチャーに含ませても良い。
【0066】
拡大された地図を参照した結果、更に詳細な地図画像を得たいと思った場合には、前記地図の拡大ジェスチャーを繰りかえすことにより、更に詳細な地図画像を得ることができる。なお本実施の形態では、都市部の地図をある程度拡大したらタウンマップ等の都市の詳細地図が表示されるようになる。
【0067】
▲2▼ 地図のスクロール操作
また図8に示すように画面上に指をおいて、指を画面上に押し当てたまま希望の方向に動かすと(地図のスクロールジェスチャー)、動かした方向に動かした距離だけその地図が移動して表示される。
【0068】
▲3▼ 地図の縮小操作
また、例えばより大きな縮尺の地図画像を見たい場合や広範囲の情報を画面に表示したい場合等のように地図を縮小したい場合には、最初に図6(A)に示すように親指と人差し指を離した状態で画面上に表示された地図の上におき、図9に示すように親指と人差し指が近づく方向に動かす動作(地図の縮小ジェスチャー)を行う。このようにすると、親指と人差し指の移動履歴に応じて縮小された地図画像が表示される。即ち、親指と人差し指の離れる度合いが大きい程、縮尺が小さくより詳細な地図が表示される。
【0069】
このとき、親指と人差し指を近づける動作とともにリアルタイムに画面上の地図を縮小してもよい。また、指の動きが止まった時点で最終的な縮小量が確定してから、その縮小量に応じて縮小された地図画像を表示してもよい。
【0070】
また図7とは逆に親指を固定して人差し指のみを親指に近づける方向に移動させた場合も地図の縮小ジェスチャーに含ませても良い。
【0071】
縮小された地図を参照した結果、更に広範囲の地図画像が得たいと思った場合には、前記地図の縮小ジェスチャーを繰りかえすことにより、更に広範囲の地図画像を得ることができる。なお本実施の形態では、都市部の地図をある程度縮小したらタウンマップ等の都市の詳細地図から通常の地図表示に変更して表示されるようになる。
【0072】
▲4▼ 地図の回転操作
また、縮尺は変えずに表示されている地図画像の向きを変えたい場合には、最初に図6(A)に示すように親指と人差し指を離した状態で画面上に表示された地図の上におき、親指と人差し指のいずれか一方の指を固定し、固定した指を中心軸として、いずれか他方の指をコンパスのように回転させる動作(地図の回転ジェスチャー)を行う(図10参照)。このようにすると、親指と人差し指の移動履歴に応じて回転された地図画像が表示される。
【0073】
図11に示すように、点Oにいずれか一方の指を固定して、いずれか他方の指を点Aから点Bに回転させた場合、その回転角Θの分だけAからBへ回転する方向370に回転した地図画像が表示される。
【0074】
このとき、いずれか一方の指の回転とともにリアルタイムに画面上の地図を回転させても良い。また、指の動きが止まった時点で最終的な回転量が確定してから、その回転量に応じて縮小された地図画像を表示してもよい。
【0075】
なお指動作は、親指と人差し指で行う場合に限られず、例えば親指と中指等でもよいし、その他の指の組み合わせで行ってもよい。
【0076】
(3)検索処理
次に、本実施の形態の電子ブックにおける指動作による検索処理の具体例について説明する。
【0077】
▲1▼ 通常の検索操作
例えばユーザーが、「南インド」のホテルの情報を得たい場合、図12に示すような方法もある。即ちまず「南インド」のタグを選択し、「南インド」の情報が掲載された先頭ページを表示させ、次に宿泊のタグを選択し、「南インドの宿泊」の情報が掲載された先頭ページを表示させる方法である。係る方法は、ユーザーが「南インド」について様々な情報を得たい場合、取り合えず「南インド」の情報が掲載された先頭ページを表示させ、その後「南インド」の様々な情報を検索したい場合等に有効である。
【0078】
▲2▼ 論理積条件での検索操作
しかし、ユーザーが「南インドの宿泊」情報のみが必要な場合には、1回の操作でダイレクトに「南インドの宿泊」の情報が掲載された先頭ページが表示されることが好ましい。 そこで本実施の形態では、図13(A)に示すように、ユーザーが例えば左手の指で「南インド」のタグを、右手の指で「宿泊」のタグを同時にタッチした場合には、1回の操作でダイレクトに「南インドの宿泊」の情報が掲載された先頭ページが表示されるよう構成されている。
【0079】
「南インドの宿泊」の情報が複数ページに渡っている場合には、図13(B)に示すようにページめくり入力を行うことにより、次ページ以降に記載された情報を読むことができる。
【0080】
(4)ページめくり、しおり処理等
次に、本実施の形態の電子ブックでページめくりを行う具体例について説明する。
【0081】
▲1▼ ページめくり入力操作
本実施の形態の電子ブックでは、各種操作は画面上の指動作として入力するため、筐体に操作入力用のボタン等がほとんどない。また本の内容が表示された画面においては、画面上に操作入力用マークがほとんどないのが特徴である(図3参照)。
【0082】
本実施の形態では、旅行情報ソフトを電子ブックにセットすることにより、ユーザーは旅行のガイドブックを参照するのと同様の使い勝手で、図3に示すような画面上で実際の本のページと同様の内容を参照することができる。
【0083】
ユーザーが次ページを参照したいと思った場合には、ユーザーが画面上の情報表示領域を紙の本のページめくる時のように人差し指で左から右へなぞると、図14に示すようにあたかもページがめくれるようなイメージで表示画面が次ページの内容に更新される。
【0084】
このとき、ユーザーは人差し指等をべったり画面に接触させて、ある程度の強さでこするように指を横方向に移動させることが必要である。本実施の形態では、ページめくりの入力を他の入力と区別するために、指が所定の面積以上かつ所定の圧力値以上で画面に接触されて、横方向に移動している場合に、ページめくりが入力されていると判断するからである。
【0085】
なお、ページめくりの方向とページの昇降は、実際の本と同様に縦書きか横書きによって異なる。従って、縦書きの本の場合はページは右から左に進むので、図14のように指の移動を行うと、次ページがめくれるが、横書きの場合は前ページがめくれる。また逆に、縦書きの本の場合は図14と逆に人差し指で右から左へなぞると、前ページがめくれるが、横書きの場合は次ページがめくれることになる。
【0086】
このように、ユーザーは通常の本を扱うの同様の感覚でページめくり入力が行えるので、操作の習得が容易で使い勝手のよいヒューマンインターフェースを提供できる。
【0087】
なおページめくり入力時に、図14に示すように指の動きに応じてページがめくれる途中のイメージ画像を表示してもよいが、直接前ページ画面又は次ページ画面に切り替わる構成でもよい。
【0088】
またページめくりに対応して「パラ」等のページがめくれる音を連想できるようなイメージ音を出力してもよい。
【0089】
▲2▼ 連続ページめくり入力操作
また図15に示すように、「本の厚み」を模した画像(以下「本の厚み」という)240、242をユーザーが所定時間以上タッチし続けると、ページがパラパラと連続してめくれる。このとき、ユーザーがタッチする強さを変えると、ページめくりの速度を変更することができる。即ち、ユーザーはより強くタッチすることでページがめくれる速度を早めることができる。またタッチする強さを弱めることで、ページがめくれる速度を遅くすることができる。ユーザーは自分が読みたいページが見つかった時点で、前記「本の厚み」から手を離すことにより、連続ページめくりを止めて、表示画面を当該ページに位置づけることができる。
【0090】
なお、前述したページめくりの場合と同様にページの昇降は縦書きか横書きによって異なる。従って、縦書きの本の場合は、図15のように左端の本の厚みをタッチし続けると次ページ方向に連続してページがめくれるが、横書きの場合は前ページ方向に連続してページがめくれる。また逆に、縦書きの本の場合は図15と逆に右端の本の厚みをタッチし続けると前ページ方向に連続してページがめくれるが、横書きの場合は次ページ方向に連続してページがめくれる。
【0091】
このように、ユーザーは通常の本を扱うのと同様の感覚でページめくり入力が行えるので、操作の習得が容易で使い勝手のよいヒューマンインターフェースを提供できる。
【0092】
なお連続ページめくり入力時に、図15に示すように指の動きに応じてページがめくれる途中のイメージ画像を表示してもよいが、直接前ページ画面又は次ページ画面に所定時間おきに切り替わる構成でもよい。
【0093】
またページめくりに対応して「パラパラパラ」等のページがめくれる音を連想できるようなイメージ音を出力してもよい。
【0094】
▲3▼ しおり挿入、参照操作
次に本実施の形態の有しているしおり機能について説明する。通常の読書の際に再び参照したい箇所にしおりを挿入するように、本実施の形態でも、再び参照したいページにしおりを付すことができる。
【0095】
図16に示すように、矢印部260をドラッグして画面の一番下まで指でなぞると当該ページにしおりを挿入することができる。即ち上記動作後から図17に示すように画面上にしおりマーク270が表示される。
【0096】
ユーザーが他のページを参照している際には、図18(A)に示すように画面の下端にしおり270が表示されている。
【0097】
ユーザーは、しおりを付したページを参照したくなった場合には、図18(B)に示すように画面の下部に表示されたしおり270を指でタッチすると、図18(C)に示すように、画面はしおりを付したページに切り替わる。
【0098】
なお、しおりを1本のみ挟む場合を例にとり説明したがこれに限られない。例えば、複数のページにしおりを付したい場合には複数の色のしおりマークを表示する等してもよい。
【0099】
(5)今日のフォルダの使用例
次に、本実施の形態の今日のフォルダーの使用の具体例について説明する。
【0100】
図3において、280の入力用アイコンを指でタッチすると、図19に示すように画面下部に各種操作用アイコン(282、284、286、288)で構成されたツールバーが表示される。
【0101】
282は、本電子ブックの各種設定入力を行うためのモードへの移行する際にタッチするアイコンである。また284は、本電子ブックの付属部品であるカメラで動画又は静止画を撮影するモードへ移行する際にタッチするアイコンである。286は、本電子ブックの付属部品であるペンを使って文字や図形等をメモ入力するモードへ移行する際にタッチするアイコンである。288は入力したデータや画面上で指定した情報を今日のフォルダに格納する際や、今日のフォルダの中味を参照したい場合等にタッチするアイコンである。この今日のフォルダとは毎日自動的に作成されるものであり、使い方は日々の使用シーンの中で作成しておいたデータを常に入れっぱなしにしておくいわば倉庫のようなものである。以下、今日のフォルダーの各種使用例について説明する。
【0102】
▲1▼ 電子ブックに格納されている情報をフローティングして格納する例
電子ブックに格納されている情報をフローティングして格納する例について図20〜図22を用いて説明する。例えば「北インド」の情報を得たい場合、「北インド」のインデックスをタッチしてページを開き読んでみる。その中でも「タージマハイル」の文字が赤色に表示してあるのでタッチしてみる(図20(A)参照)。すると「タージマハイル」のページに自動的にジャンプするよう構成されている。
【0103】
例えば通常紙の本で「タージマハイル」について読んでみて、この部分をコピーして持ち歩きたいと思ったような場合、本電子ブックでは、以下のような操作を行うことができる。
【0104】
即ち、ユーザーが切り取りたいと思う情報が記載されている範囲を人差し指でなぞりながら四角形で囲み指を画面から離す(図20(B)の矢印410参照)。するとその囲われた部分が画面で浮き上がったように表示される(図21の420参照)。これをフローティング化という。
【0105】
そしてフローティング化された部分を指で押さえて、ドラッグ・アンド・ドロップの要領で今日のフォルダのアイコン288まで移動してそこで指を離す(以下、「今日のフォルダにドラッグ・アンド・ドロップする」という)と(図22参照)、フローティング化された部分が今日のフォルダへ格納される。このように、本電子ブックでは、切り取りたい内容を指で指定して、今日のフォルダにドラッグ・アンド・ドロップすると、画面上指定した内容を今日のフォルダに格納することができる。
【0106】
なお、フローティング化する領域は、閉曲線や多角形で囲んでできる領域だけでなく、画面の端と指で囲んだ部分で指定される領域でもよい。例えば図42(A)に示すように、指で840のように軌跡を描いて画面をなぞった場合に、軌跡840と画面の端の稜線850で囲まれる部分852(斜線領域)をフローティング化するようにしてもよい。
【0107】
また、図42(B)に示すように、画面上の2点P1、P2を指で指定して、当該2点を結ぶ線分を対角線とする長方形領域854(斜線領域)をフローティング化するようにしてもよい。
【0108】
また、図42(C)に示すように、画面上の3点P3、P4、P5を指で指定して、当該3点をその円周上に有する円領域856(斜線領域)をフローティング化するようにしてもよい。
【0109】
▲2▼ 静止画及び動画を格納する例
次にカメラで撮影した映像を今日のフォルダに格納する例について図23〜図25を用いて説明する。
【0110】
例えばユーザーが旅行中に時刻表等の内容をひかえたい場合に、本電子ブックを利用すれば、図24(A)に示すように、電子ブック本体内に設けられているカメラレンズ520を引き出して、時刻表510を撮影し、撮影データを電子ブックに格納することができる。
【0111】
即ちユーザーが電子ブックのツールバーを引き出しカメラアイコン284を指でタッチすると撮影モードになり、図23に示すようなカメラ撮影用操作表示画面が表示される。ユーザーは画面左側に大きく配置されたファインダー画面530の上に表示された「動画」と「静止画」のいずれかの画面スイッチ550、540を指でタッチすることにより、動画或いは静止画の撮影を選択することができる。
【0112】
例えばユーザーが静止画の画面スイッチ540にタッチすると、撮影実行用スイッチ560の表示が「シャッター」に変わる。そしてユーザーが時刻表510にカメラレンズを向けると、ファインダー画面530にカメラレンズ520がとらえた時刻表映像が表示される。ユーザーが、「シャッター」ボタン560を指でタッチすると、取り終えた画像データが撮影日時とともに自動的にフォルダファイルに格納される。
【0113】
フォルダファイルとは、「今日のフォルダー」に入れる情報を記憶するためのファイルである。格納された情報は日時で管理され、日付単位で読み出し可能に形成されている。
【0114】
また例えばユーザーが動画像を撮影したい場合には、動画のスイッチ550にタッチすると、撮影実行用スイッチ560の表示が「録画待機中」に変わる。ユーザーが「録画待機中」のボタンにタッチすると動画像の撮影が開始される。
【0115】
なお、図25に示すように本電子ブックのカメラレンズ520は電子ブック本体522から取り外せるワイヤレスタイプであるため、ユーザーは周りの人に気兼ねなく撮影することができる。またユーザーが「録画待機中」と表示された撮影実行用スイッチ560を押すと、表示が「撮影中」に切り替わる。ユーザーが撮影を中断したい場合には当該「撮影中」ボタンを指でタッチすると、撮影が中断され、表示は「撮影待機中」に切り替わる。そして撮影された画像は撮影日時とともにフォルダファイルに自動的に格納される。
【0116】
▲3▼ メモ書きを格納する例
次はユーザーのメモ書きを格納する例について図26、図27を用いて説明する。
【0117】
ユーザーが画面下部にあるツールバーを引き出して、「メモ」のアイコン286を指でタッチすると、図26に示すようなメモ入力画面600が表示される。
ユーザーが本電子ブック付属のペン610でこの画面上に文字等を入力すると、そのままイメージデータとして記録される。書き終えたのちに、図27に示すようにそのメモ入力画面を今日のフォルダにドラッグ・アンド・ドロップするとメモ入力画面600に記載した内容を格納日時とともにフォルダファイルに格納することができる。
【0118】
▲4▼ 今日のフォルダの参照処理
ユーザーが画面下部にあるツールバーを引き出して、「今日のフォルダ」のアイコン288を指でタッチすると、図28に示すようなその日の今日のフォルダ画面700が表示される。その中には、その日に今日のフォルダに格納されたデータがアイコン化(710、720、730、740)して表示されている。本電子ブックではユーザーが格納したデータ内容が、そのまま縮小されたイメージとしてアイコン化されるので、ユーザーはデータの中身についての記憶を喚起し易い。更にアイコンの下部にはデータを格納した時間が表示されているので、ユーザーの行動記録としても活用し易く、後でデータを整理する場合にも便利である。
【0119】
ユーザーは、アイコン化したデータ710、720、730、740を指でタッチして、「内容を見る」の部分750にドラッグ・アンド・ドロップさせると、その内容が画面上に表示される。同様に「捨てる」とかかれたゴミ箱部分780に入れると、その内容を自動的に消去できる。
【0120】
また「前の日」とかかれた部分760をタッチすると、前日の「今日のフォルダ画面」が表示され、「次の日」とかかれた部分770をタッチすると、次の日「今日のフォルダ画面」が表示される。ユーザーはこの「前の日」と「次の日」の部分をタッチすることで、過去のフォルダ画面にさかのぼり、また現在のフォルダ画面に帰ってくることができる。
【0121】
また、図29に示すように関連のあるデータのアイコンを接触するように指で移動させると、接触しているデータがグループ化される。このため、データの整理に便利である。
【0122】
図30は、今日のフォルダの活用の一例を説明するための図である。
【0123】
例えば、ユーザーが約1ヶ月間の旅行に本電子ブックを携帯して、旅行中に様々なデータを今日のフォルダに格納したとする。ユーザーが、電子ブックを開いてみると、30個の今日のフォルダが記憶されている(図30(A)参照)。
【0124】
ユーザーは、電子ブック800に格納されてる今日のフォルダのデータをインターネットに接続されている他のコンピュータ810に書き込み、インターネットを利用して旅行データ収集会社820に送る(図30(B)参照)。
【0125】
旅行データ収集会社820は、回収したデータを編集して旅行用ソフト出版会社830に最新旅行データを供給する。そして旅行用ソフト出版会社830は最新データに基づきバージョンアップした旅行用ソフトを発売する。
【0126】
このように電子出版産業が発達すれば、より最新のデータを反映した内容のデジタルソフトの供給が行える用になる。また、出版に金や手間がかからないため、だれもが手軽に出版することができたり、購読者が限定されるような専門的なものが出版できたりというような出版の理想像を実現することも可能となる。
【0127】
(6)電子ブックの構成
次に本実施の形態の電子ブックのハードウエア構成について図31を用いて説明する。
【0128】
図31に示すように、本実施の形態の電子ブックは、CPU(中央処理ユニット)1010、メモリ1020、ディスプレイコントローラ1030、タッチパネルコントローラ1040、バス1050、タッチパネル1060、ディスプレイ1070、ディスクドライブコントローラ1080、ディスクドライブ1090、情報記憶媒体1220、カメラ1130、ペン1120を含んで構成されている。
【0129】
ディスプレイ1070は液晶等で構成されており、ディスプレイコントローラ1030により、出力が制御される。
【0130】
タッチパネル1060は、光学式、抵抗式、静電容量式、超音波式などのパネルによって構成されており、タッチパネルコントローラ1040により制御される。タッチパネル1060は、ディスプレイ1070に透明なタッチセンサ板を重ねて設置される。ユーザーが指先やペン1120などで表示画面に接触すると、タッチパネル1060は指の接触位置情報及び接触圧力及び接触面積やペン1120で入力された文字や図形等のイメージデータを検出することができる。
【0131】
このようにディスプレイ1070の表面に透明なタッチセンサ板を重ねて一体化することにより表示画面上での指動作入力やペン入力が可能になる。
【0132】
CPU1010は装置全体の制御や各種データ処理、図2〜図30で説明した種々の処理の実行を行う。メモリは、ROM、RAMで構成されて、RAMはこのCPU1010の作業領域等として用いられる記憶手段であり、情報記憶媒体1220やROMの所与の内容、あるいはCPU1010の演算結果等が格納される。
【0133】
ディスクドライブ1090はフロッピーディスク等の情報記憶媒体1220に対してデータの書き込み、読み込みを行うもので、ディスクドライブコントローラ1080により制御される。
【0134】
情報記憶媒体1220には、画像を生成するためのデータ、プログラム、図2〜図30で説明した種々の処理を行うための情報等が主に格納されている。
【0135】
カメラ1130は、動画及び静止画を撮影するためのものである。
【0136】
ペン1120は表示画面上でメモ入力するためのものであり、ペンの形状をした棒もしくはインク等がディスプレイにつかなければなんでもよい。
【0137】
ユーザーがディスプレイ上で指操作を行ったり、メモ入力を行ったり、カメラで撮影を行ったり等の様々な入力を行うとCPU1010は、その入力内容に基づき、ユーザーが指示した操作を実行する。
【0138】
図32は、本電子ブックの機能ブロック図の一例である。
【0139】
指動作検出部1110は、ユーザーが表示部上で行った指の移動履歴や接触圧力や接触面積を検出するためのものである。指動作検出部1110は、表示部1240に透明なタッチパネル等を重ねて構成されている。指動作検出部1110で得られた検出データは処理部1100へ入力される。
【0140】
ペン入力部1120は、ユーザーが表示部上にペンで記載した内容を入力するためのものである。ペン入力部1120は、ユーザーが前期ペン1120で表示部1240に文字や図形等を記載すると、表示部に重ねられた透明なタッチパネル等がその内容をイメージデータとして検出するよう構成されている。ペン入力部1120で得られた検出データは処理部1100へ入力される。
【0141】
撮影部1130は、ユーザーが動画及び静止画の少なくとも一方を撮影するためのものである。撮影部1130は、カメラ又はビデオカメラ等で構成されている。撮影部1130で撮影された撮影データは処理部1100へ入力される。
【0142】
処理部1100は、前記指動作やペン入力による検出データ、撮影データ、所与のプログラム等基づいて、表示部に表示する画像を生成する処理や、データをフォルダファイルに格納する処理等を行うものである。この処理部1100の機能は、CPU(CISC型、RISC型)、DSP、カスタム(ゲートアレーなど)IC、メモリなどのハードウエアにより実現できる。
【0143】
情報記憶媒体1220は、プログラムやデータを記憶するためのものである。
この情報記憶媒体1220の機能は、CD−ROM、カセット、ICカード、MO、FD、DVD、ハードディスク、メモリ等のハードウエアにより実現できる。処理部1100は、この情報記憶媒体1220からのプログラム、データに基づいて種々の処理を行うことになる。
【0144】
処理部1100は、処理内容決定部1140、各種処理部1150、画像生成部1200、記憶部1230を含んで構成される。
【0145】
処理内容決定部1140は、指動作検出部1110、ペン入力部1120、撮影部1130から入力されたデータに基づき、処理すべき内容を決定する。
【0146】
各種処理部1150は、拡大処理部1162、縮小処理部1164、回転処理部1166、スクロール処理部1168、通常の検索処理部1172、論理積検索処理部1174、ページめくり処理部1182、連続ページめくり処理部1184、しおり挿入処理部1186、しおり挿入箇所参照処理部1188、フローティング処理部1192、撮影処理部1194、メモ入力処理部1196、フォルダ参照処理部1198を含み、処理内容決定部1140の決定にしたがい、地図画像の拡大処理、縮小処理、回転処理、スクロール処理、通常の検索処理、論理積検索処理、ページめくり処理、連続ページめくり処理、しおり挿入処理、しおり挿入箇所参照処理、フローティング処理、撮影処理、メモ入力処理、フォルダ参照処理等を行う。
【0147】
記憶部1230は、各種情報を記憶するものであり、今日のフォルダに格納されたデータを記憶するためのフォルダファイル1232を含む。
【0148】
画像生成部1200は、各種処理部1150が行った処理に基づき表示部に表示する画像を生成する。
【0149】
(7)本実施の形態の動作例
図33〜図41は本実施の形態の電子ブックの動作例を表したフローチャート図である。
【0150】
本実施の形態の電子ブックで、指動作、ペン入力、撮影等の入力があると以下のようにして処理内容が決定される(図33のステップS10)。現在撮影モードであれば撮影処理が行われる(ステップS20、S30)。なお、通常は通常入力モードであり、ツールバーのカメラアイコンがタッチされると撮影モードに移行する。撮影モード下で入力を検出した場合には、図23〜図25で説明したような撮影処理が行われる。
【0151】
例えば、ユーザーが画面中の操作ボタンを押したのが検出された場合は当該ボタンに対応した処理、例えば「動画」又は「静止画」ボタンがタッチされた場合には動画と静止画の選択処理、「シャッター」ボタンがタッチされた場合には静止画を撮影して、撮影画像データを撮影の日時を付してフォルダファイルに格納する処理、「録画待機中」ボタンがタッチされた場合には、動画の撮影を開始する処理、「録画中」ボタンがタッチされた場合には動画の撮影を終了して、撮影画像データを撮影の日時を付してフォルダファイルに格納する処理等が行われる。
【0152】
現在メモ入力モードであればメモ入力処理が行われる(ステップS40、S50)。なお、通常は通常入力モードであり、ツールバーのメモアイコンがタッチされるとメモ入力モードに移行する。メモ入力モード下で入力を検出した場合には、図26〜図27で説明したようなメモ入力処理が行われる。
【0153】
例えば、ユーザーが画面中にペンで文字等を入力したのが検出された場合は、入力内容をリアルタイムで画像表示し、入力内容をイメージデータとしてワークエリアに格納する処理が行われる。そして、入力内容がドラッグ・アンド・ドロップされた場合には、ワークエリアに格納されたイメージデータを、格納の日時を付してフォルダファイルに格納する処理等が行われる。
【0154】
現在フォルダ参照モードであればフォルダ参照処理が行われる(ステップS52、S54)。なお、通常は通常入力モードであり、ツールバーの今日のフォルダアイコンがタッチされるとフォルダ参照モードに移行する。フォルダ参照モード下で入力を検出した場合には、図28〜図29で説明したようなフォルダ参照処理が行われる。
【0155】
例えば、ユーザーが画面中のアイコンをタッチして「内容を見る」の部分にドラッグ・アンド・ドロップされたのが検出された場合には、そのデータ内容を画面上に表示する処理が行われる。また、同様に「捨てる」とかかれたゴミ箱部分に入れたのが検出された場合には、そのデータを消去する処理が行われる。また「前の日」とかかれた部分がタッチされたのが検出されると、前日の「今日のフォルダ画面」を表示する処理がおこなわれ、「次の日」とかかれた部分がタッチされたのが検出される、次の日「今日のフォルダ画面」を表示する処理が行われる。
【0156】
通常入力モードにおいて、タッチパネルへの指の接触があった場合には以下のような処理が行われる(図33のステップS60、図34参照)。
【0157】
ツールバーのアイコンへの接触があった場合には各種アイコン処理(図41参照)が行われる(ステップ図34のS70、S80)。
【0158】
「検索用タグ」や「本の厚み」や「しおり」や「しおり挿入用矢印」等の各種入力マークへの接触であった場合には入力マーク操作処理(図36参照)が行われる(ステップS90、S100)。
【0159】
タッチパネルへの2点目の接触があった場合、地図画像が表示されている場合には地図操作の処理を行う(ステップS110、S120、S130)。
【0160】
2点目の接触が無かった場合には、接触点が移動しているか否かを検出し、移動している場合には、接触面積及び接触圧力によって指示入力されている処理内容を判断する(ステップS140、S150)。
【0161】
接触面積及び接触圧力が所定値以上である場合は、表示されているのが地図画像であればスクロール処理を行い、通常の本のページ画像である場合にはページめくりの処理を行う(ステップS160、S180)。
【0162】
接触面積及び接触圧力が所定値以上でない場合は以下の処理を行う(図35参照)。「今日のフォルダ」へのドラッグ・アンド・ドロップでない場合に、指で囲まれた情報がある場合には、その指で囲まれた情報のフローティング処理を行う(ステップS910、S960、S970)。
【0163】
「今日のフォルダ」へのドラッグ・アンド・ドロップである場合、それがメモ内容であれば、メモ内容をイメージデータとして、格納日時を付してフォルダファイルに格納する(ステップS920、S930)。
【0164】
それがフローティング化されたデータであれば、フローティング化されたデータに格納日時を付してフォルダファイルに格納する(ステップS940、S950)。
【0165】
図36は入力マークへのタッチを検出した場合の処理(図34のステップS100)の詳細な処理内容を説明するためのフローチャート図である。
【0166】
ユーザーの指が検索用タグ上に接触している場合には検索処理を行う(ステップS210、S220)。
【0167】
ユーザーの指がしおり挿入用矢印マーク上に接触している場合にはしおり挿入処理を行う(ステップS230、S240)。
【0168】
ユーザーの指がしおりマーク上に接触している場合にはしおり挿入箇所参照処理を行う(ステップS250、S260)。
【0169】
ユーザーの指が連続ページめくり用マーク上に接触している場合には連続ページめくり処理を行う(ステップS270、S280)。
【0170】
図37は地図操作の処理(図34のステップS130)の詳細な処理内容を説明するためのフローチャート図である。
【0171】
2点間の距離の変化を演算し(ステップS310)、2点間の距離が拡大している場合には、拡大距離に応じた拡大処理を行う(ステップS320、S330)。
【0172】
2点間の距離が縮小している場合には、縮小距離に応じた縮小処理を行う(ステップS340、S350)。
【0173】
2点間の距離が変化していない場合には、回転処理を行う(ステップS360、S370)。
【0174】
図38は検索処理(図36のステップS220)の詳細な処理内容を説明するためのフローチャート図である。
【0175】
ユーザーの指の2点目の接触が検出されない場合は、ユーザーの指が接触している検索用タグの検索条件を満たす情報が記載されているページを検索し、その先頭ページを表示する通常の検索処理を行う(ステップS410、S420)。
【0176】
ユーザーの指の2点目の接触が検出され、それが検索用タグ上への接触である場合には、2つの検索用タグの検索条件の論理積が予定されている場合には、2つの検索条件の論理積にあたる条件を満たす情報が記載されているページを検索し、その先頭ページを表示部に表示する論理積検索処理を行う(ステップS440、S450)。
【0177】
図39はページめくり処理(図34のステップS180)の詳細な処理内容を説明するためのフローチャート図である。
【0178】
ユーザーの指の接触位置が画面上の左から右へ移動している場合、表示されている本が縦書きの本の場合には、次ページの画像に更新され、横書きの本の場合には前ページの画像に更新される(ステップS510、S520、S530、S540)。
【0179】
ユーザーの指の接触位置が画面上の右から左へ移動している場合、表示されている本が縦書きの本の場合には、前ページの画像に更新され、横書きの本の場合には次ページの画像に更新される(ステップS550、S560、S570、S580)。
【0180】
図40は連続ページめくり処理(図36のステップS280)の詳細な処理内容を説明するためのフローチャート図である。
【0181】
ユーザーの指の接触圧力を検出し、所定の圧力値以上で無ければ、連続ページめくりを中止する(ステップS610、S620、S630)。
【0182】
所定の圧力値以上であれば、以下のように連続ページめくりを行う。
【0183】
即ち、ユーザーの指の接触位置が画面上右端の本の厚みであれば、表示されている本が縦書きの本の場合には、前ページ方向に連続してページめくりを行い、横書きの本の場合には次ページ方向に連続してページめくりを行う(ステップS640、S650、S660、S670)。
【0184】
また、ユーザーの指の接触位置が画面上左端の本の厚みであれば、表示されている本が縦書きの本の場合には、次ページ方向に連続してページめくりを行い、横書きの本の場合には前ページ方向に連続してページめくりを行う(ステップS640、S680、S690、S700)。
【0185】
図41は各種アイコン処理(図34のステップS80)の詳細な処理内容を説明するためのフローチャート図である。
【0186】
カメラアイコン上への接触である場合には、図23に示すようなカメラ撮影用の操作画面を表示し撮影モードに移行する。(ステップS810、S820)。
以下撮影モード中に入力があった場合には、図33のステップS30の撮影処理が実行される。
【0187】
メモアイコン上への接触である場合には、図26に示すようなメモ入力画面を表示しメモ入力モードに移行する。(ステップS830、S840)。以下メモ入力モード中に入力があった場合には、図33のステップS50のメモ入力処理が実行される。
【0188】
今日のフォルダアイコン上への接触である場合には、図28に示すような今日のフォルダ画面を表示しフォルダ参照モードに移行する。(ステップS850、S860)。以下フォルダ参照モード中に入力があった場合には、図33のステップS54のフォルダ参照処理が実行される。
【0189】
(8)その他種々の実施の形態
なお、本発明は本実施形態に限定されず、本発明の要旨の範囲内で種々の変形実施が可能である。
【0190】
本実施の形態では、親指と人差し指を使用して操作入力を行う場合を例にとり説明したがこれに限られない。例えば、親指と中指等でもよいし、その他の指の組み合わせでもよい。
【0191】
本実施の形態では、電子ブックの場合を例に取り説明したため、検索項目の論理積となる検索情報が記載された先頭ページが表示されたが、電子ブック以外の携帯情報端末等の場合ページの概念がない場合もある。従って、ページに関係なく情報単位表示する場合でもよい。
【0192】
また、本実施の形態では、2つの検索項目を同時に指で接触すると、当該2つ項目の論理積となる検索情報を出力する場合を例にとり説明したがこれに限られない。例えば3つ以上の検索項目を同時に指で接触して、当該3つ以上の項目の論理積となる検索情報を出力する場合でもよい。
【0193】
また、同時に指で接触した場合に限られず、所定時間内に指で接触した場合も論理積となる検索情報を出力するようにしてもよい。
【0194】
また、同時又は所定時間内に指で接触された複数の検索項目に対応する検索条件と論理積の関係を有する情報がない場合には、論理和及び論理和と論理積の組み合わせの少なくとも一方を有する情報を表示部に出力する手段を更に含むよう構成してもよい。
【0195】
例えば、「南インド」「宿泊」と「食事」のタグを同時にタッチした場合に、南インドの宿泊情報と南インドの食事情報を出力するような構成にしてもよい。
【0196】
特にページに関係なく情報単位で表示する場合、係る構成をとると有効である。
【0197】
例えば、電話番号が格納された電子ブックや携帯情報端末おいて、電話番号単位で検索出力可能な場合、目次欄で電話番号の検索項目を複数指定すると、その指定に応じて自動的に論理和や論理積の関係を有する電話番号をリストアップするような場合も含む。即ち例えば「A地区」と「病院」というように「A地区の病院」という共通集合が予定された関係にある項目が指定された場合には、論理積の関係にある情報を検索出力し、「A地区」と「B地区」や、「病院」と「図書館」というように共通集合が予定されていない関係にある項目が指定された場合には論理和の関係にある情報を検索出力するよう構成してもよい。
【0198】
また、本実施の形態では、メモ入力画面、写真モード画面など全画面として例示されているが、ウィンドウによる部分表示であってもかまわない。
【0199】
【図面の簡単な説明】
【図1】本発明の特徴的機能を有する形態情報機器や電子ブックの機能ブロック図である。
【図2】図2(A)(B)(C)は本実施の形態の電子ブックの外観図を示している。
【図3】旅行情報ソフトをセットした場合に表示される画面例を表した図である。
【図4】地図画像の表示例を表した図である。
【図5】本実施の形態における地図の拡大ジェスチャーの操作例を説明するための図である。
【図6】図6(A)(B)は、本実施の形態における指動作例を説明するための図である。
【図7】本実施の形態における地図の拡大ジェスチャーの他の操作例を説明するための図である。
【図8】本実施の形態における地図のスクロールジェスチャーの操作例を説明するための図である。
【図9】本実施の形態における地図の縮小ジェスチャーの操作例を説明するための図である。
【図10】本実施の形態における地図の回転ジェスチャーの操作例を説明するための図である。
【図11】本実施の形態における地図の回転角について説明するための図である。
【図12】本実施の形態の検索処理の一例について説明するための図である。
【図13】本実施の形態の論理積検索処理の一例について説明するための図である。
【図14】本実施の形態におけるページめくり操作について説明するための図である。
【図15】本実施の形態における連続ページめくり操作について説明するための図である。
【図16】本実施の形態におけるしおり挿入操作について説明するための図である。
【図17】本実施の形態におけるしおり挿入操作について説明するための図である。
【図18】本実施の形態におけるしおり挿入箇所参照操作について説明するための図である。
【図19】ツールバーが表示された画面例を説明するための図である。
【図20】本実施の形態におけるフローティング処理の操作例を説明するための図である。
【図21】本実施の形態におけるフローティング処理の操作例を説明するための図である。
【図22】本実施の形態におけるドラッグ・アンド・ドロップの操作例を説明するための図である。
【図23】本実施の形態のカメラ撮影用操作画面を表した図である。
【図24】本実施の形態における静止画の撮影処理を説明するための図である。
【図25】本実施の形態における動画の撮影処理を説明するための図である。
【図26】本実施の形態におけるメモ入力処理を説明するための図である。
【図27】本実施の形態におけるメモ入力のドラッグ・アンド・ドロップ操作を説明するための図である。
【図28】本実施の形態における今日のフォルダ参照画面を表した図である。
【図29】本実施の形態における今日のフォルダ参照処理を説明するための図である。
【図30】本実施の形態における今日のフォルダの活用の一例を説明するための図である。
【図31】本実施形態の電子ブックのハードウエア構成について説明するための図である。
【図32】本実施の形態の電子ブックの機能ブロック図の一例である。
【図33】本実施の動作例を表したフローチャート図である。
【図34】本実施の動作例を表したフローチャート図である。
【図35】本実施の動作例を表したフローチャート図である。
【図36】本実施の動作例(入力マーク操作処理)を表したフローチャート図である。
【図37】本実施の動作例(地図操作処理)を表したフローチャート図である。
【図38】本実施の動作例(検索処理)を表したフローチャート図である。
【図39】本実施の動作例(ページめくり処理)を表したフローチャート図である。
【図40】本実施の動作例(連続ページめくり処理)を表したフローチャート図である。
【図41】本実施の動作例(各種アイコン処理)を表したフローチャート図である。
【図42】本実施の形態におけるフローティング処理の他の操作例を説明するための図である。
【符号の説明】
10 指動作検出部
20 処理部
30 操作内容判断部
40 地図操作処理部
42 拡大処理部
44 縮小処理部
46 回転処理部
48 スクロール処理部
50 画像生成部
60 表示部
70 情報記憶媒体
1010 CPU(中央処理ユニット)
1020 メモリ
1030 ディスプレイコントローラ
1040 タッチパネルコントローラ
1050 バス
1060 タッチパネル
1070 ディスプレイ
1080 ディスクドライブコントローラ
1090 ディスクドライブ
1100 処理部
1110 指動作検出部
1120 入力部(ペン)
1130 撮影部(カメラ)
1140 処理内容決定部
1150 各種処理部
1160 地図操作処理部
1162 拡大処理部
1164 縮小処理部
1166 回転処理部
1168 スクロール処理部
1170 検索処理部
1172 通常の検索処理部
1174 論理積検索処理部
1182 ページめくり処理部
1184 連続ページめくり処理部
1186 しおり挿入処理部
1188 しおり挿入箇所参照処理部
1192 フローティング処理部
1194 撮影処理部
1196 メモ入力処理部
1198 フォルダ参照処理部
1200 画像生成部
1220 情報記憶媒体
1230 記憶部
1232 フォルダファイル
1240 表示部
[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a portable information device, an electronic book, and an information storage medium used for them.
[0002]
[Background Art and Problems to be Solved by the Invention]
In recent years, electronic books and portable information devices, which are publishing forms in which information such as characters, images, and voices are recorded on electronic media such as CD-ROMs and FDs and used like books, have been put into practical use.
[0003]
Such electronic books and portable information devices can overcome the physical limitations of paper books. Non-linear reading styles are also possible, and readers can enjoy reading from various perspectives.
[0004]
Furthermore, since it takes less money and hassle to publish, it is possible to realize the ideal image of publishing where everyone can publish easily or publish specialized things with limited subscribers. It becomes possible.
[0005]
By the way, storing map information in such an electronic book or portable information device is convenient because it can be carried with you when you go out or travel, and you can refer to the map image. Especially in e-books and portable information devices, unlike normal maps, it is possible to realize a wide range of functions such as free enlargement, reduction, and scrolling of necessary parts. Become. This is because electronic books and portable information devices can realize functions that are much more enriched than ordinary paper books in searching and using information.
[0006]
However, no matter how many functions can be realized, if the operation is complicated or difficult, such as troublesome operation, the treasure is lost. In particular, since an electronic book and a portable information device are small and conveniently formed for carrying, an input method and an operation method suitable for this are desired.
[0007]
The present invention has been made in view of the problems as described above. The object of the present invention is to rotate, enlarge, reduce, scroll, etc. a map image in a portable information device or an electronic book capable of displaying the map image. It is to provide an electronic book, a portable information device and an information storage medium used therefor that can realize the above functions with a user-friendly human interface.
[0008]
[Means for Solving the Problems]
The present invention is a portable information device including a display unit capable of displaying a map image, the finger motion detection means for detecting a movement history of a finger brought into contact with the display unit on which the map image is displayed, and the movement of the finger Based on the history, operation content determination means for determining that at least one operation of rotation, enlargement, reduction and scrolling of the map image has been input, and rotation, enlargement, reduction of the map image displayed on the display unit based on the determination. And map image generation means for generating a map image subjected to at least one scroll operation.
[0009]
According to the present invention, the user can input at least one operation of rotation, enlargement, reduction, and scrolling of the map image displayed on the display unit based on a finger movement history.
[0010]
The movement history of the finger in contact with the display unit is a concept including a temporal element, and is distinguished from an operation that does not include a temporal element as in the case of simply touching an input mark or the like with a finger.
[0011]
According to the present invention, various operations can be input based on the movement history of the finger, so that it is not necessary to provide hardware such as buttons and a keyboard on the housing, and a more compact portable information device can be provided. In addition, since an operation input mark display or the like is not required on the screen, effective use of a small screen suitable for carrying is promoted, and a screen display that is easier to view is possible.
[0012]
In addition, since it is difficult to input an execution instruction and execution contents at the same time with a single operation using a button or the like, a plurality of operations such as an operation for specifying execution contents and an operation for executing execution instructions are required, which is complicated. . However, since the present invention is input by the movement of the finger, it is possible to simultaneously specify the operation amount and the operation range by detecting the finger instruction range, the movement range, etc., and provide an easy-to-use human interface. Can do.
[0013]
According to the present invention, the operation content determination means determines at least one operation amount of a rotation amount, an enlargement amount, a reduction amount, and a scroll amount of the map image based on the movement history of the finger, and the map image generation means A map image obtained by performing at least one of rotation, enlargement, reduction, and scrolling on the map image displayed on the display unit based on the determined operation amount is generated.
[0014]
According to the present invention, the user can simultaneously input an operation amount as well as an instruction to execute at least one of rotation, enlargement, reduction, and scrolling of the map image displayed on the display unit according to a finger movement history. it can.
[0015]
The operation execution instruction means an instruction to execute any operation such as rotation, enlargement, reduction, scrolling, and the like. The operation amount is, for example, the rotation amount for a rotation operation, the enlargement amount for an enlargement operation, the reduction amount for a reduction operation, the scroll amount for a scroll operation, and the enlargement / reduction or rotation. This means specifying the range to be displayed by scrolling.
[0016]
According to the present invention, the operation amount of various operations can be input based on the movement history of the finger. Therefore, the user can input a desired operation amount by adjusting the finger operation according to his / her needs. .
[0017]
In addition, since it is difficult for a button or tag to give an execution instruction by specifying an arbitrary operation amount in one operation, a plurality of operations such as an operation amount specification and an execution instruction are required, which is complicated. However, since the present invention is input by the movement of the finger, it is possible to simultaneously specify the operation amount and the operation range by detecting the finger instruction range, the movement range, etc., and provide a simple and easy-to-use human interface can do.
[0018]
Further, in the present invention, when the finger motion detection unit detects an operation of moving two fingers that are in contact with the display unit on which the map image is displayed, the operation content determination unit performs the map image enlargement operation. And the map image generating means generates an enlarged map image.
[0019]
The operation of moving the two fingers in contact with the display unit on which the map image is displayed is an operation that gives an image of the enlargement of the map image, and the user can accept the operation as an enlargement operation without a sense of incongruity. In addition, it is possible to give an execution instruction that designates enlargement contents such as an enlargement range and an enlargement amount, etc., by a single action, depending on the action position and the action amount of the finger.
[0020]
Therefore, according to the present invention, it is possible to provide a portable information device capable of a user-friendly enlargement operation.
[0021]
Note that the map image may be enlarged at a constant rate by one operation, or may be enlarged at a rate corresponding to the movement distance of the finger. When enlarging at a rate corresponding to the movement distance of the finger, the user can perform the operation with a single execution instruction specifying the enlargement amount, and an easy-to-use interface can be provided.
[0022]
Moreover, it is preferable that the range of the map image displayed on the display unit as a result of the enlargement is a range including the map image at the position where the finger is in contact before the enlargement. In this way, the user can execute an execution instruction designating the expansion range in one operation, and can provide an easy-to-use interface.
[0023]
The mode of enlarging the map image is not limited to simply reducing the scale. For example, before the enlargement, the map portion is mainly a map image mainly of information such as topography and city position. This includes the case where the map is expanded to become a detailed map of a city based mainly on information such as buildings and roads.
[0024]
Further, in the present invention, when the finger motion detection unit detects an operation of bringing two fingers brought into contact with the display unit on which the map image is displayed, the operation content determination unit performs the map image reduction operation. And the map image generating means generates a reduced map image.
[0025]
The operation of bringing two fingers brought into contact with the display unit on which the map image is displayed is an operation that makes a reduction in the map image appear, and the user can accept the operation as a reduction operation without a sense of incongruity. In addition, it is possible to give an execution instruction specifying a reduction content such as a reduction range or a reduction amount by a single operation according to the movement position and movement amount of the finger.
[0026]
Therefore, according to the present invention, it is possible to provide a portable information device capable of a user-friendly reduction operation.
[0027]
The map image may be reduced at a constant rate by one operation, or may be reduced at a rate corresponding to the movement distance of the finger. When reduction is performed at a rate corresponding to the movement distance of the finger, the user can perform a single operation with an execution instruction specifying the reduction amount, and an easy-to-use interface can be provided.
[0028]
Moreover, it is preferable that the range of the map image displayed on the display unit as a result of the reduction is a range including the map image at the position where the finger is in contact before the enlargement. In this way, the user can execute an execution instruction designating a reduction range in one operation, and an easy-to-use interface can be provided.
[0029]
Also, the mode of reducing the map image is not only when the scale is simply increased, but, for example, before the enlargement, it is reduced from a town map-like map image mainly composed of information such as buildings and roads. This includes cases where the map image is mainly based on information such as topography and city position.
[0030]
According to the present invention, the finger motion detection means detects an operation of rotating another finger that is in contact with the display unit with one finger that is in contact with the display unit on which the map image is displayed as an axis. In this case, the operation content determination unit determines that a map image rotation operation has been input, and the map image generation unit generates a rotated map image.
[0031]
The operation of rotating the other finger that is in contact with the display unit around the one finger that is in contact with the display unit on which the map image is displayed is similar to the operation when the compass is used. For this reason, it is possible to imagine the rotation of the map image, and the user can accept the operation as a rotation operation without a sense of incongruity. In addition, it is possible to give an execution instruction specifying the rotation contents such as the rotation range and the rotation amount in one operation by the operation position and operation amount of the finger.
[0032]
Therefore, according to the present invention, it is possible to provide a portable information device capable of a user-friendly rotation operation.
[0033]
Further, when it is desired to match the orientation that the user is currently facing with the orientation on the screen, the map itself is rotated in the case of an actual map. However, in the case of the portable information device of the present invention, the same effect can be obtained by rotating the displayed map image. For this reason, the user can see the map image rotated in a desired direction with a simple operation, and can provide the provided portable information device that is easier to use than the actual map.
[0034]
Note that the map image may be rotated at a constant rate by one operation, or may be rotated at a rate corresponding to the movement distance of the finger. When the user rotates at a rate corresponding to the movement distance of the finger, the user can execute an execution instruction specifying the rotation amount in one operation, and an easy-to-use interface can be provided.
[0035]
Moreover, it is preferable that the range of the map image displayed on the display unit as a result of the rotation is a range including the map image at the position where the finger is in contact before the rotation. In this way, the user can perform an execution instruction specifying the rotation range in one operation, and can provide an easy-to-use interface.
[0036]
The present invention is the portable information device described above, which is used as an electronic book.
[0037]
That is, an electronic book including a display unit capable of displaying a map image, based on finger movement detection means for detecting a movement history of a finger brought into contact with the display unit on which the map image is displayed, and the movement history of the finger , An operation content determination unit that determines that at least one operation of rotation, enlargement, reduction, and scrolling of the map image has been input, and the operation content determination unit rotates and enlarges the map image displayed on the display unit based on the determination. And map image generation means for generating a map image subjected to at least one of reduction and scroll operations.
[0038]
In the electronic book, the operation content determination unit determines at least one operation amount of a rotation amount, an enlargement amount, a reduction amount, and a scroll amount of the map image based on the movement history of the finger, and the map image generation unit Is characterized by generating a map image obtained by performing at least one of rotation, enlargement, reduction, and scrolling on the map image displayed on the display unit based on the determined operation amount.
[0039]
In the electronic book, when the finger motion detection unit detects a motion of moving two fingers away from the display unit on which the map image is displayed, the operation content determination unit is configured to enlarge the map image. It is determined that an operation has been input, and the map image generation unit generates an enlarged map image.
[0040]
In the electronic book, when the finger movement detection unit detects an operation of bringing two fingers in contact with the display unit on which the map image is displayed, the operation content determination unit reduces the map image. It is determined that an operation has been input, and the map image generation means generates a reduced map image.
[0041]
Further, in the electronic book, the finger motion detection unit detects an operation of rotating another finger that is in contact with the display unit with one finger that is in contact with the display unit on which the map image is displayed as an axis. In this case, the operation content determination means determines that a map image rotation operation has been input, and the map image generation means generates a rotated map image.
[0042]
Further, the present invention is an information storage medium used for at least one of a portable information device and an electronic book capable of displaying a map image, for detecting a movement history of a finger touching a display unit on which the map image is displayed. , Information for determining that at least one operation of rotation, enlargement, reduction and scrolling of the map image has been input based on the movement history of the finger, and a map displayed on the display unit based on the determination Information for generating a map image in which at least one of rotation, enlargement, reduction, and scrolling is performed on the image is included.
[0043]
Further, in the information storage medium, at least one operation amount of a rotation amount, an enlargement amount, a reduction amount, and a scroll amount of the map image is determined based on the movement history of the finger, and displayed on the display unit based on the determined operation amount. It is preferable to include information for generating a map image that has been subjected to at least one of rotation, enlargement, reduction, and scrolling.
[0044]
Further, in the information storage medium, when an operation of moving two fingers away from the display unit on which the map image is displayed is detected, it is determined that a map image enlargement operation has been input, and the enlarged map image is displayed. It is preferable to comprise so that the information for producing | generating may be included.
[0045]
Further, in the information storage medium, when an operation of bringing two fingers brought into contact with the display unit on which the map image is displayed is detected, it is determined that a map image reduction operation has been input, and the reduced map image is displayed. It is preferable to comprise so that the information for producing | generating may be included.
[0046]
In addition, in the information storage medium, when an operation of rotating one finger that is in contact with the display unit around the one finger that is in contact with the display unit on which the map image is displayed is detected, It is preferable that the image rotation operation is determined to be input, and the information for generating the rotated map image is included.
[0047]
DETAILED DESCRIPTION OF THE INVENTION
1. Features of the present invention
A feature of the present invention is that in a form information device or an electronic book capable of displaying a map image, a map image can be rotated, enlarged, reduced, scrolled, etc. by performing a finger operation on the displayed map image. .
[0048]
FIG. 1 is a functional block diagram of a morphological information device and an electronic book having the characteristic functions of the present invention.
[0049]
The finger movement detection unit 10 is for detecting a movement history of a finger performed on a display unit on which a map image is displayed in order for a user to input operations such as enlargement, reduction, rotation, and scrolling of the map image. It is. The finger motion detection unit 10 is configured by overlaying a transparent touch panel or the like on the display unit 60. Detection data obtained by the finger motion detection unit 10 is input to the processing unit 20.
[0050]
The processing unit 20 performs processing for generating a map image based on the detection data, a given program, and the like. The function of the processing unit 20 can be realized by hardware such as a CPU (CISC type, RISC type), a DSP, a custom (gate array, etc.) IC, and a memory.
[0051]
The information storage medium 70 is for storing programs and data. The function of the information storage medium 70 can be realized by hardware such as a CD-ROM, cassette, IC card, MO, FD, DVD, hard disk, and memory. The processing unit 20 performs various processes based on the program and data from the information storage medium 70.
[0052]
The processing unit 20 includes an operation content determination unit 30, a map operation processing unit 40, and an image generation unit 50.
[0053]
The operation content determination unit 30 determines the operation content input by the user based on the finger movement history detected by the finger motion detection unit 10. Specifically, when the finger motion history detected by the finger motion detection unit 10 is a motion to move two fingers away, it is determined that a map image enlargement operation has been input. Further, for example, when the finger motion history detected by the finger motion detection unit 10 is an operation in which two fingers are brought closer together, it is determined that a map image reduction operation has been input. Further, for example, when the finger motion history detected by the finger motion detection unit 10 is an operation of rotating another finger around one finger, it is determined that a map image rotation operation has been input. To do. Further, for example, if the finger motion history detected by the finger motion detection unit 10 is a motion of moving one finger, it is determined that a map scroll operation has been input.
[0054]
The map operation processing unit 40 performs processing for generating a map image subjected to the operation determined by the operation content determination unit 30, and includes an enlargement processing unit 42, a reduction processing unit 44, a rotation processing unit 46, a scroll. A processing unit 48 is included.
[0055]
The enlargement processing unit 42 performs a process necessary for generating a map image enlarged according to the distance at which two fingers move away. The reduction processing unit 44 performs processing necessary to generate a map image reduced according to the distance at which two fingers approach. The rotation processing unit 46 performs processing necessary for generating a map image rotated according to one rotation angle.
[0056]
The scroll processing unit 48 performs a process necessary for generating a map image that is scrolled in accordance with the movement of one finger.
[0057]
The image generation unit 50 generates a map image to be output to the display unit based on the processing performed by the map operation processing unit 40. The map image may be generated by holding the image data with the maximum resolution and generating the image data by thinning out the image data according to the scale. Alternatively, the map image may be generated as vector data and calculated as needed. The method of generating
[0058]
2. Preferred embodiments of the present invention
Hereinafter, a preferred embodiment of the present invention will be described in detail using an electronic book as an example.
[0059]
(1) Appearance of e-book
2A, 2B, and 2C are external views of the electronic book of this embodiment.
2A is a front view of the appearance of the electronic book according to this embodiment in a closed state, and 120 is a side view. 130 is a diagram showing a state in which the electronic book of the present embodiment is opened. The electronic book of this embodiment is configured to be about the size of a paperback book when the electronic book is closed as indicated by 110 for convenience of carrying.
[0060]
FIG. 2B is a diagram showing a disk 140 in which software used for an electronic book is stored. As shown in FIG. 2C, the electronic book of this embodiment can provide information corresponding to the contents of various software by setting a disc 140 containing various software in the electronic book main body 150. .
[0061]
(2) Map image manipulation processing by finger movement
Next, a specific example of the map image operation by the finger movement in the electronic book of this embodiment will be described.
[0062]
FIG. 3 is a diagram showing an example of a screen displayed when travel information software is set. The center of the screen is mainly used as an information display area, and the end area of the screen is mainly used as a search tag area or a toolbar display area. In the information display area, the contents described in one page of the book are displayed as image information. Search tags 210 to 230 are displayed in the search tag area. In addition, images 240 and 242 simulating “book thickness” are displayed on the left and right edges of the display area.
[0063]
▲ 1 ▼ Map enlargement operation
When the user touches the “map” 220 field of the search tag with the finger 250, the entire map 260 of “India” is displayed on the screen (see FIG. 4). To obtain information about “Bombay”, place the thumb and index finger around “Bombay” on the screen with the thumb and index finger close as shown in FIG. 6B, and move the thumb and index finger away. An action of moving in the direction (map enlargement gesture) is performed (see FIG. 5).
In this way, a map image enlarged according to the movement history of the thumb and index finger is displayed. That is, the greater the degree of separation between the thumb and index finger, the smaller the scale and the more detailed the map is displayed.
[0064]
At this time, the map on the screen may be enlarged corresponding to the operation of moving the thumb and index finger away in real time. Further, after the final enlargement amount is determined when the finger stops moving, a map image enlarged according to the enlargement amount may be displayed.
[0065]
Further, as shown in FIG. 7, a case where the thumb is fixed and only the index finger is moved away from the thumb may be included in the map enlargement gesture.
[0066]
As a result of referring to the enlarged map, when it is desired to obtain a more detailed map image, a more detailed map image can be obtained by repeating the map enlargement gesture. In the present embodiment, when the city map is enlarged to some extent, a detailed map of the city such as a town map is displayed.
[0067]
▲ 2 ▼ Map scroll operation
Also, as shown in Fig. 8, if you put your finger on the screen and move it in the desired direction while pressing your finger on the screen (map scroll gesture), the map will move by the distance moved in the direction you moved. Displayed.
[0068]
▲ 3 ▼ Map reduction operation
For example, when the user wants to reduce the map, for example, when viewing a larger scale map image or displaying a wide range of information on the screen, the user first places the thumb and index finger as shown in FIG. On the map displayed on the screen in a separated state, an operation of moving the thumb and index finger closer to each other as shown in FIG. 9 (map reduction gesture) is performed. In this way, a map image reduced according to the movement history of the thumb and index finger is displayed. That is, the greater the degree of separation between the thumb and index finger, the smaller the scale and the more detailed the map is displayed.
[0069]
At this time, the map on the screen may be reduced in real time with the operation of bringing the thumb and index finger close together. Moreover, after the final reduction amount is determined when the finger stops moving, a map image reduced according to the reduction amount may be displayed.
[0070]
In contrast to FIG. 7, the map reduction gesture may also include a case where the thumb is fixed and only the index finger is moved closer to the thumb.
[0071]
As a result of referring to the reduced map, if it is desired to obtain a map image of a wider range, a map image of a wider range can be obtained by repeating the map reduction gesture. In the present embodiment, when the city map is reduced to some extent, the detailed map of the city such as a town map is changed to a normal map display and displayed.
[0072]
▲ 4 ▼ Map rotation operation
In addition, when it is desired to change the orientation of the displayed map image without changing the scale, as shown in FIG. 6 (A), the top of the map displayed on the screen is first displayed with the thumb and index finger separated. Then, one of the thumb and forefinger is fixed, and the other finger is rotated like a compass (map rotation gesture) with the fixed finger as the central axis (see FIG. 10). . In this way, a map image rotated according to the movement history of the thumb and index finger is displayed.
[0073]
As shown in FIG. 11, when one of the fingers is fixed to the point O and the other finger is rotated from the point A to the point B, it is rotated from A to B by the rotation angle Θ. A map image rotated in the direction 370 is displayed.
[0074]
At this time, the map on the screen may be rotated in real time with the rotation of either one of the fingers. Further, after the final rotation amount is determined when the finger stops moving, a map image reduced according to the rotation amount may be displayed.
[0075]
The finger movement is not limited to the case of performing with the thumb and forefinger, but may be performed with, for example, the thumb and middle finger or a combination of other fingers.
[0076]
(3) Search processing
Next, a specific example of search processing by finger movement in the electronic book of this embodiment will be described.
[0077]
▲ 1 ▼ Normal search operation
For example, when the user wants to obtain information on a hotel in “South India”, there is a method as shown in FIG. That is, first select the tag "South India", display the first page with information on "South India", then select the tag for accommodation, and the head with information on "South India accommodation" This is a method of displaying a page. When the user wants to obtain various information about “South India”, the user wants to display the first page on which information on “South India” is posted, and then searches for various information on “South India”. It is effective for etc.
[0078]
(2) Search operation with AND conditions
However, when the user needs only the “South India Accommodation” information, it is preferable that the first page on which the “South India Accommodation” information is directly displayed in one operation is preferably displayed. Therefore, in this embodiment, as shown in FIG. 13A, when the user touches the tag “South India” with the finger of the left hand and the tag “stay” with the finger of the right hand, for example, It is configured to display the first page with information on “South India” directly.
[0079]
When the information on “South India” is spread over a plurality of pages, the information described in the following pages can be read by performing page turning input as shown in FIG.
[0080]
(4) Page turning, bookmark processing, etc.
Next, a specific example of turning pages with the electronic book of this embodiment is described.
[0081]
▲ 1 ▼ Page turning input operation
In the electronic book of this embodiment, since various operations are input as finger operations on the screen, there are almost no buttons for operation input on the housing. Further, the screen on which the contents of the book are displayed is characterized in that there are almost no operation input marks on the screen (see FIG. 3).
[0082]
In the present embodiment, by setting the travel information software in the electronic book, the user can use the same as in the case of referring to the travel guidebook, and is similar to the actual book page on the screen as shown in FIG. You can refer to the contents of
[0083]
When the user wants to refer to the next page, if the user traces the information display area on the screen from the left to the right with his index finger as when turning a page of a paper book, the page appears as shown in FIG. The display screen is updated to the contents of the next page with an image that turns over.
[0084]
At this time, it is necessary for the user to move his / her finger in the horizontal direction so as to rub with a certain degree of strength by sliding the index finger or the like on the screen. In this embodiment, in order to distinguish the page turning input from other inputs, when the finger is touching the screen at a predetermined area or more and a predetermined pressure value or more and moving in the horizontal direction, This is because it is determined that turning has been input.
[0085]
Note that the page turning direction and page up / down differ depending on the vertical writing or horizontal writing as in the actual book. Therefore, in the case of a vertically written book, the page advances from the right to the left. Therefore, when the finger is moved as shown in FIG. 14, the next page is turned, but in the case of the horizontal writing, the previous page is turned. On the other hand, in the case of a vertically written book, the previous page is turned when tracing with the index finger from the right to the left, as opposed to FIG. 14, but in the case of horizontal writing, the next page is turned.
[0086]
In this way, the user can input the page turning in the same way as when handling a normal book, so that it is possible to provide a human interface that is easy to learn and easy to use.
[0087]
In addition, when inputting a page turning, an image in the middle of turning the page according to the movement of the finger may be displayed as shown in FIG. 14, but it may be configured to switch directly to the previous page screen or the next page screen.
[0088]
In addition, an image sound that can be associated with the sound of turning the page such as “para” corresponding to the page turning may be output.
[0089]
▲ 2 ▼ Continuous page turning input operation
As shown in FIG. 15, when the user continues to touch images 240 imitating “book thickness” (hereinafter referred to as “book thickness”) 240 and 242 for a predetermined time or more, the pages are flipped continuously. At this time, the page turning speed can be changed by changing the strength with which the user touches. That is, the user can increase the speed at which the page is turned by touching more strongly. Also, by reducing the strength of touching, you can slow down the page turning speed. When the user finds the page he / she wants to read, the user can release the “book thickness” to stop the continuous page turning and position the display screen on the page.
[0090]
As in the case of the page turning described above, the raising / lowering of the page differs depending on the vertical writing or the horizontal writing. Therefore, in the case of a vertically written book, if the thickness of the leftmost book is continuously touched as shown in FIG. 15, the page is continuously turned in the next page direction, but in the case of horizontal writing, the page is continuously turned in the previous page direction. Turn over. On the other hand, in the case of vertical writing, conversely to FIG. 15, if you keep touching the thickness of the rightmost book, the page will turn continuously in the previous page direction, but in horizontal writing, the page will continue in the next page direction. Turn over.
[0091]
In this way, the user can input the page turning in the same way as when handling a normal book, so that it is possible to provide a human interface that is easy to learn and easy to use.
[0092]
When continuous page turning is input, an image in the middle of turning the page may be displayed according to the movement of the finger as shown in FIG. 15, but it may be configured to switch directly to the previous page screen or the next page screen every predetermined time. Good.
[0093]
In addition, an image sound that can be associated with a sound that the page turns, such as “para-para-pala”, may be output corresponding to the page turning.
[0094]
▲ 3 ▼ Bookmark insertion, reference operation
Next, the bookmark function of this embodiment will be described. In this embodiment, it is possible to attach a bookmark to a page to be referred to again so that a bookmark is inserted at a position to be referred to again during normal reading.
[0095]
As shown in FIG. 16, a bookmark can be inserted into the page by dragging the arrow portion 260 and tracing it with the finger to the bottom of the screen. That is, after the above operation, the bookmark mark 270 is displayed on the screen as shown in FIG.
[0096]
When the user is referring to another page, a bookmark 270 is displayed at the lower end of the screen as shown in FIG.
[0097]
When the user wants to refer to the page with the bookmark, the user touches the bookmark 270 displayed at the bottom of the screen with a finger as shown in FIG. 18B, as shown in FIG. 18C. Then, the screen switches to a page with a bookmark.
[0098]
In addition, although it demonstrated taking the case where only one bookmark was pinched | interposed, it is not restricted to this. For example, when bookmarks are to be attached to a plurality of pages, bookmark marks of a plurality of colors may be displayed.
[0099]
(5) Today's folder usage example
Next, a specific example of using today's folder according to the present embodiment will be described.
[0100]
In FIG. 3, when the input icon 280 is touched with a finger, a toolbar composed of various operation icons (282, 284, 286, 288) is displayed at the bottom of the screen as shown in FIG.
[0101]
Reference numeral 282 denotes an icon to be touched when shifting to a mode for inputting various settings of the electronic book. Reference numeral 284 denotes an icon to be touched when shifting to a mode for shooting a moving image or a still image with a camera which is an accessory of the electronic book. Reference numeral 286 denotes an icon to be touched when shifting to a mode in which characters, figures, and the like are input by using a pen as an accessory part of the electronic book. Reference numeral 288 denotes an icon that is touched when the input data or information specified on the screen is stored in the today's folder, or when it is desired to refer to the contents of the today's folder. This today's folder is automatically created every day, and its usage is like a warehouse where data created in daily use scenes is always kept. Hereinafter, various usage examples of today's folder will be described.
[0102]
(1) An example of floating information stored in an electronic book
An example of floating and storing information stored in an electronic book will be described with reference to FIGS. For example, if you want to get information on “North India”, touch the index of “North India” to open the page and read it. Among them, the word “Tajma Heil” is displayed in red, so touch it (see FIG. 20A). Then, it is configured to automatically jump to the “Tajma Hail” page.
[0103]
For example, if you read about “Tajma Heil” in a regular paper book and want to copy this part and carry it with you, you can perform the following operations on this electronic book.
[0104]
That is, the user encircles the area in which the information that the user wants to cut is written with the index finger, and moves the finger away from the screen (see arrow 410 in FIG. 20B). Then, the enclosed portion is displayed as if it was raised on the screen (see 420 in FIG. 21). This is called floating.
[0105]
Then, press the floating part with your finger, move to the icon 288 of today's folder by dragging and dropping, and release your finger there (hereinafter referred to as "Drag and drop to today's folder") ) And (see FIG. 22), the floating part is stored in the folder of today. In this way, in this electronic book, if the content to be cut is designated with a finger and dragged and dropped into the today's folder, the content designated on the screen can be stored in the today's folder.
[0106]
Note that the area to be floated is not limited to an area formed by a closed curve or a polygon, but may be an area specified by a portion surrounded by the edge of the screen and a finger. For example, as shown in FIG. 42 (A), when a trace is drawn with a finger like 840 and the screen is traced, a portion 852 (shaded area) surrounded by the trace 840 and the edge line 850 at the end of the screen is floated. You may do it.
[0107]
Further, as shown in FIG. 42B, two points P1 and P2 on the screen are designated with a finger, and a rectangular region 854 (hatched region) having a line segment connecting the two points as a diagonal is floated. It may be.
[0108]
Further, as shown in FIG. 42 (C), three points P3, P4, and P5 on the screen are designated with a finger, and a circular region 856 (hatched region) having the three points on the circumference is floated. You may do it.
[0109]
(2) Example of storing still images and moving images
Next, an example of storing video captured by the camera in today's folder will be described with reference to FIGS.
[0110]
For example, when the user wants to share the contents of the timetable during the trip, if the electronic book is used, the camera lens 520 provided in the electronic book body is pulled out as shown in FIG. The timetable 510 can be photographed and the photographing data can be stored in an electronic book.
[0111]
That is, when the user pulls out the toolbar of the electronic book and touches the camera icon 284 with a finger, the camera enters the shooting mode, and a camera shooting operation display screen as shown in FIG. 23 is displayed. The user touches the screen switches 550 and 540 displayed on the finder screen 530 arranged largely on the left side of the screen with a finger to shoot a moving image or a still image. You can choose.
[0112]
For example, when the user touches the still image screen switch 540, the display of the shooting execution switch 560 changes to “shutter”. When the user points the camera lens toward the timetable 510, a timetable image captured by the camera lens 520 is displayed on the viewfinder screen 530. When the user touches the “shutter” button 560 with a finger, the image data that has been taken is automatically stored in the folder file together with the shooting date and time.
[0113]
The folder file is a file for storing information to be put in “today's folder”. The stored information is managed by date and time, and is formed so as to be readable in date units.
[0114]
Further, for example, when the user wants to shoot a moving image, when the moving image switch 550 is touched, the display of the shooting execution switch 560 changes to “waiting for recording”. When the user touches the “recording standby” button, shooting of a moving image starts.
[0115]
Note that as shown in FIG. 25, the camera lens 520 of the electronic book is a wireless type that can be detached from the electronic book main body 522, so that the user can shoot without hesitation in the surrounding people. When the user presses the shooting execution switch 560 displayed as “recording standby”, the display is switched to “shooting”. If the user wants to stop shooting, touching the “shooting” button with his / her finger stops shooting and the display switches to “waiting for shooting”. The captured image is automatically stored in the folder file together with the shooting date and time.
[0116]
(3) Example of storing notes
Next, an example of storing user memos will be described with reference to FIGS.
[0117]
When the user pulls out the toolbar at the bottom of the screen and touches the “memo” icon 286 with a finger, a memo input screen 600 as shown in FIG. 26 is displayed.
When the user inputs characters or the like on this screen with the pen 610 attached to the electronic book, the image data is recorded as it is. After the writing, as shown in FIG. 27, when the memo input screen is dragged and dropped to today's folder, the contents described in the memo input screen 600 can be stored in the folder file together with the storage date and time.
[0118]
▲ 4 ▼ Today's folder reference processing
When the user pulls out the tool bar at the bottom of the screen and touches the “Today's folder” icon 288 with a finger, the today's folder screen 700 of that day as shown in FIG. 28 is displayed. The data stored in today's folder on that day is displayed as icons (710, 720, 730, 740). In this electronic book, the data content stored by the user is converted into an icon as a reduced image as it is, so that the user can easily recall the contents of the data. Furthermore, since the time when the data is stored is displayed below the icon, it can be easily used as a user's action record, and is convenient for organizing the data later.
[0119]
When the user touches iconified data 710, 720, 730, 740 with a finger and drags and drops it to the “view contents” portion 750, the contents are displayed on the screen. Similarly, the contents can be automatically deleted by putting them in the trash box portion 780 marked “Discard”.
[0120]
Touching the portion 760 labeled “Previous Day” displays the “Today's Folder Screen” on the previous day, and touching the portion 770 labeled “Next Day” displays the “Today's Folder Screen” on the next day. Is displayed. The user can go back to the previous folder screen or return to the current folder screen by touching the “previous day” and “next day” portions.
[0121]
Also, as shown in FIG. 29, when the icons of related data are moved with a finger so as to touch, the data in contact are grouped. Therefore, it is convenient for data organization.
[0122]
FIG. 30 is a diagram for explaining an example of utilization of today's folder.
[0123]
For example, assume that a user carries this electronic book on a trip for about one month and stores various data in today's folder during the trip. When the user opens the electronic book, 30 today's folders are stored (see FIG. 30A).
[0124]
The user writes the data of today's folder stored in the electronic book 800 to another computer 810 connected to the Internet, and sends the data to the travel data collection company 820 using the Internet (see FIG. 30B).
[0125]
The travel data collection company 820 edits the collected data and supplies the latest travel data to the travel software publishing company 830. The travel software publishing company 830 releases travel software upgraded based on the latest data.
[0126]
If the electronic publishing industry develops in this way, it will be able to supply digital software that reflects the latest data. In addition, because it does not require money or hassle, publishing an ideal image of publishing that everyone can publish easily or can publish specialized things with limited subscribers. Is also possible.
[0127]
(6) Structure of electronic book
Next, a hardware configuration of the electronic book of this embodiment will be described with reference to FIG.
[0128]
As shown in FIG. 31, the electronic book of this embodiment includes a CPU (central processing unit) 1010, a memory 1020, a display controller 1030, a touch panel controller 1040, a bus 1050, a touch panel 1060, a display 1070, a disk drive controller 1080, and a disk. A drive 1090, an information storage medium 1220, a camera 1130, and a pen 1120 are included.
[0129]
The display 1070 is composed of a liquid crystal or the like, and the output is controlled by the display controller 1030.
[0130]
The touch panel 1060 is constituted by a panel such as an optical type, a resistance type, a capacitance type, and an ultrasonic type, and is controlled by a touch panel controller 1040. The touch panel 1060 is installed by overlapping a transparent touch sensor plate on the display 1070. When the user touches the display screen with a fingertip, a pen 1120, or the like, the touch panel 1060 can detect finger contact position information, contact pressure and contact area, and image data such as characters and figures input with the pen 1120.
[0131]
In this way, by integrating the transparent touch sensor plate on the surface of the display 1070 and integrating them, finger operation input and pen input on the display screen become possible.
[0132]
The CPU 1010 performs control of the entire apparatus, various data processing, and various processing described with reference to FIGS. The memory is composed of a ROM and a RAM, and the RAM is a storage means used as a work area of the CPU 1010 and stores a given content of the information storage medium 1220 and the ROM, a calculation result of the CPU 1010, and the like.
[0133]
A disk drive 1090 writes and reads data to and from an information storage medium 1220 such as a floppy disk, and is controlled by a disk drive controller 1080.
[0134]
The information storage medium 1220 mainly stores data for generating an image, a program, information for performing various processes described with reference to FIGS.
[0135]
The camera 1130 is for shooting moving images and still images.
[0136]
The pen 1120 is used for inputting a memo on the display screen, and may be anything as long as a pen-shaped stick or ink does not stick to the display.
[0137]
When the user performs various operations such as performing a finger operation on the display, inputting a memo, or taking a picture with a camera, the CPU 1010 executes an operation instructed by the user based on the input content.
[0138]
FIG. 32 is an example of a functional block diagram of the electronic book.
[0139]
The finger motion detection unit 1110 is for detecting a finger movement history, a contact pressure, and a contact area performed by the user on the display unit. The finger motion detection unit 1110 is configured by overlaying a transparent touch panel or the like on the display unit 1240. Detection data obtained by the finger motion detection unit 1110 is input to the processing unit 1100.
[0140]
The pen input unit 1120 is used by the user to input content written with a pen on the display unit. The pen input unit 1120 is configured such that when a user writes a character, a figure, or the like on the display unit 1240 with the previous pen 1120, a transparent touch panel or the like superimposed on the display unit detects the content as image data. Detection data obtained by the pen input unit 1120 is input to the processing unit 1100.
[0141]
The photographing unit 1130 is for the user to photograph at least one of a moving image and a still image. The photographing unit 1130 is configured by a camera or a video camera. Shooting data shot by the shooting unit 1130 is input to the processing unit 1100.
[0142]
The processing unit 1100 performs processing for generating an image to be displayed on the display unit, processing for storing the data in a folder file, and the like based on the detection data, photographing data, a given program, and the like by the finger movement and pen input. It is. The function of the processing unit 1100 can be realized by hardware such as a CPU (CISC type, RISC type), a DSP, a custom (gate array, etc.) IC, and a memory.
[0143]
The information storage medium 1220 is for storing programs and data.
The function of the information storage medium 1220 can be realized by hardware such as a CD-ROM, cassette, IC card, MO, FD, DVD, hard disk, memory, and the like. The processing unit 1100 performs various processes based on the program and data from the information storage medium 1220.
[0144]
The processing unit 1100 includes a processing content determination unit 1140, various processing units 1150, an image generation unit 1200, and a storage unit 1230.
[0145]
The processing content determination unit 1140 determines the content to be processed based on data input from the finger motion detection unit 1110, the pen input unit 1120, and the imaging unit 1130.
[0146]
The various processing units 1150 are an enlargement processing unit 1162, a reduction processing unit 1164, a rotation processing unit 1166, a scroll processing unit 1168, a normal search processing unit 1172, a logical product search processing unit 1174, a page turning processing unit 1182, and a continuous page turning processing. Section 1184, bookmark insertion processing section 1186, bookmark insertion position reference processing section 1188, floating processing section 1192, imaging processing section 1194, memo input processing section 1196, and folder reference processing section 1198, according to the processing content determination section 1140. , Map image enlargement processing, reduction processing, rotation processing, scroll processing, normal search processing, logical product search processing, page turning processing, continuous page turning processing, bookmark insertion processing, bookmark insertion location reference processing, floating processing, shooting processing Memo input processing, folder reference processing, and the like.
[0147]
The storage unit 1230 stores various types of information, and includes a folder file 1232 for storing data stored in today's folder.
[0148]
The image generation unit 1200 generates an image to be displayed on the display unit based on processing performed by the various processing units 1150.
[0149]
(7) Example of operation of this embodiment
33 to 41 are flowcharts showing an operation example of the electronic book of this embodiment.
[0150]
In the electronic book of the present embodiment, when there is an input such as finger movement, pen input, photographing, etc., the processing content is determined as follows (step S10 in FIG. 33). If it is the current shooting mode, shooting processing is performed (steps S20 and S30). Note that the normal input mode is selected, and when the camera icon on the tool bar is touched, the shooting mode is entered. When an input is detected in the shooting mode, the shooting process described with reference to FIGS. 23 to 25 is performed.
[0151]
For example, when it is detected that the user has pressed an operation button on the screen, processing corresponding to the button, for example, when a “moving image” or “still image” button is touched, selection processing of moving image and still image When the “Shutter” button is touched, a still image is shot, and the captured image data is stored in a folder file with the shooting date and time. When the “Recording standby” button is touched, , The process of starting the video recording, the process of ending the video recording when the “Recording” button is touched, and storing the captured image data in the folder file with the shooting date and time, etc. .
[0152]
If it is the current memo input mode, a memo input process is performed (steps S40 and S50). Note that the normal input mode is selected, and when the memo icon on the toolbar is touched, the memo input mode is entered. When an input is detected in the memo input mode, the memo input process described with reference to FIGS. 26 to 27 is performed.
[0153]
For example, when it is detected that the user has entered a character or the like with a pen on the screen, the input content is displayed in real time, and the input content is stored in the work area as image data. When the input content is dragged and dropped, a process of storing the image data stored in the work area in a folder file with the date and time of storage is performed.
[0154]
If it is the current folder reference mode, folder reference processing is performed (steps S52 and S54). Normally, the mode is the normal input mode, and when today's folder icon on the toolbar is touched, the mode shifts to the folder reference mode. When an input is detected in the folder reference mode, the folder reference process described with reference to FIGS. 28 to 29 is performed.
[0155]
For example, when it is detected that the user has touched an icon on the screen and dragged and dropped it to the “view contents” portion, processing for displaying the data contents on the screen is performed. Similarly, when it is detected that the object has been put in the trash box marked “discard”, a process of deleting the data is performed. When it is detected that the part labeled “Previous Day” is touched, the process of displaying the “Today's Folder Screen” of the previous day is performed, and the part labeled “Next Day” is touched. The next day “Today's folder screen” is displayed on the next day.
[0156]
In the normal input mode, when a finger touches the touch panel, the following processing is performed (see step S60 in FIG. 33 and FIG. 34).
[0157]
When there is contact with the icon on the tool bar, various icon processing (see FIG. 41) is performed (steps S70 and S80 in FIG. 34).
[0158]
In the case of contact with various input marks such as “search tag”, “book thickness”, “bookmark”, and “bookmark insertion arrow”, input mark operation processing (see FIG. 36) is performed (step 36). S90, S100).
[0159]
If there is a second touch on the touch panel, and if a map image is displayed, map operation processing is performed (steps S110, S120, S130).
[0160]
If there is no contact at the second point, it is detected whether or not the contact point is moving, and if it is moving, the processing content that is instructed by the contact area and the contact pressure is determined ( Steps S140 and S150).
[0161]
If the contact area and the contact pressure are equal to or greater than the predetermined values, scroll processing is performed if the displayed image is a map image, and page turning processing is performed if the displayed image is a normal book page image (step S160). , S180).
[0162]
When the contact area and the contact pressure are not equal to or greater than the predetermined value, the following processing is performed (see FIG. 35). If there is information surrounded by a finger when not dragging and dropping to “today's folder”, floating processing of the information surrounded by the finger is performed (steps S910, S960, and S970).
[0163]
In the case of drag and drop to “today's folder”, if it is a memo content, the memo content is stored as image data in a folder file with the storage date and time (steps S920 and S930).
[0164]
If it is floating data, the storage date is added to the floating data and stored in a folder file (steps S940 and S950).
[0165]
FIG. 36 is a flowchart for explaining detailed processing contents of the processing (step S100 in FIG. 34) when the touch to the input mark is detected.
[0166]
When the user's finger is in contact with the search tag, search processing is performed (steps S210 and S220).
[0167]
If the user's finger is in contact with the bookmark insertion arrow mark, bookmark insertion processing is performed (steps S230 and S240).
[0168]
If the user's finger is in contact with the bookmark mark, bookmark insertion location reference processing is performed (steps S250 and S260).
[0169]
If the user's finger is in contact with the continuous page turning mark, continuous page turning processing is performed (steps S270 and S280).
[0170]
FIG. 37 is a flowchart for explaining detailed processing contents of the map operation processing (step S130 in FIG. 34).
[0171]
A change in the distance between the two points is calculated (step S310), and if the distance between the two points is enlarged, an enlargement process corresponding to the enlarged distance is performed (steps S320 and S330).
[0172]
If the distance between the two points is reduced, a reduction process corresponding to the reduction distance is performed (steps S340 and S350).
[0173]
If the distance between the two points has not changed, a rotation process is performed (steps S360 and S370).
[0174]
FIG. 38 is a flowchart for explaining detailed processing contents of the search processing (step S220 in FIG. 36).
[0175]
If the second contact of the user's finger is not detected, a page containing information that satisfies the search conditions of the search tag that the user's finger is touching is searched, and the first page is displayed. Search processing is performed (steps S410 and S420).
[0176]
When the second contact of the user's finger is detected and the contact is on the search tag, if the AND of the search conditions of the two search tags is scheduled, A page in which information satisfying the condition corresponding to the logical product of the search conditions is searched is searched, and a logical product search process for displaying the first page on the display unit is performed (steps S440 and S450).
[0177]
FIG. 39 is a flowchart for explaining detailed processing contents of the page turning processing (step S180 in FIG. 34).
[0178]
When the contact position of the user's finger moves from left to right on the screen, if the displayed book is a vertical book, it is updated to the next page image, and if it is a horizontal book, The image of the previous page is updated (steps S510, S520, S530, S540).
[0179]
When the contact position of the user's finger moves from right to left on the screen, if the displayed book is a vertical book, it is updated to the previous page image, and if it is a horizontal book, The next page image is updated (steps S550, S560, S570, and S580).
[0180]
FIG. 40 is a flowchart for explaining detailed processing contents of the continuous page turning processing (step S280 in FIG. 36).
[0181]
The contact pressure of the user's finger is detected, and if it is not equal to or higher than the predetermined pressure value, continuous page turning is stopped (steps S610, S620, S630).
[0182]
If the pressure value is equal to or higher than the predetermined pressure value, continuous page turning is performed as follows.
[0183]
That is, if the contact position of the user's finger is the thickness of the rightmost book on the screen, if the displayed book is a vertically written book, the page is continuously turned in the previous page direction, and the horizontally written book In this case, page turning is continuously performed in the next page direction (steps S640, S650, S660, S670).
[0184]
If the contact position of the user's finger is the thickness of the book at the left end of the screen, if the displayed book is a vertically written book, the page will be turned continuously in the direction of the next page, and the horizontally written book will be displayed. In this case, page turning is continuously performed in the previous page direction (steps S640, S680, S690, and S700).
[0185]
FIG. 41 is a flowchart for explaining detailed processing contents of various icon processing (step S80 in FIG. 34).
[0186]
If the touch is on the camera icon, a camera shooting operation screen as shown in FIG. 23 is displayed and the mode is shifted to the shooting mode. (Steps S810 and S820).
Hereinafter, when there is an input during the shooting mode, the shooting process of step S30 in FIG. 33 is executed.
[0187]
If the touch is on the memo icon, a memo input screen as shown in FIG. 26 is displayed and the memo input mode is entered. (Steps S830 and S840). Hereinafter, when there is an input during the memo input mode, the memo input process of step S50 of FIG. 33 is executed.
[0188]
If the touch is on the today's folder icon, the today's folder screen as shown in FIG. 28 is displayed and the mode shifts to the folder reference mode. (Steps S850 and S860). When there is an input during the folder reference mode, the folder reference process in step S54 in FIG. 33 is executed.
[0189]
(8) Various other embodiments
In addition, this invention is not limited to this embodiment, A various deformation | transformation implementation is possible within the range of the summary of this invention.
[0190]
In this embodiment, the case where operation input is performed using the thumb and index finger has been described as an example, but the present invention is not limited to this. For example, the thumb and middle finger may be used, or other combinations of fingers may be used.
[0191]
In this embodiment, the case of an electronic book has been described as an example, so that the first page in which search information that is the logical product of search items is displayed is displayed. However, in the case of a portable information terminal other than an electronic book, There may be no concept. Therefore, information units may be displayed regardless of the page.
[0192]
In the present embodiment, the case where two search items are simultaneously touched with a finger and search information that is the logical product of the two items is output has been described as an example. However, the present invention is not limited to this. For example, three or more search items may be simultaneously touched with a finger, and search information that is a logical product of the three or more items may be output.
[0193]
Further, the search information is not limited to the case of touching with a finger at the same time, and search information that is a logical product may be output when touching with a finger within a predetermined time.
[0194]
In addition, when there is no information having a logical product relationship with a search condition corresponding to a plurality of search items touched with a finger at the same time or within a predetermined time, at least one of logical sum and a combination of logical sum and logical product is determined. You may comprise so that the means to output the information which it has to a display part may further be included.
[0195]
For example, when the tags “South India”, “Accommodation” and “Meals” are touched at the same time, the South India accommodation information and South India meal information may be output.
[0196]
In particular, when the information is displayed regardless of the page, it is effective to take such a configuration.
[0197]
For example, if an electronic book or a portable information terminal that stores phone numbers can be searched and output by phone number, specifying multiple phone number search items in the table of contents automatically performs an OR operation. And the case of listing telephone numbers having a logical product relationship. That is, for example, when an item in a common set of “A hospital in A district” such as “A district” and “hospital” is designated, information in a logical product relationship is retrieved and output, When items that are not related to a common set such as “A district” and “B district” or “hospital” and “library” are designated, information having a logical sum is retrieved and output. You may comprise.
[0198]
In this embodiment, the screen is illustrated as a full screen such as a memo input screen and a photo mode screen, but a partial display using a window may be used.
[0199]
[Brief description of the drawings]
FIG. 1 is a functional block diagram of a form information device and an electronic book having characteristic functions of the present invention.
FIGS. 2A, 2B, and 2C are external views of electronic books according to the present embodiment.
FIG. 3 is a diagram showing an example of a screen displayed when travel information software is set.
FIG. 4 is a diagram showing a display example of a map image.
FIG. 5 is a diagram for explaining an operation example of a map enlargement gesture in the present embodiment;
FIGS. 6A and 6B are diagrams for explaining an example of finger operation in the present embodiment. FIGS.
FIG. 7 is a diagram for explaining another operation example of a map enlargement gesture in the present embodiment;
FIG. 8 is a diagram for explaining an operation example of a map scroll gesture according to the present embodiment;
FIG. 9 is a diagram for explaining an operation example of a map reduction gesture in the present embodiment;
FIG. 10 is a diagram for explaining an operation example of a map rotation gesture in the present embodiment;
FIG. 11 is a diagram for explaining a rotation angle of a map in the present embodiment.
FIG. 12 is a diagram for describing an example of search processing according to the present embodiment;
FIG. 13 is a diagram for describing an example of a logical product search process according to the present embodiment;
FIG. 14 is a diagram for describing a page turning operation in the present embodiment;
FIG. 15 is a diagram for describing a continuous page turning operation in the present embodiment;
FIG. 16 is a diagram for explaining a bookmark insertion operation in the present embodiment.
FIG. 17 is a diagram for explaining a bookmark insertion operation in the present embodiment.
FIG. 18 is a diagram for describing a bookmark insertion location reference operation in the present embodiment;
FIG. 19 is a diagram for explaining an example of a screen on which a tool bar is displayed.
FIG. 20 is a diagram for describing an operation example of floating processing in the present embodiment;
FIG. 21 is a diagram for explaining an operation example of a floating process in the present embodiment;
FIG. 22 is a diagram for explaining an example of drag and drop operation in the present embodiment;
FIG. 23 is a diagram showing a camera photographing operation screen according to the present embodiment.
FIG. 24 is a diagram for describing still image shooting processing in the present embodiment;
FIG. 25 is a diagram for describing moving image shooting processing according to the present embodiment;
FIG. 26 is a diagram for explaining memo input processing in the present embodiment;
27 is a diagram for explaining a memo input drag-and-drop operation according to the present embodiment; FIG.
FIG. 28 is a diagram showing today's folder reference screen according to the present embodiment.
FIG. 29 is a diagram for explaining today's folder reference processing in the present embodiment;
FIG. 30 is a diagram for explaining an example of utilization of today's folder in the present embodiment;
FIG. 31 is a diagram for explaining a hardware configuration of the electronic book according to the embodiment;
FIG. 32 is an example of a functional block diagram of an electronic book according to the present embodiment.
FIG. 33 is a flowchart showing an operation example of this embodiment.
FIG. 34 is a flowchart showing an operation example of the present embodiment.
FIG. 35 is a flowchart showing an operation example of this embodiment.
FIG. 36 is a flowchart showing an operation example (input mark operation processing) of the present embodiment.
FIG. 37 is a flowchart showing an operation example (map operation process) of the present embodiment.
FIG. 38 is a flowchart showing an operation example (search process) of the present embodiment.
FIG. 39 is a flowchart showing an operation example (page turning process) of the present embodiment;
FIG. 40 is a flowchart showing an operation example (continuous page turning process) of the present embodiment.
FIG. 41 is a flowchart showing an operation example (various icon processing) of the present embodiment.
FIG. 42 is a diagram for describing another example of the operation of the floating process in the present embodiment.
[Explanation of symbols]
10 finger motion detector
20 processor
30 Operation content judgment section
40 Map operation processing section
42 Enlargement processing section
44 Reduction processing section
46 Rotation processing part
48 Scroll processing part
50 Image generator
60 Display section
70 Information storage media
1010 CPU (Central Processing Unit)
1020 memory
1030 Display controller
1040 Touch panel controller
1050 bus
1060 touch panel
1070 display
1080 Disk drive controller
1090 disk drive
1100 Processing unit
1110 Finger movement detection unit
1120 Input unit (pen)
1130 Camera (camera)
1140 Processing content determination unit
1150 Various processing units
1160 Map operation processing section
1162 Enlargement processing unit
1164 Reduction processing unit
1166 Rotation processing unit
1168 Scroll processing section
1170 Search processing unit
1172 Normal search processing unit
1174 AND Search Processing Unit
1182 Page turning processing part
1184 Continuous page turning processing part
1186 Bookmark Insertion Processing Unit
1188 Bookmark Insertion Location Reference Processing Unit
1192 Floating processing part
1194 Shooting processing unit
1196 Memo input processing unit
1198 Folder reference processing section
1200 Image generator
1220 Information storage media
1230 storage unit
1232 folder file
1240 Display unit

Claims (4)

  1. 表示対象画像の一部を表示可能な表示手段と、
    前記表示対象画像の一部が表示されている前記表示手段に接触させた指の移動履歴に基づき、前記表示手段に表示されている前記表示対象画像の回転、拡大、縮小及びスクロールの少なくとも1つの操作指示が入力されたと判断する操作内容判断手段と、
    前記判断された操作指示に基づき、前記表示手段に表示されている前記表示対象画像に前記回転、拡大、縮小及びスクロールの少なくとも1つの操作を施した画像を生成する画像生成手段と、
    を備え、
    前記操作内容判断手段は、
    前記指の移動履歴が1本の指を軸に他の1本の指を回転させる動作である場合は、回転操作指示が入力されたと判断し、
    前記指の移動履歴が2本の指を遠ざける動作である場合は、拡大操作指示が入力されたと判断し、
    前記指の移動履歴が2本の指を近づける動作である場合は、縮小操作指示が入力されたと判断し、
    前記画像生成手段は、
    前記拡大を施した画像を生成する場合には、前記表示手段に表示されている前記表示対象画像に前記拡大を施した結果、前記表示手段に表示される画像が前記拡大の操作を施す前に表示されていた前記表示対象画像における指の接触位置を含む画像を生成し
    前記縮小を施した画像を生成する場合には、前記表示手段に表示されている前記表示対象画像に前記縮小を施した結果、前記表示手段に表示される画像が前記縮小の操作を施す前に表示されていた前記表示対象画像における指の接触位置を含む画像を生成し、
    前記回転を施した画像を生成する場合には、前記表示手段に表示されている前記表示対象画像に前記回転を施した結果、前記表示手段に表示される画像が前記回転の操作を施す前に表示されていた前記表示対象画像における指の接触位置を含む画像を生成することを特徴とする携帯情報機器。
    Display means capable of displaying a part of the display target image;
    At least one of rotation, enlargement, reduction and scrolling of the display target image displayed on the display means based on the movement history of the finger touching the display means on which a part of the display target image is displayed Operation content determination means for determining that an operation instruction has been input;
    Image generation means for generating an image obtained by performing at least one of the rotation, enlargement, reduction, and scrolling on the display target image displayed on the display means based on the determined operation instruction;
    With
    The operation content determination means includes
    If the movement history of the finger is an operation of rotating another finger around one finger, it is determined that a rotation operation instruction has been input;
    If the movement history of the finger is an action of moving two fingers away, it is determined that an enlargement operation instruction has been input;
    If the movement history of the finger is an operation of bringing two fingers closer together, it is determined that a reduction operation instruction has been input,
    The image generating means includes
    When the enlarged image is generated, the image displayed on the display unit is subjected to the enlargement operation as a result of performing the enlargement on the display target image displayed on the display unit. Generate an image including a finger contact position in the displayed display target image,
    When generating the reduced image, the image displayed on the display unit is subjected to the reduction operation as a result of performing the reduction on the display target image displayed on the display unit. Generate an image including a finger contact position in the displayed display target image,
    In the case of generating the rotated image, the image displayed on the display unit is subjected to the rotation operation as a result of performing the rotation on the display target image displayed on the display unit. A portable information device that generates an image including a touch position of a finger in the displayed display target image .
  2. 請求項1において、
    前記操作内容判断手段が、
    前記指の移動履歴に基づき、前記表示手段に表示されている前記表示対象画像の回転量、拡大量、縮小量及びスクロール量の少なくとも1つの操作量を決定し、
    前記画像生成手段が、
    前記決定された操作量に基づき、前記表示手段に表示されている前記表示対象画像に前記回転、拡大、縮小及びスクロールの少なくとも1つの操作を施した前記表示手段に表示される画像を生成することを特徴とする携帯情報機器。
    In claim 1,
    The operation content determination means is
    Based on the movement history of the finger, determine at least one operation amount of a rotation amount, an enlargement amount, a reduction amount, and a scroll amount of the display target image displayed on the display means;
    The image generating means
    Based on the determined operation amount, generating an image to be displayed on the display unit in which at least one of rotation, enlargement, reduction, and scrolling is performed on the display target image displayed on the display unit. A portable information device characterized by
  3. 表示対象画像の一部を表示可能な表示手段を含む携帯情報機器の制御方法であって、
    前記表示対象画像の一部が表示されている前記表示手段に接触させた指の移動履歴に基づき、前記表示手段に表示されている前記表示対象画像の回転、拡大、縮小及びスクロールの少なくとも1つの操作指示が入力されたと判断する操作内容判断ステップと、
    前記判断された操作指示に基づき、前記表示手段に表示されている前記表示対象画像に前記回転、拡大、縮小及びスクロールの少なくとも1つの操作を施した画像を生成する画像生成ステップと、
    を備え、
    前記操作内容判断ステップは、
    前記指の移動履歴が、1本の指を軸に他の1本の指を回転させる動作である場合は、回転操作指示が入力されたと判断し、
    前記指の移動履歴が、2本の指を遠ざける動作である場合は、拡大操作指示が入力されたと判断し、
    前記指の移動履歴が、2本の指を近づける動作である場合は、縮小操作指示が入力されたと判断し、
    前記画像生成ステップは、
    前記拡大を施した画像を生成する場合には、前記表示手段に表示されている前記表示対象画像に前記拡大を施した結果、前記表示手段に表示される画像が前記拡大の操作を施す前に表示されていた前記表示対象画像における指の接触位置を含む画像を生成し
    前記縮小を施した画像を生成する場合には、前記表示手段に表示されている前記表示対象画像に前記縮小を施した結果、前記表示手段に表示される画像が前記縮小の操作を施す前に表示されていた前記表示対象画像における指の接触位置を含む画像を生成し、
    前記回転を施した画像を生成する場合には、前記表示手段に表示されている前記表示対象画像に前記回転を施した結果、前記表示手段に表示される画像が前記回転の操作を施す前に表示されていた前記表示対象画像における指の接触位置を含む画像を生成することを特徴とする携帯情報機器の制御方法。
    A method for controlling a portable information device including display means capable of displaying a part of a display target image,
    At least one of rotation, enlargement, reduction and scrolling of the display target image displayed on the display means based on the movement history of the finger touching the display means on which a part of the display target image is displayed An operation content determination step for determining that an operation instruction has been input;
    An image generation step of generating an image obtained by performing at least one of the rotation, enlargement, reduction, and scrolling on the display target image displayed on the display unit based on the determined operation instruction;
    With
    The operation content determination step includes
    When the movement history of the finger is an operation of rotating another finger around one finger as an axis, it is determined that a rotation operation instruction has been input,
    When the movement history of the finger is an operation of moving two fingers away, it is determined that an enlargement operation instruction has been input,
    When the movement history of the finger is an operation of bringing two fingers close together, it is determined that a reduction operation instruction has been input,
    The image generation step includes
    When the enlarged image is generated, the image displayed on the display unit is subjected to the enlargement operation as a result of performing the enlargement on the display target image displayed on the display unit. Generate an image including a finger contact position in the displayed display target image,
    When generating the reduced image, the image displayed on the display unit is subjected to the reduction operation as a result of performing the reduction on the display target image displayed on the display unit. Generate an image including a finger contact position in the displayed display target image,
    In the case of generating the rotated image, the image displayed on the display unit is subjected to the rotation operation as a result of performing the rotation on the display target image displayed on the display unit. A method for controlling a portable information device, comprising: generating an image including a finger contact position in the displayed display target image .
  4. 表示対象画像の一部を表示可能な表示手段を含む携帯情報機器を制御するためのプログラムが記憶された情報記憶媒体であって、
    前記表示対象画像の一部が表示されている前記表示手段に接触させた指の移動履歴に基づき、前記表示手段に表示されている前記表示対象画像の回転、拡大、縮小及びスクロールの少なくとも1つの操作指示が入力されたと判断する操作内容判断手段と、
    前記判断された操作指示に基づき、前記表示手段に表示されている前記表示対象画像に前記回転、拡大、縮小及びスクロールの少なくとも1つの操作を施した画像を生成する画像生成手段と、してコンピュータを機能させるプログラムが記憶され、
    前記操作内容判断手段は、
    前記指の移動履歴が1本の指を軸に他の1本の指を回転させる動作である場合は、回転操作指示が入力されたと判断し、
    前記指の移動履歴が2本の指を遠ざける動作である場合は、拡大操作指示が入力されたと判断し、
    前記指の移動履歴が2本の指を近づける動作である場合は、縮小操作指示が入力されたと判断し、
    前記画像生成手段は、
    前記拡大を施した画像を生成する場合には、前記表示手段に表示されている前記表示対象画像に前記拡大を施した結果、前記表示手段に表示される画像が前記拡大の操作を施す前に表示されていた前記表示対象画像における指の接触位置を含む画像を生成し、
    前記縮小を施した画像を生成する場合には、前記表示手段に表示されている前記表示対象画像に前記縮小を施した結果、前記表示手段に表示される画像が前記縮小の操作を施す前に表示されていた前記表示対象画像における指の接触位置を含む画像を生成し、
    前記回転を施した画像を生成する場合には、前記表示手段に表示されている前記表示対象画像に前記回転を施した結果、前記表示手段に表示される画像が前記回転の操作を施す前に表示されていた前記表示対象画像における指の接触位置を含む画像を生成することを特徴とする情報記憶媒体。
    An information storage medium storing a program for controlling a portable information device including display means capable of displaying a part of a display target image,
    At least one of rotation, enlargement, reduction and scrolling of the display target image displayed on the display means based on the movement history of the finger touching the display means on which a part of the display target image is displayed Operation content determination means for determining that an operation instruction has been input;
    An image generating means for generating an image obtained by performing at least one of the rotation, enlargement, reduction, and scrolling operations on the display target image displayed on the display means based on the determined operation instruction; The program that makes the
    The operation content determination means includes
    If the movement history of the finger is an operation of rotating another finger around one finger, it is determined that a rotation operation instruction has been input;
    If the movement history of the finger is an action of moving two fingers away, it is determined that an enlargement operation instruction has been input;
    If the movement history of the finger is an operation of bringing two fingers closer together, it is determined that a reduction operation instruction has been input,
    The image generating means includes
    When the enlarged image is generated, the image displayed on the display unit is subjected to the enlargement operation as a result of performing the enlargement on the display target image displayed on the display unit. Generate an image including a finger contact position in the displayed display target image ,
    When generating the reduced image, the image displayed on the display unit is subjected to the reduction operation as a result of performing the reduction on the display target image displayed on the display unit. Generate an image including a finger contact position in the displayed display target image,
    In the case of generating the rotated image, the image displayed on the display unit is subjected to the rotation operation as a result of performing the rotation on the display target image displayed on the display unit. An information storage medium for generating an image including a finger contact position in the displayed display target image .
JP35072898A 1998-11-25 1998-11-25 Portable information device and information storage medium Expired - Fee Related JP4542637B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP35072898A JP4542637B2 (en) 1998-11-25 1998-11-25 Portable information device and information storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP35072898A JP4542637B2 (en) 1998-11-25 1998-11-25 Portable information device and information storage medium

Publications (3)

Publication Number Publication Date
JP2000163031A JP2000163031A (en) 2000-06-16
JP2000163031A5 JP2000163031A5 (en) 2006-03-23
JP4542637B2 true JP4542637B2 (en) 2010-09-15

Family

ID=18412457

Family Applications (1)

Application Number Title Priority Date Filing Date
JP35072898A Expired - Fee Related JP4542637B2 (en) 1998-11-25 1998-11-25 Portable information device and information storage medium

Country Status (1)

Country Link
JP (1) JP4542637B2 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104345977A (en) * 2013-08-08 2015-02-11 索尼公司 Touch detection circuit, touch detection method, and electronic apparatus
USRE45559E1 (en) 1997-10-28 2015-06-09 Apple Inc. Portable computers
US9417771B2 (en) 2013-05-16 2016-08-16 Ricoh Company, Ltd. Information processing apparatus, information processing method, and computer readable-recording medium
US9760272B2 (en) 2007-01-07 2017-09-12 Apple Inc. Application programming interfaces for scrolling operations

Families Citing this family (853)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8576199B1 (en) 2000-02-22 2013-11-05 Apple Inc. Computer control systems
US9513744B2 (en) 1994-08-15 2016-12-06 Apple Inc. Control systems employing novel physical controls and touch screens
US8228305B2 (en) 1995-06-29 2012-07-24 Apple Inc. Method for providing human input to a computer
US8482535B2 (en) 1999-11-08 2013-07-09 Apple Inc. Programmable tactile touch screen displays and man-machine interfaces for improved vehicle instrumentation and telematics
US8482534B2 (en) 1995-06-29 2013-07-09 Timothy R. Pryor Programmable tactile touch screen displays and man-machine interfaces for improved vehicle instrumentation and telematics
US9292111B2 (en) 1998-01-26 2016-03-22 Apple Inc. Gesturing with a multipoint sensing device
US9239673B2 (en) 1998-01-26 2016-01-19 Apple Inc. Gesturing with a multipoint sensing device
KR100595912B1 (en) 1998-01-26 2006-07-07 웨인 웨스터만 Method and apparatus for integrating manual input
US6337678B1 (en) 1999-07-21 2002-01-08 Tactiva Incorporated Force feedback computer input and output device with coordinated haptic elements
JP4803883B2 (en) * 2000-01-31 2011-10-26 キヤノン株式会社 Position information processing apparatus and method and program thereof.
US7138983B2 (en) * 2000-01-31 2006-11-21 Canon Kabushiki Kaisha Method and apparatus for detecting and interpreting path of designated position
JP3867226B2 (en) 2000-02-15 2007-01-10 株式会社 ニューコム Touch panel system that can be operated with multiple pointing parts
US8645137B2 (en) 2000-03-16 2014-02-04 Apple Inc. Fast, language-independent method for user authentication by voice
JP4223664B2 (en) * 2000-09-14 2009-02-12 株式会社リコー Touch panel type coordinate input device
JP2002189755A (en) * 2000-12-20 2002-07-05 Fujitsu General Ltd Map display device
SE519884C2 (en) * 2001-02-02 2003-04-22 Scalado Ab Method for zooming and producing a zoomable image
JP4686886B2 (en) * 2001-04-06 2011-05-25 ソニー株式会社 Information processing device
JP5259898B2 (en) * 2001-04-13 2013-08-07 富士通テン株式会社 Display device and display processing method
US7034814B2 (en) 2001-07-13 2006-04-25 Apple Computer, Inc. Methods and apparatuses using control indicators for data processing systems
JP2003099505A (en) * 2001-09-26 2003-04-04 Tsubasa System Co Ltd System, method and program for collecting travel information
US7333092B2 (en) 2002-02-25 2008-02-19 Apple Computer, Inc. Touch pad for handheld device
US6690387B2 (en) * 2001-12-28 2004-02-10 Koninklijke Philips Electronics N.V. Touch-screen image scrolling system and method
WO2003073159A1 (en) 2002-02-20 2003-09-04 Planar Systems, Inc. Light sensitive display
US7296243B2 (en) 2002-03-19 2007-11-13 Aol Llc Animating display motion
CN1666169B (en) 2002-05-16 2010-05-05 索尼株式会社 Inputting method and inputting apparatus
US7343566B1 (en) 2002-07-10 2008-03-11 Apple Inc. Method and apparatus for displaying a window for a user interface
EP3547599A1 (en) 2002-08-06 2019-10-02 Apple Inc. Methods for secure enrollment and backup of personal identity credentials into electronic devices
US7358963B2 (en) 2002-09-09 2008-04-15 Apple Inc. Mouse having an optically-based scrolling feature
US7689914B2 (en) 2002-12-12 2010-03-30 Apple Inc. Sticky functionality
JP4680918B2 (en) 2003-05-30 2011-05-11 プリヴァリス・インコーポレーテッド System and method for assignment and use of media content subscription service privileges
JP4723799B2 (en) * 2003-07-08 2011-07-13 ソニー株式会社 Control system and control method
US7808479B1 (en) 2003-09-02 2010-10-05 Apple Inc. Ambidextrous mouse
JP4127536B2 (en) 2004-01-20 2008-07-30 任天堂株式会社 GAME DEVICE AND GAME PROGRAM
JP4141389B2 (en) 2004-01-20 2008-08-27 任天堂株式会社 GAME DEVICE AND GAME PROGRAM
JP2005234199A (en) * 2004-02-19 2005-09-02 Nec Saitama Ltd Image display control method and image display control unit, and personal digital assistant equipped therewith
US7683888B1 (en) 2004-02-27 2010-03-23 Apple Inc. Shape detecting input device
US7663607B2 (en) 2004-05-06 2010-02-16 Apple Inc. Multipoint touchscreen
JP2006039847A (en) * 2004-07-26 2006-02-09 Canon Inc Data search method and device, program, and readable memory
JP4903371B2 (en) * 2004-07-29 2012-03-28 任天堂株式会社 Game device and game program using touch panel
US7614008B2 (en) 2004-07-30 2009-11-03 Apple Inc. Operation of a computer with touch screen interface
US7760187B2 (en) 2004-07-30 2010-07-20 Apple Inc. Visual expander
WO2006020305A2 (en) * 2004-07-30 2006-02-23 Apple Computer, Inc. Gestures for touch sensitive input devices
US8381135B2 (en) 2004-07-30 2013-02-19 Apple Inc. Proximity detector in handheld device
US7633076B2 (en) 2005-09-30 2009-12-15 Apple Inc. Automated response to and sensing of user activity in portable devices
US8479122B2 (en) 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
US7653883B2 (en) 2004-07-30 2010-01-26 Apple Inc. Proximity detector in handheld device
EP1774427A2 (en) * 2004-07-30 2007-04-18 Apple Computer, Inc. Mode-based graphical user interfaces for touch sensitive input devices
US7834855B2 (en) 2004-08-25 2010-11-16 Apple Inc. Wide touchpad on a portable computer
US7561146B1 (en) 2004-08-25 2009-07-14 Apple Inc. Method and apparatus to reject accidental contact on a touchpad
US7536565B2 (en) 2005-01-07 2009-05-19 Apple Inc. Techniques for improved playlist processing on media devices
US7656393B2 (en) 2005-03-04 2010-02-02 Apple Inc. Electronic device having display and surrounding touch sensitive bezel for user interface and control
US9727082B2 (en) 2005-04-26 2017-08-08 Apple Inc. Back-side interface for hand-held devices
US7710397B2 (en) 2005-06-03 2010-05-04 Apple Inc. Mouse with improved input mechanisms using touch sensors
US9298311B2 (en) 2005-06-23 2016-03-29 Apple Inc. Trackpad sensitivity compensation
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US7966577B2 (en) 2005-10-11 2011-06-21 Apple Inc. Multimedia control center
US7509588B2 (en) 2005-12-30 2009-03-24 Apple Inc. Portable electronic device with interface reconfiguration mode
US8077147B2 (en) 2005-12-30 2011-12-13 Apple Inc. Mouse with optical sensing surface
US20070152983A1 (en) 2005-12-30 2007-07-05 Apple Computer, Inc. Touch pad with symbols based on mode
US7840912B2 (en) 2006-01-30 2010-11-23 Apple Inc. Multi-touch gesture dictionary
US9311528B2 (en) 2007-01-03 2016-04-12 Apple Inc. Gesture learning
JP5092255B2 (en) * 2006-03-09 2012-12-05 カシオ計算機株式会社 Display device
US7538760B2 (en) 2006-03-30 2009-05-26 Apple Inc. Force imaging input device and system
JP5210497B2 (en) * 2006-04-12 2013-06-12 クラリオン株式会社 Navigation device
US7978181B2 (en) 2006-04-25 2011-07-12 Apple Inc. Keystroke tactility arrangement on a smooth touch surface
US8279180B2 (en) 2006-05-02 2012-10-02 Apple Inc. Multipoint touch surface controller
US8259078B2 (en) 2006-06-09 2012-09-04 Apple Inc. Touch screen liquid crystal display
CN104965621B (en) 2006-06-09 2018-06-12 苹果公司 Touch screen LCD and its operating method
KR101190484B1 (en) 2006-06-09 2012-10-12 애플 인크. Touch screen liquid crystal display
US8022935B2 (en) 2006-07-06 2011-09-20 Apple Inc. Capacitance sensing electrode with integrated I/O mechanism
US8065601B2 (en) 2006-08-03 2011-11-22 Apple Inc. System and method for tagging data
US7940250B2 (en) 2006-09-06 2011-05-10 Apple Inc. Web-clip widgets on a portable multifunction device
US8106856B2 (en) 2006-09-06 2012-01-31 Apple Inc. Portable electronic device for photo management
US8564544B2 (en) * 2006-09-06 2013-10-22 Apple Inc. Touch screen device, method, and graphical user interface for customizing display of content category icons
US8471822B2 (en) 2006-09-06 2013-06-25 Apple Inc. Dual-sided track pad
US10313505B2 (en) 2006-09-06 2019-06-04 Apple Inc. Portable multifunction device, method, and graphical user interface for configuring and displaying widgets
US7930650B2 (en) 2006-09-11 2011-04-19 Apple Inc. User interface with menu abstractions and content abstractions
US8274479B2 (en) 2006-10-11 2012-09-25 Apple Inc. Gimballed scroll wheel
US8570278B2 (en) 2006-10-26 2013-10-29 Apple Inc. Portable multifunction device, method, and graphical user interface for adjusting an insertion point marker
US7856605B2 (en) 2006-10-26 2010-12-21 Apple Inc. Method, system, and graphical user interface for positioning an insertion marker in a touch screen display
JP4899806B2 (en) * 2006-11-08 2012-03-21 トヨタ自動車株式会社 Information input device
US7948477B2 (en) 2006-12-15 2011-05-24 Apple Inc. PET-based touchpad
TWI399670B (en) * 2006-12-21 2013-06-21 Elan Microelectronics Corp Operation control methods and systems, and machine readable medium thereof
US8031174B2 (en) 2007-01-03 2011-10-04 Apple Inc. Multi-touch surface stackup arrangement
US8054296B2 (en) 2007-01-03 2011-11-08 Apple Inc. Storing baseline information in EEPROM
US8269727B2 (en) 2007-01-03 2012-09-18 Apple Inc. Irregular input identification
US8130203B2 (en) 2007-01-03 2012-03-06 Apple Inc. Multi-touch input discrimination
US7920129B2 (en) 2007-01-03 2011-04-05 Apple Inc. Double-sided touch-sensitive panel with shield and drive combined layer
US7848825B2 (en) 2007-01-03 2010-12-07 Apple Inc. Master/slave mode for sensor processing devices
US7986313B2 (en) 2007-01-03 2011-07-26 Apple Inc. Analog boundary scanning based on stray capacitance
US8125455B2 (en) * 2007-01-03 2012-02-28 Apple Inc. Full scale calibration measurement for multi-touch surfaces
US8493330B2 (en) 2007-01-03 2013-07-23 Apple Inc. Individual channel phase delay scheme
US8405617B2 (en) 2007-01-03 2013-03-26 Apple Inc. Gated power management over a system bus
US7855718B2 (en) 2007-01-03 2010-12-21 Apple Inc. Multi-touch input discrimination
US8489783B2 (en) 2007-01-03 2013-07-16 Apple Inc. Multi buffer asynchronous scheme for processing incoming information
US7861073B2 (en) 2007-01-03 2010-12-28 Apple Inc. On-chip decompression engine
US8542211B2 (en) 2007-01-03 2013-09-24 Apple Inc. Projection scan multi-touch sensor array
US8125456B2 (en) 2007-01-03 2012-02-28 Apple Inc. Multi-touch auto scanning
US7986193B2 (en) 2007-01-03 2011-07-26 Apple Inc. Noise reduction within an electronic device using automatic frequency modulation
US8970501B2 (en) 2007-01-03 2015-03-03 Apple Inc. Proximity and multi-touch sensor detection and demodulation
US8085247B2 (en) 2007-01-03 2011-12-27 Apple Inc. Advanced frequency calibration
US7876310B2 (en) 2007-01-03 2011-01-25 Apple Inc. Far-field input identification
US8711129B2 (en) 2007-01-03 2014-04-29 Apple Inc. Minimizing mismatch during compensation
US8026903B2 (en) 2007-01-03 2011-09-27 Apple Inc. Double-sided touch sensitive panel and flex circuit bonding
US8232970B2 (en) 2007-01-03 2012-07-31 Apple Inc. Scan sequence generator
US8049732B2 (en) 2007-01-03 2011-11-01 Apple Inc. Front-end signal compensation
US8094128B2 (en) 2007-01-03 2012-01-10 Apple Inc. Channel scan logic
US7812827B2 (en) 2007-01-03 2010-10-12 Apple Inc. Simultaneous sensing arrangement
US8510481B2 (en) 2007-01-03 2013-08-13 Apple Inc. Memory access without internal microprocessor intervention
US8026904B2 (en) 2007-01-03 2011-09-27 Apple Inc. Periodic sensor panel baseline adjustment
USD580387S1 (en) 2007-01-05 2008-11-11 Apple Inc. Electronic device
USD898736S1 (en) 2007-01-05 2020-10-13 Apple Inc. Electronic device
US7852325B2 (en) 2007-01-05 2010-12-14 Apple Inc. RF pulse synchronization for data acquisition operations
US8970503B2 (en) 2007-01-05 2015-03-03 Apple Inc. Gestures for devices having one or more touch sensitive surfaces
US8068125B2 (en) 2007-01-05 2011-11-29 Apple Inc. Luminescence shock avoidance in display devices
USD558758S1 (en) 2007-01-05 2008-01-01 Apple Inc. Electronic device
US8144129B2 (en) 2007-01-05 2012-03-27 Apple Inc. Flexible touch sensing circuits
US7924271B2 (en) 2007-01-05 2011-04-12 Apple Inc. Detecting gestures on multi-event sensitive devices
US8656295B2 (en) 2007-01-05 2014-02-18 Apple Inc. Selecting and manipulating web content
US9710095B2 (en) 2007-01-05 2017-07-18 Apple Inc. Touch screen stack-ups
US20080165139A1 (en) 2007-01-05 2008-07-10 Apple Inc. Touch screen stack-up processing
US7877707B2 (en) 2007-01-06 2011-01-25 Apple Inc. Detecting and interpreting real-world and security gestures on touch and hover sensitive devices
US10437459B2 (en) 2007-01-07 2019-10-08 Apple Inc. Multitouch data fusion
US20080168402A1 (en) 2007-01-07 2008-07-10 Christopher Blumenberg Application Programming Interfaces for Gesture Operations
US8519964B2 (en) 2007-01-07 2013-08-27 Apple Inc. Portable multifunction device, method, and graphical user interface supporting user navigations of graphical objects on a touch screen display
US7469381B2 (en) 2007-01-07 2008-12-23 Apple Inc. List scrolling and document translation, scaling, and rotation on a touch-screen display
US8788954B2 (en) 2007-01-07 2014-07-22 Apple Inc. Web-clip widgets on a portable multifunction device
US8054299B2 (en) 2007-01-08 2011-11-08 Apple Inc. Digital controller for a true multi-point touch surface useable in a computer system
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US8065603B2 (en) 2007-04-30 2011-11-22 Google Inc. Hiding portions of display content
US8839142B2 (en) 2007-06-08 2014-09-16 Apple Inc. Desktop system object removal
US8432396B2 (en) 2007-06-08 2013-04-30 Apple Inc. Reflections in a multidimensional user interface environment
US8127239B2 (en) 2007-06-08 2012-02-28 Apple Inc. Object transitions
US9791994B2 (en) 2007-06-08 2017-10-17 Apple Inc. User interface for application interface manipulation
US9052817B2 (en) 2007-06-13 2015-06-09 Apple Inc. Mode sensitive processing of touch data
US7916126B2 (en) 2007-06-13 2011-03-29 Apple Inc. Bottom-up watershed dataflow method and region-specific segmentation based on historic data to identify patches on a touch sensor panel
US8681104B2 (en) 2007-06-13 2014-03-25 Apple Inc. Pinch-throw and translation gestures
US8493331B2 (en) 2007-06-13 2013-07-23 Apple Inc. Touch detection using multiple simultaneous frequencies
US8040326B2 (en) 2007-06-13 2011-10-18 Apple Inc. Integrated in-plane switching display and touch sensor
US9772667B2 (en) 2007-06-13 2017-09-26 Apple Inc. Integrated multi-touch surface having varying sensor granularity
US7876311B2 (en) 2007-06-13 2011-01-25 Apple Inc. Detection of low noise frequencies for multiple frequency sensor panel stimulation
US7920134B2 (en) 2007-06-13 2011-04-05 Apple Inc. Periodic sensor autocalibration and emulation by varying stimulus level
US7932896B2 (en) 2007-06-13 2011-04-26 Apple Inc. Techniques for reducing jitter for taps
US9740386B2 (en) 2007-06-13 2017-08-22 Apple Inc. Speed/positional mode translations
US8400408B2 (en) 2007-06-13 2013-03-19 Apple Inc. Touch screens with transparent conductive material resistors
US9933937B2 (en) 2007-06-20 2018-04-03 Apple Inc. Portable multifunction device, method, and graphical user interface for playing online videos
US8456450B2 (en) 2007-06-28 2013-06-04 Apple Inc. Systems and methods for impedance stabilization
US9772751B2 (en) 2007-06-29 2017-09-26 Apple Inc. Using gestures to slide between user interfaces
US9654104B2 (en) 2007-07-17 2017-05-16 Apple Inc. Resistive force sensor with capacitive discrimination
US20090046110A1 (en) * 2007-08-16 2009-02-19 Motorola, Inc. Method and apparatus for manipulating a displayed image
US7907020B2 (en) 2007-08-31 2011-03-15 Apple Inc. Constant calibration
USD602486S1 (en) 2007-08-31 2009-10-20 Apple Inc. Electronic device
US8619038B2 (en) * 2007-09-04 2013-12-31 Apple Inc. Editing interface
US9477395B2 (en) 2007-09-04 2016-10-25 Apple Inc. Audio file interface
JP4933997B2 (en) * 2007-09-25 2012-05-16 株式会社山武 Numerical value setting method and touch panel type operation device
US8153016B2 (en) 2007-10-03 2012-04-10 Apple Inc. Shaping a cover glass
US8633915B2 (en) 2007-10-04 2014-01-21 Apple Inc. Single-layer touch-sensitive display
US8004500B2 (en) 2007-10-26 2011-08-23 Apple Inc. Switched capacitor projection scan multi-touch sensor array
JP5079473B2 (en) * 2007-11-29 2012-11-21 株式会社デンソーアイティーラボラトリ In-vehicle device operation device
KR20090058073A (en) * 2007-12-04 2009-06-09 삼성전자주식회사 Terminal and method for performing function thereof
US8184096B2 (en) 2007-12-04 2012-05-22 Apple Inc. Cursor transitions
CN101896910A (en) * 2007-12-10 2010-11-24 拜尔健康护理有限责任公司 Interface for a health measurement and monitoring system
US8341544B2 (en) 2007-12-14 2012-12-25 Apple Inc. Scroll bar with video region in a media system
US8358276B2 (en) 2007-12-21 2013-01-22 Apple Inc. Touch pad electrode design
US9075483B2 (en) 2007-12-21 2015-07-07 Apple Inc. Negative pixel compensation
US7928965B2 (en) 2007-12-27 2011-04-19 Apple Inc. Touch screen RFID tag reader
US8610671B2 (en) 2007-12-27 2013-12-17 Apple Inc. Insertion marker placement on touch sensitive display
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US9372576B2 (en) 2008-01-04 2016-06-21 Apple Inc. Image jaggedness filter for determining whether to perform baseline calculations
US20090174679A1 (en) 2008-01-04 2009-07-09 Wayne Carl Westerman Selective Rejection of Touch Contacts in an Edge Region of a Touch Surface
US8413075B2 (en) 2008-01-04 2013-04-02 Apple Inc. Gesture movies
US9619143B2 (en) 2008-01-06 2017-04-11 Apple Inc. Device, method, and graphical user interface for viewing application launch icons
US10102300B2 (en) 2008-01-06 2018-10-16 Apple Inc. Icon creation on mobile device
JP2008216991A (en) * 2008-01-29 2008-09-18 Fujitsu Ten Ltd Display device
JP2008216990A (en) * 2008-01-29 2008-09-18 Fujitsu Ten Ltd Display device
JP2008209915A (en) * 2008-01-29 2008-09-11 Fujitsu Ten Ltd Display device
US8692777B2 (en) 2008-02-08 2014-04-08 Apple Inc. Method for rapidly testing capacitance sensing array fault conditions using a floating conductor
US8418046B2 (en) 2008-02-13 2013-04-09 Apple Inc. Data signal handling circuitry and methods with error analysis capabilities
US8432364B2 (en) 2008-02-25 2013-04-30 Apple Inc. Charge recycling for multi-touch controllers
US8416196B2 (en) 2008-03-04 2013-04-09 Apple Inc. Touch event model programming interface
US8205157B2 (en) 2008-03-04 2012-06-19 Apple Inc. Methods and graphical user interfaces for conducting searches on a portable multifunction device
US8645827B2 (en) 2008-03-04 2014-02-04 Apple Inc. Touch event model
US8201109B2 (en) 2008-03-04 2012-06-12 Apple Inc. Methods and graphical user interfaces for editing on a portable multifunction device
US8717305B2 (en) 2008-03-04 2014-05-06 Apple Inc. Touch event model for web pages
US8650507B2 (en) 2008-03-04 2014-02-11 Apple Inc. Selecting of text using gestures
US9454256B2 (en) 2008-03-14 2016-09-27 Apple Inc. Sensor configurations of an input device that are switchable based on mode
US8185843B2 (en) 2008-03-17 2012-05-22 Apple Inc. Managing user interface control panels
US8035622B2 (en) 2008-03-27 2011-10-11 Apple Inc. SAR ADC with dynamic input scaling and offset adjustment
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
USD615083S1 (en) 2008-04-07 2010-05-04 Apple Inc. Electronic device
USD602015S1 (en) 2008-04-07 2009-10-13 Apple Inc. Electronic device
WO2009126710A2 (en) * 2008-04-10 2009-10-15 Perceptive Pixel, Inc. Methods of interfacing with multi-input devices and multi-input display systems employing interfacing techniques
US8259208B2 (en) * 2008-04-15 2012-09-04 Sony Corporation Method and apparatus for performing touch-based adjustments within imaging devices
US8949743B2 (en) 2008-04-22 2015-02-03 Apple Inc. Language input interface on a device
US8970504B2 (en) 2008-04-25 2015-03-03 Apple Inc. Reliability metal traces
US8487898B2 (en) 2008-04-25 2013-07-16 Apple Inc. Ground guard for capacitive sensing
US8576193B2 (en) 2008-04-25 2013-11-05 Apple Inc. Brick layout and stackup for a touch screen
US8629841B2 (en) 2008-04-30 2014-01-14 Apple Inc. Multi-touch sensor patterns and stack-ups
US8514203B2 (en) 2008-04-30 2013-08-20 Apple Inc. Flexible calibration device for touch sensor panel calibration
US8123894B2 (en) 2008-05-07 2012-02-28 Apple Inc. 3-dimensional curved substrate lamination
JP5203797B2 (en) * 2008-05-13 2013-06-05 株式会社エヌ・ティ・ティ・ドコモ Information processing apparatus and display information editing method for information processing apparatus
US8456851B2 (en) 2008-05-16 2013-06-04 Apple Inc. Flex circuit with single sided routing and double sided attach
KR100914438B1 (en) 2008-05-20 2009-08-28 엘지전자 주식회사 Electronic device with touch device and method of executing functions thereof
US9069418B2 (en) 2008-06-06 2015-06-30 Apple Inc. High resistivity metal fan out
US8054300B2 (en) 2008-06-17 2011-11-08 Apple Inc. Capacitive sensor panel having dynamically reconfigurable sensor size and shape
US8673163B2 (en) 2008-06-27 2014-03-18 Apple Inc. Method for fabricating thin sheets of glass
US7810355B2 (en) 2008-06-30 2010-10-12 Apple Inc. Full perimeter chemical strengthening of substrates
US8508495B2 (en) 2008-07-03 2013-08-13 Apple Inc. Display with dual-function capacitive elements
US10095375B2 (en) 2008-07-09 2018-10-09 Apple Inc. Adding a contact to a home screen
US10031549B2 (en) 2008-07-10 2018-07-24 Apple Inc. Transitioning between modes of input
US8300019B2 (en) 2008-07-15 2012-10-30 Apple Inc. Capacitive sensor coupling correction
EP2306286A4 (en) * 2008-07-17 2016-05-11 Nec Corp Information processing apparatus, storage medium on which program has been recorded, and object shifting method
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
US9335868B2 (en) 2008-07-31 2016-05-10 Apple Inc. Capacitive sensor behind black mask
US8743091B2 (en) 2008-07-31 2014-06-03 Apple Inc. Acoustic multi-touch sensor panel
US8049862B2 (en) 2008-08-08 2011-11-01 Apple Inc. Indium tin oxide (ITO) layer forming
USD602017S1 (en) 2008-09-05 2009-10-13 Apple Inc. Electronic device
US8592697B2 (en) 2008-09-10 2013-11-26 Apple Inc. Single-chip multi-stimulus sensor controller
US9189048B2 (en) 2008-09-10 2015-11-17 Apple Inc. Circuit having a low power mode
US9606663B2 (en) 2008-09-10 2017-03-28 Apple Inc. Multiple stimulation phase determination
US8810542B2 (en) 2008-09-10 2014-08-19 Apple Inc. Correction of parasitic capacitance effect in touch sensor panels
US8237667B2 (en) 2008-09-10 2012-08-07 Apple Inc. Phase compensation for multi-stimulus controller
US8659556B2 (en) 2008-09-10 2014-02-25 Apple Inc. Advanced receive channel architecture
US9348451B2 (en) 2008-09-10 2016-05-24 Apple Inc. Channel scan architecture for multiple stimulus multi-touch sensor panels
US8692776B2 (en) 2008-09-19 2014-04-08 Apple Inc. Correction of parasitic capacitance effect in touch sensor panels
US9003326B2 (en) 2008-09-23 2015-04-07 Apple Inc. Indicating input focus by showing focus transitions
US9927924B2 (en) 2008-09-26 2018-03-27 Apple Inc. Differential sensing for a touch panel
US8614690B2 (en) 2008-09-26 2013-12-24 Apple Inc. Touch sensor panel using dummy ground conductors
US10289199B2 (en) 2008-09-29 2019-05-14 Apple Inc. Haptic feedback system
US8730179B2 (en) 2008-09-30 2014-05-20 Apple Inc. Integrated touch sensor and solar assembly
US8368654B2 (en) 2008-09-30 2013-02-05 Apple Inc. Integrated touch sensor and solar assembly
JP4683110B2 (en) 2008-10-17 2011-05-11 ソニー株式会社 Display device, display method, and program
US8446374B2 (en) 2008-11-12 2013-05-21 Apple Inc. Detecting a palm touch on a surface
US9058066B2 (en) 2008-11-12 2015-06-16 Apple Inc. Suppressing errant motion using integrated mouse and touch information
US8502785B2 (en) 2008-11-12 2013-08-06 Apple Inc. Generating gestures tailored to a hand resting on a surface
US8144295B2 (en) 2008-11-18 2012-03-27 Apple Inc. Common bus design for a TFT-LCD display
US8749496B2 (en) 2008-12-05 2014-06-10 Apple Inc. Integrated touch panel for a TFT display
US8294047B2 (en) 2008-12-08 2012-10-23 Apple Inc. Selective input signal rejection and modification
US8319747B2 (en) 2008-12-11 2012-11-27 Apple Inc. Single layer touch panel with segmented drive and sense electrodes
US10585493B2 (en) 2008-12-12 2020-03-10 Apple Inc. Touch sensitive mechanical keyboard
US8749497B2 (en) 2008-12-12 2014-06-10 Apple Inc. Multi-touch shape drawing
US8706143B1 (en) 2008-12-12 2014-04-22 Apple Inc. Driver handheld computing device lock-out
US9409383B2 (en) 2008-12-22 2016-08-09 Apple Inc. Layer-specific energy distribution delamination
US9600070B2 (en) 2008-12-22 2017-03-21 Apple Inc. User interface having changeable topography
JP2010146506A (en) * 2008-12-22 2010-07-01 Sharp Corp Input device, method for controlling input device, program for controlling input device, computer-readable recording medium, and information terminal device
JP5184384B2 (en) * 2009-01-05 2013-04-17 株式会社ソニー・コンピュータエンタテインメント Control system and control method
US7918019B2 (en) 2009-01-09 2011-04-05 Apple Inc. Method for fabricating thin touch sensor panels
US9063605B2 (en) 2009-01-09 2015-06-23 Apple Inc. Thin glass processing using a carrier
US8760412B2 (en) 2009-02-02 2014-06-24 Apple Inc. Dual configuration for display data lines
US8552957B2 (en) 2009-02-02 2013-10-08 Apple Inc. Liquid crystal display reordered inversion
US8217913B2 (en) 2009-02-02 2012-07-10 Apple Inc. Integrated touch screen
US9261997B2 (en) 2009-02-02 2016-02-16 Apple Inc. Touch regions in diamond configuration
US7995041B2 (en) 2009-02-02 2011-08-09 Apple Inc. Integrated touch screen
US8507811B2 (en) 2009-02-02 2013-08-13 Apple Inc. Touch sensor panels with reduced static capacitance
US8922521B2 (en) 2009-02-02 2014-12-30 Apple Inc. Switching circuitry for touch sensitive display
WO2010101961A2 (en) 2009-03-02 2010-09-10 Apple Inc. Techniques for strengthening glass covers for portable electronic devices
US9311112B2 (en) 2009-03-16 2016-04-12 Apple Inc. Event recognition
US8566045B2 (en) 2009-03-16 2013-10-22 Apple Inc. Event recognition
US8756534B2 (en) 2009-03-16 2014-06-17 Apple Inc. Methods and graphical user interfaces for editing on a multifunction device with a touch screen display
US8589374B2 (en) 2009-03-16 2013-11-19 Apple Inc. Multifunction device with integrated search and application selection
US8285499B2 (en) 2009-03-16 2012-10-09 Apple Inc. Event recognition
US8537126B2 (en) 2009-04-06 2013-09-17 Apple Inc. Integrated touch sensitive display gate driver
US8593410B2 (en) 2009-04-10 2013-11-26 Apple Inc. Touch sensor panel design
US8624849B2 (en) 2009-04-20 2014-01-07 Apple Inc. Touch actuated sensor configuration integrated with an OLED structure
US9367216B2 (en) * 2009-05-21 2016-06-14 Sony Interactive Entertainment Inc. Hand-held device with two-finger touch triggered selection and transformation of active elements
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US9858925B2 (en) 2009-06-05 2018-01-02 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US8576161B2 (en) 2009-06-18 2013-11-05 Apple Inc. Driving an OLED display structure integrated with a touch sensor configuration
US8956718B2 (en) 2009-06-19 2015-02-17 Apple Inc. Transparent conductor thin film formation
US8711108B2 (en) 2009-06-19 2014-04-29 Apple Inc. Direct connect single layer touch panel
US8970475B2 (en) 2009-06-19 2015-03-03 Apple Inc. Motion sensitive input control
DE102009030791A1 (en) * 2009-06-27 2010-12-30 Volkswagen Ag Navigation system, in particular for a motor vehicle
US8957874B2 (en) 2009-06-29 2015-02-17 Apple Inc. Touch sensor panel design
US9431006B2 (en) 2009-07-02 2016-08-30 Apple Inc. Methods and apparatuses for automatic speech recognition
US8860693B2 (en) 2009-07-08 2014-10-14 Apple Inc. Image processing for camera based motion tracking
US8482544B2 (en) 2009-07-10 2013-07-09 Apple Inc. Negative pixel compensation
US9323398B2 (en) 2009-07-10 2016-04-26 Apple Inc. Touch and hover sensing
US8368661B2 (en) 2009-07-13 2013-02-05 Apple Inc. Method for fabricating touch sensor panels
US9632622B2 (en) 2009-07-16 2017-04-25 Apple Inc. Ground detection for touch sensitive device
FR2949007B1 (en) 2009-08-07 2012-06-08 Nanotec Solution DEVICE AND METHOD FOR CONTROL INTERFACE SENSITIVE TO A MOVEMENT OF A BODY OR OBJECT AND CONTROL EQUIPMENT INCORPORATING THIS DEVICE.
US8654524B2 (en) 2009-08-17 2014-02-18 Apple Inc. Housing as an I/O device
US8475872B2 (en) 2009-08-19 2013-07-02 Apple Inc. Patterning of thin film layers
CN106020583B (en) 2009-08-21 2019-05-28 苹果公司 Method and apparatus for capacitance sensing
US8390582B2 (en) 2009-08-25 2013-03-05 Apple Inc. Integrated touch screen
US8664548B2 (en) 2009-09-11 2014-03-04 Apple Inc. Touch controller with improved diagnostics calibration and communications support
US8363021B2 (en) 2009-09-11 2013-01-29 Apple Inc. Method to compensate for the frequency dependence of sense signal preprocessing
US9444453B2 (en) 2009-09-11 2016-09-13 Apple Inc. Measuring body capacitance effect in touch sensitive device
US8970506B2 (en) 2009-09-11 2015-03-03 Apple Inc. Power management for touch controller
US8031094B2 (en) 2009-09-11 2011-10-04 Apple Inc. Touch controller with improved analog front end
US9036650B2 (en) 2009-09-11 2015-05-19 Apple Inc. Automatic low noise frequency selection
US8780069B2 (en) 2009-09-25 2014-07-15 Apple Inc. Device, method, and graphical user interface for manipulating user interface objects
US8749512B2 (en) 2009-09-30 2014-06-10 Apple Inc. Negative pixel compensation
US8982058B2 (en) 2009-09-30 2015-03-17 Apple Inc. Touch screen border regions
US8957918B2 (en) * 2009-11-03 2015-02-17 Qualcomm Incorporated Methods for implementing multi-touch gestures on a single-touch touch surface
USD637596S1 (en) 2010-01-06 2011-05-10 Apple Inc. Portable display device
JP5572397B2 (en) * 2010-01-06 2014-08-13 京セラ株式会社 Input device, input method, and input program
USD627777S1 (en) 2010-01-06 2010-11-23 Apple Inc. Portable display device
US8698762B2 (en) 2010-01-06 2014-04-15 Apple Inc. Device, method, and graphical user interface for navigating and displaying content in context
US8736561B2 (en) 2010-01-06 2014-05-27 Apple Inc. Device, method, and graphical user interface with content display modes and display rotation heuristics
US8803908B2 (en) 2010-01-15 2014-08-12 Apple Inc. Digital image transitions
US10496753B2 (en) 2010-01-18 2019-12-03 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US10553209B2 (en) 2010-01-18 2020-02-04 Apple Inc. Systems and methods for hands-free notification summaries
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US10705794B2 (en) 2010-01-18 2020-07-07 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US10679605B2 (en) 2010-01-18 2020-06-09 Apple Inc. Hands-free list-reading by intelligent automated assistant
US8624878B2 (en) 2010-01-20 2014-01-07 Apple Inc. Piezo-based acoustic and capacitive detection
US8581879B2 (en) 2010-01-21 2013-11-12 Apple Inc. Negative pixel compensation
DE112011100329T5 (en) 2010-01-25 2012-10-31 Andrew Peter Nelson Jerram Apparatus, methods and systems for a digital conversation management platform
US9684521B2 (en) 2010-01-26 2017-06-20 Apple Inc. Systems having discrete and continuous gesture recognizers
CN102844732A (en) 2010-02-18 2012-12-26 罗姆股份有限公司 Touch-panel input device
JP5515835B2 (en) * 2010-02-18 2014-06-11 富士通モバイルコミュニケーションズ株式会社 Mobile device
US20110209098A1 (en) * 2010-02-19 2011-08-25 Hinckley Kenneth P On and Off-Screen Gesture Combinations
US9367205B2 (en) 2010-02-19 2016-06-14 Microsoft Technolgoy Licensing, Llc Radial menus with bezel gestures
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US8140570B2 (en) 2010-03-11 2012-03-20 Apple Inc. Automatic discovery of metadata
JP5702546B2 (en) * 2010-03-19 2015-04-15 ローム株式会社 Touch panel input device
JP5304707B2 (en) * 2010-03-31 2013-10-02 アイシン・エィ・ダブリュ株式会社 Display device and program
TWI439960B (en) 2010-04-07 2014-06-01 Apple Inc Avatar editing environment
US9542038B2 (en) 2010-04-07 2017-01-10 Apple Inc. Personalizing colors of user interfaces
US9285909B2 (en) 2010-04-09 2016-03-15 Apple Inc. Equalizing parasitic capacitance effects in touch screens
US8154680B2 (en) 2010-04-15 2012-04-10 Apple Inc. Electronic device display structures with controlled chassis reflections
JP2011227703A (en) * 2010-04-20 2011-11-10 Rohm Co Ltd Touch panel input device capable of two-point detection
US8692830B2 (en) 2010-06-01 2014-04-08 Apple Inc. Automatic avatar creation
US9213451B2 (en) 2010-06-04 2015-12-15 Apple Inc. Thin glass for touch panel sensors and methods therefor
US9164620B2 (en) 2010-06-07 2015-10-20 Apple Inc. Touch sensing error compensation
US9335870B2 (en) 2010-06-07 2016-05-10 Apple Inc. Touch-display crosstalk
US10216408B2 (en) 2010-06-14 2019-02-26 Apple Inc. Devices and methods for identifying user interface objects based on view hierarchy
USD681630S1 (en) 2010-07-08 2013-05-07 Apple Inc. Portable display device with graphical user interface
USD683730S1 (en) 2010-07-08 2013-06-04 Apple Inc. Portable display device with graphical user interface
JP5659586B2 (en) 2010-07-09 2015-01-28 ソニー株式会社 Display control device, display control method, display control program, and recording medium
US20120019453A1 (en) 2010-07-26 2012-01-26 Wayne Carl Westerman Motion continuation of touch input
US8875054B2 (en) 2010-07-30 2014-10-28 Apple Inc. Hybrid knob/slider control
US9652088B2 (en) 2010-07-30 2017-05-16 Apple Inc. Fabrication of touch sensor panel using laser ablation
US8388852B2 (en) 2010-07-30 2013-03-05 Apple Inc. Method for fabricating touch sensor panels
US20120032894A1 (en) 2010-08-06 2012-02-09 Nima Parivar Intelligent management for an electronic device
US10268320B2 (en) 2010-08-06 2019-04-23 Apple Inc. Method for disambiguating multiple touches on a projection-scan touch sensor panel
USD642563S1 (en) 2010-08-16 2011-08-02 Apple Inc. Electronic device
US10189743B2 (en) 2010-08-18 2019-01-29 Apple Inc. Enhanced strengthening of glass
US8890854B2 (en) 2010-08-27 2014-11-18 Apple Inc. Touch sensor panel calibration
US9268431B2 (en) 2010-08-27 2016-02-23 Apple Inc. Touch and hover switching
US8890817B2 (en) 2010-09-07 2014-11-18 Apple Inc. Centralized processing of touch information
US8823657B2 (en) 2010-09-07 2014-09-02 Apple Inc. Master/slave control of touch sensing
US8824140B2 (en) 2010-09-17 2014-09-02 Apple Inc. Glass enclosure
JP5693901B2 (en) * 2010-09-24 2015-04-01 シャープ株式会社 Display device, display method, and program
US9612731B2 (en) * 2010-09-29 2017-04-04 Nec Corporation Information processing device, control method for the same and program
US9323442B2 (en) 2010-09-30 2016-04-26 Apple Inc. Managing items in a user interface
US8950215B2 (en) 2010-10-06 2015-02-10 Apple Inc. Non-contact polishing techniques for reducing roughness on glass surfaces
US10185446B2 (en) 2010-10-15 2019-01-22 Apple Inc. Touch sensor arrays with integrated inter-layer contacts
US9491852B2 (en) 2010-10-15 2016-11-08 Apple Inc. Trace border routing
US8797282B2 (en) 2010-10-18 2014-08-05 Apple Inc. Touch sensor with secondary sensor and ground shield
US9658732B2 (en) 2010-10-19 2017-05-23 Apple Inc. Changing a virtual workspace based on user interaction with an application window in a user interface
US9292196B2 (en) 2010-10-19 2016-03-22 Apple Inc. Modifying the presentation of clustered application windows in a user interface
US9542202B2 (en) 2010-10-19 2017-01-10 Apple Inc. Displaying and updating workspaces in a user interface
US9013488B2 (en) 2010-10-19 2015-04-21 Apple Inc. Grouping items in a folder
US10740117B2 (en) 2010-10-19 2020-08-11 Apple Inc. Grouping windows into clusters in one or more workspaces in a user interface
US8808483B2 (en) 2010-11-05 2014-08-19 Apple Inc. Method of making a curved touch panel
US8913040B2 (en) 2010-11-05 2014-12-16 Apple Inc. Downsampling data for crosstalk compensation
US8603574B2 (en) 2010-11-05 2013-12-10 Apple Inc. Curved touch sensor
DE102010063392B4 (en) * 2010-11-15 2016-12-15 Leica Microsystems (Schweiz) Ag Microscope with touch screen, associated control and operating procedures
JP5605186B2 (en) 2010-11-23 2014-10-15 アイシン・エィ・ダブリュ株式会社 Control device, control method of control device, and computer program
US9069452B2 (en) 2010-12-01 2015-06-30 Apple Inc. Morphing a user-interface control object
US8743062B2 (en) 2010-12-03 2014-06-03 Apple Inc. Noise reduction for touch controller
US9851849B2 (en) 2010-12-03 2017-12-26 Apple Inc. Touch device communication
US9310923B2 (en) 2010-12-03 2016-04-12 Apple Inc. Input device for touch sensitive devices
JP5601997B2 (en) * 2010-12-06 2014-10-08 シャープ株式会社 Image forming apparatus and display control method
JP2012123520A (en) * 2010-12-07 2012-06-28 Hitachi Omron Terminal Solutions Corp Business form recognition processor
US8593450B2 (en) 2010-12-22 2013-11-26 Apple Inc. Relay driving of conductive segments in displays
US20120162121A1 (en) 2010-12-22 2012-06-28 Shih Chang Chang Slew rate and shunting control separation
US8804056B2 (en) 2010-12-22 2014-08-12 Apple Inc. Integrated touch screens
US9501217B2 (en) 2011-01-14 2016-11-22 Apple Inc. Target region for removing icons from dock
US9310916B2 (en) 2011-01-14 2016-04-12 Apple Inc. Display to touch crosstalk compensation
FR2971066B1 (en) 2011-01-31 2013-08-23 Nanotec Solution THREE-DIMENSIONAL MAN-MACHINE INTERFACE.
US8847919B2 (en) 2011-02-02 2014-09-30 Apple Inc. Interactive holographic display device
JP5664300B2 (en) * 2011-02-07 2015-02-04 大日本印刷株式会社 Computer apparatus, input system, and program
JP5664301B2 (en) * 2011-02-08 2015-02-04 大日本印刷株式会社 Computer device, electronic pen input system, and program
JP5664303B2 (en) * 2011-02-09 2015-02-04 大日本印刷株式会社 Computer apparatus, input system, and program
US10152192B2 (en) 2011-02-21 2018-12-11 Apple Inc. Scaling application windows in one or more workspaces in a user interface
USD671114S1 (en) 2011-02-25 2012-11-20 Apple Inc. Portable display device with cover
US8716932B2 (en) 2011-02-28 2014-05-06 Apple Inc. Displays with minimized borders
JP5373836B2 (en) 2011-03-01 2013-12-18 シャープ株式会社 Operation instruction apparatus and image forming apparatus having the same
US10761358B2 (en) 2011-03-03 2020-09-01 Apple Inc. Display screen shield line system
US10781135B2 (en) 2011-03-16 2020-09-22 Apple Inc. Strengthening variable thickness glass
US9725359B2 (en) 2011-03-16 2017-08-08 Apple Inc. Electronic device having selectively strengthened glass
US9866660B2 (en) 2011-03-21 2018-01-09 Apple Inc. Electronic devices with concave displays
US8816977B2 (en) 2011-03-21 2014-08-26 Apple Inc. Electronic devices with flexible displays
US9178970B2 (en) 2011-03-21 2015-11-03 Apple Inc. Electronic devices with convex displays
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US9298363B2 (en) 2011-04-11 2016-03-29 Apple Inc. Region activation for touch sensitive surface
JP5665642B2 (en) * 2011-04-22 2015-02-04 富士機械製造株式会社 Electronic component mounting equipment
US9128666B2 (en) 2011-05-04 2015-09-08 Apple Inc. Housing for portable electronic device with reduced border region
US9778685B2 (en) 2011-05-04 2017-10-03 Apple Inc. Housing for portable electronic device with reduced border region
US9319036B2 (en) 2011-05-20 2016-04-19 Apple Inc. Gate signal adjustment circuit
US8648845B2 (en) 2011-05-24 2014-02-11 Apple Inc. Writing data to sub-pixels using different write sequences
US8947413B2 (en) 2011-05-24 2015-02-03 Apple Inc. Changing display artifacts across frames
US8786586B2 (en) 2011-05-24 2014-07-22 Apple Inc. Scanning orders in inversion schemes of displays
US8502842B2 (en) 2011-05-24 2013-08-06 Apple Inc. Offsetting multiple coupling effects in display screens
US8593491B2 (en) 2011-05-24 2013-11-26 Apple Inc. Application of voltage to data lines during Vcom toggling
US8717345B2 (en) 2011-05-24 2014-05-06 Apple Inc. Pre-charging of sub-pixels
WO2012161699A1 (en) 2011-05-24 2012-11-29 Apple Inc. Additional application of voltage during a write sequence
US9092130B2 (en) 2011-05-31 2015-07-28 Apple Inc. Devices, methods, and graphical user interfaces for document manipulation
US20120309363A1 (en) 2011-06-03 2012-12-06 Apple Inc. Triggering notifications associated with tasks items that represent tasks to perform
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
FR2976688A1 (en) 2011-06-16 2012-12-21 Nanotec Solution DEVICE AND METHOD FOR GENERATING AN ELECTRIC POWER SUPPLY IN AN ELECTRONIC SYSTEM WITH A VARIABLE REFERENCE POTENTIAL.
US8958028B2 (en) 2011-06-17 2015-02-17 Apple Inc. Protective film patterning
US8711570B2 (en) 2011-06-21 2014-04-29 Apple Inc. Flexible circuit routing
US8928635B2 (en) 2011-06-22 2015-01-06 Apple Inc. Active stylus
US8638320B2 (en) 2011-06-22 2014-01-28 Apple Inc. Stylus orientation detection
US9329703B2 (en) 2011-06-22 2016-05-03 Apple Inc. Intelligent stylus
US8988628B2 (en) 2011-06-23 2015-03-24 Apple Inc. Coated chassis for liquid crystal display
US8775966B2 (en) 2011-06-29 2014-07-08 Motorola Mobility Llc Electronic device and method with dual mode rear TouchPad
US8787016B2 (en) 2011-07-06 2014-07-22 Apple Inc. Flexible display devices
US9158455B2 (en) 2011-07-12 2015-10-13 Apple Inc. Multifunctional environment for image cropping
US9400576B2 (en) 2011-07-19 2016-07-26 Apple Inc. Touch sensor arrangements for organic light-emitting diode displays
JP2011253550A (en) * 2011-07-26 2011-12-15 Kyocera Corp Portable electronic device
US8337216B1 (en) 2011-07-26 2012-12-25 Apple Inc. Touch sensor back plane ground connection
JP5518009B2 (en) * 2011-08-03 2014-06-11 シャープ株式会社 Image forming apparatus, image editing method, computer program, and recording medium
JP5605333B2 (en) 2011-08-19 2014-10-15 コニカミノルタ株式会社 Image processing apparatus, control method, and control program
US8994660B2 (en) 2011-08-29 2015-03-31 Apple Inc. Text correction processing
US9244215B2 (en) 2011-09-09 2016-01-26 Apple Inc. Chassis for display backlight
US8804347B2 (en) 2011-09-09 2014-08-12 Apple Inc. Reducing the border area of a device
US9158143B2 (en) 2011-09-12 2015-10-13 Apple Inc. Dual purpose touch sensor panel and optical retarder
US8608896B2 (en) 2011-09-13 2013-12-17 Apple Inc. Liquid adhesive lamination for precision adhesive control
US9454239B2 (en) 2011-09-14 2016-09-27 Apple Inc. Enabling touch events on a touch sensitive mechanical keyboard
US9041652B2 (en) 2011-09-14 2015-05-26 Apple Inc. Fusion keyboard
US9785251B2 (en) 2011-09-14 2017-10-10 Apple Inc. Actuation lock for a touch sensitive mechanical keyboard
US8875652B2 (en) 2011-09-14 2014-11-04 Apple Inc. Liquid adhesive boundary control
US9944554B2 (en) 2011-09-15 2018-04-17 Apple Inc. Perforated mother sheet for partial edge chemical strengthening and method therefor
US9746967B2 (en) 2011-09-15 2017-08-29 Apple Inc. Concurrent touch and negative pixel scan
US9436315B2 (en) 2011-09-15 2016-09-06 Apple Inc. Noise rejection circuit for touch sensitive display
US9851889B2 (en) 2011-09-16 2017-12-26 Kt Corporation Apparatus and method for rotating a displayed image by using multi-point touch inputs
US9268427B2 (en) 2011-09-23 2016-02-23 Apple Inc. Multi-mode voltages for touchscreens
US9760195B2 (en) 2011-09-23 2017-09-12 Apple Inc. Power management for integrated touch screens
US8988384B2 (en) 2011-09-23 2015-03-24 Apple Inc. Force sensor interface for touch controller
US8723824B2 (en) 2011-09-27 2014-05-13 Apple Inc. Electronic devices with sidewall displays
US9516149B2 (en) 2011-09-29 2016-12-06 Apple Inc. Multi-layer transparent structures for electronic device housings
US9098242B2 (en) 2011-09-30 2015-08-04 Apple Inc. Electronic devices with cover layers mounted to displays
US8929085B2 (en) 2011-09-30 2015-01-06 Apple Inc. Flexible electronic devices
US20130293505A1 (en) * 2011-09-30 2013-11-07 Lakshman Krishnamurthy Multi-dimensional interaction interface for mobile devices
US10088863B2 (en) 2011-09-30 2018-10-02 Apple Inc. Electronic devices with cover layers mounted to displays
US10245776B2 (en) 2011-09-30 2019-04-02 Apple Inc. Methods for forming electronic devices with bent display edges
US10261370B2 (en) 2011-10-05 2019-04-16 Apple Inc. Displays with minimized border regions having an apertured TFT layer for signal conductors
US9099010B2 (en) 2011-10-14 2015-08-04 Apple Inc. Content authoring application
US9259904B2 (en) 2011-10-20 2016-02-16 Apple Inc. Opaque thin film passivation
US9042132B2 (en) 2011-10-25 2015-05-26 Apple Inc. Noise suppression circuit for power adapter
US9286826B2 (en) 2011-10-28 2016-03-15 Apple Inc. Display with vias for concealed printed circuit and component attachment
US9079384B2 (en) 2011-11-11 2015-07-14 Apple Inc. Touch sensor panel having an index matching passivation layer
US10144669B2 (en) 2011-11-21 2018-12-04 Apple Inc. Self-optimizing chemical strengthening bath for glass
US9324183B2 (en) 2011-11-29 2016-04-26 Apple Inc. Dynamic graphical interface shadows
US9372593B2 (en) 2011-11-29 2016-06-21 Apple Inc. Using a three-dimensional model to render a cursor
US9195331B2 (en) 2011-12-06 2015-11-24 Apple Inc. Common electrode connections in integrated touch screens
US8581870B2 (en) 2011-12-06 2013-11-12 Apple Inc. Touch-sensitive button with two levels
US9462033B2 (en) 2011-12-07 2016-10-04 Apple Inc. Proofing electronic publications on portable devices
US20130159849A1 (en) 2011-12-20 2013-06-20 Keng Fai Lee Jump to Collaborator Cursor
US9542366B2 (en) 2011-12-20 2017-01-10 Apple Inc. Smart text in document chat
US9230356B2 (en) 2011-12-20 2016-01-05 Apple Inc. Document collaboration effects
FR2985048B1 (en) 2011-12-21 2014-08-15 Nanotec Solution PRESSURE-SENSITIVE CAPACITIVE MEASUREMENT DEVICE AND METHOD FOR TOUCH-FREE CONTACT INTERFACES
FR2985049B1 (en) 2011-12-22 2014-01-31 Nanotec Solution CAPACITIVE MEASURING DEVICE WITH SWITCHED ELECTRODES FOR TOUCHLESS CONTACTLESS INTERFACES
US9361942B2 (en) 2011-12-22 2016-06-07 Apple Inc. Playlist configuration and preview
US10133156B2 (en) 2012-01-10 2018-11-20 Apple Inc. Fused opaque and clear glass for camera or display window
US8773848B2 (en) 2012-01-25 2014-07-08 Apple Inc. Fused glass device housings
US9083344B2 (en) 2012-02-01 2015-07-14 Apple Inc. Touch sensor with integrated signal bus extensions
US9395869B2 (en) 2012-02-02 2016-07-19 Apple Inc. Global z-order for windows
US8810537B2 (en) 2012-02-15 2014-08-19 Apple Inc. Quadrature demodulation for touch sensitive devices
WO2013121459A1 (en) * 2012-02-16 2013-08-22 古野電気株式会社 Information display device, display mode switching method, and display mode switching program
US9081442B2 (en) 2012-02-27 2015-07-14 Apple Inc. Split sense lines for negative pixel compensation
US9316677B2 (en) 2012-02-29 2016-04-19 Apple Inc. Devices and methods for testing flex cable shielding
US9911550B2 (en) 2012-03-05 2018-03-06 Apple Inc. Touch sensitive device with multiple ablation fluence values
US9459738B2 (en) 2012-03-06 2016-10-04 Apple Inc. Calibration for pressure effects on touch sensor panels
JP6060966B2 (en) * 2012-03-06 2017-01-18 日本電気株式会社 TERMINAL DEVICE, TERMINAL DEVICE CONTROL METHOD, AND CONTROL PROGRAM
FR2988176B1 (en) 2012-03-13 2014-11-21 Nanotec Solution CAPACITIVE MEASUREMENT METHOD BETWEEN AN OBJECT AND AN ELECTRODE PLAN BY PARTIAL SYNCHRONOUS DEMODULATION
US9329723B2 (en) 2012-04-16 2016-05-03 Apple Inc. Reconstruction of original touch image from differential touch image
US8724304B2 (en) 2012-04-20 2014-05-13 Apple Inc. Electronic devices with flexible displays having fastened bent edges
US9201547B2 (en) 2012-04-30 2015-12-01 Apple Inc. Wide dynamic range capacitive sensing
US9086768B2 (en) 2012-04-30 2015-07-21 Apple Inc. Mitigation of parasitic capacitance
US8913021B2 (en) 2012-04-30 2014-12-16 Apple Inc. Capacitance touch near-field—far field switching
JP2012168977A (en) * 2012-05-07 2012-09-06 Fujitsu Component Ltd Resistance type touch panel
US9280610B2 (en) 2012-05-14 2016-03-08 Apple Inc. Crowd sourcing information to fulfill user requests
US10051104B2 (en) 2012-05-14 2018-08-14 Apple Inc. Delivery/read receipts for electronic messaging
US9395583B2 (en) 2012-06-06 2016-07-19 Apple Inc. Column spacer design for a display incorporating a third metal layer
US10296581B2 (en) 2012-06-06 2019-05-21 Apple Inc. Multi-word autocorrection
US9348607B2 (en) 2012-06-07 2016-05-24 Apple Inc. Quiet hours for notifications
US10354004B2 (en) 2012-06-07 2019-07-16 Apple Inc. Intelligent presentation of documents
US9164606B2 (en) 2012-06-08 2015-10-20 Apple Inc. Dynamic voltage generation for touch-enabled displays
US9330606B2 (en) 2012-06-08 2016-05-03 Apple Inc. Electronic device with display brightness control
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
US9226347B2 (en) 2012-06-25 2015-12-29 Apple Inc. Displays with vias
US9495129B2 (en) 2012-06-29 2016-11-15 Apple Inc. Device, method, and user interface for voice-activated navigation and browsing of a document
US9443672B2 (en) 2012-07-09 2016-09-13 Apple Inc. Patterned conductive traces in molded elastomere substrate
US9652090B2 (en) 2012-07-27 2017-05-16 Apple Inc. Device for digital communication through capacitive coupling
US8842088B2 (en) 2012-07-27 2014-09-23 Apple Inc. Touch gesture with visible point of interaction on a touch screen
US9176604B2 (en) 2012-07-27 2015-11-03 Apple Inc. Stylus device
US9557845B2 (en) 2012-07-27 2017-01-31 Apple Inc. Input device for and method of communication with capacitive devices through frequency variation
US10062334B2 (en) 2012-07-31 2018-08-28 Apple Inc. Backlight dimming control for a display utilizing quantum dots
USD681632S1 (en) 2012-08-11 2013-05-07 Apple Inc. Electronic device
US8994906B2 (en) 2012-08-13 2015-03-31 Apple Inc. Display with multilayer and embedded signal lines
US9110320B2 (en) 2012-08-14 2015-08-18 Apple Inc. Display with bent inactive edge regions
US9214507B2 (en) 2012-08-17 2015-12-15 Apple Inc. Narrow border organic light-emitting diode display
US9195108B2 (en) 2012-08-21 2015-11-24 Apple Inc. Displays with bent signal lines
US9250783B2 (en) 2012-08-21 2016-02-02 Apple Inc. Toggle gesture during drag gesture
JP6249652B2 (en) 2012-08-27 2017-12-20 三星電子株式会社Samsung Electronics Co.,Ltd. Touch function control method and electronic device thereof
US10222975B2 (en) 2012-08-27 2019-03-05 Apple Inc. Single contact scaling gesture
US9035932B2 (en) 2012-08-31 2015-05-19 Apple Inc. Thermally compensated pixels for liquid crystal displays (LCDS)
US9454025B2 (en) 2012-08-31 2016-09-27 Apple Inc. Displays with reduced driver circuit ledges
US9189064B2 (en) 2012-09-05 2015-11-17 Apple Inc. Delay of display event based on user gaze
US9128674B2 (en) 2012-09-07 2015-09-08 Apple Inc. Thermal press and ultraviolet curing for display assemblies
USD684571S1 (en) 2012-09-07 2013-06-18 Apple Inc. Electronic device
US9683841B2 (en) 2012-09-07 2017-06-20 Apple Inc. Imaging range finder fabrication
US9236202B2 (en) 2012-09-10 2016-01-12 Apple Inc. Corrosion mitigation for metal traces
US9075481B2 (en) 2012-09-10 2015-07-07 Apple Inc. ESD detection on a touch input device
US9733331B2 (en) 2012-09-10 2017-08-15 Apple Inc. Method of manufacturing touch sensors
USD681032S1 (en) 2012-09-11 2013-04-30 Apple Inc. Electronic device
US9946302B2 (en) 2012-09-19 2018-04-17 Apple Inc. Exposed glass article with inner recessed area for portable electronic device housing
US9547647B2 (en) 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
US9377907B2 (en) 2012-09-21 2016-06-28 Apple Inc. Self capacitance implementation method
US9442597B2 (en) 2012-10-19 2016-09-13 Apple Inc. Sensor-based ESD detection
JP2013041608A (en) * 2012-10-22 2013-02-28 Seiko Epson Corp Portable information apparatus, server, electronic book, program and information storage medium
JP2013041610A (en) * 2012-10-22 2013-02-28 Seiko Epson Corp Portable information apparatus, electronic book and program
JP2013041607A (en) * 2012-10-22 2013-02-28 Seiko Epson Corp Portable information apparatus, server, electronic book, program and information storage medium
US8949735B2 (en) 2012-11-02 2015-02-03 Google Inc. Determining scroll direction intent
US9601557B2 (en) 2012-11-16 2017-03-21 Apple Inc. Flexible display
US9591339B1 (en) 2012-11-27 2017-03-07 Apple Inc. Agnostic media delivery system
US10067575B2 (en) 2012-11-30 2018-09-04 Apple Inc. Noise correction for stylus applications on tablets and other touch devices
US10735106B2 (en) 2012-12-10 2020-08-04 Apple Inc. Mobile device with ultrasound ranging
US9457379B2 (en) 2012-12-10 2016-10-04 Apple Inc. Ultrasonic MEMS transmitter
US10707971B2 (en) 2012-12-10 2020-07-07 Apple Inc. Ultrasound ranging for mobile devices
US9774917B1 (en) 2012-12-10 2017-09-26 Apple Inc. Channel bar user interface
US10200761B1 (en) 2012-12-13 2019-02-05 Apple Inc. TV side bar user interface
US9158393B2 (en) 2012-12-18 2015-10-13 Logitech Europe S.A. Active stylus for touch sensing applications
US9367185B2 (en) 2012-12-18 2016-06-14 Logitech Europe S.A. Method and system for discriminating stylus and touch interactions
US9532111B1 (en) 2012-12-18 2016-12-27 Apple Inc. Devices and method for providing remote control hints on a display
US10521188B1 (en) 2012-12-31 2019-12-31 Apple Inc. Multi-user TV user interface
JP5649670B2 (en) * 2013-01-21 2015-01-07 富士通テン株式会社 input method
JP5626934B2 (en) * 2013-01-21 2014-11-19 富士通テン株式会社 Input device and input method
US9792013B2 (en) 2013-01-25 2017-10-17 Apple Inc. Interface scanning for disabled users
US9146617B2 (en) 2013-01-25 2015-09-29 Apple Inc. Activation of a screen reading program
JP5998964B2 (en) * 2013-01-31 2016-09-28 カシオ計算機株式会社 Dictionary information display device, dictionary information display method, dictionary information display program, dictionary information display system, server device thereof, and terminal device
US9336723B2 (en) 2013-02-13 2016-05-10 Apple Inc. In-cell touch for LED
FR3002052B1 (en) 2013-02-14 2016-12-09 Fogale Nanotech METHOD AND DEVICE FOR NAVIGATING A DISPLAY SCREEN AND APPARATUS COMPRISING SUCH A NAVIGATION
WO2014128825A1 (en) * 2013-02-19 2014-08-28 パイオニア株式会社 Method for processing display data and device for processing display data
US9494178B2 (en) 2013-03-01 2016-11-15 Apple Inc. Methods for bonding substrates using liquid adhesive
US10402000B2 (en) 2013-03-04 2019-09-03 Apple Inc. Display with integrated pressure sensing utilizing capacitive coupling to circuit elements
US10048775B2 (en) 2013-03-14 2018-08-14 Apple Inc. Stylus detection and demodulation
US10459546B2 (en) 2013-03-14 2019-10-29 Apple Inc. Channel aggregation for optimal stylus detection
US10203815B2 (en) 2013-03-14 2019-02-12 Apple Inc. Application-based touch sensitivity
US9811178B2 (en) 2013-03-14 2017-11-07 Apple Inc. Stylus signal detection and demodulation architecture
US9719797B2 (en) 2013-03-15 2017-08-01 Apple Inc. Voice and touch user interface
US9310931B2 (en) 2013-03-15 2016-04-12 Apple Inc. Dynamic cross-talk mitigation for integrated touch screens
US9310917B2 (en) 2013-03-15 2016-04-12 Apple Inc. Dynamic cross-talk mitigation for integrated touch screens
US9357250B1 (en) 2013-03-15 2016-05-31 Apple Inc. Multi-screen video user interface
FR3003964B1 (en) 2013-04-02 2016-08-26 Fogale Nanotech DEVICE FOR INTERACTING, WITHOUT CONTACT, AN ELECTRONIC AND / OR COMPUTER APPARATUS, AND APPARATUS PROVIDED WITH SUCH A DEVICE
US9209207B2 (en) 2013-04-09 2015-12-08 Apple Inc. Flexible display with bent edge regions
FR3004551A1 (en) 2013-04-15 2014-10-17 Fogale Nanotech MULTIZONE CAPACITIVE DETECTION METHOD, DEVICE AND APPARATUS USING THE METHOD
US9116572B2 (en) 2013-04-15 2015-08-25 Apple Inc. Disambiguation of touch input events on a touch sensor panel
JP5742870B2 (en) * 2013-04-17 2015-07-01 カシオ計算機株式会社 Electronic equipment and programs
FR3005763B1 (en) 2013-05-17 2016-10-14 Fogale Nanotech DEVICE AND METHOD FOR A CAPACITIVE CONTROL INTERFACE ADAPTED TO THE IMPLEMENTATION OF ELECTRODES OF HIGHLY RESISTIVE MEASUREMENTS
US9535544B2 (en) 2013-05-31 2017-01-03 Apple Inc. Reducing touch pixel coupling
US9946366B2 (en) 2013-06-03 2018-04-17 Apple Inc. Display, touch, and stylus synchronization
WO2014197336A1 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
US9582608B2 (en) 2013-06-07 2017-02-28 Apple Inc. Unified ranking with entropy-weighted information for phrase-based semantic auto-completion
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
US9477331B2 (en) 2013-06-07 2016-10-25 Apple Inc. Touch detection at bezel edge
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
CN110442699A (en) 2013-06-09 2019-11-12 苹果公司 Operate method, computer-readable medium, electronic equipment and the system of digital assistants
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
US9733716B2 (en) 2013-06-09 2017-08-15 Apple Inc. Proxy gesture recognizer
JP2014241093A (en) * 2013-06-12 2014-12-25 株式会社リコー Information processing system, operation apparatus, information display method, and program
US9459661B2 (en) 2013-06-19 2016-10-04 Apple Inc. Camouflaged openings in electronic device housings
US8988390B1 (en) 2013-07-03 2015-03-24 Apple Inc. Frequency agile touch processing
FR3008809B1 (en) 2013-07-18 2017-07-07 Fogale Nanotech CUSTOM ACCESSORY DEVICE FOR AN ELECTRONIC AND / OR COMPUTER APPARATUS, AND APPARATUS EQUIPPED WITH SUCH AN ACCESSORY DEVICE
US10061444B2 (en) 2013-07-31 2018-08-28 Apple Inc. Self capacitance touch sensing
US10067580B2 (en) 2013-07-31 2018-09-04 Apple Inc. Active stylus for use with touch controller architecture
US9772704B2 (en) 2013-08-15 2017-09-26 Apple Inc. Display/touch temporal separation
US9886141B2 (en) 2013-08-16 2018-02-06 Apple Inc. Mutual and self capacitance touch measurements in touch panel
US10126850B2 (en) 2013-08-16 2018-11-13 Apple Inc. Active integrated touch/display
JP5857011B2 (en) * 2013-08-23 2016-02-10 東芝テック株式会社 Order receiving apparatus and control program
WO2015030712A1 (en) 2013-08-26 2015-03-05 Bodhi Technology Ventures Llc Method of detecting the wearing limb of a wearable electronic device
JP5876451B2 (en) * 2013-08-28 2016-03-02 シャープ株式会社 Image forming apparatus, recording medium determination method, computer program, and recording medium
WO2015030869A1 (en) 2013-08-28 2015-03-05 Bodhi Technology Ventures Llc Sensor for detecting presence of material
CN105493479B (en) 2013-08-29 2019-03-26 苹果公司 More equipment wirelessly disable and enable
US9304641B2 (en) 2013-09-18 2016-04-05 Apple Inc. Multiple bridges single sided touch sensor
JP6254803B2 (en) * 2013-09-20 2017-12-27 株式会社Nttドコモ Map image display device
US10028309B2 (en) 2013-10-02 2018-07-17 Apple Inc. Cloud phone notifications
US10042486B1 (en) 2013-10-18 2018-08-07 Apple Inc. Dynamic demodulation waveform adjustment for tonal noise mitigation
US9690432B2 (en) 2013-10-21 2017-06-27 Apple Inc. Touch receiving channel re-use scheme with receiver signal coding
US9678609B2 (en) 2013-10-21 2017-06-13 Apple Inc. Orthogonal frequency scan scheme in touch system
US9292141B2 (en) 2013-10-30 2016-03-22 Apple Inc. Double sided touch sensor on transparent substrate
WO2015065516A1 (en) 2013-11-01 2015-05-07 Bodhi Technology Ventures Llc Ambient light sensing through the human body
FR3013472B1 (en) 2013-11-19 2016-07-08 Fogale Nanotech COVERING ACCESSORY DEVICE FOR AN ELECTRONIC AND / OR COMPUTER PORTABLE APPARATUS, AND APPARATUS EQUIPPED WITH SUCH AN ACCESSORY DEVICE
JP5767303B2 (en) * 2013-11-25 2015-08-19 利仁 曽根 Resize request determination method
US9933879B2 (en) 2013-11-25 2018-04-03 Apple Inc. Reconfigurable circuit topology for both self-capacitance and mutual capacitance sensing
US9304575B2 (en) 2013-11-26 2016-04-05 Apple Inc. Reducing touch sensor panel power consumption
WO2015088629A1 (en) 2013-12-13 2015-06-18 Pylemta Management Llc Integrated touch and display architectures for self-capacitive touch sensors
US10691235B2 (en) 2013-12-13 2020-06-23 Apple Inc. On-cell touch architecture
US10426402B2 (en) 2013-12-20 2019-10-01 Apple Inc. Skin proximity and tilt effect sensor
US9668676B2 (en) 2013-12-30 2017-06-06 Apple Inc. User identification system based on plethysmography
US9600172B2 (en) 2014-01-03 2017-03-21 Apple Inc. Pull down navigation mode
US10073569B2 (en) 2014-01-28 2018-09-11 Apple Inc. Integrated polarizer and conductive material
US9356562B2 (en) 2014-01-30 2016-05-31 Apple Inc. Family of slew-enhanced operational transconductance amplifiers
US9971459B2 (en) 2014-01-31 2018-05-15 Apple Inc. Touch sensitive module with integrated sensor and artwork
US9430105B2 (en) 2014-02-07 2016-08-30 Apple Inc. Frequency independent offset cancellation scheme in touch receiver channel
FR3017723B1 (en) 2014-02-19 2017-07-21 Fogale Nanotech METHOD OF MAN-MACHINE INTERACTION BY COMBINING TOUCH-FREE AND CONTACTLESS CONTROLS
US9886062B2 (en) 2014-02-28 2018-02-06 Apple Inc. Exposed glass article with enhanced stiffness for portable electronic device housing
US10156940B2 (en) 2014-03-11 2018-12-18 Apple Inc. Panel mismatch compensation for touch enabled displays
US9949359B2 (en) 2014-03-18 2018-04-17 Apple Inc. Multi-layer thin-film coatings for system-in-package assemblies in portable electronic devices
US9913412B2 (en) 2014-03-18 2018-03-06 Apple Inc. Shielding structures for system-in-package assemblies in portable electronic devices
US10268295B2 (en) 2014-04-16 2019-04-23 Apple Inc. Structure for pixelated self-capacitance
USD845294S1 (en) 2014-05-05 2019-04-09 Apple Inc. Housing for an electronic device with surface ornamentation
US9836165B2 (en) 2014-05-16 2017-12-05 Apple Inc. Integrated silicon-OLED display and touch sensor panel
US10133382B2 (en) 2014-05-16 2018-11-20 Apple Inc. Structure for integrated touch screen
US9965108B2 (en) 2014-05-16 2018-05-08 Apple Inc. Simultaneous self- and mutual capacitance sensing
US9465456B2 (en) 2014-05-20 2016-10-11 Apple Inc. Reduce stylus tip wobble when coupled to capacitive sensor
US9778789B2 (en) 2014-05-21 2017-10-03 Apple Inc. Touch rejection
US9690417B2 (en) 2014-05-21 2017-06-27 Apple Inc. Glove touch detection
US9569045B2 (en) 2014-05-21 2017-02-14 Apple Inc. Stylus tilt and orientation estimation from touch sensor panel images
US10558302B2 (en) 2014-05-23 2020-02-11 Apple Inc. Coded integration of a self-capacitance array
US9367188B2 (en) 2014-05-23 2016-06-14 Apple Inc. RC matching in a touch screen
WO2015183334A1 (en) 2014-05-28 2015-12-03 Pylemta Management Llc Narrow border touch screen
US9966065B2 (en) 2014-05-30 2018-05-08 Apple Inc. Multi-command single utterance input method
US10078631B2 (en) 2014-05-30 2018-09-18 Apple Inc. Entropy-guided text prediction using combined word and character n-gram language models
US9451425B2 (en) 2014-05-30 2016-09-20 Apple Inc. Unified message delivery between portable electronic devices
US9851853B2 (en) 2014-05-30 2017-12-26 Apple Inc. Low power scan for device wake up and unlock
US9760559B2 (en) 2014-05-30 2017-09-12 Apple Inc. Predictive text input
US10303295B2 (en) 2014-05-30 2019-05-28 Apple Inc. Modifying an on-screen keyboard based on asymmetric touch drift
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US10095345B2 (en) 2014-05-30 2018-10-09 Apple Inc. Low power scan for device wake up and unlock
US9842101B2 (en) 2014-05-30 2017-12-12 Apple Inc. Predictive conversion of language input
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US9785630B2 (en) 2014-05-30 2017-10-10 Apple Inc. Text prediction using combined word N-gram and unigram language models
US10789642B2 (en) 2014-05-30 2020-09-29 Apple Inc. Family accounts for an online content storage sharing service
CN106462355B (en) * 2014-06-11 2020-05-19 三菱电机株式会社 Display control system and display control method
US9766702B2 (en) 2014-06-19 2017-09-19 Apple Inc. User detection by a computing device
US9811204B2 (en) 2014-06-23 2017-11-07 Apple Inc. Time multiplexed touch detection and power charging
WO2015200537A2 (en) 2014-06-24 2015-12-30 Apple Inc. Input device and user interface interactions
CN111782128A (en) 2014-06-24 2020-10-16 苹果公司 Column interface for navigating in a user interface
EP3105669A1 (en) 2014-06-24 2016-12-21 Apple Inc. Application menu for video system
CN110221766A (en) 2014-06-24 2019-09-10 苹果公司 Calculate the character recognition in equipment
WO2015200371A1 (en) 2014-06-24 2015-12-30 Apple Inc. Music now playing user interface
US9820373B2 (en) 2014-06-26 2017-11-14 Apple Inc. Thermal solutions for system-in-package assemblies in portable electronic devices
US10289251B2 (en) 2014-06-27 2019-05-14 Apple Inc. Reducing floating ground effects in pixelated self-capacitance touch screens
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US10659851B2 (en) 2014-06-30 2020-05-19 Apple Inc. Real-time digital assistant knowledge updates
US9280251B2 (en) 2014-07-11 2016-03-08 Apple Inc. Funneled touch sensor routing
US10372271B2 (en) 2014-07-18 2019-08-06 Apple Inc. Adjustment of touch sensing stimulation voltage levels based on touch performance
US10743255B2 (en) 2014-07-25 2020-08-11 Apple Inc. Power optimization modes for communication between device and server
US10228751B2 (en) 2014-08-06 2019-03-12 Apple Inc. Low power mode
US10758133B2 (en) 2014-08-07 2020-09-01 Apple Inc. Motion artifact removal by time domain projection
US9867575B2 (en) 2014-08-22 2018-01-16 Apple Inc. Heart rate path optimizer
US10201286B2 (en) 2014-08-22 2019-02-12 Apple Inc. Frequency domain projection algorithm
US9647489B2 (en) 2014-08-26 2017-05-09 Apple Inc. Brownout avoidance
US10092197B2 (en) 2014-08-27 2018-10-09 Apple Inc. Reflective surfaces for PPG signal detection
US10203803B2 (en) 2014-09-02 2019-02-12 Apple Inc. Touch scan modes during device charging
US10042484B1 (en) 2014-09-02 2018-08-07 Apple Inc. Coupling correction in capacitive touch panels
US9880655B2 (en) 2014-09-02 2018-01-30 Apple Inc. Method of disambiguating water from a finger touch on a touch sensor panel
US10215698B2 (en) 2014-09-02 2019-02-26 Apple Inc. Multiple light paths architecture and obscuration methods for signal and perfusion index optimization
US9661495B2 (en) 2014-09-02 2017-05-23 Apple Inc. Device activation method and system
FR3025623B1 (en) 2014-09-05 2017-12-15 Fogale Nanotech CONTROL INTERFACE DEVICE AND FINGERPRINT SENSOR
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10789041B2 (en) 2014-09-12 2020-09-29 Apple Inc. Dynamic thresholds for always listening speech trigger
CN107077260B (en) 2014-09-22 2020-05-12 苹果公司 Touch controller and method for touch sensor panel
KR101973045B1 (en) 2014-09-24 2019-04-26 애플 인크. Management of the channel bar
US9880649B2 (en) 2014-09-29 2018-01-30 Apple Inc. Touch, pen and force sensor operation with variable refresh displays
US10405044B1 (en) 2014-09-30 2019-09-03 Apple Inc. Content notification system and method
US10708391B1 (en) 2014-09-30 2020-07-07 Apple Inc. Delivery of apps in a media stream
US9886432B2 (en) 2014-09-30 2018-02-06 Apple Inc. Parsimonious handling of word inflection via categorical stem + suffix N-gram language models
US9691270B1 (en) 2014-09-30 2017-06-27 Apple Inc. Automatically configuring a remote control for a device
US9646609B2 (en) 2014-09-30 2017-05-09 Apple Inc. Caching apparatus for serving phonetic pronunciations
US9773409B1 (en) 2014-09-30 2017-09-26 Apple Inc. Automatically configuring a remote control for a device
US10114883B1 (en) 2014-09-30 2018-10-30 Apple Inc. Generating preferred metadata for content items
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US10231033B1 (en) 2014-09-30 2019-03-12 Apple Inc. Synchronizing out-of-band content with a media stream
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US10488936B2 (en) 2014-09-30 2019-11-26 Apple Inc. Motion and gesture input from a wearable device
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US9600112B2 (en) 2014-10-10 2017-03-21 Apple Inc. Signal trace patterns for flexible substrates
AU361808S (en) 2014-10-15 2015-05-14 Apple Inc Electronic device
US10712867B2 (en) 2014-10-27 2020-07-14 Apple Inc. Pixelated self-capacitance water rejection
FR3028061B1 (en) 2014-10-29 2016-12-30 Fogale Nanotech CAPACITIVE SENSOR DEVICE COMPRISING ADJUSTED ELECTRODES
WO2016072983A1 (en) 2014-11-05 2016-05-12 Onamp Research Llc Common electrode driving and compensation for pixelated self-capacitance touch screen
US10552013B2 (en) 2014-12-02 2020-02-04 Apple Inc. Data detection
US10067618B2 (en) 2014-12-04 2018-09-04 Apple Inc. Coarse scan and targeted active mode scan for touch
WO2016106350A1 (en) 2014-12-23 2016-06-30 Bribbla Dynamics Llc Confocal inspection system having non-overlapping annular illumination and collection regions
US10718931B2 (en) 2014-12-23 2020-07-21 Apple Inc. Confocal inspection system having averaged illumination and averaged collection paths
KR101982950B1 (en) 2014-12-23 2019-05-27 애플 인크. Optical inspection system and method including accounting for variations of optical path length within a sample
CN107580673A (en) 2015-01-09 2018-01-12 苹果公司 Polarization selectivity, frequency selectivity and wide dynamic range detector, imaging array, read integrated circuit, and sensing system
US10345962B2 (en) 2015-01-23 2019-07-09 Apple Inc. Touch panel with non-uniform touch node layout
AU2015379572B2 (en) 2015-01-27 2018-09-27 Apple Inc. A system for determining the quality of sleep
US9817513B2 (en) 2015-01-27 2017-11-14 Apple Inc. Sense amplifier stabilization with switched series resistor
US10054720B2 (en) 2015-02-02 2018-08-21 Apple Inc. Fresnel lens barrier rings
WO2016126525A1 (en) 2015-02-02 2016-08-11 Apple Inc. Flexible self-capacitance and mutual capacitance touch sensing system architecture
FR3032287B1 (en) 2015-02-04 2018-03-09 Quickstep Technologies Llc MULTILAYER CAPACITIVE DETECTION DEVICE, AND APPARATUS COMPRISING THE DEVICE
US10824279B2 (en) 2015-02-06 2020-11-03 Apple Inc. Remote feedback tapping for a touch sensor panel driving circuit
WO2016131010A1 (en) 2015-02-13 2016-08-18 Apple Inc. Charge pump having ac and dc outputs for touch panel bootstrapping and substrate biasing
US10306047B2 (en) 2015-02-23 2019-05-28 Apple Inc. Mechanism for providing user-programmable button
FR3033203B1 (en) 2015-02-27 2018-03-23 Quickstep Technologies Llc METHOD FOR INTERACTING WITH AN ELECTRONIC AND / OR COMPUTER APPARATUS IMPLEMENTING A CAPACITIVE CONTROL SURFACE AND A PERIPHERAL SURFACE, INTERFACE AND APPARATUS IMPLEMENTING SAID METHOD
US10037100B2 (en) 2015-03-02 2018-07-31 Apple Inc. SNR-aware active mode touch scans with electrode reallocation
CN107408792B (en) 2015-03-06 2021-01-08 苹果公司 Independent control of emission wavelength and output power of semiconductor lasers
US9865280B2 (en) 2015-03-06 2018-01-09 Apple Inc. Structured dictation using intelligent automated assistants
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US10244175B2 (en) 2015-03-09 2019-03-26 Apple Inc. Automatic cropping of video content
US10048788B2 (en) 2015-03-09 2018-08-14 Apple Inc. Touch screen display uniformity
US10488992B2 (en) 2015-03-10 2019-11-26 Apple Inc. Multi-chip touch architecture for scalability
US9899019B2 (en) 2015-03-18 2018-02-20 Apple Inc. Systems and methods for structured stem and suffix language models
US9942576B2 (en) 2015-04-06 2018-04-10 Apple Inc. Method and system for remote battery notification
US9842105B2 (en) 2015-04-16 2017-12-12 Apple Inc. Parsimonious continuous-space phrase representations for natural language processing
US9921696B2 (en) 2015-04-24 2018-03-20 Apple Inc. Sensor with diffusing resistor
US10353516B2 (en) 2015-04-24 2019-07-16 Apple Inc. Merged floating pixels in a touch screen
CN107530000B (en) 2015-04-27 2020-08-25 苹果公司 Dynamically configurable aperture for ppg signal optimization and ambient light mitigation
US10437385B2 (en) 2015-04-28 2019-10-08 Apple Inc. Sensor design for capacitance sensing
US10146359B2 (en) 2015-04-28 2018-12-04 Apple Inc. Common electrode auto-compensation method
US9443501B1 (en) 2015-05-13 2016-09-13 Apple Inc. Method and system of note selection and manipulation
US10152162B1 (en) 2015-05-15 2018-12-11 Apple Inc. Method of optimizing touch detection
US9766370B2 (en) 2015-05-18 2017-09-19 Apple Inc. Wrist-detection algorithm
US9930287B2 (en) 2015-05-22 2018-03-27 Apple Inc. Virtual noticeboard user interaction
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US10127220B2 (en) 2015-06-04 2018-11-13 Apple Inc. Language identification from short strings
US9880824B2 (en) 2015-06-05 2018-01-30 Apple Inc. On demand resources
US10101822B2 (en) 2015-06-05 2018-10-16 Apple Inc. Language input correction
US10447812B2 (en) 2015-06-05 2019-10-15 Apple Inc. On demand resources
US10868672B1 (en) 2015-06-05 2020-12-15 Apple Inc. Establishing and verifying identity using biometrics while protecting user privacy
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US10083105B2 (en) 2015-06-05 2018-09-25 Apple Inc. Smart advice to charge notification
US10186254B2 (en) 2015-06-07 2019-01-22 Apple Inc. Context-based endpoint detection
US10255907B2 (en) 2015-06-07 2019-04-09 Apple Inc. Automatic accent detection using acoustic models
US10564770B1 (en) 2015-06-09 2020-02-18 Apple Inc. Predictive touch detection
US9910533B2 (en) 2015-06-19 2018-03-06 Apple Inc. Timing scheme for touch screen supporting variable refresh rate
US10613643B2 (en) 2015-06-25 2020-04-07 Apple Inc. Method for stylus touch-down and lift-off noise mitigation
US9921652B2 (en) 2015-06-29 2018-03-20 Apple Inc. Input with haptic feedback
US9535501B1 (en) 2015-06-29 2017-01-03 Apple Inc. Input with haptic feedback
US10691287B2 (en) 2015-07-28 2020-06-23 Nippon Telegraph And Telephone Corporation Touch panel type information terminal device, information input processing method and program thereof
US10386962B1 (en) 2015-08-03 2019-08-20 Apple Inc. Reducing touch node electrode coupling
US10801950B2 (en) 2015-09-01 2020-10-13 Apple Inc. Reference switch architectures for noncontact sensing of substances
US10025401B2 (en) 2015-09-08 2018-07-17 Apple Inc. Active stylus ring electrode
US10120531B2 (en) 2015-09-08 2018-11-06 Apple Inc. User interfaces for navigating and playing content
US10198089B2 (en) 2015-09-08 2019-02-05 Apple Inc. Active stylus precision tip
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10678367B1 (en) 2015-09-11 2020-06-09 Apple Inc. Compressive touch sensing
WO2017048497A1 (en) 2015-09-18 2017-03-23 Bribbla Dynamics Llc Measurement time distribution in referencing schemes
US10310667B2 (en) 2015-09-21 2019-06-04 Apple Inc. Multi-bar capacitive sense electrode
US9697820B2 (en) 2015-09-24 2017-07-04 Apple Inc. Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks
US9880664B2 (en) 2015-09-24 2018-01-30 Apple Inc. Common pixel correction for sensor panels
US10132680B1 (en) 2015-09-25 2018-11-20 Apple Inc. UV dosimetry and exposure alert
US10444040B2 (en) 2015-09-25 2019-10-15 Apple Inc. Crown with three-dimensional input
US9851298B1 (en) 2015-09-25 2017-12-26 Apple Inc. Light-based shielding detection
US9939899B2 (en) 2015-09-25 2018-04-10 Apple Inc. Motion and gesture input from a wearable device
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
US10534481B2 (en) 2015-09-30 2020-01-14 Apple Inc. High aspect ratio capacitive sensor panel
US10295838B1 (en) 2015-09-30 2019-05-21 Apple Inc. Body including surface having concentric annular portions
US10317200B1 (en) 2015-09-30 2019-06-11 Apple Inc. Multi-mode sensor for surface orientation
US9983029B2 (en) 2015-09-30 2018-05-29 Apple Inc. Integrated optical encoder for tilt able rotatable shaft
US9971407B2 (en) 2015-09-30 2018-05-15 Apple Inc. Haptic feedback for rotary inputs
US10874348B1 (en) 2015-09-30 2020-12-29 Apple Inc. Force sensing for PPG heart-rate performance enhancement and contact detection
US10687717B1 (en) 2015-09-30 2020-06-23 Apple Inc. PPG sensor having light arrival angle control at detector
US10537284B1 (en) 2015-09-30 2020-01-21 Apple Inc. Enhanced sensor signal collection and reflection of reflected and/or scattered light
US10671222B2 (en) 2015-09-30 2020-06-02 Apple Inc. Touch sensor pattern for edge input detection
US10365773B2 (en) 2015-09-30 2019-07-30 Apple Inc. Flexible scan plan using coarse mutual capacitance and fully-guarded measurements
US10474255B2 (en) 2015-09-30 2019-11-12 Apple Inc. Input element with integrated functionality
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
JP2016042383A (en) * 2015-11-25 2016-03-31 カシオ計算機株式会社 User operation processing apparatus, user operation processing method, and program
US10254870B2 (en) 2015-12-01 2019-04-09 Apple Inc. Force sensor-based motion or orientation determination in a device
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
JP6756103B2 (en) * 2015-12-28 2020-09-16 カシオ計算機株式会社 Electronic devices, display systems, display devices, imaging devices, display control methods and programs
US10154316B2 (en) 2016-02-26 2018-12-11 Apple Inc. Motion-based configuration of a multi-user device
US9904379B2 (en) 2016-02-29 2018-02-27 Apple Inc. Disabling stylus to prevent worn tip performance degradation and screen damage
US10503258B2 (en) 2016-03-04 2019-12-10 Apple Inc. Input mechanism with force and rotation inputs and haptic feedback
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
DK201670583A1 (en) 2016-03-28 2017-10-16 Apple Inc Keyboard input to an electronic device
CN109073460A (en) 2016-04-21 2018-12-21 苹果公司 Optical system for reference switching
CN109152530A (en) 2016-05-10 2019-01-04 苹果公司 System and method for the measurement of non-pulsating blood volume
US10895932B1 (en) 2016-05-10 2021-01-19 Apple Inc. Drift invariant processing
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US10305520B2 (en) 2016-05-27 2019-05-28 Apple Inc. Removing RF interference through scan rate locking
US10474277B2 (en) 2016-05-31 2019-11-12 Apple Inc. Position-based stylus communication
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
DK179588B1 (en) 2016-06-09 2019-02-22 Apple Inc. Intelligent automated assistant in a home environment
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DK179049B1 (en) 2016-06-11 2017-09-18 Apple Inc Data driven natural language event detection and classification
DK179343B1 (en) 2016-06-11 2018-05-14 Apple Inc Intelligent task discovery
US10324973B2 (en) 2016-06-12 2019-06-18 Apple Inc. Knowledge graph metadata network based on notable moments
DK201670582A1 (en) 2016-06-12 2018-01-02 Apple Inc Identifying applications on which content is available
DK201670581A1 (en) 2016-06-12 2018-01-08 Apple Inc Device-level authorization for viewing content
DK201670608A1 (en) 2016-06-12 2018-01-02 Apple Inc User interfaces for retrieving contextually relevant media content
US10209827B1 (en) 2016-06-24 2019-02-19 Apple Inc. Dynamic adjustment of demodulation waveform
US10139250B2 (en) 2016-07-08 2018-11-27 Apple Inc. Optical encoder based on light-steering based contrast generation from a first plurality of primary convex mirror sections and a second plurality of secondary mirror sections
US10613666B2 (en) 2016-07-15 2020-04-07 Apple Inc. Content creation using electronic input device on non-electronic surfaces
KR20200104932A (en) 2016-07-29 2020-09-04 애플 인크. Touch sensor panel with multi-power domain chip configuration
US10512432B2 (en) 2016-08-12 2019-12-24 Apple Inc. Vital signs monitoring system
US10359885B2 (en) 2016-08-29 2019-07-23 Apple Inc. Touch induced flicker mitigation for variable refresh rate display
US10697830B1 (en) 2016-08-31 2020-06-30 Apple Inc. Multicomb light source and spectrometer
AU2017208277B2 (en) 2016-09-06 2018-12-20 Apple Inc. Back of cover touch sensors
US10599247B2 (en) 2016-09-06 2020-03-24 Apple Inc. Thermal compensation for force-sensitive button
US10541280B1 (en) 2016-09-16 2020-01-21 Apple Inc. OLED based touch sensing and user identification
US10416803B2 (en) 2016-09-21 2019-09-17 Apple Inc. Gasket with embedded capacitive sensor
US10478099B2 (en) 2016-09-22 2019-11-19 Apple Inc. Systems and methods for determining axial orientation and location of a user's wrist
US10139975B2 (en) 2016-09-23 2018-11-27 Apple Inc. Pressure compensation for force-sensitive touch screen
US10187765B2 (en) 2016-09-23 2019-01-22 Apple Inc. Networked sensor array
US10446116B2 (en) 2016-09-23 2019-10-15 Apple Inc. Temperature sensor on display active area
US10429974B2 (en) 2016-09-23 2019-10-01 Apple Inc. Touch sensor panel with top and/or bottom shielding
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
US20180113579A1 (en) 2016-10-26 2018-04-26 Apple Inc. User interfaces for browsing content from multiple content applications on an electronic device
US10372282B2 (en) 2016-12-01 2019-08-06 Apple Inc. Capacitive coupling reduction in touch sensor panels
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
KR20180075733A (en) 2016-12-26 2018-07-05 엘지디스플레이 주식회사 Flexible display device
US10524735B2 (en) 2017-03-28 2020-01-07 Apple Inc. Detecting conditions using heart rate sensors
US10606418B2 (en) 2017-03-31 2020-03-31 Apple Inc. Ultrasonic touch detection on stylus
US10642418B2 (en) 2017-04-20 2020-05-05 Apple Inc. Finger tracking in wet environment
DK201770439A1 (en) 2017-05-11 2018-12-13 Apple Inc. Offline personal assistant
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
DK201770432A1 (en) 2017-05-15 2018-12-21 Apple Inc. Hierarchical belief states for digital assistants
US10874313B2 (en) 2017-06-04 2020-12-29 Apple Inc. Heartrate tracking techniques
US10788936B1 (en) 2017-07-17 2020-09-29 Apple Inc. Absorption correction for fabric touch sensing layer
US10739904B2 (en) 2017-08-15 2020-08-11 Apple Inc. Self-capacitance and mutual capacitance touch-sensor panel architecture
US10585502B2 (en) 2017-08-17 2020-03-10 Apple Inc. Touch sensor excitation using transformer
JP6410900B2 (en) * 2017-08-28 2018-10-24 富士ゼロックス株式会社 Display control device, image display device, and program
US10871818B1 (en) 2017-09-11 2020-12-22 Apple Inc. Component power consumption management determining whether the power availability of the power source exceeds the expected power consumption
US10592027B2 (en) 2017-09-11 2020-03-17 Apple Inc. State-based touch threshold
US10444820B2 (en) 2017-09-11 2019-10-15 Apple Inc. Low power touch detection
US10474108B2 (en) 2017-09-27 2019-11-12 Apple Inc. Magnetic sensor array for crown rotation
US10901543B1 (en) 2017-09-29 2021-01-26 Apple Inc. Touch screen with transparent electrode structure
US10788368B1 (en) 2017-09-29 2020-09-29 Apple Inc. Thermal isolation structure
KR20200035296A (en) 2017-09-29 2020-04-02 애플 인크. IMU-based gloves
CN111065991A (en) 2017-09-29 2020-04-24 苹果公司 Multi-through hole structure for touch screen
KR20200031133A (en) 2017-09-29 2020-03-23 애플 인크. Vein scanning device for automatic gesture and finger recognition
US10599199B1 (en) 2017-12-20 2020-03-24 Apple Inc. Systems and methods for power management at device shutdown
US10817307B1 (en) 2017-12-20 2020-10-27 Apple Inc. API behavior modification based on power source health
US10802651B2 (en) 2018-01-30 2020-10-13 Apple Inc. Ultrasonic touch detection through display
US10872024B2 (en) 2018-05-08 2020-12-22 Apple Inc. User interfaces for controlling or presenting device usage on an electronic device
DK180081B1 (en) 2018-06-01 2020-04-01 Apple Inc. Access to system user interfaces on an electronic device
DK201870354A1 (en) 2018-06-03 2019-12-20 Apple Inc. Setup procedures for an electronic device
US10871836B2 (en) 2018-07-06 2020-12-22 Apple Inc. System and method for unintentional input rejection
US10725573B2 (en) 2018-08-06 2020-07-28 Apple Inc. Annular piezoelectric structure for ultrasonic touch sensing
US10831296B1 (en) 2018-09-11 2020-11-10 Apple Inc. Touch rejection for wet fabric
US10613678B1 (en) 2018-09-17 2020-04-07 Apple Inc. Input device with haptic feedback
US10754440B2 (en) 2018-09-28 2020-08-25 Apple Inc. Touch sensitive keyboard with flexible interconnections
US10557724B1 (en) 2018-09-28 2020-02-11 Apple Inc. Angle detection of a rotating system using a single magnet and multiple hall sensors
US10512130B1 (en) 2019-02-01 2019-12-17 Apple Inc. Multi-string LED drivers and current switching techniques
US10877606B2 (en) 2019-04-22 2020-12-29 Apple Inc. Method and apparatus for isolating ultrasonic touch sensor from reflections in a device housing
US10750595B1 (en) 2019-05-31 2020-08-18 Apple Inc. Frequency-to-current/voltage converter based mixed-mode LED drivers

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01142818A (en) * 1987-11-27 1989-06-05 Nec Corp Screen control system
JPH056246A (en) * 1991-06-27 1993-01-14 Nec Eng Ltd Operation control system for automatic teller machine
EP0622722B1 (en) * 1993-04-30 2002-07-17 Xerox Corporation Interactive copying system
JPH07230352A (en) * 1993-09-16 1995-08-29 Hitachi Ltd Touch position detecting device and touch instruction processor
JPH0876926A (en) * 1994-09-02 1996-03-22 Brother Ind Ltd Picture display device
JPH09231004A (en) * 1996-02-23 1997-09-05 Yazaki Corp Information processor
JPH10141974A (en) * 1996-11-12 1998-05-29 Sony Corp Car navigation system and its operation method
JPH10213445A (en) * 1996-11-26 1998-08-11 Matsushita Electric Works Ltd Navigator
JP3591201B2 (en) * 1997-03-31 2004-11-17 マツダ株式会社 Map information utilization device with telephone function

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
USRE45559E1 (en) 1997-10-28 2015-06-09 Apple Inc. Portable computers
USRE46548E1 (en) 1997-10-28 2017-09-12 Apple Inc. Portable computers
US10817162B2 (en) 2007-01-07 2020-10-27 Apple Inc. Application programming interfaces for scrolling operations
US9760272B2 (en) 2007-01-07 2017-09-12 Apple Inc. Application programming interfaces for scrolling operations
US10481785B2 (en) 2007-01-07 2019-11-19 Apple Inc. Application programming interfaces for scrolling operations
US9600162B2 (en) 2013-05-16 2017-03-21 Ricoh Company, Ltd. Information processing apparatus, information processing method, and computer readable-recording medium
US9417771B2 (en) 2013-05-16 2016-08-16 Ricoh Company, Ltd. Information processing apparatus, information processing method, and computer readable-recording medium
CN104345977A (en) * 2013-08-08 2015-02-11 索尼公司 Touch detection circuit, touch detection method, and electronic apparatus
CN104345977B (en) * 2013-08-08 2018-11-13 索尼公司 Touch detection circuit, touch detecting method and electronic equipment

Also Published As

Publication number Publication date
JP2000163031A (en) 2000-06-16

Similar Documents

Publication Publication Date Title
US10901514B2 (en) Devices, methods, and graphical user interfaces for generating tactile outputs
US10678351B2 (en) Devices and methods for providing an indication as to whether a message is typed or drawn on an electronic device with a touch-sensitive display
US10860177B2 (en) Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
EP3120230B1 (en) Devices and methods for navigating between user interfaces
US20190251140A1 (en) Systems and Methods to Facilitate Active Reading
JP6469163B2 (en) Device, method and graphical user interface for organizing and presenting a collection of media items
US20200278786A1 (en) Devices, methods, and graphical user interfaces for document manipulation
US10156974B2 (en) Information processing apparatus, display control method, and display control program
JP6391602B2 (en) Media player with image-based browsing
US10564826B2 (en) Device, method, and graphical user interface for manipulating user interface objects
JP6584638B2 (en) Device and method for providing handwriting support in document editing
US20200081614A1 (en) Device and Method for Facilitating Setting Autofocus Reference Point in Camera Application User Interface
US10324976B2 (en) Gallery application for content viewing
US20200167047A1 (en) Reduced size user interface
US10126904B2 (en) Mobile device gestures
EP3019944B1 (en) User terminal device for supporting user interaction and methods thereof
US9628423B2 (en) Electronic sticky note system, information processing terminal, method for processing electronic sticky note, medium storing program, and data structure of electronic sticky note
US10613745B2 (en) User interface for receiving user input
EP2975512B1 (en) Device and method for displaying a virtual loupe in response to a user contact
CN107273027B (en) Image display device
TWI541717B (en) Managing real-time handwriting recognition
US10747417B2 (en) Information processing apparatus, information processing method and information processing program for using a cursor
US9778836B2 (en) User interface systems and methods for manipulating and viewing digital documents
US10067922B2 (en) Automated study guide generation for electronic books
EP2668551B1 (en) Device, method, and graphical user interface for navigating through an electronic document

Legal Events

Date Code Title Description
A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20051124

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20051124

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20051220

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20070528

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070530

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070730

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070829

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20071029

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20071205

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080125

A911 Transfer of reconsideration by examiner before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20080201

A912 Removal of reconsideration by examiner before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20080314

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100520

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100628

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130702

Year of fee payment: 3

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees