JP2012530301A - 動き検出を用いてモバイル・コンピューティング・デバイス上でパン及びズーム機能を処理する方法 - Google Patents

動き検出を用いてモバイル・コンピューティング・デバイス上でパン及びズーム機能を処理する方法 Download PDF

Info

Publication number
JP2012530301A
JP2012530301A JP2012515226A JP2012515226A JP2012530301A JP 2012530301 A JP2012530301 A JP 2012530301A JP 2012515226 A JP2012515226 A JP 2012515226A JP 2012515226 A JP2012515226 A JP 2012515226A JP 2012530301 A JP2012530301 A JP 2012530301A
Authority
JP
Japan
Prior art keywords
computing device
mobile computing
movement
image
response
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2012515226A
Other languages
English (en)
Inventor
ファン、ユンウー
ポンゾ、ジョン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
International Business Machines Corp
Original Assignee
International Business Machines Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by International Business Machines Corp filed Critical International Business Machines Corp
Publication of JP2012530301A publication Critical patent/JP2012530301A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1626Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2200/00Indexing scheme relating to G06F1/04 - G06F1/32
    • G06F2200/16Indexing scheme relating to G06F1/16 - G06F1/18
    • G06F2200/163Indexing scheme relating to constructional details of the computer
    • G06F2200/1637Sensing arrangement for detection of housing movement or orientation, e.g. for controlling scrolling or cursor movement on the display of an handheld computer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/12Details of telephonic subscriber devices including a sensor for measuring a physical value, e.g. temperature or motion

Abstract

【課題】 パン及びズーム機能を可能にする小さい画面を有するモバイル・コンピューティング・デバイスを提供する。
【解決手段】 デバイスの実際の動きを利用して、特に、グラフィック・ユーザ・インターフェースのパニング、ズーミング、ページング及びスクローリングを制御する、モバイル・コンピューティング・デバイスの機構について示す。ユーザは、現在デバイス上に表示されている画像又は文書に対してパン、ズーム、ページ及び/又はスクロール機能を実行するのに、一方の手だけを用いてデバイスを保持し、同時に、例えば、デバイスを動かす又はデバイスでジェスチャすることなどによって上述の機能を行うことだけが必要となる。従って、画面は必ずしもタッチスクリーンである必要はなく、ユーザは、必ずしも画面に触れる必要はない。
【選択図】 図2

Description

本発明の分野は、モバイル・コンピューティング・デバイスであり、具体的には、パン(pan)及びズーム機能を可能にする小さい画面を有するモバイル・コンピューティング・デバイスである。
小さい画面を有し、通常は電話機能を含むモバイル・コンピューティング・デバイスが近年急速に普及し、ユーザがポケット内に小型コンピュータを基本的に持ち運ぶことが可能になり、インターネット・アクセス及び手のひらに収まる小型ワード・プロセッシングなどの様々な機能が可能になっている。これらのデバイスの画面は、更なる多用途性及び機能のために、スタイラス又はユーザの指によるタッチ起動(touch activation)を可能にするものであることが多い。
カリフォルニア州Cupertino所在のApple,Inc.社によって製造される「iPhone(登録商標)」の種々の実現(incarnation)は、タッチスクリーン機能を含み、中でも、ユーザの指が画面表示のパン及びズーム機能を直接制御することができる。例えば、指で画面に触れ、その指を画面の上でドラッグすることにより、パニング(panning)機能をもたらすことができる一方、2本の指を画面に当て、これらを互い近づくように又は互いに遠ざかるようにドラッグすることにより、それぞれズームアウト及びズームイン機能をもたらすことができる。
指起動機能は、一方の手を上述の指起動及び操作のために使用する間、他方の手はデバイスを保持する必要があるという点で、依然として両手用機能となる。タッチスクリーンはまた、常時指起動及び操作を必要とし、使用するので、ユーザの指で付けられる水分又は油で汚れやすい又は傷つきやすい。
米国特許出願公開第2008/0174570号
従って、本発明者等は、タッチスクリーンに付随する、上述した機能上及び実際的な不利点、並びに他の不利点を克服するための必要性を認識した。
本発明の少なくとも1つの現在好ましい実施形態によると、本明細書において、デバイスの実際の動きを利用して、特に、グラフィック・ユーザ・インターフェースのパニング、ズーミング、ページング及びスクローリングを制御することができる、モバイル・コンピューティング・デバイス上の機構が広く検討される。ユーザは、現在デバイス上に表示されている画像又は文書に対してパン、ズーム、ページ及び/又はスクロール機能を実行するのに、一方の手だけを用いてデバイスを保持し、同時に、例えば、デバイスを動かす又はデバイスでジェスチャする(gesture)ことなどによって上述の機能を行うことだけが必要となる。従って、画面は必ずしもタッチスクリーンである必要はなく、ユーザは、必ずしもいつも画面に触れる必要はない。
要約すれば、本発明の一態様は、主メモリ及びシステム・プロセッサを含み、手で移動させることができ、画像を表示するためのディスプレイをさらに含み、動き検出モジュールをさらに含むモバイル・コンピューティング・デバイスを含み、この動き検出モジュールは、モバイル・コンピューティング・デバイスの移動を検出し、モバイル・コンピューティング・デバイスの移動方向を検出し、モバイル・コンピューティング・デバイスの移動及び移動方向の検出に応答して、画像の外観を変化させるように働く装置を提供する。
本発明の別の態様は、主メモリ及びシステム・プロセッサを含むモバイル・コンピューティング・デバイスを準備することと、モバイル・コンピューティング・デバイス上に画像を表示することと、モバイル・コンピューティング・デバイスを手で移動させることと、モバイル・コンピューティング・デバイスの移動を検出することと、モバイル・コンピューティング・デバイスの移動方向を検出することと、移動の検出及び移動方向の検出に応答して画像の外観を変化させることとを含む方法を提供する。
さらに、本発明の付加的な態様は、それにより具体化されたコンピュータ可読プログラム・コードを有するコンピュータ可読ストレージ媒体を含むコンピュータ・プログラム製品を提供し、このコンピュータ可読プログラム・コードは、モバイル・コンピューティング・デバイス上に画像を表示するように構成されたコンピュータ可読プログラム・コードと、モバイル・コンピューティング・デバイスの移動を検出するように構成されたコンピュータ可読プログラム・コードと、モバイル・コンピューティング・デバイスの移動方向を検出するように構成されたコンピュータ可読プログラム・コードと、移動の検出及び移動方向の検出に応答して画像の外観を変化させるように構成されたコンピュータ可読プログラム・コードとを含む。
本発明のさらに別の態様は、それにより具体化されたコンピュータ可読プログラム・コードを有するコンピュータ可読ストレージ媒体を含むコンピュータ・プログラム製品を提供し、このコンピュータ可読プログラム・コードは、モバイル・コンピューティング・デバイスの移動方向を検出するように構成されたコンピュータ可読プログラム・コードと、モバイル・コンピューティング・デバイスの移動方向の検出に応答して、モバイル・コンピューティング・デバイス上に表示される画像の外観を変化させるように構成されたコンピュータ可読プログラム・コードとを含み、ここで、モバイル・コンピューティング・デバイス上に表示される画像の外観を変化させることは、ズーム機能を実施すること、パニング機能を実施すること、及びページング機能を実施することのうちの1つ又は複数を含む。
本発明をより良く理解するために、本発明の他の及びさらに別の特徴及び利点と共に、添付の図面に関連して用いられる以下の説明を参照し、本発明の範囲は添付の特許請求の範囲において示される。
モバイル・コンピューティング・デバイスの構成要素を概略的に示す。 モバイル・コンピューティング・デバイスの特定の構成要素を概略的に示す。 モバイル・コンピューティング・デバイス及び動きの方向を概略的に示す。 動き検出モジュールを概略的に示す。
ここで図面に全体的に説明され、示されるように、本発明の構成部品は、種々の異なる構成で配置し、設計できることが容易に理解されるであろう。従って、図に表されるような本発明の装置、システム、及び方法の実施形態についての以下のより詳細な説明は、特許請求される本発明の範囲を限定することを意図したものではなく、単に本発明の選択された実施形態を表すものにすぎない。
本明細書全体を通して「1つの実施形態」又は「一実施形態」(又は類似のもの)への言及は、実施形態に関連して説明される特定の特徴、構造、又は特性が、本発明の少なくとも1つの実施形態内に含まれることを意味する。従って、本明細書全体を通して様々な箇所にある「1つの実施形態において」又は「一実施形態において」という句の出現は、必ずしも全てが同じ実施形態を指すものではない。
さらに、説明される特徴、構造、又は特性は、1つ又は複数の実施形態において、任意の適切な方法で組み合せることができる。以下の説明において、本発明の実施形態の十分な理解を与えるために、例えば、プログラミング、ソフトウェア・モジュール、ユーザ選択、ネットワーク取引、データベース・クエリ、データベース構造、ハードウェア・モジュール、ハードウェア回路、ハードウェア・チップ等のような多くの具体的な詳細が与えられる。しかしながら、当業者であれば、本発明の種々の実施形態は、1つ又は複数の具体的な詳細なしに、又は他の方法、構成要素、材料などを用いて、実施できることを認識するであろう。他の例では、本発明の実施形態の態様を分かり難くしないように、周知の構造、材料、又は動作は、示されず又は詳細に説明されない。
本発明の示される実施形態は、全体を通して同様の部品が同様の番号又は他のラベルで示される図面を参照することにより、最も良く理解されるであろう。以下の説明は、単に一例であることを意図したものであり、本明細書で特許請求される本発明と適合するデバイス、システム、及びプロセスの特定の選択された実施形態を簡単に示すものである。
ここで図1を参照すると、モバイル・コンピューティング・デバイス202の例証的な実施形態のブロック図が示される。図1に示す例証的な実施形態は、スマートフォン又は他のコンピューティングデバイスのようなモバイル・コンピューティング・デバイスとすることができる。しかしながら、説明から明らかであるように、本発明は、本明細書で説明するような、いずれの適切に構成されたコンピューティングデバイスにも適用できる。
図1に示すように、モバイル・コンピューティング・デバイス202は、少なくとも1つのシステム・プロセッサ42を含み、このシステム・プロセッサ42は、プロセッサ・バス44によって読み出し専用メモリ(ROM)40及びシステム・メモリ46に結合される。AMD Corporation社製のAMD(登録商標)ラインのプロセッサ、又は、Intel Corporation社若しくはARM Ltd.,社製のプロセッサのうちの1つを含むことができるシステム・プロセッサ42は、電源オンの際にROM40内に格納されたブート・コード41を実行し、その後にシステム・メモリ46内に格納されたオペレーティング・システム及びアプリケーション・ソフトウェアの制御下でデータを処理する汎用プロセッサである。システム・プロセッサ42は、プロセッサ・バス44及びホスト・ブリッジ48を介して周辺構成要素相互接続(PCI)ローカル・バス50に結合される。
PCIローカル・バス50は、アダプタ及びブリッジを含む多くのデバイスの接続をサポートする。これらのデバイスの中には、電子デバイス100をLAN10にインターフェース接続するネットワーク・アダプタ66、電子デバイス100をディスプレイ69にインターフェース接続するグラフィック・アダプタ68がある。PCIローカル・バス50上の通信は、ローカルPCIコントローラ52によって管理され、このローカルPCIコントローラ52は、メモリ・バス54を介して不揮発性ランダム・アクセス・メモリ(NVRAM)56に結合される。ローカルPCIコントローラ52は、第2のホスト・ブリッジ60を介して付加的なバス及びデバイスに結合される。
モバイル・コンピューティング・デバイス202は、業界標準アーキテクチャ(ISA)バス62をさらに含み、これはISAブリッジ64によりPCIローカル・バス50に結合される。電子デバイス100と、キーパッド、タッチパッド及びディスク・ドライブなどの接続された周辺デバイスとの間の通信を制御する入力/出力(I/O)コントローラ70が、ISAバス62に結合される。さらに、I/Oコントローラ70は、シリアル・ポート及びパラレル・ポートを介して電子デバイス100による外部通信をサポートする。USBバス及びUBSコントローラ(図示せず)は、ローカルPCIコントローラ52の一部である。
図2は、本発明の現在好ましい実施形態による、モバイル・コンピューティング・デバイス202の特定の構成要素を概略的に示す簡略化した図である。204で示されるのは、デバイス202のオペレーティング・システム206(主メモリを含むことができる又はその一部とすることができる)及びシステム・プロセッサ208とインターフェース接続する動き検出モジュールである。本発明の少なくとも1つの実施形態による動き検出モジュールの構成及び機能は、以下の更なる議論からより良く理解されるであろう。
図3は、同じくモバイル・コンピューティング・デバイス202を概略的に示すが、今度は表示画面210及びその上に表示される画像又は文書212を示す。画像又は文書212は、一例として、基本的に任意の適切なタイプのグラフィカル・ユーザ・インターフェース(GUI)により表示することができる。モジュール204(図2)は、モバイル・コンピューティング・デバイス202の、空間内の移動、例えば、左、右、「上」及び「下」(それぞれ、矢印216/218/220/222で示す)への移動、並びにユーザに「向かう」移動及びユーザから「離れる」移動(それぞれ、記号224/226で示す)を追跡及び監視するように構成されることが好ましい。より正確に言えば、「上」/「下」/「左」/「右」216/218/220/222は、画面210の位置と同一平面上にあることが好ましい。さらに、「上」216は、好ましくは、画像/文書212の上向き方向に平行で、これに沿った方向として定めることができ(ここで、「上向き」は、画面上に示される画像/文書212に従って、画面210の知覚的上部分に感覚的に対応する)、「下」218は、好ましくは、画像/文書212の下向き方向に平行で、これに沿った方向として定めることができ(ここで、「下向き」は、画面上に示される画像/文書212に従って、画面210の知覚的下部分に感覚的に対応する)、「左」及び「右」(220/222)方向は、「上」/「下」(216/218)に対して垂直に適切に通っている。「向かう」224は、一例として、画面210の位置に対して垂直に、かつ、画像/文書212がユーザに向かって表示されるおおよその方向に沿って定められることが好ましく、「離れる」226は、「向かう」(224)に対して正反対の方向に定められる。
好ましくは、モジュール204(図1)による検出に十分な方向216−226の移動は、ユーザが、当該方向に又はそこに向かってデバイス202を迅速かつ急激に移動させることによってもたらされることが好ましいが、他のタイプの移動により、モジュール204(図1)による検出を引き起こすことも可能である。
図4は、動き検出モジュール204をより詳細に概略的に示す。モジュール204は、モバイル・コンピューティング・デバイス(202)の移動、速度及び方向の変化を検出することができる加速度計228を含むことが好ましい。典型的には、モバイル・コンピューティング・デバイス(例えば携帯電話)と関連付けられた加速度計228は、一組のアプリケーション・プログラム・インターフェース(API)を含み、これらを230で示す。少なくとも1つのAPI(230)は、上記の移動、速度及び方向の変化に関連するデータを処理するように構成できることが好ましい。このことは、リスナ・オブジェクト232の形のコードを呼び出すことによって行うことができ、これが、空間的位置又は方向の変化に応答して、どんな変化がどの方向に起きたかを具体的に定量的に判定することになる。
従って、システム・プロセッサ208(図2)との対話を通して、所定のプロトコルが次に起きる動作を制御できることが好ましい。例えば、急激な「上」又は「下」への移動(図3の216/218)は、212(図3)の文書を通る、それぞれ後方又は前方へのページングを引き起こすことができる。画面210(図3)に対して同一平面上のいずれかの方向(216/218/220/222)における急激な移動は、画像又は文書212(図3)を通る、対応するパニング移動を引き起こすことができることが好ましく、一方、急激な「向かう」又は「離れる」移動(図3の224/226)は、それぞれ、画像/文書212(図3)のズームイン又はズームアウトを引き起こすことができる。上記の所定のプロトコルは、本発明の現在のところ好ましい実施形態の非限定的な例証にすぎないことに留意されたい。上述した所定のプロトコルの逆を実施することなど、これらの所定のプロトコルに対する1つ又は複数の修正を行うことができる。
AIP(228)は、一般的には加速度計と共に含ませることができるので、製造者又はエンドユーザでさえも、APIを調整して上述したような所望の機能を実行することができる。従って、基本的に任意の適切なモバイル・コンピューティング・デバイス(例えば、携帯電話)を利用して、ソフトウェアのみの修正を行い、上述した種類の機能を可能にすることができる。
要約すれば、前述のことから、本発明の少なくとも1つの現在のところ好ましい実施形態によると、動き検出モジュールを、加速度計を含めて利用して、モバイル・コンピューティング・デバイスの特定の動きを捕捉できることが理解されるであろう。動き検出モジュールの出力、及び実証的分析に基づいた経験則を用いて、特定の動きをそれぞれ、パニング、ズーミング及びページングなどの所定のGUI機能にマッピングすることができる。
本発明の少なくとも1つの実施形態によって用いることができる一般的なタイプの加速度計は、「Touch Screen Device,Method and Graphical User Interface for Determing Commands by Appling Heuristics」と題する特許文献1において論じられている。
当業者であれば認識するように、本発明の態様は、システム、方法又はコンピュータ・プログラム製品として具体化することができる。従って、本発明の態様は、完全にハードウェアの実施形態、完全にソフトウェアの実施形態(ファームウェア、常駐ソフトウェア、マイクロコードなどを含む)、又は、又はソフトウェア及びハードウェアの態様を組み合わせた実施形態の形態をとることができ、これらは全て、本明細書において概略的に「回路」、「モジュール」、又は「システム」と呼ぶことができる。さらに、本発明の態様は、その上に具体化されたコンピュータ可読プログラム・コードを有する、1つ又は複数のコンピュータ可読媒体内に具体化されたコンピュータ・プログラム製品の形をとることができる。
1つ又は複数のコンピュータ可読媒体の任意の組合せを用いることができる。コンピュータ可読媒体は、コンピュータ可読信号媒体又はコンピュータ可読ストレージ媒体とすることができる。コンピュータ可読ストレージ媒体は、これらに限られるものではないが、例えば、電子的、磁気的、光学的、電磁的、赤外線、又は半導体システム、装置、又はデバイス、或いは上記の任意の好適な組み合わせとすることができる。コンピュータ可読ストレージ媒体のより具体的な例(網羅的ではないリスト)は以下のもの、すなわち、1つ又は複数の配線を有する電気的接続、ポータブル・コンピュータ・ディスケット、ハードディスク、ランダム・アクセス・メモリ(「RAM」)、読み出し専用メモリ(「ROM」)、消去可能プログラム可能読み出し専用メモリ(「EPROM」又はフラッシュメモリ)、ポータブル・コンパクトディスク読み出し専用メモリ(「CD−ROM」)、DVD、光学記憶装置、磁気記憶装置、又は上記の任意の好適な組み合わせを含む。本文書の文脈において、コンピュータ可読ストレージ媒体は、命令実行システム、装置、又はデバイスによって使用するため、又はそれらと接続して使用するために、プログラムを収容又は格納することができる任意の有形の媒体とすることができる。
コンピュータ可読信号媒体は、例えばベースバンド内に又は搬送波の一部として、その上に具体化されたコンピュータ可読プログラム・コードを有する伝搬データ信号を含むことができる。こうした伝播信号は、これらに限られるものではないが、電磁、光学、又はこれらの任意の好適な組み合わせを含む、種々の形態のいずれかをとることができる。コンピュータ可読信号媒体は、コンピュータ可読ストレージ媒体ではなく、かつ、命令実行システム、装置、又はデバイスによって使用するため、又はそれらと接続して使用するために、プログラムを通信し、伝播し、又は搬送することができる任意のコンピュータ可読媒体とすることができる。
コンピュータ可読媒体上に具体化されたプログラム・コードは、これらに限られるものではないが、無線、有線、光ファイバ・ケーブル、無線周波数等、又は上記の好適な組み合わせを含む、任意の好適な媒体を用いて伝送することができる。
本発明の態様の動作を実行するためのコンピュータ・プログラム・コードは、Java、Smalltalk、C++等のようなオブジェクト指向プログラミング言語、及び「C」プログラミング言語又は類似のプログラミング言語のような従来の手続き型プログラミング言語を含む、1つ又は複数のプログラミング言語の任意の組合せで記述することができる。プログラム・コードは、完全にユーザのコンピュータ上で実行される場合もあり、一部がユーザのコンピュータ上で実行される場合もあり、独立したソフトウェア・パッケージとして実行される場合もあり、一部がユーザのコンピュータ上で実行され、一部がリモート・コンピュータ上で実行される場合もあり、又は完全にリモート・コンピュータ若しくはサーバ上で実行される場合もある。一番最後のシナリオの場合、リモート・コンピュータは、ローカル・エリア・ネットワーク(LAN)若しくは広域ネットワーク(WAN)を通じてユーザのコンピュータに接続される場合もあり、又は外部のコンピュータへの接続がなされる場合もある(例えば、インターネット・サービス・プロバイダを用いたインターネットを通じて)。
本発明の態様は、本発明の実施形態による方法、装置(システム)及びコンピュータ・プログラム製品のフローチャート図及び/又はブロック図を参照して上述された。フローチャート図及び/又はブロック図の各ブロック、並びにフローチャート図及び/又はブロック図内のブロックの組み合わせは、コンピュータ・プログラム命令によって実施することができることが理解されるであろう。これらのコンピュータ・プログラム命令を、機械を製造するために、汎用コンピュータ、専用コンピュータ、又は他のプログラム可能データ処理装置のプロセッサに与えて、その結果、コンピュータ又は他のプログラム可能データ処理装置のプロセッサによって実行される命令が、フローチャート及び/又はブロック図の1つ又はブロックにおいて指定された機能/行為を実施するための手段を作り出すようにさせることができる。
これらのコンピュータ・プログラム命令はまた、コンピュータ又は他のプログラム可能なデータ処理装置を特定の方法で機能させるように指図することができるコンピュータ可読メモリ内に格納され、その結果、そのコンピュータ可読メモリ内に格納された命令が、フローチャート及び/又はブロック図の1つ又は複数のブロックで特定される機能/動作を実施する命令手段を含む製品を製造するようにさせることもできる。
コンピュータ・プログラム命令はまた、コンピュータ又は他のプログラム可能なデータ処理装置上にロードされ、一連の動作ステップをコンピュータ又は他のプログラム可能な装置上で実行されるようにして、コンピュータにより実施されるプロセスを生成し、その結果、そのコンピュータ又は他のプログラム可能装置上で実行される命令が、フローチャート及び/又はブロック図の1つ又は複数のブロックで特定される機能/動作を実施するためのプロセスを提供するようにさせることができる。
本明細書において特に断りがなければ、本明細書で言及及び引用した全ての特許、特許出願、特許公報及び他の刊行物(ウェブ・ベースの刊行物を含む)は、その全体が引用により本明細書に示されたかのように、本明細書に完全に組み入れられる。
本発明の例証的な実施形態を、本明細書において添付の図面を参照しながら説明したが、本発明はそれらの正確な実施形態に限定されないこと、及び、当業者であれば、本発明の範囲及び思想から逸脱することなく、種々の他の変更及び修正をそこに行うことができることを理解すべきである。
10:LAN
40:読み出し専用メモリ(ROM)
41:ブート・コード
42:システム・プロセッサ
44:プロセッサ・バス
46:システム・メモリ
48、60:ホスト・ブリッジ
50:周辺構成要素相互接続(PCI)ローカル・バス
52:ローカルPCIコントローラ
54:メモリ・バス
56:不揮発性ランダム・アクセス・メモリ(NVRAM)
62:業界標準アーキテクチャ(ISA)バス
64:ISAブリッジ
66:ネットワーク・アダプタ
68:グラフィック・アダプタ
69:ディスプレイ
70:入力/出力(I/O)コントローラ
100:電子デバイス
202:モバイル・コンピューティング・デバイス
204:動き検出モジュール
206:オペレーティング・システム
208:システム・プロセッサ
210:表示画面
212:画像又は文書
216:「上」
218:「下」
220:「左」
222:「右」
224:「向かう」
226:「離れる」
228:加速度計
230:アプリケーション・プログラム・インターフェース(API)
232:リスナ・オブジェクト

Claims (25)

  1. モバイル・コンピューティング・デバイスを含む装置であって、
    前記モバイル・コンピューティング・デバイスは、
    主メモリ及びシステム・プロセッサを含み、
    手で移動させることができ、
    画像を表示するためのディスプレイをさらに含み、
    動き検出モジュールをさらに含み、
    前記動き検出モジュールは、
    前記モバイル・コンピューティング・デバイスの移動を検出し、
    前記モバイル・コンピューティング・デバイスの移動方向を検出し、
    前記モバイル・コンピューティング・デバイスの移動及び移動方向の検出に応答して、前記ディスプレイ上の画像の外観を変化させる、
    ように働く、装置。
  2. 前記動き検出モジュールは加速度計を含む、請求項1に記載の装置。
  3. 前記モバイル・コンピューティング・デバイスは、前記加速度計と通信するアプリケーション・プログラム・インターフェースをさらに含む、請求項2に記載の装置。
  4. 前記加速度計は、前記モバイル・コンピューティング・デバイスの移動及び前記モバイル・コンピューティング・デバイスの移動方向を検出するように働き、
    前記アプリケーション・プログラム・インターフェースは、前記モバイル・コンピューティング・デバイスの移動及び移動方向の検出に応答して、前記システム・プロセッサと通信して、前記ディスプレイ上の画像の外観を変化させるように働く、
    請求項3に記載の装置。
  5. 前記アプリケーション・プログラム・インターフェースは、前記モバイル・コンピューティング・デバイスの移動及び移動方向を定量的に判定するリスナ・オブジェクトを呼び出すように働く、請求項3に記載の装置。
  6. 前記ディスプレイ上に表示される画像は文書を含む、請求項1に記載の装置。
  7. 前記動き検出モジュールは、前記モバイル・コンピューティング・デバイスの急激な移動を検出するように働く、請求項1に記載の装置。
  8. 前記動き検出モジュールは、前記ディスプレイがユーザと向かい合うとき、ユーザから離れる方向の前記モバイル・コンピューティング・デバイスの移動に応答して、ズームアウトした画像の外観をもたらすように働く、請求項1に記載の装置。
  9. 前記動き検出モジュールは、前記ディスプレイがユーザと向かい合うとき、ユーザに向かう方向の前記モバイル・コンピューティング・デバイスの移動に応答して、ズームインした画像の外観をもたらすように働く、請求項1に記載の装置。
  10. 前記動き検出モジュールは、前記ディスプレイの位置に対して同一平面上にある直線的な方向における前記モバイル・コンピューティング・デバイスの移動に応答して、シフトした画像の外観をもたらすように働き、画像は、前記モバイル・コンピューティング・デバイスの移動の方向に対応する方向にシフトする、請求項1に記載の装置。
  11. 前記動き検出モジュールは、前記ディスプレイ上の文書を含む画像に対して下向き方向における前記モバイル・コンピューティング・デバイスの移動に応答して、文書を含む画像を通って前方にページングさせるように働く、請求項1に記載の装置。
  12. 前記動き検出モジュールは、前記ディスプレイ上の文書を含む画像に対して上向き方向における前記モバイル・コンピューティング・デバイスの移動に応答して、文書を含む画像を通って後方にページングさせるように働く、請求項1に記載の装置。
  13. 主メモリ及びシステム・プロセッサを含むモバイル・コンピューティング・デバイスを準備することと、
    前記モバイル・コンピューティング・デバイス上に画像を表示することと、
    前記モバイル・コンピューティング・デバイスの移動を検出することと、
    前記モバイル・コンピューティング・デバイスの移動方向を検出することと、
    前記移動の検出及び前記移動方向の検出に応答して、前記画像の外観を変化させることと、
    を含む方法。
  14. 前記画像は文書を含む、請求項13に記載の方法。
  15. 前記移動を検出することは、前記モバイル・コンピューティング・デバイスの急激な移動を検出することを含む、請求項13に記載の方法。
  16. 前記変化させることは、前記画像がユーザと向かい合うとき、ユーザから離れる方向における前記モバイル・コンピューティング・デバイスの移動に応答して、ズームアウトした画像の外観を与えるステップを含む、請求項13に記載の方法。
  17. 前記変化させることは、前記画像がユーザと向かい合うとき、ユーザに向かう方向の前記モバイル・コンピューティング・デバイスの移動に応答して、ズームインした画像の外観を与えることを含む、請求項13に記載の方法。
  18. 前記変化させることは、前記画像の位置に対して同一平面上にある直線的な方向における前記モバイル・コンピューティング・デバイスの移動に応答して、シフトした画像の外観を与えることを含み、画像は、前記モバイル・コンピューティング・デバイスの移動の方向に対応する方向にシフトする、請求項13に記載の装置。
  19. 前記画像は文書を含み、前記変化させることは、前記文書に対して下向き方向における前記モバイル・コンピューティング・デバイスの移動に応答して、前記文書を通って前方にページングさせることを含む、請求項13に記載の方法。
  20. 前記画像は文書を含み、前記変化させることは、前記文書に対して上向き方向における前記モバイル・コンピューティング・デバイスの移動に応答して、前記文書を通って後方にページングさせることを含む、請求項13に記載の方法。
  21. それにより具体化されたコンピュータ可読プログラム・コードを有するコンピュータ可読ストレージ媒体を含み、前記コンピュータ可読プログラム・コードは、
    モバイル・コンピューティング・デバイス上に画像を表示するように構成されたコンピュータ可読プログラム・コードと、
    前記モバイル・コンピューティング・デバイスの移動を検出するように構成されたコンピュータ可読プログラム・コードと、
    前記モバイル・コンピューティング・デバイスの移動方向を検出するように構成されたコンピュータ可読プログラム・コードと、
    前記移動の検出及び前記移動方向の検出に応答して、前記画像の外観を変化させるように構成されたコンピュータ可読プログラム・コードと、
    を含む、コンピュータ・プログラム製品。
  22. それにより具体化されたコンピュータ可読プログラム・コードを有するコンピュータ可読ストレージ媒体を含み、前記コンピュータ可読プログラム・コードは、
    モバイル・コンピューティング・デバイスの移動方向を検出するように構成されたコンピュータ可読プログラム・コードと、
    前記モバイル・コンピューティング・デバイスの移動方向を検出することに応答して、前記モバイル・コンピューティング・デバイス上に表示された画像の外観を変化させるように構成されたコンピュータ可読プログラム・コードと、
    を含み、
    前記モバイル・コンピューティング・デバイス上に表示された画像の外観を変化させることは、ズーム機能を実施すること、パニング機能を実施すること、及びページング機能を実施することのうちの1つ又は複数を含む、コンピュータ・プログラム製品。
  23. 前記ズーム機能を実施することは、前記デバイスの第1の方向における移動及び前記デバイスの第2の方向における移動のうちの1つ又は複数に応答して、前記モバイル・コンピューティング・デバイス上に表示される前記画像の領域を拡大することを含む、請求項22に記載のコンピュータ・プログラム製品。
  24. 前記画像はワープロ文書を含み、
    前記ページング機能を実施することは、第1の方向及び第2の方向のうちの1つ又は複数における前記モバイル・コンピューティング・デバイスの移動に応答して、前ページへの移動及び次ページへの移動のうちの1つ又は複数を含む、請求項23に記載のコンピュータ・プログラム製品。
  25. 前記パニング機能を実施することは、前記モバイル・コンピューティング・デバイスの移動に応答してパニングすることを含む、請求項23に記載のコンピュータ・プログラム製品。
JP2012515226A 2009-06-15 2010-06-15 動き検出を用いてモバイル・コンピューティング・デバイス上でパン及びズーム機能を処理する方法 Pending JP2012530301A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US12/484,330 US20100315439A1 (en) 2009-06-15 2009-06-15 Using motion detection to process pan and zoom functions on mobile computing devices
US12/484,330 2009-06-15
PCT/US2010/038635 WO2010147959A1 (en) 2009-06-15 2010-06-15 Using motion detection to process pan and zoom functions on mobile computing devices

Publications (1)

Publication Number Publication Date
JP2012530301A true JP2012530301A (ja) 2012-11-29

Family

ID=43306067

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012515226A Pending JP2012530301A (ja) 2009-06-15 2010-06-15 動き検出を用いてモバイル・コンピューティング・デバイス上でパン及びズーム機能を処理する方法

Country Status (5)

Country Link
US (1) US20100315439A1 (ja)
JP (1) JP2012530301A (ja)
CN (1) CN102422236A (ja)
TW (1) TW201113804A (ja)
WO (1) WO2010147959A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016535363A (ja) * 2013-09-05 2016-11-10 フェイスブック,インク. スクロールのための傾け動作

Families Citing this family (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101536494B (zh) 2005-02-08 2017-04-26 奥布隆工业有限公司 用于基于姿势的控制系统的系统和方法
US8407725B2 (en) 2007-04-24 2013-03-26 Oblong Industries, Inc. Proteins, pools, and slawx in processing environments
US8531396B2 (en) 2006-02-08 2013-09-10 Oblong Industries, Inc. Control system for navigating a principal dimension of a data space
US8370383B2 (en) 2006-02-08 2013-02-05 Oblong Industries, Inc. Multi-process interactive systems and methods
US9910497B2 (en) 2006-02-08 2018-03-06 Oblong Industries, Inc. Gestural control of autonomous and semi-autonomous systems
US9823747B2 (en) 2006-02-08 2017-11-21 Oblong Industries, Inc. Spatial, multi-modal control device for use with spatial operating system
US8537111B2 (en) 2006-02-08 2013-09-17 Oblong Industries, Inc. Control system for navigating a principal dimension of a data space
US9740293B2 (en) 2009-04-02 2017-08-22 Oblong Industries, Inc. Operating environment with gestural control and multiple client devices, displays, and users
US9740922B2 (en) 2008-04-24 2017-08-22 Oblong Industries, Inc. Adaptive tracking system for spatial input devices
US10642364B2 (en) * 2009-04-02 2020-05-05 Oblong Industries, Inc. Processing tracking and recognition data in gestural recognition systems
US9495013B2 (en) 2008-04-24 2016-11-15 Oblong Industries, Inc. Multi-modal gestural interface
US8723795B2 (en) 2008-04-24 2014-05-13 Oblong Industries, Inc. Detecting, representing, and interpreting three-space input: gestural continuum subsuming freespace, proximal, and surface-contact modes
US9952673B2 (en) 2009-04-02 2018-04-24 Oblong Industries, Inc. Operating environment comprising multiple client devices, multiple displays, multiple users, and gestural control
US9684380B2 (en) 2009-04-02 2017-06-20 Oblong Industries, Inc. Operating environment with gestural control and multiple client devices, displays, and users
US9317128B2 (en) 2009-04-02 2016-04-19 Oblong Industries, Inc. Remote devices used in a markerless installation of a spatial operating environment incorporating gestural control
US10824238B2 (en) 2009-04-02 2020-11-03 Oblong Industries, Inc. Operating environment with gestural control and multiple client devices, displays, and users
KR101588242B1 (ko) * 2009-07-13 2016-01-25 삼성전자주식회사 휴대 단말기의 스크롤 방법 및 장치
KR20110011002A (ko) * 2009-07-27 2011-02-08 삼성전자주식회사 웹 브라우징 방법 및 장치
US9933852B2 (en) 2009-10-14 2018-04-03 Oblong Industries, Inc. Multi-process interactive systems and methods
US9971807B2 (en) 2009-10-14 2018-05-15 Oblong Industries, Inc. Multi-process interactive systems and methods
US8977987B1 (en) 2010-06-14 2015-03-10 Google Inc. Motion-based interface control on computing device
CN102591550A (zh) * 2011-01-04 2012-07-18 中国移动通信集团公司 终端界面内容的缩放控制方法及装置
US20130052954A1 (en) * 2011-08-23 2013-02-28 Qualcomm Innovation Center, Inc. Data transfer between mobile computing devices
GB2507810A (en) * 2012-03-15 2014-05-14 Crown Packaging Technology Inc Marking Applications for Metal Packages and Packages Having Metal Components
US9058341B2 (en) 2012-03-15 2015-06-16 Crown Packaging Technology, Inc. Device and system for providing a visual representation of product contents within a package
CN102662578B (zh) * 2012-03-29 2015-06-17 华为终端有限公司 一种桌面容器的切换控制方法及终端
KR101452038B1 (ko) 2012-04-26 2014-10-22 삼성전기주식회사 모바일 기기 및 그 화면 제어 방법
CN102760043B (zh) * 2012-06-19 2016-01-27 华为终端有限公司 一种用户界面的图标管理方法及触控设备
US9652135B2 (en) * 2012-12-10 2017-05-16 Samsung Electronics Co., Ltd. Mobile device of bangle type, control method thereof, and user interface (ui) display method
KR102206044B1 (ko) 2012-12-10 2021-01-21 삼성전자주식회사 뱅글 타입의 모바일 디바이스와 그 제어 방법 및 ui 표시 방법
US9990046B2 (en) 2014-03-17 2018-06-05 Oblong Industries, Inc. Visual collaboration interface
CN104216634A (zh) * 2014-08-27 2014-12-17 小米科技有限责任公司 一种显示稿件的方法和装置
EP3002661A1 (en) * 2014-09-30 2016-04-06 Advanced Digital Broadcast S.A. System and method for controlling a virtual input interface
EP3002669A1 (en) * 2014-09-30 2016-04-06 Advanced Digital Broadcast S.A. System and method for controlling a virtual input interface
CN105119799B (zh) * 2015-06-15 2019-11-19 阿里巴巴集团控股有限公司 即时通讯消息处理方法及客户端
US10529302B2 (en) 2016-07-07 2020-01-07 Oblong Industries, Inc. Spatially mediated augmentations of and interactions among distinct devices and applications via extended pixel manifold

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH064208A (ja) * 1992-06-19 1994-01-14 Sharp Corp 情報処理装置
JPH0969023A (ja) * 1995-06-19 1997-03-11 Matsushita Electric Ind Co Ltd 画像表示方法及びその装置

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6788292B1 (en) * 1998-02-25 2004-09-07 Sharp Kabushiki Kaisha Display device
US6288704B1 (en) * 1999-06-08 2001-09-11 Vega, Vista, Inc. Motion detection and tracking system to control navigation and display of object viewers
US20020024506A1 (en) * 1999-11-09 2002-02-28 Flack James F. Motion detection and tracking system to control navigation and display of object viewers
US6856327B2 (en) * 2002-07-31 2005-02-15 Domotion Ltd. Apparatus for moving display screen of mobile computer device
US20060146009A1 (en) * 2003-01-22 2006-07-06 Hanno Syrbe Image control
US20050102638A1 (en) * 2003-11-10 2005-05-12 Jiang Zhaowei C. Navigate, click and drag images in mobile applications
US7145454B2 (en) * 2004-01-26 2006-12-05 Nokia Corporation Method, apparatus and computer program product for intuitive energy management of a short-range communication transceiver associated with a mobile terminal
US20060164382A1 (en) * 2005-01-25 2006-07-27 Technology Licensing Company, Inc. Image manipulation in response to a movement of a display
US20060194181A1 (en) * 2005-02-28 2006-08-31 Outland Research, Llc Method and apparatus for electronic books with enhanced educational features
US20070073719A1 (en) * 2005-09-14 2007-03-29 Jorey Ramer Physical navigation of a mobile search application
US8312479B2 (en) * 2006-03-08 2012-11-13 Navisense Application programming interface (API) for sensory events
US8146018B2 (en) * 2006-04-28 2012-03-27 Nintendo Co., Ltd. Gesture-based control of multiple game characters and other animated objects
US8564544B2 (en) * 2006-09-06 2013-10-22 Apple Inc. Touch screen device, method, and graphical user interface for customizing display of content category icons
US8514066B2 (en) * 2006-11-25 2013-08-20 Trimble Navigation Limited Accelerometer based extended display
KR100835956B1 (ko) * 2006-12-04 2008-06-09 삼성전자주식회사 이동통신 단말기의 이미지 처리 방법
US20090265671A1 (en) * 2008-04-21 2009-10-22 Invensense Mobile devices with motion gesture recognition
US20090262074A1 (en) * 2007-01-05 2009-10-22 Invensense Inc. Controlling and accessing content using motion processing on mobile devices
US8788977B2 (en) * 2008-11-20 2014-07-22 Amazon Technologies, Inc. Movement recognition as input mechanism

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH064208A (ja) * 1992-06-19 1994-01-14 Sharp Corp 情報処理装置
JPH0969023A (ja) * 1995-06-19 1997-03-11 Matsushita Electric Ind Co Ltd 画像表示方法及びその装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016535363A (ja) * 2013-09-05 2016-11-10 フェイスブック,インク. スクロールのための傾け動作

Also Published As

Publication number Publication date
WO2010147959A1 (en) 2010-12-23
US20100315439A1 (en) 2010-12-16
CN102422236A (zh) 2012-04-18
TW201113804A (en) 2011-04-16

Similar Documents

Publication Publication Date Title
JP2012530301A (ja) 動き検出を用いてモバイル・コンピューティング・デバイス上でパン及びズーム機能を処理する方法
US9448694B2 (en) Graphical user interface for navigating applications
EP2715491B1 (en) Edge gesture
KR102060155B1 (ko) 양면 디스플레이를 사용하는 전자장치의 멀티태스킹 제어 방법 및 장치
US10872454B2 (en) Panning animations
US11360566B2 (en) Mechanism to provide visual feedback regarding computing system command gestures
US9389884B2 (en) Method and apparatus for providing adaptive wallpaper display for a device having multiple operating system environments
US20130145308A1 (en) Information Processing Apparatus and Screen Selection Method
EP2365426B1 (en) Display device and screen display method
US20180329589A1 (en) Contextual Object Manipulation
US20130002573A1 (en) Information processing apparatus and a method for controlling the same
TW201602893A (zh) 附加資訊提供方法及使用其的觸控顯示裝置
EP2778880B1 (en) Method for controlling display function and an electronic device thereof
US20140245230A1 (en) Full 3d interaction on mobile devices
US20160210769A1 (en) System and method for a multi-device display unit
WO2017059734A1 (zh) 一种图片缩放方法及电子设备
US20100333016A1 (en) Scrollbar
US20170123550A1 (en) Electronic device and method for providing user interaction based on force touch
US10983625B2 (en) Systems and methods for measurement of unsupported user interface actions
KR20140082434A (ko) 전자장치에서 화면 표시 방법 및 장치
US20130335360A1 (en) Touch screen interaction methods and apparatuses
US20160124602A1 (en) Electronic device and mouse simulation method
EP3128397B1 (en) Electronic apparatus and text input method for the same
CN114764270B (zh) 输入转换方法、电子设备和可读介质
TWI686742B (zh) 控制方法、電子裝置及非暫態電腦可讀記錄媒體裝置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130304

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140212

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20140708