JP2015122079A - モデル化オブジェクトをコピーおよび操作する機構を備えるタッチセンサ式ディスプレイ付きデバイス - Google Patents

Abstract

【課題】タッチスクリーン上に表示されたモデル化オブジェクトを単一のジェスチャで複製しその複製版を設計するための、コンピュータ実行方法を提供する。【解決手段】第１のモデル化オブジェクトと関連づけられた起動ゾーン内でアペンデージの接触を検出するステップ２０１と、接触が既定の時間Ｔｍを超えて維持された場合に２０２；はい、第１のモデル化オブジェクトを複製して第２のモデル化オブジェクトにするステップ２０３と、アペンデージとタッチスクリーンの間の接触を維持しながら、タッチスクリーン上のアペンデージの動きに応じて、第２のモデル化オブジェクトに対し少なくとも１つの設計オペレーションを実施するステップ２０４とを含む。【選択図】図２

Description

本発明は、コンピュータプログラムおよびシステムの分野に関し、より詳細にはタッチセンサ式ディスプレイおよびマンマシンインターフェースの分野に関する。

本発明は、タッチスクリーンを介してモデル化オブジェクトを操作することが必要とされる任意の対話式のソフトウェアまたはシステムに使用することができる。特に、本発明は、計算機援用設計ソフトウェア（ＣＡＤ）またはグラフィック設計ソフトウェアに使用することができる。

本明細書では、「モデル化オブジェクト」という表現には、それだけには限らないが、三次元オブジェクト、二次元オブジェクト、図面、デジタル画像などを含む、ユーザに対し表示することができる任意の仮想オブジェクトが含まれる。

タッチスクリーンは、一般に、テキストおよび／またはモデル化オブジェクトを表示するために、多くの電子デバイスおよび電子システムに使用される。それらはまた、タッチ−スクリーン、タッチスクリーン、またはタッチセンサ式ディスプレイとしても知られている。ユーザは、ユーザインターフェースオブジェクトを含むユーザインターフェースを介して、タッチスクリーンと対話することができる。タッチスクリーンデバイスは、タッチスクリーン上の接触を検出し応答する。したがってユーザは、対話をしたいユーザインターフェースオブジェクトに対応する場所のタッチスクリーンに１つの指、いくつかの指（マルチタッチジェスチャ）またはスタイラスを用いて触れることによって、機能を起動すること、処理をトリガすること、またはモデル化オブジェクトを操作することができる。ユーザインターフェースオブジェクトは、ソフトキー、メニューまたはグラフィックとすることができる。

ユーザが第１の場所に表示されたモデル化オブジェクトをコピーし、そのモデル化オブジェクトの複製版を第２の場所に貼り付けたいと望むとき、含まれる処理は３つのステップに分割することができる。第１のステップは、モデル化オブジェクトを選択することを対象とし、第２のステップは、選択されたオブジェクトの複製を実施し、第３のステップは、複製されたオブジェクトを第２の場所に配置する。

ユーザのデバイスがタッチスクリーンを備えているがキーボードは備えていない場合、またはユーザが既存のキーボードを利用する状況にない場合、Ｃｔｒｌ＋ＣキーおよびＣｔｒｌ＋Ｖキーの作動に基づく現況技術のコピーアンドペースト技法を駆使することができない。こうした状況は特に、指またはスタイラスで操作することができるタッチパッドまたはタブレットなどのデバイスに関して起きる。

ユーザがモデル化オブジェクトのコピーおよび貼付けをしたいと望む場合、ユーザはその操作をいくつかのジェスチャにセグメント化しなければならなくなり、これは自然なことでも生産的なことでもない。この問題は、スタイラスまたは指を含むどんな種類のアペンデージを使用していても起きる。

別のよく知られている技法、すなわち「ドラッグアンドドロップ」技法は、ユーザがモデル化オブジェクトを選択することを、それをつかみ、それを目標位置に向けてドラッグし、それをそこにドロップすることによって可能にする。しかし、この技法では、オブジェクトをコピーおよび貼付けすることはできない。したがって、ユーザはまず、オブジェクトをコピーしなければならない場合があり、そのあとで複製版を目標位置までドラッグアンドドロップすることができる。

加えて、前述の技法には、過負荷状態レイアウト、ならびに多くのクリックおよび／または指タップが必要になるという欠点がある。指タップは、タッチスクリーンに触れる動作を指す。この動作はマウスクリックと同等であり、ダブルタップは、インターフェースによりダブルクリックと同等とすることができる。この熟練者は、同じ動作がスタイラスを使用することによっても実行できることを理解するであろう。

さらに、タッチスクリーンデバイスを使用する場合にマウスが進む距離であるマウス距離が、重要になりうる。指（それぞれスタイラス）がマウスの代わりに使用される場合、指距離（それぞれスタイラス距離）もまた、これらの技法を使用する限りは重要になる。

タッチスクリーンデバイス上でモデル化オブジェクトをコピーし貼り付けるための人間工学的な解決法を開発するには、上記の問題に対処することが望ましい。

本発明によれば、タッチスクリーン上に表示されたモデル化オブジェクトを単一のジェスチャで複製しその複製版を設計するための、コンピュータ実行方法が提供され、この方法は、
− 第１のモデル化オブジェクトと関連づけられた起動ゾーン内でアペンデージの接触を検出するステップと、
− 接触が既定の時間Ｔｍを超えて維持された場合に、第１のモデル化オブジェクトを複製して第２のモデル化オブジェクトにするステップと、
− アペンデージとタッチスクリーンの間の接触を維持しながら、タッチスクリーン上のアペンデージの動きに応じて、第２のモデル化オブジェクトに対し少なくとも１つの設計オペレーションを実施するステップとを含む。

請求項１に記載の方法は、前記起動ゾーンがバウンディングボックスであることを特徴とする。

本発明の別の態様では、この方法は、Ｔｍ＞Ｔｓなどの選ばれた所定の時間Ｔｓを超えて前記起動ゾーンをアペンデージで押すことによって前記第１のモデル化オブジェクトが選択されるステップを含む。

本発明の別の態様によれば、視覚フィードバックが、前記モデル化オブジェクトが複製された後に得られる。

例えば、前記第１のモデル化オブジェクトは、複製された後に点滅する。

あるいは、前記第１のモデル化オブジェクトは、複製された後に強調表示される。

一実施形態では、前記起動ゾーンは、前記第１のモデル化オブジェクトが複製された後に点滅する。

一実施形態では、前記少なくとも１つの設計オペレーションは、次の動作すなわち、移動、再拡大縮小、回転、再成形、またはねじりのうちの１つ、または組合せである。

本発明の一態様では、この方法は、前記第２のモデル化オブジェクトと関連づけられた前記起動ゾーン内で接触が、前記最後の設計オペレーションの終了から開始するもう１つのＴｍ期間を超えて維持されているかどうか検出され、その場合に第３のモデル化オブジェクトが提供されるステップを含む。

前記アペンデージは、例えばスタイラス、または少なくとも１つの指からなる群である。

本発明によれば、上述の方法をコンピュータに実行させるためのコード手段を含む、コンピュータ可読媒体に格納されたコンピュータプログラムもまた提供される。

また、本発明によれば、
− 少なくとも１つの中央処理ユニットと、
− タッチスクリーンデバイスと、
− メモリと、
− 前記メモリ内に格納され、前記少なくとも１つの中央処理ユニットで実行するように構成された少なくとも１つのモジュールであって、
− 前記第１のモデル化オブジェクトと関連づけられた起動ゾーン内でアペンデージの接触を検出する、
− 前記接触が既定の時間Ｔｍを超えて維持される場合に、前記第１のモデル化オブジェクトを複製して第２のモデル化オブジェクトにする、かつ
− 前記アペンデージと前記タッチスクリーンの間の接触を維持しながら、前記タッチスクリーン上のアペンデージの動きに応じて、前記第２のモデル化オブジェクトに対し少なくとも１つの設計オペレーションを実施するための命令を含むモジュールとを備える、電子デバイスが提供される。

本発明の諸実施形態についてのより良い理解を、以下の図面と関連した後続の詳細な説明から得ることができる。
タッチスクリーンデバイスによって表示されたモデル化オブジェクトと対話するのに用いることができるジェスチャを示す図である。 タッチスクリーンデバイスによって表示されたモデル化オブジェクトと対話するのに用いることができるジェスチャを示す図である。 タッチスクリーンデバイスによって表示されたモデル化オブジェクトと対話するのに用いることができるジェスチャを示す図である。 タッチスクリーンデバイスによって表示されたモデル化オブジェクトと対話するのに用いることができるジェスチャを示す図である。 タッチスクリーンデバイスによって表示されたモデル化オブジェクトと対話するのに用いることができるジェスチャを示す図である。 タッチスクリーン上に表示されたモデル化オブジェクトをコピーし、そのあとオブジェクトの複製版に対し設計オペレーションを行う方法を示す流れ図である。 どのようにして曲線を複製し、そのあと単一のジェスチャでドラッグアンドドロップすることができるかを示す図である。 どのようにして曲線を複製し、そのあと単一のジェスチャでドラッグアンドドロップすることができるかを示す図である。 どのようにして曲線を複製し、そのあと単一のジェスチャでドラッグアンドドロップすることができるかを示す図である。 タッチスクリーンデバイスの一例を提示する図である。

モデル化オブジェクトは、ＣＡＤ解決策を用いた仮想設計の完成後に実世界で製造されるべき物理的製品に関連する。この物理的製品は、機械製品（それだけには限らないが、例えば機械部品）などの工業製品とすることができる。ＣＡＤ解決策は、限りのない様々な産業分野、すなわち、航空宇宙、建築、建設、消費財、先端技術デバイス、産業機器、輸送、海洋、洋上または交通機関に関する製品の設計を可能にする。

本発明によるタッチスクリーンデバイスのユーザは、適切な任意のアペンデージを使用してタッチスクリーンと接触することができる。一例として、ポインティングディバイスをアペンデージとして使用することができる。あるいは、タッチスクリーンデバイスとインターフェースするためのアペンデージとして、１つまたはいくつかの指を使用することもできる。

本明細書では、ジェスチャとは、タッチスクリーンと接触するアペンデージの動きを指す。言い換えると、ジェスチャは、ユーザがアペンデージの手段によってタッチスクリーンと接触するときに始まり、アペンデージを持ち上げるときに終わる動きシーケンスに相当する。

以下の説明では、１つまたはいくつかの指がアペンデージとして使用される。しかし、当業者には、本発明が他の種類のアペンデージを使用することによって実行できることが明らかであろう。

図１Ａ〜１Ｅは、タッチスクリーンデバイスによって表示されたモデル化オブジェクトと対話するのに用いることができるジェスチャを示す。

図１Ａは、例えばズームインまたはアウトすることを可能にする、つまんで広げる動作を表す。

図１Ｂは、例えばモデル化オブジェクトを平行移動させることを可能にする、２つの指で滑らせるジェスチャを表す。

図１Ｃは、例えばモデル化オブジェクトの深部で平行移動を可能にする、１つの指で滑らせるジェスチャを表す。

図１Ｄは、表示されたモデル化オブジェクトの回転を可能にするジェスチャを表す。この目的のために、２つの指がモデル化オブジェクトの上に置かれ、そのあと手が回される。

図１Ｅは、モデル化オブジェクトのコピーを可能にするジェスチャ、すなわち複製版を目標位置に向けてドラッグし、それをそこにドロップすることを表す。その目的のために、タッチスクリーンデバイスは、それが本発明による方法を実行するように適合される。

図２は、タッチスクリーン上に表示されたモデル化オブジェクトをコピーし、そのあとオブジェクトの複製版に対し設計オペレーションを行う方法を示す流れ図である。

ステップ２００でまず、表示されたオブジェクトが、例えば起動ゾーンをアペンデージで押すことによって選択される。起動ゾーンは、モデル化オブジェクトの周囲／近傍に置かれ表示することも隠すこともできる領域を画定する、モデル化オブジェクトと関連づけられた幾何学的図形である。一例として、起動ゾーンはモデル化オブジェクトを取り囲むことができる。その目的のために、バウンディングボックスを使用することができる。好ましい実施形態では、モデル化オブジェクトは、その関連づけられた起動ゾーンが既定の時間Ｔｓを超えて押された場合に選択される。

本発明による方法は、モデル化オブジェクトを選択するステップ２００を必ずしも含まない。オブジェクトが既に選択されている場合、本発明による方法は、以下で説明されるステップを適用することによって実行することができる。

ステップ２０１で、あるモデル化オブジェクトが選択されるときにその起動ゾーンの内側に接触があるかどうか、または前述の選択するステップ２００が直前に適用された場合には接触が維持されているかどうかが、調べられる。

次のステップ２０２で、既定の時間Ｔｍを超えて接触が維持されているかどうかを判定する。ステップ２００が適用された場合、Ｔｍは、Ｔｍ＞Ｔｓになるように選ばれる。

ステップ２０２で、「いいえ」の場合、ステップ２０６で処理は最初から再開する。「はい」の場合、ステップ２０３で選択されたモデル化オブジェクトが複製される。

一実施形態では、モデル化オブジェクトが複製された後、視覚フィードバックが得られる。例えば、複製された後、そのモデル化オブジェクトを点滅させる、または強調表示することができる。

あるいは、視覚フィードバックは、モデル化オブジェクトと関連づけられた起動ゾーンによって得ることもできる。

次にステップ２０４で、１つまたはいくつかの設計オペレーションが、複製されたモデル化オブジェクトに適用される。様々な種類の設計オペレーションが、それだけには限らないが、移動、再拡大縮小、回転、再成形、またはねじりを含めて、本発明の範囲内にあるとみなすことができる。当業者には、多種多様な設計オペレーションが本発明の範囲内とみなされうることが理解されよう。

一例として、複製されたモデル化オブジェクトは、単純にそれをドラッグし、ユーザが選んだ場所にそれをドロップすることによって移動させることができる。別の例では、ユーザは、オブジェクトのサイズを再拡大縮小し、かつ／またはそれを回転させ、次に、選ばれた場所に向けて動かして、最後にそれをそこにドロップすることができる。

本発明の主要な利点は、ユーザが単一のジェスチャで、モデル化オブジェクトに対する少なくとも１つの設計オペレーションを複製し適用できることである。選択するステップ２００が前述のように実施される場合には、ユーザは単一のジェスチャで、モデル化オブジェクトに対する少なくとも１つの設計オペレーションを選択し、複製し、適用することができる。言い換えると、複数の動作を含むシーケンスを、アペンデージをタッチスクリーンから持ち上げなくても実行することができる。これには、設計者の大幅な生産性向上が伴う。

一実施形態では、ステップ２０４で設計オペレーションが適用された後、ステップ２０７が実行されて、複製されたモデル化オブジェクトと関連づけられた起動ゾーン内で接触が維持されているかどうかが検出される。ステップ２０７で「はい」の場合、ステップ２０５および２０２で、この接触が、ステップ２０４における最後の設計オペレーションの終了から開始する、もう１つのＴｍ期間維持されているかどうかが調べられる。その場合、複製されたモデル化オブジェクトを次に複製し、修正することができる。

単一よりも多い複製がユーザによって実行される場合、複製されている第１のモデル化オブジェクトは、後続の複製版を生成するための参照として利用される。

あるいは、最後の複製版を後続の複製の参照として使用することもできる。本発明の一態様では、設計オペレーションが最後の複製版に適用された場合、それをその後の複製のために考慮に入れることができる。

有利なことに、本発明による方法では、一連の複製および設計オペレーションをユーザが単一のジェスチャで実施することが可能になる。

例えば、本発明による方法を実行するＣＡＤソフトウェアを用いて客車が設計される場合、複数の窓を設計に加えることが、第１のモデル化窓にこの方法を適用することによって、単一のジェスチャで可能になる。さらに、複製される窓は必ずしも、最初にモデル化された窓の複製版のそれぞれに適用できる１つまたはいくつかの設計オペレーションと同じではない。

図３Ａ〜３Ｃは、どのようにして曲線を複製し、そのあと単一のジェスチャでドラッグアンドドロップすることができるかを示す。

図３Ａは、ユーザが複製したいモデル化オブジェクトの一例とされている二次元曲線３００を示す。その目的のために、ユーザは、選択された曲線３００と関連づけられた起動ゾーン３０１内に２つの指を押し付ける。この例では、起動ゾーンはバウンディングボックスである。

タッチスクリーンデバイスは、２つの指による接触３０２、３０３がＴｍ以上の時間維持されていることを検出する。したがって、曲線３００が複製され、複製が行われたことを表示する視覚フィードバック３０７が得られる（図３Ｂ参照）。

次に、ユーザは、複製された曲線を貼り付けたい場所に向けて、ユーザの２つの指３０４、３０５をドラッグする（図３Ｃ参照）。この段階で、ユーザは、ユーザの指を持ち上げることによって、またはこの曲線に設計オペレーションを適用することによって、複製された曲線をドロップすることができる。ユーザはまた、モデル化オブジェクトを再び複製したいと望む場合には、ユーザの指をもう１つのＴｍ時間維持することもできる。

したがって、ユーザは、単一のジェスチャで一連の操作を行うことができる。これは、一連の操作を、タッチスクリーンからアペンデージを持ち上げなくても実行できることを意味する。

図４は、タッチスクリーンデバイスの一例を提示する。クライアントコンピュータは、内部通信バス４００に接続された中央処理ユニット（ＣＰＵ）４０１、バス４００にやはり接続されたランダムアクセスメモリ（ＲＡＭ）４０７を備える。タッチスクリーンデバイスはさらに、ビデオランダムアクセスメモリ４１０と結ばれているグラフィック処理ユニット（ＧＰＵ）４１１、およびタッチスクリーン（図示せず）を備える。ビデオＲＡＭ ４１０はまた、当技術分野でフレームバッファとしても知られている。大容量記憶デバイスコントローラ４０２は、ハードドライブ４０３などの大容量メモリデバイスへのアクセスを管理する。コンピュータプログラム命令およびデータを有形に具現化するのに適している大容量記憶デバイスには、すべての形式の不揮発性メモリが含まれ、例としては、ＥＰＲＯＭ、ＥＥＰＲＯＭおよびフラッシュメモリデバイスなどの半導体記憶デバイス、内部ハードディスクおよび着脱可能ディスクなどの磁気ディスク、光磁気ディスク、およびＣＤ−ＲＯＭディスク４０４が含まれる。上記のいずれも、特別に設計されたＡＳＩＣ（特定用途向け集積回路）によって補足すること、またはそれに組み込むことができる。ネットワークアダプタ４０５は、ネットワーク４０６へのアクセスを管理する。タッチスクリーンデバイスはまた、カーソル制御デバイス、キーボードなどの触覚デバイス（ハプティックデバイス）４０９を含む。カーソル制御デバイスは、タッチスクリーンデバイスでは、ユーザがカーソルをディスプレイ４０８上の任意の所望の場所に選択的に配置できるようにするために使用される。加えて、カーソル制御デバイスは、ユーザが様々な命令および入力制御信号を選択できるようにする。カーソル制御デバイスは、システムへの入力制御信号のためのいくつかの信号発生デバイスを含む。通常、カーソル制御デバイスはマウスでよく、信号を発生させるためにマウスのボタンが使用される。

記載の方法および装置は例示的なものにすぎず、当業者には、本発明の諸態様を実施するためのいくつかの代替形態が存在することが理解されよう。本発明の諸実施形態はまた、タッチスクリーンインターフェースが必要とされうるどんな場合でも、多種多様な用途および状況で使用することもできる。当業者には、開示された本発明の範囲内で、様々な順序および順列が記載の方法およびデバイスについて可能であることも明らかであろう。

Claims (13)

1. タッチスクリーン上に表示されたモデル化オブジェクトを単一のジェスチャで複製しその複製版を設計するための、コンピュータ実行方法であって、
   第１のモデル化オブジェクト（３００）と関連づけられた起動ゾーン（３０１）内でアペンデージ（３０２、３０３）の接触を検出するステップ（２０１）と、
   前記接触が既定の時間Ｔｍを超えて維持された場合に（２０２）、前記第１のモデル化オブジェクト（３００）を複製して（２０３）第２のモデル化オブジェクト（３０６）にするステップと、
   前記アペンデージと前記タッチスクリーンの間の接触を維持しながら、前記タッチスクリーン上の前記アペンデージの動きに応じて、前記第２のモデル化オブジェクト（３０６）に対し少なくとも１つの設計オペレーションを実施するステップ（２０４）とを含むことを特徴とする方法。
2. 前記起動ゾーンはバウンディングボックスであることを特徴とする請求項１に記載の方法。
3. Ｔｍ＞Ｔｓのように選ばれた所定の時間Ｔｓを超えて前記起動ゾーンをアペンデージで押すことによって、前記第１のモデル化オブジェクトが選択されるステップ（２００）を含むことを特徴とする請求項１または２に記載の方法。
4. 視覚フィードバックが、前記モデル化オブジェクトが複製された後に得られることを特徴とする請求項１乃至３のいずれか一項に記載の方法。
5. 前記第１のモデル化オブジェクトは、複製された後に点滅することを特徴とする請求項４に記載の方法。
6. 前記第１のモデル化オブジェクトは、複製された後に強調表示されることを特徴とする請求項４に記載の方法。
7. 前記起動ゾーンは、前記第１のモデル化オブジェクトが複製された後に点滅することを特徴とする請求項４に記載の方法。
8. 前記少なくとも１つの設計オペレーションは、次の動作すなわち、移動、再拡大縮小、回転、再成形、またはねじりのうちの１つ、または組合せであることを特徴とする請求項１乃至７のいずれか一項に記載の方法。
9. 前記第２のモデル化オブジェクトと関連づけられた前記起動ゾーン内で接触が、前記最後の設計オペレーション（２０４）の終了から開始するもう１つのＴｍ期間を超えて維持されているかどうか検出され（２０５、２０２）、その場合に第３のモデル化オブジェクトが提供されるステップ（２０７）を含むことを特徴とする請求項１乃至８のいずれか一項に記載の方法。
10. 前記アペンデージはスタイラスであることを特徴とする請求項１乃至９のいずれか一項に記載の方法。
11. 前記アペンデージは、少なくとも１つの指からなる群であることを特徴とする請求項１乃至１０のいずれか一項に記載の方法。
12. コンピュータ可読媒体に格納されたコンピュータプログラムであって、請求項１乃至１１のいずれか一項に記載の方法をコンピュータに実行させるためのコード手段を含むことを特徴とするコンピュータプログラム。
13. 少なくとも１つの中央処理ユニットと、
    タッチスクリーンデバイスと、
    メモリと、
    前記メモリ内に格納され、前記少なくとも１つの中央処理ユニットで実行するように構成された少なくとも１つのモジュールであって、
    前記第１のモデル化オブジェクト（３００）と関連づけられた起動ゾーン（３０１）内でアペンデージ（３０２、３０３）の接触を検出する（２０１）、
    前記接触が既定の時間Ｔｍを超えて維持される場合に（２０２）、前記第１のモデル化オブジェクト（３００）を複製して第２のモデル化オブジェクト（３０６）にする（２０３）、かつ
    前記アペンデージと前記タッチスクリーンの間の接触を維持しながら、前記タッチスクリーン上の前記アペンデージの動きに応じて、前記第２のモデル化オブジェクト（３０６）に対し少なくとも１つの設計オペレーションを実施する（２０４）
    ための命令を含むモジュールとを備えることを特徴とする電子デバイス。

Images