JP6254147B2

JP6254147B2 - 透明ディスプレイを有するデバイスにおけるオブジェクト制御方法、該デバイス及び該記録媒体

Info

Publication number: JP6254147B2
Application number: JP2015504507A
Authority: JP
Inventors: イル−コク・ユン; チャン−ソ・イ
Original assignee: Samsung Electronics Co Ltd
Current assignee: Samsung Electronics Co Ltd
Priority date: 2012-04-07
Filing date: 2013-04-08
Publication date: 2017-12-27
Anticipated expiration: 2033-04-08
Also published as: CN104246683A; KR20130113997A; KR102164453B1; CN104246683B; JP2015512549A

Description

本発明は、透明ディスプレイを有するデバイスに係り、特に、透明ディスプレイを有するデバイスにおけるオブジェクト制御方法、該デバイス及び該記録媒体に関する。

透明ディスプレイを有する次世代ディスプレイデバイスが、最近開発されている。透明ディスプレイは、ユーザがディスプレイを介して見て、ディスプレイ裏面のオブジェクトを見ることができる透明度を有している。

透明ディスプレイを有するデバイスは、透明電子素子を使用して、情報認識、情報処理及び情報伝達の機能を遂行するデバイスである。

透明ディスプレイの有用性は、透明ディスプレイを含むデバイスと相互作用する新たで革新的な方法、及び透明ディスプレイを含むデバイスのユーザ・インターフェース機能を拡大させるための必要性をもたらしている。

本発明が解決しようとする課題は、透明ディスプレイを有するデバイスにおいて、前面タッチ、背面タッチ及び両面タッチのような入力に基づいたオブジェクト制御方法、該デバイス及び該記録媒体を提供するところにある。

本発明が解決しようとする他の課題は、透明ディスプレイを有するデバイスにおいて、オブジェクトの状態またはディスプレイ状態によって、インジケータ（indicator）をディスプレイする方法、該デバイス及び該記録媒体を提供するところにある。

本発明が解決しようとするさらに他の課題は、透明ディスプレイを有するデバイスにおいて、各オブジェクトに対して設定されたタッチインターフェースを利用するオブジェクト制御方法、該デバイス及び該記録媒体を提供するところにある。

前記課題を達成するための本発明の実施形態による透明ディスプレイを有するデバイスによるオブジェクト制御方法は、ディスプレイを含むデバイスによって遂行されるオブジェクト制御方法において、前記ディスプレイに、少なくとも１つのオブジェクトをディスプレイする段階と、前記ディスプレイの入力インターフェースを介して入力を受信し、前記入力インターフェースは、第１入力インターフェース及び第２入力インターフェースのうち少なくとも一つを含む段階と、前記入力受信に応答し、前記デバイスの既設定入力インターフェースに係わる第１機能を遂行し、（ｉ）前記入力インターフェースが、前記第１入力インターフェースであり、（ｉｉ）前記既設定の入力インターフェースが、前記第１入力インターフェースである段階と、前記既設定の入力インターフェースに係わる第２機能を遂行し、（ｉ）前記入力インターフェースは、第２入力インターフェースであり、（ｉｉ）前記既設定の入力インターフェースが、前記第２入力インターフェースである段階と、を含む。

前記遂行段階は、前記既設定の入力インターフェースに係わる第３機能を遂行し、（ｉ）前記入力インターフェースは、前記第１入力インターフェースと、前記第２入力インターフェースとのいずれでもあり、（ｉｉ）前記既設定の入力インターフェースは、前記第１入力インターフェースと、前記第２入力インターフェースとのいずれでもある段階をさらに含んでもよい。

前記ディスプレイは、透明ディスプレイにもなる。

前記第１入力インターフェースは、前記透明ディスプレイの前面と、前記透明ディスプレイの背面とのうちいずれか一つにもなり、前記第２入力インターフェースは、前記透明ディスプレイの前面と、前記透明ディスプレイの背面とのうち他の一つにもなる。

前記入力は、前記少なくとも１つのオブジェクトに対応し、前記既設定の入力インターフェースは、前記少なくとも１つのオブジェクトに対応し、前記少なくとも１つのオブジェクトのディスプレイ環境と、前記少なくとも１つのオブジェクトの動作とのうち少なくとも一つによって設定されもする。前記ディスプレイ環境は、前記ディスプレイ上にディスプレイされているアクティブ・アプリケーションにもなる。

前記少なくとも１つのオブジェクトは、第１オブジェクトと、前記第１オブジェクトの前面上にディスプレイされている第２オブジェクトとを含んでもよく、前記第２機能は、前記第２オブジェクトのディスプレイ状態を変更する段階を含んでもよい。

前記少なくとも１つのオブジェクトは、第１階層下に、第２階層上にディスプレイされている第２ウィンドウに部分的に重なった前記第１階層上にディスプレイされている第１ウィンドウを含み、前記第２機能は、前記２ウィンドウを移動させる段階を含んでもよい。

前記少なくとも１つのオブジェクトは、第１階層下に、第２階層上にディスプレイされている第２ウィンドウに部分的に重なった前記第１階層上にディスプレイされている第１ウィンドウを含み、前記第２機能は、前記第１ウィンドウ上に、前記第２ウィンドウをディスプレイする段階を含んでもよい。

前記入力は、前記第２入力インターフェースの既設定領域以上をタッチし、前記第２機能は、前記ディスプレイの透明度を最大値として設定する段階を含んでもよい。前記入力は、前記第２入力インターフェースの既設定領域以上タッチする入力が、既設定の時間以上維持されなければ、前記第２機能は、前記第２入力インターフェースのタッチ前の画面にリターンされる段階をさらに含んでもよい。

前記方法は、前記少なくとも１つのオブジェクトに対する入力インターフェース編集要請に応答し、少なくとも１つのオブジェクトに係わる前記既設定の入力インターフェースについての情報を含む編集ウィンドウをディスプレイする段階と、前記編集ウィンドウに対する前記ユーザの入力により、前記少なくとも１つのオブジェクトに係わる前記既設定の入力インターフェースについての情報をアップデートする段階と、を含んでもよい。

前記少なくとも１つのオブジェクトは、第１オブジェクト及び第２オブジェクトを含み、前記入力は、前記第１入力インターフェースを介して受信される前記第１オブジェクトに対する第１入力と、前記第２入力インターフェースを介して受信される前記第２オブジェクトに対する第２入力と、を含み、前記第１機能は、前記第２オブジェクトと同時に、前記第１入力インターフェースを介して受信される前記第１入力により、前記第１オブジェクトを制御する段階を含み、前記第２機能は、第１オブジェクトと同時に、前記第２入力インターフェースを介して受信される前記第２入力により、前記第２オブジェクトを制御する段階を含んでもよい。

前記入力は、前記少なくとも１つのオブジェクトに係わるジェスチャを含み、前記ジェスチャは、前記既設定の入力インターフェースを介して、一方向に既設定の長さ以上移動する段階を含み、前記第１機能は、前記ジェスチャに対応する方向に、前記少なくとも１つのオブジェクトを回転させ、前記既設定の入力インターフェースを、前記第２入力インターフェースに変更する段階を含み、前記第２機能は、前記ジェスチャに対応する方向に、前記少なくとも１つのオブジェクトを回転させ、前記既設定の入力インターフェースを、前記第１入力インターフェースに変更する段階を含んでもよい。

前記第２機能は、前記少なくとも１つのオブジェクトの状態、及び前記ディスプレイの状態に基づいた入力に対応するガイドを可変的にディスプレイする段階を含んでもよい。

前記第２機能は、前記入力の位置に対応するガイドをディスプレイする段階を含んでもよい。

前記方法は、前記方法を遂行するための命令語を含むコンピュータ読取り可能な媒体で具現されもする。

前記課題を達成するための本発明の実施形態によるオブジェクト制御方法を遂行するデバイスにおいて、前記デバイスは、少なくとも１つのオブジェクトをディスプレイするディスプレイ；第１入力インターフェース及び第２入力インターフェースのうち少なくとも一つを介して入力を受信する入力インターフェース；既設定の入力インターフェースを保存する保存器；及び前記入力受信に応答し、前記既設定の入力インターフェースに係わる第１機能を遂行し、（ｉ）前記入力インターフェースは、前記第１入力インターフェースであり、（ｉｉ）前記既設定の入力インターフェースは、前記第１入力インターフェースであり、前記既設定の入力インターフェースに係わる第２機能を遂行し、（ｉ）前記入力インターフェースは、第２入力インターフェースであり、（ｉｉ）前記既設定の入力インターフェースは、前記第２入力インターフェースであるプロセッサ；を含む。

また、前記プロセッサは、前記既設定の入力インターフェースに係わる第３機能を遂行し、（ｉ）入力インターフェースは、前記第１入力インターフェースと、前記第２入力インターフェースとのいずれでもあり、（ｉｉ）前記既設定の入力インターフェースは、前記第１入力インターフェースと、前記第２入力インターフェースとのいずれでもある。

前記ディスプレイは、透明ディスプレイを含んでもよい。

前記第１入力インターフェースは、前記透明ディスプレイの前面及び背面のうち一つにもなり、前記第２入力インターフェースは、前記透明ディスプレイの前面及び背面のうち一つにもなる。

前記第２機能は、前記少なくとも１つのオブジェクトの状態、または前記ディスプレイの状態に基づいた入力に対応するガイドを可変的にディスプレイすることを含んでもよい。

前記第２機能は、前記入力の位置に対応するガイドをディスプレイすることを含んでもよい。

前記入力は、前記第２入力インターフェースの既設定領域以上タッチすることを含んでもよく、前記第２機能は、前記ディスプレイの透明度を最大値として設定することを含んでもよい。また、第２入力インターフェースの前記既設定の領域以上タッチする入力が、既設定の時間以上維持されなければ、前記第２機能は、前記第２入力インターフェースのタッチ前の画面にリターンすることを含んでもよい。

前記入力は、少なくとも１つのオブジェクトに対応し、前記既設定の入力インターフェースも、少なくとも１つのオブジェクトに対応し、前記少なくとも１つのオブジェクトのディスプレイ環境、及び前記少なくとも１つのオブジェクトの動作のうち少なくとも一つによって設定されもする。

前記少なくとも１つのオブジェクトは、第１オブジェクト及び第２オブジェクトを含んでもよく、前記第２機能は、前記第１オブジェクトの前面にディスプレイされている前記第２オブジェクトのディスプレイ状態を変更することを含んでもよい。

前記少なくとも１つのオブジェクトは、第１階層下に、第２階層上にディスプレイされている第２ウィンドウに部分的に重なった前記第１階層上にディスプレイされている第１ウィンドウを含んでもよく、前記第２機能は、前記第２ウィンドウを移動することを含んでもよい。

前記少なくとも１つのオブジェクトは、第１階層下の第２階層にディスプレイされている第２ウィンドウに部分的に重なった前記第１階層上にディスプレイされている第１ウィンドウを含んでもよく、前記第２機能は、前記第１階層下に、前記第２階層から、前記第２ウィンドウを移動させ、前記第１ウィンドウ上に、前記第２ウィンドウをディスプレイすることを含んでもよい。

前記プロセッサは、前記少なくとも１つのオブジェクトに対する入力インターフェース編集要請に応答し、前記少なくとも１つのオブジェクトに係わる前記既設定の入力インターフェースについての情報を含む編集ウィンドウをディスプレイし、前記編集ウィンドウに対する前記ユーザの入力により、前記少なくとも１つのオブジェクトに係わる前記既設定の入力インターフェースについての情報をアップデートすることができる。

本発明によると、ディスプレイを含むデバイスにおいて、それぞれのオブフェクに対してタッチインターフェースセットを使用することにより、オブジェクト制御が可能である。

望ましい実施形態によるオブジェクトと、オブジェクトのユーザ入力インターフェース設定とについて説明するための図面である。望ましい実施形態による透明ディスプレイを含むデバイスのブロック図である。図２Ａの透明ディスプレイの詳細構成例を示した図面である。望ましい一実施形態による透明ディスプレイを含むデバイスによって遂行されるオブジェクト制御方法のフローチャートである。図３のオブジェクト制御方法期間にディスプレイされる画面の例を図示する図面である。図３のオブジェクト制御方法期間にディスプレイされる画面の例を図示する図面である。図３のオブジェクト制御方法期間にディスプレイされる画面の例を図示する図面である。図３のオブジェクト制御方法期間にディスプレイされる画面の例を図示する図面である。図３のオブジェクト制御方法期間にディスプレイされる画面の例を図示する図面である。図３のオブジェクト制御方法期間にディスプレイされる画面の例を図示する図面である。図３のオブジェクト制御方法期間にディスプレイされる画面の例を図示する図面である。図３のオブジェクト制御方法期間にディスプレイされる画面の例を図示する図面である。図３のオブジェクト制御方法期間にディスプレイされる画面の例を図示する図面である。図３のオブジェクト制御方法期間にディスプレイされる画面の例を図示する図面である。図３のオブジェクト制御方法期間にディスプレイされる画面の例を図示する図面である。図３のオブジェクト制御方法期間にディスプレイされる画面の例を図示する図面である。図３のオブジェクト制御方法期間にディスプレイされる画面の例を図示する図面である。図３のオブジェクト制御方法期間にディスプレイされる画面の例を図示する図面である。図３のオブジェクト制御方法期間にディスプレイされる画面の例を図示する図面である。図３のオブジェクト制御方法期間にディスプレイされる画面の例を図示する図面である。図３のオブジェクト制御方法期間にディスプレイされる画面の例を図示する図面である。望ましい他の実施形態による透明ディスプレイを含むデバイスによって遂行されるオブジェクト制御方法のフローチャートである。図２１のオブジェクト制御方法を使用して、ユーザ入力インターフェースの変更期間にディスプレイされる画面の例を図示する図面である。図２１のオブジェクト制御方法を使用して、ユーザ入力インターフェースの変更期間にディスプレイされる画面の例を図示する図面である。望ましいさらに他の実施形態による透明ディスプレイを含むデバイス上のガイドディスプレイのディスプレイ方法のフローチャートである。ガイドをディスプレイする画面の例を図示する図面である。望ましい実施形態による透明ディスプレイを含むデバイスのブロック図である。望ましい実施形態による透明ディスプレイを含むデバイスの保存部に保存されるソフトウェアについて説明する図面である。

本発明は、多様な変換を加えることができ、さまざまな実施例を有することができるが、特定実施形態を図面に例示し、詳細な説明で詳細に説明する。しかし、それは、本発明を特定の実施形態に対して限定するのではなく、本発明の思想及び技術範囲に含まれる全ての変換、均等物ないし代替物を含むものであると理解されなければならない。本発明の説明において、関連公知技術に係わる具体的な説明が、本発明の要旨を不明確にすると判断される場合、その詳細な説明を省略する。

第１、第２のような用語は、多様な構成要素についての説明に使用されるが、構成要素は、用語によって限定されるものではない。用語は、１つの構成要素を他の構成要素から区別する目的のみに使用される。

本出願において使用される用語は、ただ特定の実施例について説明するために使用されるものであり、本発明を限定する意図ではない。本出願で使用される用語は、本発明での機能を考慮しながら、可能な限り現在汎用される一般的な用語を選択したが、それは当業者の意図、判例、または新たな技術の出現などによって異なりうる。また、特定の場合は、出願人が任意に選定した用語もあり、その場合、当該発明の説明部分において、詳細にその意味を記載する。従って、本発明で使用される用語は、単純な用語の名称ではない、その用語が有する意味と、本発明の全般にわたった内容とを基に定義されなければならない。

単数の表現は、文脈上明白に取り立てて意味しない限り、複数の表現を含む。本出願において、「含む」または「有する」というような用語は、明細書上に記載された特徴、数字、段階、動作、構成要素、部品、またはそれらの組み合わせが存在するということを指定するものであり、一つまたはそれ以上の他の特徴、数字、段階、動作、構成要素、部品、またはそれらの組み合わせの存在または付加の可能性をあらかじめ排除するものではないと理解されなければならない。また、「及び／または」という用語は、一つ以上の関連するリストされたアイテムの結合を含む。図面において、同じ参照番号は、同じエレメント（element）を示すので、それらの説明は反復しない。

詳細な説明全般で言及されるオブジェクト（object）は、ディスプレイされている全ての構成要素（component）または情報であり、ユーザ入力によって選択され、ユーザの意図によって制御される構成要素または情報を意味する。オブジェクトは、例えば、第１イメージ、第１イメージ内の第２イメージ、バックグラウンドイメージ、アイコン（icon）、フォルダアイコン（folder icon）、フォルダアイコン内のアイコン、テキスト（text）、ポップアップ・ウィンドウ（pop-up window）、アプリケーション実行ウィンドウ、アプリケーション実行ウィンドウ内のコンテンツ（content）、リスト（list）、リストに含まれたアイテム（item）、コンテンツ（content）などを含んでもよいが、それらに制限されるものではない。

オブジェクトは、オブジェクトのために設定されたユーザ入力インターフェース（または、タッチ入力面）を介したユーザの入力（または、タッチ入力）によってディスプレイされる。例えば、オブジェクトは、透明ディスプレイを有するデバイスで遂行されている機能によって隠されていて、ユーザの入力によって活性化（activation）されてディスプレイされる。

以下、望ましい実施形態について、図面を参照しつつ詳細に説明する。

図１は、望ましい実施形態によるオブジェクトと、各オブジェクトのために設定されたユーザ入力インターフェースとについて説明するための図面である。

図１を参照すると、リストがディスプレイされるとき、スクロールボックス（scroll box）、アイテムボックス（item box）、アイテムボックス内に含まれたアイコン（icon）などがオブジェクトである。ユーザは、ユーザ入力（user input）インターフェースを利用して、オブジェクトに対する命令を入力することができる。図１は、オブジェクト間の階層的な（hierarchical）関係の例を図示している。スクロールボックスは、最上位階層（layer）のオブジェクトであり、アイコンは、最下位階層のオブジェクトである。言い替えると、図１は、スクロールボックス・オブジェクトの下位階層に複数のアイテムボックス・オブジェクトが含まれ、各アイテムボックス・オブジェクトの下位階層に、アイコンオブジェクトが含まれた場合である。

図１に図示されているように、各オブジェクトのためのユーザ入力インターフェースが前もって設定されもする。各オブジェクトのユーザ入力インターフェースは、各オブジェクトを運用するためのプログラム制作時に設定される。下位階層のオブジェクトに対するユーザ入力インターフェースは、上位階層のオブジェクトのために設定されたユーザ入力インターフェースによって設定されもする。

例えば、図１のアイコンのユーザ入力インターフェースが、各オブジェクトを含むプログラム制作時に設定されていない場合、アイコンのユーザ入力インターフェースは、アイテムボックスのために設定されたユーザ入力インターフェースに設定されもする。なぜならば、アイテムボックスは、アイコンのペアレント階層（parent layer）であり、アイコンは、アイテムボックスのサブ階層であるからである。アイコンがディスプレイされるとき、アイコンのユーザ入力インターフェースの設定が遂行されもする。各オブジェクトを含むプログラムの制作時、アイテムボックスと、アイコンのユーザ入力インターフェースとが設定されていない場合、アイテムボックスと、アイコンのユーザ入力インターフェースは、スクロールボックスの既設定のユーザ入力インターフェースによって設定されもする。なぜならば、アイテムボックスとアイコンは、スクロールボックスのサブ階層であるからである。その場合、アイテムボックス及びアイコンがディスプレイされるとき、アイテムボックス及びアイコンのユーザ入力インターフェースは、スクロールボックスのユーザ・インターフェースによって設定されもする。

図１に図示されているように、各オブジェクトのユーザ入力インターフェースが設定された場合、スクロールボックスは、背面入力インターフェース（back input interface）を介して入力されたユーザの入力によって動作し、アイテムボックス＿１は、前面入力インターフェース（front input interface）を介して入力されたユーザの入力によって動作し、アイコンは、前面入力インターフェースまたは／及び背面入力インターフェースを介して入力されたユーザの入力によって動作し、テキストは、前面入力インターフェースを介して入力されたユーザの入力によって動作する。

従って、図１のように、各オブジェクトのユーザ入力インターフェースが設定された場合、スクロールボックスは、背面入力インターフェースに入力が印加されて動作され、アイテムボックスは、ただ前面ユーザ・インターフェースを介して入力を受信し、アイコンは、ただ前面入力インターフェースと背面入力インターフェースとを介して入力を受信し、スクローリングの一時停止が発生した位置に位置しないため、アイテムボックスまたはアイコンが誤って選択される動作エラーは発生しない。

また、図１において、オブジェクトのために設定されたユーザ入力インターフェースは、オブジェクトがディスプレイされる環境と、オブジェクトの動作とのうち少なくとも一つに基づいて決定されるが、望ましい実施形態は、それに制限されるものではない。

例えば、ユーザによって容易に制御される前面入力インターフェースは、狭いユーザ入力面積（または、タッチ面積）を有するオブジェクトのために設定され、ユーザによって相対的に容易に制御されない背面入力インターフェースは、広いユーザ入力面積を有するオブジェクトのために設定されもする。ユーザによって容易に制御される前面入力インターフェースは、ユーザによって頻繁に使用される動作を遂行するオブジェクトのために設定され、ユーザによって相対的に容易に制御されない背面入力インターフェースは、ユーザによってあまり使用されないオブジェクトのために設定されもする。

オブジェクトが、ユーザ入力インターフェースによってマルチプル動作を実行するために設定された場合、両面入力インターフェース（例えば、前面入力インターフェース及び背面入力インターフェース）が、オブジェクトのユーザ入力インターフェースとして設定されもする。オブジェクト基盤実行動作は、前面入力インターフェース、背面入力インターフェース及び両面入力インターフェースを介したユーザの入力によって遂行される。図１に図示されたオブジェクトは、ウィジェット（widget）といわれる。前面入力インターフェース、背面入力インターフェース及び両面入力インターフェースは、それぞれ前面モード（front mode）、背面モード（back mode）、両面モード（front＋back mode）とされる。

詳細な説明全般で言及される入力インターフェースまたは入力モードは、透明ディスプレイのタッチ面にもなる。従って、前面入力インターフェースまたは前面入力モードは、透明ディスプレイの前面タッチ面になる。背面入力インターフェースまたは背面入力モードは、透明ディスプレイの背面タッチ面になる。

詳細な説明全般で言及されるユーザの入力は、ユーザのジェスチャ（gesture）によって提供される入力情報にもなる。ユーザのジェスチャは、ユーザの入力の位置、方向、速度、タッチ地点の数などによって決定される。すなわち、入力装置がタッチスクリーン基盤であるとき、ユーザのジェスチャは、例えば、タップ（tap）、タッチ・アンド・ホールド（touch and hold）、ダブルタップ（double tap）、ドラッグ（drag）、パニング（panning）、フリック（flick）、ドラッグ・アンド・ドロップ（drag and drop）及びスウィープ（sweep）などを含んでもよいが、それらに制限されるものではない。

タッチスクリーンに対するユーザのジェスチャは、ユーザの指またはタッチツール（例えば、スタイラスペン）を利用して作われる。ユーザのジェスチャは、カメラまたは他のジェスチャ検出デバイスからも受信される。そのような場合、ユーザのジェスチャは、カメラを使用して撮影された映像に基づいて決定された空間で遂行されたジェスチャを含んでもよい。ユーザ動きに基づいた空間で遂行されるジェスチャは、デバイスの動き（例えば、シェーキングなど）によっても決定される。

入力装置が、物理的ボタン、ダイヤル、スライダスイッチ、ジョイスティック、クリックホイールのうち少なくとも一つを含むとき、ユーザの入力は、入力装置に対するユーザの物理的な制御に依存される。入力装置がオーディオ入力装置基盤であるとき、ユーザの入力は、自然語（spoken language）基盤のユーザの音声認識に依存される。

図２Ａは、望ましい実施形態による透明ディスプレイ２０１を含むデバイス２００の機能ブロック図である。図２に図示された透明ディスプレイ２０１を含むデバイス２００は、一例であり、スマートフォン（smart phone）、ノート型パソコン（notebook）、タブレット（tablet）ＰＣ（personal computer）、ファブレット（phablet）、移動端末機（mobile device）、ハンドヘルド（handheld）デバイスまたはハンドヘルドＰＣ、ＰＤＡ（personal digital assistant）などがあるが、それらに制限されるものではない。透明ディスプレイ２０１はまた、高付加価値ガラス、機能性自動車部品であるガラス、自動車ダッシュボード（dash board）、ナビゲータ（navigator）、保安電子デバイス、太陽電池、ゲーム機、おもちゃ、ショーウインドウ、スマートウィンドウなど多様な分野に適用される。

図２Ａを参照すると、デバイス２００は、透明ディスプレイ２０１、ユーザ入力部２０５、センシング部２０６、カメラ２０７、オーディオ入力部２０８、オーディオ信号処理部２０９、オーディオ出力部２１０、保存部（保存器）２１１、通信部２１２、ポート２１３、電源部２１４及びプロセッサ２１５を含む。透明ディスプレイ２０１を有するデバイス２００の構成は、図２に図示されたところに制限されるものではない。

透明ディスプレイ２０１は、タッチスクリーンといわれる。透明ディスプレイ２０１は、オブジェクトをディスプレイするディスプレイ部２０２、ディスプレイ部２０２の前面に設けられ、タッチに基づいたユーザの入力を受信する前面入力部２０３（例えば、前面入力インターフェース）、及びディスプレイ部２０２の背面に設けられ、タッチに基づいたユーザの入力を受信する背面入力部２０４（例えば、背面入力インターフェース）を含む。前面インターフェース及び背面入力インターフェースはまた、イメージングセンサ、赤外線センサ、近接センサなどに基づいた他の形態のユーザの入力を受信することができる。

ディスプレイ部２０２は、デバイス２００によって処理されるオブジェクトを含む情報を出力する。該情報は、オブジェクト以外の情報を含んでもよい。オブジェクト以外の情報は、ディスプレイされ、ユーザの入力によって選択されることがないように設定される。

ディスプレイ部２０２は、透明デバイスによって構成され、透明デバイスの光透過率を調節し、透明度を調節したり、あるいは各ピクセルのＲＧＢ（red，Green，blue）値を調節し、透明度を調節したりすることができる。またディスプレイ部２０２は、有機発光ダイオード（organic light-emitting diode）と液晶ディスプレイ（liquid crystal display）とが互いに結合された構造を有することができる。有機発光ダイオードは、前面入力部２０３に隣接するように位置させ、液晶ディスプレイは、背面入力部２０４に隣接するように位置させることができる。ディスプレイ部２０２が、前述の結合された構造を有する場合、普段には、透明なガラスのような状態を維持していて、電源供給時、液晶ディスプレイが光を遮断し、ディスプレイ部２０２は、不透明な状態に設定される。

ディスプレイ部２０２は、前面入力部２０３または／及び背面入力部２０４を介したユーザのジェスチャまたはタッチパターン、ユーザ入力部２０５を介して入力されたユーザの入力、センシング部２０６を介して入力されたユーザの入力、カメラ２０７を介して入力されたユーザの入力、あるいはオーディオ入力部２０８を介して入力されたユーザの入力に応答する画面をディスプレイする。ディスプレイ部２０２にディスプレイされている画面は、ＵＩ（user interface）画面またはＧＵＩ（graphic user interface）画面を含む。

ディスプレイ部２０２は、液晶ディスプレイ、薄膜トランジスタ液晶ディスプレイ（thin film transistor-liquid crystal display）、有機発光ダイオード、フレキシブル・ディスプレイ（flexible display）、三次元ディスプレイ（３Ｄ（three dimensional） display）、ＡＭＯＬＥＤ（active-matrix organic light-emitting diode）、体積型ディスプレイ（volumetric display）及びホログラフィック・ディスプレイ（holographic display）のうち少なくとも一つによって構成されもするが、それらに制限されるものではない。透明ディスプレイ２０１の数は、デバイス２００の具現形態によって、２個以上にもなる。

前面入力部２０３と背面入力部２０４は、ユーザのタッチ基盤入力を受信するためのタッチセンサを含む。あるいは、ユーザの入力を受信するための２個以上のタッチセンサ、または他のタイプのセンサであってもよい。該センサは、各入力インターフェースに係わる独立したユーザ入力、またはマルチプル入力インターフェースに対する複合ユーザ入力によって、異なる機能を遂行するために使用される制限のない数の入力インターフェースを提供するために使用される。

望ましい実施形態により、前面入力部２０３及び背面入力部２０４に対するタッチを感知するセンサは、前面入力部２０３及び背面入力部２０４において、ユーザのジェスチャまたはパターンを感知するセンサを含む。タッチを感知するためのセンサは、ドラッグ、フリック、タップ、タッチ・アンド・ホールド、ダブルタップ、パニング、スウィープのうち少なくとも一つが、前面入力部２０３及び／または背面入力部２０４で感知されると、信号を生成することができる。触覚センサは、前面入力部２０３及び背面入力部２０４のタッチを感知するセンサの一例として使用される。該触覚センサは、接触面の粗度、接触物体の硬度、接触地点の温度のような多様な情報を感知することができる。

前面入力部２０３及び背面入力部２０４は、減圧（抵抗膜）式または静電（または、静電容量）式で構成される。前面入力部２０３及び背面入力部２０４において、ユーザ入力認識は、座標情報を利用することができる。タッチが生じた位置のｘ軸とｙ軸との座標をユーザの入力として認識することができる。

ユーザの入力は、ユーザのジェスチャに基づいたユーザの要請（request）またはユーザの選択（selection）によって生じる。ユーザのジェスチャは、例えば、タッチ回数、タッチパターン、タッチ面積及びタッチ強度の多様な組み合わせによって、多様な方法で決定される。ユーザの入力は、ユーザの指、またはスタイラスペンのようなタッチツールによって入力される。ユーザの指またはタッチツールは、外部入力装置ともいわれる。

前面入力部２０３及び背面入力部２０４のタッチは、ポインタ（pointer）がタッチパネルにタッチされた場合を示す。タッチは、マルチタッチまたはタッチポイントを含んでもよい。前面入力部２０３及び背面入力部２０４に対する近接タッチ（proximity-touch）は、ポインタが、前面入力部２０３及び背面入力部２０４に実際にタッチされず、前面入力部２０３及び背面入力部２０４の所定距離内になるように決定された場合を示す。

該ポインタは、前面入力部２０３及び背面入力部２０４の特定部分をタッチしたり、あるいは近接タッチしたりするためのツールであり、前述のユーザの指またはスタイラスペンが利用される。

透明ディスプレイ部２０１は、実施形態によって、透明ＬＣＤ（liquid crystal display）型、透明ＴＦＥＬ（thin-film electroluminescent panel）型、透明ＯＬＥＤ（organic light emitting diode）型、投射型のような多様な形態で具現される。以下、透明ディスプレイ部２０１の構造に係わる多様な実施例について説明する。

透明ＬＣＤ型とは、現在使用されているＬＣＤ装置において、バックライトユニットを除去し、１対の偏光板、光学フィルム、透明薄膜トランジスタ、透明電極などを使用して具現した透明ディスプレイ装置である。

透明ＴＦＥＬ型とは、透明電極、無機蛍光体、絶縁膜からなる交流型無機薄膜ＥＬ（ＡＣ−ＴＦＥＬ）ディスプレイを使用する装置を意味する。ＡＣ−ＴＦＥＬは、無機蛍光体の内部に、加速された電子が通過しつつ蛍光体を励起させて発光させるディスプレイである。透明ディスプレイ部２０１が透明ＴＦＥＬ形態で具現された場合、プロセッサ２１５は、適切な位置に電子が投射されるように調整し、情報表示位置を決定することができる。無機蛍光体、絶縁膜が透明な特性を有するので、非常に透明なディスプレイを具現することができる。

透明ＯＬＥＤ型とは、自体発光が可能なＯＬＥＤを利用する透明ディスプレイ装置を意味する。有機発光層が透明であるために、両電極に透明電極を使用すると、透明ディスプレイ装置として具現可能である。該ＯＬＥＤは、有機発光層の両端から、電子と正孔とを注入し、それらが有機発光層内で結合されながら発光する。該透明ＯＬＥＤ装置は、そのような原理を使用して、所望の位置に電子及び正孔を注入し、情報を表示する。

図２Ｂは、透明ＯＬＥＤ型で具現された透明ディスプレイ１４０−１の詳細な構造の断面図である。

図２Ｂを参照すると、透明ディスプレイ１４０−１は、透明基板１４１−１、透明トランジスタ層１４２−１、第１透明電極１４３−１、透明有機発光層（transparent organic light-emitting layer）１４４−１、第２透明電極１４５−１、連結電極１４６−１を含む。

透明基板１４１−１は、透明な性質を有するプラスチックのようなポリマー材料またはガラスを使用することができる。透明基板１４１−１の材質は、透明ディスプレイ装置１００が使用される環境によって決定される。例えば、ポリマー材料は、軽くて柔軟であるという長所があり、携帯型ディスプレイ装置に使用され、ガラスは、商店のショーケースウィンドウ（showcase window）や一般ウィンドウなどに使用することができる。透明トランジスタ層１４２−１とは、既存薄膜トランジスタの不透明なシリコンを、透明な亜鉛酸化物、酸化チタンのような透明物質で代替して製作したトランジスタを含むレイヤを意味する。透明トランジスタ層１４２−１内には、ソース、ゲート、ドレイン及び各種誘電膜１４７−１，１４８−１が設けられ、ドレインと第１透明電極１４３−１とを電気的に連結する連結電極１４６−１も設けられる。図２Ｂにおいては、透明トランジスタ層１４２−１内に、ソース、ゲート、ドレインからなる１つの透明トランジスタだけが図示されているが、透明トランジスタ層１４２−１は、ディスプレイ表面の全体領域に等しく分布された複数の透明トランジスタを含んでもよい。プロセッサ２１５は、透明トランジスタ層１４２−１に含まれた各トランジスタのゲートに制御信号を印加し、当該透明トランジスタを駆動させて情報を表示することができる。

第１透明電極１４３−１及び第２透明電極１４５−１は、透明有機発光層１４４−１を基準に、互いに反対方向に配置される。第１透明電極１４３−１、透明有機発光層１４４−１及び第２透明電極１４５−１は、透明有機発光ダイオードを形成する。

透明ＯＬＥＤは、ディスプレイを駆動する方法によって、受動型ＯＬＥＤ（passive matrix ＯＬＥＤ）と能動型ＯＬＥＤ（active matrix ＯＬＥＤ）に分類される。ＰＭＯＬＥＤ（classified into a passive matrix ＯＬＥＤ）は、第１透明電極１４３−１及び第２透明電極１４５−１が互いに交差する部分が、画素を形成する構造である。一方、ＡＭＯＬＥＤは、各画素を駆動する薄膜トランジスタ（ＴＦＴ）がある構造である。図２Ｂにおいては、能動型ＯＬＥＤを示している。

第１透明電極１４３−１及び第２透明電極１４５−１は、それぞれ複数個のライン電極を含み、ライン電極の整列方向は、互いに垂直に形成される。もし第１透明電極１４３−１のライン電極が横方向に配列されるとするならば、第２透明電極１４５−１のライン電極は、縦方向に配列される。それにより、第１透明電極１４３−１及び第２透明電極１４５−１の間には、複数の交差領域が形成される。各交差領域には、図２Ｂに図示されているように、透明トランジスタが連結される。

プロセッサ２１５は、透明トランジスタを利用して、各交差領域別に電位差を形成させる。電位差が形成された交差領域内において、各電極から、電子と正孔とが透明有機発光層１４４−１に流入して結合しながら、発光が行われる。電位差が形成されていない交差領域は、発光が行われず、それにより、背面背景がそのまま透明に映し出される。

第１透明電極１４３−１及び第２透明電極１４５−１としては、ＩＴＯ（indium tin oxide）が使用される。または、グラフェンのような新素材が使用されもする。グラフェンは、炭素原子が互いに連結され、ハニカム状の平面構造をなし、透明な性質を有する物質である。それ以外に、透明有機発光層１４４−１も多様な材料によって具現される。

前述のように、透明ディスプレイ２０１は、透明ＬＣＤ型、透明ＴＦＥＬ（thin-film electroluminescent panel）型、透明ＯＬＥＤ型以外に、投射型によっても具現される。投射型とは、ＨＵＤ（head up display）のように透明なスクリーンに映像を投射してディスプレイする方式を意味する。

ユーザ入力部２０５は、透明ディスプレイを有するデバイス２００の動作を制御するための入力データ（または、制御データ）及びユーザの入力を発生させる。ユーザ入力部２０５は、キーパッド（key pad）、ドームスイッチ（dome switch）、マウスの代わりに使用されるタッチパッド（touch pad）、ジョグホイール（jog wheel）、ジョグスイッチ（jog switch）、ハードウェア（Ｈ／Ｗ）ボタンなどを含んでもよい。

センシング部２０６は、デバイス２００の位置、ユーザの接触いかん、デバイス２００の方位、デバイス２００の加速または減速のように、デバイス２００の現在状態を感知し、デバイス２００の動作を制御するためのセンシング信号を発する。

センシング部２０６は、前面入力部２０３及び背面入力部２０４のタッチを感知するためのセンサ以外のセンサを含む。例えば、センシング部２０６は、近接センサを含んでもよい。近接センサは、外部物体が既設定の検出面（例えば、前面入力インターフェース、背面入力インターフェースなど）に近いか否かということ、または外部物体が実質的な物理的タッチを必要としない電子系の力または赤外線を使用して、近接検出面にあるか否かということを検出するためのセンサである。外部物体は、デバイス２００の外部に位置している物体である。近接センサの例として、透過型光電センサ、直接反射型光電センサ、ミラー発射型光電センサ、高周波発振型近接センサ、静電容量型近接センサ、磁気型近接センサ、赤外線近接センサなどがある。

カメラ２０７は、画像通話モードまたは撮影モードで、イメージセンサによって得られる静止映像または動画などの画像フレームを処理する。そして、処理された画像フレームは、ディスプレイ部２０２に表示される。カメラ２０７で処理された画像フレームは、保存部２１１に保存されるか、あるいは通信部２１２またはポート２１３を介して外部デバイスに伝送される。

カメラ２０７はまた、背面入力部２０４を介したドラッグに対応するユーザのジェスチャによって、左方向または右方向にレンズの撮影角度を移動するように構成される。カメラ２０７は、デバイス２００の構造によって、２個以上が具備される。また、カメラ２０７は、ユーザの空間ジェスチャを認識する入力装置として使用される。

オーディオ入力部２０８は、通話モード、録画モードまたは音声認識モードなどで、外部の音響信号の入力を受信する。オーディオ入力部２０８は、例えば、マイクロフォンで構成される。オーディオ入力部２０８は、外部の音響信号を入力される過程で発生するノイズを除去するための多様なノイズ除去アルゴリズムを含むように構成される。

オーディオ入力部２０８を利用して入力される前記音響信号は、望ましい実施形態による透明ディスプレイ２０１にディスプレイされているオブジェクトを制御するために使用されるユーザの音声入力にもなる。すなわち、オーディオ入力部２０８を利用して入力される音響信号は、自然語に基づいた音声認識基盤のユーザ入力情報を含んでもよい。オーディオ入力部２０８を使用して入力された音響信号は、保存部２１１に保存されるか、あるいは通信部２１２またはポート２１３を介して外部デバイスに伝送される。

オーディオ信号処理部２０９は、オーディオ入力部２０８とプロセッサ２１５との間、及びオーディオ出力部２１０とプロセッサ２１５とのインターフェースを提供する。例えば、オーディオ信号処理部２０９は、オーディオ入力部２０８から受信される音響信号を、プロセッサ２１５によって処理されるオーディオデータに変換し、オーディオデータをプロセッサ２１５に伝送する。オーディオ信号処理部２０９は、プロセッサ２１５から伝送されるオーディオデータを、電気的な音響信号に変換し、電気的な音響信号をオーディオ出力部２１０に伝送する。

オーディオ出力部２１０は、通話モードまたはオーディオ再生モードなどで、オーディオ信号処理部２０９から受信された音響信号またはオーディオ信号を出力する。オーディオ出力部２１０は、スピーカでも構成される。オーディオ入力部２０８とオーディオ出力部２１０は、ヘッドセットでも構成される。

デバイス２００とユーザとのユーザ・インターフェース機能によって、透明ディスプレイ２０１、ユーザ入力部２０５、センシング部２０６、カメラ２０７及びオーディオ入力部２０８は、入力装置または入出力装置とされる。例えば、デバイス２００とユーザとのユーザ・インターフェース機能が、タッチスクリーン機能、音声認識機能及び空間ジェスチャ認識機能を含む場合、ユーザ入力部２０５、センシング部２０６、カメラ２０７及びオーディオ入力部２０８は、入力装置とされ、透明ディスプレイ２０１は、入出力装置とされる。

保存部２１１は、プロセッサ２１５によって実行可能になるように構成された少なくとも１つのプログラムと資源（resource）とを保存する。少なくとも１つのプログラムは、望ましい実施形態によるオブジェクト制御方法またはガイド表示方法を実行するプログラム、デバイス２００の運用体系（operating system）プログラム、デバイス２００に設定されたアプリケーション、及びデバイス２００の各種機能（例えば、通信機能やディスプレイ機能）を遂行するのに必要なプログラムを含む。該資源は、前述のプログラムを遂行するのに必要な情報、望ましい実施形態で言及されるオブジェクト制御のためのユーザ・インターフェース画面情報、及びユーザの入力に対応するオブジェクト制御機能情報などを含む。オブジェクト制御のためのユーザ・インターフェース画面情報は、例えば、各オブジェクトの入力インターフェースに係わる編集ウィンドウを含んでもよい。また、該資源は、各オブジェクトのために設定された既設定の入力インターフェースについての情報を含む。

保存部２１１に保存されたオブジェクト制御方法、またはガイドディスプレイ方法を実行するプログラムは、オブジェクトを含むアプリケーション・プログラムに含まれるように構成される。ガイドディスプレイ方法を実行するプログラムは、前記アプリケーション・プログラムと独立したプログラムで構成される。すなわち、ガイドディスプレイ方法を実行するプログラムは、実行されるアプリケーションに係わりなく、デバイス２００の動作モードがガイドディスプレイ方法を実行するように設定されるときに実行されるか、あるいはデバイス２００の電源がオンになると、デフォルトとして実行されたりする。例えば、ガイドディスプレイ方法を実行するためのプログラムは、デバイス２００の動作システムの一部にもなる。

以下で説明する多様な望ましい実施形態によって、プログラムは、任意のアプリケーションが実行された後で実行され、任意のアプリケーションの実行が終了すると、実行されない。例えば、電話帳（phonebook）アプリケーションに含まれたオブジェクトを制御する方法を実行するプログラム、またはガイドディスプレイ方法を実行するプログラムが電話帳アプリケーションの一部として実行され、電話帳アプリケーションの実行が終わると、電話帳アプリケーションに含まれたオブジェクトに係わる制御方法を実行するプログラム、及びガイドディスプレイ方法を実行するプログラムの動作が終了する。その代わり、電話帳アプリケーション実行いかんに係わりなく、ガイドディスプレイ方法が実行されもする。

保存部２１１は、デバイス２００の運用体系を始めとしたデバイス２００の各種機能を遂行するのに必要な少なくとも１つのプログラムを保存する保存部と、多様な望ましい実施形態によるオブジェクト制御方法またはガイドディスプレイ方法を実行する一つ以上のプログラム、資源及び前記アプリケーションを保存する保存部と、を独立して構成することができる。

保存部２１１は、高速ランダムアクセスメモリ、磁気ディスク保存装置、フラッシュメモリのような揮発性メモリ、または他の揮発性半導体メモリを含んでもよい。従って、保存部２１１は、メモリとされる。

通信部２１２は、無線インターネット、無線イントラネット、無線電話ネットワーク、無線ＬＡＮ（local area network）、Ｗｉ−Ｆｉ（wireless fidelity）ネットワーク、ＷＦＤ（Ｗｉ−Ｆｉ direct）ネットワーク、３Ｇ（３ generation）ネットワーク、４Ｇ（４ generation）ＬＴＥ（long term evolution）ネットワーク、ブルートゥース（Bluetooth（登録商標））ネットワーク、赤外線通信（ＩｒＤＡ：infrared data association）ネットワーク、ＲＦＩＤ（radio frequency identification）ネットワーク、ＵＷＢ（ultra-wideband）ネットワーク、ジグビー（Zigbee（登録商標））ネットワーク、ＮＦＣ（near field communication）ネットワークのような無線ネットワークを介して、外部電子デバイス（図示せず）及びサーバ（図示せず）とデータを送受信することができるように構成される。

通信部２１２は、放送受信モジュール、移動通信モジュール、無線インターネット・モジュール、有線インターネット・モジュール、近距離通信モジュール及び位置情報モジュールのうち少なくとも一つを含んでもよいが、それらに制限されるものではない。

放送受信モジュールは、放送チャネルを介して、外部の放送管理サーバから放送信号及び／または放送関連情報を受信する。放送チャネルは、衛星チャネル、地上波チャネルを含んでもよい。移動通信モジュールは、移動通信網上で、基地局、外部の電子デバイス（図示せず）、サーバ（図示せず）のうち少なくとも一つと無線信号を送受信する。無線信号は、音声コール信号、画像通話信号、または文字／マルチメディアメッセージ送受信による多様な形態のデータを含んでもよい。無線インターネット・モジュールは、無線インターネット接続を介して通信するモジュールである。有線インターネット・モジュールは、有線インターネット接続のためのモジュールである。

近距離通信モジュールは、近距離通信のためのモジュールである。近距離通信技術としては、ブルートゥース、ＲＦＩＤ、赤外線通信、ＵＷＢ、Zigbee（登録商標）、ＷＦＤ、ＮＦＣなどが利用される。位置情報モジュールは、デバイス２００の位置を確認する、あるいは得るためのモジュールである。一例として、ＧＰＳ（global position system）モジュールがある。ＧＰＳモジュールは、複数個の人工衛星から位置情報を受信する。位置情報は、緯度及び経度で表示される座標情報を含んでもよい。

ポート２１３は、ＵＳＢ（universal serial bus）ポート（図示せず）のようなプラグアンドプレイ（plug and play）・インターフェースを利用して、外部デバイス（図示せず）とデータを送受信することができる。プラグアンドプレイ・インターフェースは、デバイス２００のプラグに、外部デバイスが差し込まれ、自動的にプレイするモジュールを意味する。

電源部２１４は、デバイス２００の多様な構成要素に電力を供給する。電源部２１４は、バッテリ及び交流電源のような一つ以上の電源を含む。デバイス２００は、電源部２１４を含まず、外部電源提供部（図示せず）と連結される連結部（connection unit）（図示せず）を含んでもよい。

プロセッサ２１５は、デバイス２００の全般的な動作を制御する一つ以上のプロセッサを含んでもよい。例えば、プロセッサ２１５は、デバイス２００の機能によって、複数個のプロセッサに分割される。

プロセッサ２１５は、透明ディスプレイ２０１、ユーザ入力部２０５、センシング部２０６、カメラ２０７、オーディオ入力部２０８、オーディオ出力部２１０、オーディオ信号処理部２０９、保存部２１１、通信部２１２及びポート２１３を全般的に制御することができる。従って、プロセッサ２１５は、制御器、マイクロプロセッサ、デジタル信号処理器（digital signal processor）などといわれる。また、プロセッサ２１５は、入力装置に該当する透明ディスプレイ２０１、ユーザ入力部２０５、センシング部２０６、カメラ２０７、オーディオ入力部２０８を利用して入力されたユーザの入力情報と、透明ディスプレイ２０１に基づいたユーザ・インターフェースとを提供することができる。

プロセッサ２１５は、望ましい実施形態によるオブジェクト制御方法またはガイドディスプレイ方法に係わる少なくとも１つのプログラムを実行させることができる。プロセッサ２１５は、前記プログラムを保存部２１１から読み取って実行させるか、あるいは通信部２１２を介して連結されたアプリケーション提供サーバ（図示せず）またはマーケットサーバ（図示せず）のような外部装置からダウンロードされて実行させることができる。オブジェクト制御方法に係わるプログラムは、前述のように、各アプリケーションのためのプログラムに含まれる。

プロセッサ２１５は、デバイス２００の各種機能モジュールと、プロセッサ２１５とをインターフェースするインターフェース機能部を含んでもよい。望ましい実施形態によるオブジェクト制御方法またはガイドディスプレイ方法に係わるプロセッサ２１５の動作については、後述する図３、図２１及び図２３に図示されたフローチャートのように遂行される。

図３は、望ましい一実施形態による、デバイス２００によって遂行されるオブジェクト制御方法のフローチャートである。図３のオブジェクト制御方法は、図２のプロセッサ２１５によって遂行される。

プロセッサ２１５は、アプリケーション実行またはデバイス２００の動作によって、少なくとも１つのオブジェクトをディスプレイする（Ｓ３０１）。

プロセッサ２１５は、ディスプレイされているオブジェクトについて、前面入力部２０３及び背面入力部２０４のうち少なくとも１つの入力部を介したユーザの入力を受信する（Ｓ３０２）。

望ましい実施形態により、プロセッサ２１５は、受信されるユーザ入力が、前記ディスプレイされている少なくとも１つのオブジェクトについて、既設定の入力インターフェースに入力されたか否かということを判断する（Ｓ３０３）。望ましい実施形態により、プロセッサ２１５は、ユーザ入力が、前面入力インターフェースを介して受信されているか、背面入力インターフェースを介して受信されているか、あるいは前面入力インターフェース及び背面入力インターフェース二つのいずれも介して受信されているかを検出する。プロセッサ２１５は、オブジェクトの既設定入力インターフェースと、前記ユーザ入力から前記検出された入力インターフェースとを比較する。

既設定の入力インターフェースは、図１で説明したように、各オブジェクトのために前もって設定されるか、あるいは上位階層（または、ペアレント階層）のオブジェクトの既設定入力インターフェースによってオブジェクトがディスプレイされるときに設定される。オブジェクトがディスプレイされるとき、ディスプレイされているオブジェクトに係わる既設定の入力インターフェースは、マッピングされる。

プロセッサ２１５は、段階Ｓ３０３での判断結果に基づいて、オブジェクトを制御する（Ｓ３０４）。望ましい実施形態により、プロセッサ２１５は、オブジェクトの既設定入力インターフェースと、ユーザ入力から前記検出された入力インターフェースとの比較に基づいて、前記検出された入力インターフェースにマッチングする既設定の入力インターフェースに対応する機能を遂行することができる。

図４は、図３のオブジェクト制御過程の例題画面を図示している。図４を参照すると、画面４１０が透明ディスプレイ２０１にディスプレイされているとき、フォルダアイコン４０４に対応する背面入力部２０４のタッチ位置が、透明ディスプレイ２０１のタッチを検出するために必要な時間よりさらに長い所定時間の間押される（例えば、タッチ・アンド・ホールド・ジェスチャ）。すなわち、画面４１０のフォルダアイコン４０４が、前面入力部２０３方向に拡大された画面４２０のフォルダアイコン４０４’に変更される。押されたタッチ位置が解除されると、拡大されたフォルダアイコン４０４’を有する画面４２０は、画面４１０に戻る。

図４の画面４１０及び画面４２０は、図３の段階Ｓ３０１で、複数のオブジェクト４０２〜４１０がディスプレイされているとき、段階Ｓ３０４で、既設定の入力インターフェースが背面入力部２０４である第１オブジェクト（ウィンドウ４０１）に対するユーザの入力４１１によって、第１オブジェクト４０１の前面にディスプレイされている第２オブジェクト（フォルダアイコン４０４）のディスプレイ状態が変更される。

そのとき、第２オブジェクトに該当するフォルダアイコン４０４に係わる既設定の入力インターフェースが、前面入力部２０３であるならば、ユーザは、前面入力部２０３を介したユーザ入力に基づいて拡大されたフォルダアイコン４０４’に含まれたアイコンの実行を制御することができる。

図５は、図３のオブジェクト制御過程の他の例画面を図示している。既設定の入力インターフェースが、背面入力部２０４であるウィンドウ５０１において、フォルダアイコン４０４に対応する背面入力部２０４のタッチ位置をタッチした後、（５０２）方向にドラッグすることにより、フォルダアイコン４０４が、画面５２０の位置に移動された場合である。それにより、フォルダアイコン４０４が移動されるとき、ユーザの手が、透明ディスプレイ２０１の後からジェスチャを遂行するために、ユーザの手によって、フォルダアイコン４０４、隣接したフォルダアイコン４０７及び全体ウィンドウ５０１が隠れない。また、フォルダアイコン４０４の移動によって、画面上にアイコンが自動的に再配列される。

図４を参照して説明したように、図５の画面５１０，５２０は、既設定の入力インターフェースが、背面入力部２０４である第１オブジェクト５０１の前面にディスプレイされている第２オブジェクト４０４のディスプレイ状態が、第１オブジェクト５０１に対するユーザの入力によって変更されるということを示している。

図６は、図３のオブジェクト制御過程のさらに他の画面を図示している。既設定の入力インターフェースが、背面入力部２０４であるウィンドウ４０１において、アイコン４０２に対応する背面入力部２０４のタッチ位置がタッチされるとき、タッチ時間またはタッチ強度（例えば、タッチ圧力）を示す進行バー（progress bar）６０１が、画面６２０にディスプレイされる。タッチ時間が維持されるか、あるいはタッチ強度が強くなることにより、画面６２０が画面６３０に変更され、画面６３０が画面６４０に変更される。画面６４０に図示されているように、進行バー６０１がフルに満たされると、画面６５０に図示されているように、アイコン４０２が削除される。

図４で説明したように、図６の画面６１０〜６５０は、第１オブジェクト４０１に対するユーザの入力によって、第１オブジェクト４０１の前面にディスプレイされている第２オブジェクト４０２のディスプレイ状態が変更（削除）されるということを示す。すなわち、背面入力部２０４が、既設定の入力インターフェースとして設定された第２オブジェクト４０２は、背面入力部２０４を介した入力によって削除される。

図７は、図３でのオブジェクト制御過程のさらに他の画面を図示している。

図７の画面７１０と画面７２０は、下位階層から上位階層へのウィンドウ７１１の移動を図示している。複数のウィンドウ７１１，７１２が互いに重畳されるとき、背面入力部２０４を介して入力されるユーザの入力によって、ウィンドウ７１２は、下位階層に移動される。従って、ウィンドウ７１２は、画面７２０上で、ウィンドウ７１１の下位階層にディスプレイされて隠される。

下位階層のウィンドウ７１１の既設定入力インターフェースは、前面入力部２０３であり、下位階層のウィンドウ７１１の背景階層（図示せず）に係わる既設定の入力インターフェースが、背面入力部２０４に設定され、下位階層のウィンドウ７１１は、背景階層（図示せず）の背面入力部２０４に対するユーザのジェスチャによって、さらに上位階層に移動されてディスプレイされる。

図７の画面７３０と画面７４０は、背面入力部２０４を介したユーザの入力によって、透明状態から不透明状態への転換を図示している。すなわち、画面７３０がディスプレイされ、背面入力部２０４が第１オブジェクト７３１の既設定入力インターフェースであるならば、背面入力部２０４を介して、最上端から最下端までユーザ入力としてドラッグ・ジェスチャが遂行されることによって、画面７４０の最上端は、透明状態から不透明状態に変更される。

図７の画面７３０と画面７４０は、既設定の入力インターフェースが、背面入力部２０４である第１オブジェクト７３１に対するユーザの入力によって、ディスプレイ部２０２の状態が変更されるということを図示している。

図８は、図３のオブジェクト制御過程のさらに他の画面の例を図示している。

図８は、複数のオブジェクトが互いに重なってディスプレイされ、背面オブジェクト８０２の既設定入力インターフェースは、背面入力部２０４であり、前面のオブジェクト８０３の既設定入力インターフェースは、前面入力部２０３である場合である。

従って、背面のオブジェクト８０２に対応する背面入力部２０４のタッチ位置をタッチし、方向（８０５）にタッチ位置をドラッグし、画面８２０に図示されているように、画面８１０の背面オブジェクト８０２は、移動される。

前面オブジェクト８０３に対応する前面入力部２０３のタッチ位置をタッチし、方向（８３１）にタッチ位置をドラッグし、画面８３０に図示されているように、画面８３０の前面オブジェクト８０３は、移動される。

前面入力部２０３は、背面オブジェクト８０２及び前面オブジェクト８０２の既設定入力インターフェースとして設定され、背面オブジェクト８０２は、背景オブジェクト８０１の既設定入力インターフェースである背面入力部２０４に対するユーザの入力によって移動される。そのような場合、図４で説明したように、図８の画面８１０，８２０は、背面入力部２０４が既設定の入力インターフェースである第１オブジェクト（例えば、背景オブジェクト８０１）の前面にディスプレイされている第２オブジェクト（例えば、背面オブジェクト８０２）のディスプレイ状態を、第１オブジェクト８０１に対するユーザの入力によって変更するということを図示している。

図９は、図３のオブジェクト制御過程に係わるさらに他の画面の例を図示している。

図９は、デバイスのロックスクリーンの例を図示している。すなわち、スクリーンが、前面入力部２０３に対するユーザの入力と、背面入力部２０４に対するユーザの入力とによるアンロック時、他のホーム画面（または、メニュー画面）がディスプレイされる。

画面９１０と画面９２０は、前面入力部２０３に対するユーザの入力によって、アンロックされる。画面９３０と画面９４０は、背面入力部２０３に対するユーザの入力によってアンロックされる。

図９は、前面アンロックユーザと背面アンロックユーザと互いに異なるときに適用される。

前面入力部２０３及び背面入力部２０４は、オブジェクト（アンロック機能を遂行することができる画面）９１１の既設定入力インターフェースであり、画面９１０，９２０は、前面入力部２０３を介して入力されるユーザの入力に応答し、オブジェクト９１１に対して、既設定の第１機能を遂行し、画面９３０，９４０は、背面入力部２０４を介して入力されるユーザの入力に応答し、オブジェクト９１１に対して既設定の第２機能を遂行する。

図１０は、図３のオブジェクト制御過程のさらに他の画面の例を図示している。

図１０において、テキスト（text）１００１が、前面入力部２０３を介して選択されることによって、背面入力部２０４は、画面１０２０に図示されているように、選択されたテキスト１００１のタイプ、サイズ及び色を設定するために、３つの領域１０２１，１０２２，１０２３に分けられる。選択されたテキスト１００１に反映された３つの領域１０２１，１０２２，１０２３それぞれでの背面タッチに基づいたスクローリング・ジェスチャのようなジェスチャを遂行し、テキストタイプ、テキストサイズ、テキスト色が選択され、画面１０２０上にディスプレイされる。

図１０について述べたように、図１０の画面１０１０，１０２０は、前面入力部２０３及び背面入力部２０４が、オブジェクト１００１の既設定入力インターフェースであり、オブジェクト１００１に係わる第１機能（例えば、前述のように、３つの領域に分ける機能）が、画面１０１０の前面入力部２０３を介して入力されたユーザの入力に応答して遂行され、オブジェクト１００１に係わる第２機能（テキストタイプ設定、テキストサイズ設定、テキスト色設定）が、画面１０２０の背面入力部２０４を介して入力されるユーザの入力に応答して遂行されるということを図示している。

図１１は、図３のオブジェクト制御過程のさらに他の画面の例を図示している。

図１１を参照すると、ピクチャ・オブジェクト１１０１が、カメラ２０７をもって撮影され、画面１１１０は、画面１１１０のオブジェクト１１０１の前面入力部２０３に対するズームイン（zoom-in）・ジェスチャ１１０２を遂行し、画面１１１１に拡大され、画面１１２０の前面入力部２０３に対するズームアウト（zoom-out）１１０３を遂行し、画面１１２１のように縮小される。

また、オブジェクト１１０１の背面入力部２０４のタッチ位置をタッチし、方向（１１０４）にタッチ位置をドラッグし、カメラ２０７のレンズの撮影角度を調整し、画面１１００は、画面１１３０に変更される。オブジェクト１１０１の背面入力部２０４のタッチ位置をタッチし、方向（１１０５）にタッチ位置をドラッグし、カメラ２０７のレンズの撮影角度を調整し、画面１１００は、画面１１４０に変更される。

図１１について説明したように、図１１の画面１１００〜１１４０は、前面入力部２０３及び背面入力部２０４が、オブジェクト１１０１の既設定入力インターフェースであり、オブジェクト１１０１に対して、既設定の第１機能（ズームインまたはズームアウト）が、前面入力部２０３を介して入力されるユーザの入力に応答して遂行され、オブジェクト１１０１に対して、既設定の第２機能（撮影画面変更または撮影領域変更）が、背面入力部２０４を介して入力されるユーザ入力に応答して遂行されるということを示している。

図１１は、パノラマ（panorama）機能にも適用される。カメラレンズの角度が、ピクチャ・オブジェクト１１０から全景（panoramic view）をチャプチャするために使用された背面入力部２０４に入力されたジェスチャによって変更される。また、パノラマ写真（panoramic photo）は、該パノラマ写真、または背面入力部２０４に入力されるジェスチャを使用して、写真の見る角度（view angle）を移動して見ることができる。

図１２は、図３のオブジェクト制御過程のさらに他の画面を図示している。図１２は、デバイス２００がメディアを再生しているとき、ベル音制御機能及びボリューム制御機能のようなシステムボリューム制御機能に係わる画面を図示している。

ユーザ入力部２０５を介して、ボリューム制御が要請されるとき、画面１２００がディスプレイされると、システムボリューム制御は、前面入力部２０３に対するユーザの入力によって遂行され（画面１２１０）、メディアボリューム制御（１２２１）（例えば、再生されているメディアファイルのボリューム）は、背面入力部２０４に対するユーザの入力によって遂行される（画面１２２０）。

図９を参照して説明したように、図１２の画面１２００〜１２２０は、前面入力部２０３及び背面入力部２０４が、オブジェクト１２０１の既設定入力インターフェースであり、前面入力部２０３を介して入力されるユーザの入力に応答し、オブジェクト１２０１用に、既設定の第１機能（システムボリューム制御機能）が遂行され、背面入力部２０４を介して入力されるユーザの入力に応答し、オブジェクト１２０１用に、既設定の第２機能（メディアボリューム制御機能）が遂行されるということを図示している。もし前面入力部２０３を介して入力されるユーザの入力が検出されると、ディスプレイ部２０２に、システムボリューム制御メッセージがディスプレイされ、背面入力部２０４を介して入力されたユーザの入力が検出されると、ディスプレイ部２０２に、メディアボリューム制御メッセージ１２２１がディスプレイされる。

図１３は、図３のオブジェクト制御過程のさらに他の画面を図示している。図１３の画面１３００，１３１０，１３２０，１３３０は、オブジェクト１３０１の既設定入力インターフェースである前面入力部２０３及び背面入力部２０４によって遂行される他の機能を図示している。

さらに詳細には、図１３の画面１３００にディスプレイされているオブジェクト１３０１の前面入力部２０３に対するユーザのタッチによって、オブジェクト１３０１は、不透明状態になる（画面１３１０）。画面１３００にディスプレイされているオブジェクト１３０１に対する背面入力部２０４へのユーザのタッチによって、オブジェクト１３０１を除外した背景は、不透明状態になる（画面１３２０）。画面１３００にディスプレイされているオブジェクト１３０１の前面入力部２０３及び背面入力部２０４に対して、同時に生じるユーザタッチによって、オブジェクト１３０１及びオブジェクト１３０１の背景がいずれも不透明状態になる（画面１３３０））。

図１３は、イメージ編集ウィンドウであるオブジェクトがディスプレイされるとき、タッチ面によって、編集対象が異なるということをユーザが直観的に分かる場合に適用される。例えば、オブジェクト１３０１の前面入力部２０３に対するユーザタッチによって、画面１３１０は、編集対象として設定されたオブジェクト１３１０の内部領域をディスプレイし、オブジェクト１３０１の背面入力部２０４に対するユーザタッチによって、画面１３２０は、編集対象としてオブジェクト１３０１の外部領域をディスプレイし、オブジェクト１３０１の前面入力部２０３及び背面入力部２０４に対するユーザタッチによって、画面１３３０は、編集対象として全画面をディスプレイすることができる。

図１４は、図３のオブジェクト制御過程のさらに他の画面を図示している。図１４において、前面入力部２０３及び背面入力部２０４は、オブジェクトの既設定入力インターフェースであり、前面及び背面に対する各入力によって異なる機能を遂行する。

すなわち、画面１４００は、オブジェクト１４０１に対する前面入力部２０３を介して入力されたユーザの入力によって、動画再生を図示している。従って、動画再生期間に、動画再生に係わる基本機能（早送り機能、巻き戻し機能、再生機能など）が、前面入力部２０３を介して遂行される。動画が再生されている間、背面入力部２０４に対するユーザのタッチによって動画が停止され（画面１４１０）、停止された映像が、背面入力部２０４に対するユーザのジェスチャによって、チャプチャされる（画面１４２０）。ユーザ・ジェスチャの例は、背面入力部２０４に対するタッチ後に上にドラッグすることにもなる。

図１５は、図３のオブジェクト制御過程のさらに他の画面を図示している。図１５において、前面入力部２０３及び背面入力部２０４は、オブジェクトの既設定入力インターフェースであり、前面及び背面それぞれに入力によって異なる機能を遂行する。

すなわち、オブジェクト１５１１の前面入力部２０３に対するユーザのタッチ＆ドラッグ・ジェスチャによって、ページが変更される（画面１５１０，１５２０）。オブジェクト１５１１の背面入力部２０４に対するユーザのタッチ＆ドラッグ・ジェスチャによって、上端のステータスバー（status bar）がドラッグ方向に移動されながら、上端ステータスバーの内容が変更される（画面１５１０，１５３０）。

望ましい実施形態により、ページ変更機能でスキップされたページ数は、背面入力部２０４に対するユーザのタッチ＆ドラッグ・ジェスチャによる画面１５４０と、前面入力部２０３に対するユーザのタッチ＆ドラッグ・ジェスチャによる画面１５２０とに図示されているように、異なってもいる。例えば、前面入力部２０３に対するユーザのタッチ＆ドラッグ・ジェスチャによって１ページずつ変更され（画面１５２０）、背面入力部２０４に対するユーザのタッチ＆ドラッグ・ジェスチャによって、２ページずつ変更される（画面１５４０）。または、前面入力部２０３に対するユーザのタッチ＆ドラッグ・ジェスチャによって提供されるページと、背面入力部２０４に対するユーザのタッチ＆ドラッグ・ジェスチャによって提供されるページは、異なって設定される。

図１６は、図３のオブジェクト制御過程のさらに他の画面例を図示している。図１６において、前面入力部２０３及び背面入力部２０４は、オブジェクト１６１１の既設定入力インターフェースであり、前面及び背面によって異なる機能を遂行する。

すなわち、アラームが鳴るとき、オブジェクト１６１１の前面入力部２０３に対するユーザの入力によって、アラームは鳴り止む（画面１６１０））。また、背面入力部２０４に対するユーザの入力によって、アラーム時間が再設定される。お知らせ時間は、タッチ後の上方向または下方向にドラッグされる。

図１７は、図３のオブジェクト制御過程のさらに他の画面例を図示している。図１７において、前面入力部２０３及び背面入力部２０４は、オブジェクト１７１３の既設定入力インターフェースであり、前面及び背面によって異なる機能を遂行する。

オブジェクト１７１３の前面入力部２０３に対するユーザの入力によって、配列された仮想キーによって情報が入力され、背面入力部２０４に対するユーザの入力１７１４によって、仮想キーのモードが変換される。すなわち、画面１７１０のオブジェクト１７１３は、背面入力部２０４に対する１回タッチによって、画面１７２０の数字キー配列に変更され、背面入力部２０４に対する２回タッチで、画面１７３０のアルファベットキー配列に変更される。

図１８は、図３のオブジェクト制御過程のさらに他の画面の例を図示している。図１８で、オブジェクト１８１１の透明度は、背面入力部２０４の所定面積以上タッチされるユーザの入力に応答して最大値に設定される。

すなわち、画面１８１０がディスプレイ部２０２にディスプレイされるとき、画面１８２０に図示されているように、背面入力部２０４の既設定の面積以上がタッチされると、ディスプレイ部２０２の透明度は、最大値と最小値（例えば、最大不透明度）との間の値に設定される。たとえ透明度が、ディスプレイ部２０２の電源を一時的にオフにして最大値に設定されるとしても、望ましい実施例は、それに制限されるものではない。望ましい実施形態により、近接センサは、既設定の面積以上タッチされたか否かということを判断するために使用される。

画面１８２０に図示されているように、タッチジェスチャが既設定の時間以上維持されなければ、ディスプレイ部２０２は、タッチが生じる前にディスプレイされた画面１８３０）にリターンする。しかし、タッチジェスチャが既設定の時間以上維持されると、ディスプレイ部２０２の透明度は、最大値に設定された状態を維持する（１８４０）。既設定の時間以上は、例えば、３分以上に設定されるが、望ましい実施例は、それに制限されるものではない。

図１９は、図３のオブジェクト制御過程のさらに他の画面の例を図示している。図１９において、オブジェクト１９１１の既設定入力インターフェースは、変更される。

すなわち、ディスプレイされているオブジェクト１９１１に対する入力インターフェース編集要請に応答し、オブジェクト１９１１の既設定入力インターフェースに係わる情報を含む編集ウィンドウ１９２１をディスプレイする（画面１９１０）。入力インターフェース編集要請は、前面入力部２０３または背面入力部２０４を介して、既設定のユーザのジェスチャまたはメニューを利用して入力される。

オブジェクト１９１１に係わる既設定の入力インターフェースについての情報は、編集ウィンドウ１９２１に基づいて受信されたユーザの入力によって変更された入力インターフェース情報によってアップデートされる（画面１９２０及び画面１９３０）。図１９において、オブジェクト１９１１について既設定であった前面入力部２０３は、背面入力部２０４に変更される。

図２０は、図３のオブジェクト制御過程のさらに他の画面を図示している。図２０において、異なる入力インターフェースが設定されたオブジェクト２０１２，２０１３がユーザの入力によって同時に制御されることは、マルチタスキングと理解される。

すなわち、前面入力部２０３を介して、画面２０１０上のオブジェクト２０１２に対するユーザの入力、及び背面入力部２０４を介したオブジェクト２０１３に対するユーザの入力が、画面２０２０に図示されているように、所望位置へのドラッグ・ジェスチャであるならば、オブジェクト２０１２，２０１３のディスプレイ位置は、画面２０３０に図示されているように、同時に変更される。

参照番号２０１４は、ディスプレイされているオブジェクト２０１２の既設定入力インターフェースを示す画面情報を示している。画面情報２０１４は、ディスプレイされているオブジェクト２０１２の既設定入力インターフェースが、前面入力部２０３であることを、ユーザをして直観的に知らしめるものである。

前述の図４ないし図２０の画面は、プロセッサ２１５の動作によって提供される。また、図４ないし図２０について説明したユーザのジェスチャは、前述のところに制限されるものではない。

図２１は、望ましい他の実施形態による、透明ディスプレイ２０１を含むデバイス２００にために遂行されるオブジェクト制御方法のフローチャートである。図２１のオブジェクト制御方法も、プロセッサ２１５によって遂行される。

図２１において、図３のオブジェクト制御段階は、オブジェクト回転段階、及びオブジェクトの既設定入力インターフェースをアップデートする段階に変更される。従って、図２１の段階Ｓ２１０１ないし段階Ｓ２１０３は、図３の段階Ｓ３０１ないし段階Ｓ３０３と同一であるので、以下において重複説明は省略する。

段階Ｓ２１０３で判断した結果、ユーザの入力が、オブジェクトの既設定入力インターフェース（例えば、前面入力部２０３または背面入力部２０４）を介して受信され、一方向に既設定の長さ以上移動されるユーザのジェスチャが生じると、プロセッサ２１５は、ユーザのジェスチャに対応する方向にオブジェクトを回転させながら、オブジェクトの既設定入力インターフェースを他の入力インターフェースに変更する（Ｓ２１０４）。従って、もしオブジェクトの既設定入力インターフェースが、前面入力部２０３であるならば、オブジェクトの入力インターフェースは、ユーザの入力及びユーザのジェスチャによって、背面入力部２０４に変更される。前述のように、各オブジェクトの入力インターフェースが独立して指定されるので、さらに多様な形態を有するユーザ・インターフェースが可能であり、両面の使用による具現の複雑度を低減させることができる。また、図１でのように、１画面上にディスプレイされている複数のオブジェクトに対して、互いに異なる入力インターフェースが設定されてもよい。

図２２Ａは、複数のオブジェクト２２０２〜２２１０のうち、オブジェクト２２１０を回転させ、オブジェクト２２１０に係わる入力インターフェースを変更する画面の例を図示している。すなわち、画面２２４０上において、オブジェクト２２１０に対して、方向（２２１２）に移動されるユーザのジェスチャ２２１１が生じ、画面２２５０及び画面２２６０に図示されているように、オブジェクト２２１０が回転される。画面２２６０上において、オブジェクト２２１０が１８０°回転され、オブジェクト２２１０のイメージの背面と前面とが変更される。

オブジェクト２２１０の回転によって、オブジェクト２２１０のディスプレイ面が変更されると、プロセッサ２１５は、オブジェクト２２１０に係わる既設定の入力インターフェースを、背面入力部２０４に変更する（Ｓ２１０４）。

図２２Ｂは、前面入力部２０３及び背面入力部２０４に対して、異なるオブジェクトが設定されているために、オブジェクト２２１０が他の機能を遂行する場合、オブジェクト２２４１の回転によって、前面入力部２０３及び背面入力部２０４に対応する機能を変更する画面の例を図示している。

すなわち、図２２Ｂは、オブジェクト２２４１の前面入力部２０３を、ミニダイアリー用入力インターフェースに設定したアプリケーションと、背面入力部２０４を、ストア（store）入力インターフェースに設定したアプリケーションとの場合である。画面２２４０，２２５０，２２６０に図示されているように、前述の方向（２２４２）に回転することによって、ストア・アプリケーションは、デバイス２００の前面部にディスプレイされ、ストア・アプリケーションの入力インターフェースは、前面入力部２０３に設定され、ミニダイアリー・アプリケーションは、デバイス２００の背面部にディスプレイされ、ミニダイアリー・アプリケーションの入力インターフェースは、背面入力部２０４に設定される。それによって、デバイス２００は、オブジェクト２２４１の前面入力部２０３を介して受信されるユーザの入力によって、ストアの機能を遂行し、オブジェクト２２４１の背面入力部２０４を介して受信されるユーザの入力によって、ミニダイアリーの機能を遂行することができる。

図２３は、望ましい実施形態による、透明ディスプレイ２０１を含むデバイス２００によって遂行されるガイド表示方法のフローチャートである。ガイド表示方法は、プロセッサ２１５によって遂行される。ガイドは、背面入力部２０４に対して、ユーザの入力が感知された位置（タッチ位置）を示す情報を含んでもよい。

プロセッサ２１５は、任意のアプリケーションの実行によって、少なくとも１つのオブジェクトをディスプレイ部２０３にディスプレイする（Ｓ２３０１）。入力部２０４がディスプレイされているオブジェクトに係わる既設定の入力インターフェースと係わりなく、ユーザの入力を受信すると（Ｓ２３０２）、該ガイドは、ユーザの入力が受信された位置をディスプレイする（Ｓ２３０３）。該ガイドは、ユーザの入力が受信された地点にディスプレイされているオブジェクトの状態、またはディスプレイ部２０３の状態に基づいて、可変的にディスプレイされる。該ガイドは、インジケータ（indicator）ともいわれる。

オブジェクトの状態、またはディスプレイ部２０３の状態は、透明度に基づいた状態を含んでもよい。従って、ガイドは、オブジェクトの透明度、またはディスプレイ部２０３の透明度によって、他のイメージまたは他の透明度を有するガイドをディスプレイすることができる。前記オブジェクトの透明度は、オブジェクトに隣接した領域の透明度も考慮することができる。ディスプレイ部２０３の状態は、タッチ強度を含んでもよい。

図２４は、ガイドをディスプレイする画面の例を図示している。図２４の画面２４００は、テキスト（text）４オブジェクトに対するユーザの入力２４０１が、背面入力部２０４を介して感知されることにより、仮想ガイド２４０２がテキスト４オブジェクトの位置にディスプレイされ、ユーザは、背面入力部２０４を介して、リストに含まれたテキスト４オブジェクトがタッチされているということを直観的に知ることができる。また、ガイドの透明度変化により、ユーザは、背面入力部２０４をタッチするために使用されるタッチ強度を直観的に知ることができる。

画面２４１０は、選択されたオブジェクトがディスプレイされている全ての面に、仮想ガイドをディスプレイする。画面２４１０は、テキスト４オブジェクトに対して、背面入力部２０４を介したユーザタッチが生じたということをユーザが直観的に知ることができる。テキスト４オブジェクトのフィールドのカラーは、タッチ強度によって可変にもなる。

また、画面２４２０に図示されているように、背面入力部２０４をタッチした後でドラッグし、オブジェクト２４２１を方向（２４２２）に移動するとき、背面入力部２０４に対するタッチが維持される間、前面入力部２０３を介してオブジェクト２４２１がタッチされる場合、オブジェクト２４２１に対する背面入力部２０４で遂行される動作が続く。すなわち、オブジェクト２４２１をタッチした後でドラッグし、方向（２４３１）にオブジェクト２４２１を移動する動作は、画面２４３０に図示されているように、続けて遂行される。

図２５は、望ましい実施形態によるデバイスの機能ブロック図である。

図２５を参照すると、デバイスは、透明ディスプレイ２５０１、プロセッサ２５０２及び保存部２５０３を含む。

透明ディスプレイ２５０１は、図２Ａの透明ディスプレイ２０１のように、前面入力部２０３、背面入力部２０４及びディスプレイ部２０２を含む。透明ディスプレイ２５０１は、前面入力部２０３及び背面入力部２０４のうち少なくとも一つを介して、タッチ入力を受信し、ユーザのタッチ入力に対応するオブジェクトをディスプレイする。

保存部２５０３は、少なくとも１つのオブジェクトに係わる既設定の入力インターフェースについての情報と、望ましい実施形態によるガイド制御方法及びガイドディスプレイ方法を実行するためのプログラムと、を保存する。すなわち、図２６に図示されたソフトウェア構造図によるデータが、保存部２５０３に保存される。図２Ａの保存部２１１も、図２６に図示されたソフトウェア構造図によるプログラム及び資源を保存することができる。

特に、図２６の各オブジェクトのタッチモード、または既設定のユーザ入力インターフェースに係わる設定値を含むタッチモードデータ（touch mode data）２６１２、入力タッチを区分するタッチ入力区分モジュール（touch input classification module）２６２２及びタッチモード評価モジュール（touch mode estimation module）２６６４が主に使用される。

図２６は、望ましい実施形態による透明ディスプレイを含むデバイスの保存部に保存されるソフトウェア階層について説明するための図面である。

図２６を参照すると、ソフトウェア階層は、ストレージ・モジュール（storage module）２６００、センサ認識モジュール（sensor & recognition module）２６２０、メッセージング・モジュール（messaging module）２６５０、テレフォニー・モジュール（telephony module）２６４０、マルチメディア・モジュール（multimedia module）２６６５、ＵＩ＆グラフィック・モジュール２６６１、並びにレジェンド・モジュール（legend module）２６７０を含むが、それらに制限されるものではない。

ストレージ・モジュール２６００は、住所録、環境情報のような一般的なデータ保存所であるシステムデータベース（system ＤＢ）２６１１、及び本発明による各オブジェクトのタッチモードに係わる設定値を保存するタッチモードデータ領域２６１２を含む。

センサ認識モジュール２６２０は、前面入力部２０３及び背面入力部２０４でのタッチを認識するモジュール（touch recognition）２６２１、入力タッチを区分するモジュール２６２２を含む。入力タッチを区分するモジュール２６２２は、前面入力部２０３に対する入力をイベント処理器（Ｘ１１）２６６２に伝達する前面入力モード（front）２６２３、背面入力部２０４に対する入力をイベント処理器２６６２に伝達する背面入力モード（back）２６２４、両面（前面入力部２０３及び背面入力部２０４）タッチに対する入力をイベント処理器に伝達するデュアルモード（dual）２６２５を含む。

メッセージング・モジュール２６５０は、インターネット連結を介して、ユーザ間対話に係わるインスタント・モジュール（instant messenger）２６５１、短文メッセージサービス（ＳＭＳ）テキストメッセージ及びマルチメディアメッセージに係わるモジュール（ＳＭＳ＆ＭＭＳ）２６５２、電子メールのためのモジュール（Ｅ−mail）２６５３を含む。

テレフォニー・モジュール２６４０は、電話連結が可能にする情報検索モジュール（information retrieval module）２６４２、ＶｏＩＰ（voice over internet protocol）基盤で、インターネットを介して音声を伝送する音声サービス・モジュール２６４１を含む。

マルチメディア・モジュール２６６５は、動画再生モジュール（player）２６６６、動画及びスチール写真撮影モジュール（camcoder）２６６７、音声再生モジュール（sound）２６６８を含む。

ＵＩ＆グラフィック・モジュール２６６１は、ウィンドウマネジャによって、タッチ入力を受信するためのＸ１１モジュール２６６２、スクリーン上で、ユーザによって見ることができる全てのオブジェクトを出力する（２Ｄ／３ＤＵＩ toolkit）２６６３、及び各オブジェクト用に保存されたモード設定値と、現在タッチ入力とに係わる推定モジュール（estimation module）２６６４を含む。

前述のように、多様な構造を有するプログラムが保存部２５０３に保存されるが、図２６に図示されたところに制限されるものではない。

プロセッサ２５０２は、保存部２５０３に保存されたプログラムを使用して、前述の望ましい実施形態による動作を遂行することができる。プロセッサ２５０２は、少なくとも１つのオブジェクトをディスプレイするために、透明ディスプレイを制御し、少なくとも１つの入力インターフェースを介して受信されるユーザの入力が、オブジェクトに対して既設定の入力インターフェースに入力されたか否かということを判断し、判断に基づいてオブジェクトを制御する。

望ましい実施形態によるオブジェクト制御方法、またはガイドディスプレイ方法をコンピュータで具現する方法を遂行させる命令語を含む一つ以上のプログラムは、コンピュータで読取り可能な記録媒体に、コンピュータで読取り可能なコードとして記録されることが可能である。コンピュータで読取り可能な記録媒体は、コンピュータ・システムによって読み取り可能なデータが保存される全種の保存装置を含む。コンピュータで読取り可能な記録媒体の例としては、ＲＯＭ（read-only memory）、ＲＡＭ（random-access memory）、ＣＤ（compact disc）−ＲＯＭ、磁気テープ、フロッピー（登録商標）ディスク、光データ保存装置などがある。また、コンピュータで読取り可能な記録媒体は、ネットワークに連結されたコンピュータ・システムに分散され、分散方式でコンピュータで読取り可能なコードとして保存されて実行される。

以上、本発明に対して、その望ましい実施形態を中心に説明した。本発明が属する技術分野で当業者であるならば、本発明が、本発明の本質的な特性から外れない範囲で変形された形態に具現されるということを理解することができるであろう。従って、開示された実施形態は、限定的な観点ではなく、説明的な観点から考慮されなければならない。本発明の範囲は、前述の説明ではなく、特許請求の範囲に示されており、それと同等な範囲内にある全ての差異は、本発明に含まれたものであると解釈されなければならない。

２００デバイス
２０１透明ディスプレイ
２０２ディスプレイ部
２０３前面入力部
２０４背面入力部
２０５ユーザ入力部
２０６センシング部
２０７カメラ
２０８オーディオ入力部
２０９オーディオ信号処理部
２１０オーディオ出力部
２１１保存部
２１２通信部
２１３ポート
２１４電源部
２１５プロセッサ
１４０−１透明ディスプレイ
１４１−１透明基板
１４２−１透明トランジスタ層
１４３−１第１透明電極
１４４−１透明有機発光層
１４５−１第２透明電極
１４６−１連結電極
１４７−１，１４８−１誘電膜
４０１第１オブジェクト
４０２第２オブジェクト
４０２〜４１０オブジェクト
４０４フォルダアイコン
４１０画面
４０４’ フォルダアイコン
４２０画面
５１０，５２０画面
６０１進行バー
６１０〜６５０画面
７１０，７２０，７３０，７４０画面
７１１，７１２ウィンドウ
７３１第１オブジェクト
８０１〜８０３オブジェクト
８１０，８２０，８３０画面
９１０，９２０，９３０，９４０画面
９１１オブジェクト
１００１オブジェクト
１０１０，１０２０画面
１０２１，１０２２，１０２３領域
１１００，１１１０〜１１４０画面
１１０１オブジェクト
１２００，１２１０，１２２０画面
１２０１オブジェクト
１２２１メディアボリューム制御
１３００，１３１０，１３２０，１３３０画面
１３０１オブジェクト
１４００，１４１０，１４２０画面
１５１０，１５４０画面
１５１１オブジェクト
１６１０画面
１６１１オブジェクト
１７１０，１７２０，１７３０画面
１７１３オブジェクト
１８１０，１８２０，１８３０画面
１８１１オブジェクト
１９１０，１９２０，１９３０画面
１９１１オブジェクト
１９２１編集ウィンドウ
２０１０，２０２０，２０３０画面
２０１２，２０１３オブジェクト
２０１４画面情報
２２０２〜２２１０オブジェクト
２２４０，２２５０，２２６０画面
２４００，２４１０，２４２０，２４３０画面
２４０２仮想ガイド
２４２１オブジェクト
２５０１透明ディスプレイ
２５０２プロセッサ
２５０３保存部
２６００ストレージ・モジュール
２６１１システムデータベース
２６１２タッチモードデータ
２６２０センサ認識モジュール
２６２１モジュール
２６２２タッチ入力区分モジュール
２６２３前面入力モード
２６２４背面入力モード
２６２５デュアルモード
２６４０テレフォニー・モジュール
２６５０メッセージング・モジュール
２６５１インスタント・モジュール
２６５２，２６５３モジュール
２６６１グラフィック・モジュール
２６６２イベント処理器
２６６３２Ｄ／３ＤＵＩｔｏｏｌｋｉｔ
２６６４推定モジュール
２６６５マルチメディア・モジュール
２６６６動画再生モジュール
２６６７写真撮影モジュール
２６６８音声再生モジュール
２６７０レジェンド・モジュール

Claims

透明ディスプレイを含むデバイスによって遂行されるオブジェクト制御方法において、
前記透明ディスプレイに、第１オブジェクトと第２オブジェクトをディスプレイし、前記第１オブジェクトと前記第２オブジェクトは、互いに異なるものである段階と、
前記第１オブジェクトと前記第２オブジェクトがディスプレイされている間に前記透明ディスプレイの第１面を介して前記第１オブジェクトに対するタッチ入力が受信されることにより、前記第１オブジェクトに対応するオブジェクト特定機能を行う段階と、
前記第１オブジェクトと前記第２オブジェクトがディスプレイされている間に前記透明ディスプレイの第２面を介して前記第２オブジェクトに対するタッチ入力が受信されることにより、前記第２オブジェクトに対応するオブジェクト特定機能を行う段階を含み、
前記第１面上の前記第１オブジェクトのディスプレイ領域の一部は、前記第２面上の前記第２オブジェクトのディスプレイ領域の一部と重なり、
前記第１オブジェクトに対する前記タッチ入力及び前記第２オブジェクトに対する前記タッチ入力の受信に応答し、
前記第１オブジェクトに対応する前記オブジェクト特定機能と前記第２オブジェクトに対応する前記オブジェクト特定機能とを同時に制御する段階を含む
ことを特徴とするデバイスによって遂行されるオブジェクト制御方法。
前記第１面は、前記透明ディスプレイの前面と、前記透明ディスプレイの背面とのうち一つであり、
前記第２面は、前記透明ディスプレイの前面と、前記透明ディスプレイの背面とのうち他の一つである
ことを特徴とする請求項１に記載のデバイスによって遂行されるオブジェクト制御方法。
前記第２オブジェクトは前記第１オブジェクトの前面上にディスプレイされ、
前記第２オブジェクトに対応するオブジェクト特定機能は、前記第２オブジェクトのディスプレイ状態を変更する段階を含む
ことを特徴とする請求項１に記載のデバイスによって遂行されるオブジェクト制御方法。
前記第１オブジェクトは、第１階層の下に、第２階層の上にディスプレイされている前記第２オブジェクトに部分的に重なった前記第１階層の上にディスプレイされ、
前記第２オブジェクトに対応するオブジェクト特定機能は、前記第２オブジェクトを移動させる段階を含む
ことを特徴とする請求項１に記載のデバイスによって遂行されるオブジェクト制御方法。
前記第１オブジェクトは、第１階層の下に、第２階層の上にディスプレイされている前記第２オブジェクトに部分的に重なった前記第１階層の上にディスプレイされ、
前記第２オブジェクトに対応するオブジェクト特定機能は、前記第１オブジェクトの上に、前記第２オブジェクトをディスプレイする段階を含む
ことを特徴とする請求項１に記載のデバイスによって遂行されるオブジェクト制御方法。
前記第１面と前記第２面のうち、少なくとも１つの既設定領域以上を活性化するタッチ入力が受信されることにより、
前記既設定領域以上を活性化する前記タッチ入力が受信される前記透明ディスプレイの前記第１面と前記第２面のうち、少なくとも１つの透明度を最大値として設定する段階を含む
ことを特徴とする請求項１に記載のデバイスによって遂行されるオブジェクト制御方法。
前記既設定領域以上を活性化する前記タッチ入力が、既設定の時間より短時間維持されると、前記既設定領域以上を活性化する前記タッチ入力が受信される前の前記透明ディスプレイの前記第１面及び前記第２面のうち、少なくとも１つの前記透明度にリターンされる段階をさらに含む
ことを特徴とする請求項６に記載のデバイスによって遂行されるオブジェクト制御方法。
前記方法は、
前記第１オブジェクトと前記第２オブジェクトのうち１つに対する前記透明ディスプレイの表面に係る編集要請に応答し、前記第１オブジェクトと前記第２オブジェクトのうち少なくとも１つに対する前記第１面と前記第２面のうち、少なくとも１つを選択するための情報を編集ウィンドウをディスプレイする段階と、
前記編集ウィンドウを介したユーザの入力により、前記第１オブジェクトと前記第２オブジェクトのうち少なくとも１つに対応する面を割当てる段階と、
前記割当てに基づいて前記第１オブジェクト及び前記第２オブジェクトに対応する前記面についての情報をアップデートする段階と、を含む
ことを特徴とする請求項１に記載のデバイスによって遂行されるオブジェクト制御方法。
前記第１オブジェクトに対する前記タッチ入力が、前記第１面を介して一方向に既設定の長さ以上移動することを含み、
前記第１オブジェクトに対応するオブジェクト特定機能は、前記タッチ入力に対応する方向に、前記第１オブジェクトを回転させ、前記第１面から前記第２面に変更する段階を含み、
前記第２オブジェクトに対する前記タッチ入力が、前記第２面を介して一方向に既設定の長さ以上移動することを含み、
前記第２オブジェクトに対応するオブジェクト特定機能は、前記タッチ入力に対応する方向に、前記第２オブジェクトを回転させ、前記第２面を前記第１面に変更する段階を含む
ことを特徴とする請求項１に記載のデバイスによって遂行されるオブジェクト制御方法。
前記第２オブジェクトに対応する前記オブジェクト特定機能は、前記第２オブジェクトの状態または前記透明ディスプレイの状態に基づいた前記タッチ入力に対応するインジケータを可変的にディスプレイする段階を含む
ことを特徴とする請求項１に記載のデバイスによって遂行されるオブジェクト制御方法。
請求項１に記載の方法を遂行するためのコンピュータによって実行される命令語が記録されたコンピュータで読み取り可能な記録媒体。
オブジェクト制御方法を遂行するデバイスにおいて、
第１オブジェクト及び、第２オブジェクトをディスプレイする透明ディスプレイと、
前記透明ディスプレイの第１面及び第２面のうち少なくとも一つを介してタッチ入力を受信する入力インターフェースと、
前記第１オブジェクト、前記第２オブジェクト、前記第１面及び前記第２面についての情報を保存する保存器と、
前記第１オブジェクト及び前記第２オブジェクトがディスプレイされている間に前記透明ディスプレイの前記第１面を介して前記第１オブジェクトに対するタッチ入力が受信されることにより、前記第１オブジェクトに対応するオブジェクト特定機能を行い、
前記第１オブジェクト及び前記第２オブジェクトがディスプレイされている間に前記透明ディスプレイの前記第２面を介して前記第２オブジェクトに対するタッチ入力が受信されることにより、前記第２オブジェクトに対応するオブジェクト特定機能を行うプロセッサを含み、
前記第１オブジェクトと前記第２オブジェクトは、互いに異なり、前記第１面上の前記第１オブジェクトのディスプレイ領域の一部は、前記第２面上の前記第２オブジェクトのディスプレイ領域の一部と重なり、
前記プロセッサは、
前記第１オブジェクトに対する前記タッチ入力及び前記第２オブジェクトに対する前記タッチ入力の受信に応答し、
前記第１オブジェクトに対応する前記オブジェクト特定機能と前記第２オブジェクトに対応する前記オブジェクト特定機能とを同時に制御する
ことを特徴とするデバイス。