JP2024519327A - ディスプレイ装置 - Google Patents
ディスプレイ装置 Download PDFInfo
- Publication number
- JP2024519327A JP2024519327A JP2023569780A JP2023569780A JP2024519327A JP 2024519327 A JP2024519327 A JP 2024519327A JP 2023569780 A JP2023569780 A JP 2023569780A JP 2023569780 A JP2023569780 A JP 2023569780A JP 2024519327 A JP2024519327 A JP 2024519327A
- Authority
- JP
- Japan
- Prior art keywords
- input
- touch input
- specific
- display device
- specific direction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012905 input function Methods 0.000 claims abstract description 46
- 238000004891 communication Methods 0.000 description 29
- 230000006870 function Effects 0.000 description 22
- 238000010586 diagram Methods 0.000 description 18
- 230000004044 response Effects 0.000 description 9
- 230000005236 sound signal Effects 0.000 description 8
- 238000000034 method Methods 0.000 description 7
- 238000012545 processing Methods 0.000 description 5
- 230000008859 change Effects 0.000 description 4
- 230000001133 acceleration Effects 0.000 description 2
- 238000012790 confirmation Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000004886 process control Methods 0.000 description 1
- 239000004984 smart glass Substances 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
- G06F3/03543—Mice or pucks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/0485—Scrolling or panning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/0486—Drag-and-drop
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Position Input By Displaying (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本開示は、タッチ入力を受信するユーザ入力部、アプリケーションから提供する画面を出力するディスプレイ部、前記アプリケーションのタッチ入力の支援をするのか否かを判断し、前記アプリケーションがタッチ入力を支援しない場合、マウス入力機能を支援するのか否かを判断し、前記マウス入力機能を支援するのか否かに基づいて、前記タッチ入力に対応する機能を実行するディスプレイ装置を提供する。
Description
本開示は、タッチ入力を利用してディスプレイ装置を制御する方法に関するものである。
ディスプレイ装置は、ユーザが視聴できる映像を受信、処理及び表示する機能を備えた装置である。ディスプレイ装置は、例えば放送局から送出される放送信号のうちユーザが選択した放送信号を受信し、受信した信号から映像信号を分離し、分離された映像信号を再びディスプレイに表示する。
一方、TVのようなディスプレイ装置でもスマートフォンのような多様なアプリケーションが駆動されるようになり、チャンネル変更、ボリューム調節だけではなく、動作されているアプリケーションを制御するための方法が必要となった。
また、ユーザ入力方式の多様化により、リモートコントロール装置を利用したユーザ入力、ユーザタッチ入力によるユーザ入力が提供され、これによりディスプレイ装置は、ユーザタッチ入力が受信される場合、当該タッチ入力のユーザの意図を把握してユーザが意図した機能を実行する方式でディスプレイ装置を制御することができた。
一方、タッチ入力による動作が実行されるためには、ディスプレイ装置だけではなくアプリケーションもタッチ入力に対応する機能を受信できなければならないが、ディスプレイ装置は、タッチ入力を受信することができるが、現在実行中のアプリケーションの種類によってタッチ入力に対応する機能を提供しない場合、ユーザタッチ入力に対応する機能が実行されない問題が発生した。
本開示の目的は、ディスプレイ装置で提供されるアプリケーションがタッチ入力機能を支援しない場合、ユーザのタッチ入力をマウス入力に転換してユーザタッチ入力に対応する命令を実行するディスプレイ装置を提供することにある。
本開示の目的は、ディスプレイ装置で提供されるアプリケーションがタッチ入力機能を支援しない場合、ユーザのタッチ入力を方向キー入力に転換してユーザタッチ入力に対応する命令を実行するディスプレイ装置を提供することにある。
本開示の実施例に係るディスプレイ装置は、タッチ入力を受信するユーザ入力部、アプリケーションから提供する画面を出力するディスプレイ部、前記アプリケーションのタッチ入力の支援をするのか否かを判断し、前記アプリケーションがタッチ入力を支援しない場合、マウス入力機能を支援するのか否かを判断し、前記マウス入力機能を支援するのか否かに基づいて、前記タッチ入力に対応する機能を実行することができる。
また、前記画面は、少なくとも1つのコンテンツを含み、前記アプリケーションがマウス入力機能を支援する場合、前記制御部は、前記タッチ入力をマウス入力に転換し、前記マウス入力に相応する機能を実行することができる。
また、前記タッチ入力が特定位置のタッチである場合、前記制御部は、前記タッチ入力を前記特定位置のマウスクリック入力に転換し、前記特定位置に前記マウスクリック入力を実行することができる。
また、前記制御部は、前記タッチ入力が前記コンテンツに対するロングプレス入力である場合、前記タッチ入力を前記コンテンツに対するロングクリック入力に転換し、前記コンテンツに対するロングクリック入力に対応する前記コンテンツに対する詳細情報を出力することができる。
また、前記タッチ入力が特定位置をタッチして特定方向にドラッグである場合、前記制御部は、前記タッチ入力を前記特定位置をクリックして前記特定方向にマウスドラッグ入力に転換し、前記特定位置が前記特定方向に対応する方向に移動された画面を出力することができる。
また、前記タッチ入力が特定位置をタッチして特定方向にドラッグである場合、前記制御部は、前記タッチ入力を前記特定位置をクリックして前記特定方向にマウスドラッグ入力に転換し、前記特定位置が前記特定方向に対応する方向に移動された画面を出力することができる。
また、前記制御部は、1つのカテゴリーに含まれた複数のコンテンツを特定方向に羅列して出力し、前記タッチ入力が前記複数のコンテンツのうちいずれか1つをタッチして前記特定方向にドラッグである場合、前記タッチ入力をタッチされたコンテンツをクリックして前記特定方向にマウスドラッグ入力に転換し、前記特定方向に前記複数のコンテンツが移動された画面を出力することができる。
また、前記タッチ入力がロングプレス入力以後特定方向にドラッグである場合、前記制御部は、前記タッチ入力を再生中のコンテンツの現在時点をクリックして前記特定方向にマウスドラッグ入力に転換し、現在時点から特定方向にマウスドラッグ入力だけ時点が進行したコンテンツを出力することができる。
また、前記制御部は、ディスプレイ部を介してコンテンツの再生進行程度を表わすプログレスバーを出力し、前記タッチ入力が特定地点をタッチして特定方向にドラッグである場合、前記タッチ入力を前記プログレスバーをクリックして前記特定方向にマウスドラッグ入力に転換し、現在時点から特定方向だけ時点が進行したコンテンツを出力することができる。
また、前記制御部は、前記タッチ入力に対応する前記マウス入力機能をガイドするためのガイドウィンドウを出力することができる。
また、前記制御部は、前記タッチ入力に対応する前記マウス入力機能をガイドするためのガイドウィンドウを出力することができる。
また、前記ガイドウィンドウは、ユーザの手の動きをガイドするガイドイメージ及び前記「ユーザ入力に対応する前記マウス入力機能」に応じた画面移動方向に対するガイドイメージのうち少なくとも1つを含むことができる。
また、前記画面は、少なくとも1つのコンテンツを含み、前記制御部は、前記アプリケーションが前記マウス入力機能を支援しない場合、前記タッチ入力を方向キー入力に転換し、前記方向キー入力に対応する機能を実行することができる。
また、前記タッチ入力が特定位置のタッチである場合、前記制御部は、前記タッチ入力を前記特定位置の選択入力に転換し、前記特定位置に前記選択入力を実行することができる。
また、前記タッチ入力が特定位置をタッチして特定方向にドラッグである場合、前記制御部は、前記特定方向と反対方向に対応する第1方向の方向キー入力に転換し、前記特定位置が前記特定方向に対応する方向に移動された画面を出力することができる。
また、前記制御部は、1つのカテゴリーに含まれた複数のコンテンツを特定方向に羅列して出力し、前記タッチ入力が前記複数のコンテンツのうちいずれか1つをタッチして前記特定方向にドラッグである場合、前記タッチ入力をタッチされたコンテンツを選択し、前記特定方向と反対方向に対応する第1方向の方向キー入力に転換し、前記特定方向に前記複数のコンテンツが移動された画面を出力することができる。
また、前記タッチ入力がロングプレス入力以後特定方向にドラッグである場合、前記制御部は、前記タッチ入力を再生中のコンテンツの現在時点を選択し、前記特定方向に方向キー入力に転換し、現在時点から前記特定方向に方向キー入力だけ時点が進行したコンテンツを出力することができる。
また、前記制御部は、ディスプレイ部を介してコンテンツの再生進行程度を表わすプログレスバーを出力し、前記ユーザ入力が前記プログレスバー上の特定時点をタッチして特定方向にドラッグである場合、前記特定方向に対応する第1方向の方向キー入力であると判断し、前記コンテンツの特定時点から特定方向に前記方向キー入力だけ時点が進行したコンテンツを出力することができる。
また、前記制御部は、前記ユーザ入力に対応する前記方向キー入力機能をガイドするためのガイドウィンドウを出力することができる。
また、前記ガイドウィンドウは、ユーザの手の動きをガイドするガイドイメージ及び前記「ユーザ入力に対応する前記方向キー入力機能」に応じた画面移動方向に対するガイドイメージのうち少なくとも1つを含むことができる。
また、前記画面は、スクロールすることができるスクロールバーをさらに含み、前記制御部は、前記タッチ入力がスクロールバーの特定領域をタッチして特定方向にドラッグする入力である場合、前記タッチ入力を前記スクロールバーの特定領域をクリックして前記特定方向にマウスドラッグ入力に転換し、前記特定方向にスクロールされた画面を出力することができる。
また、前記制御部は、前記タッチ入力がスクロールバーの特定領域をタッチして特定方向にドラッグする入力である場合、前記タッチ入力を前記スクロールバーの特定領域を選択し、前記特定方向に方向キー入力に転換し、前記特定方向にスクロールされた画面を出力することができる。
本開示の実施例によればタッチ入力を支援するディスプレイ装置でディスプレイ装置内に設置されたタッチを支援しないアプリケーションが実行されても、マウス入力または方向キー入力に転換してユーザのタッチ入力に対応する命令を実行するようにディスプレイ装置を制御することができる。
本開示の実施例によれば、タッチ入力が実行されていることを表わすガイドを提供して、ユーザにタッチを支援しないアプリケーションにおいてもタッチ入力が可能であるという知らせを提供することができる。
以下、本発明の実施例を図面を参照してより詳しく説明する。以下の説明で用いられる構成要素に対する接尾辞「モジュール」及び「部」は、明細書の作成を容易にするために付与また混用されるものとして、それ自体で相互区別される意味または役割を有するものではない。
図1は、本発明の一実施例に係るディスプレイ装置の構成をブロック図で図示したものである。
図1を参照すると、ディスプレイ装置100は、放送受信部130、外部装置インタフェース部135、貯蔵部140、ユーザ入力インタフェース部150、制御部170、無線通信部173、音声獲得部175、ディスプレイ部180、オーディオ出力部185、電源供給部190を含むことができる。
放送受信部130は、チューナー131、復調部132及びネットワークインタフェース部133を含むことができる。
チューナー131は、チャンネル選局命令に応じて特定放送チャンネルを選局することができる。チューナー131は、選局された特定放送チャンネルに対する放送信号を受信することができる。
復調部132は、受信した放送信号をビデオ信号、オーディオ信号、放送プログラムに関連したデータ信号に分離することができ、分離されたビデオ信号、オーディオ信号及びデータ信号を出力が可能な形態に復元することができる。
ネットワークインタフェース部133は、ディスプレイ装置100をインターネット網を含む有/無線ネットワークと連結するためのインタフェースを提供することができる。ネットワークインタフェース部133は、接続されたネットワークまたは接続されたネットワークにリンクされた他のネットワークを介して、他のユーザまたは他の電子機器とデータを送信または受信することができる。
ネットワークインタフェース部133は、接続されたネットワークまたは接続されたネットワークにリンクされた他のネットワークを介して、所定のウェブページに接続することができる。即ち、ネットワークを介して所定のウェブページに接続して、当該サーバーとデータを送信または受信することができる。
そして、ネットワークインタフェース部133は、コンテンツ提供者またはネットワーク運営者が提供するコンテンツまたはデータを受信することができる。即ち、ネットワークインタフェース部133は、ネットワークを介してコンテンツ提供者またはネットワーク提供者から提供される映画、広告、ゲーム、VOD、放送信号等のコンテンツ及びそれに関連した情報を受信することができる。
また、ネットワークインタフェース部133は、ネットワーク運営者が提供するファームウェアのアップデート情報及びアップデートファイルを受信することができ、インターネットまたはコンテンツ提供者またはネットワーク運営者にデータを送信することができる。
ネットワークインタフェース部133は、ネットワークを介して、公衆に公開(open)されたアプリケーションから所望のアプリケーションを選択して受信することができる。
外部装置インタフェース部135は、隣接する外部装置内のアプリケーションまたはアプリケーションリストを受信し、制御部170または貯蔵部140に伝達することができる。
外部装置インタフェース部135は、ディスプレイ装置100と外部装置の間の連結経路を提供することができる。外部装置インタフェース部135は、ディスプレイ装置100に無線または有線で連結された外部装置から出力された映像、オーディオのうちの1つ以上を受信し、制御部170に伝達することができる。外部装置インタフェース部135は、複数の外部入力端子を含むことができる。複数の外部入力端子はRGB端子、1つ以上のHDMI(High Definition Multimedia Interface)端子、コンポーネント(Component)端子を含むことができる。
外部装置インタフェース部135を介して入力された外部装置の映像信号は、ディスプレイ部180を介して出力される。外部装置インタフェース部135を介して入力された外部装置の音声信号は、オーディオ出力部185を介して出力される。
外部装置インタフェース部135に連結可能な外部装置は、セットトップボックス、ブルーレイプレーヤー、DVDプレーヤー、ゲーム機、サウンドバー、スマートフォン、PC、USBメモリー、ホームシアターのうちいずれか1つであってもよいが、これは例示に過ぎない。
また、ディスプレイ装置100に、予め登録された他のユーザまたは他の電子機器のうち選択されたユーザまたは選択された電子機器に、ディスプレイ装置100に貯蔵された一部のコンテンツデータを送信することができる。
貯蔵部140は、制御部170内の各信号処理及び制御のためのプログラムを貯蔵し、信号処理された映像、音声またはデータ信号を貯蔵することができる。
また、貯蔵部140は、外部装置インタフェース部135またはネットワークインタフェース部133から入力される映像、音声またはデータ信号の臨時貯蔵のための機能をすることもでき、チャンネル記憶機能を介して所定イメージに関する情報を貯蔵することもできる。
貯蔵部140は、外部装置インタフェース部135またはネットワークインタフェース部133から入力されるアプリケーションまたはアプリケーションリストを貯蔵することができる。
ディスプレイ装置100は、貯蔵部140内に貯蔵されているコンテンツファイル(動画ファイル、静止映像ファイル、音楽ファイル、文書ファイル、アプリケーションファイル等)を再生してユーザに提供することができる。
ユーザ入力インタフェース部150は、ユーザが入力した信号を制御部170に伝達したり、制御部170からの信号をユーザに伝達することができる。例えば、ユーザ入力インタフェース部150は、Bluetooth、WB(Ultra Wideband)、ZigBee方式、RF(Radio Frequency)通信方式または赤外線(IR)通信方式等多様な通信方式に応じて、遠隔制御装置200から電源のオン/オフ、チャンネル選択、画面設定等の制御信号を受信して処理したり、制御部170からの制御信号を遠隔制御装置200に送信するように処理することができる。
また、ユーザ入力インタフェース部150は、電源キー、チャンネルキー、ボリュームキー、設定値等のローカルキー(不図示)から入力される制御信号を制御部170に伝達することができる。
制御部170で映像処理された映像信号は、ディスプレイ部180に入力され、当該映像信号に対応する映像として表示される。また、制御部170で映像処理された映像信号は、外部装置インタフェース部135を介して外部出力装置に入力される。
制御部170で処理された音声信号は、オーディオ出力部185にオーディオ出力される。また、制御部170で処理された音声信号は、外部装置インタフェース部135を介して外部出力装置に入力される。
また、制御部170は、ディスプレイ装置100内の全般的な動作を制御することができる。
また、制御部170は、ユーザ入力インタフェース部150を介して入力されたユーザ命令または内部プログラムによってディスプレイ装置100を制御することができ、ネットワークに接続してユーザが所望するアプリケーションまたはアプリケーションリストをディスプレイ装置100内にダウンロードできるようにすることができる。
制御部170は、ユーザが選択したチャンネル情報等が処理した映像または音声信号と一緒にディスプレイ部180またはオーディオ出力部185を介して出力されるようにする。
また、制御部170は、ユーザ入力インタフェース部150を介して受信した外部装置映像再生命令に応じて、外部装置インタフェース部135を介して入力される外部装置、例えばカメラまたはビデオカメラからの映像信号または音声信号がディスプレイ部180またはオーディオ出力部185を介して出力されるようにする。
一方、制御部170は、映像を表示するようにディスプレイ部180を制御することができ、例えばチューナー131を介して入力される放送映像または外部装置インタフェース部135を介して入力される外部入力映像またはネットワークインタフェース部を介して入力される映像または貯蔵部140に貯蔵された映像がディスプレイ部180で表示されるように制御することができる。この場合、ディスプレイ部180に表示される映像は、停止映像または動画であってもよく、2D映像または3D映像であってもよい。
また、制御部170は、ディスプレイ装置100内に貯蔵されたコンテンツまたは受信した放送コンテンツ、外部から入力される外部入力コンテンツが再生するように制御することができ、コンテンツは、放送映像、外部入力映像、オーディオファイル、停止映像、接続されたウェブ画面、及び文書ファイル等多様な形態を有することができる。
無線通信部173は、有線または無線通信を介して外部機器と通信を行うことができる。無線通信部173は、外部機器と近距離通信(Short range communication)を行うことができる。このために、無線通信部173は、Bluetooth(登録商標)、BLE(Bluetooth Low Energy)、RFID(Radio Frequency Identification)、赤外線通信(Infrared Data Association:IrDA)、UWB(Ultra Wideband)、ZigBee、NFC(Near Field Communication)、Wi‐Fi(Wireless‐Fidelity)、Wi‐Fi Direct、Wireless USB(Wireless Universal Serial Bus)技術のうち少なくとも1つを利用して、近距離通信を支援することができる。このような、無線通信部173は、近距離無線通信網(Wireless Area Networks)を介してディスプレイ装置100と無線通信システムの間、ディスプレイ装置100と他のディスプレイ装置100の間または、ディスプレイ装置100とディスプレイ装置100(または外部サーバー)が位置したネットワークの間の無線通信を支援することができる。近距離無線通信網は、WPAN(Wireless Personal Area Networks)であってもよい。
ここで、他のディスプレイ装置100は、本発明によるディスプレイ装置100とデータを交換できる(または連動可能な)ウェアラブルデバイス(wearable device)(例えば、スマートウォッチ(smartwatch)、スマートグラス(smart glass)、HMD(head mounted display))、スマートフォンのような移動端末であってもよい。無線通信部173は、ディスプレイ装置100周辺に、通信可能なウェアラブルデバイスを感知(または認識)することができる。さらに、制御部170は、感知されたウェアラブルデバイスが本発明によるディスプレイ装置100と通信するように認証された(authenticated)デバイスである場合、ディスプレイ装置100で処理されるデータの少なくとも一部を、無線通信部173を介してウェアラブルデバイスに送信することができる。従って、ウェアラブルデバイスのユーザは、ディスプレイ装置100で処理されるデータを、ウェアラブルデバイスを介して利用することができる。
音声獲得部175は、オーディオを獲得することができる。音声獲得部175は、少なくとも1つのマイク(不図示)を含むことができ、マイク(不図示)を介してディスプレイ装置100周辺のオーディオを獲得することができる。
ディスプレイ部180は、制御部170で処理された映像信号、データ信号、OSD信号または外部装置インタフェース部135で受信される映像信号、データ信号等をそれぞれR、G、B信号に変換して駆動信号を生成することができる。
一方、図1に図示されたディスプレイ装置100は、本発明の一実施例に過ぎず、図示された構成要素のうちの一部は、実際具現されるディスプレイ装置100の仕様に応じて統合、追加または省略することができる。
即ち、必要に応じて2以上の構成要素が1つの構成要素として統合されたり、或いは、1つの構成要素が2以上の構成要素に細分されて構成されてもよい。また、各ブロックでなされる機能は、本発明の実施例を説明するためのものであり、その具体的な動作や装置は、本発明の権利範囲を制限するものではない。
本発明のさらに別の実施例によれば、ディスプレイ装置100は、図1に図示されたものとは違って、チューナー131と復調部132を備えず、ネットワークインタフェース部133または外部装置インタフェース部135を介して映像を受信して再生することもできる。
例えば、ディスプレイ装置100は、放送信号または多様なネットワークサービスによるコンテンツを受信するため等のようなセットトップボックス等のような映像処理装置と映像処理装置から入力されるコンテンツを再生するコンテンツ再生装置に分離されて具現されてもよい。
この場合、以下で説明する本発明の実施例に係るディスプレイ装置の動作方法は、図1を参照して説明したようなディスプレイ装置100のみならず、分離されたセットトップボックス等のような映像処理装置または、ディスプレイ部180及びオーディオ出力部185を備えるコンテンツ再生装置のうちいずれか1つによって実行されてもよい。
オーディオ出力部185は、制御部170で音声処理された信号を受信して音声で出力する。
電源供給部190は、ディスプレイ装置100全般にわたって電源を供給する。特に、SOC(System On Chip)の形態に具現できる制御部170と、映像表示のためのディスプレイ部180、及びオーディオ出力のためのオーディオ出力部185等に電源を供給することができる。
具体的に、電源供給部190は、交流電源を直流電源に変換するコンバータと、直流電源のレベルを変換するdc/dcコンバータを備えることができる。
次に、図2~図3を参照して、本発明の一実施例に係る遠隔制御装置に対して説明する。
図2は、本発明の一実施例に係る遠隔制御装置のブロック図であり、図3は、本発明の一実施例に係る遠隔制御装置の実際の構成例を示す。
まず、図2を参照すると、遠隔制御装置200は、指紋認識部210、無線通信部220、ユーザ入力部230、センサ部240、出力部250、電源供給部260、貯蔵部270、制御部280、音声獲得部290を含むことができる。
図2を参照すると、無線通信部220は、前述した本発明の実施例に係るディスプレイ装置のうち任意のいずれか1つと信号を送受信する。
図2を参照すると、無線通信部220は、前述した本発明の実施例に係るディスプレイ装置のうち任意のいずれか1つと信号を送受信する。
遠隔制御装置200は、RF通信規格に応じてディスプレイ装置100と信号を送受信できるRFモジュール221を備え、IR通信規格に応じてディスプレイ装置100と信号を送受信できるIRモジュール223を備えることができる。また、遠隔制御装置200はBluetooth通信規格に応じてディスプレイ装置100と信号を送受信できるBluetoothモジュール225を備えることができる。また、遠隔制御装置200は、NFC(Near Field Communication)通信規格に応じてディスプレイ装置100と信号を送受信できるNFCモジュール227を備え、WLAN(Wireless LAN)通信規格に応じてディスプレイ装置100と信号を送受信できるWLANモジュール229を備えることができる。
また、遠隔制御装置200は、ディスプレイ装置100に遠隔制御装置200の動き等に関する情報が入った信号を無線通信部220を介して伝送する。
一方、遠隔制御装置200は、ディスプレイ装置100が伝送した信号をRFモジュール221を介して受信することができ、必要に応じてIRモジュール223を介してディスプレイ装置100に電源のオン/オフ、チャンネル変更、ボリューム変更等に関する命令を伝送することができる。
ユーザ入力部230は、キーパッド、ボタン、タッチパッドまたはタッチスクリーン等から構成されてもよい。ユーザは、ユーザ入力部230を操作して遠隔制御装置200でディスプレイ装置100に関連した命令を入力することができる。ユーザ入力部230がハードキーボタンを備える場合、ユーザは、ハードキーボタンのプッシュ動作を介して遠隔制御装置200でディスプレイ装置100に関連した命令を入力することができる。これついては、図3を参照して説明する。
図3を参照すると、遠隔制御装置200は、複数のボタンを含むことができる。複数のボタンは、指紋認識ボタン212、電源ボタン231、ホームボタン232、ライブボタン233、外部入力ボタン234、音量調節ボタン235、音声認識ボタン236、チャンネル変更ボタン237、確認ボタン238及び戻るボタン239を含むことができる。
指紋認識ボタン212は、ユーザの指紋を認識するためのボタンであってもよい。一実施例として、指紋認識ボタン212は、プッシュ動作が可能であり、プッシュ動作及び指紋認識動作を受信することもできる。電源ボタン231は、ディスプレイ装置100の電源をオン/オフするためのボタンであってもよい。ホームボタン232は、ディスプレイ装置100のホーム画面に移動するためのボタンであってもよい。ライブボタン233は、ライブ放送プログラムをディスプレイするためのボタンであってもよい。外部入力ボタン234は、ディスプレイ装置100に連結された外部入力を受信するためのボタンであってもよい。音量調節ボタン235は、ディスプレイ装置100が出力する音量の大きさを調節するためのボタンであってもよい。音声認識ボタン236は、ユーザの音声を受信し、受信した音声を認識するためのボタンであってもよい。チャンネル変更ボタン237は、特定放送チャンネルの放送信号を受信するためのボタンであってもよい。確認ボタン238は、特定機能を選択するためのボタンであってもよく、戻るボタン239は、前の画面に戻るためのボタンであってもよい。
図2を再説明する。
ユーザ入力部230がタッチスクリーンを備える場合、ユーザは、タッチスクリーンのソフトキーをタッチして遠隔制御装置200でディスプレイ装置100に関連した命令を入力することができる。また、ユーザ入力部230は、スクロールキーや、ジョグキー等ユーザが操作できる多様な種類の入力手段を備えることができ、本実施例は、本発明の権利範囲を制限するものではない。
ユーザ入力部230がタッチスクリーンを備える場合、ユーザは、タッチスクリーンのソフトキーをタッチして遠隔制御装置200でディスプレイ装置100に関連した命令を入力することができる。また、ユーザ入力部230は、スクロールキーや、ジョグキー等ユーザが操作できる多様な種類の入力手段を備えることができ、本実施例は、本発明の権利範囲を制限するものではない。
センサ部240は、ジャイロセンサ241または加速度センサ243を備えることができ、ジャイロセンサ241は、遠隔制御装置200の動きに関する情報をセンシングすることができる。
例えば、ジャイロセンサ241は、遠隔制御装置200の動作に関する情報をx、y、z軸を基準としてセンシングすることができ、加速度センサ243は、遠隔制御装置200の移動速度等に関する情報をセンシングすることができる。一方、遠隔制御装置200は、距離測定センサをさらに備えることができ、ディスプレイ装置100のディスプレイ部180との距離をセンシングすることができる。
出力部250は、ユーザ入力部230の操作に対応または、ディスプレイ装置100から伝送した信号に対応する映像または音声信号を出力することができる。出力部250を介してユーザは、ユーザ入力部230の操作の有無または、ディスプレイ装置100の制御の有無を認知することができる。
例えば、出力部250は、ユーザ入力部230が操作されるか無線通信部220を介してディスプレイ装置100と信号が送受信されると、点灯するLEDモジュール251、振動を発生する振動モジュール253、音響を出力する音響出力モジュール255または映像を出力するディスプレイモジュール257を備えることができる。
また、電源供給部260は、遠隔制御装置200に電源を供給し、遠隔制御装置200が所定時間の間動いていない場合、電源供給を中断することで電源の浪費を減らすことができる。電源供給部260は、遠隔制御装置200に備えられた所定のキーが操作された場合に、電源供給を再開することができる。
貯蔵部270は、遠隔制御装置200の制御または動作に必要な色様な種類のプログラム、アプリケーションデータ等を貯蔵することができる。もし、遠隔制御装置200がディスプレイ装置100とRFモジュール221を介して無線で信号を送受信する場合、遠隔制御装置200とディスプレイ装置100は、所定の周波数帯域を介して信号を送受信する。
遠隔制御装置200の制御部280は、遠隔制御装置200とペアリングされたディスプレイ装置100と信号を無線で送受信できる周波数帯域等に関する情報を貯蔵部270に貯蔵して参照することができる。
制御部280は、遠隔制御装置200の制御に関連した諸般事項を制御する。制御部280は、ユーザ入力部230の所定のキー操作に対応する信号またはセンサ部240でセンシングした遠隔制御装置200の動きに対応する信号を無線通信部220を介してディスプレイ装置100に伝送することができる。
また、遠隔制御装置200の音声獲得部290は、音声を獲得することができる。
音声獲得部290は、少なくとも1つ以上のマイク291を含むことができ、マイク291を介して音声を獲得することができる。
次に、図4を説明する。
図4は、本発明の実施例に応じて遠隔制御装置を活用する例を示す。
図4の(a)は、遠隔制御装置200に対応するポインタ205がディスプレイ部180に表示されることを例示する。
図4は、本発明の実施例に応じて遠隔制御装置を活用する例を示す。
図4の(a)は、遠隔制御装置200に対応するポインタ205がディスプレイ部180に表示されることを例示する。
ユーザは、遠隔制御装置200を上下、左右に動いたり回転することができる。ディスプレイ装置100のディスプレイ部180に表示されたポインタ205は、遠隔制御装置200の動きに対応する。このような遠隔制御装置200は、図面のように、3D空間上の動きに応じて当該ポインタ205が移動して表示されるので、空間リモコンと命名することができる。
図4の(b)は、ユーザが遠隔制御装置200を左に移動すると、ディスプレイ装置100のディスプレイ部180に表示されたポインタ205もこれに対し対応して左に移動することを例示する。
遠隔制御装置200のセンサを介して感知された遠隔制御装置200の動きに関する情報は、ディスプレイ装置100に伝送される。ディスプレイ装置100は、遠隔制御装置200の動きに関する情報からポインタ205の座標を算出することができる。ディスプレイ装置100は、算出した座標に対応するようにポインタ205を表示することができる。
図4の(c)は、遠隔制御装置200内の特定ボタンを押した状態で、ユーザが遠隔制御装置200をディスプレイ部180から離れるように移動する場合を例示する。これにより、ポインタ205に対応するディスプレイ部180内の選択領域がズームインされて拡大表示される。
逆に、ユーザが遠隔制御装置200をディスプレイ部180に近づくように移動する場合、ポインタ205に対応するディスプレイ部180内の選択領域がズームアウトされて縮小表示される。
一方、遠隔制御装置200がディスプレイ部180から離れる場合、選択領域がズームアウトされ、遠隔制御装置200がディスプレイ部180に近づく場合、選択領域がズームインされる。
また、遠隔制御装置200内の特定ボタンを押した状態では、上下左右の移動の認識が排除される。即ち、遠隔制御装置200がディスプレイ部180から離れるか接近するように移動する場合、上下左右の移動は認識されず、前後の移動のみが認識されるようにすることができる。遠隔制御装置200内の特定ボタンを押していない状態では、遠隔制御装置200の上下左右の移動に応じてポインタ205のみが移動することになる。
一方、ポインタ205の移動速度や移動方向は、遠隔制御装置200の移動速度や移動方向に対応することができる。
一方、ポインタ205の移動速度や移動方向は、遠隔制御装置200の移動速度や移動方向に対応することができる。
一方、本明細書におけるポインタは、遠隔制御装置200の動作に対応して、ディスプレイ部180に表示されるオブジェクトを意味する。従って、ポインタ205で図面に図示された矢印形状以外に多様な形状のオブジェクトが可能である。例えば、点、カーソル、プロンプト、厚い枠線等を含む概念ある。そして、ポインタ205がディスプレイ部180上の横軸と縦軸のうちいずれか1つの地点(point)に対応して表示されるものは勿論、ライン(line)、面(surface)等複数地点に対応して表示されることも可能である。
以下、本開示の実施例に係るディスプレイ装置の動作フローチャートに対して説明する。
まず、本開示の実施例に係るディスプレイ装置100は、ユーザ入力部120をさらに含むことができる。
ユーザ入力部120は、機械式(mechanical)入力手段(または、メカニカルキー、例えばAI装置100の前/後面または側面に位置するボタン、ドームスイッチ(dome switch)、ジョグホイール、ジョグスイッチ等)及びタッチ式入力手段を含むことができる。
一例として、タッチ式入力手段は、ソフトウェア的な処理によりタッチスクリーンに表示される仮想キー(virtual key)、ソフトキー(soft key)またはビジュアルキー(visual key)からなるか、前記タッチスクリーン以外の部分に配置されるタッチキー(touch key)からなることができる。
または、ディスプレイ装置100は、ディスプレイ部で受信するユーザタッチ入力をユーザ入力部120のタッチ式入力手段に対応させて受信することも可能である。
即ち、ユーザはディスプレイ装置100のディスプレイ部をタッチすることでユーザ入力部120にタッチ入力を提供し、制御部はユーザ入力部120を介してユーザからのタッチ入力を受信することができる。
図5は、本開示の実施例に係るディスプレイ装置の動作フローチャートを示したのである。
図5を参照すると、ディスプレイ装置100はアプリケーションを実行することができる(S510)。具体的に、アプリケーションとは、少なくとも1つ以上の映像コンテンツを提供することができ、アプリケーションは、ディスプレイ装置の貯蔵部140に貯蔵されるか、ディスプレイ装置と連結されたサーバーまたはセットトップボックスから提供されてもよい。
例えば、アプリケーションは、映像及びイメージコンテンツ、ウェブブラウザ、スマートガイド、別途のケーブルまたは無線で連結される外部入力コンテンツ等を含むことができる。
ディスプレイ装置100の制御部170は、ディスプレイ部を介してアプリケーションが実行されると、アプリケーションが提供する画面を出力することができる。
本開示の実施例に係る制御部170は、アプリケーションがタッチ入力を支援するのか否かを判断することができる(S520)。
本開示の実施例に係る制御部170は、アプリケーションがタッチ入力を支援するのか否かを判断することができる(S520)。
まず、アプリケーションは、タッチ入力を受信すると、当該タッチ入力に対応する命令を実行する機能を提供するアプリケーションと、タッチ入力に対応する命令を実行する機能を提供しないアプリケーションとに区分することができる。
本開示の実施例に係る制御部170は、現在ディスプレイ装置で動作されるOSにおいて特定アプリケーションが実行中である場合、前記特定アプリケーションが出力された画面にタッチ入力が受信されると、実行中のアプリケーションがタッチ入力を支援するのか否かを判断し、当該タッチ入力に対応する命令を実行する機能をアプリケーションが提供するのか否かを判断することができる。
一般的に、ディスプレイ装置100に搭載されたOSは、実行されるアプリケーションのアプリケーション情報を貯蔵しているので、制御部170は、前記アプリケーション情報を利用して当該アプリケーションがタッチ入力に対応する命令を実行する機能を提供するのか否かを判断することができる。
この時、アプリケーション情報は、アプリケーション種類、設置日付、機能、固有番号等アプリケーション動作に必要な多様な情報を含むことができる。
本開示の実施例に係る制御部170は、OSにより実行されるアプリケーションに含まれたアプリケーション情報を利用してタッチ入力の支援をするのか否かを判断することができる。
本開示の実施例に係る制御部170は、実行中のアプリケーションがタッチ入力を支援する場合、入力部120を介してユーザのタッチ入力を受信してタッチ入力に対応する機能を実行することができる(S531)。
一方、本開示の実施例に係る制御部170は、実行中のアプリケーションがタッチ入力を支援しない場合(S520)、ユーザのタッチ入力を分析し(S530)、アプリケーションがマウス入力機能を支援するのか否かに基づいてタッチ入力に対応する機能を実行することができる(S540)。
具体的に、前記アプリケーションがマウス入力機能を支援する場合、前記制御部は、前記タッチ入力をマウス入力に転換し、前記マウス入力に対応する機能を実行することができる(S552、S562)。
また、前記制御部は、前記アプリケーションが前記マウス入力機能を支援しない場合、前記タッチ入力を方向キー入力に転換し、前記方向キー入力に対応する機能を実行することができる(S551、S561)。
以下、本開示の実施例に係るユーザタッチ入力の種類に対して説明し、それに対応する画面移動及びコンテンツ再生に対して説明する。
まず、本開示の実施例に係る制御部170は、ユーザのタッチ入力を分析することができる(S530)。
この時、ユーザタッチ入力分析は、タッチ入力を提供するディスプレイ装置において、ディスプレイ部180を介して入力されるユーザタッチ入力または入力部を介して入力されるユーザタッチ入力に対応する機能を分析することを意味することができる。
制御部170は、ユーザタッチ入力を分析して当該タッチ入力が特定位置タッチ、特定位置タッチ後ドラッグ、特定位置ロングプレス、プログレスバータッチ後ドラッグ、スクロールバータッチ後ドラッグ等多様なユーザのタッチ入力を認識することができる。
図6は、本開示の実施例に係るタッチ後ドラッグ入力による画面移動を示した図面である。
まず、ディスプレイ装置100でアプリケーションが実行される場合、ディスプレイ装置の制御部170は、少なくとも1つ以上のコンテンツを含むアプリケーションが提供する画面を出力することができる。
ユーザは、前記画面に対してタッチ入力を入力することができる。
本開示の実施例係る制御部170は、ユーザのタッチ入力が前記画面上の特定位置のタッチである場合、前記制御部は、前記タッチ入力を前記特定位置のマウスクリック入力に転換し、前記特定位置に前記マウスクリック入力を実行することができる。
例えば、制御部170は、画面610上の第1コンテンツ613に対してユーザタッチ入力が受信された場合、前記タッチ入力を第1コンテンツ613に対するクリック入力に転換して認識し、第1コンテンツ613を実行することができる。
また、ユーザは、画面の移動のために特定位置をタッチした後ドラッグ入力をすることができる。
また、ユーザは、画面の移動のために特定位置をタッチした後ドラッグ入力をすることができる。
本開示の実施例に係る制御部170は、ユーザのタッチ入力が特定位置611をタッチして特定方向612にドラッグである場合、前記タッチ入力を前記特定位置611をクリックして前記特定方向612にマウスドラッグ入力に転換し、前記特定位置が前記特定方向612に対応する方向に移動された画面を出力することができる。
例えば、図6(a)のように、ユーザのタッチ入力が特定位置611をタッチして特定方向612にドラッグである場合、制御部170は、前記特定位置611をマウスクリックし、前記特定方向612にマウスドラッグ入力に転換して認識することができる。
図6(b)を参照すると、前記マウス入力に応じて、制御部は特定位置611が特定方向612に対応する方向に移動された画面630を出力することができる。
移動された画面630には第1コンテンツ611と異なるコンテンツ631が出力される。
本開示の別の実施例に係る、アプリケーションがマウス入力機能を提供しない場合を説明する。
本開示の実施例に係る制御部170は、前記ユーザのタッチ入力が特定位置のタッチである場合、前記タッチ入力を前記特定位置の選択入力に転換し、前記特定位置に前記選択入力を実行することができる。
例えば、制御部170は、画面上の第1コンテンツ613に対してユーザタッチ入力が受信された場合、前記タッチ入力を第1コンテンツ613に対する選択入力に転換して認識し、第1コンテンツを実行することができる。
また、ユーザは、画面の移動のために特定位置をタッチした後ドラッグ入力をすることができる。
また、ユーザは、画面の移動のために特定位置をタッチした後ドラッグ入力をすることができる。
本開示の実施例に係る制御部170は、ユーザのタッチ入力が特定位置611をタッチして特定方向612にドラッグである場合、前記制御部170は、前記特定方向612と反対方向に対応する第1方向の方向キー入力に転換して前記特定位置611が前記特定方向612に対応する方向に移動された画面を出力することができる。
例えば、図6(a)のように、ユーザのタッチ入力が特定位置611をタッチして特定方向612にドラッグである場合、制御部は、前記特定位置611を選択し、前記特定方向612と反対方向に対応する第1方向の方向キー入力に転換して認識することができる。
図6(b)を参照すると、前記第1方向の方向キー入力に応じて、制御部170は特定位置611が特定方向612に対応する方向に移動された画面630を出力することができる。
即ち、本開示の実施例によれば、ユーザタッチ入力に対応する画面移動及びコンテンツ実行出力結果は、マウス入力機能及び方向キー入力機能に同様の表れることがわかる。
図7は、本開示の実施例に係るタッチ後ドラッグ入力によるコンテンツ移動を示した図面である。
まず、アプリケーションがマウス入力機能を支援する場合に対して説明する。
図7を参照すると、ユーザは、複数のコンテンツがカテゴリー別にまとめられている場合、フォーカシングにされたコンテンツを他のコンテンツに転換したり、カテゴリーに含まれた複数のコンテンツリストを見るためのドラッグタッチ入力を入力することができる。
具体的に、ディスプレイ装置100の制御部170は、1つのカテゴリーに含まれた複数のコンテンツを特定方向に羅列して出力することができる。
この時、ユーザのタッチ入力が前記複数のコンテンツのうちいずれか1つをタッチして前記特定方向にドラッグである場合、制御部は、前記タッチ入力をタッチされたコンテンツをクリックして前記特定方向にマウスドラッグ入力に転換することができる。
制御部170は、ディスプレイ部180を介して特定方向に前記複数のコンテンツが移動された画面を出力することができる。
例えば、図7(a)の画面710には類似するカテゴリーでまとめられたコンテンツ713、714が出力される。
ユーザは、カテゴリーに含まれた複数のコンテンツリストを見るために特定位置711をタッチしたまま特定方向712にドラッグ入力を入力することができる。
この時、特定位置711は、類似するカテゴリーでまとめられたコンテンツのうちいずれか1つ(713)であってもよい。
本開示の実施例に係る制御部170は、前記タッチ入力を特定位置711をクリックしたまま特定方向712にマウスドラッグ入力に転換することができる。
以後、制御部170は、図7(b)のように、前記特定方向712に前記複数のコンテンツ713、714が移動された画面730を出力することができる。
以下、アプリケーションが方向キー入力機能を支援する場合を説明する。
本開示の別の実施例によれば、ユーザタッチ入力が前記複数のコンテンツのうちいずれか1つをタッチして前記特定方向にドラッグである場合、前記制御部170は、前記タッチ入力をタッチされたコンテンツを選択し、前記特定方向と反対方向に対応する第1方向の方向キー入力に転換し、前記特定方向に前記複数のコンテンツが移動された画面を出力することができる。
先述したように図7(a)を参照すると、ユーザは、カテゴリーに含まれた複数のコンテンツリストを見るために特定位置711をタッチしたまま特定方向712にドラッグ入力を入力することができる。
本開示の実施例に係る制御部170は、前記タッチ入力を特定位置711を選択したまま特定方向712と反対方向に対応する第1方向の方向キー入力に転換することができる。
以後、制御部170は、前記特定方向712に前記複数のコンテンツ713、714が移動された画面730を出力することができる。
図8は、本開示の実施例に係るロングプレス入力による画面を示した図面である。
本開示の実施例によれば、ユーザタッチ入力が特定コンテンツに対するロングプレス入力以後特定方向にドラッグである場合、制御部170は、画面に前記特定コンテンツに対する詳細情報を出力することができる。
具体的に、制御部170は、実行中のアプリケーションがマウス入力機能を提供する場合、前記タッチ入力を前記コンテンツに対するロングクリック入力に転換し、前記コンテンツに対するロングクリック入力に対応する前記コンテンツに対する詳細情報を出力することができる。
この時、ロングクリック入力はマウスのクリックした状態で一定時間以上維持する入力を意味することができる。
図8(a)と図8(b)を参照すると、制御部170は特定コンテンツ810に対するユーザのロングプレス入力811が受信される場合、当該ロングプレス入力をコンテンツ810に対するロングクリック入力に転換し、前記コンテンツに対する詳細情報ウィンドウ820を出力することができる。
この時、コンテンツが映像である場合、詳細情報ウィンドウにはコンテンツに対するタイトル、再生時間、日付、予告編、製作者、再生、プレビュー等の情報のうち少なくとも1つを含むことができる。
図9は、本開示の実施例に係る画面移動をガイドするためのガイドウィンドウを示した図面である。
本開示の実施例によりタッチ入力が支援されないアプリケーションであるにもかかわらずタッチ入力による動作が実行される。よって、ディスプレイ装置100は、ユーザにタッチ入力がマウス入力機能または方向キー入力機能に転換されて実行されることを知らせるガイドを出力することができる。
具体的に図9(a)と図9(b)を参照すると、ユーザが第1コンテンツ910に対する特定位置911にタッチ入力を入力すると、前記制御部170は、前記タッチ入力に対応する前記マウス入力機能をガイドするためのガイドウィンドウ920を出力することができる。
例えば、マウス入力機能を提供するアプリケーションの場合、前記ガイドウィンドウは、ユーザの手の動きをガイドするガイドイメージ921とマウス入力機能が実行されていることを表わすカーソルガイドイメージ922及び現在タッチ入力が受信されていることを表わすガイドイメージ923のうち少なくとも1つを含むことができる。
また、マウス入力機能がマウスドラッグに対応する場合、画面移動方向に対するガイドイメージを出力することも可能である。
図10は、本開示の実施例に係る画面移動をガイドするためのガイドウィンドウを示した図面である。
本開示の別の実施例により、方向キー入力機能を提供するアプリケーションの場合、制御部170は、ユーザ入力に対応する前記方向キー入力機能をガイドするためのガイドウィンドウ1120を出力することができる。
具体的に、ユーザの第1コンテンツ1010に対する特定位置1011のタッチ後特定方向1012にドラッグ入力が受信される場合、制御部170は、方向キー入力をガイドするための前記ガイドウィンドウ1020を出力することができる。
前記方向キー入力をガイドするためのガイドウィンドウ1020は、ユーザの手の動きをガイドするガイドイメージ1021及び前記「ユーザ入力に対応する前記方向キー入力機能」に応じた画面移動方向に対するガイドイメージ1022のうち少なくとも1つを含むことができる。
また、制御部170は、ユーザのタッチ入力に応じて画面を特定方向に移動させる場合、当該方向の方向キーを活性化して表わすことも可能である。
図11は、本開示の実施例に係るタッチ入力時画面移動を示した図面である。
一方、アプリケーションが提供する画面には、スクロールバーのように画面を移動させやすいツールが提供されてもよい。ユーザがアプリケーションが提供する画面を移動させるためにスクロールバーにタッチ入力を入力する場合の制御部の動作を説明する。
まず、アプリケーションがマウス入力機能を提供する場合に対して説明する。
本開示の実施例に係る制御部170は、実行中のユーザのタッチ入力がスクロールバーの特定領域をタッチして特定方向にドラッグする入力である場合、前記タッチ入力を前記スクロールバーの特定領域をクリックして前記特定方向にマウスドラッグ入力に転換し、前記特定方向にスクロールされた画面を出力することができる。
本開示の実施例に係る制御部170は、実行中のユーザのタッチ入力がスクロールバーの特定領域をタッチして特定方向にドラッグする入力である場合、前記タッチ入力を前記スクロールバーの特定領域をクリックして前記特定方向にマウスドラッグ入力に転換し、前記特定方向にスクロールされた画面を出力することができる。
例えば図11を参照すると、画面は、スクロールバー1110を含むことができる。制御部170は、ユーザのタッチ入力がスクロールバー1110の特定領域1111をタッチして特定方向1112にドラッグする入力である場合、前記特定領域1111をクリックしたまま特定方向1112にマウスドラッグ入力に転換し、前記特定方向1112にスクロールされた画面を出力することができる。
この時、スクロールされる程度は、ユーザの特定方向1112にドラッグ強度に応じて異なるように設定されてもよい。
以下、アプリケーションが方向キー入力機能を提供する場合に対して説明する。
本開示の別の実施例に係る制御部170は、実行中のユーザのタッチ入力がスクロールバーの特定領域をタッチして特定方向にドラッグする入力である場合、前記タッチ入力を前記スクロールバーの特定領域を選択し、前記特定方向に方向キー入力に転換し、前記特定方向にスクロールされた画面を出力することができる。
例えば図12を参照すると、制御部170は、ユーザのタッチ入力がスクロールバー1110の特定領域1111をタッチして特定方向1112にドラッグする入力である場合、前記特定領域1111を選択したまま特定方向1112に方向キー入力に転換し、前記特定方向1112にスクロールされた画面を出力することができる。
同様に、スクロールされる程度は、ユーザの特定方向1112にドラッグ強度に応じて異なるように設定されてもよい。
一方、制御部170は、前記タッチ入力がスクロールバーの特定領域をタッチしてドラッグする入力がマウス入力機能または方向キー入力機能に転換された場合、特定方向に画面が移動していることを表わすガイドウィンドウ1130を出力することができる。
先述したように、ガイドウィンドウ1130には画面の移動方向に対応するガイドイメージが活性化されて表示されてもよい。
以下図12~図14では、コンテンツが再生されている場合、ユーザのタッチ入力に応じてコンテンツの再生時点を設定する実施例を説明する。
図12は、本開示の実施例に係るタッチ入力時再生時点移動を示した図面である。
図12を参照すると、制御部170は、アプリケーションに含まれたコンテンツを再生することができる。この時、コンテンツは、一定再生時間を有する映像またはイメージデータであってもよい。
ユーザは、コンテンツ再生中一時停止、早送り、巻き戻し及び特定時点に移動等のための多様なタッチ入力を入力することができる。
本開示の実施例に係る制御部170は、ユーザのタッチ入力がロングプレス入力以後特定方向にドラッグである場合、前記タッチ入力を再生中のコンテンツの現在時点をクリックして前記特定方向にマウスドラッグ入力に転換し、現在時点から特定方向にマウスドラッグ入力だけ時点が進行したコンテンツを出力することができる。
例えば、図12を参照すると、ディスプレイ部180にはコンテンツ1210が再生されており、ユーザが当該コンテンツの特定位置1211をロングプレス入力以後特定方向1212(例えば、右側方向)にドラッグする場合、制御部170は、前記タッチ入力を再生中のコンテンツの現在時点をクリックしたまま右側方向にマウスドラッグ入力に転換して認識することができる。
制御部170は、現在時点から右側方向にマウスドラッグ入力だけ時点が進行(1213)したコンテンツ1220を出力することができる。
一方、図13に示されたように、前記制御部170は、ディスプレイ部180を介してコンテンツの再生進行程度を表わすプログレスバー1310を出力することができる。先述と同様に、ユーザのタッチ入力が特定地点1311をタッチして特定方向1312にドラッグである場合、制御部170は、前記タッチ入力を現在時点のプログレスバー1310をクリックし、前記特定方向にマウスドラッグ入力に転換して認識することができる。
また、制御部170は、現在時点1311から特定方向1312にドラッグ強度だけ時点が進行したプログレスバー1313を出力し、前記プログレスバー1313に対応する時点のコンテンツを出力することができる。
本開示の別の実施例によりアプリケーションが方向キー入力を提供する場合を説明する。
本開示の実施例に係る制御部170は、前記タッチ入力がロングプレス入力以後特定方向にドラッグが受信されると、前記タッチ入力を再生中のコンテンツの現在時点を選択し、前記特定方向に方向キー入力に転換することができる。
また制御部170は、現在時点から前記特定方向1312に方向キー入力だけ時点が進行したコンテンツを出力することができる。
また制御部170は、現在時点から前記特定方向1312に方向キー入力だけ時点が進行したコンテンツを出力することができる。
また、前記制御部170は、ディスプレイ部180を介してコンテンツの再生進行程度を表わすプログレスバー1310を出力し、前記ユーザ入力が前記プログレスバー上の特定時点1311をタッチして特定方向1312にドラッグである場合、前記特定方向1312に対応する第1方向の方向キー入力であると判断し、前記コンテンツの特定時点から特定方向に前記方向キー入力だけ時点が進行したコンテンツを出力することができる。
例えば、プログレスバー上の特定時点1311をタッチして右側にドラッグした場合、図13に示されたように、再生中のコンテンツ1310の特定時点1311から右側に方向キー入力だけ時点が進行したコンテンツ1320を出力することができる。
以下、再生時点移動に応じてマウス入力機能または方向キー入力機能のガイドウィンドウを説明する。
図13を参照すると、マウス入力機能が実行されることにより、制御部170は、ディスプレイ部180を介してユーザに再生時点移動をガイドするためのガイドウィンドウ1320を出力することができる。
本開示の実施例に係るガイドウィンドウ1320は、マウス入力機能に応じてユーザの手の動きガイドイメージ1321及びカーソルガイドイメージ1322及び特定方向1312に対応する方向に時点が移動されていることをガイドするイメージ1323のうち少なくとも1つを含むことができる。
制御部170は、ディスプレイ部180を介してユーザがプログレスバーの現在時点1310をタッチして特定方向に移動させて以後時点1313までドラッグする場合、前記ガイドウィンドウ1320に含まれた手の動きガイドイメージとカーソルガイドイメージが移動する効果1323を出力することができる。
前記実施例は、マウス入力機能だけではなく、方向キー入力機能を提供するアプリケーションにも同様に適用することができる。
図14は、本開示の実施例に係るタッチ入力時再生時点移動を示した図面である。
図14を参照すると、方向キー入力機能が実行されることにより、制御部170は、ディスプレイ部180を介してユーザに再生時点移動をガイドするためのガイドウィンドウ1420を出力することができる。
本開示の実施例に係るガイドウィンドウ1420は、方向キー入力機能に応じてユーザの手の動きガイドイメージ1421及び方向キーガイドイメージ1422を含むことができる。
制御部170は、ディスプレイ部180を介してユーザがプログレスバーの現在時点をタッチして特定方向に移動させて以後時点までドラッグする場合だけではなく、コンテンツが再生される途中特定領域1411をタッチして特定方向1412にドラッグする場合にも、前記ガイドウィンドウ1420に含まれた方向キーガイドイメージがコンテンツ再生時点を調節する方向に活性化されたガイドイメージを出力することができる。
以上の説明は、本発明の技術思想を例示的に説明したことに過ぎず、本発明が属する技術分野で通常の知識を有した者であれば、本発明の本質的な特性を逸脱しない範囲内で多様な修正及び変形が可能であろう。
従って、本発明に開示された実施例は、本発明の技術思想を限定するためのものではなく、説明をするためのものであり、このような実施例により本発明の技術思想の範囲が限定されるものではない。
本発明の保護範囲は、添付された請求の範囲によって解釈されるべきであり、それと同等な範囲内にある全ての技術思想は、本発明の権利範囲に含まれると解釈されるべきである。
Claims (20)
- タッチ入力を受信するユーザ入力部と、
アプリケーションから提供する画面を出力するディスプレイ部と、
前記アプリケーションのタッチ入力の支援をするのか否かを判断し、
前記アプリケーションがタッチ入力を支援しない場合、マウス入力機能を支援するのか否かを判断し、
前記マウス入力機能を支援するのか否かに基づいて、前記タッチ入力に対応する機能を実行する、ディスプレイ装置。 - 前記画面は、少なくとも1つのコンテンツを含み、
前記アプリケーションがマウス入力機能を支援する場合、前記制御部は、前記タッチ入力をマウス入力に転換し、前記マウス入力に相応する機能を実行する、請求項1に記載のディスプレイ装置。 - 前記タッチ入力が特定位置のタッチである場合、前記制御部は、前記タッチ入力を前記特定位置のマウスクリック入力に転換し、前記特定位置に前記マウスクリック入力を実行する、請求項2に記載のディスプレイ装置。
- 前記制御部は、前記タッチ入力が前記コンテンツに対するロングプレス入力である場合、前記タッチ入力を前記コンテンツに対するロングクリック入力に転換し、前記コンテンツに対するロングクリック入力に対応する前記コンテンツに対する詳細情報を出力する、請求項2に記載のディスプレイ装置。
前記タッチ入力が特定位置をタッチして特定方向にドラッグである場合、
前記制御部は、前記タッチ入力を前記特定位置をクリックして前記特定方向にマウスドラッグ入力に転換し、
前記特定位置が前記特定方向に対応する方向に移動された画面を出力する、請求項2に記載のディスプレイ装置。 - 前記タッチ入力が特定位置をタッチして特定方向にドラッグである場合、
前記制御部は、前記タッチ入力を前記特定位置をクリックして前記特定方向にマウスドラッグ入力に転換し、
前記特定位置が前記特定方向に対応する方向に移動された画面を出力する、請求項2に記載のディスプレイ装置。 - 前記制御部は、1つのカテゴリーに含まれた複数のコンテンツを特定方向に羅列して出力し、
前記タッチ入力が前記複数のコンテンツのうちいずれか1つをタッチして前記特定方向にドラッグである場合、
前記タッチ入力をタッチされたコンテンツをクリックして前記特定方向にマウスドラッグ入力に転換し、
前記特定方向に前記複数のコンテンツが移動された画面を出力する、請求項2に記載のディスプレイ装置。 - 前記タッチ入力がロングプレス入力以後特定方向にドラッグである場合、
前記制御部は、前記タッチ入力を再生中のコンテンツの現在時点をクリックして前記特定方向にマウスドラッグ入力に転換し、
現在時点から特定方向にマウスドラッグ入力だけ時点が進行したコンテンツを出力する、請求項2に記載のディスプレイ装置。 - 前記制御部は、ディスプレイ部を介してコンテンツの再生進行程度を表わすプログレスバーを出力し、
前記タッチ入力が特定地点をタッチして特定方向にドラッグである場合、
前記タッチ入力を前記プログレスバーをクリックして前記特定方向にマウスドラッグ入力に転換し、
現在時点から特定方向だけ時点が進行したコンテンツを出力する、請求項2に記載のディスプレイ装置。 - 前記制御部は、前記タッチ入力に対応する前記マウス入力機能をガイドするためのガイドウィンドウを出力する、請求項2に記載のディスプレイ装置。
- 前記ガイドウィンドウは、ユーザの手の動きをガイドするガイドイメージ及び前記「ユーザ入力に対応する前記マウス入力機能」に応じた画面移動方向に対するガイドイメージのうち少なくとも1つを含む、請求項9に記載のディスプレイ装置。
- 前記画面は、少なくとも1つのコンテンツを含み、
前記制御部は、前記アプリケーションが前記マウス入力機能を支援しない場合、前記タッチ入力を方向キー入力に転換し、前記方向キー入力に対応する機能を実行する、請求項1に記載のディスプレイ装置。 - 前記タッチ入力が特定位置のタッチである場合、前記制御部は、前記タッチ入力を前記特定位置の選択入力に転換し、前記特定位置に前記選択入力を実行する、請求項11に記載のディスプレイ装置。
- 前記タッチ入力が特定位置をタッチして特定方向にドラッグである場合、前記制御部は、前記特定方向と反対方向に対応する第1方向の方向キー入力に転換し、前記特定位置が前記特定方向に対応する方向に移動された画面を出力する、請求項11に記載のディスプレイ装置。
- 前記制御部は、1つのカテゴリーに含まれた複数のコンテンツを特定方向に羅列して出力し、
前記タッチ入力が前記複数のコンテンツのうちいずれか1つをタッチして前記特定方向にドラッグである場合、
前記タッチ入力をタッチされたコンテンツを選択し、前記特定方向と反対方向に対応する第1方向の方向キー入力に転換し、
前記特定方向に前記複数のコンテンツが移動された画面を出力する、請求項11に記載のディスプレイ装置。 - 前記タッチ入力がロングプレス入力以後特定方向にドラッグである場合、
前記制御部は、前記タッチ入力を再生中のコンテンツの現在時点を選択し、前記特定方向に方向キー入力に転換し、
現在時点から前記特定方向に方向キー入力だけ時点が進行したコンテンツを出力する、請求項11に記載のディスプレイ装置。 - 前記制御部は、ディスプレイ部を介してコンテンツの再生進行程度を表わすプログレスバーを出力し、
前記ユーザ入力が前記プログレスバー上の特定時点をタッチして特定方向にドラッグである場合、前記特定方向に対応する第1方向の方向キー入力であると判断し、前記コンテンツの特定時点から特定方向に前記方向キー入力だけ時点が進行したコンテンツを出力する、請求項11に記載のディスプレイ装置。 - 前記制御部は、前記ユーザ入力に対応する前記方向キー入力機能をガイドするためのガイドウィンドウを出力する、請求項11に記載のディスプレイ装置。
- 前記ガイドウィンドウは、ユーザの手の動きをガイドするガイドイメージ及び前記「ユーザ入力に対応する前記方向キー入力機能」に応じた画面移動方向に対するガイドイメージのうち少なくとも1つを含む、請求項17に記載のディスプレイ装置。
- 前記画面は、スクロールすることができるスクロールバーをさらに含み、
前記制御部は、前記タッチ入力がスクロールバーの特定領域をタッチして特定方向にドラッグする入力である場合、前記タッチ入力を前記スクロールバーの特定領域をクリックして前記特定方向にマウスドラッグ入力に転換し、前記特定方向にスクロールされた画面を出力する、請求項2に記載のディスプレイ装置。 - 前記画面は、スクロールすることができるスクロールバーをさらに含み、
前記制御部は、前記タッチ入力がスクロールバーの特定領域をタッチして特定方向にドラッグする入力である場合、前記タッチ入力を前記スクロールバーの特定領域を選択し、前記特定方向に方向キー入力に転換し、前記特定方向にスクロールされた画面を出力する、請求項11に記載のディスプレイ装置。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/KR2021/005836 WO2022239881A1 (ko) | 2021-05-11 | 2021-05-11 | 디스플레이 장치 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2024519327A true JP2024519327A (ja) | 2024-05-10 |
Family
ID=84028337
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023569780A Pending JP2024519327A (ja) | 2021-05-11 | 2021-05-11 | ディスプレイ装置 |
Country Status (5)
Country | Link |
---|---|
EP (1) | EP4339760A1 (ja) |
JP (1) | JP2024519327A (ja) |
KR (1) | KR102602034B1 (ja) |
CN (1) | CN117321559A (ja) |
WO (1) | WO2022239881A1 (ja) |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8754855B2 (en) * | 2008-06-27 | 2014-06-17 | Microsoft Corporation | Virtual touchpad |
KR20100042762A (ko) * | 2008-10-17 | 2010-04-27 | 주식회사 케이티테크 | 휴대 단말기에서 마우스 인터페이스를 실행하는 방법 및 이를 수행하는 휴대 단말기 |
KR101995234B1 (ko) * | 2012-12-10 | 2019-07-02 | 엘지전자 주식회사 | 단말기 및 그 제어 방법 |
KR101505806B1 (ko) * | 2013-01-07 | 2015-03-25 | 주식회사 인프라웨어 | 터치 스크린 디스플레이에서의 포인터 활성화 및 제어 방법 및 장치 |
KR102015347B1 (ko) * | 2013-01-07 | 2019-08-28 | 삼성전자 주식회사 | 터치 디바이스를 이용한 마우스 기능 제공 방법 및 장치 |
KR101491056B1 (ko) * | 2013-07-16 | 2015-02-10 | 주식회사 틸론 | 터미널 환경의 서버 기반 컴퓨팅 시스템에서 마우스 ui 지원을 위한 터치 스크린 단말 장치 및 마우스 ui 지원 방법 |
KR101574752B1 (ko) * | 2014-09-15 | 2015-12-08 | 주식회사 마스터소프트 | 스마트 기기용 터치 마우스 장치 |
-
2021
- 2021-05-11 CN CN202180098157.0A patent/CN117321559A/zh active Pending
- 2021-05-11 JP JP2023569780A patent/JP2024519327A/ja active Pending
- 2021-05-11 EP EP21942029.6A patent/EP4339760A1/en active Pending
- 2021-05-11 WO PCT/KR2021/005836 patent/WO2022239881A1/ko active Application Filing
- 2021-05-11 KR KR1020227015634A patent/KR102602034B1/ko active IP Right Grant
Also Published As
Publication number | Publication date |
---|---|
CN117321559A (zh) | 2023-12-29 |
KR102602034B1 (ko) | 2023-11-15 |
EP4339760A1 (en) | 2024-03-20 |
WO2022239881A1 (ko) | 2022-11-17 |
KR20220154081A (ko) | 2022-11-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP2960882B1 (en) | Display device and operating method thereof | |
US10560654B2 (en) | Display device | |
KR102402262B1 (ko) | 디스플레이 장치 및 그의 동작 방법 | |
EP3449635B1 (en) | Display device and method of operating the same | |
US10721430B2 (en) | Display device and method of operating the same | |
KR102570379B1 (ko) | 스크린 미러링 기능을 제공하는 디스플레이 장치 및 그의 동작 방법 | |
KR102576388B1 (ko) | 디스플레이 장치 및 그의 동작 방법 | |
EP4319174A2 (en) | Display device and system comprising same | |
KR102654415B1 (ko) | 디스플레이 장치 및 그의 동작 방법 | |
CN110178376A (zh) | 显示装置 | |
KR102602034B1 (ko) | 디스플레이 장치 | |
EP3902269B1 (en) | Display device and operating method therefor | |
KR101771837B1 (ko) | 미디어 시스템에 있어서 포스 입력을 제공하는 리모콘 및 이의 구동 방법 | |
KR20220005590A (ko) | 디스플레이 장치 및 그의 동작 방법 | |
KR102581857B1 (ko) | 디스플레이 장치 및 그의 동작 방법 | |
KR102664915B1 (ko) | 디스플레이 장치 및 그의 동작 방법 | |
EP4178209A1 (en) | Remote control device and method for operating same | |
KR102582508B1 (ko) | 디스플레이 장치 | |
KR102658092B1 (ko) | 외부 디스플레이 장치와 콘텐츠를 공유하는 디스플레이 장치 및 콘텐츠 공유 방법 | |
EP4350692A1 (en) | Display device and operation method thereof | |
EP3992816A1 (en) | Display device | |
KR20230111526A (ko) | 디스플레이 장치 | |
KR20230084722A (ko) | 디스플레이 장치 및 그의 동작 방법 | |
US20230018885A1 (en) | Display device | |
KR20230132079A (ko) | 디스플레이 장치 및 그의 동작 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231212 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20231212 |