JP2010250492A - 情報処理装置、情報処理方法及び情報処理プログラム - Google Patents

情報処理装置、情報処理方法及び情報処理プログラム Download PDF

Info

Publication number
JP2010250492A
JP2010250492A JP2009098229A JP2009098229A JP2010250492A JP 2010250492 A JP2010250492 A JP 2010250492A JP 2009098229 A JP2009098229 A JP 2009098229A JP 2009098229 A JP2009098229 A JP 2009098229A JP 2010250492 A JP2010250492 A JP 2010250492A
Authority
JP
Japan
Prior art keywords
threshold
cpu
unit
threshold value
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2009098229A
Other languages
English (en)
Other versions
JP5182202B2 (ja
Inventor
Reiko Miyazaki
麗子 宮崎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2009098229A priority Critical patent/JP5182202B2/ja
Priority to EP10250476.8A priority patent/EP2241964B1/en
Priority to US12/755,890 priority patent/US8947463B2/en
Priority to CN2010101512367A priority patent/CN101866214B/zh
Priority to RU2010114740/08A priority patent/RU2010114740A/ru
Publication of JP2010250492A publication Critical patent/JP2010250492A/ja
Application granted granted Critical
Publication of JP5182202B2 publication Critical patent/JP5182202B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485—Scrolling or panning
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • H04N21/4438—Window management, e.g. event handling following interaction with the user interface
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4728—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for selecting a Region Of Interest [ROI], e.g. for requesting a higher resolution version of a selected region

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Databases & Information Systems (AREA)
  • Software Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)
  • Details Of Television Systems (AREA)
  • Length Measuring Devices With Unspecified Measuring Means (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

【課題】本発明は、使い勝手を向上する。
【解決手段】本発明は、ステレオカメラ４により撮像された映像データからユーザの手に対応する入力点の３次元位置を検出し、入力点がパターン１に設定された第１閾値Ｌ１又は第２閾値Ｌ２を超えて近づいたと判断した場合、パターン１より遠くに設定されたにパターン２に第１閾値Ｌ１又は第２閾値Ｌ２を設定することにより、入力点が第１閾値Ｌ１又は第２閾値Ｌ２を超えた際に表示した表示画面Ｇ１、Ｇ２又はＧ３が容易に切り替わることを防止することができ、かくして使い勝手を向上することができる。
【選択図】図５

Description

本発明は、情報処理装置、情報処理方法及び情報処理プログラムに関し、例えばテレビジョン受像機に適用して好適なものである。
従来、テレビジョン受像機では、リモートコントローラ（以下、これをリモコンとも呼ぶ）からユーザ操作に応じた信号を受信し、当該信号に対応した処理を実行するようになされている。
しかしながら、このようなテレビジョン受像機では、多数の操作ボタンのなかからユーザの所望する処理に応じたボタンを探させる等の煩雑な操作をユーザに強いることになる。
そこでテレビジョン受像機などに設けられるディスプレイ装置のなかには、その前面にカメラが設けられ、当該カメラによって撮像された例えばユーザの手の３次元的な動きに応じた処理を実行するようになされたものが提案されている（例えば、特許文献１参照）。
特開２００６−２０９５６３公報
ところで上述したディスプレイ装置では、ユーザがディスプレイとの距離をおおよそでしか把握することができないため、ディスプレイからユーザの手までの距離に応じて異なる設定値に設定して処理を実行するような場合、ユーザの意図していない設定値で処理を実行してしまい、使い勝手が悪いという問題があった。
本発明は以上の点を考慮してなされたもので、使い勝手を向上し得る情報処理装置、情報処理方法及び情報処理プログラムを提案しようとするものである。
かかる課題を解決するため本発明においては、所定の検出空間に存在する操作子を検出する操作子検出部と、操作子検出部により検出された操作子の３次元位置を検出する位置検出部と、位置検出部により検出された３次元位置に基づき、操作検出部から所定の距離に設定された閾値を超えて操作子が操作子検出部に近づいた場合、閾値を所定の距離に対して操作子検出部から遠くなるよう設定する閾値設定部と、閾値設定部により設定される閾値を操作子が超えた場合、所定の処理に対する設定値を変更する設定変更部と設定変更部により設定された設定値を用いて処理を実行する処理実行部とを設けるようにした。
また本発明においては、所定の検出空間における操作子を検出する操作子検出部により検出された操作子の３次元位置を検出する位置検出ステップと、上記操作子検出ステップにより検出された操作子の３次元位置を検出する位置検出ステップと、上記位置検出ステップにより検出された上記３次元位置に基づき、上記操作検出部から所定の距離に設定された閾値を超えて上記操作子が上記操作子検出部に近づいた場合、上記閾値を上記所定の距離に対して上記操作子検出部から遠くなるよう設定する閾値設定ステップと、上記閾値設定ステップにより設定された上記閾値を上記操作子が超えた場合、所定の処理に対する設定値を変更する設定変更ステップと、上記設定変更ステップにより設定された上記設定値を用いて上記処理を実行する処理実行ステップとを設けるようにした。
さらに本発明においては、コンピュータに対して、所定の検出空間における操作子を検出する操作子検出部により検出された操作子の３次元位置を検出する位置検出ステップと、上記操作子検出ステップにより検出された操作子の３次元位置を検出する位置検出ステップと、上記位置検出ステップにより検出された上記３次元位置に基づき、上記操作検出部から所定の距離に設定された閾値を超えて上記操作子が上記操作子検出部に近づいた場合、上記閾値を上記所定の距離に対して上記操作子検出部から遠くなるよう設定する閾値設定ステップと、上記閾値設定ステップにより設定された上記閾値を上記操作子が超えた場合、所定の処理に対する設定値を変更する設定変更ステップと、上記設定変更ステップにより設定された上記設定値を用いて上記処理を実行する処理実行ステップとを実行させるようにした。
これにより、ユーザが操作子を閾値を超えて操作子検出部に近づけた場合、その閾値を操作検出部から遠ざけるので、操作子が閾値を一度超えると、操作子が再びその閾値を超えて戻り難く、設定値が容易に変更されることを防止することができる。
以上のように本発明によれば、ユーザが操作子を閾値を超えて操作子検出部に近づけた場合、その閾値を操作検出部から遠ざけるので、操作子が閾値を一度超えると、操作子が再びその閾値を超えて戻り難く、設定値が容易に変更されることを防止することができ、かくして使い勝手を向上し得る情報処理装置、情報処理方法及び情報処理プログラムを実現できる。
テレビジョン受像機の外観構成を示す略線図である。 テレビジョン受像機の回路構成を示す略線図である。 一覧表示画面を示す略線図である。 異なるズーム率における表示画面の構成を示す略線図である。 中央領域の選択の様子を示す略線図である。 ズーム率の閾値パターンを示す略線図である。 スクロール表示の様子を示す略線図である。 第１の実施の形態における画面表示処理手順の説明に供するフローチャートである。 テレビジョン受像機の機能的構成を示す略線図である。 スクロール速度の閾値パターンを示す略線図である。 第２の実施の形態における画面表示処理手順の説明に供するフローチャートである。 他の実施の形態における表示画面を示す略線図である。
以下、発明を実施するための形態（以下実施形態とする）について説明する。
なお、説明は以下の順序で行う。
１．第１の実施の形態
２．第２の実施の形態
３．他の実施の形態
＜１．第１の実施の形態＞
［１−１．テレビジョン受像機の外観構成］
図１に示すように、本発明の情報処理装置としてのテレビジョン受像機１は、映像を表示するためのＬＣＤ（Liquid Crystal Display）、有機ＥＬ（Electro-Luminescence）等でなるディスプレイ２及び当該ディスプレイ２の下方にスピーカ３が設けられている。
またテレビジョン受像機１は、ディスプレイ２の上方にカメラ４Ａ及び４Ｂからなるステレオカメラ４が設けられており、当該ステレオカメラ４によってディスプレイ２の前方空間を撮影し得るようになされている。
［１−２．テレビジョン受像機の回路構成］
テレビジョン受像機１は、図２に示すように、ＣＰＵ（Central Processing Unit）１１が不揮発性メモリ１２に格納された基本プログラムを読み出してＲＡＭ（Random Access Memory）１３に展開する。これによりＣＰＵ１１は、当該基本プログラムに従ってバス２０を介して全体を統括制御するようになされている。
またＣＰＵ１１は、不揮発性メモリ１２に記憶された各種アプリケーションプログラムをＲＡＭ１３に読み出して実行することにより、各種機能を実現するようになされている。
ＣＰＵ１１は、テレビジョン放送の受信表示処理を実行する際、アンテナ１４を介して受信した地上ディジタル放送の放送信号をチューナ部１５によって受信させる。
チューナ部１５は、受信した放送信号から所定の放送チャンネルに対応するテレビジョン選局信号を抽出し、その抽出したテレビジョン選局信号をデコード部１６へ送出する。
デコード部１６は、チューナ部１５から供給されるテレビジョン選局信号を復号することにより音声データ及び映像データを得、映像データを表示制御部１７へ送出すると共に、音声データを音声制御部１８へ送出する。
表示制御部１７は、デコード部１６から供給された映像データに対応した映像をディスプレイ２に表示するようになされている。また音声制御部１８は、デコード部１６から供給された音声データに対応した音声をスピーカ３を介して出力するようになされている。
またテレビジョン受像機１は、インターフェース部１９が設けられており、所定の通信経路を介してインターフェース部１９にデジタルスチルカメラ等が接続されて画像データが供給された場合、当該画像データを不揮発性メモリ１２に記憶する。
そしてＣＰＵ１１は、不揮発性メモリ１２に記憶された画像データを表示するための操作に応じて、詳しくは後述する画像表示処理を実行し、不揮発性メモリ１２から画像データを読み出すと、当該画像データを表示制御部１７へ送信する。表示制御部１７は、ＣＰＵ１１から供給された画像データに基づく画像をディスプレイ２に表示する。
因みに画像データは、ＥＸＩＦ（Exchangeable Image File Format）規格に準拠しており、撮影日時やサムネイル画像等が付加情報として記録されている。従ってテレビジョン受像機１では、例えばユーザ操作に応じて、ディスプレイ２に表示した画像の撮像日時を当該画像と共に表示し得るようになされている。
ところでステレオカメラ４は、カメラ４Ａ及び４Ｂにより所定間隔ごとにディスプレイ２の前方空間を撮像し、その結果得られる映像データをＣＰＵ１１へ送出する。
そしてＣＰＵ１１は、ステレオカメラ４により供給された映像データからユーザの手の動き（以下、これをジェスチャとも呼ぶ）を検出し、当該ジェスチャに応じた処理を実行するようになされている。
具体的にＣＰＵ１１は、ステレオカメラ４のカメラ４Ａ及び４Ｂによりそれぞれ撮像された映像データを時間の経過と共に所定のタイミング毎に取得する。
そしてＣＰＵ１１は、ステレオカメラ４から取得した映像データのうち、例えばカメラ４Ａにより撮像された映像データに対して肌色検出処理を施す。この肌色検出処理は、映像データの各画素における色相に基づいて肌色であるか否かを判断することにより、映像データに映し出された肌色部分を抽出する。
因みに、ＣＰＵ１１は、映像データに対して肌色検出処理を施した結果、肌色部分を検出することができなかった場合、ユーザがジェスチャ操作を行っていないと判断する。
次にＣＰＵ１１は、映像データに肌色部分が存在する場合、当該肌色部分に対応する画素のなかから輝度レベルが一番高い画素を入力点として抽出する。
ここで、例えばユーザが人差し指をディスプレイ２に向けてジェスチャを行った場合、ＣＰＵ１１は、肌色部分から輝度レベルの一番高い画素を抽出することにより、ディスプレイ２に最も近い人差し指の指先に対応する画素を入力点として抽出することになる。
続いてＣＰＵ１１は、カメラ４Ａにより撮像された映像データの画像範囲から入力点の平面的な位置を検出することにより、ディスプレイ２に平行な面での入力点の位置を検出し得るようになされている。
またＣＰＵ１１は、カメラ４Ａ及び４Ｂによりそれぞれ撮像された映像データを用いて例えばステレオ法によりステレオカメラ４から入力点までのディスプレイ２に垂直な方向の距離を算出する。このときＣＰＵ１１は、ステレオカメラ４の性能に応じて、例えば約８０［ｃｍ］から約１２０［ｃｍ］までの検出範囲でステレオカメラ４から入力点までの距離を算出し得るようになされている。
このときＣＰＵ１１は、検出範囲を例えば２５６段階（０〜２５５）に区分し、ステレオ法により検出したステレオカメラ４から入力点までの距離を２５６段階のいずれかで検出するようになされている。因みに、この２５６段階は、ステレオカメラ４から最も近い位置を「２５５」とし、当該ステレオカメラ４から最も遠い位置を「０」として定義される。
従ってＣＰＵ１１は、入力点のディスプレイ２に平行な面での位置及びステレオカメラ４からの距離を検出することにより、入力点の３次元位置を検出し得るようになされている。
そしてＣＰＵ１１は、ステレオカメラ４のカメラ４Ａ及び４Ｂによりそれぞれ撮像された映像データを取得する度に、入力点を検出すると共に、当該入力点の３次元位置を検出し、当該３次元位置の変化をジェスチャとして検出する。そしてＣＰＵ１１は、検出したジェスチャに応じた処理を実行するようになされている。
因みにＣＰＵ１１は、入力点の３次元位置に基づいて、ユーザの手が指し示しているディスプレイ２の位置を例えば半透明な円形のポインタＰＴ（図５及び図７）で表示することにより、その位置を目視確認させ得るようになされている。
［１−３．画像表示処理］
次に、ジェスチャに応じて、不揮発性メモリ１２に記憶された画像データをディスプレイ２に表示する画像表示処理について説明する。
ＣＰＵ１１は、画像表示処理を実行すると、不揮発性メモリ１２に記憶された画像データを読み出す。そしてＣＰＵ１１は、画像データの撮影日時を基に、図３に示すように、読み出した画像データのうち、例えば１０枚の画像データに基づく画像Ｐ１〜Ｐ１０を撮影日時順に左から右へ所定間隔離して一列に並べられた一覧表示画面Ｇ０を生成する。因みに、画像Ｐ１〜Ｐ１０を特に区別しない場合、単に画像Ｐとも呼ぶ。
そしてＣＰＵ１１は、例えば画像Ｐ５を全体表示するように表示領域ＨＲ１を一覧表示画面Ｇ０に設定し、図４（Ａ）に示すように、当該表示領域ＨＲ１に対応した表示画面Ｇ１をディスプレイ２に表示する。
そしてＣＰＵ１１は、ステレオカメラ４のカメラ４Ａ及び４Ｂによりそれぞれ撮像された映像データを取得する度に、上述したように肌色検出処理を施し、その結果得られる肌色部分のうち、輝度レベルが一番高い画素を入力点として検出する。
またＣＰＵ１１は、検出した入力点のディスプレイ２に平行な面での位置及びステレオカメラ４から入力点までの距離を３次元位置として検出する。
このときＣＰＵ１１は、図５に示すように、ユーザがディスプレイ２の中央付近を指し示した場合、すなわちポインタＰＴが中央領域ＣＡ内に位置している場合、一覧表示画像Ｇ０を３段階の異なるズーム率でディスプレイ２に表示するズーム表示を行う。
具体的にＣＰＵ１１は、入力点の３次元位置に基づいてポインタＰＴが中央領域ＣＡ内に位置していると判断した場合、前後に連続して検出した入力点の距離の差分を求めることにより、当該入力点がステレオカメラ４に近づいているか遠ざかっているかを判断する。
そしてＣＰＵ１１は、入力点がステレオカメラ４に近づいていると判断した場合、図６（Ａ）に示すように、ズーム率を変更するための第１閾値Ｌ１及び第２閾値Ｌ２を例えば「１５０」及び「２２０」に設定する。因みに、この第１閾値Ｌ１及び第２閾値Ｌ２は、不揮発性メモリ１２に記憶されており、ＣＰＵ１１が当該不揮発性メモリ１２から読み出して設定する。
ＣＰＵ１１は、入力点が第１閾値Ｌ１である「１５０」を超えてステレオカメラ４に近づいた場合、一覧表示画面Ｇ０（図３）に対して表示領域ＨＲ１からズームアウトした表示領域ＨＲ２を設定する。
そしてＣＰＵ１１は、図４（Ｂ）に示すように、表示領域ＨＲ２に対応した表示画面Ｇ２をディスプレイ２に表示する。この表示画面Ｇ２は、その余白部分に例えば画像Ｐが撮像された日付が表示される。
またＣＰＵ１１は、入力点が第２閾値Ｌ２である「２２０」を超えてステレオカメラ４に近づいた場合、一覧表示画面Ｇ０に対して表示領域ＨＲ２からさらにズームアウトした表示領域ＨＲ３を設定する。
そしてＣＰＵ１１は、図４（Ｃ）に示すように、表示領域ＨＲ３に対応した表示画面Ｇ３をディスプレイ２に表示する。この表示画面Ｇ３は、その余白部分に例えば画像Ｐが撮像された年月が表示される。
このようにＣＰＵ１１は、ユーザの手がステレオカメラ４に近づき、第１閾値Ｌ１又は第２閾値Ｌ２を超えた場合、表示画面Ｇ１から表示画面Ｇ２、Ｇ３へ切り替え、１つの画像Ｐから多数の画像Ｐを表示するようにズームアウト表示する。
一方、ＣＰＵ１１は、入力点がステレオカメラ４から遠ざかっていると判断した場合、図６（Ｂ）に示すように、ズーム率を変更するための第１閾値Ｌ１及び第２閾値Ｌ２を例えば「８０」及び「１７０」に設定する。
ＣＰＵ１１は、入力点が第２閾値Ｌ２である「１７０」を超えてステレオカメラ４から遠ざかった場合、一覧表示画面Ｇ０（図３）に対して表示領域ＨＲ３からズームインした表示領域ＨＲ２を設定する。そしてＣＰＵ１１は、表示領域ＨＲ２に対応した表示画面Ｇ２（図４（Ｂ））をディスプレイ２に表示する。
またＣＰＵ１１は、入力点が第１閾値Ｌ１である「８０」を超えてステレオカメラ４から遠ざかった場合、一覧表示画面Ｇ０に対して表示領域ＨＲ２からさらにズームインした表示領域ＨＲ１を設定する。そしてＣＰＵ１１は、表示領域ＨＲ１に対応した表示画面Ｇ１（図４（Ａ））をディスプレイ２に表示する。
このようにＣＰＵ１１は、ユーザの手がディスプレイ２から遠ざかり、第２閾値Ｌ２又は第１閾値Ｌ１を超えた場合、表示画面Ｇ３から表示画面Ｇ２、Ｇ１へ切り替え、多数の画像Ｐから１つの画像Ｐを表示するようにズームイン表示する。
因みに、入力点が例えば「２１０」まで近づいてから、遠ざかっていくような場合、ＣＰＵ１１は、入力点がステレオカメラ４に近づく際に第２閾値Ｌ２に設定された「２２０」を超えることがないので、表示画面Ｇ２をディスプレイ２に表示する。そしてＣＰＵ１１は、入力点が遠ざかっていると判断すると、第２閾値Ｌ２を「１７０」に設定するが、その際、ディスプレイ２には表示画面Ｇ２を表示し続ける。
このようにＣＰＵ１１は、入力点が第１閾値Ｌ１又は第２閾値Ｌ２を超えたときだけディスプレイ２に表示する表示画面Ｇ１、Ｇ２又はＧ３を切り替えるようになされている。
一方、ＣＰＵ１１は、図７（Ａ）に示すように、例えばディスプレイ２に表示画面Ｇ２を表示している状態で、ユーザがディスプレイ２の右側部分を指し示している場合、中央領域ＣＡの右側にポインタＰＴが位置していること検出する。
このときＣＰＵ１１は、ユーザが指し示している位置をポインタＰＴで表示する共に、一覧表示画面Ｇ０における表示領域ＨＲ２を右方向へ移動させることにより、表示画面Ｇ２に表示される画像Ｐを右から左へ移動するようにスクロール表示する。
またＣＰＵ１１は、図７（Ｂ）に示すように、例えばディスプレイ２に表示画面Ｇ２を表示している状態で、ユーザの手がディスプレイ２の左側部分を指し示している場合、中央領域ＣＡの左側にポインタＰＴが位置していること検出する。
このときＣＰＵ１１は、ユーザが指し示している位置をポインタＰＴで表示する共に、一覧表示画面Ｇ０における表示領域ＨＲ２を左方向へ移動させることにより、表示画面Ｇ２に表示された画像Ｐを左から右へ移動するようにスクロール表示する。
ところでテレビジョン受像機１では、上述したように、ステレオカメラ４から入力点までの距離に応じて、異なる３段階のズーム率でディスプレイ２に画像Ｐを表示するようになされている。
このときユーザは、じっくりと画像Ｐを見たい場合、例えば画像Ｐ５が全体表示された表示画面Ｇ１に設定することが考えられる。このような場合、スクロール速度を速くするとユーザに画像Ｐ５をじっくりと見せることができない。そこでＣＰＵ１１は、表示画面Ｇ１をディスプレイ２に表示している状態で、ユーザに中央領域ＣＡの右側又は左側が指し示めされたとき、画像Ｐを低速でスクロールする。
これに対してユーザは、全体的に画像Ｐを見たい場合、多数の画像Ｐが一度に表示された表示画面Ｇ２又はＧ３に設定することが考えられる。このような場合、スクロール速度が遅いと多数の画像Ｐを全体的に把握するのに多大な時間がかかってしまう。
そこでＣＰＵ１１は、表示画面Ｇ２をディスプレイ２に表示している状態で、ユーザに中央領域ＣＡの右側又は左側が指し示めされたとき、表示画面Ｇ１が表示されているときよりも速い中速で画像Ｐをスクロールする。
またＣＰＵ１１は、表示画面Ｇ３をディスプレイ２に表示している状態で、ユーザに中央領域ＣＡの右側又は左側が指し示めされたとき、表示画面Ｇ２が表示されているときよりもさらに速い高速で画像Ｐをスクロールする。
このようにＣＰＵ１１は、ユーザにディスプレイ２の右側部分又は左側部分が指し示めされたとき、ディスプレイ２に表示した画像Ｐをそのズーム率に応じてスクロール速度を変えながら左右にスクロール表示する。
［１−４．画像表示処理手順］
続いて、上述した画像表示処理の手順を図８に示すフローチャートを用いて詳しく説明する。実際上、ＣＰＵ１１は、ルーチンＲＴ１の開始ステップから入って次のステップＳＰ１へ移る。
ステップＳＰ１においてＣＰＵ１１は、例えば基準とした画像データに対応する画像Ｐ５を全体表示するように表示領域ＨＲ１を一覧表示画面Ｇ０に設定し、当該表示領域ＨＲ１に対応した表示画面Ｇ１（図４（Ａ））をディスプレイ２に表示する。
そしてＣＰＵ１１は、ステレオカメラ４のカメラ４Ａによりそれぞれ撮像された映像データに対して肌色抽出処理を施すことにより、ユーザの手が検出されたか否かを判断する。
ここで否定結果が得られると、このことは、ユーザの手が検出されないことから、ユーザがジェスチャを行っていないことを意味し、このときＣＰＵ１１は、ステップＳＰ１へ戻ってユーザの手を検出するまで待ち受ける。
これに対してステップＳＰ１において肯定結果が得られると、このことは、ユーザがジェスチャを行っていることを意味し、このときＣＰＵ１１は次のステップＳＰ２へ移る。
ステップＳＰ２においてＣＰＵ１１は、画像Ｐをスクロール表示しているか否かを判断し、肯定結果が得られるとステップＳＰ４へ移るのに対し、否定結果が得られると、次のステップＳＰ３へ移る。
ステップＳＰ３においてＣＰＵ１１は、ステレオカメラ４のカメラ４Ａによりそれぞれ撮像された映像データから入力点を検出すると共に、当該入力点の３次元位置を検出する。そしてＣＰＵ１１は、検出した入力点の３次元位置に基づき、当該入力点がディスプレイ２の中央領域ＣＡに対応する位置にあるか否かを判断する。
ここで否定結果が得られると、このことは入力点がディスプレイ２の中央領域ＣＡに対して左方向又は右方向のどちらかに位置しており、ユーザがディスプレイ２の左右のどちらかを指し示していることを意味し、このときＣＰＵ１１はステップＳＰ４へ移る。
ステップＳＰ４においてＣＰＵ１１は、ディスプレイ２に表示した画像Ｐをそのズーム率に応じてスクロール速度を変えながら入力点の位置に応じて左右にスクロール表示し、ステップＳＰ１へ戻る。
これに対してステップＳＰ３において肯定結果が得られると、このことは、ユーザがディスプレイ２の中央領域ＣＡを指し示していることを意味し、このときＣＰＵ１１は次のステップＳＰ５へ移る。
ステップＳＰ５においてＣＰＵ１１は、前後に連続して検出したステレオカメラ４から入力点までの距離の差分を求めることにより、当該入力点がステレオカメラ４に近づいているか否かを判断し、肯定結果が得られると次のステップＳＰ６へ移る。
ステップＳＰ６においてＣＰＵ１１は、第１閾値Ｌ１及び第２閾値Ｌ２をそれぞれパターン１である「１５０」及び「２２０」に設定し、当該第１閾値Ｌ１又は第２閾値Ｌ２を超えて入力点が近づいたか否かを判断する。
ここで肯定結果が得られると、このことは第１閾値Ｌ１又は第２閾値Ｌ２を超えて入力点が近づいたことを意味し、このときＣＰＵ１１は次のステップＳＰ７へ移る。
ステップＳＰ７においてＣＰＵ１１は、第１閾値Ｌ１を超えたことを認識した場合、表示画面Ｇ１を表示画面Ｇ２に切り替えるズームアウト表示を行う。またＣＰＵ１１は、第２閾値Ｌ２を超えたことを認識した場合、表示画面Ｇ２を表示画面Ｇ３に切り替えるズームアウト表示を行う。そしてＣＰＵ１１は、ステップＳＰ１へ戻る。
一方、ステップＳＰ５において否定結果が得られると、このことは入力点がステレオカメラ４から遠ざかっていることを意味し、このときＣＰＵ１１はステップＳＰ８へ移る。
ステップＳＰ８においてＣＰＵ１１は、第１閾値Ｌ１及び第２閾値Ｌ２をそれぞれパターン２である「８０」及び「１７０」に設定し、当該第１閾値Ｌ１又は第２閾値Ｌ２を超えて入力点が遠ざかったか否かを判断する。
ここで肯定結果が得られると、このことは第１閾値Ｌ１又は第２閾値Ｌ２を超えて入力点が遠ざかったことを意味し、このときＣＰＵ１１は次のステップＳＰ９へ移る。
ステップＳＰ９においてＣＰＵ１１は、第１閾値Ｌ１を超えたことを認識した場合、表示画面Ｇ２を表示画面Ｇ１に切り替えるズームイン表示を行う。またＣＰＵ１１は、第２閾値Ｌ２を超えたことを認識した場合、表示画面Ｇ３を表示画面Ｇ２に切り替えるズームイン表示を行う。そしてＣＰＵ１１は、ステップＳＰ１へ戻る。
これに対してステップＳＰ６及びステップＳＰ８において否定結果が得られると、このことは第１閾値Ｌ１及び第２閾値Ｌ２を超えて入力点が移動していないことを意味し、このときＣＰＵ１１は次のステップＳＰ１０へ移る。
ステップＳＰ１０においてＣＰＵ１１は、表示画面Ｇ１、Ｇ２及びＧ３を切り替えることなく表示し続け、ステップＳＰ１へ戻る。
［１−５．動作及び効果］
以上の構成において、テレビジョン受像機１は、ステレオカメラ４により撮像された映像データからユーザの手に対応する肌色部分の最も輝度レベルが高い画素を入力点として検出すると共に、当該入力点の３次元位置を検出する。
そしてテレビジョン受像機１は、入力点が中央領域ＣＡに対応する位置にあり、かつ当該入力点が近づいてきていると判断した場合、第１閾値Ｌ１及び第２閾値Ｌ２をパターン１に設定する。
そしてテレビジョン受像機１は、入力点が第１閾値Ｌ１又は第２閾値Ｌ２を超えて近づいた場合、表示画面Ｇ１から表示画面Ｇ２、又は表示画面Ｇ２から表示画面Ｇ３へと切り替えてズームアウト表示する。
またテレビジョン受像機１は、入力点の位置が中央領域ＣＡ内で、かつ当該入力点が遠ざかっていると判断した場合、パターン１よりステレオカメラ４に対して遠くに設定されたにパターン２に第１閾値Ｌ１及び第２閾値Ｌ２を設定する。
そしてテレビジョン受像機１は、入力点が第１閾値Ｌ１又は第２閾値Ｌ２を超えて遠ざかった場合、表示画面Ｇ２から表示画面Ｇ１、又は表示画面Ｇ３から表示画面Ｇ２へと切り替えてズームイン表示する。
従ってテレビジョン受像機１は、入力点が第１閾値Ｌ１又は第２閾値Ｌ２を超えて近づいた場合、当該第１閾値Ｌ１又は第２閾値Ｌ２をステレオカメラ４から遠くなるように設定する。これによりテレビジョン受像機１は、入力点が第１閾値Ｌ１又は第２閾値Ｌ２を一度超えると、当該入力点が再び第１閾値Ｌ１又は第２閾値Ｌ２を超えて戻り難くすることができる。
ここでユーザは、手を近づけて第１閾値Ｌ１又は第２閾値Ｌ２を超えた場合、ディスプレイ２に表示させる表示画面Ｇ１、Ｇ２又はＧ３が切り替わったことに驚いて手を少し引っ込めてしまう場合が考えられる。
このような場合でもテレビジョン受像機１は、第１閾値Ｌ１又は第２閾値Ｌ２をステレオカメラ４から遠くに設定するので、引っ込めた手の位置に応じて再び表示画面Ｇ１、Ｇ２又はＧ３が切り替わることを防止することができる。
このようにテレビジョン受像機１は、ユーザが意図していない動作で表示画面Ｇ１、Ｇ２又はＧ３が切り替わることを防止するので、使い勝手を向上することができる。
またテレビジョン受像機１は、入力点の位置が中央領域ＣＡに対して左右のどちらかであると判断した場合、第１閾値Ｌ１及び第２閾値Ｌ２を設定することなく、表示画面Ｇ１、Ｇ２又はＧ３に表示した画像Ｐをスクロール表示するようにした。
これによりテレビジョン受像機１は、スクロール表示中に表示画面Ｇ１、Ｇ２又はＧ３が切り替わることがないので、スクロール表示中にズーム率が変更してしまうことによりユーザを混乱させてしまうことを回避することができる。
以上の構成によれば、テレビジョン受像機１は、ステレオカメラ４により撮像された映像データからユーザの手に対応する入力点の３次元位置を検出する。そしてテレビジョン受像機１は、入力点がパターン１に設定された第１閾値Ｌ１又は第２閾値Ｌ２を超えて近づいたと判断した場合、パターン１より遠くに設定されたパターン２に第１閾値Ｌ１又は第２閾値Ｌ２を設定する。
これによりテレビジョン受像機１は、入力点が第１閾値Ｌ１又は第２閾値Ｌ２を超えた際に表示した表示画面Ｇ１、Ｇ２又はＧ３が容易に切り替わることを防止することができ、かくして使い勝手を向上することができる。
［１−６．テレビジョン受像機の機能的構成］
ここで、第１の実施の形態におけるテレビジョン受像機１の機能的な構成について説明する。図９に示すように、テレビジョン受像機１は、操作子検出部３１、位置検出部３２、閾値設定部３３、設定変更部３４及び処理実行部３５として機能する。
テレビジョン受像機１では、操作子検出部３１としてステレオカメラ４が機能し、位置検出部３２、閾値設定部３３、設定変更部３４及び処理実行部３５としてＣＰＵ１１が機能する。
従ってテレビジョン受像機１では、このような機能構成により上述した画像表示処理を実行するようになされている。
＜２．第２の実施の形態＞
［２−１．テレビジョン受像機の構成］
第２の実施の形態においては、第１の実施の形態とは異なり、ジェスチャを検出する際、ステレオカメラ４により撮像された映像データから入力点を検出するのではなく、ユーザの手の形状を認識する。なお、テレビジョン受像機１の構成については、第１の実施の形態と同様であるためその説明を省略する。
具体的にＣＰＵ１１は、ステレオカメラ４のカメラ４Ａ及び４Ｂによりそれぞれ撮像された映像データを時間の経過と共に所定のタイミング毎に取得すると、例えばカメラ４Ａにより撮像された映像データに対して肌色検出処理を施す。
ＣＰＵ１１は、肌色検出処理を施すことにより得られた肌色部分を入力部分として検出すると共に、当該入力部分のディスプレイ２に平行な面での位置、及びステレオカメラ４からの距離を３次元位置として検出する。
これに加えてＣＰＵ１１は、映像データに入力部分が存在する場合、当該入力部分の形状と、不揮発性メモリ１２に予め記憶された複数の形状とをパターンマッチングする。
このときＣＰＵ１１は、パターンマッチングした結果、入力部分の形状が不揮発性メモリ１２に記憶された複数の形状のいずれとも一致しなかった場合、ユーザがジェスチャを行っていないと判断する。
これに対してＣＰＵ１１は、パターンマッチングした結果、入力部分の形状が不揮発性メモリ１２に記憶された複数の形状のいずれかと一致した場合、ユーザがジェスチャを行っていると判断する。
そしてＣＰＵ１１は、ステレオカメラ４のカメラ４Ａ及び４Ｂによりそれぞれ撮像された映像データを取得する度に、入力部分の形状及び３次元位置を検出し、当該入力部分の形状及び３次元位置の変化をジェスチャとして検出する。そしてＣＰＵ１１は、検出したジェスチャに応じた処理を実行するようになされている。
［２−２．画像表示処理］
次に、不揮発性メモリ１２に記憶された画像データをディスプレイ２に表示する際のジェスチャに応じた処理について説明する。
ＣＰＵ１１は、画像表示処理を実行すると、第１の実施の形態と同様に、不揮発性メモリ１２に記憶された画像データを読み出す。そしてＣＰＵ１１は、画像データに付加された撮影日時を基に、例えば１０枚の画像データに基づく画像Ｐ１〜Ｐ１０が撮影日時順に左から右へ所定間隔離して一列に並べられた一覧表示画面Ｇ０（図３）を生成する。
そしてＣＰＵ１１は、例えば画像Ｐ５を全体表示するように表示領域ＨＲ１を一覧表示画面Ｇ０に設定し、当該表示領域ＨＲ１に対応した表示画面Ｇ１（図４（Ａ））をディスプレイ２に表示する。
そしてＣＰＵ１１は、ステレオカメラ４のカメラ４Ａ及び４Ｂによりそれぞれ撮像された映像データを取得する度に、肌色検出処理を施すことにより入力部分を得、当該入力部分の３次元位置を検出する。
またＣＰＵ１１は、肌色検出処理を施すことにより得られる入力部分に対して、人差し指だけを伸ばした手の形状（以下、これを指示形状とも呼ぶ）及び手を開いた形状（以下、これを開形状とも呼ぶ）とパターンマッチングを行う。
そしてＣＰＵ１１は、パターンマッチングの結果として入力部分が指示形状と一致した場合、ステレオカメラ４から入力部分までの距離に応じて一覧表示画像Ｇ０を３段階の異なるズーム率でディスプレイ２に表示するズーム表示を行う。
具体的にＣＰＵ１１は、前後に連続して検出したステレオカメラ４から入力部分までの距離の差分を求めることにより、当該入力部分がステレオカメラ４に近づいているか遠ざかっているかを判断する。
そしてＣＰＵ１１は、入力部分がステレオカメラ４に近づいていると判断した場合、ズーム率を変更するための第１閾値Ｌ１及び第２閾値Ｌ２をパターン１（図６（Ａ））である例えば「１５０」及び「２２０」に設定する。
そしてＣＰＵ１１は、第１の実施の形態と同様に、入力部分が第１閾値Ｌ１である「１５０」を超えてステレオカメラ４に近づいた場合、表示画面Ｇ１から表示画面Ｇ２（図４（Ｂ））へ切り替えてディスプレイ２に表示する。
またＣＰＵ１１は、入力部分が第２閾値Ｌ２である「２２０」を超えてステレオカメラ４に近づいた場合、表示画面Ｇ２から表示画面Ｇ３（図４（Ｃ））へ切り替えてディスプレイ２に表示する。
一方、ＣＰＵ１１は、入力部分がステレオカメラ４に遠ざかっていると判断した場合、ズーム率を変更するための第１閾値Ｌ１及び第２閾値Ｌ２をパターン２（図５（Ｂ））である例えば「８０」及び「１７０」に設定する。
そしてＣＰＵ１１は、第１の実施の形態と同様に、入力部分が第２閾値Ｌ２である「１７０」を超えてステレオカメラ４から遠ざかった場合、表示画面Ｇ３から表示画面Ｇ２へ切り替えてディスプレイ２に表示する。
またＣＰＵ１１は、入力部分が第１閾値Ｌ１である「８０」を超えてステレオカメラ４から遠ざかった場合、表示画面Ｇ２から表示画面Ｇ１へ切り替えてディスプレイ２に表示する。
一方、ＣＰＵ１１は、パターンマッチングの結果として入力部分が開形状と一致した場合、ステレオカメラ４から入力部分までの距離に応じて３段階の異なるスクロール速度でディスプレイ２に表示された画像Ｐのスクロール表示を行う。
具体的にＣＰＵ１１は、前後に連続して検出したステレオカメラ４から入力部分までの距離の差分を求めることにより、当該入力部分がステレオカメラ４に近づいているか遠ざかっているかを判断する。またＣＰＵ１１は、入力部分がステレオカメラ４に対して右左のどちら側に位置しているかも判断する。
そしてＣＰＵ１１は、入力部分がステレオカメラ４に近づいていると判断した場合、図１０（Ａ）に示すように、スクロール速度を変更するための第３閾値Ｌ３及び第４閾値Ｌ４をパターン３である例えば「１５０」及び「２２０」に設定する。
そしてＣＰＵ１１は、入力部分が第３閾値Ｌ３である「１５０」を超えていない場合、スクロール速度を低速に設定する。そしてＣＰＵ１１は、表示画面Ｇ１、Ｇ２又はＧ３（図４）に表示された画像Ｐを入力部分の位置する方向に応じて右方向又は左方向へ低速でスクロール表示する。
またＣＰＵ１１は、入力部分が第３閾値Ｌ３である「１５０」を超えてステレオカメラ４に近づいた場合、スクロール速度を中速に設定する。そしてＣＰＵ１１は、表示画面Ｇ１、Ｇ２又はＧ３（図４）に表示された画像Ｐを入力部分の位置する方向に応じて右方向又は左方向へ中速でスクロール表示する。
さらにＣＰＵ１１は、入力部分が第４閾値Ｌ４である「２２０」を超えてステレオカメラ４に近づいた場合、スクロール速度を高速に設定する。そしてＣＰＵ１１は、表示画面Ｇ１、Ｇ２又はＧ３（図４）に表示された画像Ｐを入力部分の位置する方向に応じて右方向又は左方向へ高速でスクロール表示する。
一方、ＣＰＵ１１は、入力部分がステレオカメラ４から遠ざかっていると判断した場合、図１０（Ｂ）に示すように、スクロール速度を変更するための第３閾値Ｌ３及び第４閾値Ｌ４をパターン４である例えば「８０」及び「１７０」に設定する。
そしてＣＰＵ１１は、入力部分が第４閾値Ｌ４である「１７０」を超えてステレオカメラ４から遠ざかった場合、スクロール速度を中速に設定し、表示画面Ｇ１、Ｇ２又はＧ３に表示された画像Ｐを入力部分の位置する方向に応じて中速でスクロール表示する。
またＣＰＵ１１は、入力部分が第３閾値Ｌ３である「８０」を超えてステレオカメラ４から遠ざかった場合、スクロール速度を低速に設定し、表示画面Ｇ１、Ｇ２又はＧ３に表示された画像Ｐを入力部分の位置する方向に応じて低速でスクロール表示する。
このようにＣＰＵ１１は、ユーザの手の形状及び３次元位置に応じてズーム率及びスクロール速度を変えながら画像Ｐを表示する。
［２−３．画像表示処理手順］
続いて、上述した画像表示処理の手順を図１１に示すフローチャートを用いて詳しく説明する。実際上、ＣＰＵ１１は、ルーチンＲＴ２の開始ステップから入って次のステップＳＰ２１へ移る。
ステップＳＰ２１においてＣＰＵ１１は、例えば画像Ｐ５を全体表示するように表示領域ＨＲ１を一覧表示画面Ｇ０に設定し、当該表示領域ＨＲ１に対応した表示画面Ｇ１（図４（Ａ））をディスプレイ２に表示する。
そしてＣＰＵ１１は、ステレオカメラ４のカメラ４Ａにより撮像された映像データに対して肌色抽出処理を施すことにより、肌色部分が存在するか否かによってユーザの手が検出されたか否かを判断する。
ここで否定結果が得られると、このことは、ユーザの手が検出されないことから、ユーザがジェスチャを行っていないことを意味し、このときＣＰＵ１１は、ステップＳＰ２１へ戻ってユーザの手を検出するまで待ち受ける。
これに対してステップＳＰ２１において肯定結果が得られると、このことは、ユーザの手を検出したことを意味し、このときＣＰＵ１１は次のステップＳＰ２２へ移る。
ステップＳＰ２２においてＣＰＵ１１は、肌色検出処理を施すことにより得られる入力部分と不揮発性メモリ１２に記憶された指示形状とのパターンマッチングを行い、当該入力部分が指示形状と一致したか否かを判断する。
ここで肯定結果が得られると、ユーザがズーム率を変更するための操作を行うことを意味しており、このときＣＰＵ１１は次のステップＳＰ２３へ移る。
ステップＳＰ２３においてＣＰＵ１１は、ステレオカメラ４のカメラ４Ａ及び４Ｂによりそれぞれ撮像された映像データを基に入力部分の３次元位置を検出する。
そしてＣＰＵ１１は、前後に連続して検出したステレオカメラ４から入力部分までの距離の差分を求めることにより、当該入力部分がステレオカメラ４に近づいているか否かを判断し、肯定結果が得られると次のステップＳＰ２４へ移る。
ステップＳＰ２４においてＣＰＵ１１は、第１閾値Ｌ１及び第２閾値Ｌ２をそれぞれパターン１である「１５０」及び「２２０」に設定し、当該第１閾値Ｌ１又は第２閾値Ｌ２を超えて入力部分が近づいたか否かを判断する。
ここで否定結果が得られると、第１閾値Ｌ１及び第２閾値Ｌ２を超えて入力部分が移動していないことを意味し、このときＣＰＵ１１はステップＳＰ２９へ移る。
これに対してステップＳＰ２４において肯定結果が得られると、このことは第１閾値Ｌ１又は第２閾値Ｌ２を超えて入力部分が近づいたことを意味し、このときＣＰＵ１１は次のステップＳＰ２５へ移る。
ステップＳＰ２５においてＣＰＵ１１は、入力部分が第１閾値Ｌ１を超えたことを認識した場合、表示画面Ｇ１を表示画面Ｇ２に切り替えるズームアウト表示を行う。またＣＰＵ１１は、第２閾値Ｌ２を超えたことを認識した場合、表示画面Ｇ２を表示画面Ｇ３に切り替えるズームアウト表示を行う。そしてＣＰＵ１１は、ステップＳＰ２１へ戻る。
一方、ステップＳＰ２３において否定結果が得られると、このことは入力部分がステレオカメラ４から遠ざかっていることを意味し、このときＣＰＵ１１はステップＳＰ２６へ移る。
ステップＳＰ２６においてＣＰＵ１１は、第１閾値Ｌ１及び第２閾値Ｌ２をそれぞれパターン２である「８０」及び「１７０」に設定し、当該第１閾値Ｌ１又は第２閾値Ｌ２を超えて入力部分が遠ざかったか否かを判断する。
ここで否定結果が得られると、このことは第１閾値Ｌ１及び第２閾値Ｌ２を超えて入力部分が移動していないことを意味し、このときＣＰＵ１１はステップＳＰ２９へ移る。
これに対してステップＳＰ２６において肯定結果が得られると、このことは第１閾値Ｌ１又は第２閾値Ｌ２を超えて入力点が遠ざかったことを意味し、このときＣＰＵ１１は次のステップＳＰ２７へ移る。
ステップＳＰ２７においてＣＰＵ１１は、入力部分が第１閾値Ｌ１を超えたことを認識した場合、表示画面Ｇ２を表示画面Ｇ１に切り替えるズームイン表示を行う。またＣＰＵ１１は、第２閾値Ｌ２を超えたことを認識した場合、表示画面Ｇ３を表示画面Ｇ２に切り替えるズームイン表示を行う。そしてＣＰＵ１１は、ステップＳＰ２１へ戻る。
一方、ステップＳＰ２２において否定結果が得られると、ＣＰＵ１１はステップＳＰ２８へ移る。ステップＳＰ２８においてＣＰＵ１１は、肌色検出処理を施すことにより得られる入力部分と不揮発性メモリ１２に記憶された開形状とのパターンマッチングを行い、当該入力部分が開形状と一致したか否かを判断する。
ここで否定結果が得られると、このことは肌色検出処理を施すことにより得られる入力部分が指示形状及び開形状と一致しなかったことを意味し、このときＣＰＵ１１はステップＳＰ２９へ移る。
ステップＳＰ２９においてＣＰＵ１１は、ディスプレイ２に表示している表示画面Ｇ１、Ｇ２又はＧ３を変更することなくそのまま表示し続ける。
これに対してステップＳＰ２８において肯定結果が得られると、このことは画像Ｐをスクロールさせるための操作をユーザが行っていることを意味しており、このときＣＰＵ１１は次のステップＳＰ３０へ移る。
ステップＳＰ３０においてＣＰＵ１１は、ステレオカメラ４のカメラ４Ａ及び４Ｂによりそれぞれ撮像された映像データを基に、入力部分の３次元位置を検出する。
そしてＣＰＵ１１は、前後に連続して検出したステレオカメラ４から入力部分までの距離の差分を求めることにより、当該入力部分がステレオカメラ４に近づいているか否かを判断し、肯定結果が得られると次のステップＳＰ３１へ移る。
ステップＳＰ３１においてＣＰＵ１１は、第３閾値Ｌ３及び第４閾値Ｌ４をそれぞれパターン３である「１５０」及び「２２０」に設定し、当該第３閾値Ｌ３又は第４閾値Ｌ４を超えて入力部分が近づいたか否かを判断する。
ここで肯定結果が得られると、このことは第３閾値Ｌ３又は第４閾値Ｌ４を超えて入力部分が近づいたことを意味し、このときＣＰＵ１１はステップＳＰ３３へ移る。これに対して否定結果が得られると、このことは第３閾値Ｌ３及び第４閾値Ｌ４を超えて入力部分が移動していないことを意味し、このときＣＰＵ１１はステップＳＰ３４へ移る。
一方、ステップＳＰ３０において否定結果が得られると、このことは入力点がステレオカメラ４から遠ざかっていることを意味し、このときＣＰＵ１１はステップＳＰ３２へ移る。
ステップＳＰ３２においてＣＰＵ１１は、第３閾値Ｌ３及び第４閾値Ｌ４をそれぞれパターン４である「８０」及び「１７０」に設定し、当該第３閾値Ｌ３又は第４閾値Ｌ４を超えて入力部分が近づいたか否かを判断する。
ここで肯定結果が得られると、このことは第３閾値Ｌ３又は第４閾値Ｌ４を超えて入力部分が遠ざかったことを意味し、このときＣＰＵ１１はステップＳＰ３３へ移る。これに対して否定結果が得られると、このことは第３閾値Ｌ３及び第４閾値Ｌ４を超えて入力部分が移動していないことを意味し、このときＣＰＵ１１はステップＳＰ３４へ移る。
ステップＳＰ３３においてＣＰＵ１１は、第３閾値Ｌ３又は第４閾値Ｌ４を超えた場合に対応するスクロール速度に変更し、次のステップＳＰ３５へ移る。一方、ステップＳＰ３４においてＣＰＵ１１は、スクロール速度を変更することなく維持し、次のステップＳＰ３５へ移る。
ステップＳＰ３５においてＣＰＵ１１は、表示画面Ｇ１、Ｇ２又はＧ３に表示された画像Ｐを入力部分の位置に応じて右方向又は左方向へステップＳＰ３４又はＳＰ３５において設定されたスクロール速度でスクロール表示し、ステップＳＰ２１へ移る。
［２−４．動作及び効果］
以上の構成において、テレビジョン受像機１は、ステレオカメラ４により撮像された映像データからユーザの手を入力部分として検出し、当該検出した入力部分の形状及び３次元位置を検出する。
またテレビジョン受像機１は、入力部分の形状が例えば指示形状であった場合で、かつ当該入力部分が近づいている場合、第１閾値Ｌ１及び第２閾値Ｌ２をパターン１に設定する。
そしてテレビジョン受像機１は、入力部分が第１閾値Ｌ１又は第２閾値Ｌ２を超えて近づいた場合、表示画面Ｇ１から表示画面Ｇ２、又は表示画面Ｇ２から表示画面Ｇ３へと切り替えるズームアウト表示する。
またテレビジョン受像機１は、入力部分の形状が例えば指示形状であった場合で、かつ当該入力部分が遠ざかっている場合、パターン１よりステレオカメラ４から遠い位置に設定されたパターン２に第１閾値Ｌ１及び第２閾値Ｌ２を設定する。
そしてテレビジョン受像機１は、入力部分が第１閾値Ｌ１又は第２閾値Ｌ２を超えて遠ざかった場合、表示画面Ｇ２から表示画面Ｇ１、又は表示画面Ｇ３から表示画面Ｇ２へと切り替えるズームイン表示する。
従ってテレビジョン受像機１は、入力部分が第１閾値Ｌ１又は第２閾値Ｌ２を超えて近づいた場合、当該第１閾値Ｌ１又は第２閾値Ｌ２をステレオカメラ４から遠くなるように設定する。これによりテレビジョン受像機１は、入力部分が第１閾値Ｌ１又は第２閾値Ｌ２を一度超えると、当該入力部分が再び第１閾値Ｌ１又は第２閾値Ｌ２を超えて戻り難くすることができる。
またテレビジョン受像機１は、入力部分の形状が例えば開形状であった場合で、かつ当該入力部分が近づいてきていると判断した場合、第３閾値Ｌ３及び第４閾値Ｌ４をパターン３に設定する。
そしてテレビジョン受像機１は、入力部分が第３閾値Ｌ３又は第４閾値Ｌ４を超えて近づいた場合、表示画面Ｇ１、Ｇ２又Ｇ３に表示された画像Ｐを当該入力部分の位置に応じて右方向又は左方向へスクロール速度を速くするよう切り替えてスクロール表示する。
またテレビジョン受像機１は、入力部分の形状が例えば開形状であった場合で、かつ当該入力部分が遠ざかっていると判断した場合、パターン３よりステレオカメラ４から遠い位置に設定されたにパターン４に第３閾値Ｌ３及び第４閾値Ｌ４を設定する。
そしてテレビジョン受像機１は、入力部分が第３閾値Ｌ３又は第４閾値Ｌ４を超えて遠ざかった場合、表示画面Ｇ１、Ｇ２又Ｇ３に表示された画像Ｐを当該入力部分の位置に応じて右方向又は左方向へスクロール速度が遅くなるよう切り替えてスクロール表示する。
従ってテレビジョン受像機１は、入力部分が第３閾値Ｌ３又は第４閾値Ｌ４を超えて近づいた場合、当該第３閾値Ｌ３又は第４閾値Ｌ４をステレオカメラ４から遠くなるように設定する。これによりテレビジョン受像機１は、入力部分が第３閾値Ｌ３又は第４閾値Ｌ４を一度超えると、当該入力部分が再び第３閾値Ｌ３又は第４閾値Ｌ４を超えて戻り難くすることができる。
そのためテレビジョン受像機１は、入力部分が第１閾値Ｌ１、第２閾値Ｌ２、第３閾値Ｌ３又は第４閾値Ｌ４を超えた際に表示した表示形態を継続し易くすることができる。
またテレビジョン受像機１は、入力部分の形状に応じて閾値を第１閾値Ｌ１及び第２閾値Ｌ２と、第３閾値Ｌ３及び第４閾値Ｌ４とを変えるようにしたことにより、例えばズーム表示とスクロール表示とで異なる距離で閾値を設定することができる。
以上の構成によれば、テレビジョン受像機１は、ステレオカメラ４により撮像された映像データからユーザの手に対応する入力部分の形状及び３次元位置を検出する。そしてテレビジョン受像機１は、入力部分の形状に応じてパターン１又はパターン３に設定された閾値を超えて入力部分が近づいた場合、パターン１又はパターン３より遠くに設定されたにパターン２又はパターン４に閾値を設定する。
これによりテレビジョン受像機１は、入力部分が閾値を超えた際に表示していた表示形態が容易に切り替わることを防止することができ、かくして使い勝手を向上することができる。
＜３．他の実施の形態＞
［３−１．他の実施の形態１］
なお上述した第１及び第２の実施の形態においては、ステレオカメラ４により撮像された映像データからユーザの手の３次元位置を検出するようにした場合について述べた。
しかしながら本発明はこれに限らず、例えば誘導型、静電容量型、超音波型、電磁波型、赤外線型等の近接センサを用いてユーザの手の３次元位置を検出するようにしても良い。
［３−２．他の実施の形態２］
また上述した第１及び第２の実施の形態においては、ユーザの手の３次元位置を検出するようにした場合について述べたが、本発明はこれに限らず、例えばリモコン等の３次元位置を検出するようにしても良い。
［３−３．他の実施の形態３］
さらに上述した第１及び第２の実施の形態においては、第１閾値Ｌ１又は第２閾値Ｌ２を超えた場合、画像Ｐをズームイン又はズームアウト表示するようにした場合について述べた。しかしながら本発明はこれに限らず、第１閾値Ｌ１又は第２閾値Ｌ２を超えた場合、例えばボリュームを変更したり、チャンネルを切り替える等の所定の処理に対する設定値を変更する場合であれば、その処理は問わない。
同様に、第１及び第２の実施の形態においては、ディスプレイ２の右側又は左側が指し示めされたとき、または入力部分の形状が開形状であった場合、ディスプレイ２に表示した画像Ｐを左右にスクロール表示するようにした場合について述べた。しかしながら本発明はこれに限らず、所定の処理に対する設定値を変更する場合であれば、その処理は問わない。
［３−４．他の実施の形態４］
さらに上述した第２の実施の形態においては、入力部分の形状が指示形状であった場合、第１閾値Ｌ１及び第２閾値Ｌ２を用い、入力部分の形状が開形状であった場合、第３閾値Ｌ３及び第４閾値Ｌ４を用いるようにした場合について述べた。
しかしながら本発明はこれに限らず、入力部分の形状が指示形状であった場合と、入力部分の形状が開形状であった場合とで、同じ閾値である例えば第１閾値Ｌ１及び第２閾値Ｌ２を用いるようにしても良い。
［３−５．他の実施の形態５］
さらに上述した第１及び第２の実施の形態においては、例えばズーム率を３段階で変更し得るように第１閾値Ｌ１及び第２閾値Ｌ２を設けるようにした場合について述べた。
しかしながら本発明はこれに限らず、ズーム率を５段階で変更する場合、異なる値に設定された４つの閾値を設けるようにすればよく、閾値の数は問わない。
［３−６．他の実施の形態６］
さらに上述した第１及び第２の実施の形態においては、ユーザの手が第２閾値Ｌ２を超えて近づいた場合、表示画面Ｇ３をディスプレイ２に表示するようにした場合について述べた。
しかしながら本発明はこれに限らず、ユーザの手が第２閾値Ｌ２を超えて近づいた場合、図１２（Ａ）に示すように、画像Ｇ４をディスプレイ２に表示するようにしても良い。
この画像Ｇ４は、表示画面Ｇ２の画像Ｐ３〜Ｐ７の上下方向に、例えば当該画像Ｐ３〜Ｐ７と日付が近い画像や同一地域で取られた画像などが上下に向かって透明度が高くなるように表示される。
［３−７．他の実施の形態７］
さらに上述した第１及び第２の実施の形態においては、入力点又は入力部分が第２閾値Ｌ２を超えて近づいた場合、表示画面Ｇ３をディスプレイ２に表示するようにした場合について述べた。
しかしながら本発明はこれに限らず、入力点又は入力部分が第２閾値Ｌ２を超えて近づいた場合、図１２（Ｂ）及び（Ｃ）に示すように、画像Ｇ５又は画面Ｇ６をディスプレイ２に表示するようにしても良い。
この画像Ｇ５は、表示画面Ｇ３よりもさらに多数の画像Ｐが表示される。また画像Ｇ６は、画像Ｇ５に表示された画像Ｐの上下方向に、例えば当該画像Ｐと日付が近い画像や同一地域で取られた画像などが上下に向かって透明度が高くなるように表示される。さらに画像Ｇ７は、画像Ｇ５に表示された画像Ｐの下方向に、例えば当該画像Ｐと日付が近い画像や同一地域で取られた画像などが下に向かって透明度が高くなるように表示される。
また画像Ｇ５、Ｇ６及びＧ７は、画像Ｇ３よりもさらにズームアウト表示されているので、例えばその余白部分に画像Ｐの撮像された年を表示するようになされている。
［３−８．他の実施の形態８］
さらに上述した第１及び第２の実施の形態においては、入力点又は入力部分が例えば第１閾値Ｌ１を超えて近づいた後、当該入力点又は入力部分が遠ざかった場合、第１閾値Ｌ１をパターン１からパターン２へ設定するようにした場合について述べた。
しかしながら本発明はこれに限らず、入力点又は入力部分が例えば第１閾値Ｌ１を超えて近づいた際、当該第１閾値Ｌ１を超えたら直ぐに第１閾値Ｌ１をパターン１からパターン２へ設定するようにしてもよい。
［３−９．他の実施の形態９］
さらに上述した第１及び第２の実施の形態においては、例えばパターン１で「１５０」に設定され、パターン２で「７０」に設定されるようにした場合について述べた。
しかしながら本発明はこれに限らず、第１閾値Ｌ１が、入力点又は入力部分がステレオカメラ４から遠ざかる場合、近づく場合と比べて、少なくともユーザが表示画面Ｇ１、Ｇ２又はＧ３が切り替わったことに驚いて手を引っ込めてしまう距離よりも遠い位置に設定されていれば良い。また第２閾値Ｌ２、第３閾値Ｌ３及び第４閾値Ｌ４についても同様である。
［３−１０．他の実施の形態１０］
さらに上述した第１及び第２の実施の形態においては、ＣＰＵ１１が不揮発性メモリ１２に格納されている画像表示処理プログラムに従い、上述した画像表示処理を行うようにした場合について述べた。しかしながら本発明はこれに限らず、記憶媒体からインストールしたり、インターネットからダウンロードした画像表示処理プログラムに従って上述した画像表示処理を行うようにしても良い。またその他種々のルートによってインストールした画像表示処理プログラムに従って上述した画像表示処理を行うようにしても良い。
［３−１１．他の実施の形態１１］
さらに上述した第１及び第２の実施の形態においては、操作子検出部としてステレオカメラ４が設けられるようにした場合について述べた。しかしながら本発明は、その他種々の構成でなる位置検出部を設けるようにしても良い。
さらに上述した第１及び第２の実施の形態においては、位置検出部としてＣＰＵ１１が設けられるようにした場合について述べた。しかしながら本発明は、その他種々の構成でなる位置検出部を設けるようにしても良い。
さらに上述した第１及び第２の実施の形態においては、閾値設定部としてＣＰＵ１１が設けられるようにした場合について述べた。しかしながら本発明は、その他種々の構成でなる閾値設定部を設けるようにしても良い。
さらに上述した第１及び第２の実施の形態においては、設定変更部としてＣＰＵ１１が設けられるようにした場合について述べた。しかしながら本発明は、その他種々の構成でなる設定変更部を設けるようにしても良い。
さらに上述した第１及び第２の実施の形態においては、処理実行部としてＣＰＵ１１が設けられるようにした場合について述べた。しかしながら本発明は、その他種々の構成でなる処理実行部を設けるようにしても良い。
本発明は、テレビジョン受像機以外にも例えば携帯電話等の情報処理装置に利用することができる。
１……テレビジョン受像機、２……ディスプレイ、３……スピーカ、４……ステレオカメラ、４Ａ、４Ｂ……カメラ、１１……ＣＰＵ、１２……不揮発性メモリ、１３……ＲＯＭ、１４……アンテナ、１５……チューナ部、１６……デコード部、１７……表示制御部、１８……音声制御部、１９……インターフェース部、２０……バス。

Claims (6)

  1. 所定の検出空間における操作子を検出する操作子検出部と、
    上記操作子検出部により検出された操作子の３次元位置を検出する位置検出部と、
    上記位置検出部により検出された３次元位置に基づき、上記操作検出部から所定の距離に設定された閾値を超えて上記操作子が上記操作子検出部に近づいた場合、上記閾値を上記所定の距離に対して上記操作子検出部から遠くなるよう設定する閾値設定部と、
    上記閾値設定部により設定された上記閾値を上記操作子が超えた場合、所定の処理に対する設定値を変更する設定変更部と、
    上記設定変更部により設定された上記設定値を用いて上記処理を実行する処理実行部と
    を具える情報処理装置。
  2. 上記閾値設定部は、
    上記所定の距離に設定された上記閾値を超えて上記操作子が近づき、かつ上記操作子が上記操作子検出部から遠ざかる場合、上記閾値を上記所定の距離に対して上記操作子検出部から遠くなるよう設定する
    請求項１に記載の情報処理装置。
  3. 上記実行処理部は、複数の処理の中から上記位置検出部により検出された上記操作子の３次元位置に応じた処理を実行し、
    上記閾値設定部は、
    上記処理実行部により実行される処理ごとに上記閾値を設定する
    請求項２に記載の情報処理装置。
  4. 上記操作子検出部により検出された上記操作子の形状を検出する形状検出部
    をさらに具え、
    上記処理実行部は、
    上記形状検出部により検出された形状に応じた処理を実行する
    請求項３に記載の情報処理装置。
  5. 所定の検出空間における操作子を検出する操作子検出部により検出された操作子の３次元位置を検出する位置検出ステップと、
    上記操作子検出ステップにより検出された操作子の３次元位置を検出する位置検出ステップと、
    上記位置検出ステップにより検出された上記３次元位置に基づき、上記操作検出部から所定の距離に設定された閾値を超えて上記操作子が上記操作子検出部に近づいた場合、上記閾値を上記所定の距離に対して上記操作子検出部から遠くなるよう設定する閾値設定ステップと、
    上記閾値設定ステップにより設定された上記閾値を上記操作子が超えた場合、所定の処理に対する設定値を変更する設定変更ステップと、
    上記設定変更ステップにより設定された上記設定値を用いて上記処理を実行する処理実行ステップと
    を具える情報処理方法。
  6. コンピュータに対して、
    所定の検出空間における操作子を検出する操作子検出部により検出された操作子の３次元位置を検出する位置検出ステップと、
    上記操作子検出ステップにより検出された操作子の３次元位置を検出する位置検出ステップと、
    上記位置検出ステップにより検出された上記３次元位置に基づき、上記操作検出部から所定の距離に設定された閾値を超えて上記操作子が上記操作子検出部に近づいた場合、上記閾値を上記所定の距離に対して上記操作子検出部から遠くなるよう設定する閾値設定ステップと、
    上記閾値設定ステップにより設定された上記閾値を上記操作子が超えた場合、所定の処理に対する設定値を変更する設定変更ステップと、
    上記設定変更ステップにより設定された上記設定値を用いて上記処理を実行する処理実行ステップと
    を実行させる情報処理プログラム。
JP2009098229A 2009-04-14 2009-04-14 情報処理装置、情報処理方法及び情報処理プログラム Expired - Fee Related JP5182202B2 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2009098229A JP5182202B2 (ja) 2009-04-14 2009-04-14 情報処理装置、情報処理方法及び情報処理プログラム
EP10250476.8A EP2241964B1 (en) 2009-04-14 2010-03-15 Information processing apparatus, information processing method, and information processing program
US12/755,890 US8947463B2 (en) 2009-04-14 2010-04-07 Information processing apparatus, information processing method, and information processing program
CN2010101512367A CN101866214B (zh) 2009-04-14 2010-04-07 信息处理设备和信息处理方法
RU2010114740/08A RU2010114740A (ru) 2009-04-14 2010-04-13 Устройство для обработки информации и способ обработки информации

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009098229A JP5182202B2 (ja) 2009-04-14 2009-04-14 情報処理装置、情報処理方法及び情報処理プログラム

Publications (2)

Publication Number Publication Date
JP2010250492A true JP2010250492A (ja) 2010-11-04
JP5182202B2 JP5182202B2 (ja) 2013-04-17

Family

ID=42359424

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009098229A Expired - Fee Related JP5182202B2 (ja) 2009-04-14 2009-04-14 情報処理装置、情報処理方法及び情報処理プログラム

Country Status (5)

Country Link
US (1) US8947463B2 (ja)
EP (1) EP2241964B1 (ja)
JP (1) JP5182202B2 (ja)
CN (1) CN101866214B (ja)
RU (1) RU2010114740A (ja)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012070161A1 (ja) * 2010-11-24 2012-05-31 パナソニック株式会社 情報処理装置
JP2012164115A (ja) * 2011-02-07 2012-08-30 Fujitsu Ltd 操作制御装置，操作制御プログラムおよび操作制御方法
JP2013149049A (ja) * 2012-01-19 2013-08-01 Kyocera Corp タッチパネル式入力装置
JP2013541110A (ja) * 2011-09-27 2013-11-07 イーロ・タッチ・ソリューションズ・インコーポレイテッド ジェスチャベースの入力のスケーリング
JP2014512060A (ja) * 2011-04-20 2014-05-19 コーニンクレッカ フィリップス エヌ ヴェ ジェスチャーに基づく要素又はアイテムの制御
JP2015508539A (ja) * 2012-01-09 2015-03-19 サムスン エレクトロニクス カンパニー リミテッド 表示装置及びその制御方法
JP2016148653A (ja) * 2016-01-21 2016-08-18 パイオニア株式会社 物体検出装置、物体検出方法、物体検出用プログラム及び情報記録媒体
US9448714B2 (en) 2011-09-27 2016-09-20 Elo Touch Solutions, Inc. Touch and non touch based interaction of a user with a device
JP2018028543A (ja) * 2017-09-19 2018-02-22 パイオニア株式会社 物体検出装置、物体検出方法、物体検出用プログラム及び情報記録媒体
CN109262606A (zh) * 2017-07-18 2019-01-25 松下知识产权经营株式会社 装置、方法、程序以及机器人
JP2019194596A (ja) * 2019-06-03 2019-11-07 パイオニア株式会社 物体検出装置

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9110582B2 (en) * 2010-11-03 2015-08-18 Samsung Electronics Co., Ltd. Mobile terminal and screen change control method based on input signals for the same
KR101863654B1 (ko) * 2010-11-03 2018-06-04 삼성전자 주식회사 입력 신호에 따른 화면 변화 제어 방법 및 이를 지원하는 휴대 단말기
JP5711962B2 (ja) * 2010-12-27 2015-05-07 株式会社ソニー・コンピュータエンタテインメント ジェスチャ操作入力処理装置およびジェスチャ操作入力処理方法
CN102681754B (zh) * 2011-03-16 2016-03-30 联想(北京)有限公司 信息处理设备和信息处理方法
US20120268374A1 (en) * 2011-04-25 2012-10-25 Heald Arthur D Method and apparatus for processing touchless control commands
US9152288B2 (en) * 2011-05-19 2015-10-06 Microsoft Technology Licensing, Llc Remote multi-touch
JP5839220B2 (ja) * 2011-07-28 2016-01-06 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
JP2013157061A (ja) * 2012-01-31 2013-08-15 Sony Corp 情報処理装置、情報処理方法、及びプログラム
JP2013191113A (ja) * 2012-03-15 2013-09-26 Sony Corp 表示制御装置、表示制御方法およびプログラム
EP2650754A3 (en) * 2012-03-15 2014-09-24 Omron Corporation Gesture recognition apparatus, electronic device, gesture recognition method, control program, and recording medium
KR101515623B1 (ko) * 2012-05-14 2015-04-28 삼성전자주식회사 벤디드 디스플레이를 갖는 휴대단말의 기능 운용 방법 및 장치
US8907264B2 (en) * 2012-06-14 2014-12-09 Intersil Americas LLC Motion and simple gesture detection using multiple photodetector segments
WO2014034031A1 (ja) 2012-08-30 2014-03-06 パナソニック株式会社 情報入力装置及び情報表示方法
USD737842S1 (en) * 2013-03-14 2015-09-01 Microsoft Corporation Display screen with graphical user interface
US20140282224A1 (en) * 2013-03-15 2014-09-18 Qualcomm Incorporated Detection of a scrolling gesture
JP6015547B2 (ja) * 2013-05-09 2016-10-26 株式会社デンソー 視線入力装置
CN103488296B (zh) * 2013-09-25 2016-11-23 华为软件技术有限公司 体感交互手势控制方法及装置
US20150097766A1 (en) * 2013-10-04 2015-04-09 Microsoft Corporation Zooming with air gestures
KR20150133898A (ko) * 2014-05-20 2015-12-01 삼성디스플레이 주식회사 창문 겸용 표시장치
FR3059440A1 (fr) * 2016-11-30 2018-06-01 Orange Navigation dans des donnees utilisateur
CN107728792B (zh) * 2017-11-17 2020-08-11 浙江大学 一种基于手势识别的增强现实三维绘图系统及绘图方法
JP6713591B1 (ja) * 2019-04-17 2020-06-24 楽天株式会社 表示制御装置、表示制御方法、プログラム、ならびに、非一時的なコンピュータ読取可能な情報記録媒体
KR20210042621A (ko) * 2019-10-10 2021-04-20 삼성전자주식회사 전자 장치 및 이를 이용한 카메라 배율 조정 방법

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04263741A (ja) * 1991-01-11 1992-09-18 Mitsubishi Electric Corp 温風暖房機
JP2008505381A (ja) * 2004-06-29 2008-02-21 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 表示装置の汚れを防ぐ方法及び装置
JP2008543226A (ja) * 2005-05-31 2008-11-27 スリーエム イノベイティブ プロパティズ カンパニー 容量性タッチセンサーにおける漂遊容量の検出および漂遊容量の補正
JP2008544352A (ja) * 2005-06-08 2008-12-04 スリーエム イノベイティブ プロパティズ カンパニー 多数のタッチ位置法を含むタッチ位置決定方法

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4035610B2 (ja) * 2002-12-18 2008-01-23 独立行政法人産業技術総合研究所 インタフェース装置
CN100480972C (zh) * 2004-06-29 2009-04-22 皇家飞利浦电子股份有限公司 图形用户界面的多层显示
US20060164382A1 (en) * 2005-01-25 2006-07-27 Technology Licensing Company, Inc. Image manipulation in response to a movement of a display
JP2006209563A (ja) * 2005-01-31 2006-08-10 Victor Co Of Japan Ltd インターフェース装置
KR100643470B1 (ko) * 2005-09-29 2006-11-10 엘지전자 주식회사 휴대용 단말기의 그래픽 신호 표시장치 및 방법
DE102006037154A1 (de) * 2006-03-27 2007-10-18 Volkswagen Ag Navigationsgerät und Verfahren zum Betreiben eines Navigationsgeräts
WO2008028334A1 (en) * 2006-09-01 2008-03-13 Thomson Licensing Method and device for adaptive video presentation
EP2153377A4 (en) * 2007-05-04 2017-05-31 Qualcomm Incorporated Camera-based user input for compact devices
EP2065795A1 (en) * 2007-11-30 2009-06-03 Koninklijke KPN N.V. Auto zoom display system and method
US20100259610A1 (en) * 2009-04-08 2010-10-14 Celsia, Llc Two-Dimensional Display Synced with Real World Object Movement

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04263741A (ja) * 1991-01-11 1992-09-18 Mitsubishi Electric Corp 温風暖房機
JP2008505381A (ja) * 2004-06-29 2008-02-21 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 表示装置の汚れを防ぐ方法及び装置
JP2008543226A (ja) * 2005-05-31 2008-11-27 スリーエム イノベイティブ プロパティズ カンパニー 容量性タッチセンサーにおける漂遊容量の検出および漂遊容量の補正
JP2008544352A (ja) * 2005-06-08 2008-12-04 スリーエム イノベイティブ プロパティズ カンパニー 多数のタッチ位置法を含むタッチ位置決定方法

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8891025B2 (en) 2010-11-24 2014-11-18 Panasonic Corporation Information processing device
WO2012070161A1 (ja) * 2010-11-24 2012-05-31 パナソニック株式会社 情報処理装置
JP2012164115A (ja) * 2011-02-07 2012-08-30 Fujitsu Ltd 操作制御装置，操作制御プログラムおよび操作制御方法
US9417703B2 (en) 2011-04-20 2016-08-16 Koninklijke Philips N.V. Gesture based control of element or item
JP2014512060A (ja) * 2011-04-20 2014-05-19 コーニンクレッカ フィリップス エヌ ヴェ ジェスチャーに基づく要素又はアイテムの制御
US9448714B2 (en) 2011-09-27 2016-09-20 Elo Touch Solutions, Inc. Touch and non touch based interaction of a user with a device
JP2013541110A (ja) * 2011-09-27 2013-11-07 イーロ・タッチ・ソリューションズ・インコーポレイテッド ジェスチャベースの入力のスケーリング
JP2015508539A (ja) * 2012-01-09 2015-03-19 サムスン エレクトロニクス カンパニー リミテッド 表示装置及びその制御方法
JP2013149049A (ja) * 2012-01-19 2013-08-01 Kyocera Corp タッチパネル式入力装置
JP2016148653A (ja) * 2016-01-21 2016-08-18 パイオニア株式会社 物体検出装置、物体検出方法、物体検出用プログラム及び情報記録媒体
CN109262606A (zh) * 2017-07-18 2019-01-25 松下知识产权经营株式会社 装置、方法、程序以及机器人
CN109262606B (zh) * 2017-07-18 2023-10-27 松下知识产权经营株式会社 装置、方法、记录介质以及机器人
JP2018028543A (ja) * 2017-09-19 2018-02-22 パイオニア株式会社 物体検出装置、物体検出方法、物体検出用プログラム及び情報記録媒体
JP2019194596A (ja) * 2019-06-03 2019-11-07 パイオニア株式会社 物体検出装置
JP2021152539A (ja) * 2019-06-03 2021-09-30 パイオニア株式会社 物体検出装置

Also Published As

Publication number Publication date
US8947463B2 (en) 2015-02-03
JP5182202B2 (ja) 2013-04-17
EP2241964B1 (en) 2016-10-05
US20100283730A1 (en) 2010-11-11
CN101866214A (zh) 2010-10-20
EP2241964A2 (en) 2010-10-20
CN101866214B (zh) 2012-12-05
EP2241964A3 (en) 2011-01-05
RU2010114740A (ru) 2011-10-20

Similar Documents

Publication Publication Date Title
JP5182202B2 (ja) 情報処理装置、情報処理方法及び情報処理プログラム
KR102194272B1 (ko) 제스처들을 이용한 터치 입력들의 향상
JP5282617B2 (ja) 情報処理装置、情報処理方法および情報処理プログラム
JP6036807B2 (ja) 情報処理装置、情報処理方法及びプログラム
JP5638896B2 (ja) 表示制御プログラム、表示制御装置、表示制御システム、および表示制御方法
EP3226537B1 (en) Mobile terminal and method for controlling the same
JP5732218B2 (ja) 表示制御プログラム、表示制御装置、表示制御システム、および表示制御方法
EP3239823A1 (en) Display control apparatus, method and program
WO2012165867A2 (en) Method and apparatus for controlling a display of multimedia content using a timeline-based interface
US20130182898A1 (en) Image processing device, method thereof, and program
EP2530675A2 (en) Information processing apparatus, information processing method, and program
JP6119570B2 (ja) 表示装置、表示方法およびプログラム
KR20180018561A (ko) 이미지 영역을 선택 및 추적함으로써 비디오를 확대축소하기 위한 장치 및 방법
TW201126406A (en) Device, method & computer program product
WO2014176912A1 (en) Two dimensional-code scanning method and device
EP2722748A2 (en) Method and apparatus for displaying data in terminal
EP3001294B1 (en) Mobile terminal and method for controlling the same
JP7080711B2 (ja) 電子機器、電子機器の制御方法、プログラム、及び、記憶媒体
JP2016115067A (ja) 画像表示端末、画像表示システム及び画像表示プログラム
EP3089014A1 (en) Information processing system, information processing method, and program
US10976912B2 (en) Information processing device, information processing method, and recording medium
KR101944828B1 (ko) 미디어 시스템, 전자 장치, 원격 제어 장치 및 컨텐츠의 줌을 조절하기 위한 방법
EP3040820B1 (en) Content playback apparatus and content playing method
KR101995423B1 (ko) 미디어 시스템, 전자 장치 및 채널 리스트를 이동하기 위한 방법
KR102026728B1 (ko) 미디어 시스템, 전자 장치, 화면 인터페이스 피드백 방법

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120126

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20121128

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20121218

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20121231

R151 Written notification of patent or utility model registration

Ref document number: 5182202

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20160125

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees