JP2022049563A - 情報処理装置、情報処理方法及び情報処理プログラム - Google Patents

情報処理装置、情報処理方法及び情報処理プログラム Download PDF

Info

Publication number
JP2022049563A
JP2022049563A JP2020155822A JP2020155822A JP2022049563A JP 2022049563 A JP2022049563 A JP 2022049563A JP 2020155822 A JP2020155822 A JP 2020155822A JP 2020155822 A JP2020155822 A JP 2020155822A JP 2022049563 A JP2022049563 A JP 2022049563A
Authority
JP
Japan
Prior art keywords
application
screen
information processing
setting
displayed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2020155822A
Other languages
English (en)
Inventor
研冴 田倉
Kento Takura
久美子 塚原
Kumiko Tsukahara
翔 小林
Sho Kobayashi
桂司 佐々木
Keiji Sasaki
郁彦 西尾
Ikuhiko Nishio
孝民 薛
Hyumin Seul
泰右 大西
Taisuke Onishi
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Group Corp
Original Assignee
Sony Group Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Group Corp filed Critical Sony Group Corp
Priority to JP2020155822A priority Critical patent/JP2022049563A/ja
Priority to US18/044,248 priority patent/US20230367468A1/en
Priority to PCT/JP2021/033939 priority patent/WO2022059707A1/ja
Publication of JP2022049563A publication Critical patent/JP2022049563A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/70—Game security or game management aspects
    • A63F13/79—Game security or game management aspects involving player-related data, e.g. identities, accounts, preferences or play histories
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/53—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game
    • A63F13/533—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game for prompting the player, e.g. by displaying a game menu
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04804—Transparency, e.g. transparent or translucent windows
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/445—Program loading or initiating
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Optics & Photonics (AREA)
  • Business, Economics & Management (AREA)
  • Computer Security & Cryptography (AREA)
  • General Business, Economics & Management (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

【課題】更なるユーザビリティの向上を促進する。【解決手段】実施形態に係る情報処理装置は、第１のアプリケーションの動作に関する設定を行う第２のアプリケーションを起動し、第１のアプリケーションの画面を表示し、画面の一部に第２のアプリケーションの設定を変更するためのメニューを重畳表示し、第１のアプリケーションと第２のアプリケーションとが独立して動作する処理を実行する制御部を備える。【選択図】図１

Description

本開示は、情報処理装置、情報処理方法及び情報処理プログラムに関する。
近年、ユーザは、パソコンやスマートフォン等の端末に様々なアプリケーションをインストールし、１つのアプリケーションのみならず、複数のアプリケーションを併用したユーザエクスペリエンスを得ている。
特開２０１７－１８８８３３号公報
しかしながら、従来の技術では、快適なユーザエクスペリエンスを得るために、更なるユーザビリティの向上を促進する余地があった。
そこで、本開示では、更なるユーザビリティの向上を促進することが可能な、新規かつ改良された情報処理装置、情報処理方法及び情報処理プログラムを提案する。
本開示によれば、第１のアプリケーションの動作に関する設定を行う第２のアプリケーションを起動し、第１のアプリケーションの画面を表示し、画面の一部に第２のアプリケーションの設定を変更するためのメニューを重畳表示し、第１のアプリケーションと第２のアプリケーションとが独立して動作する処理を実行する制御部を備えた、情報処理装置が提供される。
また、本開示によれば、情報処理装置が、第１のアプリケーションの動作に関する設定を行う第２のアプリケーションを起動し、第１のアプリケーションの画面を表示し、画面の一部に第２のアプリケーションの設定を変更するためのメニューを重畳表示し、第１のアプリケーションと第２のアプリケーションとが独立して動作する処理を実行する、情報処理方法が提供される。
また、本開示によれば、情報処理装置に、第１のアプリケーションの動作に関する設定を行う第２のアプリケーションを起動させ、第１のアプリケーションの画面を表示させ、画面の一部に第２のアプリケーションの設定を変更するためのメニューを重畳表示させ、第１のアプリケーションと第２のアプリケーションとが独立して動作する処理を実行させる、情報処理プログラムが提供される。
本実施形態に係る情報処理装置１０の機能構成例を示すブロック図である。 同実施形態に係る拡張アプリケーションのＵＩ表示に係る操作の一例を示す図である。 同実施形態に係る拡張アプリケーションのＵＩ表示に係る操作の一例を示す図である。 同実施形態に係る拡張アプリケーションのＵＩ表示に係る操作の一例を示す図である。 本開示の一実施形態に係る情報処理装置１０のハードウェア構成例を示すブロック図である。
以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
なお、説明は以下の順序で行うものとする。
１．実施形態
１．１．はじめに
１．２．機能構成例
１．３．機能の詳細
２．実施形態の変形例
３．ハードウェア構成例
４．まとめ
＜１．実施形態＞
＜＜１．１．はじめに＞＞
近年、ユーザは、パソコンやスマートフォン等の端末に様々なアプリケーションをインストールし、１つのアプリケーションのみならず、複数のアプリケーションを併用したユーザエクスペリエンスを得ている。
例えば、ユーザは、ゲームアプリケーションのプレイ画面の動画や画像をカメラアプリケーションで撮影する。撮影した動画や画像は別のアプリケーションで加工等され、Ｗｅｂサービスやさらに別のアプリケーションを介してネット配信やＷｅｂサイトに公開される。このように、ユーザは１つのアプリケーションを拡張するように、他のアプリケーションを用いた新たなユーザエクスペリエンスを得ようとする。
また、１つのアプリケーションを拡張するように他のアプリケーションを用いる際に、互いのアプリケーションの表示や動作を極力妨害しないことが、快適なユーザエクスペリエンスを得るために重要となる。例えば、ゲームアプリケーションのプレイ中に、カメラアプリケーションのユーザインタフェース（ＵＩ）がそのプレイを妨げるようなことは、快適なユーザエクスペリエンスを著しく損なわせてしまう。一方で、ゲームアプリケーションのプレイを優先させるためにカメラアプリケーションによる撮影がしづらくなるようなことは、プレイ画面の決定的瞬間の撮影を逃してしまうことにもなり得る。なお、このような課題は、ゲームアプリケーションやカメラアプリケーション等特定のアプリケーションを使用する場合に限ったものではなく、ユーザが様々なアプリケーションを併用する場合に同様に生ずる課題である。
そこで、本開示では、更なるユーザビリティの向上を促進することが可能な、新規かつ改良された情報処理装置、情報処理方法及び情報処理プログラムを提案する。
＜＜１．２．機能構成例＞＞
まず、本実施形態に係る情報処理装置１０の機能構成例について説明する。情報処理装置１０は、各種アプリケーションを実行可能なスマートフォンやタブレットＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）等のモバイル端末であってもよいし、ユーザの自宅や会社等に設置される据え置き端末であってもよい。
図１は、本実施形態に係る情報処理装置１０の機能構成例を示すブロック図である。図１に示すように、本実施形態に係る情報処理装置１０は、操作部１１０、記憶部１２０、撮影部１３０、センサ部１４０、表示部１５０、音声入力部１６０、音声出力部１７０、画面撮影部１８０、制御部１９０を備える。
（操作部１１０）
本実施形態に係る操作部１１０は、アプリケーションに対する機器操作等、ユーザによる各種の操作を検知する。上記の機器操作には、例えばタッチ操作や情報処理装置１０に対するイヤホン端子の挿入等が含まれる。ここでタッチ操作とは、表示部１５０に対する種々の接触動作、例えばタップ、ダブルタップ、スワイプ、ピンチ等をいう。また、タッチ操作には、表示部１５０に対し、例えば指等の物体を近づける動作を含む。このために、本実施形態に係る操作部１１０は、例えば、タッチパネル、ボタン、キーボード、マウス、近接センサ等を備える。本実施形態に係る操作部１１０は、検知したユーザの操作に係る情報を制御部１９０に入力する。
（記憶部１２０）
本実施形態に係る記憶部１２０は、各種プログラムやデータを一時的または恒常的に記憶するための記憶領域である。例えば、記憶部１２０には、情報処理装置１０が各種機能を実行するためのプログラムやデータが記憶されてもよい。具体的な一例として、記憶部１２０には、各種アプリケーションを実行するためのプログラムや、各種設定等を管理するための管理データ等が記憶されてよい。もちろん、上記はあくまで一例であり、記憶部１２０に記憶されるデータの種別は特に限定されない。
（撮影部１３０）
本実施形態に係る撮影部１３０は、制御部１９０による制御に基づいて、例えば、情報処理装置１０を操作するユーザの顔等を撮影する。このために、本実施形態に係る撮影部１３０は、撮像素子を備える。情報処理装置１０の一例であるスマートフォンは、表示部１５０側にユーザの顔等を撮影するためのフロントカメラを、表示部１５０の背面側に風景等を撮影するためのメインカメラを備え、本実施形態では、一例としてフロントカメラでの撮影を制御する。
（センサ部１４０）
本実施形態に係るセンサ部１４０は、ユーザの行動に係るセンサ情報を、各種センサを用いて収集する機能を有する。センサ部１４０は、例えば加速度センサ、ジャイロセンサ、地磁気センサ、振動センサ、ＧＮＳＳ（Ｇｌｏｂａｌ Ｎａｖｉｇａｔｉｏｎ Ｓａｔｅｌｌｉｔｅ Ｓｙｓｔｅｍ）信号受信装置等を備える。センサ部１４０は、例えば、ユーザが情報処理装置１０を横向きに構えたことをジャイロセンサによって検知し、検知した情報を制御部１９０に入力する。
（表示部１５０）
本実施形態に係る表示部１５０は、制御部１９０による制御に基づいて各種の視覚情報を表示する。本実施形態に係る表示部１５０は、例えば、アプリケーションに係る画像や文字等を表示してよい。このために、本実施形態に係る表示部１５０は、液晶ディスプレイ（ＬＣＤ：Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）装置、ＯＬＥＤ（Ｏｒｇａｎｉｃ Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）ディスプレイ装置等、各種のディスプレイ装置を備える。また、表示部１５０は、表示しているアプリケーションの画面よりも上位のレイヤに、他のアプリケーションのＵＩを重畳表示させることもできる。
（音声入力部１６０）
本実施形態に係る音声入力部１６０は、制御部１９０による制御に基づいてユーザが発する音声等を収集する。このために、本実施形態に係る音声入力部１６０は、マイクロホン等を備える。
（音声出力部１７０）
本実施形態に係る音声出力部１７０は、各種の音声を出力する。本実施形態に係る音声出力部１７０は、例えば、制御部１９０による制御に基づいてアプリケーションの状況に応じた音声や音を出力する。このために、本実施形態に係る音声出力部１７０は、スピーカやアンプを備える。
（画面撮影部１８０）
本実施形態に係る画面撮影部１８０は、制御部１９０による制御に基づいて、表示部１５０に表示される画面のスクリーンショット（ＳＳ）や動画の撮影を行い、記憶部１２０に記憶する。
（制御部１９０）
本実施形態に係る制御部１９０は、情報処理装置１０が備える各構成を制御する。また本実施形態に係る制御部１９０は、アプリケーションに対する機能拡張を制御することを特徴の一つとする。なお、アプリケーションに対する機能拡張は、別のアプリケーションによって行われる（ここで、機能拡張が行われるアプリケーションと、機能拡張を行う別のアプリケーションとを区別するため、それぞれを「外部アプリケーション」（第１のアプリケーションの一例）、「拡張アプリケーション」（第２のアプリケーションの一例）と呼ぶ）。機能拡張を行う際、制御部１９０は、外部アプリケーションの他、拡張アプリケーションを起動し、両方のアプリケーションを同時に制御する。本実施形態に係る制御部１９０が有する機能の詳細については後述される。
以上、本実施形態に係る情報処理装置１０の機能構成例について説明した。なお、図１を用いて説明した上記の機能構成はあくまで一例であり、本実施形態に係る情報処理装置１０の機能構成は係る例に限定されない。例えば、情報処理装置１０は、必ずしも図１に示す構成のすべてを備えなくてもよいし、音声入力部１６０等の各構成を情報処理装置１０とは異なる別の装置に備えることも可能である。本実施形態に係る情報処理装置１０の機能構成は、仕様や運用に応じて柔軟に変形可能である。
また、各構成要素の機能を、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｃｅｓｓｉｎｇ Ｕｎｉｔ）等の演算装置がこれらの機能を実現する処理手順を記述した制御プログラムを記憶したＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）やＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）等の記憶媒体から制御プログラムを読み出し、そのプログラムを解釈して実行することにより行ってもよい。従って、本実施形態を実施する時々の技術レベルに応じて、適宜利用する構成を変更することが可能である。また情報処理装置１０のハードウェア構成の一例については後述される。
＜＜１．３．機能の詳細＞＞
次に、本実施形態に係る情報処理装置１０が有する機能について詳細に説明する。本実施形態に係る情報処理装置１０の制御部１９０は、各種の外部アプリケーションに対し拡張機能を提供する拡張アプリケーションを制御することを特徴の一つとする。外部アプリケーションとは、例えば、ゲームアプリケーションである。しかしながら、外部アプリケーションは、ゲームアプリケーションに限られず、描画アプリケーションや編集アプリケーション、動画や楽曲等を視聴するための音楽アプリケーション等、情報処理装置１０にインストールしてユーザによって使用される各種のアプリケーションを含む。
本実施形態に係る拡張アプリケーションによれば、各種の外部アプリケーションに対し、ソースコードの編集等を行わずに手軽に拡張機能を提供することが可能である。また、拡張機能を提供する際も、拡張アプリケーションは、外部アプリケーションやＯＳに対するユーザ操作、および外部アプリケーションの挙動を妨げないように動作することができる。
以下、図２乃至図４を用いて、本実施形態に係る拡張アプリケーションのメニュー表示に係る操作を説明する。図２乃至図４では、ユーザが情報処理装置１０を横向きにしたことにより、センサ部１４０がそれを検知し、制御部１９０によって表示部１５０における画面は横画面で表示されている。
図２は、本実施形態に係る拡張アプリケーションのメニュー表示に係る操作の一例を示す図である。図２上段は、制御部１９０が既に外部アプリケーション（ここでは、ゲームアプリケーション）を起動し、表示部１５０に外部アプリケーションの画面を全画面表示させた状態を示している。図２上段では、ユーザが外部アプリケーションをプレイ中に、拡張アプリケーションを起動させた状態である。なお、図２上段のように、拡張アプリケーションによってゲーム環境を快適にすることが可能な場合には、拡張アプリケーションを、以下、適宜、エンハンサ（Ｅｎｈａｎｃｅｒ）と呼ぶものとする。
以下、本実施形態では、ユーザが外部アプリケーションをプレイ中に、拡張アプリケーションを起動させた場合、外部アプリケーションと拡張アプリケーションとが独立して動作するように制御部１９０によって制御されるものとする。すなわち、外部アプリケーションと拡張アプリケーションとの双方をユーザが同時に操作できるように制御部１９０によって制御されるものとする。このように、ユーザが拡張アプリケーションを操作中でも、外部アプリケーションの動作は進行するため、ユーザは拡張アプリケーションを操作しながら、外部アプリケーションの操作が可能となる。また、拡張アプリケーションの設定の変更は外部アプリケーションに即時反映されるものとする。これにより、ユーザは、ゲームのプレイ中に、体感に合わせて最適な設定値を適切に探索することができる。
図２上段における表示部１５０には、外部アプリケーションに対して機能拡張を行う拡張アプリケーションのＵＩ１１が表示されている。なお、ＵＩ１１を表示するための操作は、例えば、ユーザが表示部１５０に対し、アイコンをタップする、プルダウンでメニューを呼び出す等のタッチ操作である。ここで、拡張アプリケーションは、外部アプリケーションの起動を検知して制御部１９０によって起動されてもよいし、外部アプリケーション起動中の任意の操作を検知して起動されてもよい。任意の操作とは、例えば、操作部１１０やセンサ部１４０によって検知されるユーザ操作や、音声入力部１６０によって認識される音声操作等である。また、拡張アプリケーションは、情報処理装置１０のＯＳの起動と共に自動起動されてもよい。または、表示部１５０に表示された拡張アプリケーション用のアイコンがユーザ操作によって押下される等して拡張アプリケーションが起動されてもよい。
このように、外部アプリケーションの起動中に拡張アプリケーションも起動中の場合があるが、拡張アプリケーションをユーザが使用していない時は、原則、拡張アプリケーションのＵＩは表示されないようにしてもよい。なお、拡張アプリケーションの起動時にロゴ等を表示してもよいが、例えば、一定時間後にロゴが自動的に消える等の制御が制御部１９０によって行われてもよい。これにより、拡張アプリケーションをユーザが使用していない時、拡張アプリケーションは、外部アプリケーションやＯＳに対するユーザ操作、および外部アプリケーションの挙動を妨げないように動作することができる。
図２上段の表示部１５０に表示されたＵＩ１１は、ゲームモードと、フォーカス設定と、メニュータイプと、サーチと、スクリーンショットと、レコードとの複数の項目（ＧＥ１１乃至ＧＥ１６）を含む。このうち、例えば、項目ＧＥ１１は、拡張アプリケーションのゲームモードのＵＩ１２を表示するためのアイコンである。なお、上記は一例であり、ＵＩ１１に表示される項目の種別、数、及び表示態様等は特に限定されない。図２上段は、拡張アプリケーションのゲームモードを使用するため、ユーザが表示部１５０に対し、タッチ操作を行おうとしている状態を示す。なお、図中の手のアイコンは、タッチ操作を行おうとしているユーザの手を示す。続いて、図２下段は、ユーザが表示部１５０に表示された項目ＧＥ１１に対しタッチ操作を行ったことにより、拡張アプリケーションのゲームモードのＵＩ１２が、外部アプリケーションに対して重畳表示された状態を示している。すなわち、ユーザが項目ＧＥ１１に対してタッチ操作を行ったことにより、拡張アプリケーションの画面（ＵＩ画面）は、ＵＩ１１からＵＩ１２へ遷移する。なお、本実施形態に係るＵＩ画面の遷移は、制御部１９０によって制御される。
図２下段における表示部１５０には、拡張アプリケーションのゲームモードのＵＩ１２が表示されている。図２下段の表示部１５０に表示されたＵＩ１２は、パフォーマンス優先と、バランスと、省電力優先と、カスタムとの複数の項目（ＧＥ２１乃至ＧＥ２４）を含む。このうち、例えば、項目ＧＥ２４は、拡張アプリケーションの動作を、記憶部１２０に記憶されたカスタム設定にするための項目である。図２下段では、ＧＥ２１乃至ＧＥ２４のうち、バランスが選択されている状態を一例として示す。また、図２下段の表示部１５０に表示されたＵＩ１２は、タッチエリアの最適化と、ＶＣマイクの最適化と、ＨＳパワーコントロールとの複数の項目（ＧＥ２５乃至ＧＥ２７）を含む。図２下段では、ＧＥ２５乃至ＧＥ２７は、オン及びオフの２択により選択される。なお、上記は一例であり、ＵＩ１２に表示される項目の種別、数、及び表示態様等は特に限定されない。
図２下段の表示部１５０に表示されたＵＩ１２は、複数のテキスト（ＴＸ２１乃至ＴＸ２５）を含む。テキストＴＸ２１は、項目（ＧＥ２１乃至ＧＥ２４）の選択をサポートするためのテキストであり、例えば、「エンハンサ使用中は、スタミナモードが無効化されます。電池の消費を抑えたい場合は、「省電力優先」を選択してください。」である。また、テキストＴＸ２２は、タッチエリアの最適化（項目ＧＥ２５）の設定をサポートするためのテキストであり、例えば、「ＯＦＦ／本機能は縦画面では無効です。」である。
テキストＴＸ２３は、ＶＣマイクの最適化（項目ＧＥ２６）の設定をサポートするためのテキストであり、例えば、「ゲーミングヘッドセットのような、口元にマイクがあるヘッドセットでボイスチャットを行うと、相手が音声を聞き取りやすくなります。」である。また、テキストＴＸ２４は、ＨＳパワーコントロール（項目ＧＥ２７）の設定をサポートするためのテキストであり、例えば、「充電中の端末高温化によるパフォーマンス低下や電池劣化を抑制します。」である。また、テキストＴＸ２５は、ゲームモード（項目ＧＥ１１）の設定をサポートするためのテキストであり、例えば、「この設定は、このゲーム中のみ有効です。」である。
図２下段の表示部１５０に表示されたＵＩ１２は、カスタム（項目ＧＥ２４）の右側に歯車のアイコン（項目ＧＥ２８）を含む。項目ＧＥ２８は、拡張アプリケーションのカスタム設定のＵＩ１３を表示するためのアイコンである。なお、項目ＧＥ２８は歯車のアイコンに限らず、表示態様は特に限定されない。また、項目ＧＥ２８の表示位置も特に限定されない。また、図２下段は、拡張アプリケーションのカスタム設定を使用するため、ユーザが表示部１５０に対し、タッチ操作を行おうとしている状態を示す。なお、図中の手のアイコンは、タッチ操作を行おうとしているユーザの手を示す。
図３は、本実施形態に係る拡張アプリケーションのメニュー表示に係る操作の一例を示す図である。図３上段は、図２下段と同一であるため説明を省略する。続いて、図３下段は、ユーザが表示部１５０に表示された項目ＧＥ２８に対しタッチ操作を行ったことにより、拡張アプリケーションのカスタム設定のＵＩ１３が、外部アプリケーションに対して重畳表示された状態を示している。すなわち、ユーザが項目ＧＥ２８に対してタッチ操作を行ったことにより、拡張アプリケーションの画面は、ＵＩ１２からＵＩ１３へ遷移する。
図３下段における表示部には、拡張アプリケーションのカスタム設定のＵＩ１３が表示されている。図３下段の表示部１５０に表示されたＵＩ１３は、画面リフレッシュレート（リフレッシュレート）と、タッチ反応速度と、タッチ追従性との複数の項目（ＧＥ３１乃至ＧＥ３３）を含む。なお、リフレッシュレート、タッチ反応速度、及びタッチ追従性の詳細は後述する。
図３下段の表示部１５０に表示されたＵＩ１３は、複数のテキスト（ＴＸ３１乃至ＴＸ３４）を含む。テキストＴＸ３１は、リフレッシュレート（項目ＧＥ３１）の設定をサポートするためのテキストであり、例えば、「値が高いほど画面をなめらかに表示できます。なお消費電力が上がるため、本体の温度が上昇する場合があります。高温になると本機能は無効となります。」である。また、テキストＴＸ３２は、タッチ反応速度（項目ＧＥ３２）の設定をサポートするためのテキストであり、例えば、「高く設定するほどタッチ操作の反応が速くなります。」である。また、テキストＴＸ３３は、タッチ追従性（項目ＧＥ３３）の設定をサポートするためのテキストであり、例えば、「高く設定するほど指の動きをより忠実に反映します。」である。また、テキストＴＸ３４は、カスタム（項目ＧＥ２４）の設定をサポートするためのテキストであり、例えば、「温度上昇によって、これらのパラメータを自動調整する場合があります。」である。
図３下段の表示部１５０に表示されたＵＩ１３は、リフレッシュレートが４０Ｈｚ及び１２０Ｈｚの場合の静止画（ＩＭ３１及びＩＭ３２）を含む。一般的に、リフレッシュレートは、単位時間あたりの画面の書き直し回数を示し、リフレッシュレートが高いほど画像が滑らかになる。また、通常ヘルツ（Ｈｚ）を単位とする。また、約９０Ｈｚ以上が人間の視野において元来見ているものに近い。ＩＭ３１及びＩＭ３２は、リフレッシュレートが４０Ｈｚ及び１２０Ｈｚの場合の画像の見え方の一例を示す。なお、ＩＭ３１及びＩＭ３２は一例であり、ＵＩ１３に表示される画像は特に限定されない。また、ＩＭ３１及びＩＭ３２は静止画に限らず動画等であってもよい。また、ＩＭ３１及びＩＭ３２は、リフレッシュレートが４０Ｈｚ及び１２０Ｈｚの場合の画像に限らず、１６０Ｈｚや２４０Ｈｚの場合等の画像であってもよい。また、ＩＭ３１及びＩＭ３２は、項目ＧＥ３１で選択可能なリフレッシュレート以外の場合の画像であってもよい。
図３下段の表示部１５０に表示されたＵＩ１３は、初期化とプレビューとの複数の項目（ＧＥ３４及びＧＥ３５）を含む。項目ＧＥ３４は、リフレッシュレート、タッチ反応速度、及びタッチ追従性の項目（ＧＥ３１乃至ＧＥ３３）を初期化するための項目である。例えば、ユーザが表示部１５０に表示された項目ＧＥ３４に対しタッチ操作を行ったことにより、項目（ＧＥ３１乃至ＧＥ３３）の設定値を初期設定値に戻す。例えば、ユーザが項目ＧＥ３４に対しタッチ操作を行ったことにより、記憶部１２０に記憶された初期設定値に設定値を変更するように制御部１９０によって制御される。なお、項目ＧＥ３４の表示位置や表示態様等は特に限定されない。
項目ＧＥ３５は、拡張アプリケーションのフローティングメニューのＵＩ１４を表示するための項目である。図３下段は、拡張アプリケーションのフローティングメニューを使用するため、ユーザが表示部１５０に対し、タッチ操作を行おうとしている状態を示す。なお、図中の手のアイコンは、タッチ操作を行おうとしているユーザの手を示す。
図４は、本実施形態に係る拡張アプリケーションのメニュー表示に係る操作の一例を示す図である。図４上段は、図３下段と同一であるため説明を省略する。続いて、図４下段は、ユーザが表示部１５０に表示された項目ＧＥ３５に対しタッチ操作を行ったことにより、拡張アプリケーションのフローティングメニューのＵＩ１４が、外部アプリケーションに対して重畳表示された状態を示している。すなわち、ユーザが項目ＧＥ３５に対してタッチ操作を行ったことにより、拡張アプリケーションの画面は、ＵＩ１３からＵＩ１４へ遷移する。なお、項目ＧＥ３５の表示位置や表示態様等は特に限定されない。
ここで、ＵＩ１４について、ＵＩ１３と比較しながら説明する。ＵＩ１４は、ＵＩ１３に対して、例えば、設定変更のためのユーザのタッチ操作による操作性をなるべく損なわないようにしつつ、表示項目を削減し、ＵＩのレイアウトを変更し、極力、表示サイズを小さくした設定画面である。そのため、ＵＩ１４では、ＵＩ１３と比べると、設定画面の表示サイズが小さくなっているため、その分、設定画面と重なるゲーム画面のエリアが減少し得る。そのため、ＵＩ１４では、ゲーム画面が見やすくなり、また、タッチ操作であれば、ユーザは、設定を変えた後、実際のゲーム画面上で、タッチ操作をしてみて、タッチ操作がどう変わったか、ユーザは試して自分が満足する設定を探ることになるが、ゲーム画面上のあちこちにユーザがタッチ操作可能なボタンやオブジェクトが配置されている場合、設定画面が小さくなっていることにより、よりたくさんのボタンやオブジェクトが設定画面の位置を変えなくてもタッチ操作可能になり得る。
また、ＵＩ１３では、図中に示すように、ゲーム画面の大部分が、設定画面で隠れてしまう場合もあるため、ゲームによってはゲームの動作を止める又は一時停止する処理を必要とする場合もある。一方、ＵＩ１４では、ゲーム画面の邪魔にならないよう小さくしていることもあって、ゲームを動作させながら、フローティングアイコンとして上位レイヤに表示することが可能になる。
図４下段における表示部には、拡張アプリケーションのフローティングメニューのＵＩ１４が表示されている。図４下段では、ＵＩ１４は表示部１５０における中央部分に表示されている。図４下段の表示部１５０に表示されたＵＩ１４は、リフレッシュレートと、タッチ反応速度と、タッチ追従性との複数の項目（ＧＥ４１乃至ＧＥ４３）を含む。ここで、項目（ＧＥ４１乃至ＧＥ４３）は、項目（ＧＥ３１乃至ＧＥ３３）と同様のものであるものとする。例えば、項目（ＧＥ３１乃至ＧＥ３３）で表示されたものが、項目（ＧＥ４１乃至ＧＥ４３）で表示されるものとする。すなわち、項目（ＧＥ４１乃至ＧＥ４３）の設定値は、Ｕ１３からＵ１４への遷移直前の項目（ＧＥ３１乃至ＧＥ３３）の設定値である。このため、項目（ＧＥ４１乃至ＧＥ４３）の説明を省略する。
図４下段の表示部１５０に表示されたＵＩ１４は、テキストＴＸ４１を含む。テキストＴＸ４１は、ＵＩ１４に含まれる項目（ＧＥ４１乃至ＧＥ４３）の設定をサポートするためのテキストであり、例えば、「ゲーム画面を実際に操作して、ゲーム環境が意図通りかを確認できます。」である。
図４下段の表示部１５０に表示されたＵＩ１４は、ユーザが表示部１５０の画面上でＵＩ１４を自由に移動できるようにするためのアイコンである項目ＧＥ４４を含む。項目ＧＥ４４は、例えば、ユーザがタッチ操作を行う際に掴む部分である。なお、項目ＧＥ４４の表示位置や表示態様等は特に限定されない。例えば、ユーザが表示部１５０に表示された項目ＧＥ４４に対しドラッグ（若しくは、ドラッグ・アンド・ドロップ）等のタッチ操作を行うことにより、ＵＩ１４はユーザが意図する位置へ自由に移動される。このように、ＵＩ１４の表示位置は、ユーザによって自由に移動できるように制御部１９０によって制御される。なお、ＵＩ１４は、移動中も外部アプリケーションの画面に対して重畳表示される。言い替えると、ＵＩ１４は、外部アプリケーションの画面に対してフローティング状態で重畳表示される。具体的な例を挙げると、表示部１５０における右上部分に表示されていたＵＩ１４を、ユーザがタッチ操作することにより、表示部１５０における左上部分に移動させる場合には、ＵＩ１４の表示位置は、表示部１５０における右上部分から、左上部分に変更される。
図４下段の表示部１５０に表示されたＵＩ１４は、ユーザがＵＩ１４の画面を閉じるためのアイコンである項目ＧＥ４５を含む。なお、項目ＧＥ４５の表示位置や表示態様等は特に限定されない。例えば、ユーザが表示部１５０に表示された項目ＧＥ４５に対しタッチ操作を行うことにより、ＵＩ１４の画面は閉じる。なお、拡張アプリケーションに対する操作は即時反映されるため、Ｕ１４の画面を閉じる直前の項目（ＧＥ４１乃至ＧＥ４３）の設定値が動作に反映される。そして、ＵＩ１４の画面が閉じると、拡張アプリケーションの起動前の状態に戻り、外部アプリケーションの画面が全画面に表示された状態に戻る。なお、この例に限らず、ユーザが項目ＧＥ４５に対してタッチ操作を行ったことにより、拡張アプリケーションの画面は、ＵＩ１４からＵＩ１１乃至ＵＩ１３のいずれかへ遷移してもよい。若しくは、ＵＩ１４は、図示されない他のＵＩ画面へ遷移してもよい。
なお、図２乃至図４で変更したＵＩ設定は、制御部１９０によって記憶部１２０に記憶され、以降、拡張アプリケーションを使用する場合は、記憶されたＵＩ設定がＵＩ画面に表示される。さらに、ＵＩ設定は、外部アプリケーションと関連付けて、外部アプリケーションごとに記憶部１２０に記憶されてもよい。さらに、ＵＩ設定は、外部アプリケーションの特定対象（例えば、銃等のもの、場面）と関連付けて、外部アプリケーションの特定対象ごとに記憶部１２０に記憶されてもよい。
なお、本実施形態に係るＵＩ（ＵＩ１１乃至ＵＩ１４）を表示するためのタッチ操作は、どのようなものであってもよい。例えば、本実施形態に係るＵＩを表示するためのタッチ操作は、タップ、ダブルタップ、ドラッグ、ピンチ、及びスワイプ等であってもよい。また、本実施形態に係るＵＩの表示位置も特に限定されない。例えば、ＵＩ１２の表示位置は、図２下段のような表示部１５０における左側やＵＩ１１と同じ側に限定されず、表示部１５０における様々な位置であってもよい。また、例えば、ＵＩ１４の表示位置は、図４下段のような表示部１５０における中央部分に限定されず、表示部１５０における様々な位置であってもよい。また、本実施形態に係るＵＩの表示態様も特に限定されない。例えば、本実施形態に係るＵＩは、外部アプリケーションの画面に対して重畳表示されるため、外部アプリケーションの画面表示を極力妨げない形状や色、大きさ、透過率であることが望ましい。
本実施形態に係るＵＩは、外部アプリケーションの画面表示を極力妨げないように、透過性のある画面であってもよい。例えば、本実施形態に係るＵＩは、外部アプリケーションの背景がＵＩ画面の領域上で視認可能な透過性のある画面であってもよい。また、外部アプリケーションの色の濃さ等の背景情報に基づいて、外部アプリケーションの背景が視認可能となるようにＵＩ画面の透過率が変更されるように制御部１９０によって制御されてもよい。また、本実施形態に係るＵＩは、外部アプリケーションの画面表示を極力妨げないように、サイズが可変の画面であってよい。本実施形態に係るＵＩの画面占有率が高くなると外部アプリケーションが見え難くなるため、外部アプリケーションの動作をなるべく妨害しない最小値となるようにＵＩ画面のサイズが変更されるように制御部１９０によって制御されてもよい。
また、本実施形態に係るＵＩ１１乃至ＵＩ１３は、表示部１５０におけるＵＩ画面以外の領域をタッチ操作することにより、またはＵＩ画面を一定時間操作しなかった場合に非表示状態となるように制御部１９０によって制御される。このように、本実施形態に係るＵＩ１１乃至ＵＩ１３は、ユーザが使用しない場合は非表示状態となるように制御部１９０によって制御される。なお、本実施形態に係るＵＩ１４は、表示部１５０におけるＵＩ画面以外の領域をタッチ操作しても、またはＵＩ画面を一定時間操作しなかった場合にも非表示状態とならないように制御部１９０によって制御される。このように、本実施形態に係るＵＩ１４は、ユーザが使用しない場合にも非表示状態とならないように制御部１９０によって制御される。これにより、ユーザは、表示部１５０におけるＵＩ画面以外の領域で外部アプリケーションの動作を確認しながらＵＩ画面で適宜設定の調整を行うことができるため、ＵＩ１４は、ユーザに最適な設定を明示的に提供することができる。
以下、本実施形態に係るリフレッシュレート、タッチ反応速度、及びタッチ追従性について説明する。
リフレッシュレートは、単位時間あたりの画面の書き直し回数を示す。また、リフレッシュレートが高いほど画像が滑らかになり、低いほど残像感が強調されるようになる。項目ＧＥ３１は、リフレッシュレートの選択肢に４０Ｈｚ、６０Ｈｚ、１２０Ｈｚ、及び２４０Ｈｚを含む。図３下段では、上記選択肢のうち、６０Ｈｚが選択されている状態を一例として示した。なお、本実施形態では、項目ＧＥ３１で選択されたリフレッシュレートと、静止画（ＩＭ３１及びＩＭ３２）のリフレッシュレートとに対応関係はない。このため、項目ＧＥ３１のリフレッシュレートが変更されたとしても、静止画（ＩＭ３１及びＩＭ３２）は変更されない。上述したように、リフレッシュレートは、低いほど残像感が強調されるようになるため、外部アプリケーションの動作の残像感の抑制に関する設定に関すると解すこともできる。なお、リフレッシュレートが２４０Ｈｚの場合には、表示される画面が２４０回書き直されるのではなく、１回ごとに黒の画像が挿入されてもよい。この場合、ユーザの視覚において焼付いたものを黒でリフレッシュすることで残像感を抑えることができる。これは、表示される画面が各々のリフレッシュレートの回数で書き直される４０Ｈｚ、６０Ｈｚ、及び１２０Ｈｚの場合と異なるものとする。
タッチ反応速度及びタッチ追従性は、タッチのレスポンスがどれだけ早いか遅いか、タッチしたときにどれだけ細かくユーザの意図通りに再現できるか等を示す。従来、誤操作等が起きないようにある程度タッチの点を推測して最も強く推された点で反応させていた。しかしながら、ゲーム等の複数の指を使ってプレイする場合等では、タッチしている点全てをユーザの意図として、指の動きを完全にトレースしたほうがいい場合もある。このため、ユーザの意図する点の感度をユーザが自由に変更できたほうがいい場合もある。また、従来、このような設定を、ゲーム等の外部アプリケーションを起動する前に決めさせていた。しかしながら、この場合、設定を調整するために、ゲーム画面と設定画面とを行き来しなければならず、より快適なユーザエクスペリエンスを得るために、更なるユーザビリティの向上を促進する余地があった。
タッチ反応速度は、例えば、ユーザがタッチしてから動かしたまでの時間をトータルで測定し、タッチに関する検知を示す。例えば、タッチ反応速度が高くなると、射撃のボタンを押してから結果が出力されるまでの時間が早くなる。このため、タッチ反応速度は、ゲームにおけるレンダ等に強く影響する。このため、タッチ反応速度は、外部アプリケーションの動作の時間軸上の追従性に関する設定に関すると解すこともできる。また、タッチ追従性は、例えば、ユーザがタッチしてから動かしたまでの時間をトータルで測定し、動かしたに関する検知を示す。例えば、タッチ追従性が高くなると、ユーザが画面上に親指を置いた場合において、検出される点が１点ではなく、より多くの点が検出されるようになる。このため、タッチ追従性は、ゲームにおける断続的な動き等に強く影響する。このため、タッチ追従性は、外部アプリケーションの動作の解像度に基づく追従性に関する設定に関すると解すこともできる。なお、タッチ追従性は、ユーザの押し感等を含まない場合には、外部アプリケーションの動作の静的な解像度に基づく追従性に関する設定に関すると解すこともできる。
＜２．実施形態の変形例＞
以上、本開示の実施形態について説明した。続いて、本開示の実施形態の変形例を説明する。なお、以下に説明する変形例は、単独で本開示の実施形態に適用されてもよいし、組み合わせで本開示の実施形態に適用されてもよい。また、変形例は、本開示の実施形態で説明した構成に代えて適用されてもよいし、本開示の実施形態で説明した構成に対して追加的に適用されてもよい。
上記実施形態では、リフレッシュレート、タッチ反応速度、及びタッチ追従性の３つの設定値を調整する場合を示したが、この例に限られない。例えば、外部アプリケーションにより再生される音に変化を与えるように制御部１９０によって制御されてもよい。例えば、特定の帯域を強調する等、外部アプリケーションに合わせて帯域が調整されるように制御部１９０によって制御されてもよい。また、例えば、外部アプリケーションの画質に変化を与えるように制御部１９０によって制御されてもよい。例えば、画質の特定の色（例えば、青色や黄色）を強調する等、外部アプリケーションに合わせて画質の色が調整されるように制御部１９０によって制御されてもよい。
また、例えば、外部アプリケーションにおいて複数のユーザで仲間を組んで意思疎通を行う場合には、環境音（例えば、ユーザがタイプするタイプ音、バイクの音、実況しているキャスタの声）が抑制されるように制御部１９０によって制御されてもよい。このように、仲間のユーザの声が聞こえ易い帯域が提供されるように制御部１９０によって制御されてもよい。このように、上記実施形態において、ノイズ低減機能が提供されてもよい。これにより、ユーザが外部アプリケーションを長時間プレイしても、疲労を極力抑えるユーザエクスペリエンスを提供することができる。
上記実施形態では、本実施形態に係るＵＩ１４は、本実施形態に係るＵＩ１３に対してタッチ操作を行うことにより遷移される場合を示したが、この例に限らない。例えば、本実施形態に係るＵＩ１１又はＵＩ１２に、ＵＩ１４へ直接遷移するためのアイコンを表示させてもよい。また、例えば、外部アプリケーションの画面に、ＵＩ１４を直接表示するためのアイコンを表示させてもよい。また、例えば、ＵＩ１４を直接表示するためのトリガを設定することにより、「メニュー出して」等のボイスコマンドや、カメラキー又はハードウェアキーのタッチ操作等によってＵＩ１４が表示されるように制御部１９０によって制御されてもよい。これにより、ユーザはＵＩ１４の画面をショートカットで表示することができるため、更なるユーザビリティの向上を促進することができる。
上記実施形態では、本実施形態に係るＵＩ１３は、本実施形態に係るＵＩ１２に対してタッチ操作を行うことにより遷移される場合を示したが、この例に限らない。例えば、本実施形態に係るＵＩ１１に、ＵＩ１３へ直接遷移するためのアイコンをさせてもよい。また、例えば、外部アプリケーションの画面に、ＵＩ１３を直接表示するためのアイコンをさせてもよい。例えば、項目ＧＥ２８の歯車のアイコンを、ＵＩ１１又は外部アプリケーションの画面にさせてもよい。これにより、ユーザはＵＩ１３の画面をショートカットで表示することができるため、更なるユーザビリティの向上を促進することができる。
上記実施形態では、項目ＧＥ３１で選択されたリフレッシュレートと、静止画（ＩＭ３１及びＩＭ３２）のリフレッシュレートとに対応関係はない場合を示したが、この例に限られず、静止画（ＩＭ３１及びＩＭ３２）は、項目ＧＥ３１で選択されたリフレッシュレートに対応付けられていてもよい。例えば、項目ＧＥ３１のリフレッシュレートが変更された場合、変更前の静止画をＩＭ３１に表示して、変更後の静止画をＩＭ３２に表示してもよい。これにより、ユーザはリフレッシュレートの比較を容易に行うことができるため、更なるユーザビリティの向上を促進することができる。
上記実施形態では、本実施形態に係るＵＩ１４をユーザが自由に移動する場合を示したが、この例に限らず、ユーザにとって極力邪魔にならない位置に変更されるように制御部１９０によって制御されてもよい。例えば、ユーザがタッチしている指の位置情報と視線情報とに基づいてユーザの目と指の動きを特定することで、ユーザにとって極力邪魔にならない位置に変更されるように制御部１９０によって制御されてもよい。ここで、ユーザが複数の指を使ってプレイしている場合には、ユーザが使っている複数の指全ての位置情報に基づいて指の動きを特定してもよい。
＜３．ハードウェア構成例＞
次に、本開示の一実施形態に係る情報処理装置１０のハードウェア構成例について説明する。図５は、本開示の一実施形態に係る情報処理装置１０のハードウェア構成例を示すブロック図である。図５を参照すると、情報処理装置１０は、例えば、プロセッサ８７１と、ＲＯＭ８７２と、ＲＡＭ８７３と、ホストバス８７４と、ブリッジ８７５と、外部バス８７６と、インターフェース８７７と、入力装置８７８と、出力装置８７９と、ストレージ８８０と、ドライブ８８１と、接続ポート８８２と、通信装置８８３と、を有する。なお、ここで示すハードウェア構成は一例であり、構成要素の一部が省略されてもよい。また、ここで示される構成要素以外の構成要素をさらに含んでもよい。
（プロセッサ８７１）
プロセッサ８７１は、例えば、演算処理装置又は制御装置として機能し、ＲＯＭ８７２、ＲＡＭ８７３、ストレージ８８０、又はリムーバブル記録媒体９０１に記録された各種プログラムに基づいて各構成要素の動作全般又はその一部を制御する。
（ＲＯＭ８７２、ＲＡＭ８７３）
ＲＯＭ８７２は、プロセッサ８７１に読み込まれるプログラムや演算に用いるデータ等を格納する手段である。ＲＡＭ８７３には、例えば、プロセッサ８７１に読み込まれるプログラムや、そのプログラムを実行する際に適宜変化する各種パラメータ等が一時的又は永続的に格納される。
（ホストバス８７４、ブリッジ８７５、外部バス８７６、インターフェース８７７）
プロセッサ８７１、ＲＯＭ８７２、ＲＡＭ８７３は、例えば、高速なデータ伝送が可能なホストバス８７４を介して相互に接続される。一方、ホストバス８７４は、例えば、ブリッジ８７５を介して比較的データ伝送速度が低速な外部バス８７６に接続される。また、外部バス８７６は、インターフェース８７７を介して種々の構成要素と接続される。
（入力装置８７８）
入力装置８７８には、例えば、マウス、キーボード、タッチパネル、ボタン、スイッチ、及びレバー等が用いられる。さらに、入力装置８７８としては、赤外線やその他の電波を利用して制御信号を送信することが可能なリモートコントローラ（以下、リモコン）が用いられることもある。また、入力装置８７８には、マイクロホン等の音声入力装置が含まれる。
（出力装置８７９）
出力装置８７９は、例えば、ＣＲＴ（Ｃａｔｈｏｄｅ Ｒａｙ Ｔｕｂｅ）、ＬＣＤ、又は有機ＥＬ等のディスプレイ装置、スピーカ、ヘッドホン等のオーディオ出力装置、プリンタ、携帯電話、又はファクシミリ等、取得した情報を利用者に対して視覚的又は聴覚的に通知することが可能な装置である。また、本開示に係る出力装置８７９は、触覚刺激を出力することが可能な種々の振動デバイスを含む。
（ストレージ８８０）
ストレージ８８０は、各種のデータを格納するための装置である。ストレージ８８０としては、例えば、ハードディスクドライブ（ＨＤＤ）等の磁気記憶デバイス、半導体記憶デバイス、光記憶デバイス、又は光磁気記憶デバイス等が用いられる。
（ドライブ８８１）
ドライブ８８１は、例えば、磁気ディスク、光ディスク、光磁気ディスク、又は半導体メモリ等のリムーバブル記録媒体９０１に記録された情報を読み出し、又はリムーバブル記録媒体９０１に情報を書き込む装置である。
（リムーバブル記録媒体９０１）
リムーバブル記録媒体９０１は、例えば、ＤＶＤメディア、Ｂｌｕ－ｒａｙ（登録商標）メディア、ＨＤ ＤＶＤメディア、各種の半導体記憶メディア等である。もちろん、リムーバブル記録媒体９０１は、例えば、非接触型ＩＣチップを搭載したＩＣカード、又は電子機器等であってもよい。
（接続ポート８８２）
接続ポート８８２は、例えば、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）ポート、ＩＥＥＥ１３９４ポート、ＳＣＳＩ（Ｓｍａｌｌ Ｃｏｍｐｕｔｅｒ Ｓｙｓｔｅｍ Ｉｎｔｅｒｆａｃｅ）、ＲＳ－２３２Ｃポート、又は光オーディオ端子等のような外部接続機器９０２を接続するためのポートである。
（外部接続機器９０２）
外部接続機器９０２は、例えば、プリンタ、携帯音楽プレーヤ、デジタルカメラ、デジタルビデオカメラ、又はＩＣレコーダ等である。
（通信装置８８３）
通信装置８８３は、ネットワークに接続するための通信デバイスであり、例えば、有線又は無線ＬＡＮ、Ｂｌｕｅｔｏｏｔｈ（登録商標）、又はＷＵＳＢ（Ｗｉｒｅｌｅｓｓ ＵＳＢ）用の通信カード、光通信用のルータ、ＡＤＳＬ（Ａｓｙｍｍｅｔｒｉｃ Ｄｉｇｉｔａｌ Ｓｕｂｓｃｒｉｂｅｒ Ｌｉｎｅ）用のルータ、又は各種通信用のモデム等である。
＜４．まとめ＞
以上説明したように、情報処理装置は、第１のアプリケーションの動作に関する設定を行う第２のアプリケーションを起動し、前記第１のアプリケーションの画面を表示し、当該画面の一部に前記第２のアプリケーションの前記設定を変更するためのメニューを重畳表示し、前記第１のアプリケーションと前記第２のアプリケーションとが独立して動作する処理を実行する制御部を備える。
これにより、快適なユーザエクスペリエンスを提供し、更なるユーザビリティの向上を促進することができる。
以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。
なお、本技術は以下のような構成も取ることができる。
（１）
第１のアプリケーションの動作に関する設定を行う第２のアプリケーションを起動し、
前記第１のアプリケーションの画面を表示し、当該画面の一部に前記第２のアプリケーションの前記設定を変更するためのメニューを重畳表示し、
前記第１のアプリケーションと前記第２のアプリケーションとが独立して動作する処理を実行する制御部
を備えた、情報処理装置。
（２）
前記制御部は、
前記設定の変更後も、前記メニューが前記第１のアプリケーションの画面上に表示し続けるための処理を実行する、前記（１）に記載の情報処理装置。
（３）
前記制御部は、
前記メニューが前記第１のアプリケーションの画面上を移動可能であるための処理を実行する、前記（１）又は（２）に記載の情報処理装置。
（４）
前記制御部は、
前記メニューが可変の画面であるための処理を実行する、前記（１）～（３）のいずれかに記載の情報処理装置。
（５）
前記制御部は、
前記メニューが透過性のある画面であるための処理を実行する、前記（１）～（４）のいずれかに記載の情報処理装置。
（６）
前記制御部は、
前記設定が変更された場合には、変更後の設定に対応する処理を実行させる、前記（１）～（５）のいずれかに記載の情報処理装置。
（７）
前記制御部は、
前記変更後の設定に基づいて前記動作に即時反映させる、前記（６）に記載の情報処理装置。
（８）
前記制御部は、
前記動作の残像感の抑制に関する設定を含む前記設定に基づいて前記処理を実行する、前記（１）～（７）のいずれかに記載の情報処理装置。
（９）
前記制御部は、
前記動作の時間軸上の追従性に関する設定を含む前記設定に基づいて前記処理を実行する、前記（１）～（８）のいずれかに記載の情報処理装置。
（１０）
前記制御部は、
前記動作の解像度に基づく追従性に関する設定を含む前記設定に基づいて前記処理を実行する、前記（１）～（９）のいずれかに記載の情報処理装置。
（１１）
情報処理装置が、
第１のアプリケーションの動作に関する設定を行う第２のアプリケーションを起動し、
前記第１のアプリケーションの画面を表示し、当該画面の一部に前記第２のアプリケーションの前記設定を変更するためのメニューを重畳表示し、
前記第１のアプリケーションと前記第２のアプリケーションとが独立して動作する処理を実行する、情報処理方法。
（１２）
情報処理装置に、
第１のアプリケーションの動作に関する設定を行う第２のアプリケーションを起動させ、
前記第１のアプリケーションの画面を表示させ、当該画面の一部に前記第２のアプリケーションの前記設定を変更するためのメニューを重畳表示させ、
前記第１のアプリケーションと前記第２のアプリケーションとが独立して動作する処理を実行させる、情報処理プログラム。
１０ 情報処理装置
１１０ 操作部
１２０ 記憶部
１３０ 撮影部
１４０ センサ部
１５０ 表示部
１６０ 音声入力部
１７０ 音声出力部
１８０ 画面撮影部
１９０ 制御部

Claims (12)

  1. 第１のアプリケーションの動作に関する設定を行う第２のアプリケーションを起動し、
    前記第１のアプリケーションの画面を表示し、当該画面の一部に前記第２のアプリケーションの前記設定を変更するためのメニューを重畳表示し、
    前記第１のアプリケーションと前記第２のアプリケーションとが独立して動作する処理を実行する制御部
    を備えた、情報処理装置。
  2. 前記制御部は、
    前記設定の変更後も、前記メニューが前記第１のアプリケーションの画面上に表示し続けるための処理を実行する、請求項１に記載の情報処理装置。
  3. 前記制御部は、
    前記メニューが前記第１のアプリケーションの画面上を移動可能であるための処理を実行する、請求項１に記載の情報処理装置。
  4. 前記制御部は、
    前記メニューが可変の画面であるための処理を実行する、請求項１に記載の情報処理装置。
  5. 前記制御部は、
    前記メニューが透過性のある画面であるための処理を実行する、請求項１に記載の情報処理装置。
  6. 前記制御部は、
    前記設定が変更された場合には、変更後の設定に対応する処理を実行させる、請求項１に記載の情報処理装置。
  7. 前記制御部は、
    前記変更後の設定に基づいて前記動作に即時反映させる、請求項６に記載の情報処理装置。
  8. 前記制御部は、
    前記動作の残像感の抑制に関する設定を含む前記設定に基づいて前記処理を実行する、請求項１に記載の情報処理装置。
  9. 前記制御部は、
    前記動作の時間軸上の追従性に関する設定を含む前記設定に基づいて前記処理を実行する、請求項１に記載の情報処理装置。
  10. 前記制御部は、
    前記動作の解像度に基づく追従性に関する設定を含む前記設定に基づいて前記処理を実行する、請求項１に記載の情報処理装置。
  11. 情報処理装置が、
    第１のアプリケーションの動作に関する設定を行う第２のアプリケーションを起動し、
    前記第１のアプリケーションの画面を表示し、当該画面の一部に前記第２のアプリケーションの前記設定を変更するためのメニューを重畳表示し、
    前記第１のアプリケーションと前記第２のアプリケーションとが独立して動作する処理を実行する、情報処理方法。
  12. 情報処理装置に、
    第１のアプリケーションの動作に関する設定を行う第２のアプリケーションを起動させ、
    前記第１のアプリケーションの画面を表示させ、当該画面の一部に前記第２のアプリケーションの前記設定を変更するためのメニューを重畳表示させ、
    前記第１のアプリケーションと前記第２のアプリケーションとが独立して動作する処理を実行させる、情報処理プログラム。
JP2020155822A 2020-09-16 2020-09-16 情報処理装置、情報処理方法及び情報処理プログラム Pending JP2022049563A (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2020155822A JP2022049563A (ja) 2020-09-16 2020-09-16 情報処理装置、情報処理方法及び情報処理プログラム
US18/044,248 US20230367468A1 (en) 2020-09-16 2021-09-15 Information processing device, information processing method, and information processing program
PCT/JP2021/033939 WO2022059707A1 (ja) 2020-09-16 2021-09-15 情報処理装置、情報処理方法及び情報処理プログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020155822A JP2022049563A (ja) 2020-09-16 2020-09-16 情報処理装置、情報処理方法及び情報処理プログラム

Publications (1)

Publication Number Publication Date
JP2022049563A true JP2022049563A (ja) 2022-03-29

Family

ID=80776714

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020155822A Pending JP2022049563A (ja) 2020-09-16 2020-09-16 情報処理装置、情報処理方法及び情報処理プログラム

Country Status (3)

Country Link
US (1) US20230367468A1 (ja)
JP (1) JP2022049563A (ja)
WO (1) WO2022059707A1 (ja)

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110015745A (ko) * 2009-08-10 2011-02-17 삼성전자주식회사 휴대용 단말기에서 터치 감도 조절 방법 및 장치
US8595624B2 (en) * 2010-10-29 2013-11-26 Nokia Corporation Software application output volume control
US9652132B2 (en) * 2012-01-27 2017-05-16 Google Inc. Handling touch inputs based on user intention inference
JP2012212441A (ja) * 2012-05-28 2012-11-01 Toshiba Corp 電子機器、表示制御方法及びプログラム
KR102183071B1 (ko) * 2012-12-06 2020-11-25 삼성전자주식회사 복수 어플리케이션을 실행하는 디스플레이 장치 및 그 제어 방법
KR102372150B1 (ko) * 2016-09-30 2022-03-07 가부시키가이샤 한도오따이 에네루기 켄큐쇼 표시 시스템 및 전자 기기
JP6618057B2 (ja) * 2017-12-25 2019-12-11 株式会社プレイド 情報処理装置、およびプログラム

Also Published As

Publication number Publication date
US20230367468A1 (en) 2023-11-16
WO2022059707A1 (ja) 2022-03-24

Similar Documents

Publication Publication Date Title
US20230007398A1 (en) Systems, Methods, and User Interfaces for Headphone Audio Output Control
US11523243B2 (en) Systems, methods, and graphical user interfaces for using spatialized audio during communication sessions
US11562729B2 (en) Devices, methods, and user interfaces for adaptively providing audio outputs
KR102532176B1 (ko) 멀티미디어 파일 재생 제어 방법 및 단말기
JP5742187B2 (ja) 情報処理装置、情報処理方法およびプログラム
TWI590149B (zh) 包括根據觀看條件之動態使用者介面的能量效率及能量保存之方法，設備，及系統
US20220374197A1 (en) Systems, Methods, and Graphical User Interfaces for Selecting Audio Output Modes of Wearable Audio Output Devices
US11941319B2 (en) Systems, methods, and graphical user interfaces for selecting audio output modes of wearable audio output devices
KR20180112073A (ko) 전자 디스플레이의 가변 프레임 듀레이션 제어를 위한 시스템 및 방법
US20150363091A1 (en) Electronic device and method of controlling same
JP2014086865A (ja) 情報処理装置、セキュリティロック状態遷移方法およびプログラム
KR102134882B1 (ko) 컨텐츠 재생을 제어하기 위한 방법 및 장치
JPWO2013121807A1 (ja) 情報処理装置、情報処理方法およびコンピュータプログラム
CN111459363A (zh) 信息展示方法、装置、设备及存储介质
US20220191577A1 (en) Changing Resource Utilization associated with a Media Object based on an Engagement Score
US11375314B2 (en) Systems, methods, and graphical user interfaces for selecting audio output modes of wearable audio output devices
EP3342159B1 (en) Video communication device and operation thereof
WO2022059707A1 (ja) 情報処理装置、情報処理方法及び情報処理プログラム
KR20150093016A (ko) 디스플레이 장치 및 그 제어 방법
CN113766275B (zh) 视频剪辑方法、装置、终端及存储介质
WO2021044601A1 (ja) アプリケーション拡張プログラム、情報処理装置、および方法
WO2021130937A1 (ja) 情報処理装置、プログラム、および方法
WO2022209395A1 (ja) 情報処理装置、情報処理方法、プログラム
WO2021166213A1 (ja) プログラム、情報処理装置、情報処理方法
US20230370578A1 (en) Generating and Displaying Content based on Respective Positions of Individuals