本出願は、2020年5月21日に出願された「USER INTERFACES FOR MANAGING AUDIO EXPOSURE」と題する米国特許出願第16/880,552号、2019年9月26日に出願された「USER INTERFACES FOR MONITORING NOISE EXPOSURE LEVELS」と題する米国特許出願第16/584,186号、2020年5月25日に出願された「USER INTERFACES FOR MANAGING AUDIO EXPOSURE」と題するデンマーク国特許出願第PA 2020 70335号、2019年8月27日に出願された「USER INTERFACES FOR MONITORING NOISE EXPOSURE LEVELS」と題するデンマーク国特許出願第PA 2019 70534号、2020年5月11日に出願された「USER INTERFACES FOR MANAGING AUDIO EXPOSURE」と題する米国仮特許出願第63/023,023号、及び2019年6月1日に出願された「USER INTERFACES FOR MONITORING NOISE EXPOSURE LEVELS」と題する米国仮特許出願第62/856,016号に対する優先権を主張しており、それぞれの内容は、それらの全体を参照することによってここに組み込まれる。
以下の説明は、例示的な方法、パラメータなどについて記載する。しかしながら、そのような説明は、本開示の範囲に対する限定として意図されるものではなく、むしろ例示的な実施形態の説明として提供されることを認識されたい。
いくつかの実施態様では、例示的な電子デバイスは、オーディオ露出を管理するための効率的な方法及びインタフェースを提供する。例えば、例示的な電子デバイスは、ユーザが容易に理解可能且つ便利な方法で露出されるノイズのレベルに関する情報をユーザに提供することができる。別の実施例では、例示的な電子デバイスは、ユーザが露出されるノイズレベルが特定の閾値レベルを超えるときに、電子デバイスのユーザに効果的にアラートすることができる。別の実施例では、例示的な電子デバイスは、ユーザの好みに基づいてオーディオ設定をカスタマイズすることができる。別の実施例では、例示的な電子デバイスは、ユーザが容易に理解可能且つ便利な方法で露出されるオーディオの量に関する情報をユーザに提供することができる。別の実施例では、例示的な電子デバイスは、ユーザが露出されるオーディオの量が特定の閾値レベルを超えるときに、電子デバイスのユーザに効果的にアラートすることができる。別の実施例では、例示的な電子デバイスは、ユーザの聴覚システムの健康を保護するために、ユーザが露出されるオーディオの量を効果的に調整することができる。例示的な電子デバイスのそのような技術は、ノイズ露出レベルを監視するユーザの認知的負担を軽減し、それによって生産性を向上させることができる。更に、そのような技術は、普通なら冗長なユーザ入力に浪費されるプロセッサ及びバッテリの電力を低減することができる。
以下の説明では、様々な要素について説明するために、「第1の」、「第2の」などの用語を使用するが、これらの要素は、それらの用語によって限定されるべきではない。これらの用語は、ある要素を別の要素と区別するためにのみ使用される。例えば、記載する様々な実施形態の範囲から逸脱することなく、第1のタッチを第2のタッチと呼ぶこともでき、同様に第2のタッチを第1のタッチと呼ぶこともできる。第1のタッチ及び第2のタッチはどちらもタッチであるが、これらは同じタッチではない。
本明細書に記載する様々な実施形態の説明で使用される術語は、特定の実施形態を説明することのみを目的とし、限定的であることは意図されていない。記載する様々な実施形態の説明及び添付の特許請求の範囲では、単数形の「a(1つ、一)」、「an(1つ、一)」、及び「the(その、この)」は、文脈上別途明白に記載しない限り、複数形も同様に含むことが意図される。また、本明細書で使用されるとき、用語「及び/又は」は、関連する列挙された項目のうちの1つ以上のいずれか及び全ての考えられる組み合わせを指し、且つこれを含むことを理解されたい。用語「includes(含む)」、「including(含む)」、「comprises(含む、備える)」、及び/又は「comprising(含む、備える)」は、本明細書で使用する場合、述べられた特徴、整数、ステップ、動作、要素、及び/又は構成要素の存在を指定するが、1つ以上の他の特徴、整数、ステップ、動作、要素、構成要素、及び/又はそれらのグループの存在又は追加を除外しないことが更に理解されるであろう。
「~の場合(if)」という用語は、任意選択的に、文脈に応じて、「~とき(when)」若しくは「~とき(upon)」、又は「~と判定したことに応じて(in response to determining)」若しくは「~を検出したことに応じて(in response to detecting)」を意味すると解釈される。同様に、「~と判定された場合(if it is determined)」又は「[記載の状態又はイベント]が検出された場合(if[a stated condition or event]is detected)」という語句は、任意選択的に、文脈に応じて、「~と判定したとき(upon determining)」若しくは「~と判定したことに応じて(in response to determining)」、又は「[記載の状態又はイベント]を検出したとき(upon detecting[the stated condition or event])」若しくは「[記載の状態又はイベント]を検出したことに応じて(in response to detecting[the stated condition or event])」を意味すると解釈される。
電子デバイス、そのようなデバイス用のユーザインタフェース、及びそのようなデバイスを使用する関連するプロセスの実施形態が説明される。いくつかの実施形態では、デバイスは、PDA機能及び/又は音楽プレーヤ機能などの他の機能も含む、携帯電話などのポータブル通信デバイスである。ポータブル多機能デバイスの例示的な実施形態としては、カリフォルニア州クパチーノのApple Inc.からのiPhone(登録商標)、iPod Touch(登録商標)、及びiPad(登録商標)のデバイスが挙げられるが、これらに限定されない。任意選択的に、タッチ感知面(例えば、タッチスクリーンディスプレイ及び/又はタッチパッド)を有するラップトップ又はタブレットコンピュータなどの他のポータブル電子デバイスも使用される。また、いくつかの実施形態では、デバイスはポータブル通信デバイスではなく、タッチ感知面(例えば、タッチスクリーンディスプレイ及び/又はタッチパッド)を有するデスクトップコンピュータであることも理解されたい。いくつかの実施形態では、電子デバイスは、ディスプレイ生成構成要素と通信する(例えば、有線通信を介した無線通信を介して)コンピュータシステムである。ディスプレイ生成構成要素は、CRTディスプレイを介したディスプレイ、LEDディスプレイを介したディスプレイ、又は画像投影を介した表示などの視覚的な出力を提供するように構成されている。いくつかの実施形態では、ディスプレイ生成構成要素は、コンピュータシステムと一体化される。いくつかの実施形態では、ディスプレイ生成構成要素は、コンピュータシステムとは別個である。本明細書で使用するとき、「表示する」コンテンツは、コンテンツを視覚的に生成するために、有線又は無線接続で、データ(例えば、画像データ又はビデオデータ)を、一体型又は外部のディスプレイ生成構成要素に送信することによって、コンテンツ(例えば、ディスプレイコントローラ156によってレンダリング又はデコードされたビデオデータ)を表示させることを含む。
以下の論考では、ディスプレイ及びタッチ感知面を含む電子デバイスについて説明する。しかしながら、電子デバイスは、任意選択的に、物理キーボード、マウス、及び/又はジョイスティックなどの1つ以上の他の物理ユーザインタフェースデバイスを含むことを理解されたい。
デバイスは、通常、描画アプリケーション、プレゼンテーションアプリケーション、ワードプロセッシングアプリケーション、ウェブサイト作成アプリケーション、ディスクオーサリングアプリケーション、スプレッドシートアプリケーション、ゲームアプリケーション、電話アプリケーション、テレビ会議アプリケーション、電子メールアプリケーション、インスタントメッセージングアプリケーション、トレーニングサポートアプリケーション、写真管理アプリケーション、デジタルカメラアプリケーション、デジタルビデオカメラアプリケーション、ウェブブラウジングアプリケーション、デジタル音楽プレーヤアプリケーション、及び/又はデジタルビデオプレーヤアプリケーションのうちの1つ以上などの様々なアプリケーションをサポートする。
本デバイス上で実行される様々なアプリケーションは、タッチ感知面などの、少なくとも1つの共通の物理ユーザインタフェースデバイスを、任意選択的に使用する。タッチ感知面の1つ以上の機能、並びにデバイス上に表示される対応する情報は、アプリケーション毎に、及び/又はそれぞれのアプリケーション内で、任意選択的に、調整及び/又は変更される。このように、デバイスの共通の物理アーキテクチャ(タッチ感知面など)は、任意選択的に、ユーザにとって直観的且つ透明なユーザインタフェースを備える様々なアプリケーションをサポートする。
ここで、タッチ感知ディスプレイを備えるポータブルデバイスの実施形態に注意を向ける。図1Aは、いくつかの実施形態に係る、タッチ感知ディスプレイシステム112を有するポータブル多機能デバイス100を示すブロック図である。タッチ感知ディスプレイ112は、便宜上「タッチスクリーン」と呼ばれることがあり、「タッチ感知ディスプレイシステム」として知られている又は呼ばれることがある。デバイス100は、メモリ102(任意選択的に、1つ以上のコンピュータ可読記憶媒体を含む)、メモリコントローラ122、1つ以上の処理ユニット(CPU)120、周辺機器インタフェース118、RF回路108、オーディオ回路110、スピーカ111、マイクロフォン113、入出力(I/O)サブシステム106、他の入力コントロールデバイス116、及び外部ポート124を含む。デバイス100は、任意選択的に、1つ以上の光センサ164を含む。デバイス100は、任意選択的に、デバイス100上の接触の強度を検出する1つ以上の接触強度センサ165(例えば、デバイス100のタッチ感知ディスプレイシステム112などのタッチ感知面)を含む。デバイス100は、任意選択的に、デバイス100上で触知出力を生成する(例えばデバイス100のタッチ感知ディスプレイシステム112又はデバイス300のタッチパッド355などのタッチ感知面上で触知出力を生成する)1つ以上の触知出力生成器167を含む。これらの構成要素は、任意選択的に、1つ以上の通信バス又は信号ライン103を介して通信する。
本明細書及び特許請求において使用されるとき、タッチ感知面上の接触の「強度」という用語は、タッチ感知面上の接触(例えば、指の接触)の力若しくは圧力(単位面積当たりの力)、又はタッチ感知面上の接触の力若しくは圧力に対する代理(プロキシ)を指す。接触の強度は、少なくとも4つの別個の値を含み、より典型的には、数百の(例えば、少なくとも256の)別個の値を含む、値の範囲を有する。接触の強度は、任意選択的に、様々な手法、及び様々なセンサ又はセンサの組み合わせを使用して、判定(又は測定)される。例えば、タッチ感知面の下又はそれに隣接する1つ以上の力センサは、任意選択的に、タッチ感知面上の様々なポイントにおける力を測定するために使用される。いくつかの実装形態では、複数の力センサからの力測定値が、接触の推定される力を決定するために組み合わされる(例えば、加重平均される)。同様に、スタイラスの感圧性先端部が、任意選択的に、タッチ感知面上のスタイラスの圧力を判定するために使用される。あるいは、タッチ感知面上で検出される接触エリアのサイズ及び/若しくはその変化、接触に近接するタッチ感知面の電気容量及び/若しくはその変化、並びに/又は、接触に近接するタッチ感知面の抵抗及び/若しくはその変化が、任意選択的に、タッチ感知面上の接触の力又は圧力の代替物として使用される。一部の実装形態では、接触の力又は圧力の代替測定値が、強度閾値を超えているかどうかを判定するために直接使用される(例えば、強度閾値は、代替測定値に対応する単位で記述される)。いくつかの実装形態では、接触力又は圧力の代理測定値は、力又は圧力の推定値に変換され、力又は圧力の推定値が、強度閾値を超えているかどうかを判定するために使用される(例えば、強度閾値は、圧力の単位で測定される圧力閾値である)。接触の強度をユーザ入力の属性として使用することにより、アフォーダンスを表示する実装面積が限られている低減されたサイズのデバイス上で、ユーザが他の方法ではアクセス不可能であり得る追加のデバイス機能にユーザがアクセスすること(例えば、タッチ感知ディスプレイ上で)、及び/又は、ユーザ入力を受け取ること(例えば、タッチ感知ディスプレイ、タッチ感知面、又は、ノブ若しくはボタンなどの物理的/機械的コントロールを介して)が可能となる。
本明細書及び特許請求の範囲で使用されるように、用語「触知出力」は、ユーザの触覚でユーザによって検出されることになる、デバイスの従前の位置に対するそのデバイスの物理的変位、デバイスの構成要素(例えば、タッチ感知面)の、そのデバイスの別の構成要素(例えば、筐体)に対する物理的変位、又は、デバイスの質量中心に対する構成要素の変位を指す。例えば、デバイス又はデバイスの構成要素が、タッチに敏感なユーザの表面(例えば、ユーザの手の指、手のひら、又は他の部分)に接触している状況では、物理的変位によって生成された触知出力は、そのデバイス又はデバイスの構成要素の物理的特性の認識される変化に相当する触感として、ユーザによって解釈されることになる。例えば、タッチ感知面(例えば、タッチ感知ディスプレイ又はトラックパッド)の移動は、ユーザによって、物理アクチュエータボタンの「ダウンクリック」又は「アップクリック」として、任意選択的に解釈される。場合によっては、ユーザの動作により物理的に押された(例えば、変位された)タッチ感知面に関連付けられた物理アクチュエータボタンの移動がないときでさえ、ユーザは「ダウンクリック」又は「アップクリック」などの触感を感じる。別の例として、タッチ感知面の移動は、タッチ感知面の平滑度に変化がない場合であっても、ユーザによって、そのタッチ感知面の「粗さ」として、任意選択的に解釈又は感知される。そのようなユーザによるタッチの解釈は、ユーザの個人的な感覚認知に左右されるが、大多数のユーザに共通する、多くのタッチの感覚認知が存在する。したがって、触知出力が、ユーザの特定の感覚認知(例えば、「アップクリック」「ダウンクリック」、「粗さ」)に対応するものと記述される場合、別途記載のない限り、生成された触知出力は、典型的な(又は、平均的な)ユーザの記述された感覚認知を生成するデバイス、又はデバイスの構成要素の物理的変位に対応する。
デバイス100は、ポータブル多機能デバイスの一例に過ぎず、デバイス100は、任意選択的に、示されているものよりも多くの構成要素又は少ない構成要素を有するものであり、任意選択的に、2つ以上の構成要素を組み合わせるものであり、又は、任意選択的に、それらの構成要素の異なる構成若しくは配置を有するものであることを理解されたい。図1Aに示す様々な構成要素は、1つ以上の信号処理回路及び/又は特定用途向け集積回路を含む、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアの両方の組み合わせで実施される。
メモリ102は、任意選択的に、高速ランダムアクセスメモリを含み、また任意選択的に、1つ以上の磁気ディスク記憶デバイス、フラッシュメモリデバイス、又は他の不揮発性ソリッドステートメモリデバイスなどの不揮発性メモリを含む。メモリコントローラ122は、任意選択的に、デバイス100の他の構成要素によるメモリ102へのアクセスを制御する。
周辺機器インタフェース118は、デバイスの入力及び出力周辺機器をCPU120及びメモリ102に結合するために使用することができる。1つ以上のプロセッサ120は、メモリ102に記憶された様々なソフトウェアプログラム及び/又は命令セットを動作させる又は実行して、デバイス100のための様々な機能を実行し、データを処理する。いくつかの実施形態では、周辺機器インタフェース118、CPU120、及びメモリコントローラ122は、任意選択的に、チップ104などの単一のチップ上に実装される。いくつかの他の実施形態では、それらは別々のチップ上に任意選択的に実装される。
RF(radio frequency、無線周波数)回路108は、電磁信号とも呼ばれるRF信号を送受信する。RF回路108は、電気信号を電磁信号に又は電磁信号を電気信号に変換し、電磁信号を介して通信ネットワーク及び他の通信デバイスと通信する。RF回路108は、任意選択的に、これらの機能を実行するための周知の回路を含み、それらの回路としては、限定するものではないが、アンテナシステム、RF送受信機、1つ以上の増幅器、同調器、1つ以上の発振器、デジタル信号プロセッサ、CODECチップセット、加入者識別モジュール(subscriber identity module、SIM)カード、メモリなどが挙げられる。RF回路108は、任意選択的に、ワールドワイドウェブ(World Wide Web、WWW)とも呼ばれるインターネット、イントラネット、並びに/又はセルラー電話ネットワーク、無線ローカルエリアネットワーク(local area network、LAN)及び/若しくはメトロポリタンエリアネットワーク(metropolitan area network、MAN)などの無線ネットワークなどのネットワークと、また他のデバイスと、無線通信によって通信する。RF回路108は、任意選択的に、短距離通信無線機などによって近距離通信(near field communication、NFC)フィールドを検出するよく知られている回路を含む。無線通信は、任意選択的に、それだけに限定されるものではないが、モバイル通信用グローバルシステム(Global System for Mobile Communications、GSM)、拡張データGSM環境(Enhanced Data GSM Environment、EDGE)、高速ダウンリンクパケットアクセス(high-speed downlink packet access、HSDPA)、高速アップリンクパケットアクセス(high-speed uplink packet access、HSUPA)、エボリューションデータオンリ(Evolution,Data-Only、EV-DO)、HSPA、HSPA+、デュアルセルHSPA(Dual-Cell HSPA、DC-HSPDA)、ロングタームエボリューション(long term evolution、LTE)、近距離通信(NFC)、広帯域符号分割多元接続(wideband code division multiple access、W-CDMA)、符号分割多元接続(code division multiple access、CDMA)、時分割多元接続(time division multiple access、TDMA)、Bluetooth、Bluetoothローエネルギー(Bluetooth Low Energy、BTLE)、ワイヤレスフィデリティ(Wireless Fidelity、Wi-Fi)(例えば、IEEE802.11a、IEEE802.11b、IEEE802.11g、IEEE802.11n、及び/若しくはIEEE802.11ac)、ボイスオーバインターネットプロトコル(voice over Internet Protocol、VoIP)、Wi-MAX、電子メール用プロトコル(例えば、インターネットメッセージアクセスプロトコル(Internet message access protocol、IMAP)及び/若しくはポストオフィスプロトコル(post office protocol、POP))、インスタントメッセージング(例えば、拡張可能なメッセージング及びプレゼンスプロトコル(extensible messaging and presence protocol、XMPP)、インスタントメッセージング及びプレゼンスレベレイジングエクステンション用のセッション開始プロトコル(Session Initiation Protocol for Instant Messaging and Presence Leveraging Extensions、SIMPLE)、インスタントメッセージング及びプレゼンスサービス(Instant Messaging and Presence Service、IMPS))、並びに/若しくはショートメッセージサービス(Short Message Service、SMS)、又は本明細書の出願日の時点でまだ開発されていない通信プロトコルを含む任意の他の適切な通信プロトコルを含む、複数の通信規格、プロトコル、及び技術のうちのいずれかを使用する。
オーディオ回路110、スピーカ111、及びマイクロフォン113は、ユーザとデバイス100との間のオーディオインタフェースを提供する。オーディオ回路110は、周辺機器インタフェース118からオーディオデータを受信し、このオーディオデータを電気信号に変換し、この電気信号をスピーカ111に送信する。スピーカ111は、電気信号を人間の可聴音波に変換する。また、オーディオ回路110は、マイクロフォン113によって音波から変換された電気信号を受信する。オーディオ回路110は、電気信号をオーディオデータに変換し、このオーディオデータを処理のために周辺機器インタフェース118に送信する。オーディオデータは、任意選択的に、周辺機器インタフェース118によって、メモリ102及び/若しくはRF回路108から取得され、且つ/又はメモリ102及び/若しくはRF回路108に伝送される。いくつかの実施形態では、オーディオ回路110はまた、ヘッドセットジャック(例えば、図2の212)を含む。ヘッドセットジャックは、オーディオ回路110と、出力専用ヘッドフォン又は出力(例えば片耳又は両耳用のヘッドフォン)及び入力(例えばマイクロフォン)の両方を備えるヘッドセットなどの着脱可能なオーディオ入出力周辺機器との間のインタフェースを提供する。
I/Oサブシステム106は、タッチスクリーン112及び他の入力コントロールデバイス116などのデバイス100上の入出力周辺機器を、周辺機器インタフェース118に結合する。I/Oサブシステム106は、任意選択的に、ディスプレイコントローラ156、光センサコントローラ158、深度カメラコントローラ169、強度センサコントローラ159、触覚フィードバックコントローラ161、及び、他の入力デバイス若しくはコントロールデバイス用の1つ以上の入力コントローラ160を含む。1つ以上の入力コントローラ160は、他の入力コントロールデバイス116からの電気信号の受信/他の入力コントロールデバイス116への電気信号の送信を行う。他の入力コントロールデバイス116は、任意選択的に、物理ボタン(例えば、プッシュボタン、ロッカボタン)、ダイヤル、スライダスイッチ、ジョイスティック、クリックホイールなどを含む。いくつかの実施形態では、入力コントローラ(単数又は複数)160は、任意選択的に、キーボード、赤外線ポート、USBポート、及びマウスなどのポインタデバイスのうちのいずれかに結合される(又はいずれにも結合されない)。1つ以上のボタン(例えば、図2の208)は、任意選択的に、スピーカ111及び/又はマイクロフォン113の音量コントロールのためのアップ/ダウンボタンを含む。1つ以上のボタンは、任意選択的に、プッシュボタン(例えば、図2の206)を含む。いくつかの実施形態では、電子デバイスは、1つ以上の入力デバイスと通信する(例えば、有線通信を介した無線通信を介して)コンピュータシステムである。いくつかの実施形態では、1つ以上の入力デバイスは、タッチ感知面(例えば、タッチ感知ディスプレイの一部としてのトラックパッド)を含む。いくつかの実施形態では、1つ以上の入力デバイスは、入力としてユーザのジェスチャ(例えば、ハンドジェスチャ)を追跡するためなど、1つ以上のカメラセンサ(例えば、1つ以上の光センサ164及び/又は1つ以上の深度カメラセンサ175)を含む。いくつかの実施形態では、1つ以上の入力デバイスは、コンピュータシステムと一体化される。いくつかの実施形態では、1つ以上の入力デバイスは、コンピュータシステムとは別個である。
全体が参照により本明細書に組み込まれる、2005年12月23日出願の米国特許出願第11/322,549号、「Unlocking a Device by Performing Gestures on an Unlock Image」、米国特許第7,657,849号に記載されているように、プッシュボタンの素早い押下は、任意選択的に、タッチスクリーン112のロックを解放し、又は任意選択的に、タッチスクリーン上のジェスチャを使用してデバイスをロック解除するプロセスを開始する。プッシュボタン(例えば、206)のより長い押下は、任意選択的に、デバイス100への電力をオン又はオフにする。ボタンのうちの1つ以上の機能性は、任意選択的に、ユーザによってカスタマイズ可能である。タッチスクリーン112は、仮想又はソフトボタン及び1つ以上のソフトキーボードを実装するために使用される。
タッチ感知ディスプレイ112は、デバイスとユーザとの間の入力インタフェース及び出力インタフェースを提供する。ディスプレイコントローラ156は、タッチスクリーン112からの電気信号の受信、及び/又はタッチスクリーン112への電気信号の送信を行う。タッチスクリーン112は、ユーザに対して視覚出力を表示する。この視覚出力は、グラフィック、テキスト、アイコン、動画、及びそれらの任意の組み合わせ(総称して「グラフィック」)を任意選択的に含む。いくつかの実施形態では、視覚出力の一部又は全ては、任意選択的に、ユーザインタフェースオブジェクトに対応する。
タッチスクリーン112は、触覚及び/又は触知接触に基づくユーザからの入力を受け入れるタッチ感知面、センサ、又はセンサのセットを有する。タッチスクリーン112及びディスプレイコントローラ156は、(メモリ102内の任意の関連モジュール及び/又は命令セットと共に)、タッチスクリーン112上で接触(及び任意の接触の移動又は中断)を検出し、検出された接触をタッチスクリーン112に表示されたユーザインタフェースオブジェクト(例えば、1つ以上のソフトキー、アイコン、ウェブページ、又は画像)との対話に変換する。例示的な実施形態では、タッチスクリーン112とユーザとの間の接触点は、ユーザの指に対応する。
タッチスクリーン112は、任意選択的に、LCD(液晶ディスプレイ)技術、LPD(発光ポリマーディスプレイ)技術、又はLED(発光ダイオード)技術を使用するが、他の実施形態では、他のディスプレイ技術も使用される。タッチスクリーン112及びディスプレイコントローラ156は、任意選択的に、それだけに限定されるものではないが、容量性、抵抗性、赤外線、及び表面音波の技術、並びにタッチスクリーン112との1つ以上の接触点を判定する他の近接センサアレイ又は他の要素を含む、現在知られている又は今後開発される複数のタッチ感知技術のうちのいずれかを使用して、接触及びそのあらゆる移動又は中断を検出する。例示的な実施形態では、カリフォルニア州クパチーノのApple Inc.からのiPhone(登録商標)及びiPod Touch(登録商標)に見られるものなどの、投影型相互静電容量感知技術が使用される。
タッチスクリーン112のいくつかの実施形態におけるタッチ感知ディスプレイは、任意選択的に、それぞれ全体が参照により本明細書に組み込まれる、米国特許第6,323,846号(Westermanら)、同第6,570,557号(Westermanら)、及び/若しくは同第6,677,932号(Westerman)、並びに/又は米国特許出願公開第2002/0015024(A1)号に記載されているマルチタッチ感知タッチパッドに類似している。しかし、タッチスクリーン112はデバイス100からの視覚出力を表示するのに対して、タッチ感知タッチパッドは視覚出力を提供しない。
タッチスクリーン112のいくつかの実施形態におけるタッチ感知ディスプレイは、以下の出願、(1)2006年5月2日出願の米国特許出願第11/381,313号、「Multipoint Touch Surface Controller」、(2)2004年5月6日出願の米国特許出願第10/840,862号、「Multipoint Touchscreen」、(3)2004年7月30日出願の米国特許出願第10/903,964号、「Gestures For Touch Sensitive Input Devices」、(4)2005年1月31日出願の米国特許出願第11/048,264号、「Gestures For Touch Sensitive Input Devices」、(5)2005年1月18日出願の米国特許出願第11/038,590号、「Mode-Based Graphical User Interfaces For Touch Sensitive Input Devices」、(6)2005年9月16日出願の米国特許出願第11/228,758号、「Virtual Input Device Placement On A Touch Screen User Interface」、(7)2005年9月16日出願の米国特許出願第11/228,700号、「Operation Of A Computer With A Touch Screen Interface」、(8)2005年9月16日出願の米国特許出願第11/228,737号、「Activating Virtual Keys Of A Touch-Screen Virtual Keyboard」、及び(9)2006年3月3日出願の米国特許出願第11/367,749号、「Multi-Functional Hand-Held Device」で説明されている。これらの出願は全て、全体が参照により本明細書に組み込まれる。
タッチスクリーン112は、任意選択的に、100dpiを超える動画解像度を有する。いくつかの実施形態では、タッチスクリーンは、約160dpiの動画解像度を有する。ユーザは、任意選択的に、スタイラス、指などの任意の適した物体又は付属物を使用して、タッチスクリーン112に接触する。いくつかの実施形態では、ユーザインタフェースは、指ベースの接触及びジェスチャを主に使用して動作するように設計されるが、これは、タッチスクリーン上の指の接触面積がより大きいため、スタイラスベースの入力ほど正確でない可能性がある。一部の実施形態では、デバイスは、指による粗い入力を、ユーザによって所望されているアクションを実行するための、正確なポインタ/カーソルの位置又はコマンドに変換する。
いくつかの実施形態では、タッチスクリーンに加えて、デバイス100は、任意選択的に、特定の機能をアクティブ化又は非アクティブ化するためのタッチパッドを含む。一部の実施形態では、タッチパッドは、タッチスクリーンとは異なり、視覚出力を表示しない、デバイスのタッチ感知エリアである。タッチパッドは、任意選択的に、タッチスクリーン112とは別個のタッチ感知面又はタッチスクリーンによって形成されるタッチ感知面の拡張部である。
デバイス100は、様々な構成要素に電力を供給する電力システム162も含む。電力システム162は、任意選択的に、電力管理システム、1つ以上の電源(例えば、バッテリ、交流(AC))、再充電システム、停電検出回路、電力コンバータ又はインバータ、電力状態インジケータ(例えば、発光ダイオード(LED))、並びにポータブルデバイス内での電力の生成、管理、及び分配に関連付けられた任意の他の構成要素を含む。
また、デバイス100は、任意選択的に、1つ以上の光センサ164を含む。図1Aは、I/Oサブシステム106内の光センサコントローラ158に結合された光センサを示す。光センサ164は、任意選択的に、電荷結合デバイス(charge-coupled device、CCD)又は相補的金属酸化物半導体(complementary metal-oxide semiconductor、CMOS)フォトトランジスタを含む。光センサ164は、1つ以上のレンズを通って投影された環境からの光を受信し、その光を、画像を表すデータに変換する。光センサ164は、撮像モジュール143(カメラモジュールとも呼ばれる)と連携して、任意選択的に、静止画像又は動画をキャプチャする。いくつかの実施形態では、光センサは、デバイスの前面にあるタッチスクリーンディスプレイ112とは反対側のデバイス100の裏面に位置し、したがってタッチスクリーンディスプレイは、静止画像及び/又は動画の取得のためのビューファインダとして使用することが可能である。いくつかの実施形態では、ユーザが他のテレビ会議参加者をタッチスクリーンディスプレイ上で見ている間に、ユーザの画像が、任意選択的に、テレビ会議のために入手されるように、光センサはデバイスの前面に配置される。いくつかの実施形態では、光センサ164の位置は、ユーザによって(例えば、デバイス筐体内でレンズ及びセンサを回転させることによって)変更することができ、したがって単一の光センサ164が、タッチスクリーンディスプレイと共に、テレビ会議にも静止画像及び/又は動画の取得にも使用される。
デバイス100は、任意選択的に、1つ以上の深度カメラセンサ175もまた含む。図1Aは、I/Oサブシステム106内の深度カメラコントローラ169に結合された深度カメラセンサを示す。深度カメラセンサ175は、環境からデータを受信して、視点(例えば、深度カメラセンサ)からのシーン内の対象物(例えば、顔面)の3次元モデルを作成する。いくつかの実施形態では、撮像モジュール143(カメラモジュールとも呼ばれる)と連携して、深度カメラセンサ175は、任意選択的に、撮像モジュール143によってキャプチャされた画像の異なる部分の深度マップを決定するために使用される。いくつかの実施形態では、ユーザが他のテレビ会議参加者をタッチスクリーンディスプレイ上で見る間に、任意選択的に、深度情報を有するユーザの画像をテレビ会議のために取得し、また、深度マップデータを有する自撮り画像をキャプチャするために、デバイス100の前面に深度カメラセンサが配置されている。いくつかの実施形態では、深度カメラセンサ175は、デバイスの背面に、あるいはデバイス100の背面及び前面に配置される。いくつかの実施形態では、深度カメラセンサ175の位置は、ユーザによって(例えば、デバイスハウジング内でレンズ及びセンサを回転させることによって)変更することができ、したがって深度カメラセンサ175が、タッチスクリーンディスプレイと共に、テレビ会議にも静止画像及び/又は動画の取得にも使用される。
デバイス100はまた、任意選択的に、1つ以上の接触強度センサ165を含む。図1Aは、I/Oサブシステム106内の強度センサコントローラ159に結合された接触強度センサを示す。接触強度センサ165は、任意選択的に、1つ以上のピエゾ抵抗ひずみゲージ、容量性力センサ、電気力センサ、圧電力センサ、光学力センサ、容量性タッチ感知面、又は他の強度センサ(例えば、タッチ感知面上の接触の力(若しくは圧力)を測定するために使用されるセンサ)を含む。接触強度センサ165は、接触強度情報(例えば、圧力情報、又は圧力情報に対するプロキシ)を環境から受信する。いくつかの実施形態では、少なくとも1つの接触強度センサは、タッチ感知面(例えばタッチ感知ディスプレイシステム112)と並置される、又はそれに近接される。いくつかの実施形態では、少なくとも1つの接触強度センサは、デバイス100の前面に配置されたタッチスクリーンディスプレイ112の反対側である、デバイス100の背面に配置される。
また、デバイス100は、任意選択的に、1つ以上の近接センサ166を含む。図1Aは、周辺機器インタフェース118に結合された近接センサ166を示す。あるいは、近接センサ166は、任意選択的に、I/Oサブシステム106内の入力コントローラ160に結合される。近接センサ166は、任意選択的に、全体が参照により本明細書に組み込まれる、米国特許出願第11/241,839号、「Proximity Detector In Handheld Device」、同第11/240,788号、「Proximity Detector In Handheld Device」、同第11/620,702号、「Using Ambient Light Sensor To Augment Proximity Sensor Output」、同第11/586,862号、「Automated Response To And Sensing Of User Activity In Portable Devices」、及び同第11/638,251号、「Methods And Systems For Automatic Configuration Of Peripherals」で記載されているように機能する。いくつかの実施形態では、多機能デバイスが、ユーザの耳の近くに置かれた場合(例えば、ユーザが電話をかけている場合)、近接センサは、タッチスクリーン112をオフにして無効化する。
デバイス100はまた、任意選択的に、1つ以上の触知出力生成器167を含む。図1Aは、I/Oサブシステム106内の触覚フィードバックコントローラ161に結合された触知出力生成器を示す。触知出力生成器167は、任意選択的に、スピーカ若しくは他のオーディオ構成要素などの1つ以上の電気音響デバイス、及び/又はモータ、ソレノイド、電気活性ポリマー、圧電アクチュエータ、静電アクチュエータ、若しくは他の触知出力生成構成要素(例えば、デバイス上で電気信号を触知出力に変換する構成要素)などのエネルギーを直線の動きに変換する電気機械デバイスを含む。接触強度センサ165は、触知フィードバック生成命令を触覚フィードバックモジュール133から受信し、デバイス100のユーザが感知することが可能な触知出力をデバイス100上に生成する。いくつかの実施形態では、少なくとも1つの触知出力生成器は、タッチ感知面(例えば、タッチ感知ディスプレイシステム112)と並置される、又はそれに近接しており、任意選択的に、タッチ感知面を垂直方向(例えば、デバイス100の表面の内/外)に、又は水平方向(例えば、デバイス100の表面と同じ平面内の前後)に移動させることによって、触知出力を生成する。いくつかの実施形態では、少なくとも1つの触知出力生成器センサは、デバイス100の前面に配置されたタッチスクリーンディスプレイ112の反対側である、デバイス100の背面に配置される。
また、デバイス100は、任意選択的に、1つ以上の加速度計168を含む。図1Aは、周辺機器インタフェース118に結合された加速度計168を示す。あるいは、加速度計168は、任意選択的に、I/Oサブシステム106内の入力コントローラ160に結合される。加速度計168は、任意選択的に、どちらも全体が参照により本明細書に組み込まれる、米国特許出願公開第20050190059号、「Acceleration-based Theft Detection System for Portable Electronic Devices」、及び米国特許出願公開第20060017692号、「Methods And Apparatuses For Operating A Portable Device Based On An Accelerometer」に記載されているように機能する。いくつかの実施形態では、情報は、1つ以上の加速度計から受信したデータの分析に基づいて、縦長表示又は横長表示でタッチスクリーンディスプレイに表示される。デバイス100は、加速度計(単数又は複数)168に加えて、磁気計並びにデバイス100の位置及び向き(例えば、縦方向又は横方向)に関する情報を取得するためのGPS(又はGLONASS又は他のグローバルナビゲーションシステム)受信機を任意選択的に含む。
いくつかの実施形態では、メモリ102内に記憶されているソフトウェア構成要素は、オペレーティングシステム126、通信モジュール(又は命令セット)128、接触/動きモジュール(又は命令セット)130、グラフィックモジュール(又は命令セット)132、テキスト入力モジュール(又は命令セット)134、全地球測位システム(Global Positioning System、GPS)モジュール(又は命令セット)135、及びアプリケーション(又は命令セット)136を含む。更に、いくつかの実施形態では、メモリ102(図1A)又は370(図3)は、図1A及び図3に示すように、デバイス/グローバル内部状態157を記憶する。デバイス/グローバル内部状態157は、現在アクティブ状態のアプリケーションがある場合に、どのアプリケーションがアクティブであるかを示すアクティブアプリケーション状態、どのアプリケーション、ビュー、又は他の情報がタッチスクリーンディスプレイ112の様々な領域を占めているかを示す表示状態、デバイスの様々なセンサ及び入力コントロールデバイス116から取得した情報を含むセンサ状態、並びにデバイスの位置、及び/又は姿勢に関する位置情報のうちの1つ以上を含む。
オペレーティングシステム126(例えば、Darwin、RTXC、LINUX、UNIX、OS X、iOS、WINDOWS、又はVxWorksなどの組込み型オペレーティングシステム)は、全般的なシステムタスク(例えば、メモリ管理、記憶装置制御、電力管理など)を制御及び管理する様々なソフトウェア構成要素及び/又はドライバを含み、様々なハードウェア構成要素とソフトウェア構成要素との間の通信を容易にする。
通信モジュール128は、1つ以上の外部ポート124を介して他のデバイスとの通信を容易にし、RF回路108及び/又は外部ポート124が受信したデータを処理するための様々なソフトウェア構成要素をも含む。外部ポート124(例えば、ユニバーサルシリアルバス(Universal Serial Bus、USB)、FIREWIREなど)は、直接的に、又はネットワーク(例えばインターネット、無線LANなど)を介して間接的に、他のデバイスに結合するように適合されている。いくつかの実施形態では、外部ポートは、iPod(登録商標)(Apple Inc.の商標)デバイス上で使用される30ピンコネクタと同じ若しくは同様であり、且つ/又はそれに適合しているマルチピン(例えば、30ピン)コネクタである。
接触/動きモジュール130は、任意選択的に、タッチスクリーン112及び他のタッチ感知デバイス(例えば、タッチパッド又は物理クリックホイール)との接触を(ディスプレイコントローラ156と連携して)検出する。接触/動きモジュール130は、接触が生じたかどうかを判定すること(例えば、指ダウンイベントを検出すること)、接触の強度(例えば、接触の力若しくは圧力、又は接触の力若しくは圧力の代替物)を判定すること、接触の移動が存在するかどうかを判定し、タッチ感知面を横断する移動を追跡すること(例えば、指をドラッグする1つ以上のイベントを検出すること)、及び接触が停止したかどうかを判定すること(例えば、指アップイベント又は接触の中断を検出すること)などの、接触の検出に関する様々な動作を実行するための、様々なソフトウェア構成要素を含む。接触/動きモジュール130は、タッチ感知面から接触データを受信する。一連の接触データによって表される、接触点の移動を判定することは、任意選択的に、接触点の速さ(大きさ)、速度(大きさ及び方向)、及び/又は加速度(大きさ及び/又は方向の変化)を判定することを含む。これらの動作は、任意選択的に、単一の接触(例えば、1本の指の接触)又は複数の同時接触(例えば、「マルチタッチ」/複数の指の接触)に適用される。いくつかの実施形態では、接触/動きモジュール130及びディスプレイコントローラ156は、タッチパッド上の接触を検出する。
いくつかの実施形態では、接触/動きモジュール130は、ユーザによって動作が実行されたかどうかを判定するために(例えば、ユーザがアイコン上で「クリック」したかどうかを判定するために)、1つ以上の強度閾値のセットを使用する。いくつかの実施形態では、強度閾値の少なくとも1つのサブセットは、ソフトウェアパラメータに従って判定される(例えば、強度閾値は、特定の物理アクチュエータのアクティブ化閾値によって決定されるのではなく、デバイス100の物理ハードウェアを変更することなく調整することができる)。例えば、トラックパッド又はタッチスクリーンディスプレイのマウス「クリック」閾値は、トラックパッド又はタッチスクリーンディスプレイハードウェアを変更することなく、広範囲の既定閾値のうちのいずれかに設定することができる。加えて、いくつかの実装形態では、デバイスのユーザに、(例えば、個々の強度閾値を調整すること、及び/又は複数の強度閾値をシステムレベルのクリック「強度」パラメータによって一度に調整することによって)強度閾値のセットのうちの1つ以上を調整するソフトウェア設定が提供される。
接触/動きモジュール130は、任意選択的に、ユーザによるジェスチャ入力を検出する。タッチ感知面上の異なるジェスチャは、異なる接触パターンを有する(例えば検出される接触の動き、タイミング、及び/又は強度が異なる)。したがって、ジェスチャは、任意選択的に、特定の接触パターンを検出することによって検出される。例えば、指タップジェスチャを検出することは、指ダウンイベントを検出し、それに続いて指ダウンイベントと同じ位置(又は実質的に同じ位置)(例えば、アイコンの位置)で指アップ(リフトオフ)イベントを検出することを含む。別の例として、タッチ感知面上で指スワイプジェスチャを検出することは、指ダウンイベントを検出し、それに続いて1つ以上の指ドラッグイベントを検出し、その後それに続いて指アップ(リフトオフ)イベントを検出することを含む。
グラフィックモジュール132は、表示されるグラフィックの視覚的な影響(例えば、輝度、透明度、彩度、コントラスト、又は他の視覚的特性)を変化させる構成要素を含む、タッチスクリーン112又は他のディスプレイ上にグラフィックをレンダリング及び表示する様々な既知のソフトウェア構成要素を含む。本明細書では、「グラフィック」という用語は、それだけに限定されるものではないが、文字、ウェブページ、アイコン(ソフトキーを含むユーザインタフェースオブジェクトなど)、デジタル画像、動画、アニメーションなどを含む、ユーザに表示することができる任意のオブジェクトを含む。
いくつかの実施形態では、グラフィックモジュール132は、使用されることになるグラフィックを表すデータを記憶する。各グラフィックには、任意選択的に、対応するコードが割り当てられる。グラフィックモジュール132は、アプリケーションなどから、必要に応じて、座標データ及び他のグラフィック特性データと共に、表示されることとなるグラフィックを指定する1つ以上のコードを受信し、次にディスプレイコントローラ156に出力する画面の画像データを生成する。
触覚フィードバックモジュール133は、触知出力生成器167によって使用される命令を生成するための様々なソフトウェア構成要素を含み、触知出力生成器167は、ユーザのデバイス100との対話に応じて、デバイス100上の1つ以上の位置での触知出力を生成する。
テキスト入力モジュール134は、任意選択的に、グラフィックモジュール132の構成要素であり、様々なアプリケーション(例えば、連絡先137、電子メール140、IM141、ブラウザ147、及びテキスト入力を必要とする任意の他のアプリケーション)でテキストを入力するためのソフトキーボードを提供する。
GPSモジュール135は、デバイスの場所を判定し、様々なアプリケーション内で使用するためにこの情報を提供する(例えば、場所ベースのダイアリングで使用するために電話138へ、ピクチャ/ビデオメタデータとしてカメラ143へ、及び気象ウィジェット、ローカルイエローページウィジェット、及び地図/ナビゲーションウィジェットなどの場所ベースのサービスを提供するアプリケーションへ)。
アプリケーション136は、任意選択的に、以下のモジュール(又は命令セット)又はそれらのサブセット若しくはスーパーセットを含む。
● 連絡先モジュール137(アドレス帳又は連絡先リストと呼ばれることもある)、
● 電話モジュール138、
● テレビ会議モジュール139、
● 電子メールクライアントモジュール140、
● インスタントメッセージング(Instant messaging、IM)モジュール141、
● トレーニングサポートモジュール142、
● 静止画像及び/又は動画用のカメラモジュール143、
● 画像管理モジュール144、
● 動画プレーヤモジュール、
● 音楽プレーヤモジュール、
● ブラウザモジュール147、
● カレンダーモジュール148、
● 任意選択的に、気象ウィジェット149-1、株式ウィジェット149-2、計算機ウィジェット149-3、目覚まし時計ウィジェット149-4、辞書ウィジェット149-5、及びユーザによって入手された他のウィジェット、並びにユーザ作成ウィジェット149-6のうちの1つ以上を含むウィジェットモジュール149、
● ユーザ作成ウィジェット149-6を作成するためのウィジェットクリエータモジュール150、
● 検索モジュール151、
● 動画プレーヤモジュール及び音楽プレーヤモジュールを一体化した動画及び音楽プレーヤモジュール152、
● メモモジュール153、
● 地図モジュール154、並びに/又は、
● オンラインビデオモジュール155。
任意選択的にメモリ102に記憶される他のアプリケーション136の例としては、他のワードプロセッシングアプリケーション、他の画像編集アプリケーション、描画アプリケーション、プレゼンテーションアプリケーション、JAVA対応アプリケーション、暗号化、デジタル著作権管理、音声認識、及び音声複製が挙げられる。
連絡先モジュール137は、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、及びテキスト入力モジュール134と連携して、任意選択的に、アドレス帳又は連絡先リストを(例えば、メモリ102又はメモリ370内の連絡先モジュール137のアプリケーション内部状態192内に記憶して)管理するために使用される。連絡先モジュール137による管理には、アドレス帳に名前を追加すること、アドレス帳から名前を削除すること、電話番号、電子メールアドレス、物理アドレス又は他の情報を名前に関連付けること、画像を名前に関連付けること、名前を分類して並べ替えること、電話番号又は電子メールアドレスを提供して、電話138、テレビ会議モジュール139、電子メール140、又はIM141による通信を開始且つ/又は促進すること、などが含まれる。
電話モジュール138は、RF回路108、オーディオ回路110、スピーカ111、マイクロフォン113、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、及びテキスト入力モジュール134と連携して、任意選択的に、電話番号に対応する文字シーケンスの入力、連絡先モジュール137内の1つ以上の電話番号へのアクセス、入力された電話番号の修正、それぞれの電話番号のダイヤル、通話の実行、並びに通話終了時の接続切断及び通話停止のために使用される。前述したように、無線通信は、任意選択的に、複数の通信規格、プロトコル、及び技術のうちのいずれかを使用する。
テレビ会議モジュール139は、RF回路108、オーディオ回路110、スピーカ111、マイクロフォン113、タッチスクリーン112、ディスプレイコントローラ156、光センサ164、光センサコントローラ158、接触/動きモジュール130、グラフィックモジュール132、テキスト入力モジュール134、連絡先モジュール137、及び電話モジュール138と連携して、ユーザの命令に従ってユーザと1人以上の他の参加者との間のテレビ会議を開始、実行、及び終了するための実行可能な命令を含む。
電子メールクライアントモジュール140は、RF回路108、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、及びテキスト入力モジュール134と連携して、ユーザの命令に応じて電子メールを作成、送信、受信、及び管理するための実行可能な命令を含む。画像管理モジュール144と連携して、電子メールクライアントモジュール140は、カメラモジュール143で撮影された静止画像又は動画画像を有する電子メールの作成及び送信を非常に容易にする。
インスタントメッセージングモジュール141は、RF回路108、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、及びテキスト入力モジュール134と連携して、インスタントメッセージに対応する文字シーケンスの入力、以前に入力された文字の修正、(例えば、電話通信ベースのインスタントメッセージ向けのショートメッセージサービス(Short Message Service、SMS)若しくはマルチメディアメッセージサービス(Multimedia Message Service、MMS)プロトコル、又はインターネットベースのインスタントメッセージ向けのXMPP、SIMPLE、若しくはIMPSを使用する)それぞれのインスタントメッセージの送信、インスタントメッセージの受信、及び受信したインスタントメッセージの閲覧のための実行可能な命令を含む。いくつかの実施形態では、送信される及び/又は受信されるインスタントメッセージは、任意選択的に、MMS及び/又は拡張メッセージングサービス(Enhanced Messaging Service、EMS)でサポートされるようなグラフィック、写真、オーディオファイル、動画ファイル、及び/又は他の添付ファイルを含む。本明細書では、「インスタントメッセージング」とは、電話通信ベースのメッセージ(例えば、SMS又はMMSを使用して送信されるメッセージ)と、インターネットベースのメッセージ(例えば、XMPP、SIMPLE、又はIMPSを使用して送信されるメッセージ)との両方を指す。
トレーニングサポートモジュール142は、RF回路108、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、テキスト入力モジュール134、GPSモジュール135、地図モジュール154、及び音楽プレーヤモジュールと連携して、トレーニング(例えば、時間、距離、及び/又はカロリー燃焼の目標を有する)を作成し、トレーニングセンサ(スポーツデバイス)と通信し、トレーニングセンサデータを受信し、トレーニングをモニタするために使用されるセンサを較正し、トレーニングのための音楽を選択及び再生し、並びに、トレーニングデータを表示、記憶、及び送信するための実行可能な命令を含む。
カメラモジュール143は、タッチスクリーン112、ディスプレイコントローラ156、光センサ164、光センサコントローラ158、接触/動きモジュール130、グラフィックモジュール132、及び画像管理モジュール144と連携して、静止画像若しくは(動画ストリームを含む)動画のキャプチャ及びメモリ102内への記憶、静止画像若しくは動画の特性の修正、又はメモリ102からの静止画像若しくは動画の削除のための実行可能な命令を含む。
画像管理モジュール144は、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、テキスト入力モジュール134、及びカメラモジュール143と連携して、静止画像及び/若しくは動画の配置、修正(例えば、編集)、又はその他の操作、ラベル付け、削除、(例えば、デジタルスライドショー若しくはアルバムにおける)提示、及び記憶のための実行可能な命令を含む。
ブラウザモジュール147は、RF回路108、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、及びテキスト入力モジュール134と連携して、ウェブページ又はその一部分、並びにウェブページにリンクされた添付ファイル及び他のファイルの検索、リンク、受信、及び表示を含む、ユーザの命令に従ってインターネットをブラウジングするための実行可能な命令を含む。
カレンダーモジュール148は、RF回路108、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、テキスト入力モジュール134、電子メールクライアントモジュール140、及びブラウザモジュール147と連携して、ユーザの命令に従って、カレンダー及びカレンダーに関連付けられたデータ(例えば、カレンダーアイテム、to-doリストなど)を作成、表示、修正、及び記憶するための実行可能な命令を含む。
ウィジェットモジュール149は、RF回路108、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、テキスト入力モジュール134、及びブラウザモジュール147と連携して、任意選択的に、ユーザによってダウンロード及び使用されるミニアプリケーション(例えば、気象ウィジェット149-1、株式ウィジェット149-2、計算機ウィジェット149-3、目覚まし時計ウィジェット149-4、及び辞書ウィジェット149-5)、又はユーザによって作成されたミニアプリケーション(例えば、ユーザ作成ウィジェット149-6)である。いくつかの実施形態では、ウィジェットは、HTML(Hypertext Markup Language、ハイパーテキストマークアップ言語)ファイル、CSS(Cascading Style Sheets、カスケーディングスタイルシート)ファイル、及びJavaScriptファイルを含む。いくつかの実施形態では、ウィジェットは、XML(Extensible Markup Language、拡張可能マークアップ言語)ファイル及びJavaScriptファイル(例えば、Yahoo!ウィジェット)を含む。
ウィジェットクリエータモジュール150は、RF回路108、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、テキスト入力モジュール134、及びブラウザモジュール147と連携して、任意選択的に、ウィジェットを作成する(例えば、ウェブページのユーザ指定部分をウィジェットにする)ために、ユーザによって使用される。
検索モジュール151は、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、及びテキスト入力モジュール134と連携して、ユーザの命令に従って1つ以上の検索基準(例えば、1つ以上のユーザ指定検索語)と一致するメモリ102内の文字、音楽、サウンド、画像、動画、及び/又は他のファイルを検索するための実行可能な命令を含む。
動画及び音楽プレーヤモジュール152は、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、オーディオ回路110、スピーカ111、RF回路108、及びブラウザモジュール147と連携して、MP3又はAACファイルなどの1つ以上のファイル形式で記憶された録音済みの音楽及び他のサウンドファイルをユーザがダウンロード及び再生できるようにする実行可能な命令、並びに動画を(例えば、タッチスクリーン112上又は外部ポート124を介して接続された外部のディスプレイ上に)表示、提示、又は別の方法で再生するための実行可能な命令を含む。いくつかの実施形態では、デバイス100は、任意選択的に、iPod(Apple Inc.の商標)などのMP3プレーヤの機能を含む。
メモモジュール153は、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、及びテキスト入力モジュール134と連携して、ユーザの命令に従ってメモ、to-doリストなどを作成及び管理するための実行可能な命令を含む。
地図モジュール154は、RF回路108、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、テキスト入力モジュール134、GPSモジュール135、及びブラウザモジュール147と連携して、任意選択的に、ユーザの命令に従って、地図及び地図に関連付けられたデータ(例えば、運転の道順、特定の場所又はその付近の店舗及び他の見どころに関するデータ、並びに他の位置ベースのデータ)を受信、表示、修正、及び記憶するために使用される。
オンラインビデオモジュール155は、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、オーディオ回路110、スピーカ111、RF回路108、テキスト入力モジュール134、電子メールクライアントモジュール140、及びブラウザモジュール147と連携して、ユーザが特定のオンラインビデオへのアクセス、特定のオンラインビデオのブラウジング、(例えば、ストリーミング及び/又はダウンロードによる)受信、(例えば、タッチスクリーン上又は外部ポート124を介して接続された外部ディスプレイ上の)再生、特定のオンラインビデオへのリンクを有する電子メールの送信、並びにH.264などの1つ以上のファイル形式のオンラインビデオの他の管理を行うことを可能にする命令を含む。いくつかの実施形態では、特定のオンラインビデオへのリンクを送信するために、電子メールクライアントモジュール140ではなく、インスタントメッセージングモジュール141が使用される。オンラインビデオアプリケーションについての追加の説明は、その内容の全体が参照により本明細書に組み込まれる、2007年6月20日出願の米国仮特許出願第60/936,562号、「Portable Multifunction Device,Method,and Graphical User Interface for Playing Online Videos」、及び2007年12月31日出願の米国特許出願第11/968,067号、「Portable Multifunction Device,Method,and Graphical User Interface for Playing Online Videos」を参照されたい。
上記で特定したモジュール及びアプリケーションはそれぞれ、前述した1つ以上の機能及び本出願に記載した方法(例えば、本明細書に記載したコンピュータにより実装される方法及び他の情報処理方法)を実行する実行可能な命令のセットに対応する。これらのモジュール(例えば、命令セット)は、別個のソフトウェアプログラム、手順、又はモジュールとして実装される必要はなく、したがって、様々な実施形態において、これらのモジュールの様々なサブセットが、任意選択的に、組み合わされ、又は別の方法で再構成される。例えば、動画プレーヤモジュールは、任意選択的に、音楽プレーヤモジュールと組み合わされて、単一のモジュール(例えば、図1Aの動画及び音楽プレーヤモジュール152)にされる。いくつかの実施形態では、メモリ102は、任意選択的に、上記で特定されたモジュール及びデータ構造のサブセットを記憶する。更にまた、メモリ102は、任意選択的に、上記で説明されていない追加のモジュール及びデータ構造を記憶する。
いくつかの実施形態では、デバイス100は、そのデバイスにおける既定の機能のセットの動作がタッチスクリーン及び/又はタッチパッドのみを介して実行されるデバイスである。デバイス100が動作するための主要な入力コントロールデバイスとしてタッチスクリーン及び/又はタッチパッドを使用することにより、任意選択的に、デバイス100上の物理的な入力コントロールデバイス(プッシュボタン、ダイヤルなど)の数が削減される。
タッチスクリーン及び/又はタッチパッドを通じてのみ実行される既定の機能のセットは、任意選択的に、ユーザインタフェース間のナビゲーションを含む。いくつかの実施形態では、タッチパッドは、ユーザによってタッチされたときに、デバイス100上に表示される任意のユーザインタフェースから、メインメニュー、ホームメニュー、又はルートメニューにデバイス100をナビゲートする。このような実施形態では、「メニューボタン」は、タッチパッドを使用して実装される。一部の他の実施形態では、メニューボタンは、タッチパッドではなく、物理プッシュボタン又はその他の物理入力コントロールデバイスである。
図1Bは、いくつかの実施形態に係る、イベント処理のための例示的な構成要素を示すブロック図である。いくつかの実施形態では、メモリ102(図1A)又は370(図3)は、イベントソータ170(例えば、オペレーティングシステム126内)と、それぞれのアプリケーション136-1(例えば、前述のアプリケーション137~151、155、380~390のうちのいずれか)とを含む。
イベントソータ170は、イベント情報を受信し、イベント情報を配信するアプリケーション136-1、及びアプリケーション136-1のアプリケーションビュー191を判定する。イベントソータ170は、イベントモニタ171及びイベントディスパッチャモジュール174を含む。いくつかの実施形態では、アプリケーション136-1は、アプリケーションがアクティブ又は実行中であるときにタッチ感知ディスプレイ112に表示される現在のアプリケーションビューを示すアプリケーション内部状態192を含む。いくつかの実施形態では、デバイス/グローバル内部状態157は、どのアプリケーション(単数又は複数)が現在アクティブであるかを判定するためにイベントソータ170によって使用され、アプリケーション内部状態192は、イベント情報が配信されるアプリケーションビュー191を判定するためにイベントソータ170によって使用される。
いくつかの実施形態では、アプリケーション内部状態192は、アプリケーション136-1が実行を再開するときに使用すべき再開情報、アプリケーション136-1によって表示されている情報を示す又は表示する準備ができたユーザインタフェース状態情報、ユーザがアプリケーション136-1の前の状態又はビューに戻ることを可能にする状態キュー、及びユーザによって行われた前のアクションのリドゥ/アンドゥキューのうちの1つ以上などの追加の情報を含む。
イベントモニタ171は、周辺機器インタフェース118からイベント情報を受信する。イベント情報は、サブイベント(例えば、タッチ感知ディスプレイ112でのマルチタッチジェスチャの一部としてのユーザタッチ)に関する情報を含む。周辺機器インタフェース118は、I/Oサブシステム106、又は近接センサ166、加速度計(単数又は複数)168、及び/若しくは(オーディオ回路110を介した)マイクロフォン113などのセンサから受信する情報を送信する。周辺機器インタフェース118がI/Oサブシステム106から受信する情報は、タッチ感知ディスプレイ112又はタッチ感知面からの情報を含む。
いくつかの実施形態では、イベントモニタ171は、所定の間隔で周辺機器インタフェース118に要求を送信する。それに応じて、周辺機器インタフェース118は、イベント情報を送信する。他の実施形態では、周辺機器インタフェース118は、重要なイベント(例えば、所定のノイズ閾値を超える及び/又は所定の持続時間を超える入力の受信)があるときのみイベント情報を送信する。
いくつかの実施形態では、イベントソータ170はまた、ヒットビュー判定モジュール172及び/又はアクティブイベント認識部判定モジュール173を含む。
ヒットビュー判定モジュール172は、タッチ感知ディスプレイ112が2つ以上のビューを表示しているときに、サブイベントが1つ以上のビュー内のどこで起きたかを判定するソフトウェア手順を提供する。ビューは、ユーザがディスプレイ上で見ることができる制御装置及び他の要素から構成されている。
アプリケーションに関連付けられたユーザインタフェースの別の態様は、本明細書ではアプリケーションビュー又はユーザインタフェースウィンドウと呼ばれることもあるビューのセットであり、その中で情報が表示され、タッチに基づくジェスチャが生じる。タッチが検出される(それぞれのアプリケーションの)アプリケーションビューは、任意選択的に、アプリケーションのプログラム階層又はビュー階層内のプログラムレベルに対応する。例えば、タッチが検出される最下位レベルビューは、任意選択的に、ヒットビューと呼ばれ、また、適切な入力として認識されるイベントのセットは、任意選択的に、タッチによるジェスチャを開始する初期タッチのヒットビューに少なくとも部分的に基づいて決定される。
ヒットビュー判定モジュール172は、タッチに基づくジェスチャのサブイベントに関連する情報を受信する。アプリケーションが階層状に構成された複数のビューを有するとき、ヒットビュー判定モジュール172は、サブイベントを処理すべき階層内の最下位のビューとして、ヒットビューを特定する。ほとんどの状況では、ヒットビューは、開始サブイベント(例えば、イベント又は潜在的イベントを形成するサブイベントシーケンスにおける第1のサブイベント)が発生する最も低いレベルのビューである。ヒットビューがヒットビュー判定モジュール172によって特定されると、ヒットビューは、通常、ヒットビューとして特定されたタッチ又は入力ソースと同じタッチ又は入力ソースに関係する全てのサブイベントを受信する。
アクティブイベント認識部判定モジュール173は、ビュー階層内のどのビュー(単数又は複数)がサブイベントの特定のシーケンスを受信すべきかを判定する。いくつかの実施形態では、アクティブイベント認識部判定モジュール173は、ヒットビューのみがサブイベントの特定のシーケンスを受信すべきであると判定する。他の実施形態では、アクティブイベント認識部判定モジュール173は、サブイベントの物理位置を含む全てのビューがアクティブに関わりがあるビューであると判定し、したがって、全てのアクティブに関わりがあるビューが、サブイベントの特定のシーケンスを受信すべきであると判定する。他の実施形態では、タッチサブイベントが1つの特定のビューに関連付けられたエリアに完全に限定された場合でも、階層内の上位のビューは、依然としてアクティブに関わりがあるビューであり続ける。
イベントディスパッチャモジュール174は、イベント情報をイベント認識部(例えばイベント認識部180)にディスパッチする。アクティブイベント認識部判定モジュール173を含む実施形態では、イベントディスパッチャモジュール174は、アクティブイベント認識部判定モジュール173により判定されたイベント認識部にイベント情報を配信する。いくつかの実施形態では、イベントディスパッチャモジュール174は、それぞれのイベント受信部182によって取得されるイベント情報をイベントキューに記憶する。
いくつかの実施形態では、オペレーティングシステム126は、イベントソータ170を含む。あるいは、アプリケーション136-1がイベントソータ170を含む。更に他の実施形態では、イベントソータ170は、独立型のモジュールであり、又は接触/動きモジュール130などのメモリ102内に記憶されている別のモジュールの一部分である。
いくつかの実施形態では、アプリケーション136-1は、それぞれがアプリケーションのユーザインタフェースのそれぞれのビュー内で発生するタッチイベントを処理するための命令を含む、複数のイベント処理部190及び1つ以上のアプリケーションビュー191を含む。アプリケーション136-1の各アプリケーションビュー191は、1つ以上のイベント認識部180を含む。典型的には、それぞれのアプリケーションビュー191は、複数のイベント認識部180を含む。他の実施形態では、イベント認識部180のうちの1つ以上は、ユーザインタフェースキット、又は、アプリケーション136-1が方法及び他のプロパティを継承する上位レベルのオブジェクトなどの、別個のモジュールの一部である。いくつかの実施形態では、それぞれのイベント処理部190は、データ更新部176、オブジェクト更新部177、GUI更新部178、及び/又はイベントソータ170から受信されたイベントデータ179、のうちの1つ以上を含む。イベント処理部190は、任意選択的に、データ更新部176、オブジェクト更新部177、又はGUI更新部178を利用し又は呼び出して、アプリケーション内部状態192を更新する。あるいは、アプリケーションビュー191のうちの1つ以上が、1つ以上のそれぞれのイベント処理部190を含む。また、いくつかの実施形態では、データ更新部176、オブジェクト更新部177、及びGUI更新部178のうちの1つ以上は、それぞれのアプリケーションビュー191に含まれる。
それぞれのイベント認識部180は、イベントソータ170からイベント情報(例えば、イベントデータ179)を受信し、イベント情報からイベントを特定する。イベント認識部180は、イベント受信部182及びイベント比較部184を含む。いくつかの実施形態では、イベント認識部180はまた、メタデータ183及びイベント配信命令188(任意選択的にサブイベント配信命令を含む)の少なくともサブセットも含む。
イベント受信部182は、イベントソータ170からイベント情報を受信する。イベント情報は、サブイベント、例えば、タッチ又はタッチの移動についての情報を含む。サブイベントに応じて、イベント情報はまた、サブイベントの位置などの追加の情報を含む。サブイベントがタッチの動きに関わるとき、イベント情報はまた任意選択的に、サブイベントの速さ及び方向を含む。一部の実施形態では、イベントは、1つの向きから別の向きへの(例えば、縦向きから横向きへ、又はその逆の)デバイスの回転を含み、イベント情報は、デバイスの現在の向き(デバイスの姿勢とも呼ぶ)についての対応する情報を含む。
イベント比較部184は、イベント情報を、定義済みのイベント又はサブイベントの定義と比較し、その比較に基づいて、イベント又はサブイベントを判定するか、あるいはイベント又はサブイベントの状態を判定若しくは更新する。いくつかの実施形態では、イベント比較部184は、イベント定義186を含む。イベント定義186は、例えばイベント1(187-1)及びイベント2(187-2)などのイベント(例えば、既定のサブイベントのシーケンス)の定義を含む。いくつかの実施形態では、イベント(187)内のサブイベントは、例えば、タッチの開始、タッチの終了、タッチの移動、タッチの取り消し、及び複数のタッチを含む。一実施例では、イベント1(187-1)についての定義は、表示されたオブジェクト上のダブルタップである。ダブルタップは、例えば、所定の段階に対する表示オブジェクト上の第1のタッチ(タッチ開始)、所定の段階に対する第1のリフトオフ(タッチ終了)、所定の段階に対する表示オブジェクト上の第2のタッチ(タッチ開始)、及び所定の段階に対する第2のリフトオフ(タッチ終了)を含む。別の実施例では、イベント2(187-2)の定義は、表示されたオブジェクト上のドラッグである。ドラッグは、例えば、所定の段階に対する表示オブジェクト上のタッチ(又は接触)、タッチ感知ディスプレイ112にわたるタッチの移動、及びタッチのリフトオフ(タッチ終了)を含む。いくつかの実施形態では、イベントは、1つ以上の関連付けられたイベント処理部190に関する情報も含む。
いくつかの実施形態では、イベント定義187は、それぞれのユーザインタフェースオブジェクトについてのイベントの定義を含む。いくつかの実施形態では、イベント比較部184は、どのユーザインタフェースオブジェクトがサブイベントに関連付けられているかを判定するヒットテストを実行する。例えば、タッチ感知ディスプレイ112に3つのユーザインタフェースオブジェクトが表示されているアプリケーションビュー内で、タッチ感知ディスプレイ112上でタッチが検出されると、イベント比較部184は、ヒットテストを実行して、3つのユーザインタフェースオブジェクトのうちのどれがタッチ(サブイベント)に関連付けられているかを判定する。表示された各オブジェクトが、それぞれのイベント処理部190に関連付けられている場合、イベント比較部は、ヒットテストの結果を用いて、どのイベント処理部190をアクティブ化すべきかを判定する。例えば、イベント比較部184は、ヒットテストをトリガするサブイベント及びオブジェクトに関連付けられたイベント処理部を選択する。
いくつかの実施形態では、それぞれのイベント187の定義は、サブイベントのシーケンスがイベント認識部のイベントタイプに対応するかどうかが判定されるまで、イベント情報の伝送を遅らせる遅延アクションも含む。
それぞれのイベント認識部180が一連のサブイベントがイベント定義186のイベントのいずれとも一致しないと判断した場合、それぞれのイベント認識部180は、イベント不可能、イベント失敗、又はイベント終了の状態に入り、その後は、タッチに基づくジェスチャの次のサブイベントを無視する。この状況では、ヒットビューについてアクティブのままである他のイベント認識部があれば、そのイベント認識部は、進行中のタッチによるジェスチャのサブイベントの追跡及びプロセスを続行する。
いくつかの実施形態では、それぞれのイベント認識部180は、イベント配信システムがどのようにサブイベント配信を実行すべきかをアクティブに関与しているイベント認識部に示す構成可能なプロパティ、フラグ、及び/又はリストを有するメタデータ183を含む。いくつかの実施形態では、メタデータ183は、イベント認識部が互いにどのように対話するか、又はイベント認識部が互いにどのように対話することが可能となるかを示す構成可能なプロパティ、フラグ、及び/又はリストを含む。いくつかの実施形態では、メタデータ183は、サブイベントがビュー階層又はプログラム階層における多様なレベルに配信されるかを示す構成可能なプロパティ、フラグ、及び/又はリストを含む。
いくつかの実施形態では、それぞれのイベント認識部180は、イベントの1つ以上の特定のサブイベントが認識されるときに、イベントに関連付けられたイベント処理部190をアクティブ化する。いくつかの実施形態では、それぞれのイベント認識部180は、イベントに関連付けられたイベント情報をイベント処理部190に配信する。イベント処理部190をアクティブ化することは、それぞれのヒットビューにサブイベントを送信する(及び、送信を延期する)こととは別個である。いくつかの実施形態では、イベント認識部180は、認識したイベントに関連付けられたフラグを投入し、そのフラグに関連付けられたイベント処理部190は、そのフラグを捕らえ、既定のプロセスを実行する。
いくつかの実施形態では、イベント配信命令188は、イベント処理部をアクティブ化することなくサブイベントについてのイベント情報を配信するサブイベント配信命令を含む。代わりに、サブイベント配信命令は、一連のサブイベントと関連付けられたイベント処理部に、又はアクティブに関与しているビューにイベント情報を配信する。一連のサブイベント又はアクティブに関与しているビューと関連付けられたイベント処理部は、イベント情報を受信し、所定のプロセスを実行する。
いくつかの実施形態では、データ更新部176は、アプリケーション136-1で使用されるデータを作成及び更新する。例えば、データ更新部176は、連絡先モジュール137で使用される電話番号を更新し、又は動画プレーヤモジュールで使用される動画ファイルを記憶する。いくつかの実施形態では、オブジェクト更新部177は、アプリケーション136-1で使用されるオブジェクトを作成及び更新する。例えば、オブジェクト更新部177は、新たなユーザインタフェースオブジェクトを作成し、又はユーザインタフェースオブジェクトの位置を更新する。GUI更新部178は、GUIを更新する。例えば、GUI更新部178は、表示情報を準備し、タッチ感知ディスプレイ上に表示するために表示情報をグラフィックモジュール132に送る。
いくつかの実施形態では、イベント処理部(単数又は複数)190は、データ更新部176、オブジェクト更新部177、及びGUI更新部178を含む又はそれらへのアクセスを有する。いくつかの実施形態では、データ更新部176、オブジェクト更新部177、及びGUI更新部178は、それぞれのアプリケーション136-1又はアプリケーションビュー191の単一モジュールに含まれる。他の実施形態では、それらは、2つ以上のソフトウェアモジュールに含まれる。
タッチ感知ディスプレイ上のユーザのタッチのイベント処理に関する前述の記載は、入力デバイスを用いて多機能デバイス100を動作させるための他の形態のユーザ入力にも適用されるが、それらの全てがタッチスクリーン上で開始されるわけではないことを理解されたい。例えば、キーボードの単一又は複数の押圧若しくは保持と任意選択的に連携される、マウスの移動及びマウスボタンの押圧、タッチパッド上のタップ、ドラッグ、スクロールなどの接触の移動、ペンスタイラス入力、デバイスの移動、口頭による命令、検出された眼球運動、バイオメトリック入力、並びに/又はそれらの任意の組み合わせを、任意選択的に、認識するイベントを定義するサブイベントに対応する入力として利用する。
図2は、いくつかの実施形態に係る、タッチスクリーン112を有するポータブル多機能デバイス100を示す。タッチスクリーンは、任意選択的に、ユーザインタフェース(user interface、UI)200内に1つ以上のグラフィックを表示する。本実施形態、並びに以下で説明される他の実施形態では、ユーザは、例えば、1本以上の指202(図には正確な縮尺では描かれていない)又は1つ以上のスタイラス203(図には正確な縮尺では描かれていない)を使用して、グラフィック上でジェスチャを実施することによって、それらのグラフィックのうちの1つ以上を選択することが可能となる。一部の実施形態では、1つ以上のグラフィックの選択は、ユーザが、その1つ以上のグラフィックとの接触を中断する場合に実施される。いくつかの実施形態では、ジェスチャは、デバイス100と接触した指の、1回以上のタップ、1回以上のスワイプ(左から右へ、右から左へ、上向きに及び/若しくは下向きに)、並びに/又は、ローリング(右から左へ、左から右へ、上向きに及び/若しくは下向きに)を、任意選択的に含む。一部の実装形態又は状況では、グラフィックとの不測の接触は、そのグラフィックを選択するものではない。例えば、選択に対応するジェスチャがタップである場合、アプリケーションアイコンの上をスイープするスワイプジェスチャは、任意選択的に、対応するアプリケーションを選択するものではない。
デバイス100は、任意選択的に、「ホーム」ボタン又はメニューボタン204などの1つ以上の物理ボタンをまた含む。前述したように、メニューボタン204は、任意選択的にデバイス100上で実行される1組のアプリケーション内の任意のアプリケーション136にナビゲートするために、任意選択的に使用される。あるいは、いくつかの実施形態では、メニューボタンは、タッチスクリーン112に表示されるGUI内のソフトキーとして実装される。
いくつかの実施形態では、デバイス100は、タッチスクリーン112、メニューボタン204、デバイスの電源をオン/オフにしてデバイスをロックするプッシュボタン206、ボリューム調整ボタン208、加入者識別モジュール(SIM)カードスロット210、ヘッドセットジャック212、及びドッキング/充電用外部ポート124を含む。プッシュボタン206は、任意選択的に、ボタンを押し下げて、既定の期間にわたってボタンを押し下げた状態に保持することによって、デバイスの電源をオン/オフするため、ボタンを押し下げて、既定の時間が経過する前にボタンを解放することによってデバイスをロックするため、及び/又はデバイスをロック解除する、若しくはロック解除プロセスを開始するために、使用される。代替の実施形態では、デバイス100は、マイクロフォン113を介して、いくつかの機能をアクティブ化又は非アクティブ化するための口頭入力もまた受け入れる。デバイス100は、任意選択的に、タッチスクリーン112上の接触の強度を検出する1つ以上の接触強度センサ165、及び/又はデバイス100のユーザに対する触知出力を生成する1つ以上の触知出力生成器167もまた含む。
図3は、いくつかの実施形態に係る、ディスプレイ及びタッチ感知面を有する例示的な多機能デバイスのブロック図である。デバイス300は、ポータブル型である必要はない。いくつかの実施形態では、デバイス300は、ラップトップコンピュータ、デスクトップコンピュータ、タブレットコンピュータ、マルチメディアプレーヤデバイス、ナビゲーションデバイス、教育的デバイス(子供の学習玩具など)、ゲームシステム、又は制御デバイス(例えば、家庭用又は業務用コントローラ)である。デバイス300は、通常、1つ以上の処理ユニット(CPU)310、1つ以上のネットワーク又は他の通信インタフェース360、メモリ370、及びこれらの構成要素を相互接続する1つ以上の通信バス320を含む。通信バス320は、任意選択的に、システム構成要素間の通信を相互接続及び制御する回路(チップセットと呼ばれることもある)を含む。デバイス300は、ディスプレイ340を含む入出力(I/O)インタフェース330を含み、ディスプレイ340は、通常、タッチスクリーンディスプレイである。I/Oインタフェース330はまた、任意選択的に、キーボード及び/又はマウス(若しくは他のポインティングデバイス)350並びにタッチパッド355と、デバイス300上に触知出力を生成する(例えば、図1Aを参照して前述した触知出力生成器167に類似している)触知出力生成器357と、センサ359(例えば、光、加速度、近接、タッチ感知、及び/又は図1Aを参照して前述した、接触強度センサ165に類似している接触強度センサ)とを含む。メモリ370は、DRAM、SRAM、DDR RAM、又は他のランダムアクセスソリッドステートメモリデバイスなどの高速ランダムアクセスメモリを含み、任意選択的に、1つ以上の磁気ディスク記憶デバイス、光ディスク記憶デバイス、フラッシュメモリデバイス、又は他の不揮発性ソリッドステート記憶デバイスなどの不揮発性メモリを含む。メモリ370は、任意選択的に、CPU(単数又は複数)310からリモートに位置する1つ以上の記憶デバイスを含む。いくつかの実施形態では、メモリ370は、ポータブル多機能デバイス100(図1A)のメモリ102内に記憶されているプログラム、モジュール、及びデータ構造に類似したプログラム、モジュール、及びデータ構造、又はそのサブセットを記憶する。更に、メモリ370は、任意選択的に、ポータブル多機能デバイス100のメモリ102に存在しない追加のプログラム、モジュール、及びデータ構造を記憶する。例えば、デバイス300のメモリ370は、任意選択的に、描画モジュール380、プレゼンテーションモジュール382、ワードプロセッシングモジュール384、ウェブサイト作成モジュール386、ディスクオーサリングモジュール388、及び/又はスプレッドシートモジュール390を記憶するのに対して、ポータブル多機能デバイス100(図1A)のメモリ102は、任意選択的に、これらのモジュールを記憶しない。
図3の上記で特定した要素はそれぞれ、任意選択的に、前述したメモリデバイスのうちの1つ以上の中に記憶される。上記で特定したモジュールはそれぞれ、前述した機能を実行する命令セットに対応する。上記で特定したモジュール又はプログラム(例えば、命令セット)は、別個のソフトウェアプログラム、手順、又はモジュールとして実装される必要はなく、したがって様々な実施形態では、これらのモジュールの様々なサブセットが、任意選択的に組み合わされ、又は他の方法で再構成される。いくつかの実施形態では、メモリ370は、任意選択的に、上記で特定されたモジュール及びデータ構造のサブセットを記憶する。更に、メモリ370は、上記で説明されていない追加のモジュール及びデータ構造を任意選択的に記憶する。
次に、任意選択的に、例えばポータブル多機能デバイス100に実装されるユーザインタフェースの実施形態に注意を向ける。
図4Aは、いくつかの実施形態に係る、ポータブル多機能デバイス100上のアプリケーションのメニューの例示的なユーザインタフェースを示す。同様のユーザインタフェースは、デバイス300上に任意選択的に実装される。いくつかの実施形態では、ユーザインタフェース400は、以下の要素、又はそれらのサブセット若しくはスーパーセットを含む。
● セルラー信号及びWi-Fi信号などの無線通信(単数又は複数)用の信号強度インジケータ(単数又は複数)402、
● 時刻404、
● Bluetoothインジケータ405、
● バッテリ状態インジケータ406、
● 以下のような、頻繁に使用されるアプリケーションのアイコンを有するトレイ408
○ 不在着信又はボイスメールメッセージの数のインジケータ414を任意選択的に含む、「電話」とラベル付けされた、電話モジュール138のアイコン416、
○ 未読電子メールの数のインジケータ410を任意選択的に含む、「メール」とラベル付けされた、電子メールクライアントモジュール140のアイコン418、
○ 「ブラウザ」とラベル付けされた、ブラウザモジュール147のアイコン420、及び
○ 「iPod」とラベル付けされる、iPod(Apple Inc.の商標)モジュール152とも称される動画及び音楽プレーヤモジュール152用のアイコン422、及び
● 以下のような、他のアプリケーションのアイコン、
○ 「メッセージ」とラベル付けされた、IMモジュール141のアイコン424、
○ 「カレンダー」とラベル付けされた、カレンダーモジュール148のアイコン426、
○ 「写真」とラベル付けされた、画像管理モジュール144のアイコン428、
○ 「カメラ」とラベル付けされた、カメラモジュール143のアイコン430、
○ 「オンラインビデオ」とラベル付けされた、オンラインビデオモジュール155のアイコン432、
○ 「株価」とラベル付けされた、株式ウィジェット149-2のアイコン434、
○ 「マップ」とラベル付けされた、地図モジュール154のアイコン436、
○ 「天気」とラベル付けされた、気象ウィジェット149-1のアイコン438、
○ 「時計」とラベル付けされた、アラーム時計ウィジェット149-4のアイコン440、
○ 「トレーニングサポート」とラベル付けされた、トレーニングサポートモジュール142のアイコン442、
○ 「メモ」とラベル付けされた、メモモジュール153のアイコン444、及び
○ デバイス100及びその様々なアプリケーション136の設定へのアクセスを提供する、「設定」とラベル付けされた、設定アプリケーション又はモジュールのアイコン446。
図4Aに示すアイコンラベルは、単なる例示であることに留意されたい。例えば、動画及び音楽プレーヤモジュール152のアイコン422は、「音楽」又は「音楽プレーヤ」とラベル付けされる、他のラベルが、様々なアプリケーションアイコンのために、任意選択的に使用される。一部の実施形態では、それぞれのアプリケーションアイコンに関するラベルは、それぞれのアプリケーションアイコンに対応するアプリケーションの名前を含む。一部の実施形態では、特定のアプリケーションアイコンのラベルは、その特定のアプリケーションアイコンに対応するアプリケーションの名前とは異なる。
図4Bは、ディスプレイ450(例えば、タッチスクリーンディスプレイ112)とは別個のタッチ感知面451(例えば、図3のタブレット又はタッチパッド355)を有するデバイス(例えば、図3のデバイス300)上の例示的なユーザインタフェースを示す。デバイス300はまた、任意選択的に、タッチ感知面451上の接触の強度を検出する1つ以上の接触強度センサ(例えば、センサ359のうちの1つ以上)、及び/又はデバイス300のユーザに対して触知出力を生成する1つ以上の触知出力生成器357を含む。
以下の例のうちのいくつかは、タッチスクリーンディスプレイ112(タッチ感知面及びディスプレイが組み合わされている)上の入力を参照して与えられるが、いくつかの実施形態では、デバイスは、図4Bに示すように、ディスプレイとは別個のタッチ感知面上の入力を検出する。いくつかの実施形態では、タッチ感知面(例えば、図4Bの451)は、ディスプレイ(例えば、450)上の1次軸(例えば、図4Bの453)に対応する1次軸(例えば、図4Bの452)を有する。これらの実施形態によれば、デバイスは、ディスプレイ上のそれぞれの位置に対応する位置(例えば、図4Bでは、460は468に対応し、462は470に対応する)で、タッチ感知面451との接触(例えば、図4Bの460及び462)を検出する。このようにして、タッチ感知面(例えば、図4Bの451)上でデバイスによって検出されるユーザ入力(例えば、接触460及び462、並びにこれらの移動)は、タッチ感知面がディスプレイとは別個であるとき、多機能デバイスのディスプレイ(例えば、図4Bの450)上のユーザインタフェースを操作するために、デバイスによって使用される。同様の方法が、本明細書に記載の他のユーザインタフェースに任意選択的に使用されることを理解されたい。
加えて、以下の例は、主に指入力(例えば、指接触、指タップジェスチャ、指スワイプジェスチャ)を参照して与えられる一方、いくつかの実施形態では、指入力のうちの1つ以上が別の入力デバイスからの入力(例えば、マウスベースの入力又はスタイラス入力)に置き換えられることを理解されたい。例えば、スワイプジェスチャは、任意選択的に、(例えば、接触の代わりに、)マウスクリックであって、その後に(例えば、接触の移動の代わりに)スワイプの経路に沿ったカーソルの移動を伴うマウスクリックによって置き換えられる。別の例として、タップジェスチャは、任意選択的に、カーソルがタップジェスチャの位置上に位置する間は、(例えば、接触を検出して、それに続いて接触の検出を停止する代わりに)マウスクリックによって置き換えられる。同様に、複数のユーザ入力が同時に検出されるとき、複数のコンピュータマウスが、任意選択的に、同時に使用され、又はマウス及び指の接触が、任意選択的に、同時に使用されることを理解されたい。
図5Aは、例示的なパーソナル電子デバイス500を示す。デバイス500は、本体502を含む。いくつかの実施形態では、デバイス500は、デバイス100及び300(例えば、図1A~図4B)に関して説明された特徴のうちのいくつか又は全てを含むことができる。いくつかの実施形態では、デバイス500は、タッチ感知ディスプレイスクリーン504、以下ではタッチスクリーン504、を有する。あるいは、又はタッチスクリーン504に加えて、デバイス500は、ディスプレイ及びタッチ感知面を有する。デバイス100及び300と同様に、いくつかの実施形態では、タッチスクリーン504(又はタッチ感知面)は、任意選択的に、加えられている接触(例えば、タッチ)の強度を検出する1つ以上の強度センサを含む。タッチスクリーン504(又はタッチ感知面)の1つ以上の強度センサは、タッチの強度を表す出力データを提供することができる。デバイス500のユーザインタフェースは、タッチ(複数)に、その強度に基づいて応答することができ、これは、異なる強度のタッチが、デバイス500上で異なるユーザインタフェース動作を呼び出すことができることを意味する。
タッチ強度を検出し処理する例示的な技術は、例えば、それぞれ全体が参照により本明細書に組み込まれる関連出願である、国際公開第WO/2013/169849号として公開された、2013年5月8日出願の国際特許出願第PCT/US2013/040061号、「Device,Method,and Graphical User Interface for Displaying User Interface Objects Corresponding to an Application」、及び国際公開第WO/2014/105276号として公開された、2013年11月11日出願の国際特許出願第PCT/US2013/069483号、「Device,Method,and Graphical User Interface for Transitioning Between Touch Input to Display Output Relationships」を参照されたい。
いくつかの実施形態では、デバイス500は、1つ以上の入力機構506及び508を有する。入力機構506及び508は、含まれる場合、物理的であり得る。物理的入力機構の例としては、プッシュボタン及び回転可能機構が挙げられる。いくつかの実施形態では、デバイス500は、1つ以上のアタッチメント機構を有する。そのようなアタッチメント機構は、含まれる場合、例えば帽子、眼鏡類、イアリング、ネックレス、シャツ、ジャケット、ブレスレット、腕時計のバンド、チェーン、ズボン、ベルト、靴、財布、バックパックなどにデバイス500を取り付けることを可能にすることができる。これらのアタッチメント機構は、ユーザがデバイス500を着用することを可能にする。
図5Bは、例示的なパーソナル電子デバイス500を示す。いくつかの実施形態では、デバイス500は、図1A、図1B、及び図3に関して説明した構成要素のうちのいくつか又は全てを含むことができる。デバイス500は、I/Oセクション514を1つ以上のコンピュータプロセッサ516及びメモリ518に動作可能に結合するバス512を有する。I/Oセクション514は、ディスプレイ504に接続することができ、ディスプレイ504は、タッチ感知構成要素522と、任意選択的に強度センサ524(例えば、接触強度センサ)とを有することができる。加えて、I/Oセクション514は、Wi-Fi、Bluetooth、近距離通信(NFC)、セルラー、及び/又は他の無線通信技術を使用してアプリケーション及びオペレーティングシステムデータを受信する通信ユニット530と接続することができる。デバイス500は、入力機構506及び/又は508を含むことができる。入力機構506は、任意選択的に、例えば回転可能入力デバイス又は押下可能及び回転可能入力デバイスである。いくつかの実施例では、入力機構508は、任意選択的にボタンである。
いくつかの実施例では、入力機構508は、任意選択的にマイクロフォンである。パーソナル電子デバイス500は、任意選択的に、GPSセンサ532、加速度計534、方向センサ540(例えば、コンパス)、ジャイロスコープ536、動きセンサ538、及び/又はそれらの組み合わせなどの様々なセンサを含み、それらは全て、I/Oセクション514に動作可能に接続することができる。
パーソナル電子デバイス500のメモリ518は、1つ以上のコンピュータプロセッサ516によって実行されると、例えば、コンピュータプロセッサに、プロセス700、1000、1300、1500、1600、及び1800(図7A~図7B、図10、図13、図15、図16、及び図18)を含む後述の技術を実行させることができるコンピュータ実行可能命令を記憶するための1つ以上の非一時的コンピュータ可読記憶媒体を含むことができる。コンピュータ可読記憶媒体は、命令実行システム、装置、若しくはデバイスによって、又は命令実行システム、装置、若しくはデバイスに関連して、使用されるコンピュータ実行可能命令を、有形に含み又は記憶することができる任意の媒体であり得る。いくつかの実施例では、記憶媒体は、一時的コンピュータ可読記憶媒体である。いくつかの実施例では、記憶媒体は、非一時的コンピュータ可読記憶媒体である。非一時的コンピュータ可読記憶媒体は、それらに限定されるものではないが、磁気、光学、及び/又は半導体記憶装置を含むことができる。そのような記憶装置の例としては、磁気ディスク、CD、DVD、又はBlu-ray技術に基づく光学ディスク、並びにフラッシュ、ソリッドステートドライブなどの常駐ソリッドステートメモリなどが挙げられる。パーソナル電子デバイス500は、図5Bの構成要素及び構成に限定されるものではなく、他の又は追加の構成要素を複数の構成で含むことができる。
本明細書で使用される「アフォーダンス」という用語は、任意選択的に、デバイス100、300、及び/又は500(図1A、図3、及び図5A~図5B)のディスプレイスクリーンに表示されるユーザ対話グラフィカルユーザインタフェースオブジェクトを指す。例えば、画像(例えば、アイコン)、ボタン、及び文字(例えば、ハイパーリンク)はそれぞれ、任意選択的に、アフォーダンスを構成する。
本明細書で使用される「フォーカスセレクタ」という用語は、ユーザが対話しているユーザインタフェースの現在の部分を示す入力要素を指す。カーソル又は他の位置マーカを含むいくつかの実装形態では、カーソルが「フォーカスセレクタ」として作用し、したがってカーソルが特定のユーザインタフェース要素(例えば、ボタン、ウィンドウ、スライダ、又は他のユーザインタフェース要素)の上に位置する間に、入力(例えば、押下入力)がタッチ感知面(例えば、図3のタッチパッド355又は図4Bのタッチ感知面451)上で検出されたとき、特定のユーザインタフェース要素は、検出された入力に従って調整される。タッチスクリーンディスプレイ上のユーザインタフェース要素との直接対話を可能にするタッチスクリーンディスプレイ(例えば、図1Aのタッチ感知ディスプレイシステム112又は図4Aのタッチスクリーン112)を含むいくつかの実装形態では、タッチスクリーン上の検出された接触が「フォーカスセレクタ」として作用し、したがってタッチスクリーンディスプレイ上の特定のユーザインタフェース要素(例えば、ボタン、ウィンドウ、スライダ、又は他のユーザインタフェース要素)の位置で入力(例えば、接触による押下入力)が検出されたとき、特定のユーザインタフェース要素が、検出された入力に従って調整される。いくつかの実装形態では、(例えば、フォーカスを1つのボタンから別のボタンへ動かすためにタブキー又は矢印キーを使用することによって)タッチスクリーンディスプレイ上の対応するカーソルの移動又は接触の移動なしに、フォーカスがユーザインタフェースの1つの領域からユーザインタフェースの別の領域に動かされ、これらの実装形態では、フォーカスセレクタは、ユーザインタフェースの種々の領域間でのフォーカスの移動に従って移動する。フォーカスセレクタがとる具体的な形態に関わらず、フォーカスセレクタは、一般に、ユーザが意図するユーザインタフェースとの対話について(例えば、ユーザがそれを通じて対話することを意図しているユーザインタフェースの要素をデバイスに示すことによって)伝えるためにユーザによって制御されるユーザインタフェース要素(又はタッチスクリーンディスプレイ上の接触)である。例えば、タッチ感知面(例えば、タッチパッド又はタッチスクリーン)上で押圧入力が検出されている間の、対応のボタンの上のフォーカスセレクタ(例えば、カーソル、接触、又は選択ボックス)の位置は、その対応のボタンを(そのデバイスのディスプレイ上に示される他のユーザインタフェース要素ではなく)アクティブ化することをユーザが意図していることを示すものである。
本明細書及び特許請求の範囲において使用されるとき、接触の「特性強度」という用語は、接触の1つ以上の強度に基づく、その接触の特性を指す。いくつかの実施形態では、特性強度は複数の強度サンプルに基づく。特性強度は、任意選択的に、既定の数の強度サンプル、すなわち、既定のイベント(例えば、接触を検出した後、接触のリフトオフを検出する前、接触の移動の開始を検出する前若しくは後、接触の終了を検出する前、接触の強度の増大を検出する前若しくは後、及び/又は、接触の強度の減少を検出する前若しくは後の)に関連する所定の時間(例えば、0.05、0.1、0.2、0.5、1、2、5、10秒)の間に収集された強度サンプルのセットに基づく。接触の特性強度は、任意選択的に、接触の強度の最大値、接触の強度の平均(mean)値、接触の強度の平均(average)値、接触の強度の上位10パーセンタイル値、接触の強度の最大の2分の1の値、接触の強度の最大の90パーセントの値などのうちの1つ以上に基づいている。一部の実施形態では、特性強度を判定する際に(例えば、特性強度が経時的な接触の強度の平均であるときに)、接触の持続時間が使用される。一部の実施形態では、特性強度は、ユーザによって動作が実行されたかどうかを判定するために、1つ以上の強度閾値のセットと比較される。例えば、1つ以上の強度閾値のセットは、任意選択的に、第1の強度閾値及び第2の強度閾値を含む。この例では、第1の閾値を超えない特性強度を有する接触は第1の動作をもたらし、第1の強度閾値を超えるが第2の強度閾値を超えない特性強度を有する接触は第2の動作をもたらし、第2の閾値を超える特性強度を有する接触は第3の動作をもたらす。いくつかの実施形態では、特性強度と1つ以上の閾値との間の比較は、第1の動作を実行するべきか、それとも第2の動作を実行するべきかを判定するために使用されるのではなく、1つ以上の動作を実行するべきか否か(例えば、それぞれの動作を実行するべきか、それともそれぞれの動作を実行するのを見送るべきか)を判定するために使用される。
図5Cは、複数の強度センサ524A~524Dによってタッチ感知ディスプレイスクリーン504上で複数の接触552A~552Eを検出することを示している。図5Cは、追加として、強度単位に対する強度センサ524A~524Dの現在の強度測定値を示す強度ダイアグラムを含む。この例では、強度センサ524A及び524Dの強度測定値は、それぞれ9強度単位であり、強度センサ524B及び524Cの強度測定値は、それぞれ7強度単位である。いくつかの実装形態では、集約強度は、複数の強度センサ524A~524Dの強度測定値の和であり、この例では32強度単位である。いくつかの実施形態では、各接触に、集約強度の一部分であるそれぞれの強度が割り当てられる。図5Dは、力の中心554からの距離に基づいて、集約強度を接触552A~552Eに割り当てることを示している。この例では、接触552A、552B、及び552Eのそれぞれに、集約強度の8強度単位の接触の強度が割り当てられ、接触552C及び552Dのそれぞれに、集約強度の4強度単位の接触の強度が割り当てられる。より一般的には、一部の実装例では、各接触jは、既定の数学関数Ij=A・(Dj/ΣDi)に従って、集約強度Aの一部分である、それぞれの強度Ijが割り当てられ、ここで、Djは、力の中心からそれぞれの接触jまでの距離であり、ΣDiは、力の中心から全てのそれぞれ接触(例えば、i=1から最後まで)までの距離の和である。図5C~図5Dを参照して説明した動作は、デバイス100、300又は500と類似若しくは同一の電子デバイスを使用して行うことができる。いくつかの実施形態では、接触の特性強度は、接触の1つ以上の強度に基づいている。いくつかの実施形態では、強度センサは、単一の特性強度(例えば、単一の接触の単一の特性強度)を判定するために使用される。強度ダイアグラムは、表示ユーザインタフェースの一部ではなく、読み手の助けになるように図5C~図5Dに含まれていることに留意されたい。
一部の実施形態では、特性強度を判定する目的のために、ジェスチャの一部分が特定される。例えば、タッチ感知面は、任意選択的に、開始位置から遷移して終了位置に到達し、その位置で接触の強度が増大している、連続するスワイプ接触を受信する。この例では、終了位置での接触の特性強度は、任意選択的に、スワイプ接触全体ではなく、連続するスワイプ接触の一部分のみ(例えば、スワイプ接触のうち終了位置の部分のみ)に基づいている。いくつかの実施形態では、任意選択的に、接触の特性強度を判定する前に、平滑化アルゴリズムがスワイプ接触の強度に適用される。例えば、平滑化アルゴリズムは、任意選択的に、非加重移動平均平滑化アルゴリズム、三角平滑化アルゴリズム、中央値フィルタ平滑化アルゴリズム、及び/又は指数平滑化アルゴリズムのうちの1つ以上を含む。いくつかの状況では、これらの平滑化アルゴリズムは、特性強度を判定する目的のために、スワイプ接触強度の幅の狭いスパイク又は下落を排除する。
タッチ感知面上の接触の強度は、任意選択的に、接触検出強度閾値、軽い押下強度閾値、深い押下強度閾値、及び/又は1つ以上の他の強度閾値などの1つ以上の強度閾値に対して特徴付けられる。一部の実施形態では、軽い押下強度閾値は、通常、物理マウスのボタン又はトラックパッドをクリックすることに関連付けられた動作をデバイスが実行する強度に相当する。一部の実施形態では、深い押下強度閾値は、通常、物理マウスのボタン又はトラックパッドをクリックすることに関連付けられた動作とは異なる動作をデバイスが実行する強度に相当する。いくつかの実施形態では、軽い押下強度閾値を下回る(例えば、且つそれを下回ると接触が検出されなくなる公称接触検出強度閾値を超える)特性強度を有する接触が検出されたとき、デバイスは、タッチ感知面上の接触の移動に従い、軽い押下強度閾値又は深い押下強度閾値に関連付けられた動作を実行することなく、フォーカスセレクタを動かす。一般に、特に明記しない限り、これらの強度閾値は、ユーザインタフェースの値の様々なセットの間で一貫している。
軽い押下強度閾値を下回る強度から、軽い押下強度閾値と深い押下強度閾値との間の強度への、接触の特性強度の増大は、「軽い押下」の入力と呼ばれることがある。深い押下強度閾値を下回る強度から、深い押下強度閾値を超える強度への、接触の特性強度の増大は、「深い押下」の入力と呼ばれることがある。接触検出強度閾値を下回る強度から、接触検出強度閾値と軽い押下強度閾値との間の強度への、接触の特性強度の増大は、タッチ面上の接触の検出と呼ばれることがある。接触検出強度閾値を超える強度から、接触検出強度閾値を下回る強度への、接触の特性強度の減少は、タッチ面からの接触のリフトオフの検出と呼ばれることがある。いくつかの実施形態では、接触検出強度閾値はゼロである。いくつかの実施形態では、接触検出強度閾値はゼロより大きい。
本明細書に記載するいくつかの実施形態では、それぞれの押下入力を含むジェスチャを検出したことに応じて、又はそれぞれの接触(若しくは複数の接触)によって実行されたそれぞれの押下入力を検出したことに応じて、1つ以上の動作が実行され、それぞれの押下入力は、押下入力強度閾値を超える接触(又は複数の接触)の強度の増大を検出したことに少なくとも部分的に基づいて検出される。いくつかの実施形態では、それぞれの動作は、押下入力強度閾値を超えるそれぞれの接触の強度の増大(例えば、それぞれの押下入力の「ダウンストローク」)を検出したことに応じて実行される。いくつかの実施形態では、押下入力は、押下入力強度閾値を超えるそれぞれの接触の強度の増大、及びそれに続く押下入力強度閾値を下回る接触の強度の減少を含み、それぞれの動作は、それに続く押下入力閾値を下回るそれぞれの接触の強度の減少(例えば、それぞれの押下入力の「アップストローク」)を検出したことに応じて実行される。
図5E~5Hは、図5Eの軽い押下強度閾値(例えば、「ITL」)を下回る強度から、図5Hの深い押下強度閾値(例えば、「ITD」)を超える強度への、接触562の強度の増大に対応する押下入力を含むジェスチャの検出を示す。接触562によって実行されるジェスチャは、タッチ感知面560上で検出され、このとき、既定の領域574内に表示されたアプリケーションアイコン572A~572Dを含む表示ユーザインタフェース570上では、アプリ2に対応するアプリケーションアイコン572Bの上にカーソル576が表示される。いくつかの実施形態では、ジェスチャは、タッチ感知ディスプレイ504上に検出される。強度センサは、タッチ感知面560上の接触の強度を検出する。デバイスは、接触562の強度が深い押下強度閾値(例えば、「ITD」)を超えてピークに達したと判定する。接触562は、タッチ感知面560上で維持される。ジェスチャの検出に応じて、ジェスチャ中に深い押下強度閾値(例えば、「ITD」)を超える強度を有する接触562に従って、図5F~5Hに示すように、アプリ2に対して最近開いた文書の縮尺が低減された表現578A~578C(例えば、サムネイル)が表示される。いくつかの実施形態では、1つ以上の強度閾値と比較されるこの強度は、接触の特性強度である。接触562に対する強度ダイアグラムは、表示ユーザインタフェースの一部ではなく、読み手の助けになるように図5E~5Hに含まれていることに留意されたい。
いくつかの実施形態では、表現578A~578Cの表示は、アニメーションを含む。例えば、図5Fに示すように、表現578Aが、アプリケーションアイコン572Bに近接して最初に表示される。アニメーションが進むにつれて、図5Gに示すように、表現578Aは上方へ動き、表現578Bが、アプリケーションアイコン572Bに近接して表示される。次いで、図5Hに示すように、表現578Aが上方へ動き、表現578Bが表現578Aに向かって上方へ動き、表現578Cが、アプリケーションアイコン572Bに近接して表示される。表現578A~578Cは、アイコン572Bの上にアレイを形成する。いくつかの実施形態では、アニメーションは、図5F~5Gに示すように、接触562の強度に従って進行し、接触562の強度が深い押下強度閾値(例えば、「ITD」)に向かって増大するにつれて、表現578A~578Cが現れ、上方へ動く。いくつかの実施形態では、アニメーションの進行が基づいている強度は、接触の特性強度である。図5E~5Hを参照して説明する動作は、デバイス100、300、又は500に類似若しくは同一の電子デバイスを使用して実行することができる。
一部の実施形態では、デバイスは、「ジッタ」と呼ばれる場合がある偶発的な入力を回避するために強度ヒステリシスを採用し、デバイスは、押下入力強度閾値との既定の関係を有するヒステリシス強度閾値を定義又は選択する(例えば、ヒステリシス強度閾値は、押下入力強度閾値よりもX強度単位低い、又はヒステリシス強度閾値は、押下入力強度閾値の75%、90%、若しくは何らかの妥当な割合である)。したがって、いくつかの実施形態では、押下入力は、押下入力強度閾値を超えるそれぞれの接触の強度の増大、及びそれに続く押下入力強度閾値に対応するヒステリシス強度閾値を下回る接触の強度の減少を含み、それぞれの動作は、それに続くヒステリシス強度閾値を下回るそれぞれの接触の強度の減少(例えば、それぞれの押下入力の「アップストローク」)を検出したことに応じて実行される。同様に、一部の実施形態では、押下入力は、デバイスが、ヒステリシス強度閾値以下の強度から押下入力強度閾値以上の強度への接触の強度の増大、及び任意選択的に、その後のヒステリシス強度以下の強度への接触の強度の減少を検出するときにのみ検出され、それぞれの動作は、押下入力(例えば、状況に応じて、接触の強度の増大又は接触の強度の減少)を検出したことに応じて実行される。
説明を容易にするために、押下入力強度閾値に関連付けられた押下入力、又は押下入力を含むジェスチャに応じて実行される動作の説明は、任意選択的に、押下入力強度閾値を超える接触の強度の増大、ヒステリシス強度閾値を下回る強度から押下入力強度閾値を超える強度への接触の強度の増大、押下入力強度閾値を下回る接触の強度の減少、及び/又は押下入力強度閾値に対応するヒステリシス強度閾値を下回る接触の強度の減少のいずれかを検出したことに応じてトリガされる。更に、押下入力強度閾値を下回る接触の強度の減少を検出したことに応じて実行されるように動作が記載される例では、動作は、任意選択的に、押下入力強度閾値に対応し、且つそれよりも低いヒステリシス強度閾値を下回る接触の強度の減少を検出したことに応じて実行される。
本明細書では、「インストール済みアプリケーション」は、電子デバイス(例えば、デバイス100、300、及び/又は500)上へダウンロードされ、デバイス上で起動する準備ができた(例えば、開かれた)ソフトウェアアプリケーションを指す。いくつかの実施形態では、ダウンロードされたアプリケーションは、ダウンロードされたパッケージからプログラム部分を抽出し、抽出された部分をコンピュータシステムのオペレーティングシステムと統合するインストールプログラムによって、インストール済みアプリケーションになる。
本明細書では、「開いているアプリケーション」又は「実行中のアプリケーション」という用語は、保持された状態情報(例えば、デバイス/グローバル内部状態157及び/又はアプリケーション内部状態192の一部として)を有するソフトウェアアプリケーションを指す。開いている又は実行中のアプリケーションは、任意選択的に、以下のタイプのアプリケーションのうちのいずれか1つである。
● アプリケーションが使用されているデバイスのディスプレイスクリーンに現在表示されているアクティブなアプリケーション、
● 現在表示されていないが、アプリケーションに対する1つ以上のプロセスが1つ以上のプロセッサによって処理されている背景アプリケーション(又は背景プロセス)、並びに
● 稼働していないが、(それぞれ、揮発性及び不揮発性の)メモリに記憶されており、且つアプリケーションの実行を再開するために使用することができる状態情報を有する、中断又は休止状態のアプリケーション。
本明細書では、「閉じているアプリケーション」という用語は、保持された状態情報を有していないソフトウェアアプリケーションを指す(例えば、閉じているアプリケーションに対する状態情報は、デバイスのメモリ内に記憶されていない)。したがって、アプリケーションを閉じることは、アプリケーションに対するアプリケーションプロセスを停止及び/又は除去し、アプリケーションに対する状態情報をデバイスのメモリから除去することを含む。概して、第1のアプリケーション中に第2のアプリケーションを開いても、第1のアプリケーションは閉じない。第2のアプリケーションが表示されており、且つ第1のアプリケーションが表示を終了されたとき、第1のアプリケーションは背景アプリケーションになる。
次に、ポータブル多機能デバイス100、デバイス300、又はデバイス500などの電子デバイス上で実施されるユーザインタフェース(「UI」)及び関連プロセスの実施形態に注意を向ける。
図6A~図6ALは、いくつかの実施形態に係る、音声露出レベルを監視するための例示的なユーザインタフェースを示す。これらの図におけるユーザインタフェースは、図7A~図7Bにおけるプロセスを含む、後述するプロセスを説明するために使用される。
図6Aに示すように、デバイス600は、ディスプレイ602(例えば、ディスプレイデバイス)と、回転可能且つ押下可能な入力機構604(例えば、デバイスの筐体又はフレームに対して回転可能且つ押下可能)と、マイクロフォン606とを含む。いくつかの実施形態では、デバイス600は、スマートウォッチなどのウェアラブル電子デバイスである。いくつかの実施形態では、デバイス600は、デバイス100、300、又は500の1つ以上の特徴を含む。
図6Aに示すように、時計ユーザインタフェース608Aは、時間610のデジタル表示(例えば、現在の時間、及び分の値を表示するデジタルクロックの表現)、及び複数のアフォーダンスのデジタル表示を含み、各アフォーダンスは、デバイス600上に記憶されたアプリケーションに関連付けられる。日付アフォーダンス612は、現在の日付を示し、選択時にカレンダーアプリケーションを起動する。リモートアフォーダンス614は、選択時に遠隔制御アプリケーションを起動する(例えば、デバイス600の外部の制御デバイスへのアプリケーション)。心拍数アフォーダンス616は、選択時に心拍数監視アプリケーションを起動する。
図6Aに示すように、時計ユーザインタフェース608A(例えば、時計のフェースインタフェース)はまた、選択されると、ノイズ監視アプリケーション(例えば、ノイズアイコン618、ノイズ状態アフォーダンス620、ノイズ測定器アフォーダンス622、及びコンパクトノイズアフォーダンス624)を起動する複数のノイズアプリケーションアフォーダンスを含む。図6Aに示すように、デバイス600上のノイズアプリケーションは、インストールされていないか、又は初期化されておらず(例えば、有効化されていない)、結果として、ノイズ状態アフォーダンス620、ノイズ測定器アフォーダンス622、及びコンパクトノイズアフォーダンス624は、ノイズアプリケーションからの任意のノイズデータを指示(例えば、表示)しない。その代わりに、例えば、デバイス600は、ノイズアプリケーションを初期化する必要があることを示すセットアッププロンプト(例えば、「タップトゥセットアップ」)としてノイズ状態アフォーダンス620を表示する。
図6Aは、ノイズ状態アフォーダンス620上でユーザ入力628A(例えば、タップ)を受信するデバイス600を示す。ユーザ入力628Aの検出に応答して、デバイス600は、図6Bに示すように、ユーザインタフェース608Bを表示する。ユーザインタフェース608Bは、ノイズアプリケーションの機能性の説明と、有効化のための有効化アフォーダンス630(例えば、ノイズアプリケーションを初期化する)と、無効化のための無効化アフォーダンス632(例えば、ノイズアプリケーションの初期化されていない状態を維持する)とを含む。図6Bは、有効化アフォーダンス630上でユーザ入力628B(例えば、タップ)を受信するデバイス600を示す。ユーザ入力628Bの受信に応答して、デバイス600は、図6Cに示すように、ユーザインタフェース608C(例えば、ノイズアプリケーションに関連付けられたインタフェース)を表示する。
図6C(及び6D~図6G)に示すように、ユーザインタフェース608Cは、時間634の表示(例えば、10:09の現在時刻を示す)、ノイズレベルインジケータ636、ノイズメーターインジケータ638、及びノイズ状態インジケータ640を含む。ノイズレベルインジケータ636は、第1のノイズレベル値の数値表示(例えば、34DB)を提供する(例えば、マイクロフォン606から導出されたノイズデータからデバイス600によって測定又は判定される)。ノイズ状態インジケータ640は、第1のレベル閾値(例えば、所定の80DB閾値)に対する第1のノイズレベル値(例えば、マイクロフォン606から導出されたノイズデータからデバイス600によって測定又は判定された)の非数字表示(例えば、グラフィック及び/又はテキストを含む指標)を提供する。いくつかの実施形態では、第1のノイズレベル閾値はユーザ構成可能である。いくつかの実施形態では、デバイスは、電子デバイスのセンサ(例えば、マイクロフォン)によって検出されたノイズデータに基づいてノイズレベルを識別する(例えば、第1のノイズレベルは、デバイスが位置する物理的環境のノイズレベルを表す)。
ノイズメーターインジケータ636は、第2のノイズレベル(例えば、マイクロフォン606を介してデバイス600によって測定される)のグラフィカル表示を提供する。いくつかの実施形態では、第2のノイズレベル及び第1のノイズは、同じノイズレベルである。いくつかの実施形態では、第1のノイズレベル及び第2のノイズレベルは、異なる期間及び/又は速度(例えば、それぞれ1秒及び0.1秒)でサンプリングされた共通ノイズデータに基づいて判定される。ノイズメーターインジケータ638は、サイズ及び/又は色が第2のノイズレベルに従って変化するアクティブ部分638A(例えば、視覚的に強調された部分)を含む。以下の図に示すように、アクティブ部分638Aのサイズは、ノイズレベルが増加するにつれて増大し、アクティブ部分638Aの色は、第2の閾値レベルに対して変化する。いくつかの実施形態では、サイズは、視覚的に強調されたセグメントの数、視覚的に強調されたセグメントのセットによって占有される相対領域、又はスケールに対する視覚的に強調されたセグメントのセットの最も右側の縁部の位置を含む。いくつかの実施形態では、アクティブ部分638A内の各強調されたセグメントは、所定の数のデシベル(例えば、10DB)を表す。いくつかの実施形態では、第1の閾値レベル及び第2の閾値レベルは、同じレベル(例えば、80DB)である。
(例えば、以下に記載されるような)ノイズレベルインジケータ636、ノイズメーターインジケータ638、及びノイズ状態インジケータ640の外観によって示されるノイズレベル(例えば、値、振幅)は、デバイス600が、受信したノイズデータに基づいて1つ以上のノイズレベルを判定することに応答して更新される(例えば、周辺ノイズレベルとしての指示更新は、デバイス600によって連続的に判定又は測定される)。いくつかの実施形態では、ノイズレベルは、デバイス600の外部のデバイスによって測定又は検出される(例えば、デバイス600は、デバイス600と通信可能に結合されたリモートデバイスから現在のノイズレベルを表すデータを受信する)。
図6Cは、デバイス600が、10:09の時刻に34DBの一貫したノイズレベルを有する環境にある(例えば、デバイス600は、コンピュータ実験室などの低ノイズ環境内に位置する)間のユーザインタフェース608Cの状態を示す。したがって、図6Cに示すように、ノイズレベルインジケータ636は、「34DB」値を含み、ノイズ状態インジケータ640は、ノイズレベルが閾値レベル(例えば、80DB)を下回っていることを示す非注意的プロンプト(例えば、チェックマークグラフィック、「OK」、及びノイズレベルインジケータ636によって示されるレベルでの露出に関連する比較的低いリスクを示す説明的プロンプト)を含む。同様に、図6Cに示すように、ノイズメーターインジケータ638は、2つの緑色セグメント(例えば、斜めのハッチングによって表される緑色)に対応するサイズでアクティブ部分638Aを表示することによって、低い一貫したノイズレベルのグラフィカル表示を提供する。いくつかの実施態様では、2つのセグメントは、低い一貫したノイズレベルで問題がないことを示すために、異なる方法で区別されてもよい。
図6Dは、周囲ノイズにおける急激な増加(例えば、スパイクの200ミリ秒以内)に応答したユーザインタフェース608Cの状態を示す(例えば、発射アラームがコンピュータ実験室の内部で鳴る)。図6Dに示すように、ノイズメーターインジケータ638のアクティブ部分638Aのサイズは、2セグメントから10セグメントまで増加し、色は、緑色から黄色に遷移した(例えば、水平ハッチングによって表される黄色)。いくつかの実施態様では、緑色から黄色への色遷移の代わりに、セグメントは、ノイズレベルが、ユーザが注意する必要があるレベルに遷移したことを示すために、異なる方法で区別されてもよい。図示されるように、ノイズレベルインジケータ636及びノイズ状態インジケータ640は、それらの以前の外観を維持する(例えば、図6Cに示すように)。
上述したように、ノイズレベルインジケータ636及びノイズ状態インジケータ640の外観は、第1のノイズレベル(例えば、ノイズレベルデータのより長い1秒期間に基づくノイズレベル)によって変化し、ノイズメーターインジケータ638の外観は、第2のノイズレベル(例えば、ノイズレベルデータのより短い0.1秒期間に基づくノイズレベル)に基づいて変化する。その結果、グラフィカルメーターは、周辺ノイズレベルの急激な変化に応答して、ノイズレベルインジケータ636(及びノイズ状態インジケータ640)よりも迅速に(例えば、瞬時に)変化する。この遅れ効果は、ノイズレベルインジケータ636及びノイズ状態インジケータ640及びノイズメーター638によって表されるノイズレベルの差によって示される。いくつかの実施形態では、より遅い更新は、ユーザが表示されたノイズレベルを解釈する(例えば、読み取る)ことを容易にする一方で、グラフィカルメーター638のより速い更新挙動は、より適時に(例えば、応答性)視覚的フィードバックをユーザに提供する。
図6Eは、高いノイズレベルが持続された後のユーザインタフェース608Cの状態を示す(例えば、発射アラームが1分間の音を継続する)。図6Eに示すように、ノイズメーターインジケータ638のアクティブ部分638Aのサイズ及び色は(例えば、図6Dの描写と比較して)不変のままである。しかしながら、ノイズレベルインジケータ636及びノイズ状態インジケータ640は、持続的に上昇した周囲ノイズレベルを反映するように更新されている(例えば、ノイズレベルインジケータ636は、113DBレベルを示し、ノイズ状態インジケータ640は、80DB閾値を超えるノイズレベルを示す注意的(例えば、「大きい」)プロンプトを含む)。
図6Fは、周辺ノイズレベルの急激な低下に応答したユーザインタフェース608Cの状態を示す(例えば、発射アラームが突然停止する)。図6Fに示すように、ノイズメーターインジケータ638のアクティブ部分638Aのサイズは、10セグメントから6セグメントまで減少し、色は、黄色から緑色に変化している(例えば、斜めのハッチングによって表される緑色)。いくつかの実施態様では、黄色から緑色への色遷移の代わりに、セグメントは、ノイズレベルが、ユーザが注意を払う必要のあるレベルから、ユーザの聴覚へのリスクが低い通常のレベルに遷移したことを示すために、異なる方法で区別されてもよい。図示されるように、ノイズレベルインジケータ636及びノイズ状態インジケータ640は、(例えば、図6Eに示すように)それらの以前の外観を維持する。
図6Gは、低減されたノイズレベルが持続された後の(例えば、1秒よりも長い期間にわたる)ユーザインタフェース608Cの状態を示す。図6Gに示すように、ノイズメーターインジケータ638のアクティブ部分638Aのサイズ及び色は(例えば、図6Fの描写と比較して)不変のままである。しかしながら、ノイズレベルインジケータ636及びノイズ状態インジケータ640は、低減された周辺ノイズレベルを反映するように更新されている(例えば、ノイズレベルインジケータ636は、78DBレベルを示し、ノイズ状態インジケータ640は、80DB閾値を下回るノイズレベルを示す非注意的プロンプト(例えば、「OK」)を含む。
ノイズレベルがある期間(例えば、3分)の通知レベル閾値(例えば、80DB、85DB、90DB)を超えるとの判定に応答して、デバイス600は、図6Hに示すように触覚アラート642を発する。いくつかの実施形態では、ノイズレベル値を判定するために使用されるノイズデータは、第1のレートでサンプリングされ、一方、デバイス600は、グラフィカルノイズメーターインジケータ620(例えば、図6C~図6E)を表示し、ノイズメーターアフォーダンス622(例えば、図6K~図6N)は、第2のレート(例えば、より低いサンプリングレート、20%低い)でサンプリングされ、一方、デバイス600は、グラフィカルノイズメーターインジケータ638又はノイズメーターアフォーダンス622(例えば、図6H)を表示しない。
触覚アラート642を出力することに続いて、デバイス600は、図6Iのノイズ通知ユーザインタフェース608D(例えば、警告通知)を表示する。図6Iに示すように、ノイズ通知ユーザインタフェース608Dは、通知トリガ状態(例えば、「約3分の110DB」)及び関連する聴覚喪失リスクの説明を含む。図6I及び図6Jは、回転可能且つ押し下げ可能な機構604においてユーザ入力628C及び628D(例えば、スクロール入力)を受信するデバイス600を示す。ユーザ入力の受信に応答して、デバイス600は、ノイズ通知ユーザインタフェース608Dの追加部分を表示する。
図6Kに示すように、ノイズ通知ユーザインタフェース608Dは、ノイズアプリケーションを起動するためのノイズアプリアフォーダンス644と、後続のノイズ通知の表示(例えば、ユーザインタフェース608Dの表示)を特定の期間(例えば、1時間及び日の残り)の表示を抑制するための複数のミュートアフォーダンス646、及び却下アフォーダンス648を含む。図6Kは、デバイス600が、却下アフォーダンス648に対応するユーザ入力628E(例えば、タップ)を受信する。ユーザ入力628Eの受信に応答して、デバイス600は、時計ユーザインタフェース608Aを表示する(例えば、再表示する)。いくつかの実施形態では、却下アフォーダンス648の選択は、デバイス600に、所定の自動抑制期間(例えば、30分)に対する後続の通知を抑制させる(例えば、デバイス600によって通知トリガ条件が検出されているにもかかわらず、通知ユーザインタフェース608Dの表示を控えさせる)。いくつかの実施形態では、通知ユーザインタフェース608Dは、ノイズ露出レベル(例えば、ノイズメーターインジケータ638)のグラフィカル表示を含む。
図6Lに示すように、ノイズ状態アフォーダンス620、ノイズメーターアフォーダンス622、及びコンパクトノイズアフォーダンス624は、ここで、ノイズアプリケーションに関連付けられたノイズレベルデータを表示している(例えば、ノイズアプリケーションがユーザ入力628Bを介して初期化されたため)。ノイズ状態アフォーダンス620、ノイズメーターアフォーダンス622、及びコンパクトノイズアフォーダンス624の外観は、ノイズレベルインジケータ636、ノイズメーターインジケータ638、及びノイズ状態インジケータ640によって提供される機能をミラーリングする(例えば、図6C~図6Gを参照して以下に説明する)。
図6Lは、デバイス600が10:18において34DBの一貫したノイズレベルを有する環境にある(例えば、デバイス600は、図書館などの低ノイズ環境内に位置する)間の時計ユーザインタフェース608Aの状態を示す。したがって、図6Lに示すように、ノイズ状態アフォーダンス620は、ノイズレベルが閾値レベル(例えば、80DB)を下回ることを示す「34デシベル」値及び非注意的プロンプト(例えば、チェックマークグラフィック及び「OK」)を含む。図6Lに示すように、ノイズメーターアフォーダンス622は、緑色(例えば、斜めのハッチングによって表される緑色)の4つのセグメント(23セグメントの外)に対応するサイズでアクティブ部分622Aを表示することによって、低ノイズレベルのグラフィカル表示を提供する。ノイズメーターインジケータ638のアクティブ部分638Aと同様に、アクティブ部分622Aのサイズは、ノイズレベルに比例し、色(例えば、緑色)は、閾値レベル(例えば、上記緑色及び黄色)に対するノイズレベルを示す。いくつかの実施態様では、閾値レベルに対するノイズレベルの指標は、異なる色又は他の非色識別指標とすることができる。
図6Lに示すように、コンパクトノイズアフォーダンス624は、ノイズメーターアフォーダンス622及びノイズ状態アフォーダンス620によって表される情報の組み合わせを表示する。具体的には、図6Lに示すように、コンパクトノイズアフォーダンスは、緑色(例えば、斜めのハッチングによって表される緑色、ノイズレベルを閾値未満に表す)で2セグメント(11セグメントのうち)に対応するサイズでアクティブ部分624Aを表示することによって低ノイズレベルのグラフィカル表示を含み、数値部分624Bは、値(例えば、34DB)を含み、グラフィック部分624Cは、ノイズ状態アフォーダンス620によって示される値に対応する非注意的グラフィック(例えば、チェックマークグラフィック)を含む。
図6Mは、10:19の時刻に周囲ノイズにおける急激な増加(例えば、スパイク)に応答したユーザインタフェース608Aの状態を示す。図6Mに示すように、ノイズメーターアフォーダンス622のアクティブ部分622Aのサイズは、4セグメントから17セグメントまで増加し、アクティブ部分622Aの色は、緑色から黄色へと遷移する(例えば、水平ハッチングによって表される黄色は、閾値を下回るノイズレベルから、ユーザがリスニングの注意を行使すべきノイズレベルに遷移する)。同様に、図6Mに示すように、コンパクトノイズアフォーダンス624のアクティブ部分624Aのサイズは、2セグメントから8セグメントまで増加し、色は、緑色から黄色に変化している。対照的に、ノイズレベル状態アフォーダンス620、数値部分624B、及びグラフィック部分624Cは、以前の外観を維持している(例えば、図6Lに示すように)。
図6Nは、高いノイズレベルが持続された後のユーザインタフェース608Aの状態を示す(例えば、3分間)。図6Nに示すように、ノイズメーターアフォーダンス622のアクティブ部分622Aのサイズ及び色は、(例えば、図6Mの描写と比較して)不変のままである。しかしながら、ノイズ状態アフォーダンス620、数値部分624B、及びグラフィック部分624Cは、持続的に上昇した周囲ノイズレベルを反映するように更新されている。特に、図6Nに示すようにユーザインタフェース608Aを表示した直後(例えば、デバイス600が、3分間の持続的なノイズレベル110DBを検出して表示した後、前述の通知トリガ条件を検出して表示した後)、デバイス600は、以前の通知が自動抑制期間(例えば、30分)内で却下されたため、触覚アラート(例えば、図6H)又は表示ノイズ通知ユーザインタフェース608D(例えば、図6I)を出力しない。
図6Oは、デバイス600が一時停止状態で動作している間(例えば、現在、ノイズレベルを測定又は検出していない)のユーザインタフェース608Aを示す。図6Oに示すように、一時停止状態にある間、ユーザインタフェース608Aは、ノイズレベル値を示しておらず、ノイズ状態アフォーダンス620及びグラフィック部分624Cは、デバイス600の一時停止状態を示すために代替形態で現れている。いくつかの実施形態では、ノイズ測定は、様々な動作条件(例えば、水ロックモードオン、電話通話アクティブ、スピーカ使用中、又は腕時計が手首から外された状態(腕時計が手動でロック解除されていない限り))の検出の際に一時停止される。いくつかの実施形態では、通知(例えば、ユーザインタフェース608Dの表示)は、ノイズ測定を一時停止することなく無効化されてもよい。いくつかの実施形態では、ノイズ測定は、ノイズアプリケーション特徴が無効化されると(例えば、デバイスプライバシー設定又はノイズアプリ設定を介して)無効化される。
図6P~図6Uは、ノイズアプリケーションアフォーダンス及び図6A~図6Oに関連して上述したものに対応する要素を含む、例示的な時計ユーザインタフェースを表示するデバイス600を示す。
図6V~図6Yは、デバイス600を一時停止状態で反映する例示的なユーザインタフェースを表示するデバイス600を示す。
図6Z~図6ACは、デバイス600から又はデバイス600に結合された(例えば、無線で)外部デバイス601から、ノイズレベル閾値(例えば、図6A~図6Oに関連して上述した閾値に対応するノイズレベル閾値)を構成することに関連付けられた一連のユーザインタフェースを示す。
図6AD~図6AEは、デバイス600上のノイズ測定を有効化及び無効化するためのユーザインタフェースを示す。
図6AF~図6ALは、ノイズ監視アプリケーションを初期化又は有効化するための様々なインタフェースを示す(例えば、図6A~図6Oに関して上述したように)。
図7A~図7Bは、いくつかの実施形態に係る、電子デバイスを使用してノイズレベルを監視するための方法を示すフロー図である。方法700は、ディスプレイデバイス(例えば、602)を有する電子デバイス(例えば、100、300、500、600、601、800、900、1100、1200、1400、1401、及び1700)で実行される。いくつかの実施形態では、電子デバイスはまた、センサのセット(例えば、加速度計、ジャイロスコープ、GPS、心拍センサ、気圧計、マイクロフォン、圧力センサ、周囲光センサ、ECGセンサ)も含む。いくつかの実施形態では、電子デバイスは、バンドなどの取り付け機構を有するウェアラブルデバイスである。方法700のいくつかの動作は、任意選択的に組み合わされ、いくつかの動作の順序は、任意選択的に変更され、いくつかの動作は、任意選択的に省略される。
いくつかの実施形態では、電子デバイス(例えば、100、300、500、600、601、800、900、1100、1200、1400、1401、及び1700)は、コンピュータシステムである。コンピュータシステムは、任意選択的に、ディスプレイ生成構成要素と1つ以上の入力デバイスとの通信(例えば、有線通信、無線通信)である。ディスプレイ生成構成要素は、CRTディスプレイを介したディスプレイ、LEDディスプレイを介したディスプレイ、又は画像投影を介した表示などの視覚的な出力を提供するように構成されている。いくつかの実施形態では、ディスプレイ生成構成要素は、コンピュータシステムと一体化される。いくつかの実施形態では、ディスプレイ生成構成要素は、コンピュータシステムとは別個である。1つ以上の入力デバイスは、ユーザ入力を受けるタッチ感知面など、入力を受け取るように構成される。いくつかの実施形態では、1つ以上の入力デバイスは、コンピュータシステムと一体化される。いくつかの実施形態では、1つ以上の入力デバイスは、コンピュータシステムとは別個である。したがって、コンピュータシステムは、有線又は無線接続を介して、データ(例えば、画像データ又はビデオデータ)を、一体型又は外部のディスプレイ生成構成要素に送信して、(例えば、ディスプレイデバイスを使用して)コンテンツを視覚的に生成することができ、1つ以上の入力デバイスからの入力を、有線又は無線接続で受信することができる。
後述するように、方法700は、ノイズ露出レベルを管理するための直感的方法を提供する。この方法は、ユーザが1日の間に露出されて経験するノイズレベル(例えば、環境ノイズレベル)を監視しようとするユーザの認知的負担を軽減し、それによって、より効率的なヒューマン-マシンインタフェースを作り出す。バッテリ動作式コンピューティングデバイスの場合、ユーザがノイズ露出レベルをより高速且つ効率的に監視することができるようにすることで、電力を節約し、バッテリ充電間の時間を延ばす。
電子デバイス(例えば、600)は、ディスプレイデバイスを介して、ノイズレベルに基づいて外観が変化するグラフィカルオブジェクト(例えば、メーター)を含む第1のユーザインタフェース(例えば、時計文字盤ユーザインタフェース又はアプリケーションのユーザインタフェース)を表示する(712)。
いくつかの実施形態では、第1のユーザインタフェース(例えば、608A、608C)を表示する前の第1の時点で、第3の期間にわたる現在のノイズレベル(例えば、第3の期間にわたる現在のノイズレベルの平均値)が第3の閾値ノイズレベル(例えば、80dB、85dB、90dB)を超えるときに満たされる基準を含む(例えば、平均ノイズレベルは、少なくとも3分間閾値を超える)ノイズ通知基準のセットが満たされたとの判定に従って、電子デバイスは、以下を含むノイズレベル通知(608D)を表示する(702):第3の期間にわたる現在のノイズレベルの指標(例えば、第3の期間にわたる現在のノイズレベルが第3の閾値ノイズレベルを超えたことを示すテキスト;現在のノイズレベルが第3の閾値ノイズレベルを超えた時間量を示すテキスト)(704)、及び第3のアフォーダンス(例えば、「オープンノイズ」)(例えば、644)(706)。いくつかの実施形態では、第3の閾値レベルは、第1又は第2の閾値レベルと同じである。いくつかの実施形態では、ノイズ通知基準のセットは、少なくとも第3の期間の間、現在のノイズレベルが第3の閾値ノイズレベルを超えるときに満たされる第2の基準を含む。いくつかの実施形態では、第3のアフォーダンス(例えば、644)を表示している間に、電子デバイスは、第3のアフォーダンスに対応するユーザ入力を受信する(708)。いくつかの実施形態では、第3のアフォーダンスに対応するユーザ入力の受信に応答して、電子デバイスは、第1のユーザインタフェース(例えば、608C)を表示する(710)(例えば、ノイズアプリを開く)。ノイズ通知基準のセットが満たされているとの判定に従って、ノイズレベル通知を表示すること(例えば、自動的に)は、現在のノイズ露出レベルに関する情報への迅速且つ容易なアクセスをユーザに提供する。更なるユーザ入力を必要とせずに条件のセットが満たされたときに動作を行うことにより、デバイスの操作性が高められ、ユーザデバイスインタフェースを(例えば、デバイスを操作する/デバイスと対話するときに適切な入力をもたらすようにユーザを支援し、ユーザの誤りを減らすことによって)より効率的にし、加えて、ユーザがデバイスをより迅速且つ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、ノイズ通知基準のセットは、第2のノイズ通知レベルが第1の時点(例えば、図6Iに示すように10:17)の前に所定の時間(例えば、30分)以内に表示されたときに満たされない。いくつかの実施形態では、後続のノイズレベル通知は、以前のノイズレベル通知を発行した後の期間にわたって抑制される。以前のノイズレベル通知を発行した後の期間の後続のノイズレベル通知を抑制することは、電子デバイスが不必要に冗長な通知を提供することを防止し、ひいてはデバイスの操作性を向上させ、ユーザデバイスインタフェースをより効率的にし、加えて、ユーザがデバイスをより迅速且つ効率的に使用することを可能にすることによって、デバイスの電力使用を削減し、バッテリ寿命を改善する。いくつかの実施形態では、第1の時点の後の所定の期間内に表示された通知は、ノイズレベルが第1の時点の後に一定期間(例えば、15分)にわたって閾値を下回る場合には抑制されない。
いくつかの実施形態では、ノイズレベル通知(例えば、608D)は、第2の所定の期間に関連付けられた第4のアフォーダンス(例えば、646)を更に含み、電子デバイスは、第4のアフォーダンスに対応する入力を受信し、第4のアフォーダンスに対応する入力の受信に応答して、電子デバイスは、第2の所定の期間(例えば、1時間、1/2時間、日の残り)に対するノイズレベル通知の更なるインスタンスの表示を控える(例えば、表示を抑制する)。ユーザが電子デバイスにノイズレベル通知の更なるインスタンスを表示することを控えさせることを可能にするノイズレベル通知内に第4のアフォーダンスを提供することは、ユーザが電子デバイス上の更なるノイズレベル通知を迅速且つ容易に抑制することを可能にする。表示される追加コントローラによってUIを雑然とさせることなく、追加制御オプションを提供することにより、デバイスの操作性が高められ、ユーザデバイスインタフェースを(例えば、デバイスを操作する/デバイスと対話するときにユーザを適切な入力を付与するのを支援し、ユーザの誤りを減らすことによって)より効率的にし、加えて、ユーザがデバイスをより迅速且つ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
電子デバイスは、閾値ノイズレベル(例えば、80dB)を下回る第1のノイズレベル(例えば、電子デバイスのセンサからのデータ、外部電子デバイスからのデータ)に対応する第1のノイズレベルデータ(例えば、第1の期間にわたるノイズレベルに対応するノイズレベルデータ、第1の期間にわたる平均値、又は第1の期間にわたるノイズレベルを表す複数のデータポイント)(例えば、図6Cのノイズレベル「34DB」)を受信する(714)。いくつかの実施形態では、第1の期間にわたる第1のノイズレベルデータは、瞬時ノイズレベルを表す。
第1のノイズレベルデータの受信に応答して、電子デバイスは、第1のノイズデータ及び第1の色(例えば、緑色)に基づいて、第1のサイズ(例えば、ノイズレベルに比例するオブジェクトの全体サイズに対する、セグメントの数、長さ、又は面積)のアクティブ部分(例えば、外観に基づいて強調された又は視覚的に区別可能な部分)(例えば、622A、638A)を有するグラフィカルオブジェクト(例えば、622、638)を表示する(716)。いくつかの実施形態では、アクティブ部分は、グラフィカルオブジェクトの左端縁部から、グラフィカルオブジェクトの左端縁部と右端縁部との間の位置まで延在する。いくつかの実施形態では、グラフィカルオブジェクトは、アクティブ部分のサイズ以外の第1のノイズレベルデータの表示(例えば、数値、グラフの軸に沿った点又は線の位置)を含む。第1のノイズデータ及び第1の色に基づいて第1のサイズのアクティブ部分を有するグラフィカルオブジェクトを表示することは、容易に認識可能であり且つ理解可能なノイズ露出レベル情報をユーザに提供する。改善された視覚的フィードバックをユーザに提供することにより、デバイスの操作性を向上させ、(例えば、デバイスを操作する/デバイスと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザデバイスインタフェースをより効率的にし、加えて、ユーザがデバイスをより迅速且つ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
第1のユーザインタフェースの表示を維持している間に、電子デバイスは、第1のノイズレベルとは異なる第2のノイズレベルに対応する第2のノイズレベルデータを受信する(718)(例えば、第2のノイズレベルは、第1のノイズレベルよりも低いか又は第1のノイズレベルよりも高いかのいずれかである)(例えば、図6Eのノイズレベル「113DB」)。
第2のノイズレベルデータの受信に応答して(720)、電子デバイスは、第1のサイズとは異なる第2のノイズレベルに基づいて、第2のサイズでアクティブ部分を表示する(722)(例えば、アクティブ部分は、第1のノイズレベルと第2のノイズレベルとの間の差に対応して成長するか又は収縮する)(例えば、図6Dの638A)。第2のノイズレベルデータの受信に応答して第2のノイズレベルに基づいて第2サイズのアクティブ部分を表示することは、ユーザが、第1のノイズレベルデータ及び第2のノイズレベルデータに対応するノイズ露出レベル情報間を迅速且つ容易に視覚的に区別することを可能にする。改善された視覚的フィードバックをユーザに提供することにより、デバイスの操作性を向上させ、(例えば、デバイスを操作する/デバイスと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザデバイスインタフェースをより効率的にし、加えて、ユーザがデバイスをより迅速且つ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
第2のノイズレベルデータの受信に応答して(720)、第2のノイズレベルが閾値ノイズレベルを超える(例えば、ノイズレベルが80dB閾値を超えて増加した)との判定に従って、電子デバイスは、第1の色とは異なる第2の色(例えば、緑色から黄色への変化)でアクティブ部分(例えば、図6Dの638A)を表示する(724)。第2のノイズレベルが閾値ノイズレベルを超えるとの判定に従って、第1の色とは異なる第2の色でアクティブ部分を表示することは、ノイズ露出レベルが特定の閾値を超えた旨の視覚的フィードバックをユーザに提供する。改善された視覚的フィードバックをユーザに提供することにより、デバイスの操作性を向上させ、(例えば、デバイスを操作する/デバイスと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザデバイスインタフェースをより効率的にし、加えて、ユーザがデバイスをより迅速且つ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
第2のノイズレベルデータの受信に応答して(720)、第2のノイズレベルが閾値ノイズレベルを超えない(例えば、ノイズレベルが80dB閾値を下回ったままである)との判定に従って、電子デバイスは、第1の色のグラフィカルオブジェクトの表示を維持する(726)(例えば、緑色として維持する)。
いくつかの実施形態では、第2のサイズ及び第2の色(例えば、黄色)でアクティブ部分を有するグラフィカルオブジェクトを表示している間に、電子デバイスは、閾値ノイズレベルを下回る第3のノイズレベルに対応する第3のノイズレベルデータを受信する(728)(例えば、ノイズレベルは、80dB閾値を下回るまで減少している)。いくつかの実施形態では、第3のノイズレベルデータの受信に応答して、電子デバイスは、第2のサイズよりも小さい第3のノイズレベルデータに基づく第3のサイズでアクティブ部分を第1の色で表示する(730)(例えば、アクティブ部分は、第2のノイズレベルと第3のノイズレベルとの間の差に対応して収縮し、黄色から緑色へと変化する)(例えば、図6Fの638A)。第3のノイズレベルデータの受信に応答して、第3のノイズレベルに基づく第3の第2のサイズでアクティブ部分を表示することは、ユーザが、第1のノイズレベルデータ及び第2のノイズレベルデータに対応するノイズ露出レベル情報と第3のノイズレベルデータに対応するノイズ露出レベル情報との間を迅速且つ容易に視覚的に区別することを可能にする。改善された視覚的フィードバックをユーザに提供することにより、デバイスの操作性を向上させ、(例えば、デバイスを操作する/デバイスと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザデバイスインタフェースをより効率的にし、加えて、ユーザがデバイスをより迅速且つ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、グラフィカルオブジェクトは、第1の期間にわたるノイズレベル(例えば、0.1秒のウィンドウにわたるノイズレベルの平均)に基づいて変化し、第1のユーザインタフェースは、第1の期間とは異なる第2の期間にわたるノイズレベルに基づいて外観が変化する(例えば、1秒間のウィンドウにわたって平均化された)第2のグラフィカルオブジェクト(例えば、テキスト表示、グラフィカル表示)(例えば、620、624、636、640)を更に含む。
いくつかの実施形態では、第1のユーザインタフェースを表示することは、選択されたときに、現在のノイズレベル(例えば、第1の期間のノイズデータ又は第2の期間のノイズデータに基づく)が第2の閾値ノイズレベル(例えば、ユーザが選択した閾値)を下回るとの判定に従って、第2のユーザインタフェース(例えば、閾値ノイズレベルに関する情報を有するインタフェース)(例えば、640)を表示する第1のアフォーダンスを表示することを含む。いくつかの実施形態では、第1のアフォーダンスは、ノイズレベルが閾値を下回るとき、「OK」又はグラフィカル要素(例えば、チェックマーク)を含む(例えば、図6C、図6D、図6Gの640;図6L~図6Mの620)。いくつかの実施形態では、第1の閾値及び第2の閾値は同一である。
いくつかの実施形態では、第1のユーザインタフェースを表示することは、選択されたときに、現在のノイズレベルが第2の閾値ノイズレベルを超えるとの判定に従って、第3のユーザインタフェース(例えば、第2のユーザインタフェースと同じ;第1のユーザインタフェースとは異なり、閾値ノイズレベルに関する情報を有する)を表示する第1のアフォーダンスとは異なる第2のアフォーダンスを(例えば、第1のアフォーダンスを表示することなく)表示することを含む。いくつかの実施形態では、第1のアフォーダンスは、ノイズレベルが閾値以上であるとき、「大きい」又はグラフィカル要素(例えば、感嘆符)を含む。
いくつかの実施形態では、電子デバイスは、1つ以上のノイズセンサ(例えば、マイクロフォン又はマイクロフォンアレイなどの1つ以上の圧力感知デバイス)(例えば、606)を含み、第1のノイズレベルデータ及び第2のノイズレベルデータは、1つ以上のノイズセンサから受信される。いくつかの実施形態では、ディスプレイデバイス及び1つ以上のノイズセンサは、電子デバイスの共通筐体又は本体内に位置し、第1のノイズレベルデータ及び第2のノイズレベルデータは、電子デバイスが位置する物理的環境のノイズレベルを表す。
いくつかの実施形態では、第1のノイズレベルデータ及び第2のノイズレベルデータは、第1の電子デバイスとは異なる第2の電子デバイスから受信される(例えば、ノイズレベルデータは、UIを表示する電子デバイスの外部のデバイスからUIを表示する電子デバイスにおいて受信される)。
いくつかの実施形態では、第1のユーザインタフェースが表示されている間(例えば、608A、608C)、電子デバイスは、第1のサンプリングレートでノイズレベルデータをサンプリングする(例えば、第1のレートで新たなノイズレベルデータを受信する)。いくつかの実施形態では、第1のユーザインタフェースが表示されていない間(例えば、608B、608D、及び一般に図6H、図6P~図6S、図6AA~図6AIによって示されるように)、電子デバイスは、第1のサンプリングレートとは異なる第2のサンプリングレートでノイズレベルデータをサンプリングする。いくつかの実施形態では、第1のノイズレベルデータ及び第2のノイズレベルデータは、第1の時間間隔だけ離間される。第1のユーザインタフェースが表示されていない間、ノイズレベルデータは、第1の時間間隔よりも長い第2の時間間隔で受信される。いくつかの実施形態では、第2のサンプリングレートは、第1のサンプリングレートの20%である。第1のユーザインタフェースが表示されるときとは対照的に、第1のユーザインタフェースが表示されないとき、第1のサンプリングレートとは異なる第2のサンプリングレートでノイズレベルデータを自動的にサンプリングすることによって、電子デバイスは、電力使用を低減し、したがって、デバイスのバッテリ寿命を改善する。
方法700に関して上述したプロセス(例えば、図7A~図7B)の詳細はまた、以下で説明する方法にも、類似の方式で適用可能であることに留意されたい。例えば、方法1000は、方法700を参照して上述した様々な方法の特性のうちの1つ以上を任意選択的に含む。例えば、方法1000に記載されている出力デバイスのうちの1つ以上に対応するノイズ露出レベルに関する情報は、ノイズ露出レベルに基づいて外観が変化する上述したグラフィカル表示(例えば、グラフィカルオブジェクト)を使用してユーザに提示又は提供されることができる。簡潔にするために、これらの詳細は、以下で繰り返さない。
図8A~図8Lは、環境ノイズ露出データ(例えば、様々な音強度でのノイズへのデバイスユーザの露出を表すデータのセット)にアクセスして表示するための、ディスプレイ802上にユーザインタフェース(例えば、ユーザインタフェース808A~808F)を表示するデバイス800を示す。いくつかの実施形態では、環境ノイズ露出データは、デバイス800のセンサから、又は外部デバイス(例えば、上記のデバイス600)からデバイス800で受信される。いくつかの実施形態では、環境ノイズ露出データは、デバイスユーザによって(例えば、デバイス800によって検出された一連のユーザ入力を介して)手動で入力される。
図8A及び図8Bは、環境ノイズデータにアクセスするための健康アプリケーション内のユーザインタフェースを示す。図8A及び図8Bは、環境オーディオレベルアフォーダンス804A及び804Bにおいてそれぞれ入力(例えば、806A及び806B)を受信するデバイス800を示す。これらの入力を検出すると、デバイス800は、図8Cに示すように、データ閲覧インタフェース808Cを表示する。
図8C~図8Iは、ユーザインタフェース808Cを介して記憶された環境ノイズデータを表示及び操作するための様々な技術を示す。図8C~図8Iに示されるように、ユーザインタフェース808Cは、環境ノイズ露出データ(例えば、デバイス800に関連付けられたユーザが露出されたノイズの振幅又はレベル)を選択可能期間(例えば、日、週、月、年)にわたって表示するチャート805を含む。
図8C~図8Dに示されるように、チャート805上の特定の期間(例えば、週の日)に関連付けられた環境ノイズ露出データが(例えば、ユーザ入力806Cを介して)選択される。選択に応答して、ユーザインタフェース808Cは、選択された環境ノイズ露出データ(例えば、詳細アフォーダンス812)に関する追加情報を表示する。選択に応答して、デバイスはまた、詳細アフォーダンス812によって表示される情報に対応するデータの視覚的表示を提供するために、選択された環境ノイズ露出データに対応するチャート805上の場所にデータオーバーレイ810を表示する。
図8C~図8Iに示されるように、ユーザインタフェース808Cは、チャート805によって表示されるデータを操作するための様々なアフォーダンス(例えば、平均アフォーダンス814、毎日平均アフォーダンス820、範囲アフォーダンス822、通知アフォーダンス826)を含む。図8D~図8Eに示されるように、平均アフォーダンス814におけるユーザ入力806Dの受信に応答して、デバイス800は、平均オーバーレイ810B(例えば、表示された期間にわたって計算された平均環境ノイズ露出レベルに対する視覚基準)を表示する。図8E~図8Fに示されるように、デバイス800は、平均オーバーレイ810Bの選択(例えば、ユーザ入力806E)の検出に応答して、平均詳細アフォーダンス818を表示する。図8F~図8Gに示されるように、デバイス800は、平均オーバーレイ810Bの選択(例えば、ユーザ入力806E)の検出に応答して、平均詳細アフォーダンス818を表示する。図8F~図8Gによって示されるように、毎日平均アフォーダンス820におけるユーザ入力806Fの受信に応答して、デバイス800は、毎日平均オーバーレイ810C(例えば、毎日計算した平均環境ノイズ露出レベルに対する視覚的基準)を表示する。いくつかの実施形態では、デバイス800は、(例えば、平均オーバーレイ810Bによって示されるような)平均ノイズ露出レベルが閾値レベル(例えば、80DB)を超えるとの判定に応答して、ノイズ分類アフォーダンス816(図8Eに示すように)を表示する。いくつかの実施形態では、(例えば、平均オーバーレイ810Bによって示されるような)平均ノイズ露出レベルが閾値レベル(例えば、80DB)を下回るとの判定に応答して、デバイスは、異なる外観を有するノイズ分類アフォーダンス816を表示する(例えば、アフォーダンスは、図6A~図6Oに関して上述したノイズ状態アフォーダンス620又はノイズ状態インジケータ640と同様に挙動する)。
図8G~図8Hによって示されるように、範囲アフォーダンス822におけるユーザ入力806Gの受信に応答して、デバイス800は、最大レベルインジケータ824A及び最小レベルインジケータ824B(例えば、チャート805上の表示された環境ノイズレベルデータ内の最も高いノイズ露出レベル及び最低ノイズ露出レベルへの視覚的基準)を表示する。
図8H~図8Gによって示されるように、通知アフォーダンス826におけるユーザ入力806Hの受信に応答して、デバイス800は、デバイス800(又はデバイス600などのデバイス800に結合されたデバイス)にノイズ通知インタフェース(例えば、図6Iのノイズ通知ユーザインタフェース608D)を表示させる環境ノイズ露出レベルを視覚的に強調することによって(例えば、1つ以上の視覚的特性を変化させることによって)、チャート805に表示された環境ノイズレベルデータを更新する。
図8J~図8Kは、デバイス800上のノイズ測定を有効化及び無効化するためのユーザインタフェースを示す。いくつかの実施形態では、デバイス800の外部のデバイス(例えば、上述したユーザインタフェースを介して表示するための環境ノイズ露出データを取得するために使用されるデバイス)上での測定は、外部のデバイス上の他の特徴(例えば、手首検出)を無効化することに応答して、オフ又は非アクティブ化されてもよい。
図9A~図9Gは、いくつかの実施形態に係る、ノイズレベル(例えば、メディアデバイスからのノイズへの露出)を監視するための例示的なユーザインタフェースを示す。これらの図のユーザインタフェースは、図10のプロセスを含む後述のプロセスを例示するために使用される。
図9Aは、ディスプレイ902上にユーザインタフェース904Aを表示するデバイス900を示す。図9Aに示すように、ユーザインタフェース904Aは、7日間の期間にわたる毎日のオーディオ振幅値のセット(例えば、接続されたオーディオ出力デバイスの使用に起因してデバイス900のユーザが経験する音レベルの範囲に対応する)を示すチャート906を含む。いくつかの実施形態では、オーディオ振幅値は、デバイス900の出力ボリューム設定に基づいて判定される(例えば、オーディオレベルは、マイクロフォンを介して測定されない)。いくつかの実施形態では、既知の出力デバイス応答(例えば、感度、周波数応答)に基づいて、オーディオ振幅値(例えば、デバイスの使用による音露出のレベル)が推定又は外挿される。図9Aに示すように、チャート905は、接続されたオーディオ出力デバイスの使用により、デバイス900のユーザが経験する最も高いオーディオ振幅レベル及び最も低いオーディオ振幅レベルを表す最大表示908及び最小表示910を含む。
図9Aに示すように、平均アフォーダンス914は、選択された状態で表示される(例えば、ユーザ入力を介して以前に選択されたか、又はユーザインタフェース904Aの表示時にデフォルトで選択された)。平均アフォーダンス914は、表示されたオーディオ振幅値のセットにわたる平均オーディオレベルを示す値を含む(例えば、「77DB」)。
チャート905は、平均アフォーダンス914(例えば、オーバーレイ912)によって示される平均オーディオレベルに対応するオーバーレイ線を含む。いくつかの実施形態では、平均オーディオレベルは、表示されたデータの平均ではなく、むしろ、基礎となるデータの時間軸平均(例えば、チャート905のデータによって示される各レベル(例えば、音圧レベル)にユーザがどのくらい露出されたかに基づく平均)である。いくつかの実施形態では、チャート905によって示されるデータは、デバイスユーザが、1日又は他の期間(例えば、時間、週、年、月)にわたって露出されたオーディオ振幅レベルを表す。図9Aに示すように、ユーザインタフェース904Aは、閾値(例えば、所定の80DB閾値)に対する平均オーディオレベルの非数字表示(例えば、グラフィック及び/又はテキストを含む表示)を提供するオーディオ分類インジケータ922を含む。図9Aに示すように、オーディオ分類インジケータ922は、平均オーディオレベル(例えば、77DB)が「OK」及びチェックマークグラフィックを有する80DB閾値を下回ることを示す。
図9Aに示すように、ユーザインタフェース904Aは、各デバイスタイプに起因するグラフ905内のデータを強調する(例えば、図9Aのチャート905に含まれる毎日のオーディオ振幅値のセットのサブセットを強調する)ためのデバイスタイプフィルタリングアフォーダンス(例えば、特定の種類のデバイスに関連付けられたアフォーダンス)を含む。各デバイスタイプフィルタリングアフォーダンス(例えば、イヤホンフィルタリングアフォーダンス916、ヘッドフォンフィルタリングアフォーダンス918、未較正デバイスアフォーダンス920)は、それぞれのデバイスタイプのデバイスを使用することにより、デバイス900のユーザが経験する最も高いオーディオ振幅レベル及び最も低いオーディオ振幅レベルを表す関連付けられた範囲を含む。いくつかの実施形態では、デバイスタイプは、単一のデバイスに対応する。いくつかの実施形態では、単一のデバイスは、接続されたデバイスのペア(例えば、左及び右)を含む。
図9Aは、未較正デバイスアフォーダンス920上でユーザ入力906A(例えば、タップ)を受信するデバイス900を示す。ユーザ入力906Aの受信に応答して、デバイス900は、ユーザインタフェース904Bを表示する。図9Bに示すように、未較正デバイスアフォーダンス920は、デバイス900に結合された(例えば、無線で又は物理的に)オーディオ出力デバイスにそれぞれ対応する、ブルートゥースイヤホンアフォーダンス924及び一般的なヘッドフォンアフォーダンス926によって置き換えられている(例えば、オーディオ出力デバイスは、デバイス1100によって生成されたアナログ又はデジタルオーディオ信号を受信し、それらを音響出力に変換する)。
図9Bは、イヤホンアフォーダンス916上でユーザ入力906B(例えば、タップ)を受信するデバイス900を示す。ユーザ入力906Bの受信に応答して、デバイス900は、図9Cに示すように、ユーザインタフェース904C(例えば、イヤホン型出力デバイスに関連付けられたオーディオレベルデータを強調するインタフェース)を表示する。いくつかの実施形態では、イヤホン型出力デバイスは、較正されたデバイス(例えば、既知の周波数応答を有するデバイス)である。
図9Cに示すように、ユーザインタフェース904Cは、イヤホンアフォーダンス916に関連付けられた1つ以上の出力デバイスに起因するオーディオレベルデータを強調する。例えば、選択されたデバイスタイプフィルタ(例えば、イヤホン型デバイス)に対応するデバイスに起因するデータポイントのセット(例えば、オーディオ露出レベルデータの範囲)は、選択されたデバイスタイプフィルタ(例えば、イヤホン型デバイス)に対応するデバイスに起因しないデータから(例えば、色、色相、彩度、テクスチャなどの視覚的特性を変化させることによって)視覚的に区別される。図9Cに示すように、イヤホン型デバイスに起因するデータは、チャート905上の黒色データポイントに対応する。いくつかの実施形態では、データ(例えば、第1のデバイスタイプに起因する露出レベルのセット)を視覚的に区別することは、1つ以上の視覚的特性(例えば、輝度、不透明度、色、コントラスト、色相、彩度)を変化させることによって、第2のデバイスタイプに起因するノイズ露出レベルを抑制することを含む。
ユーザ入力906Cに応答してオーディオデータを強調することに加えて、デバイス900は、ノイズ振幅値の強調されたセットに基づいて平均オーディオレベル(例えば、72DB)(例えば、イヤホンデバイスタイプに起因する平均オーディオレベル)を示すようにオーバーレイ912を更新する。
図9Cは、ヘッドフォンアフォーダンス918上でユーザ入力906C(例えば、タップ)を受信するデバイス900を示す。ユーザ入力906Cの受信に応答して、デバイス900は、図9Dに示すように、ユーザインタフェース904D(例えば、ヘッドフォン型出力デバイスに関連付けられたノイズレベルデータを強調するインタフェース)を表示する。いくつかの実施形態では、ヘッドフォン型出力デバイスは、較正されたデバイス(例えば、既知の周波数応答を有するデバイス)である。
図9Dに示すように、ユーザインタフェース904Dは、ヘッドフォンアフォーダンス918に関連付けられた1つ以上の出力デバイスに起因するオーディオレベルデータを強調する。例えば、選択されたデバイスタイプフィルタ(例えば、ヘッドフォン型デバイス)に対応するデバイスに起因するデータポイントのセット(例えば、オーディオ露出レベルデータの範囲)は、選択されたデバイスタイプフィルタ(例えば、ヘッドフォン型デバイス)に対応するデバイスに起因しないデータから(例えば、色、色相、彩度、テクスチャなどの視覚的特性を変化させることによって)視覚的に区別される。図9Dに示すように、ヘッドフォン型デバイスに起因するデータは、チャート905上の黒色データポイントに対応する。ユーザ入力906Dに応答してオーディオデータを強調することに加えて、デバイス900は、ノイズ振幅値の強調されたセットに基づいて平均オーディオレベル(例えば、90DB)(例えば、ヘッドフォンデバイスタイプに起因する平均オーディオレベル)を示すようにオーバーレイ912を更新する。デバイス900はまた、平均オーディオレベル(例えば、90DB)が「大きい」及び注意的グラフィックを有する80DB閾値を超えたことを示すようにオーディオ分類インジケータ922を更新した。
図9Dは、一般的なヘッドフォンアフォーダンス926上でユーザ入力906D(例えば、タップ)を受信するデバイス900を示す。ユーザ入力906Dの受信に応答して、デバイス900は、図9Eに示すように、ユーザインタフェース904E(例えば、警告プロンプトインタフェース)を表示する。ユーザインタフェース904Eは、未較正デバイスに基づくオーディオレベルが正確でなくてもよいことをユーザに知らせる。例えば、デバイス900は、所与の出力デバイスの応答(例えば、ヘッドフォン周波数応答曲線)を特徴付けるデータなしに、オーディオ露出レベルを正確に外挿することができない。
図9Eは、確認応答アフォーダンス(例えば、「OK」)上でユーザ入力906E(例えば、タップ)を受信するデバイス900を示す。ユーザ入力906Eの受信に応答して、デバイス900は、図9Fに示すように、ユーザインタフェース904F(例えば、ノイズレベルデータに関連付けられた一般的なヘッドフォン型出力デバイスを強調するインタフェース)を表示する。
図9Fに示すように、ユーザインタフェース904Fは、一般的なヘッドフォンアフォーダンス926に関連付けられた1つ以上の出力デバイスに起因するオーディオレベルデータを強調する。例えば、選択されたデバイスタイプフィルタ(例えば、一般的なヘッドフォン型デバイス)に対応するデバイスに起因するデータポイントのセット(例えば、オーディオ露出レベルデータの範囲)は、選択されたデバイスタイプフィルタ(例えば、一般的なヘッドフォン型デバイス)に対応するデバイスに起因しないデータから(例えば、色、色相、彩度、テクスチャなどの視覚的特性を変化させることによって)視覚的に区別される。図9Eに示すように、一般的なヘッドフォン型デバイスに起因するデータは、チャート905上の黒色データポイントに対応する。ユーザ入力906Eに応答してオーディオデータを強調することに加えて、デバイス900は、ノイズ振幅値の強調されたセット(例えば、一般的なヘッドフォンデバイスタイプに起因する平均オーディオレベル)に基づいて平均オーディオレベル(例えば、85DB)を示すようにオーバーレイ912を更新する。
図9Fは、時刻スケールアフォーダンス928上でユーザ入力906F(例えば、タップ)を受信するデバイス900を示す。ユーザ入力906Eの受信に応答して、デバイス900は、図9Fに示すように、ユーザインタフェース904G(例えば、ある期間にわたって、ノイズレベルデータに関連付けられた一般的なヘッドフォン型出力デバイスを強調するインタフェース)を表示する。
図9Fに示すように、ユーザ入力906Eの受信に応答して、デバイスは、5月22日土曜日に対応するオーディオレベルデータ(例えば、図9A~図9Fにわたって表示される7日間の期間の中央日)を表示する。いくつかの実施形態では、中央日以外の日に対応するオーディオ露出レベル(例えば、現在のオーディオ露出レベル)は、チャート905によって表示される。
図9Gに示すように、ユーザインタフェース904Gは、24時間の期間(例えば、日)にわたって、一般的なヘッドフォンアフォーダンス926に関連付けられた1つ以上の出力デバイスに起因するオーディオレベルデータを強調する。例えば、選択されたデバイスタイプフィルタ(例えば、一般的なヘッドフォン型デバイス)に対応するデバイスに起因するデータポイントのセット(例えば、オーディオ露出レベルデータの範囲)は、選択されたデバイスタイプフィルタ(例えば、一般的なヘッドフォン型デバイス)に対応するデバイスに起因しないデータから(例えば、色、色相、彩度、テクスチャなどの視覚的特性を変化させることによって)視覚的に区別される。図9Gに示すように、一般的なヘッドフォン型デバイスに起因するデータは、チャート905上の黒色データポイントに対応する。ユーザ入力906Fに応答して、異なる時間期間の強調されたオーディオデータを表示することに加えて、デバイス900は、表示された24時間の期間内のノイズ振幅値の強調されたセット(例えば、一般的なヘッドフォンデバイスタイプに起因する平均オーディオレベル)に基づいて、オーディオレベル(例えば、85DB)を示すように、最大表示908、最小表示910、オーバーレイ912、平均アフォーダンス914、イヤホンフィルタリングアフォーダンス916、ヘッドフォンフィルタリングアフォーダンス918、一般的なヘッドフォンフィルタリングアフォーダンス920、及びオーディオレベル分類922を更新する。例えば、平均アフォーダンス914は、68DBの毎日平均オーディオレベルを示すように更新される(例えば、図9A~図9Fに示すように、85DBの毎週平均オーディオレベルと比較して)。
図10は、いくつかの実施形態に係る、電子デバイスを使用してノイズ露出レベルを監視するための方法を示すフロー図である。方法1000は、ディスプレイデバイス及びタッチ感知面を有する電子デバイス(例えば、100、300、500、600、601、800、900、1100、1200、1400、1401、及び1700)で実行される。方法1000のいくつかの動作は、任意選択的に組み合わされ、いくつかの動作の順序は、任意選択的に変更され、いくつかの動作は、任意選択的に省略される。
いくつかの実施形態では、電子デバイス(例えば、100、300、500、600、601、800、900、1100、1200、1400、1401、及び1700)は、コンピュータシステムである。コンピュータシステムは、任意選択的に、ディスプレイ生成構成要素と1つ以上の入力デバイスとの通信(例えば、有線通信、無線通信)である。ディスプレイ生成構成要素は、CRTディスプレイを介したディスプレイ、LEDディスプレイを介したディスプレイ、又は画像投影を介した表示などの視覚的な出力を提供するように構成されている。いくつかの実施形態では、ディスプレイ生成構成要素は、コンピュータシステムと一体化される。いくつかの実施形態では、ディスプレイ生成構成要素は、コンピュータシステムとは別個である。1つ以上の入力デバイスは、ユーザ入力を受けるタッチ感知面など、入力を受け取るように構成される。いくつかの実施形態では、1つ以上の入力デバイスは、コンピュータシステムと一体化される。いくつかの実施形態では、1つ以上の入力デバイスは、コンピュータシステムとは別個である。したがって、コンピュータシステムは、有線又は無線接続を介して、データ(例えば、画像データ又はビデオデータ)を、一体型又は外部のディスプレイ生成構成要素に送信して、(例えば、ディスプレイデバイスを使用して)コンテンツを視覚的に生成することができ、1つ以上の入力デバイスからの入力を、有線又は無線接続で受信することができる。
後述するように、方法700は、ノイズ露出レベルを管理するための直感的方法を提供する。この方法は、ノイズ露出レベルを監視する際のユーザの認知的負担を軽減し、それによって、より効率的なヒューマン-マシンインタフェースを作り出す。バッテリ動作式コンピューティングデバイスの場合、ユーザがノイズ露出レベルをより高速且つ効率的に監視することができるようにすることで、電力を節約し、バッテリ充電間の時間を延ばす。
電子デバイスは、第1のデバイスタイプ(例えば、ポート(例えば、ヘッドフォンジャック)を介して電子デバイスに接続された有線ヘッドフォン又は未較正無線ヘッドフォンなどの未較正デバイス)に起因する第1のノイズレベルデータを受信する(1002)。電子デバイスは、第1のデバイスタイプとは異なる第2のデバイスタイプ(例えば、較正された無線ヘッドフォンなどの較正されたデバイス)に起因する第2のノイズレベルデータを受信する(1002)。いくつかの実施形態では、電子デバイスは、電子デバイスによって第1のタイプの出力デバイスに送信された1つ以上の出力信号(例えば、電圧、デジタルオーディオデータ)に基づいて、第1及び第2のノイズレベルデータを識別する。
電子デバイスは、ディスプレイデバイス(例えば、902)を介して、第1のユーザインタフェース(例えば、904A)を表示する(1004)。いくつかの実施形態では、第1のユーザインタフェースは、ユーザ要求(例えば、健康アプリの検索特徴又は健康アプリのタブを発見する通知を介してノイズアプリケーションのUIを閲覧する要求)に応答して表示される。第1のユーザインタフェースは、第1のノイズレベルデータ及び第2のノイズレベルデータに基づく受信ノイズレベルデータの第1の表現を含む(例えば、第1及び第2のノイズレベルデータのそれぞれについての組み合わせデータを示す又は別個のデータを同時に示すグラフ)(1006)(例えば、図9Aの905)。第1のユーザインタフェースは、第1のデバイスタイプデータフィルタリングアフォーダンスを含む(1008)(例えば、916)。(例えば、グラフとして)第1のユーザインタフェースにおいて第1のノイズレベルデータ及び第2のノイズレベルデータに基づく受信ノイズレベルデータの第1の表現を含むことは、ノイズレベルデータをユーザに容易に理解可能且つ認識可能な方法で視覚的に知らせる。改善された視覚的フィードバックをユーザに提供することにより、デバイスの操作性を向上させ、(例えば、デバイスを操作する/デバイスと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザデバイスインタフェースをより効率的にし、加えて、ユーザがデバイスをより迅速且つ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
第1のユーザインタフェースを表示している間に、電子デバイスは、第1のデバイスタイプデータフィルタリングアフォーダンス(例えば、916、918、926)の選択に対応する第1のユーザ入力を検出する(1012)。
第1のユーザ入力の検出に応答して、電子デバイスは、第2のノイズレベルデータに基づき且つ第1のノイズレベルデータに基づかない受信ノイズレベルデータの第2の表現を表示する(1014)(例えば、第1の表現におけるノイズレベルデータの描写と比較して、較正されたデバイスからのノイズレベルデータを強調する第2の表現(例えば、別個のグラフ、第1の表現上の視覚的強調))(例えば、図9C~図9D、図9F、及び図9Gの905)。第1のユーザ入力の検出に応答して、第2のノイズレベルデータに基づき且つ第1のノイズレベルデータに基づかない受信ノイズレベルデータの第2の表現を(例えば、別個のグラフとして)表示することは、ユーザが、第2のノイズレベルデータに対応する情報をより容易に見ることを可能にする。改善された視覚的フィードバックをユーザに提供することにより、デバイスの操作性を向上させ、(例えば、デバイスを操作する/デバイスと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザデバイスインタフェースをより効率的にし、加えて、ユーザがデバイスをより迅速且つ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、受信ノイズレベルデータの第2の表現を表示することの一部として、電子デバイスは、受信ノイズレベルデータの第1の表現を維持する(1016)(例えば、図9C及び図9D~図9Gの905)。いくつかの実施形態では、受信ノイズレベルデータの第2の表現は、受信ノイズレベルデータの第1の表現と視覚的に区別される(例えば、図9C及び図9D~図9Gの905)。いくつかの実施形態では、データ(例えば、第2の出力デバイスタイプに起因する露出レベルのセット)を視覚的に区別することは、1つ以上の視覚的特性(例えば、輝度、不透明度、色、コントラスト、色相、彩度)を変化させることによって、第1のデバイスタイプデータに起因するノイズ露出レベルを抑制することを含む(例えば、図9C及び図9D~図9Gの905)。いくつかの実施形態では、データを視覚的に区別することは、1つ以上の視覚的特性(例えば、輝度、不透明度、色、コントラスト、色相、彩度)を変化させることによって、第2のデバイスタイプに起因するノイズ露出レベルを強調することを含む(例えば、図9C及び図9D~図9Gの905)。
いくつかの実施形態では、第2のノイズレベルデータは、単一のデバイスに起因するノイズレベルデータに対応する。いくつかの実施形態では、単一のデバイスは、一対のリンクされたデバイス(例えば、無線でリンクされた左及び右ヘッドフォン)を含む。
いくつかの実施形態では、第1のノイズレベルデータは、複数のデバイス(例えば、複数のリンクされたデバイスのセット(例えば、リンクされた無線ヘッドフォンのペア))に起因するノイズレベルデータに対応する。
いくつかの実施形態では、第2のノイズレベルデータは、第3のデバイスタイプに起因する第3のノイズレベルデータ(例えば、追加の較正されたデバイスからのデータ)を含む。いくつかの実施形態では、第1のユーザインタフェースは、第3のノイズレベルデータに対応する第2のデバイスタイプフィルタリングアフォーダンス(例えば、第1の較正されたデバイスアフォーダンスに追加する追加の較正されたデバイスアフォーダンス)(例えば、918)を含む。いくつかの実施形態では、第1のユーザインタフェース(例えば、904C)を表示している間に、電子デバイスは、第2のデバイスタイプフィルタリングアフォーダンス(例えば、906C)の選択に対応するユーザ入力を検出する。いくつかの実施形態では、第2のデバイスタイプフィルタリングアフォーダンスの選択に対応するユーザ入力の検出に応答して、電子デバイスは、第3のノイズレベルデータの第3の表現を表示する(例えば、図6Dの905)。第3のノイズレベルデータの第3の表現を表示することは、ユーザが、第3のノイズレベルデータに対応する情報をより容易に閲覧して理解することを可能にする。改善された視覚的フィードバックをユーザに提供することにより、デバイスの操作性を向上させ、(例えば、デバイスを操作する/デバイスと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザデバイスインタフェースをより効率的にし、加えて、ユーザがデバイスをより迅速且つ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、第1のユーザインタフェースは、第1のユーザ入力を検出する前に、第1の期間(例えば、日、週)の第1のノイズレベルデータ及び第2のノイズレベルデータに対応する平均ノイズ露出レベルを示す平均ノイズ露出レベルインジケータ(例えば、912、914)を含む(1010)。いくつかの実施形態では、平均ノイズレベルインジケータは、チェックマーク又は感嘆符、「大きい」又は「OK」(例えば、922)を含む。いくつかの実施形態では、平均ノイズレベルインジケータは、オーバーレイ線(例えば、912)、テキスト説明、又はアイコン(例えば、922)である。平均ノイズ露出レベルを示す平均ノイズ露出レベルインジケータを提供することは、ノイズ露出レベル全体を理解するために、単純且つ容易に認識可能なメトリックをユーザに提供する。改善された視覚的フィードバックをユーザに提供することにより、デバイスの操作性を向上させ、(例えば、デバイスを操作する/デバイスと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザデバイスインタフェースをより効率的にし、加えて、ユーザがデバイスをより迅速且つ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、第1のデバイスタイプフィルタリングアフォーダンス(例えば、916)の選択に対応するユーザ入力の検出に応答して、電子デバイスは、第2のノイズレベルデータに対応する平均ノイズレベルを示すように平均ノイズ露出レベルインジケータを更新する(1018)(例えば、第1のノイズレベルデータに対応しない)(例えば、第2のデバイスタイプに関連付けられた較正されたデータのみに基づく平均を示す)(例えば、図9B~図9Cの912)。
いくつかの実施形態では、第2のノイズレベルデータは、少なくとも部分的に、電子デバイスから第2のタイプの1つ以上のデバイスに送信される1つ以上の信号に基づいている(例えば、ノイズレベルは、着信信号又はデータ(例えば、マイクロフォンを介して測定されたオーディオレベル)に基づいていない)。いくつかの実施形態では、ノイズレベルは、ボリューム設定(例えば、100%のボリューム)及び既知の出力デバイス応答(例えば、再生されている特定の信号に対して100%での第1のタイプ出力87dBのヘッドフォン)に基づいて推定される。
いくつかの実施形態では、受信ノイズレベルデータの第1の表現は、第2の期間(例えば、日、週)のノイズレベルデータ(例えば、908)の最大値及びノイズレベルデータの最小値(例えば、組み合わせられた第1のノイズレベルデータ及び第2のノイズレベルデータ内の最も高いノイズレベル及び最も低いノイズレベルを表す値)の指標(例えば、910)を含む。いくつかの実施形態では、第1の表現は、最大ノイズレベル値及び最小ノイズレベル値の2対以上を含む(例えば、週内の各日の最大値及び最小値)。
方法1000に関して上述したプロセス(例えば、図10)の詳細はまた、上述した方法にも類似の方式で適用可能であることに留意されたい。例えば、方法700は、方法1000を参照して上述した様々な方法の特性のうちの1つ以上を任意選択的に含む。例えば、方法700において上述したように、ノイズ露出レベルに基づいて外観が変化するグラフィカル表示(例えば、グラフィカルオブジェクト)が使用されて、1つ以上の出力デバイスに対応するノイズ露出レベル情報を表示することができる。簡潔にするために、これらの詳細は、以下で繰り返さない。
図11A~図11Fは、聴力図データ(例えば、様々な音周波数での聴力を表すデータのセット)にアクセスして表示するためのユーザインタフェース(例えば、1104A~1104F)を示す。いくつかの実施形態では、聴力図データは、第三者アプリケーションからデバイス1100で受信される。いくつかの実施形態では、聴力図データは、デバイスユーザによって手動で入力される(例えば、デバイス1100によって検出された一連のユーザ入力を介して)。例えば、図11A及び図11Bは、聴力図ノイズデータにアクセスするための健康アプリケーション内のユーザインタフェースを示す。図11C~図11Dは、聴力図データを表示し、データの部分(例えば、左側又は右側に関連付けられた部分)を選択又は視覚的に強調するための技術を示す。
図11G~図11Lは、デバイス1100のオーディオ出力(例えば、接続されたヘッドフォン、統合ヘッドセット又はスピーカ、外部スピーカ、及び他のメディア再生デバイスなどのデバイス1100に関連付けられたデバイスを介して出力する)をパーソナライズするために聴力図を使用するための一連のユーザインタフェース(例えば、1104G~1104L)を示す。例えば、図11Hは、記憶された聴力図データによって補われたA-B試験プロセス聴覚試験を介して聴覚プロファイルを作成するための技術を示す。いくつかの実施形態では、聴力図データを利用することは、聴覚プロファイルを作成するプロセスを短縮するか、又は聴力図データを活用しない調整プロセスと比較してプロファイルの精度を改善する。
図12A~図12ANは、いくつかの実施形態に係る、ユーザの好みに基づいてオーディオ設定をカスタマイズする例示的なユーザインタフェースを示す。これらの図のユーザインタフェースは、図13のプロセスを含む後述のプロセスを例示するために使用される。
図12A~図12ANは、ユーザの好みに基づいてオーディオ設定をカスタマイズするためのディスプレイ1202(例えば、ディスプレイデバイス又はディスプレイ生成構成要素)上にユーザインタフェースを表示するデバイス1200を示す。いくつかの実施形態では、デバイス1200は、デバイス800、デバイス900、及びデバイス1100と同じである。いくつかの実施形態では、デバイス1200は、デバイス100、300、又は500の1つ以上の特徴を含む。
図12A~図12Cは、それぞれ、図12A及び図12Bの入力1204及び入力1206の検出に応答して、図12Cのヘッドフォンオーディオ設定インタフェース1205にアクセスするための例示的なユーザインタフェースを示す。
図12Cでは、デバイス1200は、ディスプレイ1202を介して、選択された標準オーディオ設定オプション1208と共に示されるヘッドフォンオーディオ設定インタフェース1205を表示する。したがって、デバイス1200は、現在、1つ以上の接続されたヘッドフォンデバイスに、標準(例えば、カスタマイズされていない)オーディオ設定を適用する。ヘッドフォンオーディオ設定インタフェース1205はまた、カスタムオーディオ設定オプション1210及びカスタムオーディオセットアップオプション1212を含む。カスタムオーディオ設定オプション1210は、接続されたヘッドフォンデバイスのためのカスタムオーディオ設定を手動で設定するように選択可能であり、カスタムオーディオセットアップオプション1212は、カスタマイズされたオーディオ設定を構成するための誘導されたプロセスを開始するように選択可能である。
図12Cでは、デバイス1200は、ディスプレイ1202を介して、カスタムオーディオ設定オプション1210上の入力1213(例えば、タップジェスチャ)を検出し、それに応答して、カスタムオーディオ設定オプション1210を選択し、図12Dに示されるように、カスタマイズオプション1214を表示する。カスタムオーディオ設定オプション1210が選択されると、デバイス1200は、1つ以上の接続されたヘッドフォンデバイスに対してカスタマイズされたオーディオ設定を適用する。いくつかの実施形態では、カスタマイズされたオーディオ設定は、カスタマイズオプション1214に示される設定に基づいて決定される。
図12Dでは、カスタマイズオプション1214は、選択されることができるオーディオオプションのセット1215を含み、いくつかの実施形態では、スライダ1216を使用して個別に調整(例えば、カスタマイズ)されて、それぞれのオーディオオプション毎にブーストレベルを選択する。いくつかの実施形態では、各選択されたオーディオオプションのブースト値は、スライダ1216を調整することによって、僅か1216-1,中度1216-2、及び強い1216-3の間で調整されることができる。いくつかの実施形態では、オーディオオプション1215は、聴力検査試験の結果(例えば、聴力図)に基づいて、カスタマイズされたオーディオ設定に対応するオプションを含むことができる。そのような実施形態では、聴力図の設定は、カスタマイズオプション1214を使用して変更されることができず、その結果、聴力図オプションが選択されると、スライダ1216は表示されない。聴力図オプションは、以下により詳細に記載される。
図12Dでは、オーディオオプションのセットは、バランストーンオプション1215-1、音声明瞭性オプション1215-2、及び明るさオプション1215-3を含む。いくつかの実施形態では、バランストーンオプション1215-1は、(例えば、スライダ1216を使用して)周波数範囲のブーストレベル(例えば、20Hz~20KHzの範囲の周波数の階調バランス)をカスタマイズするように選択されることができる。いくつかの実施形態では、バランストーンオプション1215-1のカスタム設定(例えば、ブーストレベル)は、接続されたヘッドフォンデバイスの全ての周波数にわたって適用される。いくつかの実施形態では、音声明瞭性オプション1215-2は、例えば、2KHz~8KHzの範囲などの、ダイアログに使用される周波数のブーストレベルをカスタマイズするように選択されることができる。いくつかの実施形態では、明るさオプション1215-2は、例えば、2KHz~20KHzの範囲などの高周波数のブーストレベルをカスタマイズするように選択されることができる。
図12D~図12Fに示されるように、オーディオオプション1215のそれぞれが選択されることができ、それに応答して、デバイス1200は、選択されたオプションのための現在のブーストレベルを有するスライダ1216を表示する。例えば、図12Dでは、バランストーンオプション1215-1が選択され、スライダ1216は、バランストーンのブースト値が僅か1216-1に設定されていることを示す。バランストーンオプション1215-1のブースト値は、スライダ1216を使用して調整されることができる。
図12Eでは、デバイス1200は、(図12Dの入力1218に応答して)選択された音声明瞭性オプション1215-2を表示し、スライダ1216は、音声明瞭性のための現在のブースト値が僅か1216-1に設定されていることを示す。音声明瞭性オプション1215-2のブースト値は、スライダ1216を使用して調整されることができる。
図12Fでは、デバイス1200は、(図12Dの入力1220に応答して)選択された明るさオプション1215-3を表示し、スライダ1216は、明るさの現在のブースト値が僅か1216-1に設定されていることを示す。明るさオプション1215-3のブースト値は、スライダ1216を使用して調整されることができる。
いくつかの実施形態では、スライダ1216は、ヘッドフォンオーディオ設定インタフェース1205に示されているものとは異なる外観を有することができる。例えば、スライダ1216は、「なし」、「非常に僅か」、又は「非常に強い」、又は「僅か」と「中度」との間、及び「中度」と「強い」との間の中間位置などの追加の設定位置を有することができる。いくつかの実施形態では、スライダ1216は、値の範囲を設定する能力を含むように変更されることができる。例えば、スライダ1216は、範囲の高端及び範囲の下端を設定するための2つのノッチを有することができる。加えて、いくつかの実施形態では、スライダ1216は、例えば、値の範囲(例えば、数値範囲)又は値(例えば、数値)の範囲内に入るためのフィールドなどのブースト設定を示すために、他のユーザインタフェースオブジェクトと置き換えられるか又は補足されることができる。
図12Fに示すように、カスタマイズオプション1214は、サンプルオプション1222、アプリケーションオプション1224、及び透過モード設定1226を更に含む。サンプルオプション1222は、カスタマイズされたオーディオ設定を有するオーディオサンプルを再生するために選択可能である。いくつかの実施形態では、オーディオサンプルが再生されている間に、ユーザは、異なるオーディオオプション1215を選択し、スライダ1216を調整してオーディオサンプルを再生中に調節することができる。アプリケーションオプション1224は、電話通話トグル1224-1及びメディアトグル1224-2を含む。電話通話トグル1224-1は、通話のためのカスタマイズされたオーディオ設定を有効化又は無効化するように選択可能である。メディアトグル1224-2は、メディア(例えば、音楽、ビデオ、映画、ゲーム)のカスタマイズされたオーディオ設定を有効化又は無効化するように選択可能である。いくつかの実施形態では、それぞれのアプリケーションオプション1224が無効にされると、標準オーディオ設定が無効化オプションに使用される。図12Fでは、双方のアプリケーションオプション1224が有効化され、したがって、カスタマイズされたオーディオ設定が、それぞれのオプションのために使用される。電話通話トグル1224-1及びメディアトグル1224-2は、アプリケーションオプション1224の非限定的な例である。いくつかの実施形態では、アプリケーションオプション1224は、それぞれのオプションに関連付けられたアプリケーションのオーディオ設定を有効化又は無効化するために選択されることができる、異なるアプリケーションオプション(例えば、異なる種類のメディア)を含むことができる。透過モード設定1226は、以下により詳細に記載されるように、周囲音のオーディオ設定をカスタマイズするために選択可能である。
図12Fでは、デバイス1200は、カスタムオーディオセットアップオプション1212上の入力1228を検出し、それに応答して、異なるオーディオ特性を有する様々なオーディオサンプルのユーザの好みに基づいてカスタマイズされたオーディオ設定を設定するためのプロセスを開始する。このカスタムオーディオセットアッププロセスの様々な実施形態のユーザインタフェースが、図12G~図12AEに示されている。
ここで図12Gを参照すると、デバイス1200は、入力1228に応答して、導入インタフェース1229を表示する。導入インタフェース1229は、通話、メディア、及び周囲オーディオのためのヘッドフォンオーディオ設定をカスタマイズするために、カスタマイズプロセスが使用されることができ、カスタマイズプロセスが聴力図結果を組み込むことができることを示す。いくつかの実施形態では、導入インタフェース1229は、入力1228に応答して表示されない。例えば、いくつかの実施形態では、デバイス1200は、ユーザがカスタムオーディオセットアップオプション1212を選択する第1の時間のみ、導入インタフェース1229を表示する。そのような実施形態では、デバイス1200は、代わりに、カスタムオーディオセットアップオプション1212の選択に応答して、図12H又は図12Kに示されるインタフェースを表示する。
図12Gでは、デバイス1200は、入力1230を検出し、それに応答して、聴力図インタフェース1232を表示する。聴力図インタフェース1232は、デバイス1200に関連付けられたユーザアカウントに利用可能な様々な聴力図1233のリストを含む。例えば、図12Gでは、ユーザのアカウントは、2019年2月19日に実施された聴力検査試験からの聴力図1233-1、及び2020年3月23日に実施された聴力検査試験からの聴力図1233-2を含む。ユーザは、ユーザがオーディオ設定をカスタマイズするために使用したい聴力図を選択することができる。最近の聴力図は、図12Hに示すように、デフォルトで選択される。いくつかの実施形態では、聴力図は、医療専門家又は医療提供者によってユーザアカウントに提供される。いくつかの実施形態では、ユーザアカウントがいかなる聴力図も含まない場合には、聴力図インタフェース1232は表示されない。そのような実施形態では、デバイス1200は、代わりに、(例えば、入力1228又は入力1230に応答して)図12Kに示すインタフェースを表示する。
聴力図インタフェース1232は、オーディオ設定をカスタマイズするために選択された聴力図を使用することを選択するオプション1234と、オーディオ設定をカスタマイズするために聴力図を使用しないことを選択するためのオプション1236とを含む。図12Hでは、デバイス1200は、オプション1234上の入力1238を検出して、オーディオ設定をカスタマイズするために選択された聴力図1233-2を使用する。入力1238の検出に応答して、デバイス1200は、図12Iに示すように、カスタムオーディオセットアッププロセスを終了し、選択された聴力図に基づいてカスタムオーディオ設定を適用し、ヘッドフォンオーディオ設定インタフェース1205を表示する。いくつかの実施形態では、図12Iのインタフェースを表示する前に、デバイス1200は、ユーザが周囲オーディオ設定をカスタマイズすることを可能にするために、図12AEに示すユーザインタフェースを表示する。いくつかの実施形態では、図12Iのインタフェースを表示する前に、デバイス1200は、図12AC及び図12ADに関連して以下により詳細に記載され、代わりに、標準オーディオ設定と聴力図に基づくオーディオ設定とを比較するためのオプションを含み、標準オーディオ設定を選択するためのオプション又は聴力図に基づいてカスタマイズされた設定を選択するためのオプションを含む、推奨インタフェース1280と同様のインタフェースを表示する。
図12Iでは、オーディオオプション1215は、選択された聴力図リストオプション1215-4によって更新されて示されている。聴力図オプション1215-4が選択されるため、デバイス1200は、(例えば、ヘッドフォンオーディオ設定インタフェース1205を使用して)ユーザによって構成可能ではないオーディオ設定をカスタマイズする。したがって、スライダ1216は表示されない。いくつかの実施形態では、オーディオオプション1215は、オーディオ設定をカスタマイズするために聴力図が利用可能であるときに、聴力図オプション1215-4を含み、そうでない場合には、聴力図オプション1215-4は表示されない。
図12Jでは、デバイス1200は、オーディオ設定をカスタマイズするために聴力図が使用されない実施形態を示し、デバイスは、代わりに、オプション1236上の入力1240に応答してカスタムオーディオセットアッププロセスに続く。
図12Kでは、デバイス1200は、ヘッドフォンデバイスが現在デバイス1200に接続されていないため、現在選択するために利用不可に示されている継続アフォーダンス1242-1を含む、命令インタフェース1242を表示する。
図12Lでは、デバイス1200は、ヘッドフォンデバイス1245に(例えば、無線接続を介して)結合され(例えば、ペアリングされ、接続され、通信され、又は能動的にデータを交換する)、継続アフォーダンス1242-1は、選択のために利用可能に示されている。デバイス1200は、継続アフォーダンス1242-1上で入力1244を検出し、それに応答して、カスタムオーディオセットアッププロセスを開始する。
いくつかの実施形態では、カスタムオーディオセットアッププロセスは、1)増幅段階、及び2)トーン調整段階の2つの段階を含む。いくつかの実施形態では、デバイス1200は、増幅段階を使用して、ユーザがどのボリュームで聞くことができるかを判定する。いくつかの実施形態では、デバイス1200は、トーン調整段階を使用して、ユーザによってどのオーディオトーンが好ましいかを判定する。いくつかの実施形態では、デバイス1200は、カスタムオーディオセットアッププロセスの2つの段階の結果に基づいて、オーディオ設定(例えば、トーンバランス、音声明瞭性、明るさ)に対する1つ以上の調整を推奨する。例えば、デバイス1200は、僅かに、中度に、又は強く、トーンバランスを向上させることを推奨することができる。別の例として、デバイス1200は、僅かに、中度に、又は強く、音声明瞭性を増強することを推奨することができる。更に別の例として、デバイス1200は、僅かに、中度に、又は強く、明るさをブーストすることを推奨することができる。いくつかの実施形態では、デバイス1200は、トーンバランス、音声明瞭性、及び明るさの任意の組み合わせに対する調整を推奨することができる。いくつかの実施形態では、トーン調整段階は、ユーザの好みに基づいて、トーンバランス、音声明瞭性、及び/又は明るさに対して調整が推奨されるかどうかを判定する。いくつかの実施形態では、増幅段階の結果は、トーン調整段階に影響する。例えば、いくつかの実施形態では、増幅段階の結果は、推奨されるトーン調整が僅か、中度、又は強いかどうかを決定する。
図12M及び図12Nでは、デバイス1200は、カスタムオーディオセットアッププロセスの増幅段階のインタフェースを示す。増幅段階中、デバイス1200は、ユーザによってどのボリュームが聞こえられることができるかを判定するために、異なるボリュームでオーディオ出力を生成する。いくつかの実施形態では、オーディオは、オーディオ読み上げ「ハロー」のループ再生である。図12M~図12ANに示される実施形態では、サウンドグラフィック1245-1は、オーディオがヘッドフォンデバイス1245で生成されたことを示すために使用される。いくつかの実施形態では、デバイス1200は、ユーザがそれを聞くことができない場合であっても、ユーザにオーディオが再生されていることを示すための動きを有する波形(例えば、図12Mの波形1248-1)を表示する。
図12Mでは、デバイス1200は、第1の増幅比較インタフェース1247を表示し、低音レベルでオーディオを生成する。インタフェース1247は、ユーザに、ヘッドフォンデバイス1245で生成され、波形1248-1によって視覚的に表されるオーディオを聞くことができるかどうかを示すように指示する。デバイス1200はまた、ユーザがオーディオを聞くことができるかどうかを継続アフォーダンス1249と組み合わせて示すために、はいトグル1246-1及びいいえトグル1246-2を有する、トグルセレクタ1246を表示する。
図12Mに示す実施形態では、ユーザがオーディオを聞くことができることを示す場合(例えば、はいトグル1246-1が選択されたときに継続アフォーダンス1249を選択することによって)、デバイス1200は、増幅段階を終了し(例えば、完了し)、トーン調整段階に進む。このシナリオでは、ユーザが低音レベルを聞くことが可能であることを示したため、増幅設定は僅かである。
図12Mでは、デバイス1200は、トグル1246-2で入力1250-1(例えば、タップジェスチャ)を検出し、続いて、継続アフォーダンス1249上の入力1250-2(例えば、タップジェスチャ)を検出する。このシナリオでは、ユーザは、低音レベルを聞くことができないことを示し、増幅段階は、図12Nに続く。
図12Nでは、デバイス1200は、第2の増幅比較インタフェース1252を表示し、(ヘッドフォンデバイス1245で)メディアサウンドレベルでオーディオを生成する。インタフェース1252は、ユーザに、波形1248-1よりも大きな振幅を有する波形1248-2によって視覚的に表されるオーディオを聞くことができるかどうかをユーザに指示する。ユーザがオーディオを聞くことができることをユーザが示す場合、ユーザがメディア音レベルを聞くことができることを示したため、増幅設定は中度である。ユーザがオーディオを聞くことができないことをユーザが示す場合、増幅設定は強くなる。
図12Nでは、デバイス1200は、はいトグル1246-1上で入力1253-1(例えば、タップジェスチャ)を検出し、続いて、継続アフォーダンス1249上の入力1253-2(例えば、タップジェスチャ)を検出する。このシナリオでは、ユーザは、メディアの音レベルを聞くことができることを示す。
いくつかの実施形態では、トグルセレクタ1246の設定は、選択されていないトグルの選択によって変更されるまで持続する。例えば、図12Mでは、トグル1246-2が選択されず、第2の増幅比較インタフェース1252が図12Nに表示されるときに選択されたままである。しかしながら、いくつかの実施形態では、トグルセレクタ1246の設定は、各比較のためにリセットされる。例えば、トグルは、第2の増幅比較インタフェースが表示されるときに選択されたはいトグル1246-1を有するようにリセットする。
図12O~図12ADでは、デバイス1200は、カスタムオーディオセットアッププロセスのトーン調整段階のインタフェースを示す。トーン調整段階の間、デバイス1200は、オーディオ比較のセットを生成する。各比較は、同じ音(例えば、音楽のループ再生)の2つのオーディオサンプルを特徴とし、各サンプルは、他のサンプルとは異なるオーディオ特性を有する。各比較のために、デバイス1200は、ユーザに、どのオーディオサンプルを好むかを選択するように指示し、それらの選択に基づいて、ユーザの好みを最適化するために、カスタマイズされたオーディオ設定(例えば、バランストーン、音声明瞭性、又は明るさのうちの1つ以上に対する調整)を推奨するように指示する。いくつかの実施形態では、デバイス1200は、ユーザの選択に基づいて標準オーディオ設定を推奨し、結果として、2つの比較後にトーン調整段階を終了する。そのような実施形態が図12P~図12Tに示されている。
図12Oの入力1254の検出に応答して、デバイス1200は、図12Pに示すように、第1の比較インタフェース1255-1を表示し、ヘッドフォンデバイス1245で音楽を生成する。インタフェース1255-1は、ユーザに、オーディオの第1のバージョン、又はオーディオの第2のバージョンを好むかどうかを示すように指示する。インタフェース1255-1は、比較においてオーディオの第1のバージョンを選択するためのバージョン1のトグル1257-1と、比較においてオーディオの第2のバージョンを選択するためのバージョン2のトグル1257-2とを有するトグルセレクタ1257を含む。オーディオの第1のバージョンが選択されると、音楽は、オーディオの第1のバージョンに対応するオーディオ特性を有するヘッドフォンデバイス1245で再生される。同様に、オーディオの第2のバージョンが選択されると、音楽は、オーディオの第2のバージョンに対応するオーディオ特性を有するヘッドフォンデバイス1245で再生される。音楽が再生し続ける間、ユーザは、第1のバージョンと第2のバージョンとの間でトグルすることができ、選択に基づいて音楽のオーディオ特性を変更することができる。例えば、ピッチは、第2のバージョンが選択されたときに変化し、次いで、第1のバージョンが選択されたときに戻る。比較においてオーディオの2つのバージョンの間でトグルすることにより、ユーザは、異なるバージョンを比較し、それらのバージョンを選択することができる。いくつかの実施形態では、デバイス1200は、双方のバージョン音がユーザにとって同じである場合、ユーザに第1のバージョンを選択するように指示する。
インタフェース1255-1はまた、ヘッドフォンデバイス1245で再生されているオーディオのボリュームを調整するためのボリュームスライダ1258を含む。いくつかの実施形態では、インタフェース1255-1におけるボリューム設定は、増幅段階の結果に基づいて判定される。例えば、増幅が中度である場合、ボリュームスライダ1258のタブは、図12Pに示されるように中央に位置付けられる。いくつかの実施形態では、増幅段階の結果は、ベースラインボリュームを決定し、ボリュームスライダ1258は、ベースラインボリュームに対する調整を行う。いくつかの実施形態では、ボリュームスライダ1258に対する変更は、増幅段階の結果を変更する(例えば、再定義する)。いくつかの実施形態では、図12M及び図12Nに示す増幅段階は任意である。そのような実施形態では、代わりに、ボリュームスライダ1258の設定に基づいて増幅が判定されることができる。
各比較インタフェースは、ヘッドフォンデバイス1245で生成されているオーディオサンプルの視覚的表現を提供する波形を含む。例えば、第1の比較インタフェース1255-1では、波形1260-1は、第1の比較におけるオーディオサンプルの第1のバージョンを表し、波形1260-2(図12Vに示す)は、第1の比較におけるオーディオサンプルの第2のバージョンを表す。
図12Pでは、デバイス1200は、カスタムオーディオセットアッププロセスをキャンセルするオプションを選択する入力1262を検出し、それに応答して、ユーザがカスタムオーディオセットアッププロセスを完了するように促す確認インタフェース1263を表示する。入力1264の検出に応答して、デバイス1200は、図12Rにおける第1の比較インタフェース1255-1に戻る。
図12Rでは、デバイス1200は、第1の比較インタフェース1255-1内で特徴付けられたオーディオ信号の第1のバージョンのユーザの好みを検出し(例えば、1つのトグル1257-1が選択されたときに継続アフォーダンス上の入力1266を検出することによって)、それに応答して、図12Sの第2の比較インタフェース1255-2を表示する。
デバイス1200は、第2の比較インタフェース1255-2を表示する際に、ヘッドフォン1245で音楽を生成し続ける。第2の比較インタフェース1255-2は、第1の比較インタフェース1255-1と同様であるが、少なくとも1つの異なるオーディオサンプルを特徴とする。図12Sでは、オーディオの第1のバージョンは、波形1260-1によって示されるように、第1の比較インタフェース1255-1におけるオーディオの第1のバージョンと同じである。したがって、ヘッドフォンで生成された音楽は、第1の比較インタフェース1255-1から第2の比較インタフェース1255-2に遷移するときに変化しないままである。
いくつかの実施形態では、前の比較インタフェース内で選択されたオーディオのバージョンは、現在の比較インタフェース内のオーディオのバージョンのうちの1つとなる。例えば、第2の比較インタフェース1255-2では、オーディオの第1のバージョンは、第1の比較インタフェース1255-1で選択されたオーディオの第1のバージョンと同じである。あるいは、第2のバージョンが第1の比較インタフェース1255-1内で選択された場合、選択されたバージョンは、第2の比較インタフェース1255-2におけるオプション(例えば、第2のバージョン)のうちの1つである。
図12Sでは、デバイス1200は、第2の比較インタフェース1255-2内で特徴付けられたオーディオ信号の第1のバージョンのユーザの好みを検出し(例えば、1つのトグル1257-1が選択されたときに継続アフォーダンス上の入力1268を検出することによって)、それに応答して、図12Tの標準推奨インタフェース1270を表示する。
図12Tに示す実施形態では、デバイス1200は、第1の比較インタフェース1255-1及び第2の比較インタフェース1255-1の双方におけるオーディオ信号の第1のバージョンのユーザの好みに基づいて、標準オーディオ設定を推奨する。結果として、デバイス1200は、カスタムオーディオセットアッププロセスを終了し、ユーザが実行アフォーダンス1270-1を選択するときに任意選択的に適用される標準設定を推奨する。いくつかの実施形態では、増幅設定は、標準設定が適用されたときに保持されるが、トーン調整は実行されない。いくつかの実施形態では、増幅設定は保持されず、標準設定が適用されたときにトーン調整は実行されない。いくつかの実施形態では、デバイス1200は、実行アフォーダンス1270-1の選択の検出に応答して、図12AEにおけるユーザインタフェースを任意選択的に表示する。いくつかの実施形態では、デバイスは、完了アフォーダンス1270-1の選択の検出に応答して、図12Cのユーザインタフェースを表示する。
図12U~図12ADは、トーン調整段階が完了し、カスタムオーディオ設定がユーザの選択された好みに基づいて推奨される例示的な実施形態を示す。
図12Uを参照すると、デバイス1200は、第1の比較インタフェース1255-1を表示し、バージョン2のトグル1257-2上の入力1272を検出する。ヘッドフォンデバイス1245で音楽を再生し続けている間に、デバイス1200は、入力1272に応答して、オーディオの第1のバージョンからオーディオの第2のバージョンのものにオーディオ特性を変更する。図12Vでは、波形1260-2は、第1の比較におけるオーディオの第2のバージョンを視覚的に表し、オーディオの第2のバージョンが現在選択されていることを示すために、バージョン2のトグル1257-2が強調されている。
図12Vでは、デバイス1200は、オーディオの第2のバージョン-すなわち、第1の比較における第2のオーディオサンプルのユーザの好みを示す、継続アフォーダンス上の入力1273を検出する。入力1273の検出に応答して、デバイス1200は、図12Wに示されている第2の比較インタフェース1255-2を表示する。
図12Wでは、デバイス1200は、ヘッドフォンデバイス1245で音楽を再生し続ける。ヘッドフォンデバイス1245で再生された音楽は、現在、波形1260-2によって示されるように、第1の比較インタフェース1255-1で選択されたオーディオの第2のバージョンに関連付けられたオーディオ特性を有する。換言すれば、第2の比較インタフェース1255-2は、第1の比較インタフェース1255-1で提供されたものとは異なるオーディオサンプルの比較を特徴とするが、第2の比較(第2のバージョン)における特徴オーディオサンプルのうちの1つは、第1の比較インタフェース1255-1から選択されたオーディオサンプルである。いくつかの実施形態では、第2の比較インタフェースにおけるオーディオの第1及び第2のバージョンは、第1の比較インタフェース内のオーディオの第1及び第2のバージョンの双方とは異なるが、第2の比較におけるオーディオの第1又は第2のバージョンのうちの少なくとも1つは、第1の比較インタフェース内で選択されたオーディオのバージョンによって影響される。
いくつかの実施形態では、トグルセレクタ1257の設定は、異なる比較インタフェースにわたって持続する。例えば、図12Wに示す実施形態では、バージョン2のトグル1257-2が選択されたままであり(入力1273の後)、第1の比較インタフェース1255-1から選択されたオーディオ特性のセット(第1の比較におけるオーディオの第2のバージョン)は、バージョン2のトグル1257-2に関連付けられたままである。しかしながら、いくつかの実施形態では、トグルセレクタ1257の設定は、新たな比較インタフェースが表示されたときに選択されたバージョン1のトグル1257-2を有するようにリセットする。そのような実施形態によれば、図12Wの第2の比較インタフェースは、選択されたバージョン1のトグル1257-1と共に示され、第1の比較インタフェース1255-1内のオーディオの第2のバージョンに関連付けられたオーディオ特性は、代わりに、第2の比較インタフェース1255-2におけるオーディオの第1のバージョンに関連付けられる。
再び図12Wを参照すると、デバイス1200は、バージョン1のトグル1257-1上の入力1274を検出し、それに応答して、第2の比較インタフェース1255-2内のオーディオサンプルの第1のバージョンに関連付けられたオーディオ特性に基づいて、ヘッドフォンデバイス1245における音楽を変更する。第2の比較インタフェース1255-2におけるオーディオの第1のバージョンは、図12Xの波形1260-3によって示されるように、第1の比較インタフェース内のオーディオの第1のバージョン及び第2のバージョンの両方(及び第2の比較におけるオーディオの第2のバージョン)とは異なる。更にまた、図12Xに示す実施形態では、第2の比較インタフェース1255-2で特徴付けられたオーディオ信号の第1のバージョン(例えば、波形1260-3)は、図12Sの第2の比較インタフェース1255-2で特徴付けられたオーディオ信号(例えば、波形1260-1)とは異なる。これは、好ましいオーディオサンプルの選択が後続の比較で使用されるオーディオサンプルに影響を及ぼし、図12Sに例示される実施形態における選択は、図12Xに示される実施形態における選択と異なるためである。
図12Xでは、デバイス1200は、ボリュームスライダ1258上の入力1275-1(例えば、スライドジェスチャ)を検出し、それに応答して、図12Yの増幅波形1260-3aによって示されるように、ヘッドフォンデバイス1245で生成されるオーディオの振幅を増大させる。
図12Yでは、デバイス1200は、ボリュームスライダ1258上の入力1275-2(例えば、スライドジェスチャ)を検出し、それに応答して、図12Zの波形1260-3によって示されるように、ヘッドフォンデバイス1245で生成されているオーディオの振幅を前の振幅に戻す。
図12Zでは、デバイス1200は、第2の比較インタフェース1255-2内で特徴付けられたオーディオ信号の第1のバージョンのユーザの好みを検出し(例えば、バージョン1のトグル1257-1が選択されたときに継続アフォーダンス上の入力1276を検出することによって)、それに応答して、図12AAにおける第3の比較インタフェース1255-3を表示する。
図12AAでは、デバイス1200は、波形1260-3によって示されるように、第2の比較インタフェース1255-2内で選択されたオーディオの第1のバージョンに関連付けられたオーディオ特性を有するヘッドフォンデバイス1245で音楽を再生し続ける。デバイス1200は、バージョン2のトグル1257-2上の入力1277を検出し、それに応答して、第3の比較インタフェース1255-3内のオーディオサンプルの第2のバージョンに関連付けられたオーディオ特性に基づいて、ヘッドフォンデバイス1245における音楽を変更する。第3の比較インタフェース1255-3におけるオーディオの第2のバージョンは、図AB の波形1260-4によって示されるように、第1の比較インタフェース1255-1及び第2の比較インタフェース1255-2におけるオーディオのバージョンとは異なる。
図12ABでは、デバイス1200は、第3の比較インタフェース1255-3で特徴付けられたオーディオ信号の第2のバージョンのユーザの好みを検出し(例えば、バージョン2のトグル1257-2が選択されたときに継続アフォーダンス上の入力1278を検出することによって)、それに応答して、図12ACにおける推奨インタフェース1280を表示する。
図12ACでは、推奨インタフェース1280は、カスタムオーディオセットアッププロセスで作成された選択に基づいて、デバイス1200によって推奨されるカスタマイズされた設定又はオーディオ調整を示す。図12ACに示される実施形態では、デバイス1200は、明るさを適度にブーストすることを推奨する。いくつかの実施形態では、推奨インタフェース1280は、カスタムオーディオセットアッププロセスにおいてユーザによって選択された異なる好みに基づいて、他のオーディオ調整を推奨することができる。
推奨インタフェース1280は、カスタムトグル1282-1及び標準トグル1282-2を含む、推奨トグルセレクタ1282を含む。カスタムトグル1282-1が選択されると、デバイス1200は、図12ACに示すように、推奨されるオーディオ調整を有するヘッドフォンデバイス1245でオーディオを生成する。図12ACの実施形態では、波形1260-5は、カスタマイズされたオーディオ設定を有するヘッドフォンデバイス1245におけるオーディオを表す。いくつかの実施形態では、波形1260-5は、第3の比較インタフェース1255-3で選択された好ましいオーディオサンプル(例えば、波形1260-4)に対応する。いくつかの実施形態では、波形1260-5は、第3の比較で選択された好ましいオーディオサンプルとは異なるが、第3の比較における好ましいオーディオサンプルの選択に基づいて依然として影響される。
図12ACでは、デバイス1200は、標準トグル1282-2上の入力1283を検出し、それに応答して、図12ADに示すように標準トグル1282-2を選択する。標準トグル1282-2が選択されると、デバイス1200は、標準オーディオ設定を有するヘッドフォンデバイス1245でオーディオを生成する。図12ADの実施形態では、波形1260-6は、標準オーディオ設定を有するヘッドフォンデバイス1245におけるオーディオを表す。いくつかの実施形態では、波形1260-6は、第1の比較インタフェース1255-1の波形1260-1に対応する。いくつかの実施形態では、波形1260-6は、カスタムオーディオセットアッププロセスの増幅段階から決定される増幅設定を組み込む。いくつかの実施形態では、波形1260-6は、カスタムオーディオセットアッププロセスの増幅段階から決定される増幅設定を組み込まない。
推奨トグルセレクタ1282は、ユーザがカスタムオーディオ設定と標準オーディオ設定との間でトグルすることを可能にし、カスタム設定又は標準設定を特徴とするオーディオのプレビューを聞くことを可能にし、ユーザが、推奨されたカスタマイズされたオーディオ設定を適用しようとするかどうかをより効率的に決定するか又は代わりに標準オーディオ設定を使用することを支援することを可能にする。
推奨インタフェース1280は、カスタム設定アフォーダンス1284-1及び標準設定アフォーダンス1284-2を更に含む。カスタム設定アフォーダンス1284-1は、推奨されるカスタムオーディオ設定を適用するように選択可能であり、いくつかの実施形態では、カスタムオーディオ設定を他の接続されたヘッドフォンデバイスに適用するために使用されることができるカスタムオーディオ設定プロファイルを作成する。標準設定アフォーダンス1284-2は、標準オーディオ設定を適用するために選択可能である。図12ADでは、デバイス1200は、カスタム設定アフォーダンス1284-1上の入力1285を検出し、それに応答して、カスタムオーディオ設定を適用し、任意選択的に、図12AEに示すような透過モードインタフェース1286を表示する。
ここで図12AEを参照すると、いくつかの実施形態では、デバイス1200は、周囲オーディオ設定がヘッドフォンデバイス1245によってサポートされている場合に、透過モードインタフェース1286を任意選択的に表示する。そうでなければ、デバイス1200は、図12AFに示すように、ヘッドフォンオーディオ設定インタフェース1205を表示する。透過モードインタフェース1286は、増幅スライダ1286-1、バランススライダ1286-2、及びトーンスライダ1286-3を含む。これらのスライダは、図12AHに関して以下により詳細に記載されるように、周囲音を増幅するためのヘッドフォン1245の特徴のオーディオ設定を調整するように選択可能である。いくつかの実施形態では、ヘッドフォンデバイス1245は、透過モードインタフェース1286を表示する際に、サウンドグラフィック1245-1によって示されるように、周囲オーディオを生成する。例えば、ヘッドフォンデバイス1245は、周囲オーディオを(例えば、マイクロフォンを使用して)検出し、ヘッドフォンを着用している間にユーザが物理的環境をより容易に聞こえることができるように、周囲オーディオの増幅バージョンを生成する。
透過モードインタフェース1286はまた、スライダ1286-1、1286-2、及び1286-3を使用して作成された任意の設定変更を適用するためのオプション1286-4も含む。図12AEでは、デバイス1200は、オプション1286-5上の入力1287を検出し、それに応答して、図12AFに示すように、任意の透過モード設定変更を適用せず、ヘッドフォンオーディオ設定インタフェース1205を表示する。
ここで図12AFを参照すると、デバイス1200は、カスタムオーディオセットアッププロセスの結果に基づいて、更新されたオーディオ設定を有するオーディオ設定インタフェース1205を表示する。例えば、明るさオプション1215-3は、選択され、ここで、スライダ1216によって示されるような中度のブースト1216-2を有する(カスタムオーディオセットアッププロセスの結果に基づく)ように示される。いくつかの実施形態では、ユーザは、それぞれのオーディオオプション及び調整スライダ1216を選択することによって、(聴力図オプション1215-4以外の)オーディオオプション1215のいずれかを更に調整することができる。いくつかの実施形態では、カスタムオーディオ設定が以前のカスタムオーディオセットアッププロセスの結果から設定されていないか、又は変更されていない場合、ユーザは、カスタムオーディオ設定を手動で調整して、以前のカスタムオーディオセットアッププロセスの結果と一致させることができる。これは、カスタムオーディオセットアッププロセスを完了する必要なく、カスタム結果をユーザが設定することを可能にする。いくつかの実施形態では、カスタムオーディオ設定を手動で選択するプロセスは、以下により詳細に記載されるように、新たなヘッドフォンのセットがデバイス1200に接続されたときに開始されることができる。
図12AFでは、透過モード設定1226は、図12AEの透過モード設定に変更がなされなかったため、標準設定を有して示されている。いくつかの実施形態では、これらの設定に変更が行われ、オプション1286-4が選択された場合、透過モード設定1226は、図12AFにおいて「カスタム」を表示する。デバイス1200は、透過モード設定1226上の入力1288を検出し、それに応答して、図12AEにおける透過モードインタフェース1286と同様の透過モード設定インタフェース1289を表示する。
図12AGは、選択された標準設定を有する透過モード設定インタフェース1289を示す。デバイス1200は、入力1289-1を検出し、それに応答して、図12AEに表示されたものと同様の表示された透過モードカスタマイズオプション1290によって示されるカスタム設定を適用する。
図12AHは、カスタマイズオプションを調整するための、透過モードカスタマイズオプション1290及び様々な入力1291を示す。例えば、デバイス1200は、増幅スライダ1290-1上の入力1291-1(スライドジェスチャ)を検出して、周囲オーディオの増幅を増大させ、バランススライダ1290-1上の入力1291-2を検出して、周辺オーディオを左にフォーカスさせ、トーンスライダ1290-3上の入力1291-3を検出して明るさを増大させる。デバイス1200は、図12AIに示すように、それぞれの設定を更新する。
図12AIでは、デバイス1200は、入力1292を検出し、それに応答して、図12AJに示すように、透過モード設定を無効にする。
図12AJでは、デバイス1200は、入力1293を検出し、それに応答して、図12AKに示すように、以前の設定調整を保持した透過モード設定を再有効化する。
図12AL~図12ANでは、デバイス1200は、新たなヘッドフォンデバイス1297をデバイス1200に接続するときに表示される例示的なユーザインタフェースを示す。いくつかの実施形態では、新たなヘッドフォンデバイス1297は、ヘッドフォンデバイス1245とは異なるヘッドフォンのセットである。図12AMでは、デバイス1200は、新たなヘッドフォンデバイス1297用の透過モード設定をカスタマイズするために、透過モード設定インタフェース1289又は透過モードインタフェース1286にアクセスするためのオプション1294を示す。図12ANでは、デバイス1200は、上述したカスタムオーディオセットアッププロセスを開始するためのオプション1295と、ヘッドフォンオーディオ設定インタフェース1205を表示するためのオプション1296とを表示して、ユーザが、任意選択的に、新たなヘッドフォンデバイス1297に適用されることができるカスタムヘッドフォンオーディオ設定を手動で設定することを可能にする。
図13は、いくつかの実施形態に係る、コンピュータシステムを使用してユーザプリファレンスに基づいてオーディオ設定をカスタマイズするための方法を示すフロー図である。方法1300は、ディスプレイ生成構成要素(例えば、ディスプレイ1202)(例えば、ディスプレイコントローラ、タッチ感知ディスプレイシステム)、オーディオ生成構成要素(例えば、ヘッドフォンデバイス1245)(例えば、オーディオ回路、スピーカ)、及び1つ以上の入力デバイス(例えば、ディスプレイ1202のタッチ感知面)と通信するコンピュータシステム(例えば、スマートフォン、スマートウォッチ)(例えば、デバイス100、300、500、600、601、800、900、1100、1200、1400、1401、1700)で実行される。いくつかの実施形態では、コンピュータシステムは、ディスプレイ生成構成要素及び1つ以上の入力デバイスを含む。方法1300のいくつかの動作は、任意選択的に組み合わされ、いくつかの動作の順序は、任意選択的に変更され、いくつかの動作は、任意選択的に省略される。
いくつかの実施形態では、電子デバイス(例えば、100、300、500、600、601、800、900、1100、1200、1400、1401、及び1700)は、コンピュータシステムである。コンピュータシステムは、任意選択的に、ディスプレイ生成構成要素と1つ以上の入力デバイスとの通信(例えば、有線通信、無線通信)である。ディスプレイ生成構成要素は、CRTディスプレイを介したディスプレイ、LEDディスプレイを介したディスプレイ、又は画像投影を介した表示などの視覚的な出力を提供するように構成されている。いくつかの実施形態では、ディスプレイ生成構成要素は、コンピュータシステムと一体化される。いくつかの実施形態では、ディスプレイ生成構成要素は、コンピュータシステムとは別個である。1つ以上の入力デバイスは、ユーザ入力を受けるタッチ感知面など、入力を受け取るように構成される。いくつかの実施形態では、1つ以上の入力デバイスは、コンピュータシステムと一体化される。いくつかの実施形態では、1つ以上の入力デバイスは、コンピュータシステムとは別個である。したがって、コンピュータシステムは、有線又は無線接続を介して、データ(例えば、画像データ又はビデオデータ)を、一体型又は外部のディスプレイ生成構成要素に送信して、(例えば、ディスプレイデバイスを使用して)コンテンツを視覚的に生成することができ、1つ以上の入力デバイスからの入力を、有線又は無線接続で受信することができる。
方法1300は、ユーザプリファレンスに基づいてオーディオ設定をカスタマイズするための直感的方法を提供する。この方法は、ユーザの好みに基づいてオーディオ設定をカスタマイズするためのユーザの認知的負担を軽減し、それによってより効率的なヒューマン-マシンインタフェースを作り出す。バッテリ動作式のコンピューティングデバイスの場合、ユーザがオーディオ設定をより速く且つより効率的にカスタマイズできるようにすることで、電力が節約され、バッテリ充電の間隔が長くなる。
方法1300では、コンピュータシステム(例えば、1200)は、ディスプレイ生成構成要素(例えば、1202)を介して、第1のオーディオサンプルの表現(例えば、1257-1)(例えば、インタフェースオブジェクト(例えば、選択可能なユーザインタフェースオブジェクト(例えば、アフォーダンス))(例えば、インタフェース1255-1内の1260-1(例えば、図12U))(例えば、インタフェース1255-2内の1260-3(例えば、図12X))(例えば、インタフェース1255-3内の1260-3(例えば、図12AA))の表現(例えば1257-1)であって、第1のオーディオサンプルが、第1のオーディオ特性のセット(例えば、増幅、バランス、音声明瞭性、明るさのうちの1つ以上に対する第1の値)を有する(例えば、第1のアフォーダンスは、オーディオサンプルのオーディオ特性を第1のオーディオ特性のセットに変更するために選択可能である)、表現を同時に表示する(1304)ことと、第2のオーディオサンプルの表現(例えば、1257-2)(例えば、第2のアフォーダンス)(例えば、インタフェース1255-1内の1260-2(例えば、図12V))(例えば、インタフェース1255-2内の1260-2(例えば、図12W))(例えば、インタフェース1255-3内の1260-4(例えば、図12AB))であって、第2のオーディオサンプルが第1のオーディオ特性のセットとは異なる第2のオーディオ特性のセットを有する、表現を同時に表示する(1306)こととを含む、オーディオプリファレンスインタフェース(例えば、1255(例えば、1255-1、1255-2、1255-3)、1247、1252)を表示する(1302)。いくつかの実施形態では、第1のオーディオサンプルが現在選択されているか、又は第2のオーディオサンプルが現在選択されていることを示す表示(例えば、フォーカスセレクタ、ハイライト、視覚的強調)が表示される(例えば、図12Rでは、バージョン1のトグル1257-1が選択されていることを示すためにそれが太字化されている)。いくつかの実施形態では、第1及び第2のオーディオサンプルは、同じオーディオサンプルであるが、異なるオーディオ特性を有する。例えば、第1のオーディオサンプルは、発話又は音楽のオーディオサンプルであり、第2のオーディオサンプルは、増幅、バランス、音声明瞭性、及び明るさのうちの少なくとも1つについて異なる値を有する同じ発話又は音楽のオーディオサンプルである。
(いくつかの実施形態では、表示することに続いて)オーディオプリファレンスインタフェース(例えば、1255(例えば、1255-1、1255-2、1255-3)、1247、1252)を表示している(1308)間に、コンピュータシステム(例えば、1200)は、オーディオ生成構成要素(例えば1245)を介して、第1のオーディオサンプルの少なくとも一部(例えば、インタフェース1255-1内の1260-1(例えば、図12U))(例えば、インタフェース1255-2内の1260-3(例えば、図12X))(例えば、インタフェース1255-3内の1260-3(例えば、図12AA))(例えば、及び/又は第2のオーディオサンプルの少なくとも一部)を出力し(1310)、コンピュータシステムは、(第1及び/又は第2のオーディオサンプルの少なくとも一部をした出力した後に)1つ以上の入力デバイス(例えば1202)を介して、1つ以上のユーザ入力のセット(例えば、1266、1268、1272、1273、1274、1275-1、1275-2、1276、1277、1278、1283、1285)を受信する(1312)。オーディオプリファレンスインタフェースを表示している間に、第1のオーディオサンプルの少なくとも一部を出力することは、オーディオプリファレンスインタフェースを使用して作成された選択により、ユーザが出力オーディオをより迅速且つ容易に関連付けることを可能にするフィードバックを提供する。改善されたフィードバックを提供することにより、デバイスの操作性が向上し、(例えば、デバイスを操作する/デバイスと対話するときにユーザが適切な入力を行うのを支援しユーザの誤りを削減することによって)ユーザデバイスインタフェースがより効率的になり、このことにより更に、ユーザがデバイスをより迅速且つ効率的に使用可能になることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
方法1300の1314において、1つ以上の入力のセット(例えば1266、1268、1272、1273、1274、1275-1、1275-2、1276、1277、1278、1283、1285)を受信した後に、コンピュータシステム(例えば、1200)は、好ましいサンプルとして第1のオーディオサンプルの選択(例えば、入力1266は、インタフェース1255-1内の波形1260-1で表されるオーディオサンプルの選択をもたらす(例えば、図12R))(例えば、入力1268は、インタフェース1255-2内の波形1260-1で表されるオーディオサンプルの選択をもたらす(例えば、図12S))(例えば、入力1276は、インタフェース1255-2内の波形1260-3で表されるオーディオサンプルの選択をもたらす(例えば、図12Z))(例えば、入力1285は、インタフェース1280内の波形1260-5で表されるオーディオサンプルの選択をもたらす(例えば、図12AC及び図12AD))又は好ましいサンプルとして第2のオーディオサンプルの選択(例えば、選択されたサンプルとして)(例えば、入力1273は、インタフェース1255-1内の波形1260-2で表されるオーディオサンプルの選択をもたらす(例えば、図12V))(例えば、入力1278は、インタフェース1255-3内の波形1260-4で表されるオーディオサンプルの選択をもたらす(例えば、図12AB))を記録する(1316)(例えば、(例えば、ローカルに及び/又はサーバに)記憶する)(例えば、1つ以上のユーザ入力のセットの受信に応答して)。いくつかの実施形態では、1つ以上のユーザ入力のセットは、第1のオーディオサンプル(例えば、入力1274)又は第2のオーディオサンプル(例えば、入力1277)の表現に対応する入力を含む。いくつかの実施形態では、1つ以上のユーザ入力のセットは、第1のオーディオサンプルが現在選択されているか又は第2のオーディオサンプルが現在選択されていることを示す指標(例えば、フォーカスセレクタ、太字アウトライン)が表示されている間に受信される選択アフォーダンス上の入力(例えば、継続アフォーダンス上の入力1278)を含み、選択を記録することは、選択されたオーディオサンプルとして現在示されているオーディオサンプルの選択を好ましいサンプルとして記録することを含む。
1つ以上の入力(例えば、1266、1268、1272、1273、1274、1275-1、1275-2、1276、1277、1278、1283、1285)を受信した後、コンピュータシステム(例えば、1200)は、オーディオ生成構成要素(例えば1245)を介して、第1のオーディオデータ(例えば、ヘッドフォンデバイス1245において生成されるオーディオ(例えば、いくつかの実施形態では、サウンドグラフィック1245-1の存在によって表される))(例えば、オーディオメディア(例えば、音楽、録音物、オーディオビジュアルメディアのオーディオ構成要素))を出力する(1318)。
好ましいサンプルとして記録された(例えば、第1のオーディオサンプルは、好ましいサンプルとして選択される)第1のオーディオサンプル(例えば、インタフェース1255-1内の1260-1(例えば、図12U))(例えば、インタフェース1255-2内の1260-3(例えば、図12X))(例えば、インタフェース1255-3内の1260-3(例えば、図12AA))に従って、第1のオーディオデータの出力(例えば、現在のオーディオ再生、将来のオーディオ再生)は、第1のオーディオ特性のセットの少なくとも1つのオーディオ特性に基づく(1320)(例えば、使用して生成される)(例えば、図12AAにおいて、ヘッドフォンデバイス1245で生成されたオーディオは、図12Zにおけるバージョン1のトグル1257-1及び入力1276の選択の結果として選択されたオーディオに基づく)(例えば、オーディオ再生の出力のために、第1のオーディオ特性のセットの対応する第1の値から、増幅、バランス、音声明瞭性、及び明るさのうちの1つ以上の値を選択する)。
好ましいサンプルとして記録された(例えば、第2のオーディオサンプルは、好ましいサンプルとして選択される)第2のオーディオサンプル(例えば、インタフェース1255-1内の1260-2(例えば、図12V))(例えば、インタフェース1255-2内の1260-2(例えば、図12W))(例えば、インタフェース1255-3内の1260-4(例えば、図12AB))に従って、第1のオーディオデータの出力(例えば、現在のオーディオ再生、将来のオーディオ再生)は、第2のオーディオ特性のセットの少なくとも1つのオーディオ特性に基づく(1322)(例えば、使用して生成される)(例えば、図12Wにおいて、ヘッドフォンデバイス1245で生成されたオーディオは、図12Vにおけるバージョン2のトグル1257-2及び入力1273の選択の結果として選択されたオーディオに基づく)(例えば、オーディオ再生の出力のために、第2のオーディオ特性のセットの対応する第2の値から、増幅、バランス、音声明瞭性、及び明るさのうちの1つ以上の値を選択する)。
いくつかの実施形態では、好ましいサンプルとしての第1のオーディオサンプル(例えば、インタフェース1255-1内の1260-1(例えば、図12U))(例えば、インタフェース1255-2内の1260-3(例えば、図12X))(例えば、インタフェース1255-3内の1260-3(例えば、図12AA))の選択、又は好ましいサンプルとしての第2のオーディオサンプル(例えば、インタフェース1255-1内の1260-2(例えば、図12V))(例えば、インタフェース1255-2内の1260-2(例えば、図12W))(例えば、インタフェース1255-3内の1260-4(例えば、図12AB))の選択を記録した後、コンピュータシステム(例えば、1200)は、ディスプレイ生成構成要素(例えば、1202)を介して、第3のオーディオ特性のセットを有する第3のオーディオサンプル(例えば、インタフェース1255-2内の1260-3(例えば、図12X))(例えば、インタフェース1255-3内の1260-3(例えば、図12AA))の表現(例えば、後続のインタフェース(例えば、1255-2、1255-3)内の1257-1)と、第3のオーディオ特性のセットとは異なる第4のオーディオ特性のセットを有する第4のオーディオサンプル(例えば、インタフェース1255-2内の1260-2(例えば、図12W))(例えば、インタフェース1255-3内の1260-4(例えば、図12AB))の表現(例えば、後続のインタフェース(例えば、1255-2、1255-3)内の1257-2)とを同時に表示する。いくつかの実施形態では、第3のオーディオサンプル又は第4のオーディオサンプルのうちの少なくとも1つは、好ましいサンプルとして、第1のオーディオサンプル又は第2のオーディオサンプルの記録された選択に基づく(例えば、に従って選択される)。いくつかの実施形態では、第1及び第2のオーディオサンプルの表現は、一連のオーディオサンプル比較において第1のオーディオサンプル比較を形成し、第1又は第2のオーディオサンプルが選択された後に、ディスプレイ生成構成要素は、第1のオーディオサンプル比較(例えば、第1及び第2のオーディオサンプルの表現)の表示を停止し、第3及び第4のオーディオサンプルの表現を含む後続のオーディオサンプル比較を表示する。
いくつかの実施形態では、第3のオーディオサンプルは、第1のオーディオサンプル(例えば、インタフェース1255-2内の1260-3(例えば、図12X))(例えば、インタフェース1255-3内の1260-3(例えば、図12AA))又は第2のオーディオサンプル(例えば、インタフェース1255-2内の1260-2(例えば、図12W))(例えば、インタフェース1255-3内の1260-4(例えば、図12AB))である。いくつかの実施形態では、後続のオーディオサンプル比較のオーディオサンプルのうちの1つは、以前のオーディオサンプル比較のオーディオサンプルである。例えば、第1のオーディオサンプルが好ましいオーディオサンプルとして選択される場合、次のオーディオサンプル比較におけるオーディオサンプルのうちの1つは、第1のオーディオサンプルである。逆に、第2のオーディオサンプルが好ましいオーディオサンプルとして選択される場合、次のオーディオサンプル比較におけるオーディオサンプルのうちの1つは、第2のオーディオサンプルである。
いくつかの実施形態では、第1のオーディオサンプル(例えば、1257-1)の表現は、第1のオーディオサンプルが出力されていない間に選択されると(例えば、図12Wを参照)、オーディオ生成構成要素(例えば、1245)を介して、第1のオーディオサンプルの少なくとも第2の部分(例えば、第1のオーディオサンプルの第1のオーディオサンプルの部分と同じ又は異なる部分)の出力を生じさせる(例えば、図12Wでは、バージョン1のトグル1257-1における入力1274は、図12Wの波形1260-2から図12Xの波形1260-3への遷移によって表されるように、トグル1257-1に関連付けられたオーディオに切り替えるように、ヘッドフォンデバイス1245におけるオーディオ出力を生じさせる)。いくつかの実施形態では、第2のオーディオサンプル(例えば、1257-2)の表現は、第2のオーディオサンプルが出力されていない間に選択されると(例えば、図12AAを参照)、オーディオ生成構成要素を介して、第2のオーディオサンプルの少なくとも一部の出力を生じさせる(例えば、図12AAでは、バージョン2のトグル1257-2における入力1277は、図12AAの波形1260-3から図12ABの波形1260-4への遷移によって表されるように、トグル1257-2に関連付けられたオーディオに切り替えるように、ヘッドフォンデバイス1245におけるオーディオ出力を生じさせる)。いくつかの実施形態では、オーディオプリファレンスインタフェース(例えば、1255-1、1255-2、1255-3)を表示することは、(例えば、1つ以上のユーザ入力のセットに応答して)選択可能ボリューム制御ユーザインタフェースオブジェクトが表示されている間に出力されるオーディオのボリュームを調整するように構成された選択可能ボリューム制御ユーザインタフェースオブジェクト(例えば、1258)を表示することを含む。選択可能ボリューム制御ユーザインタフェースオブジェクトでオーディオプリファレンスインタフェースを表示することは、ユーザが、ボリューム制御にアクセスするための別個のインタフェースを表示する必要なく、ユーザが生成されているオーディオをより迅速且つ容易に比較及び調整することを可能にし、それにより、ボリューム調整を実行するために必要とされる入力の数を低減し、オーディオサンプルを比較することができる。動作を実行するために必要な入力の数が減ることにより、デバイスの操作性が高められ、ユーザデバイスインタフェースを(例えば、デバイスを操作する/デバイスと対話するときにユーザが適切な入力を行うのを支援し、ユーザの誤りを削減することによって)より効率的にし、加えて、ユーザがデバイスをより迅速且つ効率的に使用できるようにすることによって、デバイスの電力使用が抑えられ、バッテリ寿命が改善される。いくつかの実施形態では、オーディオプリファレンスインタフェースは、第1のオーディオサンプル又は第2のオーディオサンプルを選択することの間をトグルするために使用され、ボリューム制御ユーザインタフェースオブジェクトは、選択された第1又は第2のオーディオサンプルのボリュームを調整するために使用される(例えば、図12X~図12Zを参照)。例えば、第1のオーディオサンプルが選択される場合、ボリューム制御インタフェースオブジェクトを調整することは、再生されている第1のオーディオサンプルの出力ボリュームを(例えば、オーディオ生成構成要素を使用して)増加又は減少させる。あるいは、第2のオーディオサンプルが選択される場合、ボリューム制御インタフェースオブジェクトを調整することは、再生されている第2のオーディオサンプルの出力ボリュームを増加又は減少させる。
いくつかの実施形態では、第1のオーディオサンプル(例えば、バージョン1のトグル1257-1に関連付けられたオーディオ)及び第2のオーディオサンプル(例えば、バージョン2のトグル1257-2に関連付けられたオーディオ)は、双方とも、第2のオーディオデータ(例えば、図12V又は図12Wでは、ヘッドフォンデバイス1245で生成されたオーディオ)に基づく(例えば、オーディオメディア(例えば、音楽、録音物、オーディオビジュアルメディアのオーディオ構成要素))(例えば、第1のオーディオサンプル及び第2のオーディオサンプルは、再生時間(例えば、再生持続時間)を有する同じオーディオメディアのサンプルであるが、異なるオーディオ特性のセットを有する)。いくつかの実施形態では、第2のオーディオデータは、第1のオーディオデータである。いくつかの実施形態では、コンピュータシステム(例えば、1200)が、第1のオーディオサンプルの一部として又は第2のオーディオサンプルの一部として、第2のオーディオデータの再生時間内の第1の時点(例えば、タイムスタンプ、全再生時間内の特定の時間)に第2のオーディオデータを出力する間に(例えば、第1のオーディオ特性のセット又はオーディオ特性の第2のセットに基づいて第2のオーディオデータを出力している間に)、コンピュータシステムは、1つ以上の入力デバイスを介して、1つ以上のユーザ入力の第2のセット(例えば、入力1272、入力1275)を受信する。いくつかの実施形態では、第2のオーディオデータは、再生時間の終わりに到達すると、オーディオが再生時間の開始から(例えば、中断なしに)再開するように、ループ再生として出力される。いくつかの実施形態では、1つ以上のユーザ入力の第2のセットの受信に応答して、第2のオーディオデータが第1のオーディオサンプルの一部として出力されているとの判定及び1つ以上のユーザ入力のセットが第2のオーディオサンプルの表現の選択を含むとの判定に従って、コンピュータシステムは、第1の時点から(例えば、第1の時点から実質的に)第2のオーディオデータを出力し続け、第2のオーディオサンプルの一部として第2のオーディオデータの出力に遷移する(例えば、第2のオーディオデータを同じ時点から再生し続ける間に、第1のオーディオ特性のセットに基づく第2のオーディオデータの再生を第2のオーディオ特性のセットに変更する)(例えば、図12U及び図12Vでは、入力1272に応答して、オーディオは、ヘッドフォンデバイス1245で再生を継続し、バージョン1のトグル1257-1に関連付けられたオーディオ特性からバージョン2のトグル1257-2に関連付けられたオーディオ特性に切り替える)。いくつかの実施形態では、1つ以上のユーザ入力の第2のセットの受信に応答して、第2のオーディオデータが第2のオーディオサンプルの一部として出力されているとの判定及び1つ以上のユーザ入力のセットが第1のオーディオサンプルの表現の選択を含むとの判定に従って、コンピュータシステムは、第1の時点から第2のオーディオデータを出力し続け、第1のオーディオサンプルの一部として第2のオーディオデータの出力に遷移する(例えば、第2のオーディオデータを同じ時点から再生し続ける間に、第2のオーディオ特性のセットに基づく第2のオーディオデータの再生を第1のオーディオ特性のセットに変更する)(例えば、図12W及び図12Xでは、入力1274に応答して、オーディオは、ヘッドフォンデバイス1245で再生を継続し、バージョン2のトグル1257-2に関連付けられたオーディオ特性からバージョン1のトグル1257-1に関連付けられたオーディオ特性に切り替える)。オーディオサンプルの表現の選択に基づいて第2のオーディオデータの出力を遷移させることは、第2のオーディオデータを出力し続ける間、ユーザが、各比較のためにオーディオの再生を開始する必要なく、異なるオーディオサンプルを比較して対比することを可能にし、それによって、オーディオ比較を実行するために必要とされる入力の数を低減する。動作を実行するために必要な入力の数が減ることにより、デバイスの操作性が高められ、ユーザデバイスインタフェースを(例えば、デバイスを操作する/デバイスと対話するときにユーザが適切な入力を行うのを支援し、ユーザの誤りを削減することによって)より効率的にし、加えて、ユーザがデバイスをより迅速且つ効率的に使用できるようにすることによって、デバイスの電力使用が抑えられ、バッテリ寿命が改善される。いくつかの実施形態では、オーディオは、ユーザが第1のオーディオサンプルの表現又は第2のオーディオサンプルの表現を選択している間に、ループ再生で出力される。ユーザが、第1のオーディオサンプルの表現を選択することと、第2のオーディオサンプルの表現を選択することとの間でトグルすると、出力オーディオは、第1のオーディオサンプル(オーディオ特性の第1のセットを有する)と第2のオーディオサンプル(オーディオ特性の第2のセットを有する)との間でトグルする。
いくつかの実施形態では、第1のオーディオサンプル又は第2のオーディオサンプルのうちの少なくとも1つは、発話オーディオサンプル(例えば、記録された人の発語を含むオーディオ)を含む。いくつかの実施形態では、オーディオプリファレンスインタフェースは、オーディオサンプルのうちの1つ以上が発話オーディオ録音を含むときにボリューム制御インタフェースを含む。いくつかの実施形態では、オーディオプリファレンスインタフェースは、オーディオサンプルのうちの1つ以上が発話オーディオ録音を含むとき、ボリューム制御インタフェースを含まない。
いくつかの実施形態では、第1のオーディオサンプルの選択を好ましいオーディオサンプルとして記録した後、又は第2のオーディオサンプルを好ましいオーディオサンプルとして選択した後(いくつかの実施形態では、第1のオーディオデータを出力する前に)、コンピュータシステム(例えば、1200)は、ディスプレイ生成構成要素(例えば1202)を介して、オーディオ特性の推奨されたセットに対応する第1のオーディオプレビューインタフェースオブジェクト(例えば、1282-1)(いくつかの実施形態では、推奨オーディオ特性のセットは、1つ以上の入力のセットに応答して記録された少なくとも好ましいサンプルに基づいて選択される)と推奨オーディオ特性のセットとは異なる、オーディオ特性の第5のセットに対応する第2のオーディオプレビューインタフェースオブジェクト(例えば、1282-2)とを同時に表示することを含む、推奨オーディオ調整インタフェース(例えば、1270、1280)(例えば、推奨されるオーディオ調整は、少なくとも部分的に、第1又は第2のオーディオサンプルを好ましいサンプルとして記録された選択に基づく)を表示する。いくつかの実施形態では、オーディオ特性の第5のセットは、オーディオプリファレンスインタフェースを使用して記録された選択に基づいていない、既定のオーディオ特性のセット(例えば、デフォルト又は標準オーディオ特性)である。いくつかの実施形態では、コンピュータシステムは、1つ以上の入力デバイスを介して、1つ以上の入力の第3のセット(例えば、1282-1、1283、1285上の入力)を受信する。いくつかの実施形態では、1つ以上の入力の第3のセットの受信に応答して、及び、1つ以上の第3の入力のセットが、第1のオーディオプレビューインタフェースオブジェクトの選択(例えば、1282-1上の入力、入力1285)を含むとの判定に従って、コンピュータシステムは、推奨オーディオ特性のセットに基づいて(例えば、使用して)(例えば、出力オーディオのプレビューは、推奨オーディオ調整を含み、出力オーディオのプレビューは、それに適用されたカスタマイズされたオーディオ設定を有する)、第3のオーディオデータ(例えば、波形1260-5によって表されるオーディオ)(例えば、出力オーディオのプレビュー)を出力する(いくつかの実施形態では、推奨オーディオ特性のセットに基づいて出力が既に発生している場合は、出力を継続する)。いくつかの実施形態では、1つ以上の入力の第3のセットの受信に応答して、及び、1つ以上の入力の第3のセットが、第2のオーディオプレビューインタフェースオブジェクト(例えば、1283)の選択を含むとの判定に従って、コンピュータシステムは、第5のセットのオーディオ特性(例えば、波形1260-6によって表されるオーディオ)に基づいて(使用して)(例えば、出力オーディオのプレビューは、推奨オーディオ調整を含まず、出力オーディオのプレビューは、それに適用された標準的なオーディオ設定を有する)、第3のオーディオデータを出力する(いくつかの実施形態では、第5のセットのオーディオ特性に基づいて出力が既に発生している場合、出力を継続する)。第1又は第2のオーディオプレビューインタフェースオブジェクトの選択に応答して、推奨オーディオ特性のセット又は第5のオーディオ特性のセットに基づいて、第3のオーディオデータを出力することは、ユーザが、異なる特性を有するオーディオの再生を比較するためにオーディオ設定の受け入れ、拒否、又は変更することなく、オーディオ設定の推奨セット又は第5のセットに基づいてオーディオ設定を比較して対比することを可能にし、それにより、オーディオ設定を設定するために必要とされる入力の数を低減する。動作を実行するために必要な入力の数が減ることにより、デバイスの操作性が高められ、ユーザデバイスインタフェースを(例えば、デバイスを操作する/デバイスと対話するときにユーザが適切な入力を行うのを支援し、ユーザの誤りを削減することによって)より効率的にし、加えて、ユーザがデバイスをより迅速且つ効率的に使用できるようにすることによって、デバイスの電力使用が抑えられ、バッテリ寿命が改善される。いくつかの実施形態では、推奨オーディオ調整インタフェースは、ユーザが、有効化又は無効化された推奨/カスタマイズされたオーディオ設定を有する出力オーディオをプレビューすることを可能にする。いくつかの実施形態では、推奨オーディオ調整インタフェースは、選択されたときに、少なくとも第1のタイプ(例えば、音楽又はビデオなどのオーディオメディア)のオーディオデータの後の再生のためのオーディオ特性のセットとして、推奨オーディオ特性のセットを設定する、推奨インタフェースオブジェクトを更に含む。いくつかの実施形態では、推奨オーディオ調整インタフェースは、選択されたときに、少なくとも第1のタイプ(例えば、音楽又はビデオなどのオーディオメディア)のオーディオデータの後の再生のためのオーディオ特性のセットとして、オーディオ特性の第5のセットを設定する、インタフェースオブジェクトを更に含む。いくつかの実施形態では、推奨オーディオ調整インタフェースは、オーディオ調整が推奨されるか、又は必要とされない(例えば、第5のオーディオ特性のセットは、後の再生のために使用される)という指示を含む。
いくつかの実施形態では、コンピュータシステム(例えば、1200)は、ディスプレイ生成構成要素(例えば1202)を介して、選択可能な周囲音増幅コントロール(例えば、1286、1289)を表示する。いくつかの実施形態では、コンピュータシステムは、選択可能な周囲音増幅コントロールに対応する入力(例えば、1287、1289-1、1291-1、1291-2、1291-3、1292、1293)を受信する。いくつかの実施形態では、選択可能な周囲音増幅コントロールに対応する入力に応答して、コンピュータシステムは、コンピュータシステムの周囲音増幅機能(例えば、音増幅機能の将来の動作に影響を及ぼす設定を変更する)のオーディオ特性(例えば、1286-1、1286-2、1286-3、1290-1、1290-2、1290-3、ノイズ制御機能)(例えば、ボリューム、バランス、音声明瞭性、明るさ)を調整する。いくつかの実施形態では、オーディオ生成構成要素は、ヘッドフォンのセット(例えば、1245)(例えば、外耳又は耳内ヘッドフォン)であり、コンピュータシステムは、周囲音を検出するためのマイクロフォン(例えば、ヘッドフォンに組み込まれた)と通信し、オーディオ生成構成要素を使用して検出された周囲音を増幅するように構成されている。いくつかの実施形態では、周囲ノイズを増幅することは、ユーザが環境の周囲音をより良好に聞くことを可能にする(例えば、ヘッドフォンを除去する必要なく)ことができる。いくつかの実施形態では、コンピュータシステムの周囲音増幅機能のオーディオ特性は、増幅、バランス、明るさ、及びこれらの組み合わせからなる群から選択される。
いくつかの実施形態では、コンピュータシステム(例えば、1200)は、ディスプレイ生成構成要素(例えば、1202)を介して、既存のオーディオプロファイルの表現(例えば、1233-1、1233-2、1215-4)(例えば、聴力図、以前の聴力検査試験によって生成された録音)を表示する(例えば、オーディオプリファレンスインタフェース(例えば、1255)の表示前又は後に)。いくつかの実施形態では、聴力図は、医療機関によって提供された。いくつかの実施形態では、既存のオーディオプロファイルに基づいてオーディオ再生の出力を変更するプロセスは、既存のオーディオプロファイルに基づいてオーディオ設定をカスタマイズすることを含む。いくつかの実施形態では、これは、前の聴力図試験の1つ以上の表現を表示することと、前の聴力図試験の表現のうちの1つの選択を受信することと、前の聴力図試験の選択された表現に関連付けられた聴力図試験の結果に基づいて推奨されるオーディオ設定を適用することと、を含む。いくつかの実施形態では、コンピュータシステムは、既存のオーディオプロファイルの表現に対応する入力(例えば、選択)を含む1つ以上の入力のセットを受信する。いくつかの実施形態では、既存のオーディオプロファイルの表現に対応する入力を含む1つ以上の入力のセットに応答して、コンピュータシステムは、既存のオーディオプロファイルに基づいて、オーディオ再生の1つ以上のオーディオ特性(例えば、オーディオデータの将来のオーディオ再生)を構成するためのプロセスを開始する。既存のオーディオプロファイルに基づいてオーディオ再生の1つ以上のオーディオ特性を構成するためのプロセスを開始することは、ユーザが、カスタムオーディオセットアッププロセスを開始する必要なく、ユーザの聴力に基づいて最適化されたカスタムオーディオ設定を選択することを可能にし、それにより、カスタムオーディオ設定を作成するために必要とされる入力の数を低減する。動作を実行するために必要な入力の数が減ることにより、デバイスの操作性が高められ、ユーザデバイスインタフェースを(例えば、デバイスを操作する/デバイスと対話するときにユーザが適切な入力を行うのを支援し、ユーザの誤りを削減することによって)より効率的にし、加えて、ユーザがデバイスをより迅速且つ効率的に使用できるようにすることによって、デバイスの電力使用が抑えられ、バッテリ寿命が改善される。
いくつかの実施形態では、オーディオ生成構成要素(例えば、1245)は、第1の外部オーディオ出力デバイス(例えば、第1のヘッドフォンのセット1245)である。いくつかの実施形態では、1つ以上のユーザ入力のセットを受信した後、コンピュータシステム(例えば、1200)は、少なくとも記録された選択に基づいて、第1のオーディオ設定プロファイル(例えば、図12AFに示すカスタムオーディオ設定)を生成する。いくつかの実施形態では、オーディオ設定プロファイルが作成された後、第1の外部オーディオ出力デバイスが使用されているときに、カスタマイズされたオーディオ設定が自動的に適用されるように、第1の外部オーディオ出力デバイスに関連付けられる。いくつかの実施形態では、コンピュータシステムは、第1の外部オーディオ出力デバイス(例えば、第2の異なるヘッドフォンのセット)とは異なる第2の外部オーディオ出力デバイス(例えば、新たなヘッドフォン1297)との通信を検出する(例えば、接続を確立する)。いくつかの実施形態では、第2のオーディオ出力デバイスとの通信の検出に応答して、コンピュータシステムは、ディスプレイ生成構成要素(例えば、1202)を介して、選択されると、第1のオーディオ設定プロファイルを第2の外部オーディオ出力デバイスと関連付ける(例えば1205(例えば、図12AF)におけるオーディオ設定を調整することによって)(例えば、自動的に)ためのプロセスを開始するユーザインタフェースオブジェクト(例えば、1296)を表示する。いくつかの実施形態では、オーディオ設定プロファイルが作成され、第2のヘッドフォンデバイスがコンピュータシステムに接続された後、システムは、第2のヘッドフォンセットがコンピュータシステムと共に使用されているときに、カスタマイズされたオーディオ設定が自動的に適用されるように、オーディオ設定プロファイルを第2のヘッドフォンのセットと自動的に関連付けるためのプロセスを開始するためのユーザインタフェースを表示する。これは、ユーザが、コンピュータシステムに接続された各ヘッドフォンセットのオーディオ設定をカスタマイズする必要なく、異なるヘッドフォンのセットを使用することを可能にする。第1のオーディオ設定プロファイルを第2の外部オーディオ出力デバイスと関連付けるためのプロセスを開始することは、ユーザが、カスタムオーディオセットアッププロセスを開始する必要なく、ユーザの好みに基づいて最適化されたカスタムオーディオ設定を適用することを可能にし、それによって、カスタムオーディオ設定を再作成するために必要とされる入力の数を低減する。動作を実行するために必要な入力の数が減ることにより、デバイスの操作性が高められ、ユーザデバイスインタフェースを(例えば、デバイスを操作する/デバイスと対話するときにユーザが適切な入力を行うのを支援し、ユーザの誤りを削減することによって)より効率的にし、加えて、ユーザがデバイスをより迅速且つ効率的に使用できるようにすることによって、デバイスの電力使用が抑えられ、バッテリ寿命が改善される。
いくつかの実施形態では、コンピュータシステム(例えば、1200)は、ディスプレイ生成構成要素(例えば、1202)を介して、1つ以上のオーディオタイプ制御のセット(例えば、1224)(例えば、異なるオーディオタイプ(例えば、電話、メディア)のトグルスイッチ)を表示する。いくつかの実施形態では、コンピュータシステムは、1つ以上のオーディオタイプ制御のセットに向けられた入力(例えば、1224-1、1224-2)(例えば、電話通話のためのトグルスイッチの選択)を含む1つ以上の入力のセットを受信する。いくつかの実施形態では、1つ以上のオーディオタイプコントロールのセットに向けられた入力を含む1つ以上の入力のセットの受信に応答して、1つ以上のオーディオタイプコントロールのセットに向けられた入力を含む1つ以上の入力のセットが第1の入力を含むとの判定に従って(例えば、入力は、第1のオーディオ再生タイプ制御のアクティブ化に対応する)(例えば、入力は、電話通話トグルスイッチのアクティブ化に対応する)、コンピュータシステムは、(例えば、オーディオの第2のタイプ(例えば、異なるオーディオタイプ)のオーディオ再生の1つ以上のオーディオ特性を構成することなく)オーディオの第1のタイプ(例えば、オーディオの第1のカテゴリ、オーディオのフォーマット、オーディオのソース(例えば、通話、メディア、周囲音増幅オーディオ))のオーディオ再生(例えば、将来の再生)の1つ以上のオーディオ特性を構成する(例えば、他のオーディオタイプ(例えば、メディア、周囲音増幅オーディオ)のオーディオ再生のオーディオ特性に影響を及ぼす/調整することなく、電話通話のオーディオ再生の1つ以上のオーディオ特性を構成する)。いくつかの実施形態では、1つ以上のオーディオタイプコントロールのセットに向けられた入力を含む1つ以上の入力のセットの受信に応答して、1つ以上のオーディオタイプコントロールのセットに向けられた入力を含む1つ以上の入力のセットが、第1の入力とは異なる第2の入力を含むとの判定に従って(例えば、入力は、電話のトグルスイッチではなく、メディアのトグルスイッチに向けられる)、コンピュータシステムは、第1のタイプのオーディオのオーディオ再生の1つ以上のオーディオ特性を構成することなく、第1のタイプのオーディオとは異なる第2のタイプのオーディオのオーディオ再生の1つ以上のオーディオ特性を構成する。
いくつかの実施形態では、第1のオーディオ特性のセットの少なくとも1つのオーディオ特性は、ボリューム増幅特性(例えば、全ての周波数範囲にわたるボリュームの増加)を含み、第2のオーディオ特性のセットの少なくとも1つのオーディオ特性は、ボリューム増幅特性を含む(例えば、図12M及び図12Nの増幅段階を参照)。
いくつかの実施形態では、第1のオーディオ特性のセットの少なくとも1つのオーディオ特性は、周波数固有のボリューム増幅特性(例えば、1215-1、1215-2、1215-3)を含み(例えば、異なる周波数範囲のボリュームを異なるように増幅すること)、第2のオーディオ特性のセットの少なくとも1つのオーディオ特性は、周波数固有のボリューム増幅特性を含む(例えば、図12O~図12ADのトーン調整段階を参照)。
方法1300に関して上述したプロセス(例えば、図13)の詳細はまた、上述及び後述する方法にも、類似の方式で適用可能であることに留意されたい。例えば、方法1500、1600、及び1800は、方法1300を参照して上述した様々な方法の特性のうちの1つ以上を任意選択的に含む。例えば、オーディオ露出制限アラートを表示するための動作、オーディオ露出を管理するための動作、及びオーディオ露出データを管理するための動作は、方法1300に関して上述したオーディオ設定を設定及び調整するための動作の少なくとも一部を組み込むことができる。簡潔にするために、これらの詳細は、以下で繰り返さない。
図14A~図14AKは、いくつかの実施形態に係る、オーディオ露出を管理するための例示的なユーザインタフェースを示す。これらの図におけるユーザインタフェースは、図15及び図16におけるプロセスを含む、後述するプロセスを説明するために使用される。
図14A~図14AKは、オーディオ露出アラート(例えば、通知とも呼ばれる)を生成し、デバイス1400に関連付けられたユーザアカウントの様々なオーディオ露出設定を管理するためにディスプレイ1402(例えば、ディスプレイデバイス又はディスプレイ生成構成要素)上にユーザインタフェースを表示するデバイス1400を示す。いくつかの実施形態では、デバイス1400は、デバイス601、デバイス800、デバイス900、デバイス1100、及びデバイス1200と同じである。いくつかの実施形態では、デバイス1400は、デバイス100、300、又は500の1つ以上の特徴を含む。
図14Aを簡単に参照すると、デバイス1400は、ヘッドフォンデバイス1405(例えば、ジョンのイヤホンプロ)に(例えば、無線接続を介して)結合される。メディアユーザインタフェース1408によって示されるように、デバイス1400は、メディアアプリケーションを使用して、ヘッドフォンデバイス1405において、全ボリューム(例えば、100%ボリューム)で音楽を再生している。
図14A~図14Dは、デバイス1400が、オーディオ露出閾値(例えば、閾値1410-1)に到達したときに、ヘッドフォンデバイス1405で生成されたオーディオの出力ボリュームを調整する例示的な実施形態を示す。いくつかの実施形態では、オーディオ露出閾値は、瞬時ボリューム制限(例えば、最大ボリューム制限設定)とすることができる。いくつかの実施形態では、オーディオ露出閾値は、集約露出制限(例えば、ある期間にわたって蓄積されるオーディオの量の制限)とすることができる。いくつかの実施形態では、オーディオ露出閾値(及び閾値を超えることに応じた対応するアクション)は、ヘッドフォンデバイス(例えば、ユーザの耳内又はその上に装着されたデバイス)にのみ適用されるが、スピーカなどの他のオーディオデバイスには適用されない。いくつかの実施形態では、オーディオ露出制限は、メディアが非ヘッドフォンスピーカから再生されているときに無視される。換言すれば、出力ボリュームを表すオーディオデータは、メディアがヘッドフォン以外のデバイスから再生されている場合には、オーディオ露出制限に向かってカウントされない。
図14A~図14Dは、ある期間(T0~T4)にわたるヘッドフォンオーディオの出力ボリュームを表すグラフ1410を含む。図14A~図14Dは、それぞれの時間T1~T4に対応し、ヘッドフォンデバイス1405で再生された音楽のボリューム、並びにそれぞれの時間におけるデバイス1400で表示される対応するユーザインタフェースのボリュームの変動を示す。グラフ1410は、閾値1410-1、ボリューム1410-2(ヘッドフォンデバイス1405におけるオーディオ出力の実際のボリュームの実線表現)と、予測されるボリューム1410-3(出力ボリュームがデバイス1400によって調整されていないままである場合に、出力オーディオがヘッドフォンデバイス1405に存在しているかの破線表現)とを含む。
図14Aでは、グラフ1410は、時間T1において、閾値1410-1を下回るボリュームでヘッドフォンデバイス1405において生成されることを示す。
図14Bでは、グラフ1400は、時間T2において、ヘッドフォンデバイス1405において生成された音楽が閾値1410-1を超えることを示す。時間T2において、デバイス1400はロック解除され、ヘッドフォンデバイス1405における出力ボリュームが閾値を満たす/超過したときにホームスクリーンインタフェース1412を表示する。
図14Cを参照すると、閾値1410-1を超えるヘッドフォンデバイス1405における出力ボリュームに応答して、デバイス1400は、ボリュームインタフェース1414を表示し、任意選択的に、出力ボリュームが閾値を超えたことを示す可聴チャイム1413を生成する。ボリュームインタフェース1414は、現在のボリューム設定(例えば、100%)及び出力ボリュームが大きすぎることを示すラウドインジケータ1414-2の指示1414-1を含む。いくつかの実施形態では、デバイス1400は、ボリュームインタフェース1414がディスプレイ1402の縁部から画面上を移動するように見えるアニメーションとしてボリュームインタフェース1414を表示する。いくつかの実施形態では、ラウドインジケータ1414-2は、特定の条件が満たされたときに表示される。例えば、いくつかの実施形態では、ラウドインジケータ1414-2は、ボリューム設定が100%であり、ヘッドフォンデバイス1405における出力ボリュームが特定のボリューム(例えば、80dB、100dB、閾値ボリューム)を超える場合にのみ表示される。
図14A~図14Cでは、ヘッドフォンデバイス1405における出力ボリュームは、デバイス1400(又はヘッドフォンデバイス1405)のボリューム設定に対して任意の調整なしに(例えば、歌の静かな部分から歌の大きい部分へ)増加している。したがって、グラフ1410は、音楽の出力ボリュームが時間T1から時間T3まで上昇し続けることを示す。閾値1410-1を超える出力ボリュームの検出に応答して、デバイス1400は、図14Dに示すように、ボリューム設定を徐々に低減させる。いくつかの実施形態では、ボリューム低減は、閾値を超えるボリュームから閾値以下のボリュームへの急激な減少とすることができる。
図14Dでは、デバイス1400は、ボリューム設定1414-1を有するボリュームインタフェース1414(及びラウドインジケータ1414-2なし)で示されており、ヘッドフォンデバイス1405における出力ボリュームは、グラフ1410のボリューム1410-2によって示されるように、低下したボリューム設定に応答して低減される。更に、グラフ1410は、デバイス1400のボリューム設定が調整されないままである場合、デバイス1405における出力ボリュームが、予測されるボリューム1410-3によって示されるように、上昇し続け(又は、少なくとも露出閾値を超えたままであり)、ユーザの聴覚を潜在的に損傷することを示している。したがって、デバイス1400は、出力オーディオのボリューム設定(例えば、100%~80%)を自動的に低下させることによってユーザの聴覚を保護し、その結果、出力オーディオの結果として生じるボリュームは、閾値1410-1以下であり、したがって、ユーザの聴覚に対する潜在的な損傷を回避する。いくつかの実施形態では、ユーザは、デバイス1400のボリューム設定を増加させることによってボリュームの減少をオーバーライドすることができる。いくつかの実施形態では、ボリュームは、以前のボリューム設定(例えば、この例では100%)に戻るか、又は縮小されたボリューム設定よりも大きい設定(例えば、ボリューム設定が80%~90%増加する)に移動する。例えば、デバイス1200がボリュームを(ボリューム低減の3秒以内に)低減させた後の所定の時間量内でボリュームを増加させる入力をデバイス1200が検出する場合、デバイス1200は、ボリュームを前のボリューム設定に戻すようにボリュームを増加させる(例えば、図14Aの100%ボリューム設定)。しかしながら、デバイス1200が所定の時間量が経過した後にボリュームを増加させる入力を検出すると、デバイス1200は、ボリュームを、そうでなければボリューム増加コマンド(例えば、5%)に関連付けられる量だけ増加する。
いくつかの実施形態では、デバイス1400は、図14Cに示す最大設定から図14Dに示す設定まで低減するボリューム設定1414-1のアニメーションとして、図14Dのボリューム低減を表示する。いくつかの実施形態では、ボリューム低減は、メディア再生(例えば、音楽、ゲーム、及びビデオ)に適用されるが、システムサウンド、電話ボリューム、及びビデオチャットなどの他のサウンドソースには適用されない。
ボリューム設定を低減した後、デバイス1400は、出力オーディオのボリュームが低減したことをユーザに通知するアラートを生成する。図14E~図14Iは、そのようなアラートの例示的なインタフェースを提供する。
図14Eは、オーディオ露出閾値1410-1が瞬時オーディオ露出制限(例えば、最大ボリューム制限100dB)を表す実施形態を示し、デバイス1400は、100dBの瞬時オーディオ露出制限を超えるヘッドフォンデバイス1405の出力ボリュームに応答して、瞬時オーディオ露出アラート1416を生成する。本明細書に開示される実施形態では、瞬時オーディオ露出制限は100dBである。しかしながら、オーディオ露出制限は、異なる値とすることができる。
図14Eでは、ディスプレイ1402は、既にロック解除されており、デバイス1400は、ヘッドフォンデバイス1405における現在の出力ボリュームに基づいて、デバイス1400がユーザの聴覚を保護するためにヘッドフォンデバイス1405のボリュームを下げたことをユーザに通知する瞬時オーディオ露出アラート1416を表示する。瞬時オーディオ露出アラート1416は、オーディオを生成するメディアアプリケーション(メディアユーザインタフェース1408に関連付けられた)とは異なるデバイス1400のシステムレベルアプリケーションによって表示される。いくつかの実施形態では、デバイス1400は、バナー形式の通知として、瞬時オーディオ露出アラート1416を表示し、任意選択的に、アラートを表示する際に触覚フィードバック1417を生成する。
図14Fは、オーディオ露出閾値1410-1が、集約オーディオ露出制限-すなわち、例えば、過去7日間などの所定の期間にわたるユーザのヘッドフォンオーディオ露出の履歴に基づいて判定されるオーディオ露出の制限を表す実施形態を示す。したがって、デバイス1400は、集約オーディオ露出制限を超える7日間の期間にわたってユーザが露出したオーディオボリュームレベルの合計量に応答して、集約オーディオ露出アラート1418を生成する。いくつかの実施形態では、デバイス1400は、複数の集約オーディオ露出制限に到達したとき(例えば、集約オーディオ露出制限の200%、300%)、各インスタンスに対して後続の集約オーディオ露出アラート1418を生成する。
いくつかの実施形態では、集約オーディオ露出制限(本明細書では、集約オーディオ露出閾値とも呼ばれる)は、特定の期間(例えば、ローリング式の7日間のウィンドウ)にわたって測定されたときに、ユーザの聴覚(例えば、ユーザの聴覚システム)に有害ではない、最大量の集約オーディオ露出を表す。いくつかの実施形態では、集約オーディオ露出閾値は、以下の2つの主要な要因の組み合わせに基づいて、ローリング式の7日間のウィンドウについて判定される:ユーザがヘッドフォン(例えば、ヘッドフォンデバイス1405)を使用して聞くオーディオのボリューム、及び7日間の期間(例えば、7日の24分)の間にユーザがオーディオに露出される持続時間。したがって、ヘッドフォンで再生されるオーディオのボリュームが大きいほど、聴覚を損なうことなくユーザがオーディオに露出されることができる時間量が短くなる。同様に、ユーザがヘッドフォンオーディオに露出されるほど、ユーザが聴覚を損なうことなく、ユーザがオーディオを安全に聞くことができるボリュームが低くなる。例えば、7日間の期間にわたって、ユーザは、75dBで合計127時間オーディオを安全に聞くことができる。別の例として、7日間の期間にわたって、ユーザは、90dBで合計4時間オーディオを安全に聞くことができる。更に別の実施例として、7日間の期間にわたって、ユーザは、100dBで合計24分間オーディオを安全に聞くことができる。更に別の実施例として、7日間の期間にわたって、ユーザは、110dBで合計2分間オーディオを安全に聞くことができる。他のメトリックが、集約オーディオ露出閾値に使用されてもよいことを認識されたい。
図14Fでは、ディスプレイ1402は、既にロック解除されており、デバイス1400は、ユーザのオーディオ露出履歴に基づいて、デバイス1400が、ユーザの聴覚を保護するためにヘッドフォンデバイス1405のボリュームを下げたことをユーザに通知する集約オーディオ露出アラート1418を表示する。集約オーディオ露出アラート1418は、オーディオを生成するメディアアプリケーション(メディアユーザインタフェース1408に関連付けられた)とは異なるデバイス1400のシステムレベルアプリケーションによって表示される。いくつかの実施形態では、デバイス1400は、バナー形式の通知として、集約オーディオ露出アラート1418を表示し、任意選択的に、アラートを表示する際に触覚フィードバック1417を生成する。
図14G~図14Iは、オーディオ露出閾値1410-1に到達したときの、ディスプレイ1402が非アクティブである(例えば、デバイス1400がロックされている)実施形態を示す。図14Gに示すように、ヘッドフォンデバイス1405における出力オーディオが閾値を超えると、ディスプレイ1402は非アクティブであり、チャイム1413が任意選択的に生成される(図14Cと同様)。いくつかの実施形態では、チャイム1413を生成することに加えて、又はその代わりに、デバイス1400は、仮想アシスタントを使用してボリュームの変化を告知する。結果として生じるアラートは、オーディオ露出閾値1410-1が瞬時オーディオ露出閾値又は集約オーディオ露出閾値を表すかに応じて、図14H又は図14Iに表示される。図14Hは、オーディオ露出閾値1410-1が瞬時オーディオ露出閾値を表すときの、結果として生じる瞬時オーディオ露出アラート1416を示す。図14Iは、オーディオ露出閾値1410-1が集約オーディオ露出閾値を表すときの、結果として生じる集約オーディオ露出アラート1418を示す。
図14J~図14Lは、図14A~図14Iに関連して上述したものと同様であるが、デバイス1400をデバイス1401と置き換えた例示的な実施形態を示す。デバイス1401は、ディスプレイ1403(例えば、ディスプレイデバイス)と、回転可能且つ押下可能入力機構1404(例えば、デバイスの筐体又はフレームに対して回転可能且つ押圧可能である)と、マイクロフォン1406とを含む。いくつかの実施形態では、デバイス1401は、スマートウォッチなどのウェアラブル電子デバイスである。いくつかの実施形態では、デバイス1401は、デバイス100、300、500、又は1400の1つ以上の特徴を含む。いくつかの実施形態では、デバイス1401は、デバイス600と同じである。
図14Jでは、デバイス1401は、図14Aと同様に、ヘッドフォンデバイス1405に結合され、音楽を再生する。図14Kでは、ディスプレイ1403は、ヘッドフォンデバイス1405における音楽の出力ボリュームが、図14C及び図14Gと同様のオーディオ露出閾値1410-1を超えるときに非アクティブである。図14Lでは、デバイス1401は、出力ボリュームを低減し、図14D及び図14Iと同様の任意の触覚フィードバック1417を有する集約オーディオ露出アラート1418を表示する。いくつかの実施形態では、図14Lのアラートは、オーディオ露出閾値1410-1が瞬時オーディオ露出閾値を表すときに、瞬時オーディオ露出アラート1416である。いくつかの実施形態では、図14Lに示されるように、ボリュームを低減させている間にアラート(例えば、瞬時オーディオ露出アラート1416又は集約オーディオ露出アラート1418)が表示される。いくつかの実施形態では、アラートは、図14E及び図14Fに示されるように、ボリュームを低減させた後に表示される。いくつかの実施形態では、デバイス1401及びヘッドフォンデバイス1405は、双方ともデバイス1400に結合される(例えば、デバイス1401は、ヘッドフォンデバイス1405に直接接続されていない)。そのような実施形態では、ヘッドフォンデバイス1405がデバイス1401の代わりにデバイス1400に結合されていても、オーディオ露出アラート(例えば、アラート1416及びアラート1418)は、デバイス1401上ではなく(又は、いくつかの実施形態では、デバイス1400に表示されることに加えて)デバイス1400上に表示されることができる。同様に、デバイス1401はまた、ヘッドフォンデバイス1405がデバイス1401の代わりにデバイス1400に結合されるときに、以下により詳細に記載される、図14X及び図14Yに示されるインタフェースを表示することができる。
図14M~図14Wは、デバイス1400が、オーディオ露出設定を管理するためのユーザインタフェースを表示することを示す。
図14Mでは、デバイス1400は、瞬時オーディオ露出アラート1416上の入力1420(例えば、タップ入力)を検出し、それに応答して、図14Nに示すようなオーディオ設定インタフェース1422を表示する。いくつかの実施形態では、デバイス1400は、集約オーディオ露出アラート1418上の入力に応答してオーディオ設定インタフェース1422を表示する。
図14Nでは、オーディオ設定インタフェース1422は、最近生成されたアラート(例えば、図14Mのアラート)の指示1424-1を含む。図14Nでは、指示1424-1は、図14Mの瞬時オーディオ露出アラート1416に対応する。しかしながら、図14Mのアラートが集約オーディオ露出アラート1418である場合、その指示は、図14Oの指示1424-2によって示されるように、集約オーディオ露出アラートに対応する。
図14Nでは、オーディオ設定インタフェース1422は、現在無効化されている通知メニュー項目1425及び音低減メニュー項目1426を含む。デバイス1400は、音低減メニュー項目1426上の入力1428を検出し、それに応答して、図14Pの音低減インタフェース1430を表示する。
図14P~図14Rは、デバイス1400の音低減設定を変更するための例示的なユーザインタフェースを示す(本明細書では、「大きな音低減」設定とも呼ばれる)。音低減設定は、有効にされると、他の信号のボリュームを調整することなく(これらの他の信号が閾値を超えないと仮定して)、ヘッドフォンデバイス1405で生成された各音が、閾値で信号のピークボリュームを圧縮することによって、指定された閾値を超えることを防止する。いくつかの実施形態では、音低減設定を有効化することは、デバイス1400が、瞬時オーディオ露出閾値を超える出力オーディオ(例えば、ヘッドフォンデバイス1405で)を生成することを防止し、結果として、デバイス1400は、瞬時オーディオ露出アラート1416を生成するようにトリガされない。いくつかの実施形態では、音低減設定を有効化することは、ヘッドフォンデバイス1405で生成された最大出力ボリュームを低減し、これは、ユーザのリスニング習慣に応答して、集約オーディオ露出アラート1418をトリガする可能性を低減してもよい。
図14P~図14Rは、ヘッドフォンデバイス1405で生成された音楽の一部を形成する例示的なオーディオ信号のボリュームを表すオーディオチャート1435を含む。オーディオ信号は、経時的にボリュームが変化するS1、S2、及びS3を含む。図14P~図14Rは、音低減設定を有効化して調製することがどのようにして、ヘッドフォンデバイス1405で出力された異なる信号(例えば、信号S1、S2、及びS3)のピーク出力ボリュームに影響を及ぼすかを示す。
図14Pでは、音低減トグル1432はオフであり、音低減機能は無効にされている。したがって、オーディオチャート1435は、信号S1、S2、及びS3の全ボリューム(未変更)範囲で示されている。換言すれば、これらのそれぞれの信号のボリュームは、現在、音低減設定によって上限を定められていないか、又は制限されていない。
図14Pでは、デバイス1400は、音低減トグル1432上の入力1434を検出し、それに応答して、図14Qに示すように、音低減機能を有効化する。
音低減機能が有効化されると、デバイス1400は、最大音レベルユーザインタフェース1436を表示し、ヘッドフォンデバイス1405で生成されたオーディオの出力ボリュームに対応するボリューム制限を適用する。最大音レベルユーザインタフェース1436は、スライダ1436-1の数値制限説明1436-2、及びテキスト制限説明1436-3を含む。スライダ1436-1は、最大音レベルを設定するように調節可能である。数値制限説明1436-2は、制限の数値識別を提供する。テキスト制限説明1436-3は、制限の非数値説明を提供する。図14Qに示される実施例では、最大音レベルは、スライダ1436-1及び数値制限説明1436-2によって表されるように、100dBに設定される。テキスト制限説明1436-3は、この実施例では、100dB制限が「ボリュームとして大きい」であることを示す、最大音レベルの実世界コンテキストの説明を提供する。いくつかの実施形態では、デバイス1400は、ボリュームが閾値に近付くときに圧縮される(例えば、スケーリングされる)ように、ボリューム制限を実装する。例えば、増加するボリュームが閾値に近付くと、ボリュームは、閾値に到達することなくボリュームが増加し続けるようにスケーリングされる。
音低減機能が有効化されるため、オーディオチャート1435は、スライダ1436-1によって設定された100dBの最大音レベル値を有する出力制限1438を示すように変更される。オーディオチャート1435はまた、ヘッドフォンデバイス1405で生成されたオーディオ信号の出力ボリュームに対する対応する変化を示すように変更される。図14Qに示すように、最大音レベルは、100dBに制限され、これは信号S1がそのピーク値に到達することを制限する。したがって、信号S1は、100dB制限で上限を定められている。この実施例では、信号S1は、実際のボリューム(100dB制限以下のままである)を表す実線を有し、S1の予測出力ボリュームを表す破線S1A-すなわち、ヘッドフォンデバイス1405の出力ボリュームが調整されないままである場合に予測されるS1のボリュームを表す破線を有するように示されている。したがって、予測されるボリュームS1Aは、図14Pの信号S1に対応する。図14Qに示す例では、信号S2及びS3は、100dB制限に到達せず、したがって調整されていないままである。
図14Qでは、デバイス1400は、ディスプレイ1402を介して、スライダ1436-1上の入力1440(例えば、スライドジェスチャ)を検出し、それに応答して、図14Rに示すように、最大音レベルを90dBまで低下させる。
図14Rでは、最大音レベルは、スライダ1436-1、及び数値制限説明1436-2によって示されるように、90dBまで低減される。テキスト制限説明1436-3は、この実施例では、90dB制限が「オートバイのように大きい」ことを示す、最大音レベルの実世界コンテキストの説明を提供する。
オーディオチャート1435はまた、出力制限438の変更された値、及びヘッドフォンデバイス1405で生成されたオーディオ信号の出力ボリュームへの対応する変化を示すように変更される。図14Rに示すように、最大音レベル(出力制限438)は、90dBに制限され、これは、信号S1及びS2がそれらのそれぞれのピーク値に到達することを制限する。したがって、信号S1及びS2のボリュームは、90dBの制限で上限を定められている。この実施例では、信号S1及びS2は、双方とも、各信号の実際のボリューム(90dB制限以下のままである)を表すために、それぞれの実線を有するように示されている。信号S1は、S1の予測出力ボリュームを表す破線S1Aを有し、信号S2は、S2の予測出力ボリュームを表す破線S2Aを有し-すなわち、ヘッドフォンデバイス1405の出力ボリュームが調整されていない場合には、S2の予測ボリュームを表す。したがって、予測ボリュームS1Aは、図14Pの信号S1に対応し、予測されるボリュームS2Aは、図14P及び図14Qの信号S2に対応する。図14Rに示す例では、信号S3は、90dB制限に到達せず、したがって調整されていないままである。注目すべきことに、信号S2は、90dBの下限未満から始まり、約90dBで圧縮されるまで増加する。次いで、S2は、予測されるボリュームS2AがS2の実際のボリュームを満たすときに減少し、図14Pに示されるその元の経路に従って減少し続ける。
図14Rでは、デバイス1400は、入力1442を検出し、それに応答して、図14Sのオーディオ設定インタフェース1422を表示する。設定インタフェース1422は、図14Rで選択された現在の90dB制限を示すように更新された音低減メニュー項目1426を示す。
図14Sでは、デバイス1400は、通知メニュー項目1425上の入力1444を検出し、それに応答して、図14Tのヘッドフォン通知設定インタフェース1445を表示する。ヘッドフォン通知設定インタフェース1445は、瞬時オーディオ露出アラートトグル1446と、オーディオ露出アラートトグル1448とを含む。トグル1446及び1448は、それぞれの瞬時オーディオ露出制限及び集約オーディオ露出制限アラートを有効化及び無効化するように選択可能であり、現在図14Tで有効に示されている。
図14U~図14Wは、図14Uの通知1451を(例えば、入力1450を介して)選択し、図14Vの設定アフォーダンス1454を(例えば、入力1452を介して)選択することによって、音低減インタフェース1430にアクセスするための例示的なユーザインタフェースを示す。いくつかの実施形態では、通知1451は、任意選択的に、デバイス1400によって生成された2つのアラート(例えば、瞬時オーディオ露出アラート1416が集約オーディオ露出アラート1418)が生成された後に表示される。いくつかの実施形態では、図14Vに示されるユーザインタフェースは、任意選択的に表示される。
図14X及び図14Yは、デバイス1401を使用した図14N及び図14Qに示されるものと同様のオーディオ設定にアクセスするための例示的なユーザインタフェースを示す。図14Xでは、デバイス1401は、音低減メニュー項目1426と同様の音低減メニューアフォーダンス1456を含むノイズ設定インタフェース1455を表示する。デバイス1401は、ディスプレイ1403を介して、音低減メニューアフォーダンス1456上の入力1457を介して検出し、それに応答して、音低減インタフェース1430に類似する音低減インタフェース1458を表示する。
図14Z及び図14AAは、例えば、ユーザのデバイスの特定の設定を制御するために、ユーザのアカウントによって認可されている異なるユーザのアカウントに関連付けられたデバイスなどの異なるデバイスを使用して、音低減設定を設定するための例示的なユーザインタフェースを示す。例えば、デバイス1400は、ジョンと名付けられたユーザのアカウントに関連付けられ、図14Z及び図14AAのデバイス1400Aは、ジョンの母親のアカウントに関連付けられている。この例では、ジョンの母親のアカウントは、デバイス1400の設定を制御するためにジョンのアカウントによって認可されている。図14Zでは、デバイス1400Aは、コンテンツ及びプライバシー制限メニュー項目1462上の入力1460を検出し、それに応答して、音低減メニューオプション1464を含む、図14AAにおける様々な設定メニューオプションを表示する。音低減メニューオプション1464は、音低減メニュー項目1426と類似しており、音低減インタフェース1430と同様のインタフェースを使用してジョンのデバイス1400の音低減設定を制御するように選択可能である。
図14AB~図14ADは、「安全ヘッドフォンリスニング」資料を表示するための例示的なユーザインタフェースを示す。例えば、図14ABでは、デバイス1400は、瞬時オーディオ露出アラート1416上の入力1466(例えば、タップアンドホールドジェスチャ)を検出し(あるいは、入力は、集約オーディオ露出アラート1418上にあることができる)、それに応答して、図14ACにおけるオプション1468及びオプション1469を表示する。オプション1468は、図14ADの安全ヘッドフォンリスニング資料インタフェース1472を表示するために(例えば、入力1470を介して)選択可能である。オプション1469は、オーディオ設定インタフェース1422又はいくつかの実施形態では、音低減インタフェース1430を表示するために選択可能である。
図14AE~図14AHは、オーディオデバイス1405-1が有線接続を介してデバイス1400に結合されたときに表示される例示的なユーザインタフェースを示す。いくつかの実施形態では、オーディオデバイス1405-1は、未知の(例えば、未確認の)オーディオデバイスタイプを表す。図14AE~図14AHに示されるオーディオデバイス1405-1のグラフィックは、ヘッドフォンデバイスに類似しているが、オーディオデバイス1405-1は、ヘッドフォン以外のデバイスタイプとすることができることを理解されたい。例えば、オーディオデバイス1405-1は、外部スピーカであってもよい。しかしながら、いくつかの実施形態では、オーディオデバイス1405-1は、例えば、ヘッドフォンデバイス1405などのヘッドフォンデバイスであってもよい。いくつかの実施形態では、図14AE~図14AHのユーザインタフェースは、デバイス1400が接続されたデバイスを識別できないように、ドングル1474又は他の中間コネクタを使用して、オーディオデバイス1405-1がデバイス1400に結合されたときに表示される。
図14AEでは、ドングル1474を介したオーディオデバイス1405-1の接続の検出に応答して、デバイス1400は、接続されたデバイスがスピーカであるかどうかを識別するようにユーザに指示する通知1475を表示する。通知1475は、接続されたデバイスがスピーカであることを示すアフォーダンス1475-1と、接続されたデバイスがスピーカではないことを示すアフォーダンス1475-2と、デバイスがスピーカである場合には、ユーザが再度要求されたくないことを示すアフォーダンス1475-3と、を含む。デバイス1400がアフォーダンス1475-1の選択を検出すると、デバイス1400は、オーディオデバイス1405-1を非ヘッドフォンスピーカとみなすことができ、接続されたデバイスを使用して生成されたオーディオ露出データを記録しない。いくつかの実施形態では、アフォーダンス1475-1が選択された場合、デバイス1400は、ドングル1474を使用して所定の期間(例えば、7日)後に表示された通知を繰り返す。デバイス1400がアフォーダンス1475-2の選択を検出すると、デバイス1400は、オーディオデバイス1405-1をヘッドフォン(例えば、ヘッドフォンデバイス1405)とみなし、接続されたデバイスで生成されたオーディオ露出データを記録する。いくつかの実施形態では、アフォーダンス1475-2が選択された場合、デバイス1400は、ドングル1474が使用されている場合にも、通知1475を表示しない。デバイス1400がアフォーダンス1475-3の選択を検出すると、デバイス1400は、所定の期間(例えば、7日)の通知1475の表示を停止する。
いくつかの実施形態では、デバイス1400は、接続されたデバイスが接続されていると認識された第1の時間だけ通知1475を表示する(例えば、デバイスが組み込み識別子を有する場合)。いくつかの実施形態では、デバイス1400は、接続されたデバイスが接続されていると認識されるたびに通知1475を表示する(例えば、デバイスが組み込み識別子を有しない場合)。いくつかの実施形態では、デバイス1400は、接続されたデバイスがヘッドフォン以外のものとして明示的に識別されていないときに、通知1475を表示する。いくつかの実施形態では、デバイス1400のマイクロフォンが、接続されたデバイス上で再生されているオーディオに一致するオーディオを検出した場合、デバイス1400は、オーディオを非ヘッドフォンスピーカから自動的に検出する。
図14AF及び図14AGは、オーディオデバイスがドングル1474を介してデバイス1400に接続されているときにオーディオ設定インタフェース1422にアクセスするための例示的なユーザインタフェースを示す。図14AFでは、デバイス1400は、瞬時オーディオ露出アラート1416(又は代替的に、集約オーディオ露出アラート1418)上の入力1476(例えば、タップアンドホールドジェスチャ)を検出する。これに応答して、デバイス1400は、図14AGにおけるオプション1468、オプション1469、及びオプション1477を表示する。オプション1477は、接続されたデバイスが、アフォーダンス1475-1と同様の非ヘッドフォンスピーカであることを示すように選択可能である。
ここで図14AHを参照すると、いくつかの実施形態では、オーディオデバイスが、ドングル1474を介してデバイス1400に接続されているとき、オーディオ設定インタフェース1422は、接続されたデバイスがスピーカであるかどうかを示すためのスピーカトグル1478を更に含む。
ここで図14AIを参照すると、デバイス1400は、音楽がヘッドフォンデバイス1405で再生されている間に制御インタフェース1480を表示する。制御インタフェース1480は、オーディオ露出インジケータ1482を含む。いくつかの実施形態では、オーディオ露出インジケータ1482は、現在のオーディオ露出レベルに基づいて外観を変更する。例えば、図14AIでは、オーディオ露出インジケータ1482は、オーディオ露出レベルが安全であることを示すチェックマーク1482-1を含む(例えば、瞬時又は集約オーディオ露出閾値を超えない)。図14AJでは、オーディオ露出インジケータ1482は、オーディオ露出レベルが大きいことを示すハザード記号1482-2を含む。いくつかの実施形態では、オーディオ露出インジケータ1482はまた、現在のオーディオ露出レベルを示すために色を変化させる。例えば、オーディオ露出インジケータ1482は、図14AIにおいて緑色であってもよく、オーディオ露出インジケータ1482は、図14AJにおいて赤色であってもよい。いくつかの実施形態では、オーディオ露出インジケータ1482は、黄色又は橙色であり、大きいノイズが蓄積しているが、現在は大きすぎないことを示す。
図14AJでは、デバイス1400は、オーディオ露出インジケータ1482上の入力1484を検出し、それに応答して、図14AKにおけるオーディオ露出インタフェース1485を表示する。いくつかの実施形態では、オーディオ露出インタフェース1485は、接続されたヘッドフォンデバイス1405の識別1485-1、周囲オーディオアフォーダンス1485-2、及びオーディオ露出メーター1485-3を含む。オーディオ露出メーター1485-3は、ヘッドフォンデバイス1405で現在生成されているオーディオの出力ボリュームに基づいて、現在のオーディオ露出量のリアルタイム測定を提供する。周囲オーディオアフォーダンス1485-2は、ヘッドフォンデバイス1405が、マイクロフォン(例えば、デバイス1400、デバイス1401、又はヘッドフォンデバイス1405のマイクロフォン)から検出されたオーディオをヘッドフォンデバイス1405が増幅する設定をアクティブ化することが選択可能であり、ヘッドフォンデバイス1405で増幅された周囲オーディオを生成する。
図15は、いくつかの実施形態に係る、コンピュータシステムを使用したオーディオ露出制限アラートを表示するための方法を示すフロー図である。方法1500は、オーディオ生成構成要素(例えば、ヘッドフォン1405、コンピュータシステムに組み込まれたスピーカ)と通信する(例えば、電気的に結合された;有線又は無線接続を介した)コンピュータシステム(例えば、スマートフォン、スマートウォッチ)(例えば、デバイス100、300、500、600、601、800、900、1100、1200、1400、1401、1700)において実行される。いくつかの実施形態では、コンピュータシステムは、再生のためにオーディオデータをオーディオ生成構成要素に提供するように構成される。例えば、コンピュータシステムは、歌を再生するためのオーディオデータを生成し、歌のオーディオは、ヘッドフォンで再生される。方法1500のいくつかの動作は、任意選択的に組み合わされ、いくつかの動作の順序は、任意選択的に変更され、いくつかの動作は、任意選択的に省略される。
いくつかの実施形態では、電子デバイス(例えば、100、300、500、600、601、800、900、1100、1200、1400、1401、及び1700)は、コンピュータシステムである。コンピュータシステムは、任意選択的に、ディスプレイ生成構成要素と1つ以上の入力デバイスとの通信(例えば、有線通信、無線通信)である。ディスプレイ生成構成要素は、CRTディスプレイを介したディスプレイ、LEDディスプレイを介したディスプレイ、又は画像投影を介した表示などの視覚的な出力を提供するように構成されている。いくつかの実施形態では、ディスプレイ生成構成要素は、コンピュータシステムと一体化される。いくつかの実施形態では、ディスプレイ生成構成要素は、コンピュータシステムとは別個である。1つ以上の入力デバイスは、ユーザ入力を受けるタッチ感知面など、入力を受け取るように構成される。いくつかの実施形態では、1つ以上の入力デバイスは、コンピュータシステムと一体化される。いくつかの実施形態では、1つ以上の入力デバイスは、コンピュータシステムとは別個である。したがって、コンピュータシステムは、有線又は無線接続を介して、データ(例えば、画像データ又はビデオデータ)を、一体型又は外部のディスプレイ生成構成要素に送信して、(例えば、ディスプレイデバイスを使用して)コンテンツを視覚的に生成することができ、1つ以上の入力デバイスからの入力を、有線又は無線接続で受信することができる。
後述するように、方法1500は、例えば、オーディオ露出制限アラートを表示することによって、オーディオ露出を管理するための直感的方法を提供する。この方法は、オーディオ露出を管理するためのユーザの認知的負担を軽減し、それによってより効率的なヒューマン-マシンインタフェースを作り出す。バッテリ動作式のコンピューティングデバイスの場合には、ユーザがオーディオ露出をより高速且つより効率的に管理することを可能にすることにより、電力が節約され、バッテリ充電の間隔が増す。
方法1500では、オーディオ生成構成要素(例えば、1405)を介して、第1のボリューム(例えば、1410-2)でのオーディオデータの出力(例えば、図14Cのボリューム設定1414-1)を生じさせながら(例えば、コンピュータシステムは、オーディオデータ(例えば、音楽、ビデオゲームオーディオ、ビデオ再生オーディオ)をヘッドフォンに出力させている)、コンピュータシステム(例えば、1400、1401)は、オーディオ露出閾値基準(例えば、1410-1)が満たされたことを検出する(1502)。いくつかの実施形態では、オーディオ露出閾値基準は、オーディオ生成構成要素におけるオーディオデータ出力の音圧レベル(例えば、ボリューム)が第1の閾値(例えば、瞬時オーディオ露出閾値、瞬時ボリュームレベル)を超えるときに満たされる基準を含む。いくつかの実施形態では、露出閾値基準は、オーディオ生成構成要素(又はオーディオ生成構成要素を含むオーディオ生成構成要素の集合)におけるオーディオデータ出力の音圧レベルが、第1の期間にわたって第2の閾値を超える、又は(第1の期間よりも長い)第2の期間にわたって(第2の閾値レベルよりも低い)第3の閾値(例えば、集約露出閾値)を超えるときに満たされる基準を含む。いくつかの実施形態では、音圧レベルは、ボリューム設定(例えば、100%のボリューム)及びオーディオ生成構成要素の既知の応答(例えば、再生されている特定の信号に対して100%ボリュームで87dBのヘッドフォン出力))に基づいて推定される。
オーディオ露出閾値基準(例えば、1410-1)が満たされたことの検出に応答して(1504)、コンピュータシステム(例えば、1400、1401)は、(例えば、オーディオ生成構成要素における)オーディオデータの出力を継続させながら、オーディオデータの出力ボリュームを、第1のボリュームよりも小さい第2のボリュームに低減する(1506)(例えば、ボリューム1410-2は、図14C及び図14Dに示すように低減する)(例えば、ボリューム設定1414-1は、図14C及び図14Dに示されるように低減する)(例えば、ヘッドフォンでオーディオを再生し続けている間、システムは、オーディオの再生を停止することなく、出力オーディオのボリュームを自動的に低減する)。オーディオデータの出力を生じ続けながら、オーディオデータの出力のボリュームを第2のボリュームに低減させることは、例えば、ヘッドフォンの接続品質が悪いことによって引き起こされるエラーではなく、出力ボリュームの変化が意図的である旨のフィードバックをユーザに提供する。改善されたフィードバックを提供することにより、デバイスの操作性が向上し、(例えば、デバイスを操作する/デバイスと対話するときにユーザが適切な入力を行うのを支援しユーザの誤りを削減することによって)ユーザデバイスインタフェースがより効率的になり、このことにより更に、ユーザがデバイスをより迅速且つ効率的に使用可能になることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。いくつかの実施形態では、コンピュータシステムは、(例えば、出力ボリューム設定を介して、出力ボリュームを選択するためのユーザ入力を介して)指示され、要求された出力オーディオボリュームにおいてオーディオ生成構成要素においてオーディオデータを出力する。オーディオ露出閾値基準が満たされたことの検出に応答して、コンピュータシステムは、次に、オーディオデータのボリュームを、要求されたボリュームよりも小さい既定の出力オーディオボリュームに低減する。例えば、所定の出力オーディオボリュームは、オーディオ生成構成要素における履歴ボリュームレベルに基づいて(例えば、オーディオ生成構成要素における出力オーディオのボリュームの履歴に基づいて)、ユーザにとって安全である(例えば、出力ボリュームレベルは、ユーザの聴覚を損傷させない)と判定される最大出力ボリューム制限又は出力ボリュームレベルである。
いくつかの実施形態では、オーディオ露出閾値基準(例えば、1410-1)が満たされたことの検出に更に応答して、コンピュータシステム(例えば、1400、1401)は、オーディオ生成構成要素(例えば、1405)を介して、オーディオデータの出力のボリュームが低減されたことを示す可聴指標の出力(例えば、発話表示、発語出力)(いくつかの実施形態では、仮想アシスタントから)を生じさせる。オーディオデータの出力のボリュームが低減されたという可聴指標を出力させることは、例えば、ヘッドフォンの接続品質が悪いことによって引き起こされるエラーではなく、出力ボリュームの変化が意図的であるというフィードバックをユーザに提供する。改善されたフィードバックを提供することにより、デバイスの操作性が向上し、(例えば、デバイスを操作する/デバイスと対話するときにユーザが適切な入力を行うのを支援しユーザの誤りを削減することによって)ユーザデバイスインタフェースがより効率的になり、このことにより更に、ユーザがデバイスをより迅速且つ効率的に使用可能になることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
方法1500のいくつかの実施形態では、コンピュータシステム(例えば、1400、1401)は、オーディオデータの出力のボリュームが低減されたことを示す(例えば、アラートは、最近出力されたオーディオデータのボリュームが下がったことを示す)アラート(例えば、1416、1418)(例えば、通知、触覚応答、オーディオ応答、バナー)を出力する(1508)。オーディオデータの出力のボリュームが低減されたことを示すアラートを出力することは、例えば、ヘッドフォンの接続品質が悪いことによって引き起こされるエラーではなく、出力ボリュームの変化が意図的であるというフィードバックをユーザに提供する。改善されたフィードバックを提供することにより、デバイスの操作性が向上し、(例えば、デバイスを操作する/デバイスと対話するときにユーザが適切な入力を行うのを支援しユーザの誤りを削減することによって)ユーザデバイスインタフェースがより効率的になり、このことにより更に、ユーザがデバイスをより迅速且つ効率的に使用可能になることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、オーディオデータ(例えば、グラフ1410を使用してオーディオデータのボリュームが表される)は、コンピュータシステム(例えば、1400、1401)で動作するアプリケーション(例えば、メディアユーザインタフェース1408に関連付けられたメディアアプリケーション)(例えば、アプリケーション136(音楽アプリケーション、ビデオアプリケーション、ゲームアプリケーション)(非オペレーティングシステムソフトウェアアプリケーション)から生成され、アラート(例えば、1416、1418)は、コンピュータシステムのシステム制御(例えば、オペレーティングシステム制御)構成要素(例えば、オペレーティングシステム126、触覚フィードバックモジュール133、グラフィックモジュール132)から生成される(例えば、図14E及び図14Fは、デバイス1400の音及び触覚モジュールによってアラート1416及び1418が生成されることを示す)。コンピュータシステムのシステム制御構成要素からアラートを生成することは、例えばメディアアプリケーションによって引き起こされるエラーではなく、出力ボリュームの変化が意図的であるというフィードバックをユーザに提供する。改善されたフィードバックを提供することにより、デバイスの操作性が向上し、(例えば、デバイスを操作する/デバイスと対話するときにユーザが適切な入力を行うのを支援しユーザの誤りを削減することによって)ユーザデバイスインタフェースがより効率的になり、このことにより更に、ユーザがデバイスをより迅速且つ効率的に使用可能になることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、コンピュータシステム(例えば、1400、1401)は、ディスプレイ生成構成要素(例えば、1402、1403)(例えば、視覚出力デバイス、3Dディスプレイ、透過ディスプレイ、プロジェクタ、ヘッドアップディスプレイ、ディスプレイコントローラ、ディスプレイデバイス)と通信する。いくつかの実施形態では、コンピュータシステムは、ディスプレイ生成構成要素を更に備える。いくつかの実施形態では、アラート(例えば、1416、1418)を出力することは、オーディオ露出閾値基準(例えば、1410-1)(例えば、トグル1446に関連付けられた瞬時オーディオ露出閾値)が第1のタイプのものであるとの判定に従って、コンピュータシステムが、ディスプレイ生成構成要素を介して、第1のタイプのオーディオ露出閾値に対応する第1の通知(例えば、1416)(例えば、瞬時オーディオ露出閾値に達したことを示すテキストを含む通知)を表示することを更に含む。いくつかの実施形態では、アラートを出力することは、オーディオ露出閾値基準が第1のタイプとは異なる第2のタイプである(例えば、トグル1448に関連付けられた集約オーディオ露出閾値)との判定に従って、コンピュータシステムが、ディスプレイ生成構成要素を介して、第2のタイプのオーディオ露出閾値に対応し且つ第1の通知とは異なる第2の通知(例えば、1418)を表示する(例えば、集約オーディオ露出閾値に到達したことを示すテキストを含む通知)ことを更に含む。オーディオ露出閾値のタイプに対応する表示された通知を含むアラートを出力することは、異なる条件に対してボリュームが低減された理由を示すフィードバックをユーザに提供し、ユーザがボリューム低減の目的をより容易且つ迅速に理解及び認識することを可能にする。これは、ユーザがボリュームを上げることを思いとどまらせる可能性があり、それによって、後続のボリューム増加のためのコマンドに関連する入力を排除又は低減する。入力を低減し且つ改善されたフィードバックを提供することにより、デバイスの操作性が向上し、(例えば、デバイスを操作する/デバイスと対話するときにユーザが適切な入力を行うのを支援しユーザの誤りを削減することによって)ユーザデバイスインタフェースがより効率的になり、このことにより更に、ユーザがデバイスをより迅速且つ効率的に使用可能になることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。いくつかの実施形態では、第1の通知又は第2の通知は、オーディオデータの出力のボリュームを低減した後又は同時に表示される。いくつかの実施形態では、アラートを出力することは、可聴チャイム(例えば、1413)を生成することを含む。いくつかの実施形態では、チャイムは、それぞれの第1の通知又は第2の通知の前に、又はそれと同時に出力される。
いくつかの実施形態では、コンピュータシステム(例えば、1400、1401)は、ディスプレイ生成構成要素(例えば、1402、1403)(例えば、視覚出力デバイス、3Dディスプレイ、透過ディスプレイ、プロジェクタ、ヘッドアップディスプレイ、ディスプレイコントローラ、ディスプレイデバイス)と通信する。いくつかの実施形態では、コンピュータシステムは、ディスプレイ生成構成要素を更に備える。いくつかの実施形態では、コンピュータシステムは、アラートに向けられた入力(例えば、アラート1416上の入力1420)(例えば、アラート1418上の入力)(例えば、ディスプレイ生成構成要素上に表示された通知上のタッチ入力(例えば、通知1451上の入力1450))を受信し、アラートに向けられた入力の受信後(例えば、応答して)、コンピュータシステムは、ディスプレイ生成構成要素を介して、オーディオデータの出力(例えば、現在及び/又は将来の(予測される)オーディオデータの出力)(例えば、設定インタフェース、「大きい音の低減」ユーザインタフェース(音低減インタフェース))の出力を制御することに対応するボリューム制限コントロール(例えば、1422、1430)を表示する。いくつかの実施形態では、アラートは、集約オーディオ露出制限通知(例えば、1418)又は瞬時オーディオ露出制限通知(例えば、1416)を表示することを含む。いくつかの実施形態では、集約又は瞬時オーディオ露出制限通知上の入力を検出した後、コンピュータシステムは、ディスプレイ生成構成要素を介して、ボリュームコントロールを含むボリューム設定UIを表示する。いくつかの実施形態では、アラートは、(例えば、2つのアラートが以前に生成された後に)チップバナーを表示することを含む。いくつかの実施形態では、チップバナー上の入力を検出した後、コンピュータシステムは、「大きい音の低減」トグルアフォーダンス(例えば、1432)を含むボリューム制限コントロールを表示する。
いくつかの実施形態では、ボリューム制限コントロール(例えば、1430)は、選択されたときに、選択可能な閾値(例えば、1410-1)(例えば、コンピュータシステムを使用して設定されるか、又は、ウェアラブルデバイス若しくはマスターデバイス(例えば、コンピュータシステムのボリューム制限を設定することが許可された親デバイス)などの外部コンピュータシステムによって設定されるボリューム制限)を超える出力オーディオ信号の予測出力ボリュームを低減する(例えば、将来の出力ボリューム(例えば、ボリューム1410-2は、その予測ボリューム1410-3と比較されたときに低減される))プロセスの状態をトグルする(例えば、有効化又は無効化する)アフォーダンス(例えば、1432)(例えば、グラフィカルユーザインタフェースオブジェクト)(例えば、大きな音低減アフォーダンス、低減音レベルメニューオプション)を含む。いくつかの実施形態では、第1のボリュームでのオーディオデータの出力が選択可能閾値を超えると、オーディオ露出閾値基準が満たされる(例えば、図14Bを参照)。いくつかの実施形態では、選択可能な閾値は瞬時音圧値である。
いくつかの実施形態では、ボリューム制限コントロール(例えば、1422)を表示することは、1)集約音圧制限の通知(例えば、1424-2)(例えば、集約オーディオ露出制限に到達したことを示す通知)、及び2)瞬時音圧制限の通知(例えば、1424-1)(例えば、瞬時オーディオ露出制限に到達したことを示す通知)のうちの少なくとも1つを表示することを含む。集約音圧制限又は瞬時音圧制限の通知を含むボリューム制限コントロールを表示することは、異なる条件についてボリュームが低減された理由を示すフィードバックをユーザに提供し、ユーザがボリューム低減の目的をより容易且つ迅速に理解して認識することを可能にする。これは、ユーザがボリュームを上げることを思いとどまらせる可能性があり、それによって、後続のボリューム増加のためのコマンドに関連する入力を排除又は低減する。入力を低減し且つ改善されたフィードバックを提供することにより、デバイスの操作性が向上し、(例えば、デバイスを操作する/デバイスと対話するときにユーザが適切な入力を行うのを支援しユーザの誤りを削減することによって)ユーザデバイスインタフェースがより効率的になり、このことにより更に、ユーザがデバイスをより迅速且つ効率的に使用可能になることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、ボリューム制限コントロール(例えば、1422)を表示することは、選択されたときに、ヘッドフォン以外(例えば、非ヘッドフォン(例えば、非耳の外部スピーカ、スタンドアロンスピーカ))のオーディオ生成構成要素としてオーディオ生成構成要素(例えば、1405)を分類(例えば、識別)するためのプロセスを開始するアフォーダンス(例えば、1478)(例えば、スピーカトグルアフォーダンス)表示することを更に含む。いくつかの実施形態では、アフォーダンスは、オーディオ生成構成要素がコンピュータシステムに結合される(例えば、物理的に結合される)ときに表示され(例えば、オーディオ生成構成要素がコンピュータシステムにプラグインされる)、オーディオ生成構成要素がコンピュータシステムに結合されていない場合には表示されない。デバイスがコンピュータシステムに結合されているかどうかに応答して、ヘッドフォン以外のオーディオデバイスとして、オーディオ生成構成要素を分類するためのアフォーダンスを表示することは、必要とされない場合に、追加の制御を使用してユーザインタフェースを乱すことなく、オーディオ生成構成要素を識別するための追加の制御を提供する。追加の制御によりユーザインタフェースを雑然とさせることなく追加の制御オプションを提供することにより、デバイスの操作性が改善され、ユーザデバイスインタフェースを(例えば、デバイスを操作/対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)更に効率的にし、加えて、ユーザがデバイスを更に迅速且つ効率的に使用することを可能にすることによってデバイスの電力使用を削減し、バッテリ寿命を改善する。
いくつかの実施形態では、ボリューム制限コントロール(例えば、1430)は、選択されたときに、オーディオ露出閾値基準(例えば、オーディオ露出閾値基準が満たされたときを判定するために使用される選択可能閾値)(例えば、コンピュータシステムを使用して設定されるか、又はウェアラブルデバイス若しくはマスターデバイス(例えば、コンピュータシステムのボリューム制限を設定することを認可された親デバイス)などの外部コンピュータシステムによって設定される)を調整するためのプロセスを開始するアフォーダンス(例えば、スライダ1436-1)を含む。オーディオ露出閾値基準を調整するためのアフォーダンスを表示することは、ユーザが、複数のユーザインタフェースをナビゲートする必要なく、オーディオ閾値を迅速且つ容易に調整することを可能にする。動作を実行するために必要な入力の数が減ることにより、デバイスの操作性が高められ、ユーザデバイスインタフェースを(例えば、デバイスを操作する/デバイスと対話するときにユーザが適切な入力を行うのを支援し、ユーザの誤りを削減することによって)より効率的にし、加えて、ユーザがデバイスをより迅速且つ効率的に使用できるようにすることによって、デバイスの電力使用が抑えられ、バッテリ寿命が改善される。いくつかの実施形態では、スライダは、「大きな音低減」アフォーダンス(例えば、1432)がアクティブ化されたときに表示される。いくつかの実施形態では、選択可能閾値は、図16に関して以下により詳細に説明するように、出力オーディオデータを含む残りのオーディオ信号を調整することなく、出力オーディオデータを含むオーディオ信号のボリューム制限を設定し、それにより、ボリューム制限を超えることが予測される個々のオーディオ信号が、それらのピークで圧縮されて、選択された閾値を超えないようにする。
いくつかの実施形態では、第1のボリュームでのオーディオデータの出力(例えば、グラフ1410に関連付けられたヘッドフォンデバイス1405におけるオーディオ出力)(例えば、オーディオデータの現在の出力及び/又はオーディオデータの予測出力)(例えば、ある期間にわたるオーディオデータの出力の平均値)が瞬時音圧値を超える(例えば、ボリューム1410-2が図14Bの閾値1410-1を超え、閾値1410-1が瞬時オーディオ露出制限である)(例えば、100dB、最大dB制限)ときにオーディオ露出閾値基準が満たされる。いくつかの実施形態では、第1のボリュームでのオーディオデータの出力が所定の期間(例えば、現在時刻の直前のローリング期間(例えば、30秒))にわたって瞬時音圧値を超えるときに、オーディオ露出閾値基準が満たされる。いくつかの実施形態では、オーディオ露出閾値は、瞬時オーディオ露出閾値であり、オーディオ露出基準は、瞬時オーディオ露出制限(例えば、瞬時ボリューム制限(例えば、例えば、75~100dB範囲から選択されるdB制限などの瞬時dB)を判定するための基準である。例えば、ボリューム制限が100dBである場合、オーディオ露出制限は、出力オーディオデータのボリューム(音圧値)が100dBに到達した瞬間に到達する。いくつかの実施形態では、瞬時ボリューム制限は、例えば30秒(又はそれ未満)などの短いローリング時間にわたって計算された平均オーディオ露出(例えば、100dB)である。この実施例では、30秒のウィンドウにわたる平均ボリューム(音圧値)が100dB以上であるときに、オーディオ露出制限に到達する。この実施形態では、短いローリング時間期間を使用することにより、ユーザは、アラート(例えば、1416)をトリガすることなく、大きい出力ボリューム(例えば、100dB以上)を安全なレベル(例えば、ボリューム制限よりも小さいボリューム)に迅速に調整することができる。
いくつかの実施形態では、オーディオデータの出力の集約音圧値(例えば、グラフ1410に関連付けられたヘッドフォンデバイス1405におけるオーディオ出力)(例えば、オーディオデータの現在の出力及び/又はオーディオデータの予測出力)が、所定の期間(例えば、7日)(例えば、日、週、瞬時露出制限を判定するために使用される時間量よりも実質的に長い期間)にわたって測定された持続時間(例えば、24分、ボリュームが100dBである場合)(例えば、所定の期間にわたって測定されたときに閾値がユーザの聴覚に安全である持続時間)(例えば、7日間の期間の24分))だけ閾値(例えば、dB制限、集約音圧制限)を超えるときに、オーディオ露出閾値基準が満たされる。いくつかの実施形態では、オーディオ露出閾値は、集約オーディオ露出閾値であり、オーディオ露出基準は、(例えば、日又は週などの期間にわたって測定された、例えば出力オーディオのボリュームへの集約露出)に到達したと判定するための基準である。いくつかの実施形態では、オーディオ生成構成要素(又はオーディオ生成構成要素を含むオーディオ生成構成要素の集合)におけるオーディオデータ出力の集合音圧レベル(ボリューム)が、第1の持続時間(例えば、期間)だけ第1の閾値レベルを超える、又は第2の持続時間(第1の持続時間よりも長い)だけ第2の閾値レベル(第1の閾値レベルよりも低い)を超えるときに、オーディオ露出閾値基準(例えば、集約オーディオ露出制限)が満たされる。例えば、出力オーディオデータの集約ボリュームが、7日間の期間にわたって測定された4時間の期間にわたって90dBのボリュームを含むとき、又は出力オーディオデータの集約ボリュームが、7日間の期間にわたって測定された24分の期間にわたって100dBのボリュームを含む場合に、集約オーディオ露出制限に到達する。いくつかの実施形態では、集約音圧値は、瞬時音圧値の集約などの平均値の集約とすることができる。
いくつかの実施形態では、オーディオ露出閾値基準が満たされたことを検出した後、コンピュータシステム(例えば、1400、1401)は、以下を実行する。オーディオ生成構成要素(例えば、1405)を介して、第3のボリュームで第2のオーディオデータ(例えば、ヘッドフォンデバイス1405で生成されたオーディオ)を生じさせながら、コンピュータシステムは、第2のオーディオデータの出力の集約音圧値(例えば、第2のオーディオデータの現在の出力及び/又は第2のオーディオデータの予測出力)が、所定期間(例えば、所定期間(例えば、日、週)の集約露出制限の200%、300%)にわたって、集約オーディオ露出閾値の所定の乗数(例えば、1x、2x)を超えることを検出する。第2のオーディオデータの出力の集約音圧値が、所定の期間にわたる集約オーディオ露出閾値の所定の乗数を超えることの検出に応答して、コンピュータシステムは、以下を実行する:1)第2のオーディオデータの出力を生じさせ続けながら、第2のオーディオデータの出力のボリュームを第3のボリュームよりも低い第4のボリュームに低減する(例えば、図14C及び図14Dのボリューム1410-2が低減される)(いくつかの実施形態では、第4のボリュームは第2のボリュームと同じである)、及び2)第2のオーディオデータの出力のボリュームが低減されたことを示す第2のアラート(例えば、1418)を出力する。いくつかの実施形態では、集約露出制限に到達したとき、及び集約露出制限が所与の乗数又は割合(例えば、100%、200%)を超えた各インスタンスについて、ボリュームは、安全ボリュームレベルまで低減され、アラート(例えば、1418)は、ボリュームが低減したことを示す出力である。いくつかの実施形態では、アラート及びボリュームの低減は、各100%制限で1日1回実行されるように制限される。例えば、アラート及びボリュームの低減は、集約制限の100%に到達した時点で1日1回、集約制限の200%に到達した時点で1日1回、集約制限の300%に到達した時点で1日1回だけ行われ、以下同様に続く。いくつかの実施形態では、同じアラート(例えば、1418)は、集約露出制限を超える各インスタンスに対して出力される。
いくつかの実施形態では、オーディオデータの出力のボリュームを第2のボリュームに低減すること(例えば、図14C及び図14Dを参照)は、徐々に(例えば、漸増的に、第1のボリュームと第2のボリュームとの間の第3及び第4のボリュームでオーディオデータが出力され、第3のボリュームが第1、第2、及び第4のボリュームとは異なり、第4のボリュームが第1及び第2のボリュームとは異なるように)第1のボリュームから第2のボリュームに低減することを含む。いくつかの実施形態では、ボリュームの低減は、第1のボリュームから第2のボリュームへの瞬間的な低減ではなく、漸進的低減である。例えば、ボリュームは、1秒又は2秒のウィンドウ上で、第1のボリュームから第2のボリュームまで滑らかに低減する。いくつかの実施形態では、低減されるボリュームは、システム上で動作する特定のアプリケーションのボリュームのみではなく、コンピュータシステムのマスタボリューム(例えば、システムによって制御されるアプリケーション又は設定の集合のためのボリューム設定)である。オーディオデータの出力のボリュームを第2のボリュームに徐々に低減させることは、例えば、ヘッドフォンの接続品質が悪いことによって引き起こされるエラーではなく、出力ボリュームの変化が意図的であるというフィードバックをユーザに提供する。改善されたフィードバックを提供することにより、デバイスの操作性が向上し、(例えば、デバイスを操作する/デバイスと対話するときにユーザが適切な入力を行うのを支援しユーザの誤りを削減することによって)ユーザデバイスインタフェースがより効率的になり、このことにより更に、ユーザがデバイスをより迅速且つ効率的に使用可能になることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、コンピュータシステム(例えば、1400、1401)は、ディスプレイ生成構成要素(例えば、1402、1403)(例えば、視覚出力デバイス、3Dディスプレイ、透過ディスプレイ、プロジェクタ、ヘッドアップディスプレイ、ディスプレイコントローラ、ディスプレイデバイス)と通信する。いくつかの実施形態では、コンピュータシステムは、ディスプレイ生成構成要素を更に備える。いくつかの実施形態では、オーディオ露出閾値基準(例えば、1410-1)が満たされたことの検出に応答して、コンピュータシステムは、ディスプレイ生成構成要素を介して、オーディオデータ(例えば、ヘッドフォンデバイス1405で生成されたオーディオ)の出力のボリュームの表現(例えば、ボリュームインタフェース1414)を表示する(例えば、第1のボリュームに対応する第1のボリューム設定(例えば、図14Cの1414-1)を有するか、又は第2のボリュームに対応する第2のボリューム設定(例えば、図14Dの1414-2)を有する)。いくつかの実施形態では、ディスプレイ生成構成要素がアクティブ(例えば、ロック解除)状態にあるときに、ボリュームインジケータ(例えば、1414)が表示される(例えば、図14C及び図14Dを参照)。いくつかの実施形態では、ディスプレイ生成構成要素が非アクティブ(例えば、ロックされた)状態にあるときに、ボリュームインジケータは表示されない(例えば、図14Gを参照)。オーディオデータの出力のボリュームの表現を表示することは、例えば、ヘッドフォンの接続品質が悪いことによって引き起こされるエラーではなく、出力ボリュームの変化が意図的であるというフィードバックをユーザに提供する。改善されたフィードバックを提供することにより、デバイスの操作性が向上し、(例えば、デバイスを操作する/デバイスと対話するときにユーザが適切な入力を行うのを支援しユーザの誤りを削減することによって)ユーザデバイスインタフェースがより効率的になり、このことにより更に、ユーザがデバイスをより迅速且つ効率的に使用可能になることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、オーディオデータ(例えば、1414)の出力のボリュームの表現は、所定の安全基準(例えば、大きい)出力ボリューム(例えば、1410-1)を超えるボリュームを示すグラフィカル要素(例えば、1414-2)を含む。ボリュームが出力ボリュームに対する所定の安全基準を超えることを示すグラフィカル要素を含むボリュームの表現を表示することは、ボリュームが低減した理由を示すフィードバックをユーザに提供し、ユーザがボリューム低減の目的をより容易且つ迅速に理解して認識することを可能にする。これは、ユーザがボリュームを後に上げることを思いとどまらせる可能性があり、それによって、後続のボリューム増加のためのコマンドに関連する入力を排除又は低減する。入力を低減し且つ改善されたフィードバックを提供することにより、デバイスの操作性が向上し、(例えば、デバイスを操作する/デバイスと対話するときにユーザが適切な入力を行うのを支援しユーザの誤りを削減することによって)ユーザデバイスインタフェースがより効率的になり、このことにより更に、ユーザがデバイスをより迅速且つ効率的に使用可能になることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。いくつかの実施形態では、グラフィカル要素は、ボリュームインジケータの上方に表示される。いくつかの実施形態では、グラフィカル要素は、現在の出力ボリュームがボリュームインジケータで表される最大ボリューム設定にあり、出力オーディオのボリュームが閾値ボリューム(例えば、80dB)よりも大きい場合に表示される。
いくつかの実施形態では、オーディオデータの出力のボリューム(例えば、1414)の表現を表示することは、第1のボリュームに対応する第1の視覚的状態(例えば、図14Cの1414-1)から第2のボリュームに対応する第2の視覚的状態(例えば、図14Dの1414-1)に遷移するオーディオデータの出力のボリュームの表現のアニメーションを表示することを含み、アニメーションは、(1)第1の視覚的状態及び(2)第2の視覚的状態とは異なる少なくとも1つの視覚的状態(例えば、中間状態)を含む。
いくつかの実施形態では、コンピュータシステム(例えば、1400、1401)は、第2のオーディオ生成構成要素(例えば、図14AE~図14AHの1405-1)と通信する。いくつかの実施形態では、第2のオーディオ生成構成要素を介して、第5のボリュームで第3のオーディオデータを出力させる間、第2のオーディオ生成構成要素が第1のタイプのオーディオ生成構成要素(例えば、非ヘッドフォン(例えば、非耳の外部スピーカ、スタンドアロンスピーカ))であることに従って、コンピュータシステムは、第5のボリュームでオーディオデータ(例えば、第3のオーディオデータ)の出力を継続する(例えば、第3のオーディオデータの出力がオーディオ露出閾値基準を満たすかどうかにかかわらず、出力を継続する)。いくつかの実施形態では、第2のオーディオ生成構成要素を介して、第5のボリュームで第3のオーディオデータを出力させる間、第2のオーディオ生成構成要素が第2のタイプのオーディオ生成構成要素(例えば、ヘッドフォン(例えば、耳内又は外耳)、第1のタイプではないデバイス)であることに従って、及びオーディオ露出閾値基準が満たされた(例えば、ボリューム1410-2は、図14Bの閾値1410-1に到達する)との判定に従って、コンピュータシステムは、以下を実行する:1)第3のオーディオデータの出力を(例えば、オーディオ生成構成要素で)生じさせ続ける間に、コンピュータシステムは、オーディオデータ(例えば、第3のオーディオデータ)のボリュームを第5のボリュームよりも低い第6のボリュームに低減する(例えば、ボリューム1410-2が図14C及び図14Dにおいて低減する)(例えば、オーディオをヘッドフォンで再生し続ける間、システムは、オーディオの再生を停止することなく、出力オーディオのボリュームを自動的に低減する)、2)オーディオデータの出力のボリューム(例えば、第3のオーディオデータ)が低減されたことを示す第3のアラート(例えば、1416-1418)(例えば、通知、触覚応答、オーディオ応答、バナー)を出力する。第3のオーディオデータの出力を生じ続けながら出力ボリュームを低減させること、及びボリュームが低減されたことを示すユーザへのフィードバックを出力することは、ボリュームが低減された理由及びボリューム低減が意図的であったことを示すフィードバックをユーザに提供し、ボリューム低減の目的をより容易且つ迅速に理解して認識することを可能にする。これは、ユーザがボリュームを上げることを思いとどまらせる可能性があり、それによって、後続のボリューム増加のためのコマンドに関連する入力を排除又は低減する。入力を低減し且つ改善されたフィードバックを提供することにより、デバイスの操作性が向上し、(例えば、デバイスを操作する/デバイスと対話するときにユーザが適切な入力を行うのを支援しユーザの誤りを削減することによって)ユーザデバイスインタフェースがより効率的になり、このことにより更に、ユーザがデバイスをより迅速且つ効率的に使用可能になることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。いくつかの実施形態では、コンピュータシステムは、(例えば、出力ボリューム設定を介して、出力ボリュームを選択するためのユーザ入力を介して)指示され、要求された出力オーディオボリュームにおいてオーディオ生成構成要素においてオーディオデータを出力する。オーディオ露出閾値基準が満たされたことの検出に応答して、コンピュータシステムは、次に、オーディオデータのボリュームを、要求されたボリュームよりも小さい既定の出力オーディオボリュームに低減する。例えば、所定の出力オーディオボリュームは、オーディオ生成構成要素における履歴ボリュームレベルに基づいて(例えば、オーディオ生成構成要素における出力オーディオのボリュームの履歴に基づいて)、ユーザにとって安全である(例えば、出力ボリュームレベルは、ユーザの聴覚を損傷させない)と判定される最大出力ボリューム制限又は出力ボリュームレベルである。
いくつかの実施形態では、コンピュータシステム(例えば、1400、1401)が第1の時間に第2のオーディオ生成構成要素(例えば、1405-1)と通信する(例えば、結合されている、第2のオーディオ生成構成要素がコンピュータシステムにプラグインされている)との判定に従って、コンピュータシステムは、コンピュータシステムのユーザに、第2のオーディオ生成構成要素のオーディオ生成構成要素タイプを示すように促す(例えば、1475)(例えば、スピーカ又はスピーカではないとして第2のオーディオ生成構成要素を識別するようにユーザに要求する通知を表示する)。いくつかの実施形態では、コンピュータシステムが後続時間に第2のオーディオ生成構成要素と通信するとの判定に従って、コンピュータシステムは、コンピュータシステムのユーザに、第2のオーディオ生成構成要素のオーディオ生成構成要素タイプを示すように促す。後続時間ではなく第1の時間にコンピュータシステムと通信するときに、ユーザにオーディオ生成構成要素のオーディオ生成構成要素タイプを示すように促すことは、ユーザが、ユーザに過度に促すことなくデバイスタイプを示すことを可能にし、それによって、後続のプロンプトへの入力を排除することができる。入力の数が更に減ることにより、デバイスの操作性が高められ、ユーザデバイスインタフェースを(例えば、デバイスを操作する/デバイスと対話するときに適切な入力をもたらすようにユーザを支援し、ユーザの誤りを減らすことによって)より効率的にし、加えて、ユーザがデバイスをより迅速且つ効率的に使用できるようにすることによって、デバイスの電力使用が抑えられ、バッテリ寿命が改善される。いくつかの実施形態では、コンピュータシステムは、オーディオ生成構成要素がコンピュータシステムに接続される第1の時間にオーディオ生成構成要素がヘッドフォン又は非ヘッドフォンスピーカであるかを示すようにユーザに促すが、オーディオ生成構成要素が内蔵識別子を有する場合には、その後には促さない。
いくつかの実施形態では、第2のオーディオ生成構成要素(例えば、1405-1)との通信を確立する(例えば、結合、第2のオーディオ生成構成要素は、コンピュータシステムにプラグインされる)ことに応答して、コンピュータシステム(例えば、1400、1401)は、第2のオーディオ生成構成要素のオーディオデバイスタイプを示すようにコンピュータシステムのユーザに促す(例えば、1475)(例えば、第2のオーディオ生成構成要素をスピーカとして識別するか又はスピーカではないとして識別するかをユーザに要求する通知を表示する)。いくつかの実施形態では、オーディオ生成構成要素が内蔵識別子を有しない場合には、コンピュータシステムは、オーディオ生成構成要素がコンピュータシステムに接続されるたびにオーディオ生成構成要素がヘッドフォン又は非ヘッドフォンスピーカであるかを示すようにユーザに促す。
いくつかの実施形態では、コンピュータシステム(例えば、1400、1401)は、オーディオ入力デバイス(例えば、1406)(例えば、マイクロフォン)を含む。いくつかの実施形態では、コンピュータシステムは、オーディオ入力デバイスにおいて受信された入力に基づいて、第2のオーディオ生成構成要素(例えば、1405-1)のオーディオ生成構成要素タイプを検出し、その一方で、コンピュータシステムは、第2のオーディオ生成構成要素を介してオーディオデータの出力を発生させる。いくつかの実施形態では、コンピュータシステムのマイクロフォンが、オーディオに一致するオーディオを検出した場合に、コンピュータシステムは、オーディオ生成構成要素がスピーカであることを自動的に検出し、コンピュータシステムは、オーディオ生成構成要素において出力させる。
いくつかの実施形態では、コンピュータシステム(例えば、1400、1401)が第2のオーディオ生成構成要素(例えば、1405-1)と通信する間に、コンピュータシステムは、オーディオ設定インタフェースを表示せよとの要求に対応する第1の入力(例えば、1476、1469上の入力)を検出し、第1の入力の検出に応答して、コンピュータシステムは、オーディオ設定インタフェース(例えば、図14AHの1422)を表示し、オーディオ設定インタフェースは、選択されたときに、第1のタイプのオーディオ生成構成要素(例えば、非ヘッドフォン(例えば、非耳の外部スピーカ、スタンドアロンスピーカ))として第2のオーディオ生成構成要素を分類する(例えば、識別する)ためのプロセスを開始するアフォーダンス(例えば、1478)(例えば、スピーカトグルアフォーダンス)を含む。いくつかの実施形態では、コンピュータシステムが第2のオーディオ生成構成要素と通信していない間(例えば、第2のオーディオ生成構成要素がコンピュータシステムから切り離されている)に、コンピュータシステムは、オーディオ設定インタフェースを表示せよとの要求に対応する第2の入力(例えば、1420)を検出し、第2の入力の検出に応答して、コンピュータシステムは、オーディオ設定インタフェース(例えば、図14Nの1422)を表示し、オーディオ設定インタフェースは、選択されたときに、第1のタイプのオーディオ生成構成要素として第2のオーディオ生成構成要素を分類するためのプロセスを開始するアフォーダンスを含まない。
いくつかの実施形態では、第2のオーディオ生成構成要素(例えば、1405-1)が、第2のタイプのオーディオ生成構成要素として識別されない(例えば、第2のオーディオ生成構成要素は、ヘッドフォンではないと識別される可能性がある、オーディオ生成構成要素は、ヘッドフォン以外のもの(例えば、スピーカ)として明示的に識別されていない)との判定に従って、コンピュータシステム(例えば、1400、1401)は、第2のオーディオ生成構成要素が第2のタイプのオーディオ生成構成要素であるか否かを示すようにコンピュータシステムのユーザに促す(例えば、1475、1477)(例えば、第2のオーディオ生成構成要素をヘッドフォンであるとして又はヘッドフォンではないとして識別するようにユーザに要求する通知を表示する)。
いくつかの実施形態では、第2のオーディオ生成構成要素(例えば、1405-1)が、第1のタイプのオーディオ生成構成要素(例えば、非ヘッドフォン(例えば、非耳内外部スピーカ、スタンドアロンスピーカ))、として示されるとの判定に従って、コンピュータシステム(例えば、1400、1401)は、第2のオーディオ生成構成要素が所定の期間後に第1のタイプのオーディオ生成構成要素であることを確認するようにユーザに促す(例えば、1475、1477)。いくつかの実施形態では、ユーザが第2のオーディオ生成構成要素がヘッドフォンでないことを示す場合、コンピュータシステムは、例えば2週間など、ある期間が経過した後に、この指示を確認するようにユーザに促す。
いくつかの実施形態では、オーディオ露出閾値基準は、オーディオ生成構成要素(例えば、1405)がヘッドフォンデバイス(例えば、耳内又は耳上のヘッドフォン)であるときに満たされる基準を含む。いくつかの実施形態では、ヘッドフォンを介したオーディオ出力のみが、オーディオ露出制限に供される。いくつかの実施形態では、ヘッドフォンデバイスは、ヘッドフォンデバイスの最大出力ボリューム(例えば、ボリュームの測定値、音圧レベル(例えば、100dB))未満の出力ボリューム制限(例えば、1438)を有するように構成される。ヘッドフォンデバイスを、ヘッドフォンデバイスの最大出力ボリューム未満の出力ボリューム制限を有するように構成することは、一般に、ヘッドフォンデバイスの最大ボリューム制限未満であり、ユーザのリスニング習慣に基づいて安全要件を満たすように変化させることができるボリューム制限を実装することによって、ユーザの聴覚の感知を保護する安全対策を提供する。1組の状態が満たされているとき、更なるユーザ入力を必要とすることなく、これらの安全対策を提供することで、デバイスの操作性が向上し、ユーザデバイスインタフェースがより効率的になり(例えば、デバイスを動作させ/デバイスと相互作用するとき、ユーザが適切な入力を提供するのを助け、ユーザの誤りを低減させることによる)、加えて、ユーザがデバイスをより迅速且つ効率的に使用するのを有効化することによって、電力使用を低減させ、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、コンピュータシステム(例えば、1400、1401)が、第2のボリュームでのオーディオデータの出力を生じさせる間(いくつかの実施形態では、後)(及び、いくつかの実施形態では、オーディオ露出閾値基準が満たされている間)、コンピュータシステムは、オーディオデータの出力のボリュームを増加させよとの要求に対応する入力を受信し、オーディオデータの出力のボリュームを増加させよとの要求に対応する入力の受信に応答して、コンピュータシステムは、オーディオデータの出力のボリュームを、第2のボリュームよりも大きい第7のボリュームに増加させる。いくつかの実施形態では、第7のボリュームは、第1のボリュームである。いくつかの実施形態では、ボリュームが低減された後に受信された入力に応答して出力オーディオのボリュームを増加させることによって、コンピュータシステムは、ユーザが、オーディオ露出基準が満たされたことの検出に応答して引き起こされたボリューム低減をオーバーライドすることを可能にする。
いくつかの実施形態では、オーディオ露出閾値基準は、オーディオデータがメディア再生(例えば、音楽、ゲーム、ビデオ)であるときに満たされる基準を含む。いくつかの実施形態では、オーディオ露出制限は、メディア再生に適用されるが、例えば、システム音、電話オーディオ、及びビデオチャットオーディオなどのコンピュータシステムの他の音源には適用されない。
いくつかの実施形態では、コンピュータシステム(例えば、1400、1401)は、ディスプレイ生成構成要素(例えば、1402、1403)(例えば、視覚出力デバイス、3Dディスプレイ、透過ディスプレイ、プロジェクタ、ヘッドアップディスプレイ、ディスプレイコントローラ、ディスプレイデバイス)と通信する。いくつかの実施形態では、コンピュータシステムは、ディスプレイ生成構成要素を更に備える。いくつかの実施形態では、コンピュータシステムがオーディオデータの出力を生じさせる間に、コンピュータシステムは、ディスプレイ生成構成要素を介して、オーディオ制御ユーザインタフェース(例えば、1480)を表示する。いくつかの実施形態では、オーディオ制御ユーザインタフェースは、オーディオデータの出力の現在のボリュームに関連付けられたオーディオ露出レベル(例えば、音圧レベル(例えば、ボリューム))を示すオーディオ露出インジケータ(例えば、1482)を含む。いくつかの実施形態では、出力オーディオの現在のボリュームは、安全、大きい、又は有害なオーディオ露出レベルであることが示される(例えば、アイコン及び/又は色によって)。オーディオデータの出力の現在のボリュームに関連付けられたオーディオ露出レベルを示すオーディオ露出インジケータを含むオーディオ制御ユーザインタフェースを表示することは、現在のオーディオレベルが安全であるか、又は潜在的に危険であるかどうかのフィードバックをユーザに提供する。改善されたフィードバックを提供することにより、デバイスの操作性が向上し、(例えば、デバイスを操作する/デバイスと対話するときにユーザが適切な入力を行うのを支援しユーザの誤りを削減することによって)ユーザデバイスインタフェースがより効率的になり、このことにより更に、ユーザがデバイスをより迅速且つ効率的に使用可能になることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、オーディオ制御ユーザインタフェース(例えば、1480)を表示することは、オーディオデータの出力の現在のボリュームが第1のボリューム閾値(例えば、低ノイズ閾値)を超えないとの判定に従って、第1の色を有するオーディオ露出インジケータ(例えば、1482)を表示することを含む(例えば、図14AIを参照)。いくつかの実施形態では、オーディオ露出インジケータは、出力オーディオの現在のボリュームが低閾値を超えないときに緑色を有して表示される(例えば、オーディオは、大きいノイズを蓄積しない)。いくつかの実施形態では、オーディオ制御ユーザインタフェースを表示することは、オーディオデータの出力の現在のボリュームが第1のボリューム閾値を超えるとの判定に従って、第1のボリューム閾値(例えば、高ノイズ閾値)よりも大きい第2のボリューム閾値を超えないが、第1の色とは異なる第2の色を有するオーディオ露出インジケータを表示することを含む(例えば、図14AJを参照)。ボリューム閾値を超えるかどうかに基づいて特定の色を有するオーディオ露出インジケータを表示することは、現在のオーディオレベルが安全であるか又は危険であるかにどうかのフィードバックをユーザに提供する。改善されたフィードバックを提供することにより、デバイスの操作性が向上し、(例えば、デバイスを操作する/デバイスと対話するときにユーザが適切な入力を行うのを支援しユーザの誤りを削減することによって)ユーザデバイスインタフェースがより効率的になり、このことにより更に、ユーザがデバイスをより迅速且つ効率的に使用可能になることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。いくつかの実施形態では、オーディオ露出インジケータは、出力オーディオの現在のボリュームが低閾値を超えるときに黄色を有するように表示されるが、高閾値を超えない(例えば、オーディオは大きいノイズを蓄積するが、ノイズは過度に大きい)。いくつかの実施形態では、オーディオ制御ユーザインタフェースを表示することは、オーディオデータの出力の現在のボリュームが第2のボリューム閾値を超えるとの判定に従って、第1の色及び第2の色とは異なる第3の色を有するオーディオ露出インジケータを表示することを含む(例えば、図14AJを参照)。いくつかの実施形態では、オーディオ露出インジケータは、出力オーディオの現在のボリュームが高閾値を超える(例えば、オーディオが大きいノイズを蓄積している)ときに、赤色を有して表示される。
いくつかの実施形態では、コンピュータシステム(例えば、1400、1401)は、オーディオ露出インジケータ(例えば、1482)に向けられた入力(例えば、1484)を検出し、オーディオ露出インジケータに向けられた入力の検出に応答して、コンピュータシステムは、ディスプレイ生成構成要素(例えば、1402、1403)を介して、オーディオ露出ユーザインタフェース(例えば、1485)を表示する。いくつかの実施形態では、オーディオ露出ユーザインタフェースは、オーディオデータの出力(例えば、1485-3)(例えば、オーディオデータの現在の出力)に関連付けられたオーディオ露出データの測定を含む。いくつかの実施形態では、オーディオ露出UIは、現在オーディオを出力しているヘッドフォンによって引き起こされる現在のオーディオ露出のリアルタイム測定を示すオーディオ露出メーターを含む。オーディオデータの出力に関連付けられたオーディオ露出データの測定を含むオーディオ露出インタフェースを表示することは、現在のオーディオレベルが安全であるか又は危険であるかどうかのフィードバックをユーザに提供する。改善されたフィードバックを提供することにより、デバイスの操作性が向上し、(例えば、デバイスを操作する/デバイスと対話するときにユーザが適切な入力を行うのを支援しユーザの誤りを削減することによって)ユーザデバイスインタフェースがより効率的になり、このことにより更に、ユーザがデバイスをより迅速且つ効率的に使用可能になることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、オーディオ露出ユーザインタフェース(例えば、1485)は、オーディオ生成構成要素(例えば、1405)の識別(例えば、1485-1)(例えば、デバイス名)を更に含む。
いくつかの実施形態では、オーディオ露出ユーザインタフェース(例えば、1485)は、選択されたときに、オーディオ生成構成要素(例えば、1405)における周囲オーディオの出力を生じさせるプロセスを開始するアフォーダンス(例えば、1485-2)を更に含む。いくつかの実施形態では、周囲オーディオの出力は、コンピュータシステムにおけるマイクロフォンを有効化することと、マイクロフォンにおいて周囲オーディオを受信することと、周囲オーディオを増幅することと、オーディオ生成構成要素において増幅された周囲オーディオを出力することと、を含む。これは、ユーザが、ヘッドフォンを除去する必要なく、それらの環境からオーディオを聞くことを可能にする。
なお、方法1500に関して上述されたプロセス(例えば、図15)の詳細はまた、以下及び上で説明されている方法にも、類似の方式で適用可能であることに留意されたい。例えば、方法1300、1600、及び1800は、方法1500を参照して上述した様々な方法の特性のうちの1つ以上を任意選択的に含む。例えば、オーディオ設定を設定及び調整するための動作、オーディオ露出を管理するための動作、及びオーディオ露出データを管理するための動作は、方法1500に関して上述したオーディオ露出制限アラートを表示するための動作の少なくとも一部を組み込むことができる。簡潔にするために、これらの詳細は、以下で繰り返さない。
図16は、いくつかの実施形態に係る、コンピュータシステムを使用してオーディオ露出を管理するための方法を示すフロー図である。方法1600は、オーディオ生成構成要素(例えば、ヘッドフォン1405)と通信する(例えば、電気的に結合された;有線又は無線接続を介した)コンピュータシステム(例えば、スマートフォン、スマートウォッチ)(例えば、デバイス100、300、500、600、601、800、900、1100、1200、1400、1401、1700)において実行される。方法1600のいくつかの動作は、任意選択的に組み合わされ、いくつかの動作の順序は、任意選択的に変更され、いくつかの動作は、任意選択的に省略される。
いくつかの実施形態では、電子デバイス(例えば、100、300、500、600、601、800、900、1100、1200、1400、1401、及び1700)は、コンピュータシステムである。コンピュータシステムは、任意選択的に、ディスプレイ生成構成要素と1つ以上の入力デバイスとの通信(例えば、有線通信、無線通信)である。ディスプレイ生成構成要素は、CRTディスプレイを介したディスプレイ、LEDディスプレイを介したディスプレイ、又は画像投影を介した表示などの視覚的な出力を提供するように構成されている。いくつかの実施形態では、ディスプレイ生成構成要素は、コンピュータシステムと一体化される。いくつかの実施形態では、ディスプレイ生成構成要素は、コンピュータシステムとは別個である。1つ以上の入力デバイスは、ユーザ入力を受けるタッチ感知面など、入力を受け取るように構成される。いくつかの実施形態では、1つ以上の入力デバイスは、コンピュータシステムと一体化される。いくつかの実施形態では、1つ以上の入力デバイスは、コンピュータシステムとは別個である。したがって、コンピュータシステムは、有線又は無線接続を介して、データ(例えば、画像データ又はビデオデータ)を、一体型又は外部のディスプレイ生成構成要素に送信して、(例えば、ディスプレイデバイスを使用して)コンテンツを視覚的に生成することができ、1つ以上の入力デバイスからの入力を、有線又は無線接続で受信することができる。
後述するように、方法1600は、例えば、オーディオ設定を設定及び調整することによって、オーディオ露出を管理するための直感的方法を提供する。この方法は、オーディオ露出を管理するためのユーザの認知的負担を軽減し、それによってより効率的なヒューマン-マシンインタフェースを作り出す。バッテリ動作式のコンピューティングデバイスの場合には、ユーザがオーディオ露出をより高速且つより効率的に管理することを可能にすることにより、電力が節約され、バッテリ充電の間隔が増す。
方法1600では、コンピュータシステム(例えば、1400)は、オーディオ生成構成要素(例えば、1405)を使用して生成された出力オーディオ(例えば、ヘッドフォンは、現在、出力オーディオ(音楽、ビデオゲームオーディオ、ビデオ再生オーディオなど)を生成している)に関連付けられた出力オーディオデータ(例えば、信号S1、S2、S3)(例えば、出力ボリュームを示すデータ)を受信する(1602)(例えば、検出する)。出力オーディオは、第1のオーディオ信号(例えば、いくつかの実施形態では、信号S1、信号S3)(第1の音)と、第2のオーディオ信号(例えば、信号S2)(例えば、第1の音とは異なる第2の音、第1のオーディオ信号とは異なる信号/音のセット)を含む。出力オーディオデータは、第1のオーディオ信号の第1の予測出力オーディオボリューム(例えば、オーディオチャート1435内のS1及びS1A)と、第2のオーディオ信号の第2の予測出力オーディオボリューム(例えば、オーディオチャート1435内のS2及びS2A)を含む。
方法1600では、出力オーディオデータ(例えば、信号S1、S2、S3)が第1の基準のセットを満たすとの判定に従って(1604)、コンピュータシステム(例えば、1400)は、第1の予測出力オーディオボリューム(例えば、最大出力ボリューム制限又は最大出力ボリューム制限未満のボリュームなどの既定のオーディオ出力ボリューム)よりも小さい低減された出力オーディオボリュームにおける第1のオーディオ信号(例えば、S1)を出力(例えば、低減)させ(1606)(例えば、図14Qでは、S1は、チャート1435に示すように、S1Aの曲線に従って達成されると予測されるボリュームを下回るボリューム(約100dB)で出力される)(例えば、第1のオーディオ信号の出力オーディオボリュームは、例えば、第2のオーディオ信号(例えば、S2)などの出力オーディオを含む他の信号の出力オーディオボリュームを調整することなく低減される)、第2の予測出力オーディオボリューム(例えば、S2が調整されていない)で第2のオーディオ信号(例えば、S2)の出力を出力させる(1608)(例えば、第2のオーディオ信号は、第2のオーディオ信号の要求された(予測された)出力オーディオボリュームで再生され、一方、第1のオーディオ信号の出力オーディオボリュームは、最大出力ボリューム制限で制限される(例えば、上限を定められている))。低減した出力オーディオボリュームで第1のオーディオ信号の出力を生じさせる一方で、第2の予測出力オーディオボリュームで第2のオーディオ信号の出力を生じさせることにより、ユーザがオーディオ出力のボリュームを手動で調整することなく、オーディオ出力の品質を維持しながら、ユーザの聴覚の健康を保護する。ユーザからの更なる入力を必要とせずに条件のセットが満たされたときに動作を行うことにより、デバイスの操作性が高められ、ユーザデバイスインタフェースを(例えば、デバイスを操作する/デバイスと対話するときに適切な入力をもたらすようにユーザを支援し、ユーザの誤りを減らすことによって)より効率的にし、加えて、ユーザがデバイスをより迅速且つ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。第1の基準のセットは、第1のオーディオ信号に対する第1の予測出力オーディオボリューム(例えば、図14QのS1Aに関連付けられたボリューム)が出力オーディオボリューム閾値(例えば、1438)(例えば、最大出力ボリューム制限)(例えば、オーディオ設定ユーザインタフェース内で選択された出力オーディオボリューム閾値)を超えるときに満たされる。いくつかの実施形態では、第1の基準のセットは、第1のオーディオ信号の出力オーディオボリュームが出力オーディオボリューム閾値を超えるときに満たされる第1の基準を含む。いくつかの実施形態では、第1の基準のセットは、第2のオーディオ信号(例えば、S2)に対する出力オーディオボリュームが出力オーディオボリューム閾値を超えないときに満たされる第2の基準を更に含む。
いくつかの実施形態では、出力オーディオボリューム閾値(例えば、1438)は、ユーザアカウント(例えば、ジョンのアカウント)に関連付けられたボリューム制御設定(例えば、1436、1432、1430)(例えば、「大きい音低減」設定)に対応し、ボリューム制御設定は、コンピュータシステム(例えば、1400)(例えば、ユーザアカウントに関連付けられたスマートフォン(例えば、ジョンの電話))及びユーザアカウントに関連付けられた外部コンピュータシステム(例えば、1401)(例えば、コンピュータシステムとは別個の電子デバイス、例えば、ウェアラブルデバイス)(例えば、ジョンの腕時計)において適用される。いくつかの実施形態では、ボリューム制御設定は、例えば、ユーザアカウントとリンクされた異なる電子デバイスなどの複数のデバイスにわたって適用される。コンピュータシステムにおけるボリューム制御設定及びユーザアカウントに関連付けられた外部コンピュータシステムを適用することは、複数のデバイスにわたってボリューム制御設定を効率的に適用するために必要とされる入力の数を低減する。動作を実行するために必要な入力の数が減ることにより、デバイスの操作性が高められ、ユーザデバイスインタフェースを(例えば、デバイスを操作する/デバイスと対話するときにユーザが適切な入力を行うのを支援し、ユーザの誤りを削減することによって)より効率的にし、加えて、ユーザがデバイスをより迅速且つ効率的に使用できるようにすることによって、デバイスの電力使用が抑えられ、バッテリ寿命が改善される。
いくつかの実施形態では、コンピュータシステム(例えば、1400、1401)は、第1のユーザアカウント(例えば、ジョンのアカウント)(例えば、子供アカウント)に関連付けられ、出力オーディオボリューム閾値(例えば、1438)は、外部コンピュータシステム(例えば、1400A)(例えば、コンピュータシステムとは別個の電子デバイス、例えば、親デバイス)に関連付けられ且つコンピュータシステムにおける出力オーディオボリューム閾値を有効化するように(例えば、子アカウントによって)認可された第2のユーザアカウント(例えば、母アカウント)(例えば、親アカウント)(例えば、第1のユーザアカウントとは異なるユーザアカウント)によって判定される(例えば、設定される)。いくつかの実施形態では、ボリューム制御設定は、コンピュータシステム(例えば、子アカウント)を使用することに関連付けられるものとは異なるユーザアカウント(例えば、親アカウント)からアクセス可能である。
いくつかの実施形態では、第1の基準のセットは、出力オーディオ(例えば、信号S1、S2、S3)がメディア再生(例えば、音楽、ゲーム、ビデオ)であるときに満たされる基準を含む。いくつかの実施形態では、ボリューム低減制限は、メディア再生に適用されるが、例えば、システムオーディオ、電話オーディオ、及びビデオチャットオーディオなどのコンピュータシステム(例えば、1400)の他の音源には適用されない。
方法1600では、出力オーディオデータ(例えば、信号S1、S2、S3)が第1の基準のセットを満たさないとの判定に従って(1610)(例えば、第1のオーディオ信号に対する出力オーディオボリュームも、第2のオーディオ信号の出力オーディオボリューム(例えば、出力オーディオデータは、第2の基準のセットを満たさない)も、既定の出力オーディオボリューム(例えば、1438)(例えば、最大出力ボリューム制限)を超えない)、コンピュータシステム(例えば、1400、1401)は、第1の予測出力オーディオボリュームにおける第1のオーディオ信号の出力を生じさせ(1612)、第2の予測出力オーディオボリュームにおける第2のオーディオ信号の出力を生じさせる(1614)(例えば、図14Qでは、信号S2及び信号S3のどちらも出力制限1438を超え、したがって信号が調整されない)。
いくつかの実施形態では、出力オーディオデータ(例えば、信号S1、S2、S3)が第2の基準のセットを満たすとの判定に従って(例えば、出力オーディオデータが第1の基準のセットを満たさないとき)、コンピュータシステム(例えば、1400、1401)は、第1の予測出力オーディオボリュームで第1のオーディオ信号(例えば、信号S3)の出力を生じさせ(例えば、第1のオーディオ信号は、第1のオーディオ信号の要求された(予測された)出力オーディオボリュームで再生される一方で、第2のオーディオ信号の出力オーディオボリューム(例えば、S2)は、最大出力ボリューム制限で制限される(例えば、上限を定められている))、第2の予測出力オーディオボリュームを下回る低減された出力オーディオボリュームで(例えば、S2は、図14Rのオーディオチャート1435において90dBで上限を定められている)第2のオーディオ信号(例えば、S2)の出力を生じさせる(例えば、低減する)(例えば、第1のオーディオ信号などの出力オーディオを含む他の信号の出力オーディオボリュームを調整することなく、第2のオーディオ信号の出力オーディオボリュームが低減される)。第1の予測出力オーディオボリュームで第1のオーディオ信号の出力を生じさせる一方で、低減した出力オーディオボリュームで第2のオーディオ信号の出力を生じさせることにより、ユーザがオーディオ出力のボリュームを手動で調整することなく、オーディオ出力の品質を維持しながら、ユーザの聴覚の健康を保護する。ユーザからの更なる入力を必要とせずに条件のセットが満たされたときに動作を行うことにより、デバイスの操作性が高められ、ユーザデバイスインタフェースを(例えば、デバイスを操作する/デバイスと対話するときに適切な入力をもたらすようにユーザを支援し、ユーザの誤りを減らすことによって)より効率的にし、加えて、ユーザがデバイスをより迅速且つ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。いくつかの実施形態では、第2の基準のセットは、第2のオーディオ信号に対する第2の予測出力オーディオボリューム(例えば、S2Aのボリューム)が出力オーディオボリューム閾値(例えば、1438)を超えるときに満たされる。いくつかの実施形態では、第2の基準のセットは、第2のオーディオ信号の出力オーディオボリュームが出力オーディオボリューム閾値を超えるときに満たされる第1の基準を含む。いくつかの実施形態では、第2の基準のセットは、第1のオーディオ信号の出力オーディオボリュームが出力オーディオボリューム閾値を超えないときに満たされる第2の基準を更に含む。いくつかの実施形態では、第2のオーディオ信号の低減された出力オーディオボリュームは、第1のオーディオ信号の低減された出力オーディオボリュームと同じである(例えば、図14Rでは、S1及びS2は双方とも90dBで上限を定められている)。いくつかの実施形態では、第2のオーディオ信号の低減された出力オーディオボリュームは、第1のオーディオ信号の低減された出力オーディオボリュームとは異なる。
いくつかの実施形態では、コンピュータシステム(例えば、1400、1401)は、ディスプレイ生成構成要素(例えば、1402、1403)(例えば、ディスプレイコントローラ、タッチ感知ディスプレイシステム)、及び1つ以上の入力デバイス(例えば、1402のタッチ感知面、1403のタッチ感知面)を含む。いくつかの実施形態では、コンピュータシステムは、ディスプレイ生成構成要素を介して、出力オーディオボリューム閾値(例えば、1438)の閾値(例えば、75~100dB)の範囲を表すボリューム制御インタフェースオブジェクト(例えば、1436)(例えば、スライダ1436-1)を表示し、1つ以上の入力デバイスを介して、ボリューム制御インタフェースオブジェクトに対応する入力(例えば、1440)を検出する。いくつかの実施形態では、ボリューム制御インタフェースオブジェクトに対応する入力の検出に応答して、コンピュータシステムは、第1の閾値(例えば、図14Qでは100dB)から第1の閾値とは異なる第2の閾値(例えば、図14Rにおける90dB)に、出力オーディオボリューム閾値(例えば、1438)(例えば、最大出力ボリューム制限)を調整する。いくつかの実施形態では、コンピュータシステムは、第3のオーディオ信号(例えば、S1)(例えば、第1のオーディオ信号)の第3の予測出力オーディオボリューム(例えば、S1Aに関連付けられたボリューム)及び第4のオーディオ信号(例えば、S3)(例えば、第2のオーディオ信号)の第4の予測出力オーディオボリューム(例えば、S2Aに関連付けられたボリューム)を含む出力オーディオデータ(例えば、信号S1、S2、S3)を受信する。いくつかの実施形態では、出力オーディオデータが第3の基準のセットを満たすとの判定に従って、第3のオーディオ信号に対する第3の予測出力オーディオボリュームが出力オーディオボリューム閾値の第2の閾値を超えるときに第3の基準のセットが満たされる(例えば、第4のオーディオ信号に対する第4の予測出力オーディオボリュームは、出力オーディオボリューム閾値の第2の閾値を超えない)、コンピュータシステムは、第3の予測出力オーディオボリュームを下回る第2の低減された出力オーディオボリューム(例えば、S1は、図14Rにおいて約90dBで出力される)(例えば、出力オーディオボリューム閾値の第2の閾値以下)で第3のオーディオ信号の出力を生じさせ(例えば、第4のオーディオ信号などの出力オーディオを含む他の信号の出力オーディオボリュームを調整することなく、第3のオーディオ信号の出力オーディオボリュームが低減される)、第4の予測出力オーディオボリュームで第4のオーディオ信号の出力を生じさせる(例えば、第4のオーディオ信号は、第4のオーディオ信号の要求された(予測された)出力オーディオボリュームで再生される一方で、第3のオーディオ信号の出力オーディオボリュームは、最大出力ボリューム制限(例えば、第2の閾値)で制限される(例えば、上限を定められている))(例えば、図14Rでは、信号S1は90dBで上限を定められているが、信号S3は調整されないままである)。第4の予測出力オーディオボリュームにおける第4のオーディオ信号の出力を生じさせる一方で、第2の低減された出力オーディオボリュームにおける第3のオーディオ信号の出力を生じさせることにより、ユーザがオーディオ出力ボリュームを手動で調整することを必要とせずに、オーディオ出力の品質を維持しながら、ユーザの聴覚の健康を保護する。ユーザからの更なる入力を必要とせずに条件のセットが満たされたときに動作を行うことにより、デバイスの操作性が高められ、ユーザデバイスインタフェースを(例えば、デバイスを操作する/デバイスと対話するときに適切な入力をもたらすようにユーザを支援し、ユーザの誤りを減らすことによって)より効率的にし、加えて、ユーザがデバイスをより迅速且つ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、第1の閾値(例えば、図14Qでは100dB)を有する出力オーディオボリューム閾値(例えば、1438)を表すボリューム制御インタフェースオブジェクト(例えば、1436)(例えば、スライダ1436-1)を表示している間に、コンピュータシステム(例えば、1400、1401)は、第1の閾値の非数値テキスト説明(例えば、図14Qにおける1436-3)を表示し(例えば、出力オーディオボリューム閾値が100dB閾値である場合には、「バランスがとれていないほど大きい」が表示される)、出力オーディオボリューム閾値(例えば、最大出力ボリューム制限)を第1の閾値(例えば、100dB)から第2の閾値(例えば、図14Rでは90dB)に調整した後、コンピュータシステムは、第2の閾値(例えば、図14Rの1436-3)の非数値テキスト説明を表示する(例えば、出力オーディオボリューム閾値が90dB閾値であるときに、「オートバイのように大きい」が表示される)。第1及び第2の閾値の非数値テキスト説明を表示することは、現実世界のユーザにフィードバックを提供し、オーディオのボリュームのコンテキスト的比較は、それらが設定していることを制限する。改善されたフィードバックを提供することにより、デバイスの操作性が向上し、(例えば、デバイスを操作する/デバイスと対話するときにユーザが適切な入力を行うのを支援しユーザの誤りを削減することによって)ユーザデバイスインタフェースがより効率的になり、このことにより更に、ユーザがデバイスをより迅速且つ効率的に使用可能になることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、第1の基準のセットは、ボリューム制御設定(例えば、1432)が有効化されたときに満たされる第1の基準を更に含む(例えば、「大きい音低減」設定)。いくつかの実施形態では、ボリューム制御設定は、コンピュータシステム(例えば、1400)(例えば、電子デバイス)を使用して、又は外部コンピュータシステム(例えば、ウェアラブルデバイスなどの外部電子デバイス(例えば、1401)若しくはマスターデバイス(例えば、1400A)(例えば、コンピュータシステムのボリューム制限を設定/有効/無効にすることを認可された親デバイス)を使用して、設定/有効/無効にされる。いくつかの実施形態では、出力オーディオデータ(例えば、信号S1、S2、S3、図14A~図14Dのヘッドフォンデバイス1405で生成されたオーディオ)が第1の基準のセットを満たすとの判定に従って、コンピュータシステムは、第1のオーディオ信号の出力オーディオボリューム(例えば、S1、いくつかの実施形態では、1つ以上の信号S1、S2、及びS3が、図14A~図14Dのヘッドフォンデバイス1405で生成されたオーディオに対応する)(例えば、信号S1は、図14A~図14Dのヘッドフォンデバイス1405における信号に対応し、信号S1のボリュームは、グラフ1410によって表される)が出力オーディオボリューム閾値を(例えば、1438、いくつかの実施形態では、出力制限1438は、閾値1410-1に対応する)超えていることを示すアラート(例えば、1416)(例えば、通知、触覚応答、オーディオ応答、バナー)を出力することを控える。いくつかの実施形態では、出力オーディオボリューム閾値(例えば、1410-1)は、瞬時オーディオ露出閾値(例えば、100dB)に対応し、アラート(例えば、1416)は、出力オーディオのボリュームが瞬時オーディオ露出閾値を超えていることを示す。いくつかの実施形態では、このアラートは、ボリューム制御設定が有効にされたときには出力されない(例えば、ボリュームは、アラートをトリガするために閾値に到達しない)。いくつかの実施形態では、出力オーディオデータが第4の基準のセットを満たすとの判定に従って、第1のオーディオ信号に対する第1の予測出力オーディオボリュームが出力オーディオボリューム閾値を超え(例えば、ボリューム1410-2が図14Bの閾値1410-1を超える)、ボリューム制御設定が無効にされるときに第4の基準のセットが満たされ、コンピュータシステムは、以下のステップを実行する:1)第1の予測出力オーディオボリュームで第1のオーディオ信号の出力を生じさせ(例えば、信号は、時間T2及びT3において閾値1410-1を超えるボリューム1410-2で出力される)、2)第2の予測出力オーディオボリューム(例えば、S2/S2Aに関連付けられたボリューム)で第2のオーディオ信号(例えば、S2)の出力を生じさせ、3)第1のオーディオ信号の出力オーディオボリュームが出力オーディオボリューム閾値を超えたことを示すアラート(例えば、1416)を出力する(例えば、図14Eを参照)。いくつかの実施形態では、アラートを出力することに加えて(例えば、出力する前に)、コンピュータシステムは、第1のオーディオ信号の出力オーディオボリュームを、出力オーディオボリューム閾値以下の出力オーディオボリュームに低減する(例えば、図14C及び図14Dのボリューム1410-2の低減を参照)。いくつかの実施形態では、ボリューム制御設定が無効にされると、コンピュータシステムは、集約オーディオ露出制限に到達したとき(例えば、アラート1418)、又は瞬時オーディオ露出制限に到達したとき(例えば、アラート1416)、アラートを出力することができる。しかしながら、ボリューム制御設定が有効化されると、オーディオ生成構成要素(例えば、ヘッドフォン1405)を使用して生成された出力オーディオの出力ボリュームは、出力オーディオに対する許容される最大ボリュームが出力オーディオボリューム閾値(任意選択的に瞬時オーディオ露出制限に対応する)よりも小さい(又はそれに等しい)ように制限される。したがって、ボリューム制御設定を有効にすることは、コンピュータシステムが瞬時オーディオ露出制限に到達するためのアラートを出力するシナリオを除外する。しかしながら、そのような実施形態では、アラートは、依然として、集約オーディオ露出制限に到達するために出力されることができる。
いくつかの実施形態では、出力オーディオ(例えば、信号S1、S2、S3)は、第5のオーディオ信号を更に含み、出力オーディオデータは、第5のオーディオ信号に対する第5の予測出力オーディオボリューム(例えば、低ボリューム)を更に含む。いくつかの実施形態では、出力オーディオデータが第1の基準のセットを満たすとの判定に従って、コンピュータシステム(例えば、1400、1401)は、第5の予測出力オーディオボリュームよりも大きい増加した出力オーディオボリュームで第5のオーディオ信号の出力を生じさせる(例えば、第5のオーディオ信号は、増加したボリュームで出力され、第1のオーディオ信号は、低減されたボリュームで出力され、第2のオーディオ信号は、要求された(予測された)ボリュームで出力される)。いくつかの実施形態では、出力オーディオボリューム閾値が低くなるほど、静かな音が増える。
いくつかの実施形態では、出力オーディオボリューム閾値(例えば、1438)は、第1の値(例えば、図14Qでは100dB)であり、出力オーディオデータ(例えば、信号S1、S2、S3)は、第1の基準のセットを満たす。いくつかの実施形態では、低減された出力オーディオボリューム(例えば、図14Qにおいて約100dB)(例えば、第1の低減された出力オーディオボリューム)で第1のオーディオ信号(例えば、S1)の出力を生じさせ、第2の予測出力オーディオボリューム(例えば、図14QではS2が調整されていない)で第2のオーディオ信号(例えば、S2)の出力を生じさせた後、コンピュータシステム(例えば、1400、1401)は、以下のステップを実行する。いくつかの実施形態では、コンピュータシステムは、出力オーディオボリューム閾値(例えば、1438)を低減せよとの要求に対応する入力(例えば、スライダ1436-1上の1440)を受信する。いくつかの実施形態では、出力オーディオボリューム閾値を低減せよとの要求に対応する入力の受信に応答して、コンピュータシステムは、出力オーディオボリューム閾値を第1の値(例えば、図14Qでは100dB)から第1の値(例えば、図14Rでは90dB)未満の第2の値に低減する。いくつかの実施形態では、コンピュータシステムは、オーディオ生成構成要素(例えば、1405)を使用して生成された出力オーディオに関連付けられた出力オーディオデータを受信する。出力オーディオデータは、第1のオーディオ信号に対する第1の予測出力オーディオボリューム及び第2のオーディオ信号に対する第2の予測出力オーディオボリュームを含む。いくつかの実施形態では、出力オーディオデータが第1の基準のセットを満たす(例えば、第1のオーディオ信号に対する第1の予測出力オーディオボリュームが出力オーディオボリューム閾値を超える)との判定に従って、コンピュータシステムは、第1の予測出力オーディオボリュームを下回る第2の低減された出力オーディオボリューム(例えば、図14RではS1が90dBで上限を定められている)で第1のオーディオ信号の出力を(例えば、オーディオ生成構成要素を介して)生じさせ(例えば、第1のオーディオ信号の出力オーディオボリュームは、低減された出力オーディオボリューム閾値(例えば、第2の値)を下回るボリュームに低減される)、第2の予測出力オーディオボリュームを下回る第2の低減された出力オーディオボリューム(例えば、図14RではS2が90dBで上限を定められている)で第2のオーディオ信号の出力を生じさせる(例えば、第2のオーディオ信号の出力オーディオボリュームは、出力オーディオボリューム閾値が低減された時点で(例えば、低減された出力オーディオボリューム閾値以下のボリュームに)低減される)。第1の予測出力オーディオボリュームを下回る第2の低減された出力オーディオボリュームで第1のオーディオ信号及び第2のオーディオ信号の出力を生じさせることにより、ユーザが手動でオーディオ出力ボリュームを調整しなくてもオーディオ出力の品質を維持しながら、閾値を調整した後に以前は低減されなかった信号を低減することにより、ユーザの聴覚の健康を保護する。ユーザからの更なる入力を必要とせずに条件のセットが満たされたときに動作を行うことにより、デバイスの操作性が高められ、ユーザデバイスインタフェースを(例えば、デバイスを操作する/デバイスと対話するときに適切な入力をもたらすようにユーザを支援し、ユーザの誤りを減らすことによって)より効率的にし、加えて、ユーザがデバイスをより迅速且つ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、第1のオーディオ信号の第2の低減された出力オーディオボリュームは、第1のオーディオ信号の第1の低減された出力オーディオボリュームと同じである。いくつかの実施形態では、第1のオーディオ信号の第2の低減された出力オーディオボリュームは、第1のオーディオ信号の第1の低減された出力オーディオボリュームとは異なる。
いくつかの実施形態では、出力オーディオボリューム閾値(例えば、1438)は、第3の値(例えば、図14Rでは90dB)であり、出力オーディオデータ(例えば、信号S1、S2、S3)は、第1の基準のセットを満たす。いくつかの実施形態では、低減された出力オーディオボリューム(例えば、図14Rでは90dB)で第1のオーディオ信号(例えば、S2)の出力を生じさせ、第2の予測出力オーディオボリューム(例えば、図14RではS3が調整されていない)で第2のオーディオ信号(例えば、S3)の出力を生じさせた後、コンピュータシステム(例えば、1400、1401)は、以下のステップを実行する。いくつかの実施形態では、コンピュータシステムは、出力オーディオボリューム閾値を増加せよとの要求に対応する入力(例えば、図14Rの90dB設定から図14Qの前の100dB設定に戻るようにスライダ1436-1を増加させるための入力)を受信し、出力オーディオボリューム閾値を増加せよとの要求に対応する入力の受信に応答して、第3の値(例えば、90dB)から第3の値よりも大きい第4の値(例えば、100dB)まで出力オーディオボリューム閾値を増加させる。いくつかの実施形態では、コンピュータシステムは、オーディオ生成構成要素(例えば、1405)を使用して生成された出力オーディオに関連付けられた出力オーディオデータを受信する。いくつかの実施形態では、出力オーディオデータは、第1のオーディオ信号に対する第1の予測出力オーディオボリューム及び第2のオーディオ信号に対する第2の予測出力オーディオボリュームを含む。いくつかの実施形態では、出力オーディオデータが第1の基準のセットを満たさない(例えば、第1のオーディオ信号の第1の予測出力オーディオボリュームは、出力オーディオボリューム閾値を超えない)判定に応答して、コンピュータシステムは、第1の予測出力オーディオボリュームで第1のオーディオ信号の出力を生じさせ(例えば、図14Qに示されるものと同様に、S2は、調整されることなく出力される)(例えば、第1のオーディオ信号の出力オーディオボリュームは、第1の予測出力オーディオボリュームが、増加した出力オーディオボリューム閾値(例えば、第4の値)よりも小さいことから、もはや低減されない)、第2の予測出力オーディオボリュームで第2のオーディオ信号の出力を生じさせる(例えば、第2のオーディオ信号(S3)に対する出力オーディオボリュームは、影響を受けないままである)。出力オーディオボリューム閾値を増加させた後に第1の予測出力オーディオボリュームにおける第1のオーディオ信号の出力を生じさせることは、ユーザがオーディオ出力ボリュームを手動で調整することを必要とせずに、ユーザの聴覚の健康を依然として保護しながら、オーディオ出力の品質を高める。ユーザからの更なる入力を必要とせずに条件のセットが満たされたときに動作を行うことにより、デバイスの操作性が高められ、ユーザデバイスインタフェースを(例えば、デバイスを操作する/デバイスと対話するときに適切な入力をもたらすようにユーザを支援し、ユーザの誤りを減らすことによって)より効率的にし、加えて、ユーザがデバイスをより迅速且つ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
なお、方法1600に関して上述されたプロセス(例えば、図16)の詳細はまた、以下及び上で説明されている方法にも、類似の方式で適用可能であることに留意されたい。例えば、方法1300、1500、及び1800は、方法1600を参照して上述した様々な方法の特性のうちの1つ以上を任意選択的に含む。例えば、オーディオ設定を設定及び調整するための動作、オーディオ露出制限アラートを表示するための動作、及びオーディオ露出データを管理するための動作は、方法1600に関して上述したオーディオ露出を管理するための動作の少なくとも一部を組み込むことができる。簡潔にするために、これらの詳細は、以下で繰り返さない。
図17A~図17Vは、いくつかの実施形態に係る、オーディオ露出データを管理するための例示的なユーザインタフェースを示す。これらの図のユーザインタフェースは、図18のプロセスを含む後述のプロセスを例示するために使用される。
図17A~図17Vは、デバイス1700が、オーディオ露出データ(例えば、様々な音強度(例えば、ボリューム)でのオーディオへのデバイスユーザの露出を表すデータのセット)にアクセスして表示するための、ディスプレイ1702上にユーザインタフェースを表示するデバイス1700を示す。いくつかの実施形態では、デバイス1700は、デバイス601、デバイス800、デバイス900、デバイス1100、デバイス1200、及びデバイス1400と同じである。いくつかの実施形態では、デバイス1700は、デバイス100、300、又は500の1つ以上の特徴を含む。
いくつかの実施形態では、オーディオ露出データは、デバイス1700で出力されるオーディオの検出された出力ボリューム(例えば、ヘッドフォンデバイスへの出力)、又はデバイス1700若しくは外部デバイス(例えば、上述のようなデバイス1401)と通信する(例えば、オーディオを再生する)ヘッドフォンデバイス(例えば、上述のようなヘッドフォン1405)に基づいて、デバイス1700で記録される。いくつかの実施形態では、オーディオ露出データは、マイクロフォン(例えば、マイクロフォン1406)などのセンサによって検出された周囲音に基づいて、デバイス1700で記録される。いくつかの実施形態では、オーディオ露出データは、図6A~図6AL、図7A~図7B、図8A~図8L、図9A~図9G、及び図10に関連して上述したものなどのノイズレベルデータである。簡潔性のために、そのような開示の詳細は、以下では繰り返さない。
図17A~図17Eは、瞬時オーディオ露出制限に到達した後にオーディオ露出データにアクセスして表示するための健康アプリケーション内の例示的なユーザインタフェースを示し、対応するアラート(例えば、瞬時オーディオ露出アラート1416)がデバイス1700によって生成されている。
図17Aでは、デバイス1700は、いくつかの実施形態では、ヘッドフォン通知1704を含む、ディスプレイ1702の概要インタフェース1702を表示する。ヘッドフォン通知1704は、オーディオ露出グラフ1708と、オーディオ露出グラフ1708に示されるオーディオ露出データの状態を示すオーディオ状態テキスト1706と、を含む。現在の実施形態では、オーディオ状態テキスト1706は、オーディオ露出データが100dBの瞬時オーディオ露出制限を超えたことを示す。オーディオ露出グラフ1708は、100dBを超えたオーディオ露出データの少なくとも30秒の持続時間を表し、それにより、瞬時オーディオ露出アラート(例えば、1416)をトリガする第1の部分1708-1aと、瞬時オーディオ露出アラートをトリガしなかったオーディオ露出データを表す第2の部分1708-1bとを含む、最近のオーディオ露出データ1708-1(例えば、デバイス1700に関連付けられたユーザが露出されたオーディオの振幅又はレベル)を含む。オーディオ露出グラフ1708はまた、オーディオ露出データが記録された期間を示す、瞬時オーディオ露出制限インジケータ1708-2、及び時間1708-3(例えば、開始時間及び停止時間)も含む。瞬時オーディオ露出制限インジケータ1708-2は、制限(例えば、「100dB」)のテキスト説明と、最近のオーディオ露出データ1708-1に対して示される閾値とを含む。図17Aに示す実施形態は、オーディオデータが30秒の期間にわたって100dB閾値を超えたために、瞬時オーディオ露出制限に到達したことを示す。しかしながら、いくつかの実施形態では、制限に到達することができ、オーディオデータが100dB閾値を超える瞬間に-すなわち、閾値を30秒間超える必要なく、対応する瞬時オーディオ露出アラートが生成される。
オーディオ露出グラフ1708は、瞬時オーディオ露出アラートをトリガしたオーディオ状態を示すために、オーディオ露出データの単純な説明を提供する。図17Aに示す実施形態では、瞬時オーディオ露出制限は100dBであり(インジケータ1708-2及びテキスト1706によって表されるように)、オーディオ露出データ1708-1は、午前11:45と午後12:00との間に記録された。オーディオ露出データの第1の部分1708-1aは、瞬時オーディオ露出制限インジケータ1708-2の100dB閾値を超える(それによってアラートをトリガする)ように示され、一方、第2の部分1708-1bは、100dB閾値(アラートを誘発しない)の下方に配置されて示される。第1の部分1708-1aが閾値を超えることを更に示すために、第1の部分1708-1aは、第1の部分1708-1aを黒一色で表示することによって第2の部分1708-1bと視覚的に区別され、第2の部分1708-1bは、斜めのハッチングで示されている。
図17Aに示すように、デバイス1700は、ヘッドフォン通知1704上の入力1710(例えば、タップ入力)を検出し、それに応答して、図17Bに示すオーディオ露出インタフェース1712を表示する。
図17Bは、グラフ1714、露出インジケータ1716、瞬時フィルタオプション1718、及び持続時間セレクタ1720を含むオーディオ露出インタフェース1712を示す。グラフ1714は、選択可能な期間(例えば、時間、日、週、月、年)にわたってヘッドフォンオーディオ露出データ1714-1を示す。図17Bに示すように、オーディオ露出データ1714-1は、午前11時から午後12時までのヘッドフォンデバイス(例えば、ヘッドフォンデバイス1405)におけるオーディオ出力のボリューム(デシベルの範囲として表される)を示す。期間が変更されることができ、持続時間セレクタ1720内の持続時間オプションのうちの1つを選択することによって、更新されたオーディオ露出インタフェース1712内の対応するデータを変更することができる。
露出インジケータ1716は、グラフ1714内のオーディオ露出データの集合が安全であるか(例えば、大きいオーディオを蓄積しない)、大きいか(例えば、大きいオーディオを蓄積するが、現在大きいものを蓄積していない)、又は危険であるか(例えば、過度に大きい)を示す。いくつかの実施形態では、インジケータ1716は、露出レベルが安全であるときに緑色のチェックマークで示され、露出レベルが大きいときには黄色の警告標識を有し、露出レベルが危険であるときには赤色の警告標識を有する。
瞬時フィルタオプション1718は、100dBの瞬時オーディオ露出閾値に関連付けられ、100dB閾値を超えるオーディオ露出データに応答して通知又はアラートが生成されたインスタンスを強調するために、オーディオ露出データ1714-1の外観を変更するように選択可能である。瞬時フィルタオプション1718は、オーディオ露出データ1714-1に基づいて1つの瞬時オーディオ露出通知が生成されたことを示す通知カウント1718-1を含む。いくつかの実施形態では、オーディオ露出インタフェース1712は、表示されたオーディオ露出データが、様々なフィルタオプションに対応するデータを含むときに示される様々なフィルタオプションを含む。逆に、これらの様々なフィルタオプションは、表示されたオーディオ露出データに適用されない場合には示されない。例えば、オーディオ露出データ1714-1に対して瞬時オーディオ露出アラートが生成されなかった場合、瞬時フィルタオプション1718は表示されない。
図17Bに示すように、デバイス1700は、瞬時フィルタオプション1718上の入力1722(例えば、タップ入力)を検出し、それに応答して、瞬時フィルタオプション1718を選択し、オーディオ露出データ1714-1の外観を変更して、図17Cに示すようにデータポイント1724を導入する。データポイント1724は、デバイス1700が、100dB閾値を超える出力オーディオのボリューム(オーディオ露出データ1714-1によって表される)に応答して、瞬時オーディオ露出アラート(例えば、1416)を生成したインスタンスを示す。データポイント1724は、オーディオ露出データ1714-1によって表される出力ボリュームが午前11:53頃に103dBであったときにアラートが生成されたことを示す。
図17Cに示すように、デバイス1700は、持続時間セレクタ1720の1ヶ月のタブ1720-1上の入力1726(例えば、タップ入力)を検出し、それに応答して、オーディオ露出インタフェース1712を更新して、図17Dに示すように、2019年4月29日から2019年5月28日までの1ヶ月のウィンドウのために生成されたオーディオ露出データ1714-2を含む。更新されたオーディオ露出インタフェース1712はまた、オーディオ露出データ1714-2が、それぞれのフィルタオプションに対応するデータを含むため、瞬時フィルタオプション1718及び集約フィルタオプション1728も含む。具体的には、オーディオ露出データ1714-2は、(100dBの瞬時オーディオ露出閾値を3回超えることによって)3つの瞬時オーディオ露出アラートをトリガするオーディオ露出データを含む。したがって、瞬時フィルタオプション1718は、3の値を有する通知カウント1718-1と共に示される。同様に、オーディオ露出データ1714-2は、1つの集約オーディオ露出アラート(例えば、1418)をトリガした(一度7日の集約露出閾値を超えることによって)オーディオ露出データを含む。したがって、集約フィルタオプション1728は、1つの値を有する通知カウント1728-1と共に示される。
図17Dに示すように、デバイス1700は、瞬時フィルタオプション1718上の入力1730(例えば、タップ入力)を検出し、それに応答して、瞬時フィルタオプション1718を選択し、図17Eに示すように、データポイント1731~1733を導入するために、オーディオ露出データ1714-2の外観を変更する。データポイント1724と同様に、データポイント1731~1733は、デバイス1700が、100dB閾値を超える出力オーディオのボリューム(オーディオ露出データ1714-2によって表される)に応答して、瞬時オーディオ露出アラートを生成したインスタンスを示す。データポイント1731は、オーディオ露出データ1714-2によって表される出力ボリュームが2019年5月13日頃に103dBであったときにアラートが生成されたことを示す。データポイント1732は、オーディオ露出データ1714-2によって表される出力ボリュームが2019年5月21日頃に100dBであったときにアラートが生成されたことを示す。データポイント1733は、オーディオ露出データ1714-2によって表される出力ボリュームが2019年5月27日頃に103dBであったときにアラートが生成されたことを示す。
以下により詳細に記載されるように、集約フィルタオプション1728は、オーディオ露出データ1714-2が集約オーディオ露出制限を超え、対応する集約オーディオ露出アラートが生成されたときの指示を用いて、オーディオ露出データ1714-2を更新するように選択されることができる。
図17F~図17Iは、集約オーディオ露出制限に到達し且つ対応するアラート(例えば、集約オーディオ露出アラート1418)がデバイス1700によって生成された後のオーディオ露出データ(例えば、ヘッドフォンデバイス1405を使用することからのオーディオ露出)にアクセスして表示するための健康アプリケーション内の例示的なユーザインタフェースを示す。
図17Fでは、デバイス1700は、いくつかの実施形態では、ヘッドフォン通知1734を含む、ディスプレイ1702の概要インタフェース1702を表示する。ヘッドフォン通知1734は、集約オーディオ露出グラフ1738及びオーディオ状態テキスト1736を含む。
オーディオ状態テキスト1736は、集約オーディオ露出グラフ1738によって表されるユーザに対する集約オーディオ露出の状態を示す。現在の実施形態では、オーディオ状態テキスト1736は、ユーザのオーディオ露出の集約が7日間の期間にわたる集約オーディオ露出制限に近付いていることを示す。
オーディオ露出グラフ1738は、現在の7日間の期間(例えば、7日間のウィンドウのローリング)にわたる最近のオーディオ露出の集約(例えば、最近のオーディオ露出データから測定される)を表す。オーディオ露出グラフ1738は、集約オーディオ露出測定値1738-1、集約オーディオ露出閾値1738-2、及びオーディオ露出データの集約が測定される7日間の期間を示す日付範囲1738-3を含む。集約オーディオ露出測定値1738-1は、集約オーディオ露出閾値1738-2に対して示されている。オーディオ露出グラフ1738は、集約オーディオ露出制限に対して7日間の期間にわたって測定された集約オーディオ露出の単純な説明を提供する。
いくつかの実施形態では、集約オーディオ露出測定値1738-1は、ローリング式の7日間の期間にわたって計算される。ユーザが7日間ヘッドフォンオーディオに露出されると(例えば、ユーザは、ヘッドフォンを使用してオーディオを聞いている)、測定された集約オーディオ露出は、ローリング式の7日間ウィンドウのフロントエンドに追加されているオーディオ露出量(例えば、現在測定されたオーディオ露出)、及びロールウィンドウのバックエンドから低下したオーディオ露出の量(例えば、5月21日に測定されたオーディオ露出)に基づいて変動する。いくつかの実施形態では、ローリング式の7日間ウィンドウは、15分間の増分で測定される。いくつかの実施形態では、集約オーディオ露出測定値1738-1は、ヘッドフォンで生成されたオーディオからの露出を(例えば、デバイス1700と共に使用されるヘッドフォンデバイスの全てのセットにわたって)計算する。したがって、集約オーディオ露出は、例えば、外部スピーカなどの非ヘッドフォンオーディオデバイスからのオーディオ露出に影響を及ぼさない。
集約オーディオ露出閾値1738-2は、ユーザの聴覚(例えば、ユーザの聴覚システム)に有害ではない7日間のウィンドウにわたって測定された、集約されたオーディオ露出の閾値量を表す。いくつかの実施形態では、集約オーディオ露出閾値1738-2は、以下の2つの主要な要因の組み合わせに基づいて、ローリング式の7日間のウィンドウのために判定される:ユーザがヘッドフォンを使用して聞くオーディオのボリューム(本明細書では、オーディオ露出データ(例えば、以下に記載されるオーディオ露出データ1744-1)として表される)、及びユーザがオーディオに露出される持続時間。したがって、ヘッドフォンで再生されるオーディオのボリュームが大きいほど、聴覚を損なうことなくユーザがオーディオに露出されることができる時間量が短くなる。同様に、ユーザがヘッドフォンオーディオに露出されるほど、ユーザが聴覚を損なうことなく、ユーザがオーディオを安全に聞くことができるボリュームが低くなる。例えば、7日間の期間にわたって、ユーザは、75dBで合計127時間オーディオを安全に聞くことができる。別の例として、7日間の期間にわたって、ユーザは、90dBで合計4時間オーディオを安全に聞くことができる。更に別の実施例として、7日間の期間にわたって、ユーザは、100dBで合計24分間オーディオを安全に聞くことができる。更に別の実施例として、7日間の期間にわたって、ユーザは、110dBで合計2分間オーディオを安全に聞くことができる。
この閾値に対するユーザの集約オーディオ露出の状態は、集約オーディオ露出グラフ1738によって表される。図17Fに示す実施形態では、集約オーディオ露出測定値1738-1は、現在、7日間の期間のオーディオ露出制限の98%にある。したがって、ユーザが7日のウィンドウにわたって露出されたオーディオボリュームの集約量は、集約オーディオ露出閾値1738-2に近付くが、集約オーディオ露出グラフ1738及びオーディオ状態テキスト1736によって示されるように、閾値を超えていない。加えて、概要インタフェース1702は、7日間の期間の現在の集約オーディオ露出が安全であることを示す状態インジケータ1740を含む。
ここで図17Gを参照すると、デバイス1700は、図17Fに示すものと同様の実施形態のための概要インタフェース1703を示しているが、7日間の期間のオーディオ露出制限の115%での集約オーディオ露出測定値1738-1を有する。したがって、ユーザが7日間のウィンドウ上に露出されたオーディオボリュームの集約量は、集約オーディオ露出グラフ1738及びオーディオ状態テキスト1736によって示されるように、集約オーディオ露出閾値1738-2を超えている。加えて、概要インタフェース1702は、7日間の期間の現在の集約オーディオ露出が大きいことを示す状態インジケータ1740を含む。
図17Gに示すように、デバイス1700は、ヘッドフォン通知1734上の入力1740(例えば、タップ入力)を検出し、それに応答して、図17Hに示すオーディオ露出インタフェース1742を表示する。
オーディオ露出インタフェース1742は、図17Bに示されるオーディオ露出インタフェース1712と同様であるが、代わりに、図17Gによって表される状態に対応するオーディオ露出データを示す。図17Hに示す実施形態では、オーディオ露出インタフェース1742は、グラフ1744(グラフ1714と同様)、露出インジケータ1746(インジケータ1716と同様)、及び集約フィルタオプション1748(集約フィルタオプション1728と同様)を含む。
グラフ1744は、選択可能な期間にわたるヘッドフォンオーディオ露出データ1744-1を示す。図17Hでは、オーディオ露出データ1744-1は、2019年4月29日から2019年5月28日までの1ヶ月にわたるヘッドフォンデバイス(例えば、ヘッドフォンデバイス1405)におけるオーディオ出力のボリューム(デシベルの範囲として表される)を示す。オーディオ露出インジケータ1746は、1ヶ月間の集約オーディオ露出が大きいことを示す。
オーディオ露出データ1744-1は、2019年4月29日から2019年5月28日まで7日の集約露出閾値を4回超えることによって、4つの集約オーディオ露出アラート(例えば、1418)をトリガしたオーディオ露出データを含む。したがって、集約フィルタオプション1748は、4の値を有する通知カウント1748-1と共に示される。
図17Hに示すように、デバイス1700は、集約フィルタオプション1748上の入力1750(例えば、タップ入力)を検出し、それに応答して、集約フィルタオプション1748を選択し、図17Iに示すように、アラートインジケータ1751~1754を導入するようにオーディオ露出データ1744-1の外観及び集約オーディオ露出アラートをトリガしたハイライトオーディオ露出データの外観を変更する。アラートインジケータ1751~1754は、デバイス1700が、7日間の集約オーディオ露出閾値を超える出力オーディオの集約ボリューム(オーディオ露出データ1744-1によって表される)に応答して、集約オーディオ露出アラートを生成したインスタンスを示す。集約オーディオ露出アラートをトリガしたオーディオ露出データは、黒一色で視覚的に区別されて示され、一方、集約オーディオ露出アラートをトリガしなかったオーディオ露出データは、黒一色ではなく示される。
アラートインジケータ1751は、その日付からのオーディオ露出データの集約及び以前の6日に基づいて、集約オーディオ露出アラートが、2019年5月12日頃に生成され、集約オーディオ露出閾値を超えことを示す。アラートインジケータ1752は、その日付からのオーディオ露出データの集約及び以前の6日に基づいて、集約オーディオ露出アラートが、2019年5月19日頃に生成され、集約オーディオ露出閾値を超えたことを示す。アラートインジケータ1753は、その日付からのオーディオ露出データの集約及び以前の6日に基づいて、集約オーディオ露出アラートが、2019年5月22日頃に生成され、集約オーディオ露出閾値を超えたことを示す。アラートインジケータ1754は、その日付からのオーディオ露出データの集約及び以前の6日に基づいて、集約オーディオ露出アラートが、2019年5月28日頃に生成され、集約オーディオ露出閾値を超えたことを示す。
集約オーディオ露出は、7日間の周期にわたって測定されるため、いくつかのインスタンスでは、オーディオ露出データ1744-1は、2つ以上の集約オーディオ露出アラートをトリガするオーディオ露出データのサブセットを含むことができる。例えば、サブセット1744-1aは、アラートインジケータ1752によって表される集約オーディオ露出アラートをトリガしたオーディオ露出データのサブセットである。サブセット1744-1aはまた、アラートインジケータ1753によって表される集約オーディオ露出アラートをトリガしたオーディオ露出データのサブセットである。
図17J~図17Vは、図17J~図17Pに示すようなオーディオ露出データの詳細を閲覧することを含む、オーディオ露出データを管理するための例示的なユーザインタフェースを示す。
図17Jでは、デバイス1700は、(ヘッドフォン通知1734と同様の)ヘッドフォンオーディオ露出状態1755を示す、ディスプレイ1702の概要インタフェース1702を表示する。ヘッドフォンオーディオ露出状態1755は、現在の7日間の期間の集約オーディオ露出のスナップショット図を提供する。ヘッドフォンオーディオ露出状態1755は、(オーディオ状態テキスト1736と同様の)露出状態テキスト1756と、(オーディオ露出グラフ1738と同様の)集約オーディオ露出グラフ1758とを含む。集約オーディオ露出グラフ1758は、以前の7日間の期間の集約オーディオ露出のグラフィカル表現を提供し、露出状態テキスト1756は、集約オーディオ露出制限に対する集約オーディオ露出の現在の状態のテキスト説明を提供する。図17Jでは、露出状態テキスト1756及び集約オーディオ露出グラフ1758は、現在の7日間の期間の集約オーディオ露出が、集約オーディオ露出制限の80%であることを示す。
図17Kは、露出状態テキスト1756及び集約オーディオ露出グラフ1758が、現在の7日間の期間の集約オーディオ露出が集約オーディオ露出制限の115%であることを示すことを除いて、図17Jに示す実施形態と同様の実施形態を示す。いくつかの実施形態では、集約オーディオ露出が、乗算係数(例えば、制限の2倍、制限の3倍)だけ閾値を超えるとき、ヘッドフォンオーディオ露出状態1755は、集約オーディオ露出が制限を超える乗算された量の指標を含む。例えば、露出状態テキスト1756は、オーディオ露出の7日間の集約が200%又は「2×」であることを示すことができる。
図17K及び図17Lに示されるように、デバイス1700は、入力1760及び1762(例えば、タップ入力)を検出し、それに応答して、図17Mに示すように、聴覚インタフェース1764を表示する。
聴覚インタフェース1764は、オーディオデータにアクセスするための様々なオプションを含む。例えば、図17Mに示すように、聴覚インタフェース1764は、過去12ヶ月で生成されたオーディオ露出アラートのリストを閲覧するためのオプションを表す通知オプション1766を含む。通知オプション1766は、過去の年に、7つのオーディオ露出アラートが生成されたことを示す。
図17Mに示すように、デバイス1700は、通知オプション1766上の入力1768(例えば、タップ入力)を検出し、それに応答して、図17Nに示すようにアラートリスト1770を表示する。
アラートリスト1770は、過去12ヶ月の間に生成されたアラートデバイス1700を表す項目1771のリストである。各項目1771は、それぞれのアラートが生成されたときを示す日付1772と、それぞれのアラートが瞬時オーディオ露出アラート(例えば、100dBの制限アラート)又は集約オーディオ露出アラート(例えば、7日間の集約制限アラート)であるかどうかを示すアラートタイプ1774とを含む。
図17Nに示すように、デバイス1700は、全てのデータアフォーダンス1778上の入力1776(例えば、タップ入力)を検出し、それに応答して、図17Oに示すように、オーディオデータインタフェース1780を表示する。
音データインタフェース1780は、記録された音レベル及びアラートのリストと、それぞれの項目のタイムスタンプと、を含む。例えば、項目1780-1は、5月28日午後8:46に記録された84dBの音を表す。項目1780-2は、5月28日午後8:16に生成された7日間の集約制限アラートを表す。項目1780-3は、5月28日午後7:46に生成された100dBの制限アラートを表す。
図17Oに示すように、デバイス1700は、項目1780-3上の入力1782を検出し、それに応答して、図17Pに示すように、オーディオ詳細インタフェース1784を表示する。
オーディオ詳細インタフェース1784は、音データインタフェース1780から選択された項目に関連付けられた様々な詳細を表示する。例えば、本実施形態では、100dBの制限アラートに対応する項目1780-3は、インタフェース1780から選択された。したがって、オーディオ詳細インタフェース1784は、アラートに関連するオーディオサンプルの詳細1785、及びアラートに関連するデバイス詳細1786を含む。オーディオサンプル詳細1785は、例えば、アラートをトリガしたオーディオサンプルの開始及び停止時間、アラートをトリガしたオーディオサンプルのソース、インタフェース1780に追加された日付項目1780-3、通知音レベルなどのアラートの詳細、及びそれぞれのアラートの第1、第2、第3の繰り返しであったかどうかの指示を含む。例えば、アラートが集約露出制限アラートである場合、オーディオサンプル詳細1785は、それぞれのアラートが、第1の複数の集約オーディオ露出閾値(例えば、1×)で生成されたアラートであったかどうか、第2の複数の閾値(例えば、2×)、又は第3の複数の閾値(例えば、3×)であるかどうかを示すことができる。データインタフェース1780はまた、アラートを生成したデバイスの詳細を示すデバイス詳細1786も含む。
図17Q~図17Sは、オーディオ露出資料にアクセスするための例示的なユーザインタフェースを示す。
図17Qに示すように、デバイス1700は、聴覚インタフェース1764上の入力1788(例えば、ドラッグ又はスワイプジェスチャ)を検出し、それに応答して、聴覚の健康上の資料を閲覧するために、図17Rに選択可能なオプションを表示する。
図17Rでは、デバイス1700は、安全ヘッドフォンリッスンのための物品オプション1791を選択する入力1790(例えば、タップ入力)を検出し、それに応答して、図17Sの安全ヘッドフォンリスニング物品1792を表示する。
図17T~図17Vは、オーディオデータを削除するための例示的なユーザインタフェースを示す。
図17Tでは、デバイス1700は、概要インタフェース1702に示される設定オプション1794上の入力1793(例えば、タップ入力)を検出し、それに応答して、図17Uに示すように、オーディオ露出データ記憶設定を管理するための設定インタフェース1795を表示する。
設定インタフェース1795は、ヘッドフォンオーディオ露出データを記憶するための持続時間を変更するように選択されることができるオプション1795-1を含む。図17Uに示すように、設定は、現在、オーディオ露出データを8日間記憶するように構成されている。しかしながら、これは(オプション1795-1を選択することによって)変更されて、例えば、月又は年などの異なる持続時間を選択することができる。
設定インタフェース1795はまた、8日間よりも古いオーディオ露出データを削除するように選択されることができるオプション1795-2を含む。このオプションを選択することは、このウィンドウの外側にあるオーディオ露出データを削除しながら、現在のオーディオ露出データのローリング式の7日間ウィンドウを保存する。
設定インタフェース1795はまた、現在のローリング式の7日間ウィンドウ内のオーディオ露出データを含む全てのオーディオ露出データを削除するように選択されることができるオプション1795-3も含む。図17Uに示すように、デバイス1700は、オプション1795-3上の入力1796(例えば、タップ入力)を検出し、それに応答して、図17Vに示すような確認インタフェース1797を表示する。確認インタフェース1797は、オーディオ露出データの削除を確認するためのオプションと、オーディオ露出データを削除することが、以前に生成された(又は予測された)アラート通知の損失をもたらすことがある旨の警告とを含む。
図18は、いくつかの実施形態に係る、コンピュータシステムを使用してオーディオ露出データを管理するための方法を示すフロー図である。方法1800は、ディスプレイ生成構成要素(例えば、ディスプレイ1702)(例えば、視覚出力デバイス、3Dディスプレイ、透過ディスプレイ、プロジェクタ、ヘッドアップディスプレイ、ディスプレイコントローラ、ディスプレイデバイス)、及び1つ以上の入力デバイス(例えば、ディスプレイ1702のタッチ感知面)と通信するコンピュータシステム(例えば、スマートフォン、スマートウォッチ)(例えば、デバイス100、300、500、600、601、800、900、1100、1200、1400、1401、1700)で実行される。いくつかの実施形態では、コンピュータシステムは、ディスプレイ生成構成要素及び1つ以上の入力デバイスを含む。方法1800のいくつかの動作は、任意選択的に組み合わされ、いくつかの動作の順序は、任意選択的に変更され、いくつかの動作は、任意選択的に省略される。
いくつかの実施形態では、電子デバイス(例えば、100、300、500、600、601、800、900、1100、1200、1400、1401、及び1700)は、コンピュータシステムである。コンピュータシステムは、任意選択的に、ディスプレイ生成構成要素と1つ以上の入力デバイスとの通信(例えば、有線通信、無線通信)である。ディスプレイ生成構成要素は、CRTディスプレイを介したディスプレイ、LEDディスプレイを介したディスプレイ、又は画像投影を介した表示などの視覚的な出力を提供するように構成されている。いくつかの実施形態では、ディスプレイ生成構成要素は、コンピュータシステムと一体化される。いくつかの実施形態では、ディスプレイ生成構成要素は、コンピュータシステムとは別個である。1つ以上の入力デバイスは、ユーザ入力を受けるタッチ感知面など、入力を受け取るように構成される。いくつかの実施形態では、1つ以上の入力デバイスは、コンピュータシステムと一体化される。いくつかの実施形態では、1つ以上の入力デバイスは、コンピュータシステムとは別個である。したがって、コンピュータシステムは、有線又は無線接続を介して、データ(例えば、画像データ又はビデオデータ)を、一体型又は外部のディスプレイ生成構成要素に送信して、(例えば、ディスプレイデバイスを使用して)コンテンツを視覚的に生成することができ、1つ以上の入力デバイスからの入力を、有線又は無線接続で受信することができる。
後述するように、方法1800は、オーディオ露出データを管理するための直感的方法を提供する。この方法は、オーディオ露出データを管理するためのユーザの認知的負担を軽減し、それによってより効率的なヒューマン-マシンインタフェースを作り出す。バッテリ動作式のコンピューティングデバイスの場合には、ユーザがオーディオ露出データをより高速且つより効率的に管理することを可能にすることにより、電力が節約され、バッテリ充電の間隔が増す。
方法1800では、コンピュータシステムは、1つ以上の入力デバイスを介して、オーディオ露出データを表示せよとの要求に対応する入力(例えば、概要タブからの健康アプリ内、閲覧タブからアクセスされる聴覚ユーザインタフェース内)を受信する(1802)。
オーディオ露出データを表示せよとの要求に対応する入力の受信に応答して、コンピュータシステムは、ディスプレイ生成構成要素を介して、以下を同時に表示することを含むオーディオ露出インタフェースを表示する(1804)(例えば、同時に表示する):(1806)ある期間(例えば、時間、日、週、月、年)にわたるオーディオ露出データの指示(オーディオ生成構成要素(例えば、ヘッドフォン)で生成された出力ボリュームを示すデータのグラフィカル表現、例えば、図6A~図6AL、図7A~図7B、図8A~図8L、図9A~図9G、及び図10のいずれかに関して上述したような第1の期間にわたるノイズレベルデータのグラフィカル表現(例えば、コンピュータシステムのセンサからのデータ、外部コンピュータシステムからのデータ)、及び(1808)オーディオ露出閾値(例えば、瞬時露出閾値、集約露出閾値)を超える、センサで検出された外部オーディオデータの集約量、オーディオ露出の量(例えば、オーディオ生成構成要素で生成されたオーディオの瞬時出力ボリューム、オーディオ生成構成要素で生成されたオーディオの集約レベル又は量、センサ(例えば、コンピュータシステムの)で検出された外部オーディオデータ(例えば、ノイズ)の瞬時量)を示す第1のオーディオ露出値(例えば、値(例えば、オーディオ露出データを含む)の結果として提供された(例えば、コンピュータシステムで生成又は出力された)第1のアラート(例えば、通知、触覚応答、オーディオ応答、バナー)の第1の視覚的表示(例えば、オーディオ露出データのグラフィカル表現上の強調表示された点;健康アプリUIの概要タブに表示された通知)。第1のアラートの第1の視覚的表示は、第1のアラートが提供された時間(例えば、日、時間、分)の指示を含む(例えば、視覚的表示は、アラートが提供された時間/瞬間を表す)。いくつかの実施形態では、アラートは、オーディオ露出値がオーディオ露出閾値を超えることの指示を含む。いくつかの実施形態では、オーディオ露出インタフェースは、第2のアラートが提供された時間の指示を含む第2のアラートの第2の視覚的表示を含む。いくつかの実施形態では、オーディオ露出値は、ボリューム設定(例えば、100%のボリューム)及び既知のオーディオ生成構成要素応答(例えば、再生されている特定の信号に対して100%ボリュームで87dBのヘッドフォン出力)に基づいて推定される。いくつかの実施形態では、オーディオ露出値は、コンピュータシステムのセンサ(例えば、マイクロフォン)によって検出されたノイズデータ(例えば、着信信号又はデータ)に基づく(例えば、オーディオ露出値は、コンピュータシステムが位置する物理的環境のノイズレベルを表す)。
いくつかの実施形態では、オーディオ露出インタフェースは、オーディオ露出閾値(例えば、瞬間的露出閾値、集約露出閾値)を超える第2のオーディオ露出値(例えば、第1のオーディオ露出値とは異なる)の結果として提供される第2のアラートの第2の視覚的表示を更に含む。第2のアラートの第2の視覚的表示は、第2のアラートが提供された時間(例えば、第1のアラートが提供された時間とは異なる)の指示を含み、第2の視覚的表示は、第1の視覚的表示とは異なる。
いくつかの実施形態では、第1の期間(例えば、週)にわたるオーディオ露出データの指示を表示することは、1)第1の期間の第1のサブセットに対応し且つ第1のオーディオ露出値を含む(例えば、第1の曜日のオーディオ露出閾値を超える第1のオーディオ露出値)オーディオ露出データの第1のサブセット(例えば、第1の曜日のオーディオデータ)を表示すること、及び、2)第1の期間の第2のサブセットに対応し且つ第2のオーディオ露出値を含む(例えば、第2の曜日のオーディオ露出閾値を超える第2のオーディオ露出値)オーディオ露出データの第2のサブセット(例えば、第2の曜日のオーディオデータ)を表示することを含む。いくつかの実施形態では、第1のアラートの第1の視覚的表示は、オーディオ露出データの第1のサブセット(例えば、その一部として)と共に表示される(例えば、第1のアラートの第1の視覚的表示は、第1の曜日のオーディオ露出データ上に位置付けられる)。いくつかの実施形態では、第2のアラートの第2の視覚的表示は、オーディオ露出データの第2のサブセット(例えば、その一部として)と共に表示される(例えば、第2のアラートの第2の視覚的表示は、第2の曜日のオーディオ露出データ上に位置付けられる)。
いくつかの実施形態では、オーディオ露出インタフェースは、第1のアラート(例えば、瞬時オーディオ露出制限又は集約オーディオ露出制限を超える出力オーディオに応答して生成されたアラート、オーディオ露出制限(例えば、ノイズレベル制限)を超えるノイズレベルデータに応答して生成されたアラート)が提供された(例えば、コンピュータシステムで受信された)1日以上の表示を含む。いくつかの実施形態では、第1のアラートが提供された時刻の表示は、第1のアラートが提供された時刻(例えば、コンピュータシステムで受信された)の表示である。
いくつかの実施形態では、オーディオ露出データの指示は、第1の期間にわたって集約されたオーディオ露出データの表現を含む。いくつかの実施形態では、集約オーディオ露出の表現は、7日間の期間の集約オーディオ露出を示すグラフである。
いくつかの実施形態では、第1の期間にわたって集約されるオーディオ露出データの表現は、オーディオ露出閾値の表示(例えば、集約オーディオ露出制限の表示)に対する第1の期間(例えば、7日)にわたって表示される集約オーディオ露出データのグラフィカル表現を含む。いくつかの実施形態では、集約オーディオ露出データのグラフィカル表現は、集約オーディオ露出制限を超えるためにアラートが提供されたかどうかにかかわらず表示される(例えば、集約されたオーディオ露出制限を超えるためにアラートが提供されていない場合であっても、グラフィカル表現が表示される)。いくつかの実施形態では、グラフィカル表現は、集約オーディオ露出制限の表示を含む。いくつかの実施形態では、グラフィカル表現は、集約オーディオ露出制限に対する集約オーディオ露出データのスナップショットを提供する。例えば、スナップショットビューは、集約オーディオ露出データが集約オーディオ露出制限を下回ることを示してもよい。別の例として、スナップショットビューは、集約オーディオ露出データが集約オーディオ露出制限を超えることを示してもよい。いくつかの実施形態では、集約オーディオ露出データは、リアルタイムで更新され、ローリングベース(例えば、15分毎)で計算される。
いくつかの実施形態では、集約オーディオ露出データは、繰り返しスケジュール(例えば、所定の期間にわたって15分毎に計算される)で計算される。いくつかの実施形態では、オーディオ露出データは、7日間の期間にわたって15分毎に集約される。したがって、7日間の期間は、オーディオ露出データが集約される約672個の15分間隔で構成される。新たな15分間隔が7日間のウィンドウに追加されると、最も古い15分間隔が除去され、オーディオ露出データは、7日間のウィンドウについて再計算(例えば、集約)される。例えば、直近の15分間隔のオーディオ露出データが、7日間のウィンドウにもはや含まれていない最も古い15分間隔のオーディオ露出データよりも大きなオーディオ露出レベルを示す場合、集約オーディオ露出データは、7日間のウィンドウ中の集約オーディオ露出の増加を示す。したがって、集約オーディオ露出データは、7日間のウィンドウに追加され、それから除去されるオーディオ露出レベルに基づいて15分毎に調整/更新(例えば、増加、減少、不変)する。
いくつかの実施形態では、第1のオーディオ露出値は、ある期間にわたる集約オーディオ露出値に対応する。いくつかの実施形態では、第1の視覚的表示は、第1のアラートに対応する集約オーディオ露出の期間の表示を含む。いくつかの実施形態では、アラートが集約オーディオ露出制限を超えることに応答して生成されると、オーディオ露出UIは、アラートをトリガしたオーディオ露出データの7日間の期間を表示する。いくつかの実施形態では、オーディオ露出インタフェースは、オーディオ露出データが7日間の集約オーディオ露出制限に近付いているか、又はそれを超えているという通知として表示される。
いくつかの実施形態では、オーディオ露出インタフェースを表示することは、第1の期間中に提供されたアラート(例えば、第1のタイプ又は第2のタイプのアラート)(例えば、瞬時オーディオ露出制限を超えることに応答して生成されたアラート、又は集約オーディオ露出制限を超えることに応答して生成されたアラート)の合計の表示を含むユーザインタフェースオブジェクトを表示することを更に含む。いくつかの実施形態では、ユーザインタフェースオブジェクトは、選択されたときに、第1の期間(例えば、時間、日、週、月、年)中に生成されたアラートの視覚的表示を含むように、オーディオ露出データの外観を変更するアフォーダンス(例えば、フィルタアフォーダンス)である。いくつかの実施形態では、アフォーダンスは、第1の期間中に生成されたアラートの数を示す。
いくつかの実施形態では、アラートの合計は、集約オーディオ露出制限(例えば、オーディオ露出閾値)を超えることに応答して生成されたアラートの合計を含む。いくつかの実施形態では、ユーザインタフェースオブジェクトは、第1の期間中に提供されたアラートの合計に関連付けられたアラートの種類の表示を更に含む(例えば、アラートの種類は、集約オーディオ露出制限を超えることに応答して生成されたアラートである)。
いくつかの実施形態では、コンピュータシステムは、1つ以上の入力デバイスを介して、オーディオ露出アラートのリストを表示せよとの要求に対応する入力を受信し、オーディオ露出アラートのリストを表示せよとの要求に対応する入力の受信に応答して、コンピュータシステムは、(例えば、オーディオ露出インタフェースの一部として、オーディオ露出インタフェースとは別個に)以下を含むリストを表示する:1)1つ以上のオーディオ露出閾値(例えば、オーディオ露出閾値を含む)(例えば、瞬時露出閾値、集約露出閾値)を超える1つ以上のオーディオ露出値(例えば、第1のオーディオ露出値を含む)の結果として提供される第1のオーディオ露出アラート(例えば、第1のアラート)の表示、第1のオーディオ露出アラートに対応する第1のオーディオサンプルデータ(例えば、オーディオメタデータ、対応するオーディオ露出アラートをトリガしたオーディオの開始時間及び停止時間の表示、対応するオーディオ露出アラートが、所定の期間にわたるアラートの第1/第2/第3の発生であるかどうかの表示)を含む第1のオーディオ露出アラートの表示、及び、2)1つ以上のオーディオ露出閾値を超える1つ以上のオーディオ露出値の結果として提供される第2のオーディオ露出アラートの表示であって、第2のオーディオ露出アラートに対応する第2のオーディオサンプルデータを含む第2のオーディオ露出アラートの表示。
いくつかの実施形態では、第1の期間中、コンピュータシステムは、瞬時オーディオ露出閾値基準(例えば、オーディオデータの出力が瞬時音圧値(例えば、90dB)を超えるときに満たされる基準)を満たすオーディオデータの出力を生じさせる。いくつかの実施形態では、オーディオ露出インタフェースを表示することは、コンピュータシステムが瞬時オーディオ露出閾値基準を満たしたオーディオデータの出力を生じさせたときにボリューム制限設定(例えば、「大きい音低減」)が無効化されたとの判定に従って、瞬時オーディオ露出閾値(例えば、瞬時オーディオ露出制限)を超える第2のオーディオ露出値の結果として提供される第2のアラートの第2の視覚的表示を表示することを含む。いくつかの実施形態では、オーディオ露出インタフェースを表示することは、コンピュータシステムが瞬時オーディオ露出閾値基準を満たしたオーディオデータの出力を生じさせたときにボリューム制限設定が有効化されたとの判定に従って、第2の視覚的表示の表示を控える(例えば、ボリューム制限設定が有効化され、したがって、オーディオ露出データは、第2のアラートをトリガしたであろう瞬時オーディオ露出制限を超えなかったことから、第2の視覚的表示は表示されない)ことを含む。いくつかの実施形態では、第1のアラートは、瞬時オーディオ露出閾値基準とは異なるタイプのオーディオ露出閾値(例えば、集約オーディオ露出閾値)に対応し、ボリューム制限設定が有効化されているか無効化されているかにかかわらず表示される。いくつかの実施形態では、ボリューム制限は、コンピュータシステムを使用して、又はウェアラブルデバイス若しくはマスターデバイス(例えば、コンピュータシステムのボリューム制限を設定/有効/無効にすることを認可された親デバイス)などの外部コンピュータシステムを使用して、設定/有効/無効にされる。いくつかの実施形態では、ボリューム制限が無効化されると、オーディオ露出閾値は、集約オーディオ露出制限又は瞬時オーディオ露出制限とすることができる。したがって、結果として生じるアラートは、集約オーディオ露出制限に到達した旨のアラート、又は瞬時オーディオ露出制限に到達した旨のアラートとすることができる。しかしながら、ボリューム制限が有効化されると、オーディオ生成構成要素(例えば、ヘッドフォン)におけるオーディオは、図14A~図14AK及び図16に関してより詳細に記載されるように、出力オーディオデータが許容される最大ボリュームが瞬時オーディオ露出制限未満となるように制限される。したがって、ボリューム制限を有効化することにより、コンピュータシステムが瞬時オーディオ露出制限に達するためのアラートを提供するシナリオを除外する。しかしながら、そのような実施形態では、集約オーディオ露出制限に到達するために、アラートを依然として提供することができる。したがって、オーディオ露出閾値は、ボリューム制限が有効化されたときに、集約オーディオ露出制限であるが、瞬時オーディオ露出制限ではない。
いくつかの実施形態では、コンピュータシステムは、1)選択されたときに、オーディオ露出データを削除するためのプロセスを開始するアフォーダンスと、2)オーディオ露出アラートの利用可能性に関する通知(例えば、オーディオ露出データが削除された場合には、オーディオ露出アラート(例えば、第1のアラート)が削除されてもよいか又は欠落してもよい旨をユーザに警告するテキスト)とを同時に表示する。
いくつかの実施形態では、オーディオ露出データは、周囲音(例えば、ノイズ)に対応する。(例えば、オーディオ露出データはノイズレベルデータである)。いくつかの実施形態では、オーディオ露出データは、コンピュータシステム(例えば、オーディオ生成構成要素)によって生成されるオーディオではなく、コンピュータシステムの外部にあるオーディオを表す。例えば、オーディオ露出データは、コンピュータシステム(例えば、コンピュータシステムと通信するセンサ又はマイクロフォン)が位置する物理的環境のノイズレベルを表す。いくつかの実施形態では、コンピュータシステムは、周囲音を検出するためのマイクロフォン(例えば、ヘッドフォンに組み込まれた)と通信し、オーディオ露出データは、検出された周囲音を表す。
いくつかの実施形態では、オーディオ露出データは、(例えば、オーディオ生成構成要素を介して)コンピュータシステムによって生成されたオーディオ出力に対応する。いくつかの実施形態では、オーディオ露出データは、コンピュータシステムによって生成された(例えば、オーディオ生成構成要素で)オーディオデータを表す。例えば、オーディオ露出データは、コンピュータシステムに結合されたヘッドフォンデバイスにおけるオーディオ出力のボリュームを表す。
方法1800に関して上述したプロセス(例えば、図18)の詳細はまた、上述した方法にも類似の方式で適用可能であることに留意されたい。例えば、方法1300、1500、及び1600は、方法1800を参照して上述した様々な方法の特性のうちの1つ以上を任意選択的に含む。例えば、オーディオ設定を設定及び調整するための動作、オーディオ露出制限アラートを表示するための動作、及びオーディオ露出を管理するための動作は、方法1800に関して上述したオーディオ露出データを管理するための動作の少なくとも一部を組み込むことができる。簡潔にするために、これらの詳細は、以下で繰り返さない。
上記は、説明を目的として、特定の実施形態を参照して記述されている。しかしながら、上記の例示的な論考は、網羅的であること、又は開示される厳密な形態に本発明を限定することを意図するものではない。上記の教示を考慮して、多くの修正及び変形が可能である。本技術の原理、及びそれらの実際の適用を最もよく説明するために、実施形態が選択及び記載されている。それにより、他の当業者は、意図された具体的な用途に適するような様々な修正を用いて、本技術及び様々な実施形態を最も良好に利用することが可能となる。
添付図面を参照して、本開示及び例を十分に説明してきたが、様々な変更及び修正が、当業者には明らかとなるであろうことに留意されたい。そのような変更及び修正は、特許請求の範囲によって定義されるような、本開示及び例の範囲内に含まれるものとして理解されたい。
上述したように、本技術の一態様は、個人の音露出レベルをより効果的に監視するために、様々なソースから入手可能なデータ(例えば、録音物、聴力図)を収集及び使用することである。本開示は、いくつかの例において、この収集されたデータが、特定の人を一意に特定する個人情報データ、又は特定の人に連絡する若しくはその所在を突き止めるために使用できる個人情報データを含み得ることを考察する。そのような個人情報データとしては、人口統計データ、位置ベースのデータ、電話番号、電子メールアドレス、ツイッターID、自宅の住所、ユーザの健康若しくはフィットネスのレベルに関するデータ若しくは記録(例えば、バイタルサイン測定値、投薬情報、運動情報)、誕生日、又は任意の他の識別情報若しくは個人情報を挙げることができる。
本開示は、本技術におけるそのような個人情報データの使用がユーザの利益になる使用であり得る点を認識するものである。例えば、個人情報データが使用されて、日中の個人のノイズ露出の正確な評価をユーザに提供することができる。更に、ユーザに利益をもたらす個人情報データに関する他の使用も本開示によって意図されている。例えば、健康データ及びフィットネスデータは、ユーザの全般的なウェルネスについての洞察を提供するために使用することができ、又は、ウェルネスの目標を追求する技術を使用している個人への、積極的なフィードバックとして使用することもできる。
本開示は、そのような個人情報データの収集、分析、開示、伝送、記憶、又は他の使用に関与するエンティティが、確固たるプライバシーポリシー及び/又はプライバシー慣行を遵守するものとなることを想到する。具体的には、そのようなエンティティは、個人情報データを秘密として厳重に保守するための、業界又は政府の要件を満たしているか又は超えるものとして一般に認識されている、プライバシーのポリシー及び慣行を実施し、一貫して使用するべきである。そのようなポリシーは、ユーザによって容易にアクセス可能とするべきであり、データの収集及び/又は使用が変化するにつれて更新されるべきである。ユーザからの個人情報は、そのエンティティの合法的且つ正当な使用のために収集されるべきであり、それらの合法的使用を除いては、共有又は販売されるべきではない。更には、そのような収集/共有は、ユーザに告知して同意を得た後に実施されるべきである。その上、そのようなエンティティは、そのような個人情報データへのアクセスを保護及び安全化し、個人情報データへのアクセス権を有する他者が、それらのプライバシーポリシー及び手順を忠実に守ることを保証するための、あらゆる必要な措置を講じることを考慮するべきである。更に、そのようなエンティティは、広く受け入れられているプライバシーポリシー及び慣行に対する自身の遵守を証明するために、サードパーティによる評価を自らが受けることができる。更には、ポリシー及び慣行は、収集及び/又はアクセスされる具体的な個人情報データのタイプに適合されるべきであり、また、管轄権固有の考慮事項を含めた、適用可能な法令及び規格に適合されるべきである。例えば、アメリカ合衆国では、特定の健康データの収集又はそれへのアクセスは、医療保険の相互運用性と説明責任に関する法律(HIPAA)などの、連邦法及び/又は州法によって管理されてもよく、その一方で、他国における健康データは、他の規制及びポリシーの対象となり得るものであり、それに従って対処されるべきである。それゆえ、各国において、異なる個人データのタイプに関して異なるプライバシー慣行が保たれるべきである。
前述のことがらにも関わらず、本開示はまた、個人情報データの使用又は個人情報データへのアクセスを、ユーザが選択的に阻止する実施形態も想到する。すなわち、本開示は、そのような個人情報データへのアクセスを防止又は阻止するために、ハードウェア要素及び/又はソフトウェア要素が提供され得ることを意図している。例えば、ノイズ露出レベルを監視する場合において、本技術は、ユーザが、サービスの登録中又はその後のいつでも、個人情報データの収集への参加の「オプトイン」又は「オプトアウト」を選択できるように構成されることができる。別の実施例では、ユーザは、ノイズ露出レベルを監視するために録音データを提供しないように選択することができる。更に別の例では、ユーザは、録音データが維持される期間を制限するか、又はノイズ露出プロファイルの作成を完全に禁止するかを選択することができる。「オプトイン」及び「オプトアウト」の選択肢を提供することに加えて、本開示は、個人情報のアクセス又は使用に関する通知を提供することを意図している。例えば、ユーザの個人情報データにアクセスすることとなるアプリのダウンロード時にユーザに通知され、その後、個人情報データがアプリによってアクセスされる直前に再びユーザに注意してもよい。
更には、本開示の意図は、個人情報データを、非意図的若しくは無許可アクセス又は使用の危険性を最小限に抑える方法で、管理及び処理するべきであるという点である。データの収集を制限し、データがもはや必要とされなくなると削除することにより、リスクを最小化することができる。加えて、且つ、特定の健康関連アプリケーションにおいて適用可能な場合、ユーザのプライバシーを保護するために、データの匿名化を使用することができる。非特定化は、適切な場合には、特定の識別子(例えば、生年月日)を除去すること、記憶されたデータの量又は特異性を制御すること(例えば、位置データを住所レベルよりも都市レベルで収集すること)、データがどのように記憶されるかを制御すること(例えば、データをユーザ全体にわたって情報集約すること)及び/又は他の方法によって、容易にすることができる。
それゆえ、本開示は、1つ以上の様々な開示された実施形態を実施するための、個人情報データの使用を広範に網羅するものであるが、本開示はまた、そのような個人情報データにアクセスすることを必要とせずに、それらの様々な実施形態を実施することも可能であることを想到する。すなわち、本技術の様々な実施形態は、そのような個人情報データの全て又は一部分が欠如することにより、動作不可能にされるものではない。例えば、ノイズ露出データは、非個人情報データ又はユーザに関連付けられたデバイスによって要求されているコンテンツ、他の非個人情報又は公に利用可能な情報などの最低限の個人情報に基づいて好みを推測することによって選択されてユーザに配信されることができる。