KR101280090B1

KR101280090B1 - 적응적 오디오 피드백 시스템 및 방법

Info

Publication number: KR101280090B1
Application number: KR1020127021094A
Authority: KR
Inventors: 벤자민 앤드류 로틀러; 아람 린달; 알렌 폴 주니어 하가이; 숀 에이. 엘리스; 폴리카포 우드
Original assignee: 애플 인크.
Priority date: 2010-01-13
Filing date: 2011-01-06
Publication date: 2013-06-28
Also published as: KR20120105561A; AU2011205498B2; CN102763072A; KR20130043245A; US9311043B2; US20110173539A1; US8381107B2; AU2011205498A1; US20130159861A1; KR101798269B1; EP3128414A1; EP2524298A1; CN102763072B; WO2011087953A1

Abstract

적응적으로 전자 장치(10)상에서 오디오 피드백 데이터를 변경하기 위한 다양한 기술이 제공된다. 일 실시예에서, 본 발명의 특정 양태들을 구현시키는 오디오 사용자 인터페이스(38)가 사용자 인터페이스 이벤트의 이전 발생들 동안 제공된 오디오 피드백의 구어성 레벨에 적어도 부분적으로 기초하여 사용자 인터페이스 이벤트들에 응답하여 오디오 피드백의 구어성을 축소하거나 진전시킬 수 있다. 또 다른 실시예에서, 오디오 사용자 인터페이스(38)는 사용자가 리스트를 탐색하는 속도에 적어도 부분적으로 기초하여 아이템들의 탐색가능 리스트와 관련된 오디오 피드백의 구어성을 변경하도록 구성될 수 있다. 추가 실시예에서, 오디오 사용자 인터페이스(38)는 사용자 인터페이스 이벤트의 맥락상 중요성에 기초하여 오디오 피드백 구어성을 변경하기 위해 구성될 수 있다. 본 기술을 구현시키는 전자 장치(10)는 오디오 사용자 인터페이스들에 대한 개선된 사용자 경험을 제공한다.

Description

적응적 오디오 피드백 시스템 및 방법{ADAPTIVE AUDIO FEEDBACK SYSTEM AND METHOD}

본 발명은 일반적으로 전자 장치들상의 사용자 인터페이스들에 관한 것인데, 보다 상세하게는 오디오 피드백을 전자 장치의 사용자에게 제공할 수 있는 사용자 인터페이스들에 관한 것이다.

이 부분은 이하에 설명되고 및/또는 청구되는 본 기술들의 다양한 양태들에 관련될 수 있는 본 분야 기술의 다양한 측면들을 독자에게 소개하기 위해 의도된 것이다. 본 논의는 독자에게 본 발명의 다양한 양태들의 보다 나은 이해를 촉진시키는 배경 정보를 제공하는 데 도움이 될 것이라고 생각된다. 따라서, 이 진술들은 이런 면에서 읽어 보아야 하고, 선행 기술의 승인으로서 간주해서는 안 된다는 것을 알아야 한다.

컴퓨터 시스템들, 이동 전화기들, 디지털 미디어 플레이어들, PDA들, 및 이와 유사한 것과 같은 전자 컴퓨팅 장치들은 다양한 개인적 및/또는 사무 관련 목적들을 위해 보통은 사용된다. 이와 같은 전자 장치들은 사용자로 하여금 다양한 기능들을 수행하기 위해 장치상의 다양한 애플리케이션들(예를 들면, 전자우편 프로그램들, 인터넷 브라우저들, 미디어 플레이어들, 게임들, 기타 등등)과 상호 작용할 수 있게 하여 주는 몇몇 유형의 사용자 인터페이스를 전형적으로는 포함한다. 다시 말하면, 사용자 인터페이스는 사용자가 콘텐츠 및 정보뿐만 아니라 사용자 입력들에 대한 응답들을 수신하기 위해 애플리케이션들과 그를 통해 상호 작용할 수 있는 게이트웨이를 제공할 수 있다. 따라서, 사용자 인터페이스는 이러한 애플리케이션들의 설계에 있어서 핵심 부분이고, 이와 같은 장치들의 사용 편의성을 정하는 것을 돕고 그에 따라 전체적 사용자 경험의 품질을 정하는 것을 돕는다.

역사적으로, 대다수의 전자 장치들은 사용자가 시각적 디스플레이에 의해 장치와 상호 작용하도록 허용하기 위해 그래픽 사용자 인터페이스에 의존했다. 예를 들면, 사용자가 장치와 상호작용함에 따라, 장치는 사용자의 행위들에 응답하여 시각적 피드백을 표시할 수 있다. 그러나, 몇몇 유형의 전자 장치들이 상대적으로 작은 시각적 디스플레이들을 갖는 더 작은 폼 팩터들을 가지는 쪽으로 옮겨감에 따라, 그래픽 사용자 인터페이스들은 사용하고 탐색하기에 더 어려워질 뿐만이 아니라 이들이 나를 수 있는 정보량에 있어서 제한을 더 받게 되었다.

최근에 오디오 사용자 인터페이스들의 인기가 높아지는 것을 경험하고 있다. 예를 들면, 오디오 사용자 인터페이스는 정보와 콘텐츠를 사용자에게 전달하기 위해 시각적 피드백 대신에 또는 시각적 피드백에 추가하여 오디오 피드백 데이터를 공급할 수 있고, 따라서 제한된 시각적 디스플레이 능력을 갖고 있거나 또는 몇몇 경우에는 어떤 시각적 디스플레이 능력도 갖지 않는 전자 장치들에서 사용하는 데에 특히 알맞다. 예를 들면, 오디오 피드백을 요청하는 이벤트의 발생 시에, 발생하는 이벤트에 관한 오디오 정보를 사용자에게 전달하기 위해 대응하는 오디오 클립이 재생될 수 있다. 유감스럽게도, 몇몇 이벤트들이 대량의 오디오 정보와 관련될 수 있고, 이것은 특히 그와 같은 이벤트들이 상대적으로 짧은 시간 기간 내에서 아주 근접하여 반복적으로 발생할 때, 사용자를 당황스럽게 만들 수 있고 따라서 사용자 경험에 악영향을 줄 수 있다. 덧붙여, 종래 오디오 사용자 인터페이스들에 의해 제공된 오디오 피드백은 사용자가 맥락상 높은 또는 낮은 중요성을 갖는 이벤트들을 적절히 구별할 수 없게 할 수 있다. 따라서, 전자 장치들에서 오디오 사용자 인터페이스들에 대한 사용자 경험을 더욱 개선하기 위한 노력들이 지속되고 있다.

본 명세서에 개시된 특정 실시예들의 요약이 이하에 제시된다. 이 양태들은 독자에게 이들 특정 실시예들의 간단한 요약을 제공하기 위해서만 제시되는 것이며 본 개시의 범위를 제한하도록 의도되지 않았다는 것을 이해해야 한다. 실제로, 본 발명은 이하에서 제시되지 못할 수 있는 다양한 양태들을 포괄할 수 있다.

본 발명은 일반적으로 전자 장치상의 오디오 사용자 인터페이스에 의해 제공되는 오디오 피드백을 적응적으로 변경하기 위한 기술과 관련된다. 일 실시예에 따라서, 오디오 사용자 인터페이스는 사용자 인터페이스 이벤트의 이전 발생들 동안 제공된 오디오 피드백의 구어성 레벨(verbosity level)에 적어도 부분적으로 기초하여 사용자 인터페이스 이벤트들에 응답하여 오디오 피드백의 구어성을 축소하거나(devolve) 진전시키도록(evolve) 구성될 수 있다. 추가로 이하에서 논의되는 바와 같이, 용어 "구어성(verbosity)"은, 여기서 사용하는 바로는, 오디오 피드백에 의해 제공되는 오디오 정보의 "말 많은 정도(wordiness)"를 지칭하고, 톤들, 클릭들, 삑 소리(beeps), 짹짹거림(chirp), 기타 등등과 같은 오디오 피드백의 비언어적 유형들을 또한 포괄할 수 있다. 예를 들면, 사용자 인터페이스 이벤트의 다음 발생이 사용자 인터페이스 이벤트의 이전 발생과 비교적 매우 가깝게 발생한다면, 오디오 사용자 인터페이스는 반복적이고 대단히 말 수가 많은 정보로 인해 사용자를 당황케 하는 것을 회피하기 위해, (예를 들면, 구어성을 감소시킴으로서) 오디오 피드백을 축소할 수 있다.

또 다른 실시예에서, 오디오 사용자 인터페이스는 사용자가 리스트를 탐색하는 속도에 적어도 부분적으로 기초하여 탐색가능 데이터 아이템들의 리스트와 관련된 오디오 피드백을 적응적으로 변경하도록 구성될 수 있다. 추가 실시예에서, 오디오 사용자 인터페이스는 새로운 데이터 콘텐츠가 탐색가능 리스트에서 어디에 위치하는 지를 나타내기 위해 청각적으로 더 구별되는 오디오 피드백을 제공하도록 또한 더 오래된 데이터 콘텐츠에 대해 청각적으로 덜 구별되는 오디오 피드백을 제공하도록 구성될 수 있다. 또 다른 실시예에서, 오디오 사용자 인터페이스는 사용자 인터페이스 이벤트의 맥랙상 중요성에 기초하여 오디오 피드백의 구어성 및/또는 구별성을 변경하도록 구성될 수 있다. 여기 개시된 다양한 오디오 피드백 기술들은, 단독으로 또는 조합하여 구현되는 경우, 오디오 사용자 인터페이스들에 대한 사용자 경험을 향상시킬 수 있다.

앞서 언급한 특징들에 대한 다양한 상세 구성이 본 발명의 다양한 양태들에 관련하여 존재할 수 있다. 추가 특징들이 마찬가지로 이러한 다양한 양태들에 또한 통합될 수 있다. 이러한 상세 및 추가 특징들은 개별적으로 또는 임의의 조합으로 존재할 수 있다. 예를 들어, 예시된 실시예들 중 하나 이상에 관련하여 이하에 논의되는 다양한 특징들은 본 발명의 앞서 설명한 양태들 중 임의의 것에 단독으로 또는 임의의 조합으로 통합될 수 있다. 다시 말하지만, 앞서 제시된 간략한 개요는, 청구되는 발명 대상을 제한하지 않으면서, 단지 독자가 본 명세서의 실시예들의 특정 양태들 및 맥락에 친숙하게 되도록 의도된 것이다.

본 개시의 다양한 양태들은 도면들을 참조하여 다음의 상세한 설명을 읽어보면 더 잘 이해될 수 있다.
도 1은 본 발명의 양태들에 따른, 적응적으로 오디오 피드백을 변경하도록 구성된 오디오 사용자 인터페이스를 포함하는 전자 장치의 블록도이다;
도 2는 본 발명의 양태들에 따른, 데스크톱 컴퓨팅 장치 형태를 갖는 도 1의 전자 장치의 정면도이다.
도 3은 본 발명의 양태들에 따른, 핸드헬드 휴대용 전자 장치 형태를 갖는 도 1의 전자 장치의 정면도이다.
도 4는 본 발명의 양태들에 따른, 적응적으로 오디오 피드백을 변경하도록 구성된 오디오 사용자 인터페이스에 포함될 수 있는 구성요소들을 도해하는 블록도이다.
도 5는 도 1의 전자 장치상에서 실행될 수 있는 애플리케이션의 스크린 이미지이다.
도 6은 본 발명의 양태들에 따른, 사용자가 애플리케이션과 상호작용함에 따라 발생하는 이벤트의 시각적 통지를 묘사하는 도 5에 도시된 애플리케이션의 스크린 이미지이다.
도 7은 본 발명의 양태들에 따라, 변화하는 구어성 레벨을 가지며 또한 도 6에 묘사된 이벤트와 관련되는 한 세트의 오디오 아이템들을 그래픽으로 묘사한 도면이다.
도 8 및 도 9는 본 발명의 양태들에 따라서, 어떻게 도 6의 이벤트와 관련된 오디오 피드백의 구어성이 이벤트의 반복된 발생들에 응답하여 시구간에 걸쳐서 변화되는 지를 묘사하는 그래픽 타임라인들이다.
도 10은 본 발명의 양태들에 따라서, 도 6의 이벤트의 대안적 시각적 통지를 추가로 묘사하는, 도 5에 도시된 애플리케이션의 스크린 이미지이다.
도 11a는 본 발명의 양태들에 따라서, 오디오 피드백을 요청하는 이벤트의 발생에 응답하여 재생용 오디오 아이템을 선택하기 위한 방법의 제1 실시예를 묘사하는 흐름도이다.
도 11b는 본 발명의 양태들에 따라서, 오디오 피드백을 요청하는 이벤트의 발생에 응답하여 재생용 오디오 아이템을 선택하기 위한 방법의 제2 실시예를 묘사하는 흐름도이다.
도 12는 본 발명의 양태들에 따라서, 도 1의 장치상에 표시될 수 있고 또한 어떻게 오디오 사용자 인터페이스가, 맥락상 중요성에 기초하여 이벤트들 간을 구별하는 오디오 피드백을 제공할 수 있는지를 예시하는 복수의 스크린 이미지를 보여준다.
도 13은 본 발명의 양태들에 따라서, 이벤트의 맥락상 중요성에 기초하여 오디오 아이템을 선택하기 위한 방법을 묘사하는 흐름도이다.
도 14는 탐색가능한 아이템들의 리스트를 포함하는 도 1의 전자 장치상에서 실행될 수 있는 애플리케이션을 보여주는 복수의 스크린 이미지를 묘사한다.
도 15-17은 본 발명의 양태들에 따라서, 그 각각이 도 14의 탐색가능 리스트를 보여주며 또한 변화하는 속도로 사용자가 리스트를 탐색하는 것을 묘사하는 스크린 이미지들이다.
도 18은 리스트가 탐색되는 속도에 기초하여 도 1의 전자 장치상에서 표시되는 아이템들의 리스트의 탐색과 관련되는 오디오 피드백을 변화시키기 위한 방법을 묘사하는 흐름도이다.
도 19-21은 본 발명의 양태들에 따라서, 오디오 사용자 인터페이스에서 오디오 피드백을 변화시키는 것과 관련한 다양한 사용자 구성가능 옵션을 예시하는, 도 1의 장치상에 표시될 수 있는 스크린 이미지들이다.

이하에서는, 본 발명의 하나 이상의 구체적인 실시예가 설명될 것이다. 이들 설명된 실시예들은 오직 본 발명의 기술들의 예들일 뿐이다. 또한, 이들 실시예들에 대한 간결한 설명을 제공하고자 하는 노력에 따라, 실제 구현의 모든 특징들이 명세서에서 설명되지는 않을 것이다. 임의의 그러한 실제 구현을 개발하는 데 있어서, 어떠한 엔지니어링 또는 설계 프로젝트에서도 그런 것처럼, 구현마다 바뀔 수 있는 시스템 관련 및 비즈니스 관련 제약을 준수하는 것과 같이 개발자의 특정한 목표를 달성하기 위해 다수의 구현 특유의 결정들이 이루어져야만 한다는 것을 이해해야 한다. 더욱이, 그러한 개발 노력은, 복잡하고 시간이 걸릴 수 있지만, 그럼에도 불구하고 본 개시의 혜택을 입은 통상의 기술자들에게는 설계, 제작, 및 제조를 위한 일상적인 과업에 불과하다는 것을 인식해야 한다.

본 발명의 다양한 실시예들의 요소들을 도입할 때, 관사 "한(a, an)", 및 "그(the)"는 요소들 중 하나 이상이 존재한다는 것을 의미하도록 의도된다. "포함한다(comprising)","구비한다(including)" 및 "갖는다(having)"라는 용어들은 포괄적인 것으로 의도되며, 나열된 요소들 이외에 추가 요소들이 존재할 수 있음을 의미한다. 또한, 본 명세서의 "일 실시예" 또는 "실시예"에 대한 참조들은, 기재된 특징들을 또한 통합하는 부가적인 실시예들의 존재를 배제하는 것으로 해석하도록 의도되지 않았다는 것을 이해해야 한다.

아래 논의된 것처럼, 본 발명은 일반적으로 전자 장치상의 오디오 사용자 인터페이스에 의해 제공되는 오디오 피드백을 적응적으로 변경하기 위한 기술에 관한 것이다. 알 수 있는 바와 같이, 오디오 사용자 인터페이스는 전자 장치가 제한된 디스플레이 능력을 갖거나 디스플레이 능력을 전혀 가지지 못한 경우에 특히 유용할 수 있다. 또한, 전자 장치가 시각적 디스플레이를 포함하고 있을지라도, 사용자가 중요한 활동으로부터 시각적 집중을 돌려서 그래픽 사용자 인터페이스로 이동시키는 것이 비현실적인 "눈이 바쁜(eyes-busy)" 상황들에서와 같이, 그래픽 사용자 인터페이스를 탐색하기에 어려움을 겪는 때가 있다. 그와 같은 활동들은 예를 들어 자동차 운전, 운동 및 혼잡한 거리를 지나가는 것을 포함할 수 있다. 덧붙여, 장치가 시각적으로 장애가 있는 사용자에 의해 이용되고 있다면 오디오 피드백은 시각적 피드백에 대한 실제적 대안이 된다.

일 실시예에 따라서, 오디오 사용자 인터페이스는 오디오 피드백의 구어성을 축소하거나 진전시킬 수 있다. 앞서 언급된 바와 같이, 여기서 이용되는 대로의 용어 "구어성"은, 오디오 피드백에 의해 제공되는 오디오 정보의 "말 많은 정도"를 지칭한다고 이해해야 할 것이고, 클릭들, 삑 소리들, 짹짹 소리와 같은 비언어적 유형의 오디오 피드백, 또는 다른 다양한 유형의 비언어적 음향 효과들을 포괄할 수 있다. 예를 들어, 높은 레벨의 구어성을 가지는 오디오 피드백은 (예를 들면, 구두 단어들을 포함하는 이전에 저장된 오디오 파일을 재생하거나, 또는 실시간 텍스트-투-스피치 합성을 이용하여) 몇 개의 구두 단어를 출력할 수 있는 한편, 낮은 레벨의 구어성 레벨을 가지는 오디오 피드백은 더 소수의 구두 단어들, 또는 몇몇 경우에는 비언어적 톤(예를 들어, 어떤 구두 단어도 없는 톤)을 출력할 수 있다. 일 실시예에서, 사용자 인터페이스 이벤트들에 응답하여 제공되는 오디오 피드백의 구어성은 사용자 인터페이스 이벤트의 하나 이상의 이전 발생들 동안 제공된 오디오 피드백의 구어성 레벨에 적어도 부분적으로 기초하여 변경된다. 그러므로, 사용자 인터페이스 이벤트의 다음 발생들이 사용자 인터페이스 이벤트의 이전 발생과 비교적 매우 근접하여 발생하는 경우, 오디오 사용자 인터페이스는 사용자를 반복적이고 대단히 말 수가 많은 정보로 인해 당황케 하는 것을 회피하기 위해(예를 들면, 구어성을 감소시킴으로써) 오디오 피드백을 축소할 수 있다.

또 다른 실시예에서, 오디오 사용자 인터페이스는 사용자가 리스트를 탐색하는 속도에 적어도 부분적으로 기초하여 데이터 아이템들의 탐색가능 리스트와 관련된 오디오 피드백을 적응적으로 변경하기 위해 구성될 수 있다. 추가 실시예에서, 오디오 사용자 인터페이스는 더 새로운 데이터 콘텐츠가 탐색가능 리스트에서 어디에 위치하는 지를 나타내기 위해 청각적으로 더 구별되는 오디오 피드백을 제공하도록 또한 더 오래된 데이터 콘텐츠에 대해 청각적으로 덜 구별되는 오디오 피드백을 제공하도록 구성될 수 있다. 또 다른 실시예에서, 오디오 사용자 인터페이스는 사용자 인터페이스 이벤트의 맥락상 중요성에 기초하여 오디오 피드백의 구어성 및/또는 구별성을 변경하도록 구성될 수 있다. 여기서 기술된 다양한 오디오 피드백 기술은 단독으로 또는 조합으로 구현될 때 오디오 사용자 인터페이스들에 대한 사용자 경험을 개선할 수 있다.

계속하기 전에, 개시된 발명 대상의 더 나은 이해를 촉진하기 위해 본 명세서의 전체에 걸쳐 널리 사용되는 몇몇 추가 용어들이 먼저 정의될 것이다. 예를 들면, 전자 장치의 작동 중에 발생한 이벤트들은 일반적으로 "사용자 이벤트들" 또는 "시스템 이벤트들"로서 분류될 수 있다. 여기서 사용되는 바로는, 용어 "사용자 이벤트" 및 그와 같은 것은 장치와 사용자의 상호작용의 결과로서 발생하는 이벤트를 지칭한다고 이해될 것이다. 예를 제공하기 위해, 사용자 이벤트는 사용자에 의해 요청되는 특정 장치 기능의 가용성을 나타내는 통지일 수 있다. 대조적으로, 용어 "시스템 이벤트" 또는 그와 같은 것은 사용자가 장치와 활동적으로 상호작용하고 있는지 또는 장치에게 요청들 및/또는 명령들을 발행하는 지에 상관없이 장치의 상태에 관련된 정보를 제공하기 위해 작동 동안에 장치 자체에 의해 일반적으로 개시되는 이벤트들로서 이해될 것이다. 예를 들기 위한 목적으로서, 시스템 이벤트는 저 배터리 상태 통지를 포함할 수 있다. 그러므로, 여기서 사용되는 대로의 용어 "이벤트"는, 앞서 정의된 것처럼, 사용자 이벤트 또는 시스템 이벤트를 지칭할 수 있다는 것을 이해해야 한다.

오디오 사용자 인터페이스들의 맥락에서, 전자 장치는 특정 이벤트들의 발생시에 오디오 피드백을 제공하기 위해 "오디오 아이템"의 재생을 개시할 수 있다. 여기서 사용되는 바로는, 용어 "오디오 아이템" 또는 그와 같은 것은 전자 장치의 오디오 사용자 인터페이스에 의해 제공되는 오디오 정보를 지칭한다고 이해해야 할 것이다. 예를 들면, 오디오 아이템들은 장치상에 (예를 들면, 메모리 또는 비휘발성 저장소에) 저장된 오디오 파일일 수 있고, 그리고 언어적 (예를 들면, 음성 데이터) 오디오 정보, 또는 삑 소리들, 클릭들, 짹짹거리는 소리들, 차임 소리들(chimes), 링 소리들(rings) 들과 같은 비언어적 오디오 큐들, 및 다른 다양한 톤들 또는 음향 효과들을 포함할 수 있다. 덧붙여, 몇몇 오디오 아이템들은 장치상에 국소적으로 저장되는 것이 아니라, 그 대신에 오디오 피드백을 요청하는 특별한 이벤트의 발생과 결합하여 합성된 음성 애플리케이션들 (예를 들면, 텍스트-투-스피치)을 이용하여 생성될 수 있다.

이하 설명된 기술들에 따라서, 특정 이벤트들은 다른 구어성 레벨들을 갖는 한 세트의 오디오 아이템들과 관련될 수 있다. 예를 들면, 한 세트의 오디오 아이템들은 비언어적 오디오 아이템(예를 들면, 어떠한 말도 없는 콘텐츠) 및 최고의 구어성 레벨(예를 들면, "순 구어성")을 가지고 있는 오디오 아이템을 포함할 뿐만 아니라, 중간 구어성 레벨들을 가지는 하나 이상의 오디오 아이템들을 포함할 수 있다. 여기서 사용하는 바로는, 용어들 "축소(devolve)", "단계 격하(step down)" 또는 그와 같은 것은 이벤트의 이전 발생 동안 선택된 오디오 아이템의 구어성과 비교해 상대적으로 말 수가 적은 오디오 아이템을 선택하고 재생함으로써 특정 이벤트와 관련되는 오디오 피드백의 구어성을 감소시키는 행동을 지칭하는 것으로서 이해해야 할 것이다. 유사하게, 용어 "진전(evolve)", "단계 상승(step up)" 또는 그와 같은 것은 이벤트의 이전 발생 동안 선택된 오디오 아이템의 구어성과 비교해 상대적으로 말 수가 많은 오디오 아이템을 선택하고 재생함으로써 특정 이벤트와 관련되는 오디오 피드백의 구어성을 증가시키는 행위를 지칭하는 것으로서 이해해야 할 것이다. 어떻게 오디오 피드백을 축소하거나 진전시킬지를 결정하기 위한 다양한 기술이 이하에 개시된다.

또한, 용어 "맥락상 중요성(contextual importance)" 또는 그와 같은 것은, 사용자 인터페이스들에 적용될 때에, 정보가 제공되는 맥락과 관련하여 장치상의 이벤트에 응답하여 제공된 정보의 중요성을 지칭하는 것으로 이해해야 할 것이다. 예를 들면, 더 높은 맥락상 중요성을 갖는 이벤트들은 더 낮은 맥락상 중요성의 이벤트들과 상대적으로 더 구별되는 소리의 오디오 피드백을 제공할 수 있다. 하나의 예를 제공하면, 사용자에게 들어오는 네트워크 접속을 허락하거나 거부하도록 프롬프팅하는 이벤트와 같이 사용자 응답을 요청할 수 있는 이벤트들은, 장치가 들어오는 네트워크 접속 요청을 다루는 방법을 결정하기 위해서 사용자가 이벤트에 응답하여 결정을 제공할 것을 요청할 수 있기 때문에 비교적 높은 맥락상 중요성을 가질 수 있다. 또 다른 예를 제공하면, 저 배터리 경보 통지 이벤트의 제1 발생은 상대적으로 낮은 맥락상 중요성을 가질 수 있는데, 이는 이런 통지가 일반적으로 정보를 제공하기 위한 것이고 또한 사용자 응답 또는 즉각적 사용자 행위를 반드시 요구하지는 않기 때문이다. 그러나, 저 배터리 통지의 맥락상 중요성은, 사용자가 몇 번의 반복된 발생들을 통한 저 배터리 통지를 고의로 또는 부주의로 무시하여 장치가 연속 동작에 요구되는 임계 전력 문턱값에 접근하는 결과를 낳는 경우, 점차적으로 증가할 수 있다.

다른 실시예들에서, 사용자 인터페이스 이벤트의 맥락상 중요성은 미리 프로그래밍된 정보(예를 들면, 이벤트들이 높거나 낮은 맥락상 중요성 특징을 가지는 것으로 프로그래밍될 수 있음)에 기초하여 또한 결정될 수 있다. 다른 실시예들에서, 사용자 인터페이스 이벤트의 맥락상 중요성은 이전의 장치 거동 및/또는 어떻게 사용자가 사용자 인터페이스 이벤트의 이전 발생(들) 동안 장치와 상호 작용했는지에 기초하여 적응적이 되거나 알 수 있다. 덧붙여, 몇몇 실시예에서, 맥락상 중요성은 전자 장치상의 구성가능한 사용자 선호 설정 세트를 통해서 하는 것과 같이 사용자가 특정할 수 있다. 다양한 실시예들이 이벤트들의 맥락상 중요성을 나타내도록 오디오 피드백을 변경하기 위해 논의된다. 그러므로, 오디오 피드백 구어성의 진전과 축소는 사용자 입력들(예를 들면, 직접적 사용자 입력들, 사용자 선호 설정, 기타 등등)에 응답하여 및/또는 외부 자극들(예를 들면, 장치 작동 이벤트들, 저 전력, 저 메모리, 기타 등등)에 응답하여 전자 장치에 의해 실행되는 지능적이고 적응적인 행위일 수 있다는 것을 이해해야 한다. 사실상, 이하의 다양한 실시예들에서 보여지는 것처럼, 오디오 피드백 구어성의 진전과 축소는 동적일 수 있고 장치상에 저장된 특정한 사용자 선호들 및/또는 설정에 기초하여 맞춤화될 수 있다.

도면으로 지금 돌아가면, 도 1은 앞서 간략하게 언급된 기술들 중의 하나 이상을 이용하여 오디오 피드백을 변경하도록 구성되는 사용자 인터페이스를 포함할 수 있는 전자 장치(10)의 예를 도해하는 블록도이다. 전자 장치(10)는 랩톱 또는 데스크톱 컴퓨터, 이동 전화, 디지털 미디어 플레이어, 또는 오디오 출력 장치를 사용하여 오디오 피드백을 제공하도록 구성되는 오디오 사용자 인터페이스를 포함하는 장치와 같은 임의 유형의 전자 장치일 수 있다. 예를 들기 위한 것으로만, 전자 장치(10)는 캘리포니아, 쿠퍼티노의 애플사로부터 얻을 수 있는 MacBook®, MacBook®Pro, MacBook Air®, iMac®, Mac®Mini, 또는 Mac Pro® 모델과 같은, 데스크톱 또는 랩톱 컴퓨터일 수 있다. 또한, 전자 장치(10)는 애플사로부터 또한 얻을 수 있는 iPod® 또는 iPhone®모델과 같은 휴대용 전자 장치일 수 있다. 다른 실시예들에서, 전자 장치(10)는 오디오 피드백을 제공할 수 있는 오디오 사용자 인터페이스를 포함하는 또 다른 제조자로부터의 전자 장치 모델일 수도 있다.

도 1에 도시된 바와 같이, 전자 장치(10)는 장치(10)의 기능에 기여하는 다양한 내부 및/또는 외부 구성요소들을 포함할 수 있다. 이 기술 분야의 통상의 기술자들은 도 1에 도시된 다양한 기능 블록들이 (회로를 포함하는) 하드웨어 요소들, (컴퓨터 판독가능 매체상에 저장된 프로그램들 및/또는 펌웨어와 같은 컴퓨터 코드를 포함하는) 소프트웨어 요소들, 또는 하드웨어 요소와 소프트웨어 요소 양자의 조합을 포함할 수 있다는 것을 이해할 것이다. 예를 들면, 현재 도해된 실시예에서, 전자 장치(10)는 다음과 같은 구성 요소들을 포함할 수 있다: 입/출력(I/O) 포트들(12), 입력 구조들(14), 하나 이상의 프로세서들(16), 메모리 장치(18), 비휘발성 저장 장치(들)(20), 디스플레이(22), 오디오 출력 장치(24), 확장 카드(들)(26), 네트워킹 장치(28), 및 전원(30). 덧붙여, 전자 장치(10)는 그래픽 사용자 인터페이스(36) ("GUI")와 오디오 사용자 인터페이스(38)의 둘 모두를 가지는 사용자 인터페이스(34)를 또한 포함할 수 있다. 추가로 이하에서 논의되는 바와 같이, 오디오 사용자 인터페이스(38)는 오디오 피드백을 변경하기 위해 앞서 논의된 기술들 중의 하나 이상을 구현하도록 구성될 수 있다.

도 1에서의 각각의 도해된 구성 요소들에 관해서, I/O 포트들(12)은 전원, 또는 (핸드헬드 장치들 및/또는 컴퓨터들, 프린터들, 프로젝터들, 외부 디스플레이들, 모뎀들, 도킹 스테이션들 및 기타 등등과 같은) 다른 전자 장치들과 같은 다양한 전자 장치들에 접속하도록 구성된 다양한 포트들을 포함할 수 있다. I/O 포트들(12)은 USB(universal serial bus) 포트, 비디오 포트, 직렬 접속 포트, IEEE-1394 포트, 이더넷 또는 모뎀 포트, 및/또는 AC/DC 전력 접속 포트와 같은 임의의 인터페이스 유형을 지원할 수 있다. 일 실시예에서, I/O 포트들(12)은 장치(10)의 전원(30)(이는 하나 이상의 재충전가능 배터리들을 포함할 수 있음)을 충전하기 위해, 또는 장치(10)와 외부 소스 사이에서 데이터를 전달하기 위해 기능할 수 있는 애플사로부터의 전용 포트를 포함할 수 있다. 또한, 오디오 출력 장치(24)가 외부 오디오 출력 장치(예를 들면, 헤드폰들 또는 외부 스피커들)를 포함하는 경우에, I/O 포트들(12)은 장치(10)에게 오디오 출력 장치(24)를 접속하기 위한 오디오 접속기 포트를 포함할 수 있다.

입력 구조들(14)은 프로세서(들)(16)로의 사용자 입력 또는 피드백을 제공할 수 있다. 예를 들면, 입력 구조들(14)은 장치(10)상에서 돌아가는 애플리케이션들과 같은, 전자 장치(10)의 하나 이상의 기능들을 제어하도록 구성될 수 있다. 단지 예를 들기 위한 목적으로, 입력 구조들(14)은 버튼들, 슬라이더들, 스위치들, 제어 패드들, 키들, 노브(knob)들, 스크롤 휠들, 키보드들, 마우스, 터치패드들 및 기타 등등의 것, 또는 이런 것들의 몇몇 조합을 포함할 수 있다. 일 실시예에서, 입력 구조들(14)은 사용자가 장치(10)상에 표시된 GUI(36)를 탐색하도록 허용할 수 있다. 덧붙여, 입력 구조들(14)은 디스플레이(22)와 결합하여 제공되는 터치 감지 메커니즘을 포함할 수 있다. 이러한 실시예들에서, 사용자는 터치 감지 메커니즘을 통해 표시된 인터페이스 요소들을 선택하거나 이들과 상호작용할 수 있다.

장치(10)의 동작은 운영체제, 애플리케이션 프로그램들, GUI(36), 오디오 사용자 인터페이스(38) 및 장치(10)상에 제공되는 임의의 다른 기능들을 실행하는데 요구되는 처리 능력을 제공할 수 있는 하나 이상 프로세서들(16)에 의해 일반적으로 제어될 수 있다. 프로세서(들)(16)는 단일 프로세서를 포함할 수 있거나, 또는 다른 실시예들에서 다중 프로세서를 포함할 수 있다. 예를 들면, 프로세서(16)는 "범용" 마이크로프로세서들, 주문형 프로세서들(ASIC들), 커스텀 프로세서들 또는 그와 같은 처리 구성 요소들의 조합을 포함할 수 있다. 예를 들어, 프로세서(들)(16)는 명령어 세트 프로세서들(예컨대, RISC), 그래픽/비디오 프로세서들, 오디오 프로세서들, 및/또는 다른 관련 칩셋들을 포함할 수 있다. 프로세서(들)(16)는 장치(10)의 다양한 구성 요소들 사이에서 데이터와 명령어들을 전달하기 위한 하나 이상의 데이터 버스들에 결합될 수 있다.

프로세서(들)(16)에 의해 처리될 명령어 또는 데이터가, 랜덤 액세스 메모리(RAM)와 같은 휘발성 메모리이거나 판독 전용 메모리(ROM)와 같은 비휘발성 메모리이거나, RAM 및 ROM 장치의 조합일 수 있는 메모리(18)와 같은 컴퓨터 판독가능 매체에 저장될 수 있다. 예를 들면, 메모리(18)는, 운영체제, 애플리케이션들, 그래픽 및 오디오 사용자 인터페이스 기능들과 같은 장치(10)용 펌웨어, 또는 장치(10)상에서 실행될 수 있는 임의의 다른 루틴들을 저장할 수 있다. 사용자 인터페이스(34) [GUI(36)와 오디오 사용자 인터페이스(38)를 포함함]가 메모리(18)의 구성 요소들인 것으로서 도시되었지만, GUI(36)와 오디오 사용자 인터페이스(38)를 정의하는 인코딩된 명령어들(예를 들면, 기계 판독가능 코드)이 실제로 비휘발성 저장소(20)에 실제적으로 상주할 수 있고, 실행 시간에서의 실행을 위해 메모리(18) 내에 로딩될 수 있다는 점을 이해해야 한다.

비휘발성 저장 장치(20)는 데이터 및/또는 명령어들의 지속적 저장을 위해, 플래시 메모리, 하드 드라이브, 또는 임의의 다른 광학적, 자기적 및/또는 고상 저장 매체를 포함할 수 있다. 예를 들어, 비휘발성 저장 장치(20)는 오디오 데이터, 비디오 데이터, 사진뿐만이 아니라, 임의의 다른 적절한 데이터를 포함하는 데이터 파일을 저장하는 데 사용될 수 있다. 추가로 이하에서 논의되는 것처럼, 비휘발성 저장 장치(20)가 오디오 사용자 인터페이스(38)를 통해 선택되고 재생되어 오디오 피드백을 장치(10)의 사용자에게 제공할 수 있는 다양한 오디오 아이템들을 저장하도록 장치(10)에 의해 활용될 수 있다.

디스플레이(22)는 장치(10)에 의해 생성되는 다양한 이미지들을 표시하는데 사용될 수 있다. 예를 들면, 디스플레이(22)는 GUI(36)에 의해 생성되는 이미지들(40)을 수신하고 표시할 수 있다. 다양한 실시예들에서, 디스플레이(22)는, 예를 들면, LCD, 플라즈마 디스플레이 또는 유기발광 다이오드(OLED) 디스플레이와 같은, 임의의 적절한 디스플레이일 수 있다. 덧붙여, 디스플레이(22)는 장치(10)에 대한 제어 인터페이스의 일부로서 기능할 수 있는 앞서 논의된 터치 감지 메커니즘(예컨대, 터치 스크린)과 결합하여 제공될 수 있다. 또한, 몇몇 실시예에서, 장치(10)는 디스플레이(22) 또는 GUI(36)를 포함하는 것이 아니라, 그 대신에 사용자가 장치(10)와 그를 통해 상호 작용할 수 있는 오디오 사용자 인터페이스(38)만을 포함할 수 있다는 점을 유의해야 한다. 디스플레이(22)를 결여한 장치(10)의 실시예의 한 예는 애플사로부터 얻을 수 있는 iPod® 셔플의 한 모델일 수 있다.

앞서 언급한 대로, 오디오 출력 장치(24)는 I/O 포트(12)에 의해 장치(10)에 접속된 헤드폰들 또는 외부 스피커들과 같은, 외부 오디오 출력 장치를 포함할 수 있다. 덧붙여, 오디오 출력 장치(24)는 통합된 스피커들을 포함할 수 있다. 도 1에 나타난 바와 같이, 오디오 사용자 인터페이스(38)에 의해 제공되는 오디오 피드백(42)은 오디오 출력 장치(24)를 사용하여 재생될 수 있다. 몇몇 실시예에서, 오디오 사용자 인터페이스(38)는 오디오 입력 장치(도 1에 도시되지 않음)에 의해서 사용자로부터의 오디오 입력들(예를 들면, 음성 명령들)을 수신하도록 또한 구성될 수 있으며, 이런 입력들은 장치(10)상에서의 특정 작업 또는 기능을 수행하기 위한 명령어들 또는 명령(command)들로 번역(translate)될 수 있다.

도 1에 도해된 실시예는 또한 하나 이상의 카드 또는 확장 슬롯을 포함할 수 있다. 카드 슬롯들은 추가 메모리, I/O 기능성 또는 네트워크 성능과 같은 기능성을 전자 장치(10)에 추가하기 위해 이용될 수 있는 하나 이상의 확장 카드(26)를 수용하도록 구성될 수 있다. 그러한 확장 카드(26)는 임의 유형의 적합한 커넥터를 통해 장치(10)에 접속할 수 있으며, 전자 장치(10)의 하우징에 대하여 내부적으로 또는 외부적으로 액세스될 수 있다. 예를 들면, 일 실시예에서, 확장 카드(들)(26)는 SecureDigital (SD) 카드, CompactFlash 카드, 멀티미디어 카드(MMC) 또는 그와 유사한 것과 같은 플래시 메모리 카드, 또는 PCMCIA 장치를 포함할 수 있다. 또한, 확장 카드(24)는 이동 전화 능력을 제공하는 전자 장치(10)의 실시예와 함께 이용하기 위한 SIM(Subscriber Identity Module) 카드일 수 있다.

전자 장치(10)는 또한 무선 802.11 표준, 또는 예를 들어 LAN(local area network), EDGE(Enhanced Data Rates for GSM Evolution) 네트워크, 3G 데이터 네트워크와 같은 WAN(wide area network), 또는 인터넷 등의 임의의 다른 적절한 네트워킹 표준을 통한 네트워크 접속성을 제공할 수 있는 네트워크 컨트롤러 또는 네트워크 인터페이스 카드(NIC)일 수 있는 네트워크 장치(28)를 포함한다. 네트워크 장치(28)에 의해서, 장치(10)는 휴대용 전자 장치들, 개인용 컴퓨터들, 프린터들 및 기타 등등의 네트워크상의 임의의 장치에 접속하고 이런 장치와 데이터를 주고 받을 수 있다. 특정 실시예들에서, 네트워크 장치(28)는 애플사로부터 얻을 수 있는 iTunes®서비스와 같은 온라인 디지털 미디어 콘텐츠 제공자에게 접속을 제공할 수 있다.

장치(10)의 전원(30)은 비휴대용 및 휴대용 설정들 양자에서 장치(10)에 전력을 공급하는 능력을 포함할 수 있다. 예를 들어, 휴대용 설정에서, 장치(10)는 장치(10)에 전력을 공급하기 위한, Li-Ion 배터리와 같은 하나 이상의 배터리를 포함할 수 있다. 배터리는 벽 콘센트(electrical wall outlet)와 같은 외부 전원에 장치(10)를 접속함으로써 재충전될 수 있다. 비휴대용 설정에서, 전원(30)은 벽 콘센트로부터 전력을 끌어내고 또한 데스크톱 컴퓨팅 시스템과 같은 비휴대용 전자 장치의 다양한 구성요소들에게 전력을 분배하도록 구성된 PSU(power supply unit)를 포함할 수 있다.

도 1에 묘사된 전자 장치(10)의 구성 요소들을 설명하였고, 도 2와 3은 전자 장치(10)가 취할 수 있는 다양한 형태들을 예시한다. 도 2에 나타난 바와 같이, 전자 장치(10)는 컴퓨팅 시스템(50) 형태를 취할 수 있다. 묘사된 컴퓨터(50)는 하우징(52), 디스플레이(22), 키보드와 마우스 모양의 입력 구조들(14) 뿐만 아니라 통합된 스피커들 형태의 오디오 출력 장치(24)를 포함한다. 컴퓨터(50)는 또한 디지털 카메라와 같은 통합된 촬상 장치(54)를 포함한다. 예시된 컴퓨터(50)가 일반적으로 비휴대용 컴퓨터 시스템(예를 들면, 데스크톱 시스템, 워크스테이션, 및/또는 서버)인 것으로서 나타내기는 하였지만, 컴퓨터(50)는 더 작고 더욱 휴대용인 폼 팩터의 장치들(예를 들면, 랩톱 컴퓨터들, 넷북 컴퓨터들 및/또는 태블릿 컴퓨터들)을 이용하여 또한 제공될 수 있다는 것을 이해해야 한다.

알 수 있는 바와 같이, 입력 구조들(14)은 컴퓨터(50)의 전원을 켜거나 이를 시작하기 위해, 컴퓨터(50)상에서 돌아가는 GUI 또는 애플리케이션을 작동시킬 뿐만 아니라, 컴퓨터(50)의 동작과 관련되는 다양한 다른 특징들(예를 들면, 음향 크기, 표시 휘도 등등)을 조절하는 것과 같이, 컴퓨터(50)와 상호작용하는 데에 사용될 수 있는 다양한 기타 버튼들 및/또는 스위치들을 또한 포함할 수 있다. 컴퓨터(50)는 또한 FireWire®또는 USB 포트, HDMI(high definition multimedia interface) 포트, 또는 외부 장치에 접속하기에 적합한 임의의 다른 유형의 포트와 같은, 앞서 논의된 바와 같은, 부가적인 장치들에 접속성을 제공하는 다양한 I/O 포트들(12)을 포함할 수 있다. 추가적으로, 컴퓨터(50)는 도 1에 관련하여 앞서 설명된 대로 네트워크 접속성[예를 들어, 네트워크 장치(28)], 메모리[예를 들어, 메모리(18)], 및 저장 능력[예를 들어, 저장 장치(20)]을 포함할 수 있다.

추가로 보여지는 것처럼, 디스플레이(22)는 사용자가 볼 수 있는 다양한 이미지들을 생성하도록 구성될 수 있다. 예를 들면, 컴퓨터(50)의 동작 중에, 디스플레이(28)는 사용자가 컴퓨터(50)상에서 돌아가는 운영체제 및/또는 애플리케이션들과 상호 작용하도록 허용하는 GUI(36)를 표시할 수 있다. GUI(36)는 다양한 레이어, 윈도, 스크린, 템플릿, 또는 디스플레이 장치(22)의 전부 또는 일부에 표시될 수 있는 다른 그래픽 요소들을 포함할 수 있다. 예를 들면, 묘사된 실시예에서, GUI (36)는 각각이 (예를 들면, 키보드/마우스 또는 터치스크린 입력을 통한) 사용자 선택의 검출시에 열리거나 실행될 수 있는 다양한 애플리케이션들에 대응할 수 있는 다양한 그래픽 아이콘들(56)을 포함하는 운영체제 인터페이스를 표시할 수 있다. 아이콘들(56)은 독(dock)(58)에서 또는 스크린상에서 표시되는 하나 이상의 그래픽 윈도 요소들(60) 내에 표시될 수 있다.

일부 실시예들에서, 아이콘(56)의 선택은 계층적 탐색 프로세스(hierarchical navigation process)로 이끌 수 있어서, 아이콘(56)의 선택이 스크린으로 인도하거나 또는 하나 이상의 부가적인 아이콘 또는 다른 GUI 요소들을 포함하는 다른 그래픽 윈도를 열도록 한다. 예를 들기 위한 것으로서만, 도 2에 표시된 운영체제 GUI(36)는 애플사로부터 얻을 수 있는 Mac OS®운영 체제 버전으로부터 온 것일 수 있다. 추가적으로, 컴퓨터(50)는 GUI(36)와 동시에 돌아가는 오디오 사용자 인터페이스(예를 들면, 38)를 또한 포함할 수 있다. 예를 들면, 사용자 이벤트들 또는 시스템 이벤트들에 응답하여, 오디오 사용자 인터페이스(38)는 오디오 출력 장치들(24)을 통하여 오디오 피드백을 사용자에게 제공할 수 있다. 예를 들어, 오디오 사용자 인터페이스(38)의 실시예는 Mac OS®운영 체제의 버전들에서 사용 가능할 뿐만 아니라 iPods® 및 iPhones® 특정 모델들에서 사용가능한 VoiceOver®유틸리티일 수 있는데, 이 모두는 애플사로부터 얻을 수 있다.

도 3은 애플사로부터 얻을 수 있는 iPod®또는 iPhone®의 모델일 수 있는 휴대용 핸드헬드 전자 장치(70)의 형태를 갖는 전자 장치(10)를 또한 예시하고 있다. 묘사된 실시예에서, 핸드헬드 장치(70)는 내부 구성 요소들을 물리적 손상으로부터 보호하고 전자파 장애로부터 이들을 보호하는 기능을 할 수 있는 인클로저(52)를 포함한다. 인클로저(52)는 플라스틱, 금속 또는 복합 재료와 같은, 임의의 적합한 재료 또는 재료들의 조합으로부터 형성될 수 있고, 또한 도 3에 도시된 바와 같이 인클로저(52) 내에 배치될 수 있는 무선 통신 회로 [예를 들면, 네트워크 장치(28)]까지 무선 네트워킹 신호가 통과해 나아가도록 허용할 수 있다.

인클로저(52)는 그를 통해 사용자가 핸드헬드 장치(70)와 인터페이스할 수 있는 다양한 사용자 입력 구조들(14)을 포함할 수 있다. 예를 들어, 각각의 입력 구조(14)는 눌려지거나 작동(actuate)될 때 하나 이상의 개개의 장치 기능들을 제어하도록 구성될 수 있다. 예를 들어, 입력 구조들(14) 중 하나 이상은 표시될 "홈" 스크린(72) 또는 메뉴를 호출(invoke)하고, 슬리프(sleep), 웨이크(wake), 또는 전력 온/오프(powered on/off) 모드 사이에서 토글링(toggle)하고, 셀룰러 전화 응용을 위해 링거(ringer)를 조용하게 하고, 음량(volume) 출력을 증가 또는 감소시키고 및 등등의 것을 하도록 구성될 수 있다. 예시된 입력 구조들(14)은 예시적일 뿐이고, 핸드헬드 장치(70)는 버튼들, 스위치들, 키들, 노브들, 스크롤 휠들 등을 포함하는 다양한 형태들로 존재하는 임의의 수의 적절한 사용자 입력 구조들을 포함할 수 있다는 것을 이해해야 한다.

도 3에 나타난 바와 같이, 핸드헬드 장치(70)는 다양한 I/O 포트들(12)을 포함할 수 있다. 예를 들어, 도시된 I/O 포트들(12)은 데이터 파일들을 송수신하기 위한 또는 전원(26)을 충전하기 위한 전용 접속 포트(proprietary connection port)(12a) , 및 장치(70)를 외부 오디오 출력 장치(24)(예를 들어, 헤드폰들 또는 스피커들)에 접속하기 위한 오디오 접속 포트(12b)를 포함할 수 있다. 또한, 핸드헬드 장치(70)가 이동 전화 기능을 제공하는 실시예들에서, 장치(70)는 SIM(subscriber identify module) 카드[예를 들어, 확장 카드(26)]를 수용하기 위한 I/O 포트(12c)를 포함할 수 있다.

디스플레이 장치(22)는 핸드헬드 장치(70)에 의해 생성되는 다양한 이미지들을 보여줄 수 있다. 예를 들어, 디스플레이(22)는 전력 상태, 신호 강도, 외부 장치 접속들 등과 같은 핸드헬드 장치(70)의 하나 이상의 상태와 관련하여 사용자에게 피드백을 제공하는 다양한 시스템 표시기들(73)을 표시할 수 있다. 디스플레이(22)는 도 2을 참조하여 상술한 바와 같이, 사용자가 장치(70)와 상호 작용하게 허용하는 GUI(36)를 또한 표시할 수 있다. GUI(36)는 각각의 아이콘(56)의 사용자 선택을 탐지할 시에 열리거나 실행될 수 있는 다양한 애플리케이션들에 대응할 수 있는 아이콘들(56)을 포함할 수 있다. 예를 들면, 아이콘(74)은 미디어 플레이어 애플리케이션을 나타낼 수 있고, 아이콘(76)은 온라인 디지털 미디어 서비스 애플리케이션을 나타낼 수 있고, 아이콘(78)은 그를 통해 사용자가 장치(70)의 하나 이상의 설정들을 구성할 수 있는 애플리케이션을 나타낼 수 있다. 예를 들어, 도 3의 표시된 GUI (36)는 애플사로부터 얻을 수 있는 iPhone® 운영 체제 버전으로부터 온 것일 수 있다.

핸드헬드 장치(70)는 또한 오디오 출력 장치들(24), 오디오 입력 장치들(80)뿐만 아니라 출력 송신기(82)를 포함한다. 상술한 바와 같이, 장치(70)상의 오디오 사용자 인터페이스(38)는 다양한 오디오 아이템의 재생을 통하여 오디오 피드백을 사용자에게 제공하기 위해 오디오 출력 장치들(24)을 사용할 수 있다. 덧붙여, 오디오 출력 장치(24)는 예를 들어 음악과 미디어 파일들을 재생하는 것과 같이, 미디어 플레이어 애플리케이션(76)과 결합하여 이용될 수 있다. 또한, 전자 장치(70)가 이동 전화 애플리케이션을 포함하는 경우, 오디오 입력 장치들(80)과 출력 송신기(82)는 전화기의 오디오 수신과 송신 요소들로 기능하도록 결합하여 작동할 수 있다.

이제 도 4를 참조하면, 도 1의 장치(10)에서 구현될 수 있는 오디오 사용자 인터페이스(38)의 기능적 구성 요소들을 묘사하는 블록도가 일 실시예에 따라서 예시된다. 오디오 사용자 인터페이스(38)는 사용자 또는 시스템 이벤트와 같은, 이벤트의 발생을 나타내는 데이터(88)를 수신하는 오디오 피드백 선택 로직(86)을 포함한다. 데이터(88)를 수신하면, 오디오 피드백 선택 로직(86)은, 오디오 출력 장치(24)를 사용하여 재생하기 위한 오디오 아이템(100)의 선택을 결정하기 위해, 이벤트 통계 데이터 저장 유닛(92)과 오디오 피드백 데이터 저장 유닛(94) [둘 모두는 비휘발성 저장소(20) (도 1)의 일부일 수 있거나 또는 독립형 저장 장치들로서 구현될 수 있음] 뿐만 아니라 한 세트의 사용자 선호들(96) 및 시계 또는 타이머(98)와 통신할 수 있다. 알 수 있는 바와 같이, 도 4에 도시된 다양한 구성 요소들에 의해 제공되는 기능들은 전자 장치(10)의 하나 이상의 프로세서들(16)에 의해 실행되거나 수행될 수 있다.

예를 들면, 앞서 언급한 대로, 오디오 피드백 선택 로직(86)의 한 양태는 이벤트(88)에 응답하여 오디오 피드백을 축소하거나 진전시키는 것과 관련될 수 있다. 일 실시예에서, 선택 로직(86)은 오디오 피드백을 위한 후보들로서 이벤트(88)와 관련되는 오디오 데이터 저장소(94) 내의 한 세트의 오디오 아이템들("오디오 피드백 데이터 세트")을 식별할 수 있다. 상술한 바와 같이, 이벤트(88)에 대응하는 한 세트의 오디오 아이템들은 구어성 레벨들에 있어서 변경될 수 있으며, 여기서 각각의 레벨은 "단계"로서 언급될 수 있다. 그러므로, 앞서 정의한 대로, 오디오 피드백을 "단계 격하(stepping down)"하는 것은 오디오 피드백의 구어성을 감소시키는 것을 지칭할 수 있고, 오디오 피드백을 "단계 상승(stepping up)"시키는 것은 오디오 피드백의 구어성을 증가시키는 것을 지칭할 수 있다. 따라서, 구어성의 바라는 레벨에 대응하는 오디오 아이템(100)은 이벤트 통계 데이터 저장소(92) 및 사용자 선호들(96)에 의해 제공되는 정보에 따라서 선택될 수 있다.

일 실시예에서, 이벤트 통계 데이터 저장소(92)는, 이벤트(88)가 장치(10)의 동작 동안에 이전에 발생한 빈도와, 이벤트(88)의 가장 최근의 발생 동안 재생을 위해 선택된 오디오 아이템뿐만이 아니라, 이벤트(88)가 가장 나중에 발생한 때의 시간적 근접도 및 등등의 것을 포함하여, 이벤트(88)에 대한 정보를 저장할 수 있다. 예를 들면, 이벤트(88)의 각각의 이전 발생은 타이머(98)에 의해 제공되고 또한 이벤트 통계 데이터 저장소(92)에서 데이터 엔트리로서 저장되는 타이머 값으로 스탬핑될 수 있다. 타이머(98)는 독립형 시계(예를 들면, RC 발진기)로서 구현될 수 있거나, 장치(10)의 외부 시스템 클록에 기초하여 타이머 값들을 도출하도록 구성될 수 있다. 그러므로, 이벤트(88)가 이벤트(88)의 이전 발생과 비교하여, 매우 근접해서, 즉 선택된 시간량 (사용자 선호들(96)을 통하여 구성가능한 "대기 시간" 또는 "스텝업 시간") 내에 발생할 때, 오디오 피드백 선택 로직(86)은 이전 발생 동안 선택된 오디오 아이템과 비교하여 말 수가 적은 오디오 피드백 데이터 세트로부터의 오디오 아이템(100)을 선택할 수 있다. 이런 방식으로, 오디오 사용자 인터페이스(38)는 상대적으로 짧은 시간량에 걸쳐서 특정 이벤트(88)의 다중 발생들에 대해 똑같이 높은 구어성 오디오 아이템을 반복해서 재생하기를 회피할 수 있어서, 오디오 사용자 인터페이스(38)에 관한 사용자 경험을 개선할 수 있다.

게다가, 오디오 피드백 선택 로직(86)의 몇몇 실시예들은 앞서 논의된 축소 과정과 유사한 기술을 이용하여 오디오 피드백을 진전시키기 위해 또한 구성될 수 있다. 예를 들면, 이벤트(88)의 발생을 탐지할 시에, 이벤트 통계 데이터(92)가 이벤트(88)가 이벤트(88) 발생의 바로 직전에 선택된 스텝업 시간에 대응하는 구간 내에 발생하지 않았다는 것을 표시한다면, 선택 로직(86)은 이벤트(88)의 이전 발생에 대해 선택된 오디오 아이템과 비교하여 더 말 수가 많은 오디오 피드백 데이터 세트로부터의 오디오 아이템(100)을 선택함으로써 오디오 피드백을 진전시킬 수 있다.

이벤트(88)가 발생한 빈도와 시간적 근접성이 오디오 사용자 인터페이스(38)의 선택 로직(86)이 오디오 피드백을 변경할 수 있는 하나의 메트릭이기는 하지만, 다른 요인들도 선택 로직(86)이 어떻게 오디오 아이템(100)을 선택할 것인지에 대해 기여할 수 있다. 예를 들면, 일 실시예에서, 선택 로직(86)은 이벤트(88)의 맥락상 중요성에 기초하여 오디오 피드백을 제어하거나 변경하도록 구성될 수 있는데, 이 맥락상 중요성은 이벤트(88)에 응답하여 제공된 정보의, 이벤트(88)가 발생한 맥락에 대한 상대적 중요성에 좌우될 수 있다. 다른 실시예들에서, 이벤트의 맥락상 중요성은 미리 프로그래밍된 정보에 기초하여 결정될 수 있고 (예를 들면, 이벤트들이 높거나 낮은 맥락상 중요성 특징을 가지는 것으로서 프로그래밍될 수 있다), 이전의 장치의 거동 및/또는 어떻게 사용자가 이벤트의 이전 발생(들) 동안 장치와 상호작용했는지에 기초하여 적응적일 수 있거나 알 수 있고, 또는 예를 들어 전자 장치상의 구성가능한 사용자 선호 설정들의 세트를 통해서 그렇게 하는 것처럼 사용자에 의해 지정될 수 있거나, 또는 이런 요인들의 조합에 기초하여 결정될 수 있다. 추가 실시예에서, 선택 로직(86)은 리스트가 장치(10)의 사용자에 의해 탐색되는 속도에 기초하여 표시된 아이템들의 리스트와 관련된 오디오 피드백을 변경하도록 구성될 수 있다.

이런 점을 염두에 두고서, 나머지 도면들은 본 발명의 양태들에 따라서, 오디오 사용자 인터페이스[예를 들면, (38)]에 의해 제공되는 오디오 피드백을 변경시키기 위한 다양한 실시예들을 설명하도록 의도된 것이다. 특히, 도 5-11은 오디오 피드백 선택 로직(86)이 한 이벤트가 동일한 이벤트의 이전 발생들에 상대적으로 장치(10)상에서 발생하는 근접성에 기초하여 오디오 피드백을 변경하도록 구성되는 실시예들을 묘사한다. 도 12-13은 선택 로직(86)이 장치(10)상에서 발생하는 이벤트의 맥락상 중요성에 기초하여 오디오 피드백을 변경하도록 구성된 실시예를 묘사한다. 도 14-18은 선택 로직(86)이 사용자가 장치(10)상에서 표시된 아이템들의 리스트를 탐색하는 방식에 기초하여 오디오 피드백을 변경하도록 구성된 실시예를 묘사한다. 마지막으로, 도 19-21은 사용자가 장치(10)상에서 오디오 피드백을 변경하는 것에 관련한 다양한 오디오 사용자 인터페이스 설정을 그를 통해 정의하고 및/또는 구성할 수 있는 구성 애플리케이션의 실시예를 묘사한다. 본 분야의 기술자는 이러한 도면들을 참조하여 여기서 주어진 상세한 설명이 예에 의해서, 본 발명의 실시예들이 취할 수 있는 특정 형태들을 제공하도록 단지 의도된다는 것을 쉽게 알 수 있을 것이다. 즉, 본 발명은 여기 논의된 특정한 실시예들에만 제한되는 것으로서 해석하지 말아야 한다.

도 5를 참조하면, 장치(10)상에서 애플리케이션(106)을 묘사하는 스크린 이미지(104)가 일 실시예에 따라서 예시된다. 스크린 이미지(104)는 애플리케이션(106)을 위한 그래픽 사용자 인터페이스의 일부일 수 있고, 도 2의 컴퓨터(50)상에 디스플레이(22)를 이용하여 표시될 수 있다. 설명된 실시예에서, 애플리케이션(106)은 애플사로부터 얻을 수 있는 iTunes®애플리케이션과 같은 디지털 미디어 플레이어 애플리케이션일 수 있고, 사용자가 도 2에 나타난 바와 같이, 운영체제 GUI(36)로부터 적절한 아이콘 (56)을 선택하는 경우 개시될 수 있다. 이하에서 논의되는 실시예들에 대해서, 애플리케이션(106)은 오디오 피드백을 사용자에게 제공하기 위해 오디오 사용자 인터페이스[예를 들면, (38)]를 포함하거나 또는 [예를 들면, 장치(10)의 주 운영 체제의] 전역적 오디오 사용자 인터페이스와 호환 가능하다는 것을 이해하여야 한다.

전술한 바와 같이, GUI(36)는 사용자에 의해 행해지는 입력들 및 선택들에 의존하여 아이콘들(예컨대, 56) 및 그래픽 요소들을 포함하는 다양한 스크린을 표시할 수 있다. 이러한 요소들은 하나 이상 입력 구조들(14)(도 1)을 이용하여 디스플레이(22)로부터 사용자에 의해 선택될 수 있는 그래픽적인 가상의 요소들 또는 "버튼들"을 나타낼 수 있다. 따라서, 이하의 스크린 이미지들의 설명에서 사용되는 대로, "버튼", "가상 버튼", "그래픽 버튼", "그래픽 요소들" 등과 같은 용어는 디스플레이(22)상에 제공되는 그래픽 요소들에 의해 표현되는 버튼들 또는 아이콘들의 그래픽 표현들을 지칭하기 위한 것임을 이해해야 한다. 또한, 후속 도면들에서 제시되고 설명되는 기능들은 광범위하게 다양한 그래픽 요소들 및 시각적 방식들을 이용하여 달성될 수 있다는 것도 이해해야 한다. 따라서, 본 발명은 여기에 묘사되는 그대로의 사용자 인터페이스 관행들에만 국한되도록 의도하지 않았다. 오히려, 여기에서 제시된 실시예들은 광범위하게 다양한 사용자 인터페이스 스타일들을 포함하여 구현될 수 있다.

스크린(104)에 나타난 바와 같이, 애플리케이션(106)은 사용자가 장치(10)상의 재생을 위해 그로부터 아이템(112)을 선택할 수 있는 곡 파일들, 비디오 파일들, 팟캐스트들 및 등등과 같은, 미디어 아이템(110)의 리스트(108)를 표시할 수 있다. 도 5에 나타난 바와 같이, 리스트(108)는 곡 이름, 트랙 재생 시간, 아티스트 명칭, 앨범명 및 장르와 같은 각각의 미디어 아이템(110)에 대한 다양한 특징들을 표시할 수 있다. 일단 선택된 아이템(112)이 식별된다면, 사용자는 그래픽 재생 버튼(114)을 선택함으로써 선택된 아이템(112)의 재생을 개시할 수 있다. 덧붙여, 사용자는 그래픽 버튼(118)을 선택함으로써 이전에 재생된 아이템으로 돌아가거나, 그래픽 버튼(116)을 선택함으로써 리스트(108)의 또 다른 아이템으로 전방향 스킵하거나, 또는 그래픽 슬라이딩 바(120)를 조작함으로써 선택된 아이템(112)의 재생 음량을 조절할 수 있다. 여기서 보여진 것처럼, 스크린(104)은 또한 스크롤 바 요소들(122, 124)을 포함하는데, 이들 요소들은 디스플레이(22)의 사이즈가 리스트(108)를 표시하는 데에 불충분하다면 사용자가 전체 리스트(108)를 수직적으로 그리고 수평으로 탐색하게 허용할 수 있다.

애플리케이션(106)에 의해 제공되는 추가적 재생 기능들이 그래픽 버튼들(126, 128, 130, 132)에 의해 묘사되어 있다. 예를 들면, 그래픽 버튼(126)은 사용자가 보통은 "재생 목록"으로서 언급되는 재생용의 새로운 그룹의 미디어 아이템들을 수동으로 생성할 수 있는 기능을 나타낼 수 있다. 그래픽 버튼들(128, 130)은 각각 "셔플(shuffle)"과 "반복" 재생 모드들을 인에이블링하거나 디스에이블링하기 위한 기능들을 나타낼 수 있다. 마지막으로, 그래픽 버튼(132)은 선택된 미디어 아이템(112)과 유사한 것으로 결정되는, 장치(10)상에 저장된 미디어 아이템들을 이용하여 재생 목록을 자동적으로 생성하기 위한 기능을 나타낼 수 있다. 예를 들어, 그러한 기능은 iTunes®애플리케이션상에서 뿐만 아니라 iPod® 및 iPhone® 모델상에서도 제공될 수 있는 Genius® 기능으로서 제공될 수 있는데, 이 모두는 애플사로부터 얻을 수 있다.

Genius® 재생 목록은 애플사에 의해 제공되는 iTunes®서버와 같은, 외부 집중식 서버를 통해 제공되는 등급 시스템과 필터링 알고리즘들을 사용하여 생성될 수 있다. 그러나, 몇몇 경우에, Genius® 기능은 선택된 미디어 아이템(112)이 상대적으로 새롭고 또한 Genius®기능이 [예를 들면, 비휘발성 저장소(20)에] 장치(10)상에 저장된 유사한 미디어를 식별하는 데에 충분한 데이터 포인트들을 획득할 수 없는 경우에서와 같이, 재생 목록을 생성하기 위한 사용자 요청을 이행하지 못할 수 있다. 덧붙여, Genius®기능은 또한 장치(10)상에 저장된 미디어 아이템들의 전체 수가 적합한 재생 목록을 생성하는 데에 불충분하면 이용하지 못할 수 있다. 도 6 -10에 대하여 이하에서 논의되는 실시예들에 대해, Genius® 버튼(132)의 선택은 오디오 피드백을 트리거링하거나 요청하는 이벤트(88) (도 4)의 예로서 이용된다.

도 6은 Genius® 버튼(132)의 선택에 뒤이은 스크린(104)의 갱신 뷰를 보여준다. 도해된 예에서, Genius®기능은 선택된 미디어 아이템(112)에 대해 이용될 수 없다는 것이 가정된다. 이런 이벤트(88)에 응답하여, 애플리케이션(106)의 그래픽 사용자 인터페이스(36) 부분은 시각적 통지 윈도(140)를 표시할 수 있는데, 이 윈도는 사용자에게 요청된 기능을 쓸 수 없다는 것을 알려주는 시각적 통지(142)를 포함한다. 일반적으로 시각적 통지 윈도(140)의 표시와 동시적으로, 애플리케이션(106)의 오디오 사용자 인터페이스(38) 부분은 사용자에게 요청된 기능을 쓸 수 없다는 것을 알리기 위해 오디오 피드백을 제공할 수 있다. 예를 들면, 오디오 피드백은 오디오 아이템을 재생함으로써 제공될 수 있으며, 이는 오디오 파일을 재생하는 것 또는 합성된 음성을 이용하여 통지(142)를 "말하기 위해" 텍스트-투-스피치 애플리케이션을 이용하는 것을 포함할 수 있다. 시각적 통지 윈도(140)를 스크린(104)으로부터 제거하기 위해, 사용자는 그래픽 버튼(144)을 선택할 수 있는데, 이는 사용자가 시각적 통지 윈도(140)에 의해 전달된 정보를 수신하였고 확인했다는 것을 장치(10) 및 애플리케이션(106)에게 표시할 수 있다.

상술한 바와 같이, 현재 기술의 특정 실시예들은 이벤트(88)에 응답하여 오디오 피드백을 축소시키는 것을 포함할 수 있다. 예를 들면, Genius®기능을 선택된 미디어 아이템(112)에 적용하려고 시도한 후에, 사용자가 어떤 성공도 못하면서 상대적으로 짧은 시간 구간 내에 리스트(108)상의 몇 개의 다른 아이템들에 대해 Genius®기능을 적용하려고 추가로 시도하고, 그에 따라 각각의 시도에 대해 이벤트(88)를 트리거링한다고 가정하자. 앞서 논의된 축소 기술이 적용되지 않는다고 가정하면, 오디오 피드백이 각각의 발생에 대해 "순 구어적"으로 제공되고, 이는 사용자를 반복적 정보로 인해 당황케 하고 그러므로 애플리케이션(106)에 관한 사용자 경험에 나쁜 영향을 주게 된다.

사용자 경험을 개선하기 위해, 오디오 피드백 선택 로직(86)(도 4)은 이벤트(88)에 관한 (예를 들면, 스토리지(92)로부터의) 이벤트 통계 데이터를 분석하고 이벤트(88)와 관련된 오디오 피드백 데이터 세트로부터 적절한 오디오 아이템을 선택함으로써 이벤트(88)에 대응하는 오디오 피드백의 구어성을 줄일 수 있다. 도 7을 참조하면, 오디오 피드백 데이터 세트(148)의 예가 설명된다. 도면에 나타낸 바와 같이, 오디오 피드백 데이터 세트(148)는 오디오 아이템들(150, 152, 154, 156)을 포함할 수 있는데, 각각의 아이템은 변화하는 구어성 레벨을 가진다. 예를 들면, "순 구어성(full verbosity)"이라고 언급된 오디오 아이템(150)은 가장 말 수가 많고, 선택 로직(86)에 의해 선택될 때 구두 오디오 정보 "GENIUS IS CURRENTLY UNAVAILABLE FOR THIS TRACK"가 도 6의 시각적 통지 윈도(140)의 표시와 대체로 동시적으로 오디오 출력 장치(24)를 통해 재생되도록 야기할 수 있다.

오디오 아이템(152)은 오디오 아이템(150)과 비교해 말 수가 적은 제1 레벨 축소된 오디오 아이템을 나타낼 수 있지만, 구어적 오디오 정보의 상당 부분을 여전히 포함할 수 있다. 예를 들면, 선택될 때, 오디오 아이템(152)은 구두 오디오 정보 "GENIUS IS NOT AVAILABLE"이 오디오 출력 장치(24)를 통하여 재생되도록 야기할 수 있다. 오디오 아이템(154)은 오디오 아이템(152)과 비교하여 더욱 말 수가 적고, 상대적으로 짧은 구두 메시지 "NO GENIUS"를 포함할 뿐이다. 마지막으로, 오디오 아이템(156)은 세트(148) 중 가장 말 수가 적은 아이템을 나타내고, 어떤 언어적 요소들도 포함하지 않고 부정적 소리 톤(negative sounding tone) 또는 삑소리 형태의 비언어적 큐만을 포함한다.

그러므로, 도 7에서 설명된 오디오 피드백 데이터 세트(148)는 예시적으로 선택 로직(86)이 이벤트(88)의 발생에 대응하는 오디오 피드백을 진전시키거나 축소시키는 것을 그로부터 선택할 수 있는 구어성의 변화하는 레벨들 또는 단계들을 갖는 오디오 아이템들(예를 들면, 150, 152, 154 및 156)을 나타낸다. 또한, 본 실시예가 구어성의 4개 단계들을 갖는 오디오 피드백 데이터 세트를 예시하기는 하지만, 다른 실시예들에서 또는 다른 이벤트들에 대하여, 대응하는 오디오 피드백 데이터 세트들이 더 적거나 더 많은 구어성 단계를 포함할 수 있다는 것이 이해되어야 한다. 또한, 몇몇 실시예들은 동일 레벨의 구어성에 대해 다중 오디오 아이템들을 포함하는 오디오 피드백 데이터 세트를 제공할 수 있다. 예를 들면, 이하에서 더욱 논의되는 것처럼, 일 실시예에서, 사용자가 특정 이벤트의 맥락상 중요성을 결정하는 것을 돕기 위해 다양한 비언어적 큐들이 제공될 수 있다.

도 6에 도시된 이벤트(88)에 대응하는 오디오 피드백이 어떻게 축소되고 진전될 수 있는지를 나타내는 예가 120 분의 기간에 걸쳐서 장치(10)의 동작을 묘사하는 그래픽 타임라인에 의해서 도 8에 설명된다. 도면에 나타낸 바와 같이, 이벤트(88)는 이 기간, 특정하게는 t0 (0 분), t20 (20 분), t35 (35 분), t55 (55 분)과 t110(110 분)에서 복수회 발생할 수 있다. 이벤트(88)가 이런 시간들의 각각에서 일반적으로 동일하기는 하지만, 각각의 발생을 좀 더 잘 구별하기 위해 이벤트들은 참조 번호들(88a, 88b, 88c, 88d, 88e)로 표식이 붙여졌다. 본 예는 장치(10)의 제조자 또는 사용자 인터페이스(34)의 프로그래머에 의해 미리 설정되거나, [예를 들면, 도 4에 도시된 사용자 선호들(96)을 통해] 사용자에 의해 추후에 구성될 수 있는 45분에서의 스텝업 시간 구간 세트를 가정하고, 또한 시간 t0 바로 전의 스텝업 시간 구간 (예를 들면, -t45에서부터 t0까지의 이전 45 분)에서 이벤트(88)가 발생하지 않았다고 추가로 가정한다.

시간 t0에서 시작해서, 이벤트(88a)의 발생은 스크린(104)상에 표시되는 도 6의 시각적 통지 윈도(140)뿐만이 아니라, 순 구어성 오디오 아이템(150)의 선택과 재생이라는 결과를 낳을 수 있다. 예를 들면, 이벤트 통계 데이터 저장소 유닛(92)은 선택 로직(86)에게 어떤 유사한 이벤트들(88)도 시간 t0 바로 전에 스텝 업 시간 구간(45분) 내에 발생하지 않았다고 표시할 수 있다. 이 데이터를 기반으로, 선택 로직(86)은 이벤트(88a)의 발생에 관련한 시각적 정보 [예를 들면, 시각적 통지 윈도(140)]의 디스플레이와 거의 동시에 오디오 정보를 제공하기 위해 순 구어성 오디오 아이템(150)의 재생을 선택하고 시작할 수 있다. 오디오 아이템(150)의 재생을 개시할 시에, 오디오 사용자 인터페이스(38)는 시간 t0에서 시간 t45 까지 스텝업 윈도(157)를 확립하기 위해 타이머(98)을 이용할 수 있다. 이벤트(88)가 이 윈도(157) 내에 다시 발생하면, 선택 로직(86)은 오디오 피드백을 축소할 수 있다.

본 예에서, 이벤트(88b)는 시간 t20에서 다시 한번 발생한다. 이벤트(88b)의 발생 시에, 이벤트 통계 데이터 저장소 유닛(92)은 이벤트(88a)가 45 분보다 작은 이전(예를 들면, 스텝 업 구간)에 발생한 것을 선택 로직(86)에게 나타낼 수 있다. 그러므로, 이벤트(88b)가 (예를 들면, t0에서부터 t45까지) 스텝업 윈도(157) 내에 발생하기 때문에, 선택 로직(86)은 이벤트(88)의 가장 최근 발생 동안 재생된 오디오 아이템[예를 들면, 이 경우, 시간 t0에서의 오디오 아이템(150)]을 식별할 수 있고, 구어성의 한 단계만큼 오디오 피드백을 축소할 수 있다. 이는 오디오 아이템(150)의 선택 및 재생을 낳을 수 있는데, 이는 도 7에 나타난 바와 같이 오디오 아이템(152)가 비교하여 하나의 구어성 단계만큼 작은 것이다. 일단 오디오 아이템(152)의 재생이 시간 t20에서 발생하면, 스텝업 윈도(157)의 나머지는 관련성 없게 되고, 새로운 "현재" 스텝업 윈도(158)가 시간 t20에서 t65까지 확립된다.

그 후에, 이벤트(88c)는 시간 t35 에서 다시 발생한다. 이벤트(88c)가 (예를 들면, t20에서부터 t65까지) 스텝업 윈도(158) 내에 발생하기 때문에, 오디오 사용자 인터페이스(38)의 선택 로직(86)은 이전에 재생된 오디오 아이템 (152)보다 구어성이 한 단계 낮은 오디오 아이템(154)을 선택하고 재생함으로써 이벤트(88c)와 관련된 오디오 피드백을 추가로 축소한다. 일단 오디오 아이템(154)의 재생이 시간 t35에서 발생하면, 스텝업 윈도(158)의 나머지가 또한 관련성이 없게 되고, 이벤트(88c)와 관련되는 스텝업 윈도(159)가 시간 t35에서 시간 t80까지 확립되고, 현재 스텝업 윈도가 된다.

이벤트(88c)에 이어서, 이벤트(88d)가 시간 t55에 다시 발생한다. 다시금, 이벤트(88d)가 (예를 들면, t35에서부터 t80까지) 현재 스텝업 윈도(159) 내에 발생하기 때문에, 오디오 사용자 인터페이스(38)의 선택 로직(86)은 오디오 피드백의 구어성을 추가 단계만큼 낮추고, 그에 따라 이벤트(88)과 관련된 오디오 피드백을 비언어적 오디오 아이템(156)으로 완전히 축소한다. 그 후에, 일단 비언어적 오디오 아이템(156)의 재생이 시간 t55에 발생하면, 이벤트(88d)와 관련된 새로운 스텝업 윈도(160)가 시간 t55에서 시간 t100까지 확립되고, 이전 스텝업 윈도(159)의 나머지는 관련성이 없게 된다. 다시 말하면, 이벤트(88)가 이벤트(88)의 가장 최근의 이전 발생에 이어진 현재 스텝업 시간 윈도 내에 계속 발생하는 한, 선택 로직(86)은 이벤트(88)에 대응하는 오디오 피드백을 축소하기를 계속할 수 있다. 그러나, 오디오 아이템(156)이 본 예에서 더 이상 축소될 수 없기 때문에, 윈도(160) 내에서의 이벤트(88)의 추가적 발생들이 선택 로직(86)이 다시 오디오 아이템(156)을 선택하고 재생하는 것을 낳을 수 있다는 점을 유의해야 한다.

다음으로, 시간 t110에, 이벤트(88e)가 다시 한번 발생한다. 이 발생은 그러나 스텝업 윈도(160) 밖에 있다. 이 경우에, 선택 로직(86)은 오디오 피드백을 진전시키기 위해 구성될 수 있다. 예를 들면, 일 실시예에서, 선택 로직(86)은 가장 최근에 재생된 오디오 아이템 (예를 들면, 오디오 아이템(156))의 구어성 레벨에 상관없이, 오디오 아이템(150)을 선택하고 시간 110에서 재생함으로써 오디오 피드백의 구어성을 순 구어성으로 재설정할 수 있다. 또 다른 실시예에서, 선택 로직(86)은 가장 최근에 재생된 오디오 아이템에 상대적으로 오디오 피드백의 구어성을 한 단계만큼 증가시킴으로써 오디오 피드백을 진전시킬 수 있다. 예를 들면, 본 예에서, 시간 t110에서의 오디오 아이템(154)의 선택은 가장 최근에 재생된 오디오 아이템(156)에 상대적으로 오디오 피드백의 구어성에서의 한 단계 증가를 제공할 수 있다.

알 수 있는 바와 같이, 이벤트들(88a-88e)의 각각의 발생은, 오디오 피드백을 트리거링할뿐만 아니라, 또한 도 6에 도시된 시각적 통지 윈도(140)를 통해 그런 것처럼 GUI (36)상의 시각적 피드백의 표시를 트리거링할 수 있다. 또한, 이벤트들 (88a-88e)의 각각의 발생은 이벤트(88)의 미래 발생들에 대한 적절한 오디오 피드백을 결정할 때 오디오 피드백 선택 로직(86)에 의해 이용될 수 있는 통계 자료를 제공하기 위해 이벤트 통계 데이터 저장소(92)에 저장될 수 있다.

도 8에 묘사된 그래픽 타임라인이 현재 스텝업 윈도 내에 발생하는 이벤트(88)의 각각 차순의 발생에 대한 축소의 일정 레이트(예를 들면, 구어성의 한 단계)를 예시하는데, 본 기술의 다른 실시예들은 이벤트(88)가 이전 발생에 생대적으로 발생하는 근접도에 기초할 뿐만 아니라, 이벤트(88)로부터 귀결되는 시각적 피드백 및/또는 오디오 피드백에 대한 사용자의 반응 또는 응답에도 적어도 부분적으로 기초하여 오디오 피드백이 축소되는 레이트를 변경할 수 있다.

예를 들면, 오디오 피드백을 축소시키기 위한 일 실시예는 "재생 종결 이벤트(playback termination event)"의 발생을 고려할 수 있다. 여기서 이용되는 바로는, 재생 종결 이벤트는 완료 전에 오디오 아이템의 재생을 종결시키는 사용자에 의한 응답을 지칭한다. 예를 들면, 도 6을 참조하면, 일 실시예에서, 사용자는 선택된 오디오 피드백 아이템 (예를 들면, 오디오 아이템들 150, 152, 154 및 156 중 하나)의 재생 동안 그러나 그 완료 전에 그래픽 버튼(144)를 선택하여 재생 종결 이벤트를 야기할 수 있다. 재생 종결 이벤트는 또한 몸짓 기반 행위(예를 들어, 부드럽게 장치(10)를 흔드는 것)와 같은, 다른 행위들을 이용하여 장치(10)에게 통신될 수 있다. 따라서, 장치(10)는 사용자가 시각적 통지 윈도(140) 및 선택된 오디오 피드백의 어느 한 쪽 또는 양쪽에 의해 제공된 정보에 관심이 없다는 응답으로서 재생 종결 이벤트들을 해석할 수 있다.

어떻게 재생 종결 이벤트들이 오디오 피드백의 축소에 영향을 미칠 수 있는지를 예시하는 예가 이벤트(88)가 시간들 t0, t30 및 t110에서 발생하는 120분의 기간에 걸친 장치(10)의 동작을 묘사하는 그래픽 타임라인에 의해서 도 9에 나타내어진다. 구분 목적을 위해, 이러한 발생들은 참조 번호들(88f, 88g 및 88h)에 의해 지칭된다. 덧붙여, 도 9에 도시된 예의 목적을 위해, 45 분 스텝업 구간이 가정된다. 이벤트(88)가 시간 t0 바로 직전의 스텝업 시구간(예를 들면, -t45에서부터 t0까지의 이전 45 분)에서 발생하지 않았다고 또한 가정된다.

시간 t0에서 시작하여, 이벤트(88f)의 발생은 스크린(104)상에 표시되는 도 6의 시각적 통지 윈도(140)뿐만 아니라 시간 t0에서의 순 구어성 오디오 아이템(150)의 선택 및 재생의 결과를 낳을 수 있다. 오디오 아이템(150)의 재생 동안, 재생 종결 이벤트(161)가 탐지되며, 이는 오디오 아이템(150)의 재생이 때 이르게 종결하도록 야기할 수 있다. 예를 들면, 이것은 사용자가 오디오 아이템(150)의 완전한 재생 전에 그래픽 버튼(144)을 선택한 결과일 수 있거나, 또는 종결 몸짓(예를 들어, 장치(10)를 흔드는 것) 또는 오디오 아이템의 완료 전에 오디오 아이템(150)의 재생을 종결시키는 임의 유형의 행위일 수 있다. 재생 종결 이벤트(161)뿐만 아니라 이벤트(88f)의 발생은 이벤트 통계 데이터 저장소(92)에 저장된다. 덧붙여, 이벤트(88)의 차순의 발생들을 탐지하기 위한 스텝업 윈도(162)가 시간 t0부터 t45까지 확립된다.

다음에, 이벤트(88g)는 시간 t30에 다시 발생한다. 이벤트(88g)의 발생 시에, 이벤트 통계 데이터 저장소 유닛(92)은 재생 종결 이벤트(161)가 시간 t0에서 이벤트(88f)의 이전 발생과 결합하여 검출된 것을 선택 로직(86)에게 표시할 수 있다. 예시된 실시예에서, 이것은 선택 로직(86)이, 비언어적 오디오 아이템(156)을 선택하고 재생하고 이에 의해 오디오 아이템들(152, 154)에 의해 나타내어지는 구어성 레벨들을 우회함으로써, 오디오 피드백을 완전히 축소하도록 야기할 수 있다. 새로운 스텝업 윈도(163)가 시간 t30에서 시간 t75까지 확립된다. 알 수 있는 바와 같이, 도 8의 실시예처럼, 윈도(163) 내에서의 이벤트(88)의 차순의 발생들은 오디오 아이템(156)이 다시 재생되는 결과를 낳을 수 있고, 윈도(163)를 벗어난 이벤트(88)의 차순의 발생들은 도 9에 나타난 바와 같이 시간 t110에서 오디오 피드백이 순 구어성[예를 들면, 오디오 아이템(150)]으로 재설정되는 결과를 낳을 수 있다.

몇몇 실시예에서, 재생 종결 이벤트(예를 들면, 161)는, 오디오 피드백 거동에 영향을 줄 뿐만 아니라, 또한 시각적 피드백 거동에 영향을 미칠 수 있다. 예를 들면, 도10을 참조하면, 도9의 시간 t30에서 스크린(104)은 이벤트(88g)의 발생 동안 도시된다. 보여지는 바와 같이, 이벤트의 가장 최근의 발생(예를 들면, 시간 t0에서 88f) 동안 재생 종결 이벤트(161)의 검출로 인해, 도 6에서 스크린(104)의 중심에 이전에 출현했던 시각적 통지 윈도(140)는 스크린(104)의 상위 우측 모서리 근처에 출현하는 덜 눈에 띄고 더 작은 통지 배너(164)로 축소된다. 통지 배너(164)는 시각적 통지 메시지(165)를 포함하는데, 이는 도 6에 도시된 더 말 수가 많은 통지 메시지(142)와 비교하여 또한 축소된다.

통지 배너(164)는 그래픽 요소들(166, 168)을 포함할 수 있다. 그래픽 요소(166)를 선택함으로써, 사용자는 통지 배너(164)를 확장하여 윈도(140)가 그 대신에 나타나도록 야기할 수 있다. 일 실시예에서, GUI (36)는 자동적으로 배너(164)를 스크린(104)으로부터 제거하기 전에, 예를 들어 5에서 10 초의 기간 동안, 간략하게만 통지 배너(164)를 표시할 수 있다. 덧붙여, 사용자는 그래픽 버튼(168)을 선택함으로써 통지 배너(164)를 수동으로 제거하기로 선택할 수 있다.

도 5-10에 나타난 실시예들을 참조하여 기술된 것처럼, 오디오 피드백을 축소하고 진전시키기 위한 다양한 기술이 일반적으로 도 11a의 흐름도에 의해 묘사된 방법 169, 그리고 도 11b에 도시된 흐름도에 의해 묘사되는 방법 174에 의해 요약된다.

먼저 도 11a를 참조하면, 방법 169가 바라는 구어성 레벨을 기반으로 오디오 피드백을 진전시키거나 축소하기 위한 보다 기본적인 접근법을 예시한다. 예를 들면, 방법 169는 단계 170에서 시작하는데, 이 단계에서 오디오 피드백을 트리거링하거나 요청하는 제1 시간 T(x) 에서의 이벤트의 발생(예를 들면, 도 6의 Genius®기능을 쓸 수 있다는 표시)이 장치(10)의 오디오 사용자 인터페이스(38)에 의해 검출된다. 다음에, 단계 171에서, 검출된 이벤트에 대응하는 한 세트의 오디오 아이템들이 식별되며, 그것에 의해 세트 내의 각각의 오디오 아이템들이 세트 내의 다른 모든 오디오 아이템들마다에 대해서 다른 구어성의 레벨을 가질 수 있다.

그 후에, 단계 172에서, 도 11a에 나타난 바와 같이, 바라는 구어성 레벨에 대응하는 제1 오디오 아이템이 선택되는데, 이는 단계 170으로부터의 검출된 이벤트가 시간 T(x) 전에 특정 시 구간(예를 들면, 스텝업 윈도) 내에 발생했는 지에 적어도 부분적으로 기초하여 결정될 수 있다. 일 실시예에서, 이벤트가 특정 시 구간 내에 이미 발생하였다면, 바라는 구어성 레벨은 이벤트의 바로 앞선 발생 동안 선택된 오디오 아이템의 구어성과 비교하여 축소될 수 있다. 유사하게, 이벤트가 특정 시 구간 내에 이미 발생하지 않았다면, 바라는 구어성 레벨은 이벤트의 바로 앞선 발생 동안 선택된 오디오 아이템의 구어성과 비교하여 진전될 수 있다. 다음에, 단계 173에서, 선택된 오디오 아이템 (예를 들어, 바라는 구어성 레벨을 가짐)은 검출된 이벤트에 응답하여 오디오 피드백을 제공하기 위해 재생된다.

도 11b는 도 8-9를 참고하여 상술한 바와 같이, 추가 기능들을 묘사하는 더 상세한 흐름도를 예시한다. 예를 들면, 방법 174는 단계 175에 시작하는데, 이 단계에서 오디오 피드백을 트리거링하거나 요청하는 이벤트의 발생(예를 들면, 도 6의 Genius®기능을 쓸 수 없다는 표시)이 장치(10)의 오디오 사용자 인터페이스(38)에 의해 검출된다. 다음으로, 단계 176에서, 단계 175에서 검출된 이벤트에 대응하는, 다른 구어성 레벨들을 갖는 다중 오디오 아이템들을 포함할 수 있는 오디오 피드백 데이터 세트 및 한 세트의 이벤트 통계 데이터가 식별된다.

단계 176으로부터의 이벤트 통계에 기초하여, 선택 로직(86)은, 결정 블록 177에서, 이벤트가 이벤트의 가장 최근의 이전 발생에 뒤이은 스텝업 윈도 내에 발생했는지를 결정할 수 있다. 이벤트가 스텝업 윈도 내에 발생하지 않았다면 방법 174는 단계 178까지 계속하고, 그것에 의해 오디오 피드백이 순 구어성으로 제공된다. 상기 언급한 바와 같이, 대안 실시예에 있어서, 순 구어성을 제공하기 보다, 선택 로직(86)은 그 대신에 한 단계 만큼 오디오 피드백을 진전시킬 수 있다. 예를 들면, 도11에 나타난 바와 같이, 이벤트가 스텝업 윈도 내에 발생하지 않았다면, 방법 174는 대안적으로 단계 180까지 계속할 수 있는데, 이 단계에서 이벤트의 가장 최근의 이전 발생에 대응하는 가장 최근에 선택된 오디오 아이템이 식별되고, 그리고 단계 182까지 계속할 수 있는데 이 단계에서 오디오 피드백이 이전에 선택된 오디오 아이템과 비교하여 한 단계만큼 진전되고 또한 장치(10)에 의해 재생된다.

다시 결정 블록 177을 참조하면, 이벤트가 이전 발생에 이어진 스텝업 윈도 내에 발생하면, 방법 174는 결정 블록 186까지 계속하고, 이 블록에서 이전 발생이 재생 종결 이벤트 (예를 들면, 161)에 의해 동반되는지에 대한 결정이 이뤄진다. 재생 종결 이벤트가 이벤트의 이전 발생과 함께 검출되면, 방법 174는 단계 188까지 계속되고, 오디오 피드백 데이터 세트로부터의 가장 축소된 오디오 아이템(예를 들면, 148)이 선택되고 재생된다. 예를 들면, 가장 축소된 오디오 아이템은 비언어적 오디오 큐(예를 들면, 오디오 아이템(156))일 수 있다.

결정 블록(186)이 이벤트의 이전 발생 동안 검출된 재생 종결 이벤트가 없었다고 결정하면, 이벤트의 이전 발생에 대응하는 가장 최근에 선택된 오디오 아이템이 단계 190에서 식별된다. 단계 192에서, 가장 최근에 선택된 오디오 아이템이 이미 단계 176으로부터의 오디오 피드백 데이터 세트의 가장 축소된 오디오 아이템인지에 대한 결정이 이루어진다. 가장 최근에 선택된 오디오 아이템이 세트로부터의 가장 축소된 오디오 아이템인 것으로 결정되면, 이것은 현재 오디오 아이템으로서 선택되고, 단계 188에서 재생된다. 가장 최근에 선택된 오디오 아이템이 세트로부터의 가장 축소된 오디오 아이템이 아니라면, 선택 로직(86)은 오디오 피드백을 한 단계만큼 축소하고 대응하는 축소된 오디오 아이템을 재생할 수 있다.

도 12, 13으로 계속하여, 어떻게 오디오 피드백이 이벤트의 맥락상 중요성에 기초하여 변경될 수 있는지 예시하는 실시예들이 본 발명의 양태들에 따라서 설명된다. 앞서 정의된 것처럼, 맥락상 중요성은 정보가 제공되는 맥락과 관련하여 장치상의 이벤트에 응답하여 제공되는 정보의 중요성을 지칭한다.

먼저 도 12를 참조하면, 다른 맥락상 중요성 특징들을 갖는 두 개의 다른 이벤트들의 발생을 묘사하는 일련의 스크린 이미지들이 도시된다. 도 12에 도시된 스크린 이미지들은 도 3에 도시된 핸드헬드 장치(70)상에 표시되는 GUI(36)의 일부일 수 있다. 예를 들면, GUI (36)의 홈 스크린(72)으로부터 시작하여, 사용자는 아이콘(74)을 선택함으로써 미디어 플레이어 애플리케이션을 시작할 수 있다. 예를 들면, 미디어 플레이어 애플리케이션(74)은 iPod Touch® 또는 iPhone®모델 상에서 돌아가는 iPod®애플리케이션일 수 있는데, 이들은 애플사로부터 얻을 수 있다. 추가로 GUI(36)은 도 12에 도시된 대로, iPod® 또는 iPhone®운영 체제의 버전일 수 있는데, 이들도 애플사로부터 얻을 수 있다.

아이콘(74)의 선택 시에, 사용자는 미디어 플레이어 애플리케이션(74)의 홈 스크린(200)까지 탐색해 나갈 수 있다. 도 12에 나타난 바와 같이, 스크린(200)은, 각각이 사용자에 의해 정의되는 복수의 미디어 파일을 포함할 수 있는 재생 목록(204)의 리스트(202)를 초기에 표시할 수 있다. 예를 들면, 재생 목록(204)은 전체 음악 앨범으로부터의 모든 곡 파일들을 구성할 수 있거나, 장치(10)의 사용자에 의해 선택된 미디어 파일들의 맞춤식 "믹스" 일 수 있다. 스크린(200)은 또한, 각각이 특정 기능들에 대응될 수 있는 그래픽 버튼들(206, 208, 210, 212, 214)을 포함한다. 예를 들면, 사용자가 스크린(200)으로부터 멀어지며 탐색하면, 그래픽 버튼(206)의 선택은 사용자를 스크린(200)에게 되돌릴 수 있다. 그래픽 버튼(208)은 각각의 미디어 파일과 관련된 아티스트들의 이름들에 기초해 알파벳순으로 장치(10)에 저장된 미디어 파일들을 조직화할 수 있다. 그래픽 버튼(210)은 음악 (예를 들면, 곡 파일들)에 특히 대응하는 미디어 파일들이 분류되고 장치(10)상에서 표시되는 기능을 나타낼 수 있다. 예를 들면, 그래픽 버튼(210)의 선택은 사용자에 의해 탐색될 수 있는 리스트에서 알파벳순으로 장치(10)상에 저장된 모든 음악 파일들을 표시할 수 있다. 덧붙여, 그래픽 버튼(212)은 사용자가 장치(10)상에 저장된 비디오 파일들에 접근할 수 있는 기능을 나타낼 수 있다. 마지막으로, 그래픽 버튼(214)은 사용자가 장치(10)와 미디어 플레이어 애플리케이션(74)의 기능성을 추가로 맞춤화하기 위해 구성할 수 있는 옵션 리스트를 사용자에게 제공할 수 있다.

상기에 논의된 것처럼, 장치(10)의 동작 동안에, 앞서 정의한 대로의 사용자 이벤트들과 시스템 이벤트들을 포함하는 다양한 이벤트들이 발생할 수 있다. 예를 들면, 미디어 플레이어 애플리케이션(74)이 들어오는 네트워크 접속들을 수용하도록 인에이블하기 위해 사용자에 의해 개시된 행위들에 응답하여 사용자 이벤트(216)가 발생한 것을 나타내기 위해 시각적 통지 윈도(218)가 스크린(200)상에 표시될 수 있다. 도12에 나타난 바와 같이, 윈도(218)는, 시각적 통지 메시지(220)뿐만 아니라, 선택되면 들어오는 네트워크 접속들을 거부할 수 있는 결정 버튼(222), 및 선택되면 들어오는 네트워크 접속들을 허용할 수 있는 결정 버튼(224)을 포함할 수 있다.

본 맥락에서, 이벤트(216)의 "맥락상 중요성"은 사용자 입력이 요청된 동작 (예를 들면, 들어오는 네트워크 접속들의 허용)을 수행하거나 수행하지 않기 위해 요구된다는 사실 때문에 상대적으로 높을 수 있다. 즉, 사용자로부터의 응답 없이, 장치(10)는 진행할 수 없는데, 그 이유는 사용자가 들어오는 네트워크 접속들의 허용을 확인하지 않았거나 거부했기 때문이다. 그러므로, 이벤트(216)와 관련된 오디오 피드백 데이터 세트는, 시각적 통지 윈도(218)에 사용자가 응답하도록 프롬프팅하기 위한 목적으로, 재생될 때 이벤트(216)의 높은 맥락상 중요성을 나타내는 비언어적 오디오 톤(226)을 적어도 포함할 수 있다. 예를 들면, 비언어적 톤(226)은 독특한 경보 음, 짹짹소리, 삑 소리, 또는 이벤트(216)의 맥락상 중요성을 강조할 수 있는 임의 유형의 비언어적 오디오 톤 (예를 들면, 더 높게 피치된 사운드, 더 시끄러운 음량, 더 긴 재생 시간, 기타 등등)을 포함할 수 있다. 다시 말하면, 이벤트(216)가 하나 이상의 언어적 오디오 아이템과 관련될 수 있기는 하지만, 오디오 사용자 인터페이스(38)가 비언어적 오디오 아이템(226)을 선택하거나 또는 사용자가 비언어적 오디오 피드백만을 재생하기 위해 장치(10)를 구성하는 상황들에서, 비언어적 오디오 아이템(226)은 맥락상 덜 중요한 이벤트들로부터 이벤트(216)를 청각적으로 구별하는 것을 도울 수 있다.

예를 제공하기 위해, 초기에 이벤트(216)와 비교하여 낮은 맥락상 중요성을 갖는 이벤트는 저 배터리 경보(228) 형태의 시스템 이벤트일 수 있다. 예를 들면, 저 배터리 경보 이벤트(228)의 발생 시에, 시각적 통지 윈도(230)는 스크린(200)상에 표시되고, 장치(10)의 전원(30) (도 1)이 완전 충전 용량의 20%의 잔여 용량을 가진다는 것을 표시하는 시각적 통지 메시지(232)를 포함한다. 윈도(230)는 또한 사용자가 윈도(230)를 스크린(200)으로부터 제거하기 위해 선택할 수 있는 그래픽 버튼(234)을 포함한다. 그러므로, 이벤트(216)와는 달리, 장치(10)는 결정 입력을 요구하지 않는다.

이상적으로, 사용자는 윈도(230)에 의해 제공된 통지를 마음 속으로 처리하고 전원(30)을 재충전하기 위해 필요한 행위들을 취한다. 그러나, 장치(10)는 사용자가 바로 전원(30)의 재충전을 시작하는지에 상관없이 당분간은 작동할 것이다. 이런 맥락에서, 이벤트(228)의 맥락상 중요성은 이벤트(216)에 비교하여 일반적으로 낮은 것으로 간주될 수 있다. 그러므로, 이벤트(228)는 비언어적 오디오 아이템(226)과 비교하여 덜 특징적인 비언어적 오디오 아이템(236) (예를 들면, 더 낮은 피치, 더 조용한 음량, 더 짧은 재생 시간, 등등)을 그것과 함께 관련시켰을 수 있고, 그에 따라 이벤트(228)의 덜 중요한 맥락상 중요성을 나타내게 된다.

이벤트(228)가 초기에 낮은 맥락상 중요성을 갖는 것으로서 분류될 수 있기는 하지만, 이벤트(228)가 발생한 맥락이 시간이 지나면서 변할 수 있다는 것을 알아야 한다. 예를 들면, 통지(230)는 20%의 저 전력 문턱값에 기초한 첫번째 경보일 수 있다. 그러나, 사용자가 전원(30)을 다시 채우기 위한 조치를 취하지 않는다고 가정하면, 장치(10)는 계속해서 남은 전원(30)을 소모하고, 따라서 전원(30)을 추가로 고갈시킬 것이다. 따라서, 몇몇 실시예에서, 사용자 인터페이스(34)는 하나 이상의 낮은 문턱값들에서 추가 경보들을 공급하도록 구성될 수 있다. 예를 들면, 일 실시예에서, 사용자 인터페이스(34)는 전원(30)의 나머지 전하가 전체 충전 용량의 1%까지 고갈될 때 차순의 저전력 경보를 공급할 수 있다. 이런 맥락에서, 장치(10)가 전원(30)이 재충전 또는 교체가 없으면 불가피하게 완전히 고갈되는 경우 동작을 계속할 수는 없기 때문에 1% 경보는 높은 맥락상 중요성을 가지고 것으로 간주될 수 있다. 그러므로, 후자의 예는, (예를 들면, 똑같은 구어성 레벨의) 다중의 비언어적 아이템이 공통 이벤트와 관련되어, 초기 20% 경보 이벤트 동안 낮은 맥락상 중요성을 나타내는 비언어적 오디오 아이템이 재생될 수 있고, 다음의 1% 경보 이벤트 동안 높은 맥락상 중요성을 나타내는 또 다른 비언어적 오디오 아이템이 오디오 사용자 인터페이스(38)에 의해 재생될 수 있도록 하는 실시예를 보여준다.

추가적 실시예들에서, 이벤트들 (226) 또는 (230)의 맥락상 중요성은 미리 프로그래밍된 정보에 기초하여 결정될 수 있는데(예를 들면, 이벤트들이 높거나 낮은 맥락상 중요성 특징을 가지는 것으로서 프로그래밍될 수 있음), 이 정보는 장치(10)의 제조자 또는 오디오 사용자 인터페이스(38)의 프로그래머에 의해 확립되거나 또는 사용자 선호 설정(96)을 통해서 하는 것과 같이 사용자에 의해 구성되거나 변경될 수 있다(도 4). 다른 실시예들에서, 이벤트들 (226) 또는 (230)의 맥락상 중요성은 이전의 장치 거동 및/또는 사용자가 사용자 인터페이스 이벤트의 이전 발생(들) 동안 장치와 어떻게 상호 작용하는지에 기초하여 적응적으로 되거나 알 수 있다. 예를 들면, 일 실시예에서, 현재 이벤트(예를 들면, 226 또는 230)는, 동일 유형의 이벤트가 현재 발생에 바로 선행하는 특정 시 구간 내에 자주 발생한 것으로 결정되는 경우 높은 맥락상 중요성을 가지고 있는 것으로서 식별될 수 있거나, 또는 동일 유형의 이벤트가 현재 발생에 바로 선행하는 특정 시 구간 내에 희소하게 발생하거나 또는 발생하지 않은 경우 낮은 맥락상 중요성을 가지는 것으로서 식별될 수 있다.

도 13은 도 12에서 기술된 바와 같이, 맥락상 중요성에 기초하여 오디오 피드백을 변경하는 방법 240을 묘사한 흐름도를 제공한다. 예를 들면, 단계 242 에서 시작하여, 방법 240은 오디오 피드백을 요청하는 이벤트를 검출할 수 있다. 다음에, 단계 244에서, 이벤트의 맥락상 중요성이 결정된다. 예를 들면, 상술한 바와 같이, 이 단계는 몇몇 경우에 사용자측에서의 행위가 장치가 동작을 계속하는 데에 필요한지의 여부를 결정하는 것을 포함한다. 다음으로, 단계 246에서, 단계 244에서 결정된 대로 오디오 아이템이 이벤트의 맥락상 중요성에 기초하여 선택된다. 예를 들면, 이벤트가 낮은 맥락상 중요성을 가지고 있다면, 덜 특징적인 비언어적 톤(236)이 재생될 수 있고, 이벤트가 높은 맥락상 중요성을 가지고 있다면 더 특징적인 비언어적 톤(226)이 재생될 수 있다.

도 14-18까지 계속 살펴보면, 어떻게 오디오 피드백이 사용자가 장치(10)상에 표시된 아이템들의 리스트를 탐색하는 방식에 기초하여 변경될 수 있는지를 예시하는 실시예들이 본 발명의 양태들에 따라서 설명된다. 예를 들면, 첫째로 도 14를 참조하면, 사용자가 미디어 플레이어 애플리케이션(74)에서 곡들의 리스트에 어떻게 접근할 수 있는지를 묘사하는 스크린 이미지들이 설명된다. 스크린들(72, 200)은 도12에 도시된 그것들과 유사하고, 또한 미디어 플레이어 애플리케이션(74)의 개시 및 홈 스크린(72)으로부터 스크린(200)까지의 탐색을 묘사하는데, 스크린(200)은 재생 목록(204)의 리스트(202)를 표시한다.

그래픽 버튼을 선택함으로써(210), 사용자는 알파벳순으로 장치(10)상에 저장된 음악 파일들(곡들) (254)의 탐색가능 리스트(252)를 표시할 수 있는 스크린(250)까지 탐색해 갈 수 있다. 예를 들면, 도14에 나타난 바와 같이, 리스트(252)의 첫 곡은 참조 번호(256)에 의해 참조된다. 재생용의 특정 곡을 선택하기 위해, 사용자는 장치(10) (예를 들면, 터치스크린)의 입력 구조(14)를 이용하여 표시된 곡을 선택할 수 있다. 스크린(250)은 스크롤 기능을 제공하는 스크롤 바 요소(258)를 또한 포함할 수 있다. 그러므로, 음악 파일들(254)의 리스트(252)가 장치(10)의 표시 용량들을 초과하는 경우, 사용자는 리스트(252)의 나머지를 탐색하기 위해 스크롤 바 요소(258)와 인터페이싱할 수 있다. 여기서 참조 번호(260)에 의해 참조되는 재생용 특정 아이템의 선택 시에, 사용자는 스크린(264)까지 계속할 수 있다.

스크린(264)에 나타난 바와 같이, 선택된 음악 파일(260)에 관련한 정보가 표시된다. 예를 들면, 표시된 정보는 녹음한 아티스트의 이름, 선택 음악 파일(260)의 제목, 및 몇몇 실시예에서는 선택 음악 파일(260)이 관련되는 앨범을 포함할 수 있다. 스크린(264)은 또한 앨범 삽화(266)와 그래픽 버튼들(268, 270, 272)을 표시할 수 있다. 알 수 있는 것처럼, 그래픽 버튼(268)은 사용자가 선택된 음악 파일(260)의 재생을 중지하거나 중지 해제하도록 허용할 수 있다. 추가로, 현재 선택된 미디어 파일(260)이 재생 목록의 일부인 경우, 그래픽 버튼들(270, 272)은 재생 목록에서 이전 파일로 돌아가는 기능 또는 재생 목록에서 차순의 파일로 계속하는 기능을 나타낼 수 있다. 알 수 있는 바와 같이, 재생 목록이 무작위 모드 또는 셔플 모드에서 재생되는 경우에, 그래픽 버튼들(270 및 272)이 재생용 목록으로부터 무작위 파일을 선택하도록 기능할 수 있다. 스크린(264)은 또한 슬라이딩 바 요소(274)를 포함하는데, 이는 오디오 재생의 음량을 제어하기 위해 사용자에 의해 조작될 수 있다. 도 15-17에 대하여 이하에 논의된 리스트 탐색 예들을 위해, 사용자가 (그래픽 버튼 268을 선택하는 것에 의해) 선택된 음악 파일(260)의 재생을 중단하고, 스크린(264)상의 그래픽 버튼(262)을 선택함으로써 스크린(250)상의 리스트(252)로 돌아간다고 가정된다.

도 15-17를 이제 참조하면, 곡 리스트(252)와 같은 리스트를 탐색하는 속도에 기초하여 오디오 피드백이 어떻게 변경될 수 있는지를 나타내는 예들이 본 발명의 양태들에 따라서 설명된다. 예시된 예들에서, 리스트(252)의 각각의 곡 파일은, 초기 리스트 아이템(256)으로 시작하여, 제1 아이템(256)을 위한 L0, 두번째 아이템을 위한 L1 및 이와 같은 식으로 계속하여, 리스트 위치 참조 라벨을 부여 받는다. 여기서 개시된 기술이 리스트의 수평 탐색뿐만 아니라, 리스트의 수직 탐색에도 적용될 수 있다는 것이 이해되어야 한다.

도 15에 도시된 것처럼, 리스트(252)는 제1 속도(280)로 탐색된다. 제1 탐색 속도(280)는 상대적으로 느리고, 한 리스트 아이템으로부터 또 다른 리스트 아이템으로의 전이 사이에 충분한 시간을 허용하여 각각의 리스트 아이템들에게 순 구어성 오디오 피드백을 제공하게 할 수 있다. 예를 들면, 설명된 예에서, 사용자는 첫번째 리스트 아이템 L0으로부터 리스트를 스크롤 다운하고 리스트 아이템 L3에서 멈추는 식으로 리스트(252) 탐색하기를 시작할 수 있다. 이 행위 동안, 각각의 곡 제목과 녹음하는 아티스트의 이름이, 이하의 표1에 나타난 바와 같이, 각각의 곡들 L0, L1, L2, 및 L3에 대해 오디오 사용자 인터페이스(38)에 의해 말해질 수 있다:

본 개시된 기술들에 따라서, 오디오 사용자 인터페이스(38)는 탐색 속도(280)에서의 경미한 변화들에 적응하도록 구성될 수 있다. 예를 들면, 한 상황에서, 리스트 아이템들 사이의 전이 시간이 감소되어 두개의 오디오 아이템들 중 하나(예를 들면, 곡명 또는 음악가 이름)만을 말하는 데에 충분한 시간을 할당하게 되도록, 탐색 속도가 다소 증가할 수 있다. 일 실시예에서, 오디오 사용자 인터페이스(38)는 여전히 곡명 정보에 대하여 순 구어성 오디오 피드백을 제공할 수 있지만, 아티스트 이름에 관한 정보를 생략할 수 있다.

다음에, 도 16은 도 15의 탐색 속도(280)와 비교하여 주목할만하게 상승된 탐색 속도(282)가 순 구어성 오디오 피드백을 허용할 만큼 리스트 아이템들 사이의 충분한 전이 시간을 제공하지 않는 것을 보여주는 예를 도시한다. 예를 제공하기 위해, 탐색 속도는 초당 탐색되는 리스트 아이템의 수(예를 들면, 리스트 아이템들/초)에 기초하여 표현될 수 있다. 일례로서, 탐색 속도(282)는 초당 대략 2 리스트 아이템들일 수 있는 반면(또는 1/2초당 1 리스트 아이템), 도 15에 도시된 탐색 속도(280)는 초당 0.25 리스트 아이템(또는 매 4초당 1 리스트 아이템)과 같이 두드러지게 느릴 수 있다.

도 16의 본 예에서, 사용자는 탐색 속도(282)를 이용하여 첫번째 리스트 아이템 L0에서 리스트 아이템 L11으로 탐색할 수 있다. 속도(282)로 탐색하는 경우 각각의 리스트 아이템 간에서의 감소된 전이 시간을 보완하기 위해, 오디오 사용자 인터페이스(38)는, 일 실시예에서, 리스트 아이템이 알파벳순의 그룹 (예를 들면, "A", "B", 기타 등등으로 시작하는 곡명들) 내에서 첫번째 아이템이라면, 해당 리스트 아이템의 알파벳 순서에 대응하는 문자만을 말하고, 또한 각각의 다른 리스트 아이템에 대한 비언어적 톤을 제공함으로써 리스트 탐색과 관련된 오디오 피드백을 축소할 수 있다. 이 실시예는 표2에서 이하에 묘사된다.

덧붙여, 리스트 아이템 L8에 의해 보여진 것처럼, 오디오 사용자 인터페이스(38)는 리스트 아이템의 "신규성(newness)"에 기초하여 비언어적 톤들을 선택적으로 제공하기 위해 또한 구성될 수 있다. 예를 들면, 리스트 아이템 L8은 애플사에 의해 제공되는 iTunes®서비스와 같은 온라인 디지털 미디어 서비스로부터 최근에 구입된 노래를 나타낼 수 있다. 따라서, 곡 L8의 신규성을 강조하기 위해, 오디오 사용자 인터페이스(38)는, 더 새로운 곡 L8이 탐색하여 도달될 때, 더 오래된 내용 (예를 들어, L6, L7 등등)을 위해 재생된 비언어적 톤들과 비교하여 더 특징적인 (예를 들면, 더 높게 피치된 삑 소리) 비언어적 톤을 재생할 수 있다. 알 수 있는 바와 같이, 신규성 문턱값은 장치(10)상의 사용자 선호들(96)을 통해 구성될 수 있다. 예를 들면, 사용자는 지난 3 일새 구입하거나 다운로드된 콘텐츠를 새로운 콘텐츠인 것으로서 식별하도록 장치(10)를 구성할 수 있다.

또 다른 실시예에서, 더 새로운 콘텐츠의 식별은 신규성의 다중 계층(tier)을 정의하는 것을 포함할 수 있다. 예를 들면, 장치(10)상의 가장 새로운 콘텐츠를 식별하는데 3 일 문턱값을 사용하는 것뿐만 아니라, 두번째 문턱값 (예를 들면, 14 일)이 여전히 상대적으로 최근인 콘텐츠를 검출하기 위해 설정될 수 있다. 그와 같은 실시예들에서, 다양한 비언어적 톤들이 가장 새로운 아이템들과 최근의 아이템들로서 식별되는 리스트 아이템들에 사용될 수 있는데, 최근 아이템들에 대한 비언어적 톤은 가장 새로운 아이템들과 관련된 비언어적 톤보다 덜 특징적이고, 그렇지만 최근 및 가장 새로운 아이템에 대한 비언어적 톤들 모두는 새롭거나 최근의 것으로서 식별되지 않은 아이템들(예로, 14일보다 더 오래된 아이템들)에 대한 비언어적 톤과 비교하여 실질적으로 더 특징적이 된다. 사실상, 본 분야의 기술자는 (예를 들면, 대응하는 문턱값들에 의해 정의된 임의 수의 계층들에 기초하여) 장치(10)상에 저장된 콘텐츠의 연령을 구별하기 위한 임의 수의 비언어적 톤들이 본 기술의 다양한 실시예들에서 이용될 수 있다는 것을 알 것이다.

도 17에 계속하여, 도 16의 속도(282)와 비교하여 심지어 더 큰 속도(284)에서 리스트(252)를 탐색하는 것을 기술하는 추가적 예가 제공된다. 일례로서, 탐색 속도(284)는 대략 초당 4 리스트 아이템일 수 있다. 본 예에서, 사용자는 탐색 속도(284)를 이용하여 첫번째 리스트 아이템 L0 으로부터 리스트 아이템 L18까지 탐색할 수 있다. 속도(284)로 탐색하는 경우 각각의 리스트 아이템 사이에 더욱 추가로 감소된 전이 시간을 보완하기 위해, 오디오 사용자 인터페이스(38)는 오디오 피드백이 단지 리스트 아이템들 중의 일부를 위해 제공되도록 추가로 오디오 피드백을 축소할 수 있다. 예를 들면, 이하의 표 3 에 나타난 바와 같이, 오디오 사용자 인터페이스(38)는, 일 실시예에서, 각각의 알파벳 그룹(예를 들면, "A", "B", 기타 등등 시작하는 노래 곡명들) 내에서의 첫번째 리스트 아이템들을 위한 리스트 아이템의 알파벳 순서에 대응하는 문자를 말하고 또한 모든 세번째마다의 리스트 아이템에 대해서만(예를 들면, 아이템 L2, L5, L8, 그리고 L17) 비언어적 톤을 재생함으로써 리스트 탐색과 관련된 오디오 피드백을 축소할 수 있다. 비언어적 톤의 재생의 자격을 얻고 또한 알파벳 그룹에서 또한 첫번째 아이템인 리스트 아이템들에 대해, 알파벳 문자는 비언어적 톤(예를 들면, 아이템 L11과 L14) 대신에 말해질 수 있다.

알 수 있는 바와 같이, 다른 실시예들에서, 비언어적 톤들이 제공되는 빈도는 리스트 탐색 속도가 계속 증가함에 따라 추가로 감소할 수 있다(예를 들면, 매 네번째, 다섯번째, 또는 여섯번째 아이템). 또한, 리스트(252)의 탐색이 일정 속도로 반드시 발생하지 않을 수 있다는 것을 이해해야 한다. 따라서, 오디오 사용자 인터페이스(38)는 오디오 피드백의 구어성을 그에 따라 조절할 수 있다. 예를 들면, 사용자가 초기에 (예를 들면, 속도(280)로) 매우 천천히 리스트(252)를 탐색하고, 점차로 더 빠른 속도까지 (예를 들면, 속도(284)로) 증가하면, 오디오 사용자 인터페이스(38)는 다중 데이터 세그먼트들에 대한 순 구어성 오디오 피드백을 제공하고 (예를 들면, 곡명과 아티스트 이름), 구어성을 점차로 감소시켜서 곡 명만을 제공하고 또한 표 3에 도시된 것과 유사하게 축소된 구어성 방식에 결국 도달한다. 사용자가 다음으로 점차로 탐색 속도를 감소시키면, 이후 오디오 피드백은 순 구어성 모드를 향하여 점차로 되돌아가며 진전할 수 있다.

더욱이, 본 기술이 사용자 그래픽 인터페이스와 관련하여 설명되었지만, 특정 실시예들이 오디오 사용자 인터페이스만을 포함할 수 있다는 것이 이해되어야 한다. 그와 같은 실시예들에서, 상기 기술된 오디오 피드백 기술은 사용자가 대응하는 시각 인터페이스 없이(예를 들어, 스크롤 휠을 사용하여) 아이템들의 리스트를 통해 탐색함에 따라 적용될 수 있다. 앞서 언급한 바와 같이, 디스플레이(22) 및 그에 따라 사용자 그래픽 인터페이스가 결여된 장치(10)의 실시예는 애플사로부터 얻을 수 있는 iPod® 셔플 모델일 수 있다.

리스트 탐색 동안 오디오 피드백을 변경하기 위한 여러 기술은, 도 15-17 및 표 1-3에서 보여진 실시예들과 관련하여 기술된 것처럼, 일반적으로 방법 290에 의해 요약되고, 도18에 도시된 흐름도에 의해 묘사된다. 방법 290은 단계 292에서 시작하는데 이 단계에서 리스트 탐색 이벤트가 검출된다. 예를 들면, 리스트 탐색 이벤트는 한 리스트 아이템 (예를 들면, L0에서)으로부터 차순의 리스트 아이템 (예를 들면, L1)으로의 전이를 포함할 수 있다. 단계 294에서, 현재 리스트 아이템이 식별된다. 그 후에, 결정 블록(296)에서, 사용자의 탐색 속도가 순 구어성 오디오 피드백을 허용하는지에 대한 결정이 이뤄진다. 예를 들어, 탐색 속도는 둘 이상의 바로 선행하는 리스트 아이템들 (예를 들면, 또는 사용자가 리스트를 위쪽으로 탐색하고 있다면 연속하는 아이템들) 사이의 전이가 발생하는 속도들의 평균을 계산함으로써, 일 실시예에서 결정될 수 있다. 탐색 속도가 순 구어성 오디오 피드백을 허용한다고 결정되면, 방법 290은 단계 298로 계속하고, 그에 의해서 현재 선택된 리스트 아이템과 관련된 하나 이상의 순 구어성 오디오 아이템들이 재생된다.

결정 블록(296)에서의 탐색 속도가 순 구어성 오디오 피드백을 허용하지 않으면, 방법 290은 결정 블록(300)까지 계속하고, 여기서 현재 리스트 아이템이 알파벳 그룹의 첫번째 아이템인지에 대한 결정이 이뤄지고, 만일 그렇다면 알파벳 그룹의 해당 문자가 오디오 사용자 인터페이스(38)에 의해 말해지고 오디오 피드백으로서 제공된다(단계 302). 현재 리스트 아이템이 알파벳 그룹의 첫번째 아이템이 아니라면, 방법 290은 결정 블록(304)으로 진행하고, 그에 의해 현재 리스트 아이템의 신규성이 결정된다. 현재 리스트 아이템이 새로운 콘텐츠인 것으로서 식별되면, 현재 리스트 아이템의 신규성을 나타내는 특징적 비언어적 오디오 아이템이 단계 306 에 보여진 것처럼, 재생된다. 현재 리스트 아이템이 새로운 콘텐츠인 것으로서 식별되지 않으면 단계 308에 보여진 것처럼, 덜 특징적인 비언어적 오디오 아이템이 그 대신에 재생된다.

도 19-21은 일 실시예에 따라서, 어떻게 오디오 피드백 옵션이 장치(10)상에 구성될 수 있는지를 보여주는 다양한 스크린들 이미지들을 묘사한다. 예를 들면, 먼저 도 19의 스크린(310)을 참조하면, 운영체제를 위한 GUI (36)의 메인 "홈" 스크린(312)이 예시된다. 예를 들어, 운영 체제는 애플사로부터의 Mac OS® 운영 체제버전일 수 있다. 도 2에서 논의한 대로, GUI (36)는 다양한 아이콘들(56)을 포함하는 독(58)을 제공할 수 있다. 아이콘(316)의 선택은 그래픽 윈도(318)가 표시되도록 야기할 수 있다. 도면에 나타낸 바와 같이, 그래픽 윈도(318)는 장치(10)를 위해 시스템 선호들의 다양한 면들의 구성을 관련시킬 수 있는 추가적 아이콘들(56)을 포함한다. 특히, 그래픽 아이콘(320)은 오디오 사용자 인터페이스(38)를 구성하기 위한 기능을 나타낼 수 있다.

도 20을 참조하면, 아이콘(320)의 선택은 그래픽 구성 윈도(322)가 표시되도록 야기할 수 있다. 초기에, 구성 윈도(322)는 그래픽 스위치들(324, 326, 328, 330)을 포함한다. 스위치(324)(현재 "온(ON)" 위치에 있음)는, 오디오 사용자 인터페이스(38)를 인에이블하거나 디스에이블할 수 있는 한편, 스위치들(326, 328, 330)은 오디오 사용자 인터페이스(38)가 다양한 모드들에서 동작하도록 허용하기 위해 토글링될 수 있다. 예를 들면, 현재 "온" 위치에 있는 스위치(326)는 일정 순 구어성 모드가 현재 인에이블되고, 또한 오디오 피드백을 축소하고/진전시키기 위한(스위치328) 그리고 비언어적 오디오 피드백 만을 이용하기 위한(스위치330) 추가적 모드들이 둘 다 현재 디스에이블되었다는 것을 나타낸다.

도 21은 사용자에 의한 다양한 구성 단계들의 수행에 뒤이은 구성 윈도(322)를 묘사한다. 예를 들면, 도면에 나타낸 바와 같이, 스위치(326)는 "오프" 위치로 토글링되어 일정 순 구어성 모드를 디스에이블하고, 스위치(328)는 "온"으로 토글링되어 적응적 축소/진전 모드가 인에이블되었다는 것을 나타낸다. 축소하거나 진전하는 모드를 인에이블할 시에, 한 세트의 추가 구성 파라미터들(332)이 사용자에 의해 표시되고 구성된다. 예를 들면, 사용자는 바라는 위치들에 그래픽 스위치들(334, 338, 340, 342, 344, 346, 350)을 토글링함으로써 각각의 구성 파라미터들(332)을 인에이블하거나 디스에이블할 수 있다. 사용자는 도 8 및 도 9를 참조하여 상술한 바와 같이, 스텝업 시간을 특정하기 위해 또한 선택 필드(336)를 이용할 수 있다. 덧붙여, 사용자는 도 15-17을 참조하여 상술한 바와 같이, 리스트 탐색 동안 더 새롭고 더 오래된 콘텐츠 간에 구별하기 위한 문턱값을 특정하기 위해 선택 필드(348)를 이용할 수 있다.

요약하면, 앞서 기술된 실시예들은 전자 장치 [예를 들면, 장치(10)]가 사용자 입력들에 응답하여 및/또는 외부 자극들에 응답하여 오디오 피드백의 진전과 축소를 할 수 있는 지능형 적응적 기술을 제공한다. 예를 들면, 사용자 행위들 및/또는 사용자 정의 선호들 [예를 들면, 선호들(96)]에 기초하여 오디오 피드백을 축소하고 및/또는 진전시키기 위한 특정 행위들은 동적이고 적응적일 수 있다. 예를 들어, 앞의 도 9에 나타난 바와 같이, 재생 종결 이벤트의 형태로의 사용자 행위 검출은 장치(10)가 축소 레이트를 증가시키도록 야기할 수 있다 (예를 들면, 사용자가 종결된 이벤트에 대응하는 오디오 피드백에 관심이 없다는 표시로 인해 구어성을 더 빨리 축소시킨다). 덧붙여, 낮은 전력 이벤트들, 또는 네트워크 접속들의 검출(도 12)과 같이, 사용자 입력들에 의해 초래되지 않은 외부 자극들의 검출은 (예를 들면, 맥락상 중요성에 기초해) 장치(10)가 오디오 피드백의 구어성을 증가시키거나 감소시키도록 야기할 수 있다. 사실상, 현재 설명된 기술들은 오디오 사용자 인터페이스에 의해 제공되는 오디오 피드백의 구어성을 조절하기 위한 강건하고 적응적인 시스템을 제공한다.

또한, 이해되는 바와 같이, 위에서 기술되고 전자 장치의 오디오 사용자 인터페이스에 의해 제공된 적응적으로 변화하는 오디오 피드백과 관련된 다양한 기법은 예로서만 여기에서 제공된다. 따라서, 본 개시는 상기 제공된 예로만 한정되는 것으로 해석되어서는 안 된다고 이해되어야 한다. 사실상, 상기에 제시된 오디오 피드백 기술의 수많은 변경들이 존재할 수 있다. 또한, 상술한 기술은 임의의 적절한 방식으로 구현될 수 있다는 점을 알아야 한다. 현재 개시된 기술들의 다양한 면들을 구현시키기 위해 집합적으로 구성된, 오디오 사용자 인터페이스(38) 및 오디오 피드백 선택 로직(86)은 하드웨어 (예를 들면, 적당히 구성된 회로), 소프트웨어를 이용하여(예를 들면, 하나 이상의 유형의 컴퓨터 판독가능 매체상에 저장된 실행가능 코드를 포함하는 컴퓨터 프로그램을 통해), 또는 하드웨어와 소프트웨어 양쪽 요소들의 조합을 사용하는 것을 통해 구현될 수 있다.

상술한 특정 실시예들이 예로서 도시되었지만, 이들 실시예들은 각종 수정 및 대안적 형태를 받아들일 수 있다는 점을 알아야 한다. 또한 특허청구범위는 개시된 특정 형태들에만 한정하고자 하는 것이 아니라, 본 개시의 사상 및 범주 내에 드는 모든 수정, 균등물, 및 대안들을 포괄하는 것으로 추가로 이해되어야 한다.

Claims

전자 장치상의 프로세서에 의해 수행되는 방법으로서,
제1 시간에 상기 전자 장치상에서 오디오 피드백을 요청하는 사용자 인터페이스 이벤트의 발생을 검출하는 단계;
상기 사용자 인터페이스 이벤트와 연관된 복수의 오디오 아이템을 식별하는 단계 - 상기 복수의 오디오 아이템 각각은 서로 다른 구어성(verbosity) 레벨을 가짐 -;
적어도, 상기 사용자 인터페이스 이벤트가 사전에 상기 제1 시간 전의 특정 시구간 내에 발생했는지에 기초하여 결정된 제1의 바라는(desired) 구어성 레벨에 대응하는 제1 오디오 아이템을 상기 복수의 오디오 아이템으로부터 선택하는 단계; 및
오디오 출력 장치를 사용하여 상기 전자 장치 상에서 상기 선택된 제1 오디오 아이템을 재생함으로써 상기 오디오 피드백을 제공하는 단계
를 포함하는 방법.
제1항에 있어서, 상기 제1 오디오 아이템을 선택하는 단계는,
상기 사용자 인터페이스 이벤트가 사전에 상기 제1 시간 전의 상기 특정 시구간 내에 발생하지 않은 경우에는, 상기 복수의 오디오 아이템으로부터 최상위 구어성 레벨을 갖는 오디오 아이템을 선택하는 단계; 및
상기 사용자 인터페이스 이벤트가 사전에 상기 제1 시간 전의 상기 특정 시구간 내에 발생한 경우에는, 상기 사용자 인터페이스 이벤트의 이전 발생(previous occurrence) 동안 상기 복수의 오디오 아이템으로부터 선택된 오디오 아이템의 구어성 레벨을 결정하며, 이전에 선택된 상기 오디오 아이템에 비해 적어도 한 단계만큼 말 수가 적은(less verbose) 오디오 아이템을 상기 복수의 오디오 아이템으로부터 선택하는 단계
를 포함하는 방법.
제2항에 있어서,
제2 시간에 상기 전자 장치상에서 상기 사용자 인터페이스 이벤트의 후속 발생을 검출하는 단계;
상기 제1 시간과 상기 제2 시간 사이의 지속시간에 기초하여 결정된 제2의 바라는 구어성 레벨에 대응하는 제2 오디오 아이템을 상기 복수의 오디오 아이템으로부터 선택하는 단계; 및
상기 오디오 출력 장치를 사용하여 상기 전자 장치 상에서 상기 선택된 제2 오디오 아이템을 재생하는 단계
를 포함하는 방법.
제3항에 있어서, 상기 제2 오디오 아이템을 선택하는 단계는,
상기 제1 시간과 상기 제2 시간 사이의 지속시간(duration)이 상기 특정 시구간(time interval)보다 짧거나 같은(shorter than or equal to) 경우에는, 상기 제1 오디오 아이템에 비하여 적어도 한 단계만큼 말 수가 적은 오디오 아이템을 상기 복수의 오디오 아이템으로부터 선택하는 단계; 및
상기 제1 시간과 상기 제2 시간 사이의 지속시간이 상기 특정 시구간보다 긴(longer) 경우에는, 상기 제1 오디오 아이템에 비하여 적어도 한 단계만큼 말 수가 많은 오디오 아이템을 상기 복수의 오디오 아이템으로부터 선택하는 단계
를 포함하는 방법.
제4항에 있어서, 상기 제1 오디오 아이템에 비하여 적어도 한 단계만큼 말 수가 많은 오디오 아이템을 선택하는 단계는 상기 제1 오디오 아이템의 구어성 레벨에 상관없이 상기 복수의 오디오 아이템 내에서 최상위 구어성 레벨을 갖는 오디오 아이템을 선택하는 단계를 포함하는 방법.
제2항에 있어서, 상기 제1 오디오 아이템을 선택하는 단계는,
재생 종결 이벤트가 상기 사용자 인터페이스 이벤트의 이전 발생 동안 검출되었는지를 결정하는 단계; 및
상기 재생 종결 이벤트가 상기 이전 발생 동안 검출된 경우에는, 이전에 선택된 상기 오디오 아이템의 구어성 레벨에 상관없이 상기 복수의 오디오 아이템 중에서 비언어적(non-verbal) 오디오 아이템을 선택하는 단계
를 포함하는 방법.
삭제
제6항에 있어서, 상기 재생 종결 이벤트는 이전에 선택된 상기 오디오 아이템의 재생을 조기에 종결시킨 몸짓(gesture) 또는 사용자 입력을 포함하는 방법.
제6항에 있어서,
재생 종결 이벤트가 상기 사용자 인터페이스 이벤트의 이전 발생 동안 검출되지 않은 경우에는, 그래픽 사용자 인터페이스를 이용하여, 상기 선택된 제1 오디오 아이템의 재생과 동시에 제1 시각적 통지를 표시하는 단계; 및
재생 종결 이벤트가 상기 사용자 인터페이스 이벤트의 이전 발생 동안 검출된 경우에는, 그래픽 사용자 인터페이스를 이용하여, 상기 선택된 제1 오디오 아이템의 재생과 동시에 제2 시각적 통지를 표시하는 단계
를 포함하며,
상기 제2 시각적 통지는 상기 제1 시각적 통지보다 더 적은 수의 단어를 포함하는, 방법.
전자 장치상의 프로세서에 의해 수행되는 방법으로서,
상기 전자 장치상에서 오디오 피드백을 요청하는 사용자 인터페이스 이벤트의 발생을 검출하는 단계;
상기 사용자 인터페이스 이벤트와 연관된 복수의 오디오 아이템을 식별하는 단계;
상기 사용자 인터페이스 이벤트의 맥락상 중요성(contextual importance)에 기초하여 상기 복수의 오디오 아이템으로부터 오디오 아이템을 선택하는 단계; 및
오디오 출력 장치를 사용하여 상기 전자 장치 상에서 상기 선택된 오디오 아이템을 재생함으로써 상기 오디오 피드백을 제공하는 단계
를 포함하는 방법.
제10항에 있어서, 상기 복수의 오디오 아이템은 적어도 제1 오디오 아이템 및 제2 오디오 아이템을 포함하며, 상기 제1 오디오 아이템 및 제2 오디오 아이템은 동일한 구어성 레벨을 갖는 방법.
제11항에 있어서, 상기 오디오 아이템을 선택하는 단계는,
상기 맥락상 중요성이 제1 조건을 충족하는 경우, 상기 제1 오디오 아이템을 선택하는 단계; 및
상기 맥락상 중요성이 상기 제1 조건을 충족하지 않는 경우, 상기 제2 오디오 아이템을 선택하는 단계를 포함하는, 방법.
제12항에 있어서, 상기 사용자 인터페이스 이벤트가 상기 전자 장치의 사용자로부터의 응답을 요청하는 경우에 상기 사용자 인터페이스 이벤트의 상기 맥락상 중요성이 상기 제1 조건을 충족하는, 방법.
제12항에 있어서, 상기 제1 오디오 아이템 및 상기 제2 오디오 아이템 각각은 비언어적 오디오 아이템들을 포함하는 방법.
제12항에 있어서, 상기 제1 오디오 아이템은, 상기 제2 오디오 아이템의 경우에 비해, 청각적으로 더 특징적(distinct)인 피치, 음량, 재생 시간 또는 이것들의 조합을 갖는 방법.
제10항에 있어서, 상기 사용자 인터페이스 이벤트의 맥락상 중요성은 상기 장치 상에 저장된 정보에 기초하여 결정되며, 상기 장치 상에 저장된 정보는 미리 프로그래밍된 정보, 또는 사용자 선호 설정들의 세트를 통해 구성된 사용자 특정 정보, 또는 이것들의 조합 중 하나를 포함하는 방법.
제10항에 있어서, 상기 사용자 인터페이스 이벤트의 맥락상 중요성은, 동일 유형의 사용자 인터페이스 이벤트가 상기 사용자 인터페이스 이벤트의 발생 직전의 기간 내에 발생한 빈도에 기초하여 결정되는 방법.
전자 장치로서,
복수의 오디오 아이템을 저장하도록 구성된 적어도 하나의 저장 장치; 및
오디오 사용자 인터페이스를 포함하는 사용자 인터페이스
를 포함하고,
상기 오디오 사용자 인터페이스는,
오디오 피드백을 요청하는 사용자 인터페이스 이벤트의 발생을 검출하고,
상기 사용자 인터페이스 이벤트와 연관되며 변화하는 구어성 레벨들을 갖는 오디오 아이템들의 세트를 식별하고,
상기 사용자 인터페이스 이벤트와 연관된 통계 데이터에 기초하여 바라는 구어성 레벨을 결정하고,
상기 오디오 아이템들의 세트로부터, 상기 바라는 구어성 레벨에 대응하는 구어성 레벨을 갖는 오디오 아이템을 선택하며,
상기 선택된 오디오 아이템의 재생을 개시하도록
구성된 오디오 피드백 선택 로직을 포함하는 전자 장치.
제18항에 있어서, 상기 사용자 인터페이스 이벤트와 연관된 통계 데이터가 상기 적어도 하나의 저장 장치에 저장되는 전자 장치.
제19항에 있어서, 상기 사용자 인터페이스 이벤트와 연관된 상기 통계 데이터는 상기 사용자 인터페이스 이벤트의 이전 발생들에 관한 데이터를 포함하며, 상기 바라는 구어성 레벨의 결정은, 적어도, 가장 최근의 상기 사용자 인터페이스 이벤트 발생(the most recent previous occurrence of the user interface event) 동안 선택된 오디오 아이템의 구어성 레벨에 기초하는 전자 장치.
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제