KR102237416B1 - 전력 및 감지에 기초한 분산 음성 입력 처리 - Google Patents

전력 및 감지에 기초한 분산 음성 입력 처리 Download PDF

Info

Publication number
KR102237416B1
KR102237416B1 KR1020177001088A KR20177001088A KR102237416B1 KR 102237416 B1 KR102237416 B1 KR 102237416B1 KR 1020177001088 A KR1020177001088 A KR 1020177001088A KR 20177001088 A KR20177001088 A KR 20177001088A KR 102237416 B1 KR102237416 B1 KR 102237416B1
Authority
KR
South Korea
Prior art keywords
audio
auxiliary device
power
activity level
audio input
Prior art date
Application number
KR1020177001088A
Other languages
English (en)
Other versions
KR20170020862A (ko
Inventor
글렌 제이. 앤더슨
Original Assignee
인텔 코포레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 인텔 코포레이션 filed Critical 인텔 코포레이션
Publication of KR20170020862A publication Critical patent/KR20170020862A/ko
Application granted granted Critical
Publication of KR102237416B1 publication Critical patent/KR102237416B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/163—Wearable computers, e.g. on a belt
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26—Power supply means, e.g. regulation thereof
    • G06F1/32—Means for saving power
    • G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3206—Monitoring of events, devices or parameters that trigger a change in power modality
    • G06F1/3209—Monitoring remote activity, e.g. over telephone lines or network connections
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26—Power supply means, e.g. regulation thereof
    • G06F1/32—Means for saving power
    • G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3206—Monitoring of events, devices or parameters that trigger a change in power modality
    • G06F1/3215—Monitoring of peripheral devices
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26—Power supply means, e.g. regulation thereof
    • G06F1/32—Means for saving power
    • G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3234—Power saving characterised by the action undertaken
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
    • G10L25/60—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination for measuring the quality of voice signals

Abstract

분산 오디오 처리 시스템에서 오디오의 처리를 조정하는 기법들이 설명된다. 전력 우선 컴퓨팅 디바이스는 네트워크 내의 전력 우선 디바이스 및 보조 컴퓨팅 디바이스들에 의한 오디오 신호들의 캡처 및 처리를 조정하는 오디오 처리 조정기를 포함한다. 네트워크는 개인 영역 네트워크일 수 있다. 오디오 처리 조정기는 전력 우선 디바이스가 오디오를 캡처하거나 처리하기에 적절하지 않다는 결정에 기초하여 보조 디바이스들을 웨이크하여 오디오를 캡처 또는 처리할 수 있다.

Description

전력 및 감지에 기초한 분산 음성 입력 처리{DISTRIBUTED VOICE INPUT PROCESSING BASED ON POWER AND SENSING}
현대의 의류 및 기타 착용 가능한 액세서리는 컴퓨팅 또는 기타 진보된 전자 기술을 통합할 수 있다. 이러한 컴퓨팅 및/또는 진보된 전자 기술은 다양한 기능적 이유로 통합될 수 있거나 순전히 미적 이유로 인해 통합될 수 있다. 이러한 의류 및 기타 착용 가능한 액세서리는 일반적으로 "웨어러블 기술" 또는 "웨어러블 컴퓨팅 디바이스"라고 한다.
이해할 수 있는 바와 같이, 웨어러블 기술에 대한 전력 소비가 주요 관심사이다. 따라서, 일부 웨어러블 기술은 에너지 획득 기능을 포함한다. 예를 들어, 전기 전자 디바이스, 태양 전지 디바이스, 운동 디바이스 등이 에너지를 획득하고 전자 컴포넌트에 전력을 공급하거나 웨어러블 기술 내에 포함된 전원을 충전하는 데 사용될 수 있다.
다양한 요인으로 인해, 에너지 획득 디바이스와 함께 사용하기 적합한 웨어러블 기술의 유형들이 제한될 수 있다. 예를 들어, 신발은 걷기와 달리기에 관련된 힘 때문에 에너지 획득 디바이스를 통합하는 최적의 착용 가능 품목이다. 그러나, 신발은 특정 전자 기술에 대해 최적의 위치가 아닐 수도 있다. 예를 들어, 신발의 통상적인 사용은 오디오 캡처 또는 처리 기술과 간섭을 일으킬 수 있다.
따라서, 원하는 특징을 지지하고 동일한 웨어러블 디바이스에 에너지 획득을 제공하기 위해 특정 전자 기술을 통합하는 것이 문제가 될 수 있다. 상기와 관련하여, 본 개시가 제공된다.
도 1은 오디오 처리 시스템의 일 실시예를 도시한다.
도 2 및 도 3은 도 1의 오디오 처리 시스템의 부분들의 예들을 도시한다.
도 4 및 도 5는 실시예들에 따른 논리 흐름들의 예들을 도시한다.
도 6은 일 실시예에 따른 스토리지 매체를 도시한다.
도 7은 일 실시예에 따른 처리 아키텍처를 도시한다.
다양한 실시예들은 일반적으로 시스템 내의 하나의 디바이스가 전력 우선 디바이스로 지정되는 시스템에 관한 것이다. 이 시스템은 개인 영역 네트워크(PAN)와 같은 네트워크로 조직된 다수의 디바이스로 구성될 수 있다. 일반적으로, 전력 우선 디바이스는 오디오 입력(예를 들어, 오디오 신호, 음성 명령 등)을 청취한다. 오디오 입력을 수신하거나 검출하면, 전력 우선 디바이스는 (i) 스스로 오디오를 처리하거나 (ii) 시스템 내의 또 다른 디바이스에게 오디오를 처리하도록 지시할 수 있다. 예를 들어, 전력 우선 디바이스는, 오디오 신호를 검출하면, 오디오 신호를 캡처하고 보조 디바이스를 웨이크하여 오디오를 또한 캡처할 수 있다. 그런 다음, 전력 우선 디바이스에 의해 캡처된 오디오의 품질에 따라, 전력 우선 디바이스는 오디오를 처리할 수 있거나 보조 디바이스에게 오디오를 처리하도록 지시할 수 있다.
이것은 본 개시의 일례이며, 다른 예들이 본 명세서에 기술되어 있음을 이해해야 한다. 따라서, 상기 일반적인 설명은 한정하려는 의도는 아니다.
이제 도면들을 참조하며, 도면들에서는 전체에 걸쳐 동일한 참조 번호가 동일한 컴포넌트를 지칭하는 데 사용된다. 이하의 설명에서는, 설명의 목적을 위해, 다수의 특정 세부 사항이 철저한 이해를 제공하기 위해 설명된다. 그러나, 신규한 실시예는 이러한 특정 세부 사항 없이도 실시될 수 있음이 명백할 수 있다. 다른 예들에서, 잘 알려진 구조들 및 디바이스들은 그 설명을 용이하게 하기 위해 블록도 형태로 도시된다. 본 발명은 청구항들의 범위 내에 있는 모든 수정, 등가물 및 대안을 포함하는 것이다.
도 1은 전력 우선 컴퓨팅 디바이스(100) 및 다수의 보조 컴퓨팅 디바이스들(200-a)을 통합하는 오디오 처리 시스템(1000)의 실시예의 블록도이고, 여기서 a는 양의 정수이다. 도시된 바와 같이, 2개의 보조 컴퓨팅 디바이스들(200-1 및 200-2)이 도시되어 있다. 보조 컴퓨팅 디바이스들(200-a)의 수는 이해를 용이하게 하기 위한 양으로 도시되어 있고 한정하려는 의도는 아니라는 것을 이해해야 한다. 특히, 시스템(1000)은 도시된 것보다 더 많은 또는 더 적은 보조 컴퓨팅 디바이스로 구현될 수 있다. 또한, 전력 우선 컴퓨팅 디바이스(100)는 보조 디바이스들(200-1 및 200-2)과 상이한 것으로 도시되었지만(예를 들어, 적어도 하나의 상이한 컴포넌트를 포함함), 일부 예들에서, 디바이스들(100, 200-1, 및 200-2)은 동일할 수 있다. 이러한 예들에서는, 아래에 더 상세하게 설명되는 바와 같이, 시스템 내의 디바이스들 중 하나는 "전력 우선 컴퓨팅 디바이스"로 선택될 수 있거나 그러한 역할을 맡을 수 있다. 본 명세서에 사용된, "전력 우선 컴퓨팅 디바이스"는 본 명세서에 기술된 바와 같이 오디오 처리를 조정하는 디바이스를 의미한다.
일반적으로, 전력 우선 컴퓨팅 디바이스(100)는 오디오 신호를 검출하고 시스템(1000) 내의 오디오 신호의 처리를 조정하도록 구성된다. 특히, 전력 우선 컴퓨팅 디바이스(100)는 보조 컴퓨팅 디바이스들(200-1, 200-2) 사이의 전력 소비가 최소화되도록 오디오 신호의 처리를 조정하도록 구성된다. 특히, 보조 디바이스들(200-1 및 200-2)의 오디오 캡처 컴포넌트들 또는 기능들이 비활성인 동안, 전력 우선 컴퓨팅 디바이스(100)의 오디오 캡처 컴포넌들 또는 기능들은 활성일 수 있다. 오디오 신호(400)를 검출하면, 전력 우선 컴퓨팅 디바이스(100)는 오디오 신호(400)를 처리하기 위해 보조 디바이스들(200-1 및 200-2) 중 하나 이상을 "웨이크업(wake up)"할 수 있다.
다양한 실시예들에서, 전력 우선 컴퓨팅 디바이스(100)는 프로세서 컴포넌트(110), 스토리지(120), 오디오 입력 디바이스(130), 전원(140), 에너지 획득 디바이스(150), 인터페이스(160), 및 센서들(170) 중 하나 이상을 포함한다. 스토리지(120)는 제어 루틴(121), 오디오 입력(122), 센서 판독(123), 컨텍스트 특성(124), 보조 디바이스 리스트(125), 보조 디바이스 명령들(126) 및 처리된 오디오(127) 중 하나 이상을 저장한다.
다양한 실시예들에서, 보조 컴퓨팅 디바이스들(200-1 및 200-2) 각각은 프로세서 컴포넌트(210), 스토리지(220), 오디오 입력 디바이스(230), 전원(240) 및 인터페이스(260) 중 하나 이상을 포함한다. 스토리지들(220) 각각은 제어 루틴(221), 오디오 입력(222), 처리된 오디오(223) 및 보조 디바이스 명령들(126) 중 하나 이상을 저장한다.
도시된 바와 같이, 전력 우선 컴퓨팅 디바이스(100) 및 보조 컴퓨팅 디바이스들(200-1, 200-2)은 네트워크(300)를 통해 동작 가능하게 연결된다. 특히, 컴퓨팅 디바이스들(100, 200-1 및 200-2)은 네트워크(300)를 통해 정보(예를 들어, 웨이크업 정보, 오디오 처리 명령들 등)를 전달하는 신호들을 교환할 수 있다. 컴퓨팅 디바이스들(100, 200-1, 200-2)은 네트워크(300)를 통해 오디오 처리와는 전혀 무관한 다른 데이터를 교환할 수 있다. 컴퓨팅 디바이스들(100, 200-1 및 200-2)은 오디오 처리 정보를 포함하는 신호들을, 네트워크(300)를 통해 서로 및 다른 컴퓨팅 디바이스들(도시되지 않음)과 교환할 수 있다.
다양한 실시예들에서, 네트워크(300)는 단일 건물 또는 다른 비교적 제한된 영역 내에서 연장되는 것으로 제한될 수 있는 단일 네트워크, 상당한 거리를 연장할 수 있는 연결된 네트워크들의 조합, 및/또는 인터넷을 포함할 수 있다. 따라서, 네트워크(300)는 전기적 및/또는 광학적 도전성 케이블링을 이용하는 유선 기술, 및 적외선, 무선 주파수 또는 다른 형태의 무선 전송을 이용하는 무선 기술을 포함하는(이들에 한정되지 않음), 신호들을 교환할 수 있는 다양한 통신 기술들 중 임의의 것(또는 그 조합)에 기초할 수 있다. 또한, 네트워크(300)는 무선 네트워크로서 도시되어 있지만, 일부 예들에서는 유선 네트워크일 수도 있다.
일부 예들에서, 네트워크(300)는 PAN에 대응할 수 있다. 예를 들어, 네트워크(300)는 하나 이상의 표준 및/또는 기술에 따라 구현된 무선 PAN일 수 있다. 특히, 네트워크(300)는 IrDA, 무선 USB, Bluetooth, Z-Wave 또는 ZigBee 기술들에 따라 구현될 수 있다.
전력 우선 컴퓨팅 디바이스(100)에서, 제어 루틴(121)은 다양한 기능들을 수행하기 위한 로직을 구현하기 위한 메인 프로세서 컴포넌트로서의 역할을 하는 프로세서 컴포넌트(110)에서 동작하는 일련의 명령들을 포함한다. 제어 루틴(121)을 실행함에 있어서, 프로세서 컴포넌트(110)는 (예를 들어, 오디오 입력 디바이스(130)를 통해) 오디오 입력(122)을 수신한다. 오디오 입력(122)은 오디오 신호(400)에 대응하는 표시를 포함할 수 있다. 특히, 제어 루틴(121)을 실행함에 있어서, 프로세서 컴포넌트(110)는 오디오 입력 디바이스(130)를 활성화하여 오디오 신호(400)를 청취한다.
센서 판독(123)은 센서들(180)로부터 수신된 하나 이상의 신호, 판독, 표시, 또는 정보에 대응할 수 있다. 일부 예들에서, 센서들(180)은 가속도계를 포함할 수 있다. 제어 루틴(121)을 실행함에 있어서, 프로세서 컴포넌트(110)는 가속도계로부터의 출력을 수신하고 그 출력을 센서 판독(123)으로서 저장할 수 있다. 컨텍스트 특성(124)은 오디오 입력과 관련된 컨텍스트 특성에 대응할 수 있다. 예를 들어, 센서 판독(123)이 가속도계로부터의 표시에 대응하면, 컨텍스트 특성(124)은 활동 레벨(예를 들어, 움직이지 않는 것과 달리기 사이의 범위 등)의 표시를 포함할 수 있다. 또 다른 예로서, 컨텍스트 특성은 오디오 입력(122)에 대응하는 오디오 품질(예를 들어, 노이즈 레벨 등)을 포함할 수 있다.
보조 디바이스 리스트(125)는 네트워크(300) 내의 보조 디바이스들(200-1 및 200-2)의 리스트를 포함한다. 일부 예들에서, 아래에서 더 상세히 설명되는 바와 같이, 리스트(125)는 또한 전력 우선 컴퓨팅 디바이스(100)에 대한 디바이스들(125)의 위치, 사용자의 신체(예를 들어, 입 등)의 위치, 이용 가능한 전력의 양 등에 관한 정보를 포함할 수 있다.
보조 디바이스 명령들(126)은 보조 디바이스들(200-1 및 200-2) 중 하나 이상에 의해 수행될 액션들의 표시를 포함한다. 특히, 보조 디바이스 명령들(126)은 보조 디바이스들(200-1 및/또는 200-2)의 다양한 컴포넌트들을 "웨이크업"하기 위한 명령들을 포함한다. 예를 들어, 명령들(126)은 (예를 들어, 수동 또는 저전력 라디오에 통신되는) 메인 라디오(main radio)를 웨이크업하기 위한 명령을 포함할 수 있다. 예를 들어, 명령들(126)은 오디오 입력 디바이스(230)를 웨이크업하고 오디오 신호(400)로부터 오디오 입력(222)을 캡처하기 위한 명령, 오디오 입력(222)을 처리하기 위한 명령들, 오디오 입력(222)의 적어도 일부를 처리하기 위한 명령들, 오디오 입력 디바이스(230)를 비활성화하기 위한 명령들 등을 포함할 수 있다.
제어 루틴(121)을 실행함에 있어서, 프로세서 컴포넌트(110)는 (i) 오디오 입력(122)을 캡처할지, (ii) 오디오 입력(122)으로부터 처리된 오디오(127)를 생성할지, 및/또는 (iii) 보조 컴퓨팅 디바이스들(200-1 및 200-2) 중 하나 이상에게 웨이크업하고, 오디오 입력(222)을 캡처하고, 및/또는 오디오 입력(222)으로부터 처리된 오디오(223)를 생성하도록 지시할지를 결정한다.
보조 디바이스 명령들(126)은 보조 컴퓨팅 디바이스들(200-1 및 200-2) 중 하나 이상에 보내질 있음에 주목할 필요가 있다. 특히, 보조 디바이스 명령들(126)은 보조 컴퓨팅 디바이스 리스트(125)에 기초하여 보조 컴퓨팅 디바이스들(200-1 및 200-2) 중 하나 이상에 보내질 수 있다. 예를 들어, 명령들(126)은 전력 우선 컴퓨팅 디바이스(100)보다 (예를 들어, 오디오 신호(400) 등과 관련하여) 더 최적으로 배치된 것으로 표시되는 보조 컴퓨팅 디바이스들(200-1 또는 200-2) 중 하나에 보내질 수 있다.
보조 컴퓨팅 디바이스들(200-1 및 200-2) 각각에서, 제어 루틴(221)은 다양한 기능들을 수행하기 위한 로직을 구현하기 위한 메인 프로세서 컴포넌트로서의 역할을 하는 프로세서 컴포넌트(210)에서 동작하는 일련의 명령들을 포함한다. 제어 루틴(221)를 실행함에 있어서, 프로세서 컴포넌트(210)는 보조 디바이스 명령들(126)을 수신한다. 전술한 바와 같이, 보조 명령들(126)은 오디오 입력 디바이스(230)를 웨이크업(또는 활성화)하여 오디오 신호(400)로부터 오디오 입력(222)을 캡처하고 및/또는 오디오 입력(222)으로부터 처리된 오디오(223)를 생성하기 위한 명령을 포함할 수 있다.
일부 예들에서, 전력 우선 컴퓨팅 디바이스(100) 및 보조 컴퓨팅 디바이스들(200-1 및 200-2)은 데스크톱 컴퓨터 시스템, 데이터 입력 단말기, 랩톱 컴퓨터, 노트북 컴퓨터, 태블릿 컴퓨터, 핸드헬드 개인 정보 단말기, 스마트폰, 디지털 카메라, 의류 또는 착용 가능한 액세서리(예를 들어, 신발 또는 신발들, 안경, 시계, 목걸이, 셔츠, 이어폰, 모자 등)에 통합된 웨어러블 컴퓨팅 디바이스, 차량(예를 들어, 자동차, 자전거, 휠체어 등)에 통합된 컴퓨팅 디바이스, 서버, 서버들의 클러스터, 서버 팜, 스테이션, 무선 스테이션, 사용자 장비 등을 포함하는(이들에 한정되지 않음) 다양한 유형의 디바이스들 중 임의의 것일 수 있다.
다양한 실시예들에서, 프로세서 컴포넌트(110) 및/또는 프로세서 컴포넌트들(210)은 다양한 상업적으로 이용 가능한 프로세서들 중 임의의 것을 포함할 수 있다. 또한, 이들 프로세서 컴포넌트 중 하나 이상은 다수의 프로세서, 멀티-스레드 프로세서, 멀티-코어 프로세서(다수의 코어가 동일한 다이에 공존하든 개별 다이들에 공존하든 관계없음), 및/또는 다수의 물리적으로 분리된 프로세서들이 어떤 식으로든 연결되어 있는 어떤 다른 다양성의 멀티-프로세서 아키텍처를 포함할 수 있다.
다양한 실시예들에서, 스토리지(120) 및/또는 스토리지들(220)은 중단 없는 전력의 공급을 필요로 하는 휘발성 기술들을 아마도 포함하는, 그리고 이동식일 수 있는 또는 이동식이 아닐 수 있는 머신 판독가능 스토리지 매체의 사용을 수반하는 기술들을 아마도 포함하는, 다양한 정보 저장 기술들 중 임의의 것에 기초할 수 있다. 따라서, 이들 스토리지 각각은 ROM(read-only memory), RAM(random-access memory), DRAM(dynamic RAM), DDR-DRAM(Double-Data-Rate DRAM), SDRAM(synchronous DRAM), SRAM(static RAM), PROM(programmable ROM), EPROM(erasable programmable ROM), EEPROM(electrically erasable programmable ROM), 플래시 메모리, 폴리머 메모리(예를 들어, 강유전성 중합체 메모리), 오보닉 메모리, 상변화 또는 강유전성 메모리, SONOS(silicon-oxide-nitride-oxide-silicon) 메모리, 자기 또는 광 카드, 하나 이상의 개별 강자성 디스크 드라이브, 또는 하나 이상의 어레이로 조직된 복수의 스토리지 디바이스(예를 들어, 독립 디스크들의 중복 어레이(Redundant Array of Independent Disks) 어레이, 또는 RAID 어레이로 조직된 다수의 강자성 디스크 드라이브)를 포함하는(이들에 한정되지 않음), 다양한 유형들(또는 유형들의 조합)의 스토리지 디바이스 중 임의의 것을 포함할 수 있다. 이들 스토리지 각각은 단일 블록으로 도시되어 있지만, 이들 중 하나 이상은 상이한 스토리지 기술들에 기초할 수 있는 다수의 스토리지 디바이스를 포함할 수 있음에 주목해야 한다. 따라서, 예를 들어, 이들 도시된 스토리지 각각의 하나 이상은 프로그램들 및/또는 데이터가 머신 판독가능 스토리지 매체의 일부 형태로 저장되고 운반될 수 있는 광학 드라이브 또는 플래시 메모리 카드 판독기, 비교적 긴 기간 동안 로컬로 프로그램들 및/또는 데이터를 저장하는 강자성 디스크 드라이브, 및 프로그램들 및/또는 데이터에 비교적 신속하게 액세스할 수 있게 하는 하나 이상의 휘발성 고체 메모리 디바이스(예를 들어, SRAM 또는 DRAM)의 조합을 나타낼 수 있다. 또한, 이들 스토리지 각각은 동일한 저장 기술에 기초한 다수의 저장 컴포넌트로 이루어질 수 있지만, 사용중인 전문화의 결과로서 개별적으로 유지될 수 있음에 주목해야 한다(예를 들어, 일부 DRAM 디바이스들은 주 스토리지로서 사용되는 반면 다른 DRAM 디바이스들은 그래픽 컨트롤러의 개별 프레임 버퍼로서 사용됨).
다양한 실시예들에서, 오디오 입력 디바이스(130) 및/또는 오디오 입력 디바이스들(230)은 마이크로폰일 수 있다. 다양한 실시예들에서, 전원(140) 및/또는 전원들(240)은 다양한 전원들(예를 들어, 재충전 가능한 배터리 등) 중 임의의 것일 수 있다.
다양한 실시예들에서, 에너지 획득 디바이스(150)는 다양한 에너지 획득 디바이스들(예를 들어, 운동 에너지 캡처 디바이스, 압전 에너지 캡처 디바이스, 태양 전지 등) 중 임의의 것일 수 있다.
다양한 실시예들에서, 인터페이스(160) 및/또는 인터페이스들(260)은 설명된 바와 같이 컴퓨팅 디바이스들이 다른 디바이스들에 결합될 수 있게 하는 다양한 시그널링 기술들 중 임의의 것을 이용할 수 있다. 이들 인터페이스 각각은 그러한 결합을 가능하게 하는 필수 기능 중 적어도 일부를 제공하는 회로를 포함할 수 있다. 그러나, 이들 인터페이스 각각은 또한 (예를 들어, 프로토콜 스택 또는 다른 기능들을 구현하기 위해) 프로세서 컴포넌트들 중 대응하는 컴포넌트들에 의해 실행되는 명령 시퀀스로 적어도 부분적으로 구현될 수도 있다. 전기적 및/또는 광학적 도전성 케이블링이 이용되는 경우, 이들 인터페이스는 RS-232C, RS-422, USB, 이더넷(IEEE-802.3) 또는 IEEE-1394를 포함하는(이들에 한정되지 않음) 다양한 산업 표준 중 임의의 것을 따르는 시그널링 및/또는 프로토콜을 이용할 수 있다. 무선 신호 전송의 사용이 수반되는 경우, 이들 인터페이스는 IEEE 802.11a, 802.11b, 802.11g, 802.11n, 802.16, 802.20(일반적으로 "모바일 광대역 무선 액세스"라고 함); Bluetooth; ZigBee; 또는 GSM/GPRS(GSM with General Packet Radio Service), CDMA/1xRTT, EDGE(Enhanced Data Rates for Global Evolution), EV-DO(Evolution Data Only/Optimized), EV-DV(Evolution For Data and Voice), HSDPA(High Speed Downlink Packet Access), HSUPA(High Speed Uplink Packet Access), 4G LTE 등과 같은 셀룰러 무선 전화 서비스를 포함하는(이들에 한정되지 않음) 다양한 산업 표준들 중 임의의 것을 따르는 시그널링 및/또는 프로토콜을 이용할 수 있다.
일부 예들에서, 인터페이스들(160 및 260)은 수동 웨이크업될 수 있는 저전력 라디오들을 포함할 수 있다. 예를 들어, 인터페이스들(160 및 260)은 예를 들어, WISP™(Wireless ID and Sensing Platform)에 따라 동작하도록 구성된 라디오들과 같이, 활성화될 때까지 저전력 상태에서 동작하도록 구성된 무선 주파수 식별(RFID) 라디오들을 포함할 수 있다. 전술한 바와 같이, 그러한 라디오들은 다양한 상이한 무선 기술들(예를 들어, Bluetooth, ANT 등) 중 임의의 것에 따라 동작하도록 구성될 수 있다.
도 2 및 도 3은 도 1의 오디오 처리 시스템(1000)의 일 실시예의 부분들의 블록도들이다. 일반적으로, 도 2 및 도 3은 시스템(1000)의 동작의 양태들을 도시한다. 특히, 도 2는 오디오 신호(400)의 캡처 및/또는 처리를 조정하도록 구성된 전력 우선 컴퓨팅 디바이스(100)의 실시예를 도시하는 반면, 도 3은 전력 우선 컴퓨팅 디바이스(100)에 의해 지시된 바와 같이 오디오 신호(400)를 캡처 및/또는 처리하도록 구성된 보조 컴퓨팅 디바이스(200-1)의 실시예를 도시한다.
다양한 실시예들에서, 제어 루틴(121) 및/또는 제어 루틴(221)은 운영 체제, 디바이스 드라이버들 및/또는 애플리케이션 레벨 루틴들(예를 들어, 디스크 매체상에 제공된 소위 "소프트웨어 스위트들", 원격 서버로부터 획득된 "애플릿들" 등) 중 하나 이상을 포함할 수 있다. 운영 체제가 포함되는 경우, 운영 체제는 프로세서 컴포넌트(110 및/또는 210) 중 어느 것이든 대응하는 것들에 적합한 다양한 이용 가능한 운영 체제들 중 임의의 것일 수 있다. 하나 이상의 디바이스 드라이버가 포함되는 경우, 그 디바이스 드라이버들은 컴퓨터 시스템(100 및/또는 200)의 다양한 다른 컴포넌트들(하드웨어 컴포넌트이든 소프트웨어 컴포넌트이든 관계없음) 중 임의의 것에 대한 지원을 제공할 수 있다.
도 2를 더 구체적으로 참조하면, 제어 루틴(121)은 오디오 검출기(1211), 오디오 레코더(1212), 오디오 프로세서(1214), 오디오 처리 조정기(1215), 및 컨텍스트 엔진(1216)을 포함한다.
일반적으로, 제어 루틴(121)은 오디오 신호(400)를 검출하고 오디오 신호(400)의 캡처 및 처리를 조정하여 시스템(1000)에 의해 소비되는 전력을 보존한다. 특히, 제어 루틴(121)은 더 충실도가 높거나 더 최적으로 배치된 오디오 입력 디바이스들을 가질 수 있지만 전력 우선 컴퓨팅 디바이스(100)보다 큰 전력 제약을 가질 수 있는 하나 이상의 전력 민감 디바이스(예를 들어, 보조 컴퓨팅 디바이스들(200-1 및 200-2))를 이용한 오디오 신호의 캡처(예를 들어, 오디오 신호의 레코딩) 및 처리를 조정한다.
오디오 검출기(1211)는 오디오 신호(400)를 검출한다. 오디오 검출기는 오디오 신호(400)를 검출하기 위해 오디오 입력 디바이스(130)상에서 동작한다. 일부 예들에서, 오디오 검출기(1211)는 모든 가청 신호들(400)을 검출한다. 오디오 레코더(1212)는 오디오 신호(400)를 오디오 입력(122)으로서 캡처한다. 일반적으로, 오디오 레코더(1212)는 오디오 입력(122)이 오디오 신호(400)의 표시들을 포함하도록, 오디오 입력(122)을 스토리지(120)에 저장한다. 다양한 실시예들에서, 오디오 입력은 다양한 파일 유형들 중 임의의 것일 수 있거나 다양한 상이한 오디오 인코딩 방식들(예를 들어, MP3, WAV, PSM 등)을 사용하여 인코딩될 수 있다. 오디오 프로세서. 오디오 프로세서(1213)는 오디오 입력(122)을 처리하여 처리된 오디오(127)를 생성한다. 일반적으로, 오디오 프로세서(1213)는 오디오 입력(122)에 대해 다양한 오디오 처리 중 임의의 것을 수행할 수 있다. 예를 들어, 오디오 프로세서(1213)는 음성 인식 처리, 노이즈 필터링, 오디오 품질 향상 등을 수행할 수 있다.
컨텍스트 엔진(1215)은 컨텍스트 특성(124)을 생성한다. 일부 실시예들에서, 컨텍스트 엔진(1215)은 전력 우선 컴퓨팅 디바이스에 관련된 조건들에 관한 입력(예를 들어, 센서 출력들)을 수신하기 위해 센서(170)에 동작 가능하게 연결된다. 예를 들어, 일부 실시예들에서, 센서(170)는 가속도계이다. 따라서, 컨텍스트 엔진(1215)은 가속도계 출력을 수신하고 전력 우선 컴퓨팅 디바이스에 대응하는 활동 레벨을 결정할 수 있다. 특정 예에서, 전력 우선 컴퓨팅 디바이스는 예를 들어 신발과 같은 웨어러블 컴퓨팅 디바이스에 구현될 수 있다. 따라서, 컨텍스트 엔진(1215)은 신발이 닳고 있는지, 신발로 걷고 있는지, 신발로 조깅하고 있는지 등을 결정할 수 있다. 컨텍스트 엔진(1215)은 이러한 활동 레벨의 표시를 포함하는 컨텍스트 특성을 생성할 수 있다.
일부 예들에서, 컨텍스트 특성은 오디오 입력의 오디오 품질에 대응한다. 특히, 컨텍스트 엔진(1215)은 오디오 입력(122)이 오디오 프로세서(1213)에 의해 처리될 수 있는지, 오디오 입력(122)의 부분들이 처리될 수 있는지 등에 관계없이, 오디오 입력(122) 내의 노이즈의 표시들을 수신하기 위해 오디오 검출기(1211), 오디오 레코더(1212) 및/오디오 프로세서(1213)에 동작 가능하게 결합될 수 있다. 예를 들어, 1 내지 10 사이의 기간들을 포함하는 오디오 입력에 대해, 컨텍스트 특성은 오디오 프로세서(1213)가 기간 3 내지 5를 처리할 수 없다는 표시를 포함할 수 있다. 또 다른 예로서, 컨텍스트 특성은 오디오 검출기(1211)에 의해 검출된 노이즈(예를 들면, 주변 노이즈, 화이트 노이즈 등)의 레벨의 표시를 포함할 수 있다.
일반적으로, 오디오 처리 조정기(1214)는 보조 디바이스들(200-1 또는 200-2) 중 하나를 웨이크할지, 전력 우선 컴퓨팅 디바이스상에서 오디오 입력(122)을 처리할지(예를 들어, 오디오 프로세서(1213)를 통해), 그리고 또한 보조 디바이스들 중 하나에게 오디오를 처리하도록 지시할지를 결정한다(예를 들어, 도 3 참조).
오디오 처리 조정기(1214)는 컨텍스트 특성들(124) 및 디바이스 리스트(125)에 기초하여 보조 디바이스를 웨이크할지 및 어느 보조 디바이스를 웨이크할지를 결정하도록 구성된다. 일반적으로, 디바이스 리스트(125)는 오디오 처리 조정기에 의해 생성될 수 있다. 그것은 시스템(1000) 내의 변화하는 조건들에 기초하여 동작 동안 동적으로 갱신될 수 있다. 예를 들어, 디바이스 리스트(125)는 활성 디바이스들(예를 들어, 전력 우선 디바이스들(100), 보조 디바이스들(200) 등)을 열거할 수 있다. 디바이스 리스트(125)는 또한 디바이스들 각각에 관련된 메트릭들의 표시들을 포함할 수 있다. 예를 들어, 디바이스 리스트(125)는 디바이스들 각각의 이용 가능한 전력 레벨, 디바이스들 각각의 오디오 입력 충실도, 디바이스들 각각의 오디오 소스(예를 들어, 사용자 입 등)와의 근접성의 표시들을 포함할 수 있다.
일부 예들에서, 전술한 바와 같이, 컨텍스트 특성(124)은 오디오 입력(122)에 대응하는 오디오 품질의 표시를 포함할 수 있다. 오디오 처리 조정기(1214)는 (예를 들어, 컨텍스트 특성(124)에 반영된) 오디오 품질이 오디오 품질 임계값을 초과하는지를 결정할 수 있다. 또한, 오디오 처리 조정기(1214)는 오디오 품질이 오디오 품질 임계값을 초과하지 않는다는 결정에 기초하여 보조 디바이스(예를 들어, 보조 디바이스(200-1 및/또는 200-2))를 웨이크하기로 결정할 수 있다. 오디오 처리 조정기(1214)는 오디오 품질이 오디오 품질 임계값을 초과한다는 결정에 기초하여 보조 디바이스(예를 들어, 보조 디바이스(200-1 및/또는 200-2))를 웨이크하지 않기로 결정할 수 있다.
오디오 처리 조정기(1214)가 보조 컴퓨팅 디바이스를 웨이크할 때, 오디오 처리 조정기(1214)는 하나 이상의 보조 디바이스 명령(126)을 생성한다. 보조 디바이스 명령들은 프로세서 컴포넌트(110)가 네트워크 인터페이스상에서 동작하고 웨이크업될 보조 디바이스에 대응하는 웨이크업 신호를 네트워크 인터페이스에 송신하기 위한 표시들을 포함할 수 있다.
일부 예들에서, 언급한 바와 같이, 네트워크 인터페이스들(예를 들어, 160 및/또는 260)은 수동 라디오들(예를 들어, RFID 라디오들, Bluetooth 라디오들, ANT 라디오들 등)일 수 있다. 또한, 일부 예들에서, 네트워크 인터페이스들은 수동 라디오와 네트워크 라디오를 모두 포함할 수 있다. 예를 들어, 네트워크 인터페이스들은 RFID 라디오 및 Wi-Fi 라디오를 포함할 수 있다. 따라서, 보조 디바이스 명령들은 네트워크 라디오를 웨이크업하기 위해 수동 라디오에 송신되는 표시를 포함할 수 있다.
일부 예들에서, 보조 디바이스 명령들(126)은 보조 디바이스가 그의 오디오 입력 디바이스를 켜고 오디오 신호의 2차 복사본을 캡처하기 위한 표시를 포함한다(예를 들어, 도 3 참조).
일부 예들에서, 보조 디바이스 명령들(126)은 보조 디바이스가 2차 오디오 입력의 적어도 일부를 처리하기 위한 표시를 포함한다. 예를 들어, 전술한 바와 같이, 컨텍스트 특성들(124)은 오디오 입력의 일부가 처리될 수 없거나 오디오 입력의 일부가 오디오 품질 임계값을 초과하지 않은 오디오 품질을 가졌다는 표시를 포함할 수 있다. 따라서, 보조 디바이스 명령들(126)은 오디오 입력의 이 부분에 대응하는 2차 오디오 입력의 일부를 처리하기 위한 표시를 포함할 수 있다.
오디오 처리 조정기는 가장 많은 양의 이용 가능한 전력을 갖는 보조 디바이스, 가장 충실도가 높은 오디오를 갖는 디바이스, 오디오 신호와 관련하여 가장 최적으로 배치된 디바이스 등을 선택함으로써 어느 보조 디바이스를 웨이크할지를 결정할 수 있다. 일부 예들에서, 오디오 처리 조정기(1214)는 각각의 보조 디바이스에 대한 오디오 입력 디바이스의 충실도를 각각의 보조 디바이스의 이용 가능한 전력과 밸런싱함으로써 어느 보조 디바이스를 웨이크할지를 결정할 수 있다. 예를 들어, 컨텍스트 특성에 의해 표시된 오디오 품질이 이 특정 보조 디바이스가 사용되는 것을 막기에 충분히 낮지 않은 경우 이용 가능한 전력은 더 높지만 오디오 입력 충실도는 더 낮은 디바이스가 선택될 수 있다.
또한, 오디오 프로세서(2212)는 보조 컴퓨팅 디바이스(200)로부터 처리된 오디오(예를 들어, 처리된 오디오(223))를 수신할 수 있다. 일부 예들에서, 처리된 오디오(223)는 처리된 오디오(127)와 결합될 수 있다. 예를 들어, 처리된 오디오(127)는 오디오 입력(122)의 일부에 대응하는 반면 처리된 오디오(223)는 오디오 입력(222)의 상이한 부분에 대응한다면, 처리된 오디오를 결합하여 오디오 신호(400)에 대응하는 처리된 오디오의 더 완전한 재구성을 형성할 수 있다.
일부 예들에서, 시스템(1000)은 전력 우선 디바이스(100)로서 구성된 다수의 디바이스를 포함할 수 있다. 더 구체적으로, 시스템(1000)은 제어 루틴(121)을 포함하는 다수의 컴퓨팅 디바이스를 포함할 수 있다. 이러한 예에서, 오디오 처리 조정기(1214)는 전력 우선 디바이스로 선택될 수 있다. 또 다른 예로서, 오디오 처리 조정기(1214)는 시스템(1000) 내의 또 다른 디바이스를 전력 우선 디바이스로 지정할 수 있다. 예를 들어, 전술한 바와 같이, 디바이스 리스트(125)는 시스템(1000) 내의 이용 가능한 디바이스들의 리스트, 그들의 이용 가능한 전력을 포함할 수 있다. 또한, 디바이스 리스트는 이용 가능한 디바이스들의 기능들(예를 들어, 디바이스가 에너지 획득 컴포넌트 등을 포함하는지)의 표시들을 포함할 수 있다. 가장 많은 전력량을 갖는 디바이스 및/또는 원하는 기능들(예를 들어, 에너지 획득)을 갖는 디바이스는 전력 우선 디바이스로 선택되거나 전력 우선 디바이스로서 지정될 수 있다.
도 3을 더 구체적으로 참조하면, 제어 루틴(221)은 오디오 레코더(2211) 및 오디오 프로세서(2212)를 포함한다. 일반적으로, 제어 루틴(221)은 전력 우선 디바이스(100)로부터 보조 디바이스 명령들(126)을 수신한다. 전술한 바와 같이, 보조 디바이스 명령들(126)은 수동 라디오를 통하여 보조 디바이스상의 전력에 의해 송신될 수 있다. 일단 파워 온되면, 보조 디바이스 명령들(126)은 디바이스(200-a)가 오디오 신호(400)를 레코드하게 할 수 있다. 특히, 보조 디바이스 명령은 오디오 레코더(2211)가 오디오 신호(400)로부터 오디오 입력(222)을 레코드하기 위한 명령을 포함할 수 있다. 오디오 입력(222)은 본 명세서에서 2차 오디오 입력으로 지칭될 수 있다. 보조 디바이스 명령들(126)은 또한 오디오 프로세서(2212)가 오디오 입력(222)의 적어도 일부를 처리하여, 처리된 오디오(223)를 생성하는 명령을 포함할 수 있다. 또한, 보조 디바이스 명령들(126)은 처리된 오디오(223)를 전력 우선 컴퓨팅 디바이스(100)에 송신하는 명령들을 포함할 수 있다.
도 4 및 도 5는 시스템(1000) 내의 컴포넌트에 의해 구현될 수 있는 논리 흐름들의 예시적인 실시예들을 도시한다. 도시된 논리 흐름들은 본 명세서에서 설명된 하나 이상의 실시예에 의해 실행되는 동작들의 일부 또는 전부를 나타낼 수 있다. 더 구체적으로, 논리 흐름들은 적어도 제어 루틴들(121)을 실행함에 있어서 프로세서 컴포넌트들(110)에 의해 수행되는 동작들을 나타낼 수 있다. 논리 흐름들은 도 1 내지 도 3을 참조하여 기술되지만, 예들은 이에 관련하여 한정되지 않는다.
도 4를 더 구체적으로 참조하면, 논리 흐름(500)이 도시되어 있다. 논리 흐름(500)은 블록 510에서 시작될 수 있다. 블록 510에서는, 오디오 처리 조정 시스템의 전력 우선 컴퓨팅 디바이스의 프로세서 컴포넌트(예를 들어, 시스템(1000)의 전력 우선 컴퓨팅 디바이스(100)의 프로세서 컴포넌트(110))가 오디오 검출기의 실행에 의해 오디오 신호를 검출하게 된다. 예를 들어, 제어 루틴(121)의 오디오 검출기(1211)는 오디오 신호(400)를 검출할 수 있다.
블록 520으로 계속하여, 오디오 처리 조정 시스템의 전력 우선 컴퓨팅 디바이스의 프로세서 컴포넌트(예를 들어, 시스템(1000)의 컴퓨팅 디바이스(100)의 프로세서 컴포넌트(110))는 오디오 레코더의 실행에 의해 오디오 신호로부터 오디오 입력을 캡처하게 된다. 예를 들어, 제어 루틴(121)의 오디오 레코더(1212)는 오디오 신호(400)를 캡처함으로써 오디오 입력(122)을 생성할 수 있다.
블록 530으로 계속하여, 오디오 처리 조정 시스템의 전력 우선 컴퓨팅 디바이스의 프로세서 컴포넌트(예를 들어, 시스템(1000)의 컴퓨팅 디바이스(100)의 프로세서 컴포넌트(110))는 오디오 처리 조정기(1214)의 실행에 의해 네트워크를 통해 이용 가능한 보조 디바이스를 웨이크할지를 결정하게 된다. 예를 들어, 제어 루틴(121)의 오디오 처리 조정기(1214)는 보조 컴퓨팅 디바이스들(200-1 또는 200-2) 중 하나를 웨이크할지를 결정할 수 있다.
도 5를 더 구체적으로 참조하면, 논리 흐름(600)은 블록 610에서 시작될 수 있다. 블록 610에서는, 오디오 처리 조정 시스템의 전력 우선 컴퓨팅 디바이스의 프로세서 컴포넌트(예를 들어, 시스템(1000)의 컴퓨팅 디바이스(100)의 프로세서 컴포넌트(110))가 오디오 검출기의 실행에 의해 오디오 신호를 검출하게 된다. 예를 들어, 제어 루틴(121)의 오디오 검출기(1211)는 오디오 신호(400)를 검출할 수 있다.
블록 620으로 계속하여, 오디오 처리 조정 시스템의 전력 우선 컴퓨팅 디바이스의 프로세서 컴포넌트(예를 들어, 시스템(1000)의 컴퓨팅 디바이스(100)의 프로세서 컴포넌트(110))는 컨텍스트 엔진의 실행에 의해 전력 우선 컴퓨팅 디바이스에 대응하는 활동 레벨을 결정하게 된다. 예를 들어, 컨텍스트 엔진(1215)은 센서 판독(123)에 기초하여 컨텍스트 특성(124)을 결정할 수 있다. 특히, 컨텍스트 특성(124)은 활동 레벨의 표시에 있을 수 있다.
블록 630으로 계속하여, 오디오 처리 조정 시스템의 전력 우선 컴퓨팅 디바이스의 프로세서 컴포넌트(예를 들어, 시스템(1000)의 컴퓨팅 디바이스(100)의 프로세서 컴포넌트(110))는 오디오 처리 조정기의 실행에 의해 활동 레벨이 활동 레벨 임계값을 초과하는지를 결정하게 된다. 예를 들어, 제어 루틴(121)의 오디오 처리 조정기(1214)는 컨텍스트 특성(124)에 표시된 활동 레벨이 활동 레벨 임계값을 초과하는지를 결정할 수 있다.
블록 640으로 계속하여, 오디오 처리 조정 시스템의 전력 우선 컴퓨팅 디바이스의 프로세서 컴포넌트(예를 들어, 시스템(1000)의 컴퓨팅 디바이스(100)의 프로세서 컴포넌트(110))는 오디오 레코더의 실행에 의해 상기 활동 레벨이 상기 활동 레벨 임계값을 초과하지 않는다는 결정에 기초하여 검출된 오디오 신호의 오디오 처리를 시도하게 된다. 예를 들어, 오디오 처리 조정기(1214)는 오디오 프로세서(1215)로 하여금 오디오 입력(122)의 처리를 시도하고(예를 들어, 음성 인식 적용 등을 시도하고) 처리된 오디오(127)를 생성하게 할 수 있다.
블록 650으로 계속하여, 오디오 처리 조정 시스템의 전력 우선 컴퓨팅 디바이스의 프로세서 컴포넌트(예를 들어, 시스템(1000)의 컴퓨팅 디바이스(100)의 프로세서 컴포넌트(110))는 오디오 처리 조정기의 실행에 의해 오디오 입력의 오디오 처리가 적절했는지를 결정하게 된다. 예를 들어, 제어 루틴(121)의 오디오 처리 조정기(1214)는 처리된 오디오(127)가 적절한지를 결정할 수 있다. 일부 실시예들에서, 처리된 오디오(127)는 오디오 입력(122)에 적용된 음성 인식이 성공적이면 적절하다.
블록 660으로 계속하여, 오디오 처리 조정 시스템의 전력 우선 컴퓨팅 디바이스의 프로세서 컴포넌트(예를 들어, 시스템(1000)의 컴퓨팅 디바이스(100)의 프로세서 컴포넌트(110))는 오디오 처리 조정기의 실행에 의해 활동 레벨이 활동 레벨 임계값을 초과한다는 결정에 기초하여 또는 오디오 처리가 적절하지 않았다는 결정에 기초하여 보조 디바이스를 웨이크하여 오디오 신호를 캡처하고/하거나 오디오 신호에 대한 오디오 처리를 수행하게 된다. 예를 들어, 제어 루틴(121)의 오디오 처리 조정기(1214)는 웨이크업하고, 오디오 신호를 캡처하고/하거나 오디오 입력을 처리하는 명령을 포함하는 보조 디바이스 명령들(126)을 생성할 수 있다.
도 6은 스토리지 매체(700)의 일 실시예를 도시한다. 스토리지 매체(700)는 제조 물품을 포함할 수 있다. 일부 예들에서, 스토리지 매체(700)는 광학, 자기 또는 반도체 스토리지와 같은 임의의 비일시적 컴퓨터 판독가능 매체 또는 머신 판독가능 매체를 포함한다. 스토리지 매체(700)는 논리 흐름들(500 및/또는 600)을 구현하기 위한 명령들과 같은 다양한 유형의 컴퓨터 실행가능 명령들을 저장할 수 있다. 컴퓨터 판독가능 또는 머신 판독가능 스토리지 매체의 예들은 휘발성 메모리 또는 비휘발성 메모리, 이동식 메모리 또는 비이동식 메모리, 소거 가능 또는 소거 불가능 메모리, 기입 가능 또는 재기입 가능 메모리 등을 포함하여, 전자 데이터를 저장할 수 있는 임의의 유형 매체를 포함할 수 있다. 컴퓨터 실행가능 명령들의 예들은, 소스 코드, 컴파일된 코드, 해석된 코드, 실행가능 코드, 정적 코드, 동적 코드, 객체 지향 코드, 비주얼 코드 및 기타 등등과 같은 임의의 적합한 유형의 코드를 포함할 수 있다. 예들은 이에 관련하여 한정되지 않는다.
도 7은 전술한 바와 같은 다양한 실시예들을 구현하기에 적합한 예시적인 처리 아키텍처(3000)의 일 실시예를 도시한다. 더 구체적으로, 처리 아키텍처(3000)(또는 그 변형들)는 컴퓨팅 디바이스(100 및/또는 200-a)의 일부로서 구현될 수 있다.
처리 아키텍처(3000)는 하나 이상의 프로세서, 멀티-코어 프로세서, 코-프로세서, 메모리 유닛, 칩셋, 제어기, 주변 장치, 인터페이스, 오실레이터, 타이밍 디바이스, 비디오 카드, 오디오 카드, 멀티미디어 입력/출력(I/O) 컴포넌트, 파워 서플라이 등을 포함하는(이들에 한정되지 않음), 디지털 처리에서 일반적으로 이용되는 다양한 요소들을 포함할 수 있다. 본원에서 사용된, "시스템" 및 "컴포넌트"라는 용어들은 디지털 처리가 수행되는 컴퓨팅 디바이스의 엔티티를 지칭하려는 것이고, 그 엔티티는 하드웨어, 하드웨어와 소프트웨어의 조합, 소프트웨어, 또는 실행중인 소프트웨어이고, 그 예들은 이 도시된 예시적인 처리 아키텍처에 의해 제공된다. 예를 들어, 컴포넌트는 프로세서 컴포넌트상에서 실행되는 프로세스, 프로세서 컴포넌트 자체, 광 및/또는 자기 스토리지 매체를 이용할 수 있는 스토리지 디바이스(예를 들어, 하드 디스크 드라이브, 어레이 내의 다수의 스토리지 디바이스들 등), 소프트웨어 오브젝트, 명령들의 실행 가능 시퀀스, 실행의 스레드, 프로그램, 및/또는 전체 컴퓨팅 디바이스(예를 들어, 전체 컴퓨터)일 수 있지만, 이들에 한정되지 않는다. 예를 들어, 서버에서 실행되는 애플리케이션과 그 서버는 모두 컴포넌트일 수 있다. 하나 이상의 컴포넌트가 프로세스 및/또는 실행의 스레드 내에 존재할 수 있고, 컴포넌트가 하나의 컴퓨팅 디바이스상에 국한되거나 및/또는 2개 이상의 컴퓨팅 디바이스 사이에 분산될 수 있다. 또한, 컴포넌트들은 동작들을 조정하기 위해 다양한 유형들의 통신 매체에 의해 서로 통신 가능하게 결합될 수 있다. 이 조정은 단방향 또는 양방향 정보 교환을 포함할 수 있다. 예를 들어, 컴포넌트들은 통신 매체를 통해 통신되는 신호들의 형태로 정보를 통신할 수 있다. 정보는 하나 이상의 신호 라인에 할당된 신호들로서 구현될 수 있다. (커맨드, 상태, 어드레스 또는 데이터 메시지를 포함하는) 메시지가 이러한 신호들 중 하나일 수 있거나, 복수의 이러한 신호일 수 있으며, 다양한 접속들 및/또는 인터페이스들 중 임의의 것을 통해 직렬로 또는 실질적으로 병렬로 송신될 수 있다.
도시된 바와 같이, 처리 아키텍처(3000)를 구현함에 있어서, 컴퓨팅 디바이스는 적어도 프로세서 컴포넌트(950), 스토리지(960), 다른 디바이스들과의 인터페이스(990), 및 결합부(coupling)(955)를 포함할 수 있다. 설명되는 바와 같이, 처리 아키텍처(3000)를 구현하는 컴퓨팅 디바이스의, 그의 의도된 용도 및/또는 사용 조건들을 포함하는 다양한 양태들에 따라, 이러한 컴퓨팅 디바이스는 디스플레이 인터페이스(985)(이에 한정되지 않음)와 같은 부가의 컴포넌트들을 추가로 포함할 수 있다.
결합부(955)는 하나 이상의 버스, 포인트-대-포인트 인터커넥트, 트랜시버, 버퍼, 크로스포인트 스위치(crosspoint switches), 및/또는 적어도 프로세서 컴포넌트(950)를 스토리지(960)에 통신 가능하게 결합하는 다른 도체들 및/또는 로직을 포함할 수 있다. 결합부(955)는 프로세서 컴포넌트(950)를 인터페이스(990), 오디오 서브시스템(970) 및 디스플레이 인터페이스(985) 중 하나 이상에 (이들 및/또는 다른 컴포넌트들 중 어느 것이 또한 존재하는지에 따라) 더 결합할 수 있다. 프로세서 컴포넌트(950)가 결합부(955)에 의해 그렇게 결합됨에 따라, 프로세서 컴포넌트(950)는 처리 아키텍처(3000)를 구현하는 전술한 컴퓨팅 디바이스들 중 임의의 것(들)에 대해, 위에서, 상세히 설명된 태스크들 중 다양한 것들을 수행할 수 있다. 결합부(955)는 신호들을 광학적으로 그리고/또는 전기적으로 운반하는 다양한 기술들 또는 기술들의 조합들 중 임의의 것을 이용하여 구현될 수 있다. 또한, 결합부(955)의 적어도 부분들은 AGP(Accelerated Graphics Port), CardBus, E-ISA(Extended Industry Standard Architecture), MCA(Micro Channel Architecture), NuBus, PCI-X(Peripheral Component Interconnect (Extended)), PCI-E(PCI Express), PCMCIA(Personal Computer Memory Card International Association) 버스, HyperTransport™, QuickPath 등을 포함하지만 이에 한정되지 않는 다양한 산업 표준들 중 임의의 것을 따르는 타이밍들 및/또는 프로토콜들을 이용할 수 있다.
전술한 바와 같이, 프로세서 컴포넌트(950)(프로세서 컴포넌트들(110 및/또는 210)에 대응함)는 다양한 기술들 중 임의의 것을 이용하고, 여러 방식들 중 임의의 것으로 물리적으로 조합되는 하나 이상의 코어에 의해 구현되는, 다양한 상업적으로 이용 가능한 프로세서들 중 임의의 것을 포함할 수 있다.
전술한 바와 같이, 스토리지(960)(스토리지(130 및/또는 230)에 대응함)는 다양한 기술들 또는 기술들의 조합들 중 임의의 것에 기초한 하나 이상의 별개의 스토리지 디바이스로 구성될 수 있다. 더 구체적으로, 도시된 바와 같이, 스토리지(960)는 휘발성 스토리지(961)(예를 들어, RAM 기술의 하나 이상의 형태에 기초한 솔리드 스테이트 스토리지), 비휘발성 스토리지(962)(예를 들어, 그들의 콘텐츠를 보존하기 위해 전력의 지속적인 제공을 요구하지 않는 솔리드 스테이트, 강자성, 또는 다른 스토리지), 및 이동식 매체 스토리지(963)(예를 들어, 컴퓨팅 디바이스들 간에 정보를 전달할 수 있는 이동식 디스크 또는 솔리드 스테이트 메모리 카드 스토리지) 중 하나 이상을 포함할 수 있다. 이와 같이 스토리지(960)를 아마도 다수의 별개 유형들의 스토리지를 포함하는 것으로 도시되는 것은, 하나의 유형은 비교적 신속한 판독 및 기입 능력들을 제공하여 프로세서 컴포넌트(950)에 의한 데이터의 보다 신속한 조작을 가능하게 하는(그러나 아마도 지속적으로 전력을 요구하는 "휘발성" 기술을 사용하는) 반면 또 다른 유형은 비교적 높은 밀도의 비휘발성 스토리지를 제공하는(그러나 아마도 비교적 느린 판독 및 기입 능력들을 제공하는), 컴퓨팅 디바이스들에서 하나보다 많은 유형의 스토리지 디바이스가 흔하게 사용된다는 점을 인식한 것이다.
종종 상이한 기술들을 이용하는 상이한 스토리지 디바이스들의 상이한 특성들을 감안하면, 이러한 상이한 스토리지 디바이스들이 상이한 인터페이스들을 통해 그들의 상이한 스토리지 디바이스들에 결합되는 상이한 스토리지 제어기들을 통해 컴퓨팅 디바이스의 다른 부분들에 결합되는 것도 흔한 일이다. 예로서, 휘발성 스토리지(961)가 존재하며 RAM 기술에 기초하는 경우, 휘발성 스토리지(961)는 아마도 행과 열 어드레싱(row and column addressing)을 이용하는 휘발성 스토리지(961)에 적절한 인터페이스를 제공하는 스토리지 제어기(965a)를 통해 결합부(955)에 통신 가능하게 결합될 수 있고, 여기서, 스토리지 제어기(965a)는 휘발성 스토리지(961) 내에 저장되는 정보를 보존하는 데 도움이 되는 행 리프레싱(row refreshing) 및/또는 다른 유지보수 태스크들을 수행할 수 있다. 또 다른 예로서, 비휘발성 스토리지(962)가 존재하며 하나 이상의 강자성 및/또는 솔리드-스테이트 디스크 드라이브들을 포함하는 경우, 비휘발성 스토리지(962)는, 아마도 정보의 블록들 및/또는 실린더들(cylinders)과 섹터들(sectors)의 어드레싱을 이용하는 비휘발성 스토리지(962)에 적절한 인터페이스를 제공하는 스토리지 제어기(965b)를 통해 결합부(955)에 통신 가능하게 결합될 수 있다. 또 다른 예로서, 이동식 매체 스토리지(963)가 존재하며 하나 이상의 머신 판독가능 스토리지 매체(969)를 이용하는 하나 이상의 광학적 및/또는 솔리드-스테이트 디스크 드라이브를 포함하는 경우, 이동식 매체 스토리지(963)는 아마도 정보 블록들의 어드레싱을 이용하는 이동식 매체 스토리지(963)에 적절한 인터페이스를 제공하는 스토리지 제어기(965c)를 통해 결합부(955)에 통신 가능하게 결합될 수 있고, 여기서, 스토리지 제어기(965c)는 머신 판독가능 스토리지 매체(969)의 수명을 연장하는 데 특정한 방식으로 판독, 소거, 및 기입 동작들을 조정할 수 있다.
휘발성 스토리지(961) 또는 비휘발성 스토리지(962) 중 하나 또는 다른 하나는, 각각이 기초하는 기술들에 따라, 다양한 실시예들을 구현하기 위해 프로세서 컴포넌트(950)에 의해 실행 가능한 명령들의 시퀀스를 포함하는 루틴이 저장될 수 있는 머신 판독가능 스토리지 매체의 형태의 제조 물품을 포함할 수 있다. 예로서, 비휘발성 스토리지(962)가 강자성 기반 디스크 드라이브(예를 들어, 소위 "하드 드라이브")를 포함하는 경우, 각각의 이러한 디스크 드라이브는 전형적으로 자기 반응 입자(magnetically responsive particle)들의 코팅이 퇴적되고 플로피 디스켓과 같은 스토리지 매체와 유사한 방식으로 명령들의 시퀀스와 같은 정보를 저장하기 위해 다양한 패턴들로 자기 배향(magnetically oriented)되어 있는 하나 이상의 회전 플래터(rotating platter)를 이용한다. 또 다른 예로서, 비휘발성 스토리지(962)는, 컴팩트 플래시 카드와 유사한 방식으로, 명령들의 시퀀스들과 같은, 정보를 저장하기 위해, 솔리드-스테이트 스토리지 디바이스의 뱅크들로 구성될 수 있다. 다시, 실행가능한 루틴들 및/또는 데이터를 저장하기 위해 상이한 시간들에 컴퓨팅 디바이스에서 상이한 유형들의 스토리지 디바이스들을 이용하는 것은 흔한 일이다. 따라서, 다양한 실시예들을 구현하기 위해 프로세서 컴포넌트(950)에 의해 실행될 명령들의 시퀀스를 포함하는 루틴이 초기에 머신 판독가능 스토리지 매체(969)에 저장될 수 있고, 그 루틴이 실행됨에 따라 프로세서 컴포넌트(950)에 의해 더 신속한 액세스를 가능하게 하기 위해 머신 판독가능 스토리지 매체(969) 및/또는 휘발성 스토리지(961)의 지속적 존재를 요구하지 않는 장기 저장을 위해 그 루틴을 비휘발성 스토리지(962)에 복사하는 데 이동식 매체 스토리지(963)가 후속하여 이용될 수 있다.
전술한 바와 같이, 인터페이스(990)(인터페이스(160 및/도는 260)에 대응함)는 컴퓨팅 디바이스를 하나 이상의 다른 디바이스에 통신 가능하게 결합하는 데 이용될 수 있는 다양한 통신 기술들 중 임의의 것에 대응하는 다양한 시그널링 기술들 중 임의의 것을 이용할 수 있다. 다시, 프로세서 컴포넌트(950)가 입력/출력 디바이스들(예를 들어, 도시된 예시적인 키보드(920) 또는 프린터(925)) 및/또는 다른 컴퓨팅 디바이스들과, 아마도 네트워크 또는 네트워크들의 인터커넥트된 세트를 통해, 상호작용할 수 있게 하기 위해 다양한 형태들의 유선 또는 무선 시그널링 중 하나 또는 양자 모두가 이용될 수 있다. 종종 임의의 하나의 컴퓨팅 디바이스에 의해 지원되어야 하는 다수의 유형의 시그널링 및/또는 프로토콜들의 종종 상당히 상이한 특성을 인식하여, 인터페이스(990)는 다수의 상이한 인터페이스 제어기들(995a, 995b, 및 995c)를 포함하는 것으로서 도시되어 있다. 인터페이스 제어기(995a)는, 도시된 키보드(920)과 같은, 사용자 입력 디바이스들로부터 직렬 송신되는 메시지를 수신하기 위해 다양한 유형들의 유선 디지털 직렬 인터페이스 또는 라디오 주파수 무선 인터페이스 중 임의의 것을 이용할 수 있다. 인터페이스 제어기(995b)는, 도시된 네트워크(300)(아마도 하나 이상의 링크들로 구성되는 네트워크, 더 작은 네트워크들, 또는 아마도 인터넷)를 통해 다른 컴퓨팅 디바이스에 액세스하기 위해 다양한 케이블링 기반의 또는 무선의 시그널링, 타이밍들 및/또는 프로토콜들을 이용할 수 있다. 인터페이스(995c)는 데이터를 도시된 프린터(925)에 전달하기 위해 직렬 또는 병렬 신호 송신 중 어느 하나의 사용을 가능하게 하는 다양한 전기 도전성 케이블링 중 임의의 것을 이용할 수 있다. 인터페이스(990)의 하나 이상의 인터페이스 제어기를 통해 통신 가능하게 결합될 수 있는 디바이스들의 다른 예들은 마이크로폰들, 원격 제어기들, 스타일러스 펜들, 카드 판독기들, 지문 판독기들, 가상 현실 상호작용 장갑들, 그래픽 입력 태블릿들, 조이스틱들, 다른 키보드들, 망막 스캐너들, 터치 스크린들의 터치 입력 컴포넌트, 트랙볼들, 다양한 센서들, 제스처들 및/또는 얼굴 표정들을 통해 사람들에 의해 시그널링되는 커맨드들 및/또는 데이터를 수신하기 위해 사람들의 움직임을 모니터하는 카메라 또는 카메라 어레이, 사운드들, 레이저 프린터들, 잉크젯 프린터들, 기계 로봇들, 밀링 머신들(milling machine) 등을 포함하지만, 이들에 한정되는 것은 아니다.
컴퓨팅 디바이스가 디스플레이(예를 들어, 디스플레이(150 및/또는 250)에 대응하는, 도시된 예시적인 디스플레이(980))에 통신 가능하게 결합되는(또는 아마도 실제로는 이를 포함하는) 경우, 처리 아키텍처(3000)를 구현하는 이러한 컴퓨팅 디바이스는 디스플레이 인터페이스(985)를 또한 포함할 수 있다. 디스플레이에 통신 가능하게 결합하는데 있어서 더 일반화된 유형들의 인터페이스가 이용될 수 있지만, 디스플레이상에 다양한 형태들의 콘텐츠를 가시적으로 디스플레이하는데 있어서 종종 요구되는 다소 전문화된 부가적 처리뿐만 아니라, 사용되는 케이블링 기반의 인터페이스들의 다소 전문화된 속성은, 종종 별개의 디스플레이 인터페이스의 제공을 바람직하게 한다. 디스플레이(980)의 통신 결합에서 디스플레이 인터페이스(985)에 의해 이용될 수 있는 유선 및/또는 무선 시그널링 기술들은 다양한 아날로그 비디오 인터페이스들, DVI(Digital Video Interface), DisplayPort 등 중 임의의 것(이들에 한정되지 않음)을 포함하는 다양한 산업 표준들 중 임의의 것에 따르는 시그널링 및/또는 프로토콜들을 사용할 수 있다.
더 일반적으로, 본 명세서에 기술되고 도시된 컴퓨팅 디바이스들의 다양한 요소들은 다양한 하드웨어 요소들, 소프트웨어 요소들, 또는 이 둘의 조합을 포함할 수 있다. 하드웨어 요소들의 예들은, 디바이스들, 로직 디바이스들, 컴포넌트들, 프로세서들, 마이크로프로세서들, 회로들, 프로세서 컴포넌트들, 회로 요소들(예를 들어, 트랜지스터들, 저항기들, 커패시터들, 인덕터들 및 기타 등등), 집적 회로들, ASIC(specific integrated circuit)들, PLD(programmable logic device)들, DSP(digital signal processor)들, FPGA(field programmable gate array), 메모리 유닛들, 로직 게이트들, 레지스터들, 반도체 디바이스, 칩들, 마이크로칩들, 칩셋들 및 기타 등등을 포함할 수 있다. 소프트웨어 요소들의 예는 소프트웨어 컴포넌트들, 프로그램들, 애플리케이션들, 컴퓨터 프로그램들, 애플리케이션 프로그램들, 시스템 프로그램들, 소프트웨어 개발 프로그램들, 머신 프로그램들, 운영 체제 소프트웨어들, 미들웨어, 펌웨어, 소프트웨어 모듈들, 루틴들, 서브루틴들, 함수들, 메소드들(methods), 프로시저들(procedures), 소프트웨어 인터페이스들, 애플리케이션 프로그램 인터페이스(API), 명령 세트들, 컴퓨팅 코드, 컴퓨터 코드, 코드 세그먼트들, 컴퓨터 코드 세그먼트들, 워드, 값들, 심볼들 또는 이들의 임의의 조합을 포함할 수 있다. 그러나, 실시예가 하드웨어 요소들을 사용하여 구현되는지 및/또는 소프트웨어 요소들을 사용하여 구현되는지를 결정하는 것은, 주어진 구현에 대해 원하는 대로, 원하는 계산율, 전력 레벨들, 내열성들, 처리 사이클 예산(processing cycle budget), 입력 데이터 레이트들, 출력 데이터 레이트들, 메모리 리소스들, 데이터 버스 속도들, 및 다른 설계 또는 성능 제약들과 같은, 임의의 수의 인자들에 따라 달라질 수 있다.
일부 실시예들은 "일 실시예" 또는 "실시예"라는 표현들과 함께 이들의 파생어를 이용하여 설명될 수 있다. 이러한 용어들은, 해당 실시예와 관련하여 설명되는 특정한 특징, 구조, 또는 특성이 적어도 일 실시예에 포함된다는 것을 의미한다. 명세서의 다양한 곳에서의 문구 "일 실시예에서"의 등장은 반드시 모두가 동일한 실시예를 지칭하는 것은 아니다. 또한, 일부 실시예들은 "결합된" 및 "연결된"이라는 표현들과 함께 이들의 파생어를 이용하여 설명될 수 있다. 이러한 용어들은 반드시 서로에 대해 동의어로서 의도된 것은 아니다. 예를 들어, 일부 실시예들은 2개 이상의 요소들이 서로 물리적 또는 전기적으로 직접 접촉하고 있다는 것을 나타내기 위해, "연결된" 및/또는 "결합된"이라는 용어들을 사용하여 설명될 수 있다. 그러나, 용어 "결합된"은 또한 2개 이상의 요소들이 서로 직접 접촉하고 있지 않지만 여전히 서로 협력하거나 상호작용한다는 것을 의미할 수 있다. 더욱이, 상이한 실시예들로부터의 양태들 또는 요소들이 조합될 수 있다.
본 개시의 요약서는 독자로 하여금 기술적 개시의 본질을 신속하게 확인하는 것을 허용하도록 제공되는 것임이 강조된다. 이는 청구항들의 범위 또는 의미를 해석하거나 제한하도록 사용되지 않을 것이라는 이해를 가지고 제시된다. 또한, 이상의 상세 설명에서는, 개시를 간소화하기 위해 다양한 특징들이 단일의 실시예에 함께 그룹화되어 있다는 것을 알 수 있다. 이러한 개시 방법은 청구되는 실시예들이 각각의 청구항에서 명시적으로 나열되는 것보다 더 많은 특징들을 요구한다는 의도를 반영하는 것으로서 해석되지 않아야 한다. 오히려, 이하의 청구항들이 반영하는 바와 같이, 창의적인 주제는 단일의 개시되는 실시예의 모든 특징들보다 더 적은 것에 있을 수 있다. 따라서, 이하의 청구항들은 이로써 상세 설명에 통합되고, 각각의 청구항은 개별 실시예로서 자립한다.
첨부된 청구항들에서, 용어 "포함하는(including)" 및 "여기에서(in which)"는 제각기 용어 "포함하는(comprising)" 및 "여기서(wherein)"와 평문 등가물들로서 사용된다. 또한, 용어들 "제1", "제2", "제3", 및 기타 등등은 단순히 라벨들로서 이용된 것이고, 자신들의 대상들에 대한 수치적 요건을 부과하도록 의도되지는 않는다.
위에 설명된 것들은 개시되는 아키텍처의 예들을 포함한다. 물론, 컴포넌트들 및/또는 방법론들의 모든 인식 가능한 조합을 설명하는 것이 가능하지는 않지만, 본 기술분야의 통상의 기술자라면 많은 추가적 조합들 및 치환들이 가능하다는 점을 인식할 수 있을 것이다. 따라서, 신규한 아키텍처가, 첨부된 청구항들의 사상 및 범위 내에 있는 모든 이러한 변경들, 수정들, 및 변형들을 포괄하는 것으로 의도된다. 상세한 개시는 이제 추가적 실시예들에 관련된 예들을 제공하는 것에 의지한다. 이하 제공되는 예들은 제한적인 것으로 의도되는 것이 아니다.
예 1: 전력 우선 컴퓨팅 디바이스를 위한 장치로서, 오디오 입력 디바이스; 상기 오디오 입력 디바이스에 동작 가능하게 결합된 오디오 검출기 - 상기 오디오 검출기는 상기 오디오 입력 디바이스에 의해 수신된 오디오 신호를 검출하는 것임 -; 상기 오디오 신호로부터 오디오 입력을 캡처하는 오디오 레코더; 네트워크 인터페이스; 상기 네트워크 인터페이스에 동작 가능하게 결합된 오디오 처리 조정기 - 상기 오디오 처리 조정기는 상기 네트워크 인터페이스를 통해 이용 가능한 보조 디바이스를 웨이크(wake)할지를 결정하고, 상기 오디오 레코더를 이용하여 상기 오디오 입력을 캡처할지를 결정하는 것임 - 를 포함하는 장치.
예 2: 예 1에 있어서, 상기 오디오 입력을 처리하도록 구성된 오디오 프로세서를 추가로 포함하고, 상기 오디오 처리 조정기는 상기 오디오 프로세서를 이용하여 상기 오디오 입력의 적어도 일부를 처리할지를 추가로 결정하는, 장치.
예 3: 예 2에 있어서, 상기 오디오 신호에 대응하는 컨텍스트 특성을 결정하는 컨텍스트 엔진을 추가로 포함하는, 장치.
예 4: 예 3에 있어서, 상기 컨텍스트 특성은 상기 오디오 신호로부터 캡처된 상기 오디오 입력의 품질의 표시를 포함하는, 장치.
예 5: 예 4에 있어서, 상기 오디오 처리 조정기는 상기 오디오 품질이 오디오 품질 임계값을 초과하는지를 추가로 결정하는, 장치.
예 6: 예 5에 있어서, 상기 오디오 처리 조정기는 상기 오디오 품질이 상기 오디오 품질 임계값을 초과하지 않는다는 결정에 기초하여 상기 보조 디바이스를 웨이크하기로 결정하는, 장치.
예 7: 예 5에 있어서, 상기 오디오 처리 조정기는 상기 오디오 품질이 상기 오디오 품질 임계값을 초과한다는 결정에 기초하여 상기 보조 디바이스를 웨이크하지 않기로 결정하는, 장치.
예 8: 예 2에 있어서, 상기 오디오 처리 조정기는 상기 오디오 검출기가 상기 오디오 신호를 검출하는 것에 기초하여 상기 보조 디바이스를 웨이크하기로 결정하고, 상기 보조 디바이스를 웨이크하는 것은 상기 보조 디바이스에게 상기 오디오 신호로부터 2차 오디오 입력을 캡처하도록 지시하는 것을 포함하는, 장치.
예 9: 예 8에 있어서, 상기 오디오 처리 조정기는 상기 오디오 입력의 적어도 일부가 상기 오디오 프로세서에 의해 처리될 수 있는지를 추가로 결정하는, 장치.
예 10: 예 9에 있어서, 상기 오디오 처리 조정기는 상기 오디오 입력의 적어도 일부가 처리될 수 없다는 결정에 기초하여 상기 보조 디바이스에게 상기 2차 오디오 입력의 적어도 일부를 처리하도록 추가로 지시하고, 상기 2차 오디오 입력의 상기 일부는 상기 오디오 입력의 상기 일부에 대응하는, 장치.
예 11: 예 2에 있어서, 센서를 추가로 포함하고, 상기 컨텍스트 특성은 상기 센서로부터의 출력에 대응하는, 장치.
예 12: 예 11에 있어서, 상기 센서는 가속도계이고, 상기 컨텍스트 특성은 상기 전력 우선 디바이스에 대응하는 활동 레벨인, 장치.
예 13: 예 12에 있어서, 상기 오디오 처리 조정기는 상기 활동 레벨이 활동 레벨 임계값을 초과하는지를 추가로 결정하는, 장치.
예 14: 예 13에 있어서, 상기 오디오 처리 조정기는 상기 활동 레벨이 상기 활동 레벨 임계값을 초과한다는 결정에 기초하여 상기 보조 디바이스를 웨이크하기로 결정하는, 장치.
예 15: 예 14에 있어서, 상기 오디오 처리 조정기는 상기 오디오 검출기가 상기 오디오 신호를 검출하는 것에 기초하여 상기 보조 디바이스를 웨이크하기로 결정하고, 상기 보조 디바이스를 웨이크하는 것은 상기 보조 디바이스에게 상기 오디오 신호로부터 2차 오디오 입력을 캡처하도록 지시하는 것을 포함하는, 장치.
예 16: 예 15에 있어서, 상기 오디오 처리 조정기는 상기 활동 레벨이 상기 활동 레벨 임계값을 초과한다는 결정에 기초하여 상기 보조 디바이스에게 상기 2차 오디오 입력의 적어도 일부를 처리하도록 추가로 지시하는, 장치.
예 17: 예 1 내지 예 16 중 어느 하나에 있어서, 상기 네트워크 인터페이스는 개인 영역 네트워크 라디오인, 장치.
예 18: 예 1 내지 예 16 중 어느 하나에 있어서, 전원; 및 상기 전원에 동작 가능하게 결합된 에너지 획득 디바이스를 추가로 포함하는, 장치.
예 19: 예 18에 있어서, 상기 전원은 재충전 가능하고 상기 에너지 획득 디바이스가 상기 전원을 충전하는, 장치.
예 20: 예 4에 있어서, 상기 전력 우선 컴퓨팅 디바이스는 웨어러블 컴퓨팅 디바이스인, 장치.
예 21: 예 20에 있어서, 상기 전력 우선 컴퓨팅 디바이스는 신발, 모자, 목걸이, 시계, 셔츠, 재킷, 또는 안경인, 장치.
예 22: 예 1 내지 예 16 중 어느 하나에 있어서, 상기 네트워크 인터페이스는 Bluetooth 라디오, ZigBee 라디오, ANT 라디오, 또는 RFID 라디오인, 장치.
예 23: 예 1 내지 예 16 중 어느 하나에 있어서, 상기 전력 우선 컴퓨팅 디바이스는 논-웨어러블 디바이스(non-wearable device)인, 장치.
예 24: 전력 우선 컴퓨팅 디바이스에 의해 구현되는 방법으로서, 오디오 신호를 검출하는 단계; 상기 오디오 신호로부터 오디오 입력을 캡처하는 단계; 및 네트워크를 통해 이용 가능한 보조 디바이스를 웨이크할지를 결정하는 단계를 포함하는, 방법.
예 25: 예 24에 있어서, 센서로부터의 출력을 수신하는 단계; 및 상기 센서로부터의 상기 출력에 기초하여 상기 오디오 신호에 대응하는 컨텍스트 특성을 결정하는 단계를 추가로 포함하고, 상기 보조 디바이스를 웨이크할지를 결정하는 단계는 상기 컨텍스트 특성에 기초하는, 방법.
예 26: 예 25에 있어서, 상기 센서는 가속도계이고 상기 컨텍스트 특성은 활동 레벨이고, 상기 방법은 상기 활동 레벨이 활동 레벨 임계값을 초과하는지를 결정하는 단계를 추가로 포함하고, 상기 보조 디바이스를 웨이크할지를 결정하는 단계는 상기 활동 레벨이 상기 활동 레벨 임계값을 초과한다는 결정에 기초하여 상기 보조 디바이스를 웨이크하는 단계를 포함하는, 방법.
예 27: 예 26에 있어서, 상기 보조 디바이스를 웨이크하는 단계는 상기 보조 디바이스에게 상기 오디오 신호로부터 2차 오디오 입력을 캡처하도록 지시하는 단계를 포함하는, 방법.
예 28: 예 24에 있어서, 상기 오디오 신호로부터 캡처된 상기 오디오 입력의 품질을 결정하는 단계; 및 상기 오디오 품질이 오디오 품질 임계값을 초과하는지를 결정하는 단계를 추가로 포함하는, 방법.
예 29: 예 28에 있어서, 상기 보조 디바이스를 웨이크할지를 결정하는 단계는 상기 오디오 품질이 상기 오디오 품질 임계값을 초과하지 않는다는 결정에 기초하여 상기 보조 디바이스를 웨이크하는 단계를 포함하는, 방법.
예 30: 예 28에 있어서, 상기 보조 디바이스를 웨이크할지를 결정하는 단계는 상기 오디오 품질이 상기 오디오 품질 임계값을 초과한다는 결정에 기초하여 상기 보조 디바이스를 웨이크하지 않는 단계를 포함하는, 방법.
예 31: 예 24에 있어서, 상기 보조 디바이스를 웨이크할지를 결정하는 단계는 상기 오디오 신호를 검출하는 것에 기초하여 상기 보조 디바이스를 웨이크하는 단계를 포함하고, 상기 보조 디바이스를 웨이크하는 단계는 상기 보조 디바이스에게 상기 오디오 신호로부터 2차 오디오 입력을 캡처하도록 지시하는 단계를 포함하는, 방법.
예 32: 예 31에 있어서, 상기 오디오 입력을 처리하는 단계; 및 상기 오디오 입력의 적어도 일부가 처리될 수 있는지를 결정하는 단계를 추가로 포함하는, 방법.
예 33: 예 33에 있어서, 상기 오디오 입력의 적어도 일부가 처리될 수 없다는 결정에 기초하여 상기 보조 디바이스에게 상기 2차 오디오 입력의 적어도 일부를 처리하도록 지시하는 단계를 추가로 포함하고, 상기 2차 오디오 입력의 상기 일부는 상기 오디오 입력의 상기 일부에 대응하는, 방법.
예 34: 예 24 내지 예 33 중 어느 하나에 있어서, 상기 보조 디바이스는 제1 보조 디바이스이고, 상기 제1 보조 디바이스를 웨이크할지를 결정하는 단계는 상기 제1 보조 디바이스를 웨이크할지 또는 상기 네트워크를 통해 이용 가능한 제2 보조 디바이스를 웨이크할지를 결정하는 단계를 포함하는, 방법.
예 35: 예 24 내지 예 33 중 어느 하나에 있어서, 상기 보조 디바이스를 웨이크하는 단계는 상기 보조 디바이스에 대응하는 수동 라디오에 신호를 송신하는 단계를 포함하는, 방법.
예 36: 예 35에 있어서, 상기 수동 라디오는 Bluetooth 라디오, ZigBee 라디오, ANT 라디오, 또는 RFID 라디오인, 방법.
예 37: 예 24 내지 예 36 중 어느 하나의 방법을 수행하는 수단을 포함하는 장치.
예 38: 전력 우선 컴퓨팅 디바이스에서 실행되는 것에 응답하여 상기 전력 우선 컴퓨팅 디바이스로 하여금 예 24 내지 예 36 중 어느 하나의 방법을 수행하게 하는 복수의 명령을 포함하는 적어도 하나의 머신 판독가능 매체.
예 39. 개인 영역 네트워크를 위한 장치로서, 프로세서;
상기 프로세서에 동작 가능하게 연결된 라디오; 무선 신호들을 송신 또는 수신하기 위해 상기 라디오에 동작 가능하게 연결된 하나 이상의 안테나; 오디오 신호를 캡처하고 수신하기 위해 상기 프로세서에 동작 가능하게 연결된 오디오 입력 디바이스; 및 상기 프로세서에 의해 실행되는 것에 응답하여, 상기 프로세서, 상기 라디오, 또는 상기 오디오 입력 디바이스로 하여금 예 24 내지 예 36 중 어느 하나의 방법을 수행하게 하는 복수의 명령을 포함하는 메모리를 포함하는, 장치.

Claims (25)

  1. 삭제
  2. 삭제
  3. 삭제
  4. 삭제
  5. 삭제
  6. 삭제
  7. 삭제
  8. 삭제
  9. 전력 우선 컴퓨팅 디바이스를 위한 장치로서,
    오디오 입력 디바이스;
    상기 오디오 입력 디바이스에 동작 가능하게 결합된 오디오 검출기 - 상기 오디오 검출기는 상기 오디오 입력 디바이스에 의해 수신된 오디오 신호를 검출하는 것임 -;
    상기 오디오 신호로부터 오디오 입력을 캡처하는 오디오 레코더;
    상기 오디오 입력을 처리하도록 구성된 오디오 프로세서;
    센서;
    상기 센서에 동작 가능하게 결합된 컨텍스트 엔진 - 상기 컨텍스트 엔진은 상기 센서로부터의 출력에 기초하여 상기 오디오 신호에 대응하는 컨텍스트 특성을 결정하는 것임 -;
    네트워크 인터페이스; 및
    상기 네트워크 인터페이스에 동작 가능하게 결합된 오디오 처리 조정기 - 상기 오디오 처리 조정기는 상기 컨텍스트 특성에 기초하여 상기 네트워크 인터페이스를 통해 이용 가능한 보조 디바이스를 웨이크할지 여부를 결정하는 것임 - 를 포함하고,
    상기 센서는 가속도계이고, 상기 컨텍스트 특성은 상기 전력 우선 컴퓨팅 디바이스에 대응하는 활동 레벨이고, 상기 오디오 처리 조정기는 상기 활동 레벨이 활동 레벨 임계값을 초과하는지를 추가로 결정하는, 장치.
  10. 삭제
  11. 제9항에 있어서,
    상기 오디오 처리 조정기는 상기 활동 레벨이 상기 활동 레벨 임계값을 초과한다는 결정에 기초하여 상기 보조 디바이스를 웨이크하기로 결정하는, 장치.
  12. 제9항에 있어서,
    상기 오디오 처리 조정기는 상기 오디오 검출기가 상기 오디오 신호를 검출하는 것에 기초하여 상기 보조 디바이스를 웨이크하기로 결정하고, 상기 보조 디바이스를 웨이크하는 것은 상기 보조 디바이스에게 상기 오디오 신호로부터 2차 오디오 입력을 캡처하도록 지시하는 것을 포함하는, 장치.
  13. 제12항에 있어서,
    상기 오디오 처리 조정기는 상기 활동 레벨이 상기 활동 레벨 임계값을 초과한다는 결정에 기초하여 상기 보조 디바이스에게 상기 2차 오디오 입력의 적어도 일부를 처리하도록 추가로 지시하는, 장치.
  14. 제9항에 있어서,
    전원; 및
    상기 전원에 동작 가능하게 결합된 에너지 획득 디바이스를 추가로 포함하는, 장치.
  15. 제14항에 있어서,
    상기 전원은 재충전 가능하고 상기 에너지 획득 디바이스가 상기 전원을 충전하는, 장치.
  16. 제9항에 있어서,
    상기 전력 우선 컴퓨팅 디바이스는 웨어러블 컴퓨팅 디바이스인, 장치.
  17. 제16항에 있어서,
    상기 전력 우선 컴퓨팅 디바이스는 신발, 모자, 목걸이, 시계, 셔츠, 재킷, 또는 안경인, 장치.
  18. 제9항에 있어서,
    상기 네트워크 인터페이스는 개인 영역 네트워크 라디오인, 장치.
  19. 제9항에 있어서,
    상기 네트워크 인터페이스는 Bluetooth 라디오, ZigBee 라디오, ANT 라디오, 또는 RFID 라디오인, 장치.
  20. 전력 우선 컴퓨팅 디바이스에 의해 구현되는 방법으로서,
    오디오 신호를 검출하는 단계;
    상기 오디오 신호로부터 오디오 입력을 캡처하는 단계;
    네트워크를 통해 이용 가능한 보조 디바이스를 웨이크할지 여부를 결정하는 단계;
    센서로부터의 출력을 수신하는 단계 - 상기 센서는 가속도계임 -;
    상기 센서로부터의 상기 출력에 기초하여 상기 오디오 신호에 대응하는 컨텍스트 특성을 결정하는 단계 - 상기 컨텍스트 특성은 활동 레벨임 -; 및
    상기 활동 레벨이 활동 레벨 임계값을 초과하는지를 결정하는 단계
    를 포함하고,
    상기 보조 디바이스를 웨이크할지 여부를 결정하는 단계는 상기 컨텍스트 특성에 기초하고, 상기 보조 디바이스를 웨이크하기로 결정하는 단계는 상기 활동 레벨이 상기 활동 레벨 임계값을 초과한다는 결정에 기초하여 상기 보조 디바이스를 웨이크하는 단계를 포함하는, 방법.
  21. 삭제
  22. 삭제
  23. 제20항에 있어서,
    상기 보조 디바이스를 웨이크하는 단계는 상기 보조 디바이스에게 상기 오디오 신호로부터 2차 오디오 입력을 캡처하도록 지시하는 단계를 포함하는, 방법.
  24. 제20항에 있어서,
    상기 오디오 신호로부터 캡처된 상기 오디오 입력의 품질을 결정하는 단계; 및
    상기 오디오 품질이 오디오 품질 임계값을 초과하는지를 결정하는 단계를 추가로 포함하는, 방법.
  25. 제24항에 있어서,
    상기 보조 디바이스를 웨이크하기로 결정하는 단계는 상기 오디오 품질이 상기 오디오 품질 임계값을 초과하지 않는다는 결정에 기초하여 상기 보조 디바이스를 웨이크하는 단계를 포함하는, 방법.
KR1020177001088A 2014-08-13 2015-06-25 전력 및 감지에 기초한 분산 음성 입력 처리 KR102237416B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/459,117 US20160049147A1 (en) 2014-08-13 2014-08-13 Distributed voice input processing based on power and sensing
US14/459,117 2014-08-13
PCT/US2015/037572 WO2016025085A1 (en) 2014-08-13 2015-06-25 Distributed voice input processing based on power and sensing

Publications (2)

Publication Number Publication Date
KR20170020862A KR20170020862A (ko) 2017-02-24
KR102237416B1 true KR102237416B1 (ko) 2021-04-07

Family

ID=55302620

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020177001088A KR102237416B1 (ko) 2014-08-13 2015-06-25 전력 및 감지에 기초한 분산 음성 입력 처리

Country Status (6)

Country Link
US (1) US20160049147A1 (ko)
EP (1) EP3180689A4 (ko)
JP (1) JP6396579B2 (ko)
KR (1) KR102237416B1 (ko)
CN (1) CN107077316A (ko)
WO (1) WO2016025085A1 (ko)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10484484B2 (en) 2016-02-05 2019-11-19 International Business Machines Corporation Context-aware task processing for multiple devices
US10044798B2 (en) * 2016-02-05 2018-08-07 International Business Machines Corporation Context-aware task offloading among multiple devices
CN108076476B (zh) * 2016-11-18 2020-11-06 华为技术有限公司 用于传输数据的方法和装置
EP4191412A1 (en) * 2017-12-08 2023-06-07 Google LLC Signal processing coordination among digital voice assistant computing devices
US10971173B2 (en) 2017-12-08 2021-04-06 Google Llc Signal processing coordination among digital voice assistant computing devices
CN111724780B (zh) * 2020-06-12 2023-06-30 北京小米松果电子有限公司 设备的唤醒方法及装置、电子设备、存储介质
CN112382294B (zh) * 2020-11-05 2023-10-20 北京百度网讯科技有限公司 语音识别方法、装置、电子设备和存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060239486A1 (en) * 2000-06-12 2006-10-26 Eves David A Portable audio devices
US20140163978A1 (en) * 2012-12-11 2014-06-12 Amazon Technologies, Inc. Speech recognition power management

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6070140A (en) * 1995-06-05 2000-05-30 Tran; Bao Q. Speech recognizer
JP2002078072A (ja) * 2000-08-23 2002-03-15 Toshiba Corp 携帯型コンピュータ
US6801140B2 (en) * 2001-01-02 2004-10-05 Nokia Corporation System and method for smart clothing and wearable electronic devices
US20030158609A1 (en) * 2002-02-19 2003-08-21 Koninklijke Philips Electronics N.V. Power saving management for portable devices
JP2007086281A (ja) * 2005-09-21 2007-04-05 Sharp Corp 省電型携帯情報処理装置
WO2007052625A1 (ja) * 2005-10-31 2007-05-10 Matsushita Electric Industrial Co., Ltd. 映像音声視聴システム
JP4569842B2 (ja) * 2007-11-12 2010-10-27 ソニー株式会社 オーディオ装置およびこのオーディオ装置に用いられる外部アダプタ
JP2009224911A (ja) * 2008-03-13 2009-10-01 Onkyo Corp ヘッドホン
TWM381824U (en) * 2009-09-03 2010-06-01 Tritan Technology Inc Wakeup device for power source variation in standby mode
JP2011066544A (ja) * 2009-09-15 2011-03-31 Nippon Telegr & Teleph Corp <Ntt> ネットワーク・スピーカシステム、送信装置、再生制御方法、およびネットワーク・スピーカプログラム
US8796888B2 (en) * 2010-07-07 2014-08-05 Adaptive Materials, Inc. Wearable power management system
US20120161721A1 (en) * 2010-12-24 2012-06-28 Antony Kalugumalai Neethimanickam Power harvesting systems
WO2013081578A1 (en) * 2011-11-28 2013-06-06 Intel Corporation Methods and apparatuses to wake computer systems from sleep states
JP6042454B2 (ja) * 2012-01-25 2016-12-14 エンパイア テクノロジー ディベロップメント エルエルシー ユーザ生成によるデータセンターの省電力
US8407502B1 (en) * 2012-07-12 2013-03-26 Google Inc. Power saving techniques for battery-powered computing devices
CN204147427U (zh) * 2012-11-26 2015-02-11 塞恩克公司 可穿戴的皮肤电刺激设备
EP2941769B1 (en) * 2013-01-04 2019-05-08 Kopin Corporation Bifurcated speech recognition
CN103595869A (zh) * 2013-11-15 2014-02-19 华为终端有限公司 一种终端语音控制方法、装置及终端
CN103646646B (zh) * 2013-11-27 2018-08-31 联想(北京)有限公司 一种语音控制方法及电子设备
US20150170249A1 (en) * 2013-12-13 2015-06-18 Ebay Inc. Item search and refinement using wearable device

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060239486A1 (en) * 2000-06-12 2006-10-26 Eves David A Portable audio devices
US20140163978A1 (en) * 2012-12-11 2014-06-12 Amazon Technologies, Inc. Speech recognition power management

Also Published As

Publication number Publication date
WO2016025085A1 (en) 2016-02-18
JP2017526961A (ja) 2017-09-14
JP6396579B2 (ja) 2018-09-26
EP3180689A4 (en) 2018-04-18
EP3180689A1 (en) 2017-06-21
US20160049147A1 (en) 2016-02-18
KR20170020862A (ko) 2017-02-24
CN107077316A (zh) 2017-08-18

Similar Documents

Publication Publication Date Title
KR102237416B1 (ko) 전력 및 감지에 기초한 분산 음성 입력 처리
US11574536B2 (en) Techniques for detecting sensor inputs on a wearable wireless device
CN107643921B (zh) 用于激活语音助手的设备、方法和计算机可读存储介质
US11314943B2 (en) Typifying emotional indicators for digital messaging
KR102448786B1 (ko) 전자 장치 및 그의 동작 방법
KR102018152B1 (ko) 항상-온-항상-청취 음성 인식 시스템을 위한 위치 인식 전력 관리 스킴
EP3281089B1 (en) Smart device and method of operating the same
KR20170097519A (ko) 음성 처리 방법 및 장치
CN110036363B (zh) 调整屏幕尺寸的方法及用于其的电子装置
KR102517228B1 (ko) 사용자의 입력에 대한 외부 전자 장치의 응답 시간에 기반하여 지정된 기능을 제어하는 전자 장치 및 그의 방법
US9917459B2 (en) Cross body charging for wearable devices
JP6515179B2 (ja) ウェアラブル調整現実システムおよび方法
US20220317964A1 (en) Display method for interactive system, interactive system, and electronic device
CN106796532B (zh) 用于电子设备的虚拟传感器中枢
WO2017028198A1 (zh) 一种终端的休眠唤醒系统、方法及装置
CN115686252B (zh) 触控屏中的位置信息计算方法和电子设备
US9820513B2 (en) Depth proximity layering for wearable devices
WO2024066490A1 (zh) 一种文字美化方法及电子设备
US11029741B2 (en) Deactivating a display of a smart display device based on a vision-based mechanism

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant