TWI798291B - 支援音訊回放期間中斷的應用處理器、包含該處理器的電子裝置以及其操作方法 - Google Patents

支援音訊回放期間中斷的應用處理器、包含該處理器的電子裝置以及其操作方法 Download PDF

Info

Publication number
TWI798291B
TWI798291B TW107141342A TW107141342A TWI798291B TW I798291 B TWI798291 B TW I798291B TW 107141342 A TW107141342 A TW 107141342A TW 107141342 A TW107141342 A TW 107141342A TW I798291 B TWI798291 B TW I798291B
Authority
TW
Taiwan
Prior art keywords
audio
trigger
voice
interface
application processor
Prior art date
Application number
TW107141342A
Other languages
English (en)
Other versions
TW201933088A (zh
Inventor
金善奎
Original Assignee
南韓商三星電子股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 南韓商三星電子股份有限公司 filed Critical 南韓商三星電子股份有限公司
Publication of TW201933088A publication Critical patent/TW201933088A/zh
Application granted granted Critical
Publication of TWI798291B publication Critical patent/TWI798291B/zh

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26—Power supply means, e.g. regulation thereof
    • G06F1/32—Means for saving power
    • G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/14—Handling requests for interconnection or transfer
    • G06F13/20—Handling requests for interconnection or transfer for access to input/output bus
    • G06F13/24—Handling requests for interconnection or transfer for access to input/output bus using interrupt
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26—Power supply means, e.g. regulation thereof
    • G06F1/32—Means for saving power
    • G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3234—Power saving characterised by the action undertaken
    • G06F1/3287—Power saving characterised by the action undertaken by switching off individual functional units in the computer system
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00—Digital computers in general; Data processing equipment in general
    • G06F15/76—Architectures of general purpose stored program computers
    • G06F15/78—Architectures of general purpose stored program computers comprising a single central processing unit
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/162—Interface to dedicated audio devices, e.g. audio drivers, interface to CODECs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2213/00—Indexing scheme relating to interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F2213/24—Interrupt
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Hardware Design (AREA)
  • Signal Processing (AREA)
  • Computational Linguistics (AREA)
  • Quality & Reliability (AREA)
  • Acoustics & Sound (AREA)
  • Computing Systems (AREA)
  • Telephone Function (AREA)
  • Input Circuits Of Receivers And Coupling Of Receivers And Audio Equipment (AREA)

Abstract

一種應用處理器包括系統匯流排以及主機處理器、語音 觸發系統及音訊子系統，所述主機處理器、所述語音觸發系統及所述音訊子系統電性連接至所述系統匯流排。所述語音觸發系統基於藉由觸發介面所提供的觸發輸入訊號來執行語音觸發操作併發佈觸發事件。所述音訊子系統處理藉由音訊介面所重播或記錄的音訊串流，且在藉由所述音訊介面執行音訊重播操作時藉由所述音訊介面接收中斷訊號。

Description

支援音訊回放期間中斷的應用處理器、包含該 處理器的電子裝置以及其操作方法 [相關申請案的交叉參考]
本申請案主張於2018年1月25日提出申請的韓國專利申請案第10-2018-0009376號的優先權，所述韓國專利申請案的揭露內容全部併入本文中供參考。
本發明概念的示例性實施例大體而言是有關於半導體積體電路，且更具體而言是有關於一種支援音訊回放期間中斷的應用處理器、一種包含所述應用處理器的電子裝置及一種相關聯的方法。
基於語音(voice-based)的或基於聲音(sound-based)的智慧介面(有時被稱為虛擬助理(virtual assistant))正變得更加普遍。此類基於語音的智慧介面的一個優點是，使用者可在不觸控或甚至不注視裝置的情況下以免持方式與裝置互動。當人們 無法或不應實體上握持裝置時，例如當人們正在駕駛車輛時，免持操作可為特別有益的。然而，為起始基於語音的智慧介面，使用者通常必須按壓按鈕或選擇觸控螢幕上的圖符。
因此，人們正在開發容許使用除觸覺輸入之外的輸入(例如，語音輸入)在電子裝置上啟用基於語音的智慧介面的方法。為進行運轉，此種電子裝置可連續地或間歇地監測音訊通道，以偵測語音輸入併發佈觸發事件來起始基於語音的智慧介面。發佈觸發事件的操作可被稱為語音觸發操作(voice trigger operation)。對音訊通道的監測會消耗電力，而電力在依賴於電池的手持式或可攜式裝置上是有限的資源。
本發明概念的示例性實施例提供一種應用處理器及一種包含應用處理器的電子裝置，所述應用處理器能夠在音訊回放期間以低電力消耗來執行中斷及回音消除(echo cancellation)。
本發明概念的示例性實施例提供一種操作應用處理器的方法，所述應用處理器能夠在音訊回放期間以低電力消耗來執行中斷及回音消除。
根據本發明概念的示例性實施例，一種應用處理器包括系統匯流排以及主機處理器、語音觸發系統及音訊子系統，所述主機處理器、所述語音觸發系統及所述音訊子系統電性連接至所述系統匯流排。所述語音觸發系統基於藉由觸發介面所提供的觸發輸入訊號來執行語音觸發操作併發佈觸發事件。所述音訊子系 統處理藉由音訊介面所重播或記錄的音訊串流，且在藉由所述音訊介面執行音訊重播操作時藉由所述音訊介面接收中斷訊號。
根據本發明概念的示例性實施例，一種電子裝置包括應用處理器及至少一個音訊輸入/輸出裝置。所述應用處理器包括系統匯流排、以及主機處理器、語音觸發系統及音訊子系統，所述主機處理器、所述語音觸發系統及所述音訊子系統電性連接至所述系統匯流排。所述語音觸發系統基於藉由觸發介面所提供的觸發輸入訊號來執行語音觸發操作併發佈觸發事件。所述音訊子系統處理藉由音訊介面所重播或記錄的音訊串流且在藉由所述音訊介面執行音訊重播操作時藉由所述音訊介面接收中斷訊號。
根據本發明概念的示例性實施例，一種操作應用處理器的方法包括：接收藉由觸發介面所提供的觸發輸入訊號；以及由語音觸發系統基於所述觸發輸入訊號來發佈觸發事件。在形成所述應用處理器的單個半導體晶片中，所述語音觸發系統、音訊子系統及主機處理器藉由系統匯流排彼此電性連接。所述方法更包括由所述音訊子系統處理藉由音訊介面所重播或記錄的音訊串。所述方法更包括在藉由所述音訊介面執行音訊重播操作時，由所述音訊子系統藉由所述音訊介面接收中斷訊號。
根據本發明概念示例性實施例的應用處理器、包含所述應用處理器的電子裝置及操作所述應用處理器的方法可藉由將系統匯流排、主機處理器、語音觸發系統及音訊子系統一起整合於所述應用處理器中、因此形成晶片上(on-chip)語音觸發系統而 以低電力消耗及高效率來執行語音觸發操作。晶片上語音觸發系統可代替應用處理器中的主機處理器來執行一些操作，以降低電子裝置的電力消耗並改良電子裝置的效能。另外，藉由支援在正執行音訊重播操作時利用音訊介面進行中斷，可以低電力消耗來執行音訊重播操作，且可改良語音觸發操作的效能。
2:前置攝影機
3、62、98:揚聲器
4:近接感測器
5:環境光感測器
6:通用串列匯流排介面
7:電源按鈕
8:音量按鈕
9:顯示與觸控螢幕
10:圖符
11:選單按鈕
12:主頁按鈕
13:後退按鈕
14、99:麥克風
15:音訊輸出介面
16:天線
31、SEN1:感測器
32、SEN2:感測器
40、DMIC:數位麥克風
50、CODEC:音訊編解碼器
61、AMIC:類比麥克風
70、BTM:藍芽模組
72、82:藍芽揚聲器
80、BTAUD:藍芽音訊模組
81、BMIC:藍芽麥克風
85:藍芽裝置
90、USBM:通用串列匯流排模組
91、UMIC:通用串列匯流排麥克風
92:通用串列匯流排揚聲器
95:聲回音消除器/回音消除器
96:濾波器
97:回音抑制器
100、CPU:主機處理器
200、206、207、208、209、VTS:語音觸發系統
216、217、218、219、IFV:觸發介面電路
226、227、228、229、WRPP:包裝器
236、237、238、239、MEMV:觸發記憶體
246、247、248、249、PRCV:觸發處理器
250、AUD:音訊處理系統
300、306、307、308、309、ABOX:音訊子系統
316、317、IFA1:第一音訊介面電路
318、319、IFA:音訊介面電路
326、327、DMA1:第一直接記憶體存取控制器
328、329、DMA:直接記憶體存取控制器
336、337、338、339、MEMA:音訊記憶體
346、347、348、349、PRCA:音訊處理器
356、357、IFA2:第二音訊介面電路
358、359:橋接器電路
366、367、DMA2:第二直接記憶體存取控制器
400、CHUB:感測器中樞
500:直接匯流排
700、ITRC:中斷控制器
800、AEC:回音消除器
900、MBX、MBXa、MBXb、MBXc:信箱模組
910:介面
920:訊息方塊
930:第一暫存器電路
940:第二暫存器電路
1000、1000a:電子裝置
1200:記憶體裝置
1300:儲存裝置
1400:功能模組/通訊模組
1500:功能模組/攝影機模組
1600:功能模組/輸入/輸出模組
1700:功能模組/音訊模組
1800、PMIC:電源管理積體電路
2000、2006、2007、2008、2009、AP:應用處理器
2100:系統匯流排
2110:AHB2APB橋接器
AIF:音訊介面
APM:工作電源管理器
EN、EN1、EN2、EN3、EN4:電源賦能訊號
INTCR0、INTGR0、INTMR0、INTMSR0、INTSR0、INTCR1、INTGR1、INTMR1、INTMSR1、INTSR1:暫存器
ITRB、ITRR:中斷訊號
MICCLK:麥克風時脈訊號
PD11、PD12、PD13:焊墊
PD21:音訊輸入焊墊
PD22:音訊輸出焊墊
PD23:藍芽輸入焊墊
PD24:藍芽輸出焊墊
PD25:附加中斷焊墊/藍芽中斷焊墊/附加藍芽中斷焊墊/附加USB中斷焊墊
PG1、PG2、PG3、PG4:電源閘控電路
PWDM1:第一電源域/始終供電域
PWDM2:第二電源域/省電域
S100、S200、S300、S510、S520、S530、S540、S610、S620、S630、S640:操作
SAMIC、SDMIC:觸發輸入訊號
SDI、SDIB、y(t):音訊輸入訊號
SDO、SDOB、x(t):音訊輸出訊號
s(t):回音訊號
s'(t):所估計回音訊號
SYSCNT:系統計數器
TIF:觸發介面
TM:時間資訊
v(t):近端訊號
v'(t):所估計近端訊號
藉由參照附圖詳細地闡述本發明概念的示例性實施例，本發明概念的以上及其他特徵將變得更加顯而易見，附圖中：圖1是說明根據本發明概念示例性實施例操作應用處理器的方法的流程圖。
圖2A是說明根據本發明概念示例性實施例的電子裝置的方塊圖。
圖2B是圖2A所示電子裝置的示例性實施方案。
圖3是說明根據本發明概念示例性實施例的應用處理器的方塊圖。
圖4是說明根據本發明概念示例性實施例的應用處理器中的語音觸發系統與音訊子系統的示例性連接的方塊圖。
圖5A是說明圖4所示應用處理器中所包含的信箱模組(mail box module)的示例性實施例的圖。
圖5B是說明根據本發明概念示例性實施例的應用處理器中所包含的回音消除器的方塊圖。
圖6是說明根據本發明概念示例性實施例操作應用處理器的 方法的流程圖。
圖7是說明根據本發明概念示例性實施例的應用處理器中的語音觸發系統與音訊子系統的示例性連接的方塊圖。
圖8是說明根據本發明概念示例性實施例操作應用處理器的方法的流程圖。
圖9及圖10是說明根據本發明概念示例性實施例的應用處理器中的語音觸發系統與音訊子系統的示例性連接的方塊圖。
圖11A及圖11B是用於闡述根據本發明概念示例性實施例的應用處理器的電源域(power domain)的圖。
在下文中，將參照附圖更全面地闡述本發明概念的示例性實施例。在所有附圖中，相同的參考編號可指代相同的元件。
應理解，用語「第一」、「第二」、「第三」等在本文中用於將一個元件與另一元件區分開，且所述元件不受該些用語限制。因此，示例性實施例中的「第一」元件在另一示例性實施例中可被闡述為「第二」元件。
圖1是說明根據本發明概念示例性實施例操作應用處理器的方法的流程圖。
參照圖1，在示例性實施例中，應用處理器包括被整合為單個晶片的主機處理器、語音觸發系統、音訊子系統、及系統匯流排。所述系統匯流排電性連接所述主機處理器、所述語音觸發系統及所述音訊子系統。在操作S100中，由語音觸發系統基於 藉由觸發介面所提供的觸發輸入訊號來執行語音觸發操作以發佈觸發事件。在操作S200中，由音訊子系統處理藉由音訊介面所重播或記錄的音訊串流。所述音訊子系統可更支援音訊串流在音訊介面與記憶體裝置之間的傳遞。
在本文中，用語「語音觸發系統(voice trigger system)」與「語音觸發電路(voice trigger circuit)」可互換地使用，且用語「音訊子系統(audio subsystem)」與「音訊子系統電路(audio subsystem circuit)」可互換地使用。
根據本發明概念示例性實施例的語音觸發操作指示用以監測觸發輸入訊號是否包含特定觸發聲音並在偵測到所述觸發聲音時發佈觸發事件(例如中斷訊號)以起始語音辨識模式或基於語音的智慧介面的操作。語音辨識模式的起始可包括將主機處理器及/或系統匯流排自睡眠模式啟動成工作模式(active mode)。為降低電力消耗，語音觸發系統可在主機處理器及系統匯流排處於睡眠模式時被賦能(enable)以執行語音觸發操作，且主機處理器及系統匯流排只有在觸發事件被發佈且語音辨識被起始時才可被啟動成工作模式。
在示例性實施例中，觸發聲音可例如包括人類語音的詞語或片語、或者除人類語音之外的聲音，例如口哨聲、拍手的聲音、汽笛聲、碰撞的聲音、具有特定頻率範圍的音波等。
在操作S300中，在藉由音訊介面執行音訊重播操作時，由音訊子系統藉由音訊介面接收中斷訊號。舉例而言，根據示例 性實施例，同時地，藉由音訊介面接收中斷訊號且藉由音訊介面執行音訊重播操作。
根據本發明概念示例性實施例的應用處理器、包含所述應用處理器的電子裝置及操作所述應用處理器的方法藉由將語音觸發系統整合於所述應用處理器中而以低電力及高效率來執行語音觸發操作。另外，藉由支援在音訊重播操作期間利用音訊介面進行中斷程序(例如，藉由支援在正回放音訊資料時利用音訊介面進行中斷程序)，可以低電力消耗來執行音訊重播操作，且可改良語音觸發操作的效能。
圖2A是說明根據本發明概念示例性實施例的電子裝置的方塊圖。
參照圖2A，在示例性實施例中，電子裝置1000包括應用處理器AP 2000、記憶體裝置1200、儲存裝置1300、多個功能模組1400、1500、1600及1700、以及電源管理積體電路PMIC 1800。
應用處理器2000控制電子裝置1000的整體操作。舉例而言，應用處理器2000控制記憶體裝置1200、儲存裝置1300以及所述多個功能模組1400、1500、1600及1700。應用處理器2000可例如為系統晶片(system-on-chip，SoC)。
在示例性實施例中，應用處理器2000包括系統匯流排2100、主機處理器或中央處理單元(central processing unit，CPU)100、語音觸發系統VTS 200、及音訊處理系統AUD 250，後三者電性連接至系統匯流排2100。
語音觸發系統200電性連接至系統匯流排2100，並且基於藉由觸發介面所提供的觸發輸入訊號來執行語音觸發操作併發佈觸發事件。音訊處理系統250可包括至少一音訊子系統，如以下將進行闡述。所述音訊子系統電性連接至系統匯流排2100，且可處理藉由音訊介面所重播或記錄的音訊串流。另外，所述音訊子系統可更支援音訊串流在音訊介面與記憶體裝置1200之間的傳遞。以下將參照圖3至圖10來闡述語音觸發系統200及音訊處理系統250的示例性實施例。
記憶體裝置1200及儲存裝置1300可為電子裝置1000的操作儲存資料。記憶體裝置1200可包括揮發性記憶體裝置，例如動態隨機存取記憶體(dynamic random access memory，DRAM)、靜態隨機存取記憶體(static random access memory，SRAM)、行動DRAM等。儲存裝置1300可包括非揮發性記憶體裝置，例如可抹除可程式化唯讀記憶體(erasable programmable read-only memory，EPROM)、電可抹除可程式化唯讀記憶體(electrically erasable programmable read-only memory，EEPROM)、快閃記憶體、相變隨機存取記憶體(phase change random access memory，PRAM)、電阻隨機存取記憶體(resistance random access memory，RRAM)、奈米浮閘記憶體(nano floating gate memory，NFGM)、聚合物隨機存取記憶體(polymer random access memory，PoRAM)、磁性隨機存取記憶體(magnetic random access memory，MRAM)、鐵電式隨機存取記憶體(ferroelectric random access memory，FRAM)等。在示例性實施例中，儲存裝置1300更包括嵌入式多媒體卡(embedded multimedia card，eMMC)、通用快閃儲存器(universal flash storage，UFS)、固態磁碟機(solid state drive，SSD)、硬碟機(hard disk drive，HDD)、光碟-唯讀記憶體(compact disc-read only memory，CD-ROM)等。
功能模組1400、1500、1600及1700可執行電子裝置1000的各種功能。舉例而言，電子裝置1000可包括執行通訊功能(例如，分碼多重存取(code division multiple access，CDMA)模組、長期演進(long term evolution，LTE)模組、射頻(radio frequency，RF)模組、超寬頻(ultra-wideband，UWB)模組、無線區域網路(wireless local area network，WLAN)模組、全球微波存取互通(worldwide interoperability for microwave access，WIMAX)模組等)的通訊模組1400。電子裝置1000可更包括：攝影機模組1500，執行攝影機功能；輸入/輸出(input/output，I/O)模組1600，包括例如顯示模組及觸控面板模組，所述顯示模組執行顯示功能，所述觸控面板模組執行觸控感測功能；以及音訊模組1700，包括例如麥克風(microphone，MIC)模組、揚聲器模組等，執行音訊訊號的輸入/輸出。在示例性實施例中，電子裝置1000可更包括全球定位系統(global positioning system，GPS)模組、陀螺儀模組等。應理解，電子裝置1000中所包含的功能模組1400、1500、1600及1700並非僅限於圖2A中所繪示的那些。
電源管理積體電路1800可將操作電壓提供至應用處理器2000、記憶體裝置1200、儲存裝置1300、以及功能模組1400、1500、1600及1700。
圖2B是圖2A所示電子裝置的示例性實施方案。
圖2A所示電子裝置1000可為例如以下等的裝置：桌上型電腦、膝上型電腦、蜂巢式電話(cellular phone)、智慧型電話、MP3播放器、個人數位助理(personal digital assistant，PDA)、可攜式多媒體播放器(portable multimedia player，PMP)、數位電視機、數位攝影機、伺服器電腦、工作站、機上盒、可攜式遊戲機、導航系統、可穿戴裝置、物聯網(Internet of Things，IoT)裝置、萬物聯網(Internet of Everything，IoE)裝置、電子書、虛擬實境(virtual reality，VR)裝置、擴增實境(augmented reality，AR)裝置等。電子裝置1000通常可因應於直接使用者輸入而運作，但亦可用於藉由網際網路或其他網路系統與其他裝置進行通訊。圖2B說明包括觸控螢幕的蜂巢式電話或智慧型電話作為圖2A所示電子裝置1000的實例。
參照圖2B，在示例性實施例中，電子裝置1000a包括前置攝影機2、揚聲器3、近接感測器4、環境光感測器5、通用串列匯流排(universal serial bus，USB)介面6、電源按鈕7、音量按鈕8、顯示與觸控螢幕9、圖符10、選單按鈕11、主頁按鈕(home button)12、後退按鈕(back button)13、麥克風14、音訊輸出介面15、及天線16。應理解，圖2B中所繪示的元件是示 例性的，且電子裝置1000a並非僅限於此。
前置攝影機2與顯示與觸控螢幕9面向同一方向，且可例如用於視訊呼叫或者視訊或照片拍攝。揚聲器3輸出音訊資料。舉例而言，當使用者藉由在圖符10中的一者上對顯示與觸控螢幕9進行觸控來播放多媒體資料時、當使用者藉由話音而輸入訊號時、當使用者藉由公用交換電話網路與另一使用者通話時、或者當播放電子裝置1000a的操作聲音或通知聲音時，揚聲器3可輸出音訊資料。近接感測器4可控制顯示與觸控螢幕9來調整亮度或者接通及關斷顯示器以節省電力且當使用者將電子裝置1000a舉起至耳朵以進行電話交談時防止意外觸控。環境光感測器5可基於自電子裝置1000a的周圍環境入射的光的量來控制顯示與觸控螢幕9及前置攝影機2的操作。USB介面6可為用於與外部裝置及電源供應器進行資料通訊的輸入/輸出介面。
電源按鈕7可接通及關斷電子裝置1000a的電源，且可接通及關斷顯示與觸控螢幕9。音量按鈕8可控制揚聲器3的音訊輸出。在顯示與觸控螢幕9上可顯示與不同的功能對應的圖符10。舉例而言，使用者可觸控使多媒體資料被回放的圖符10。
選單按鈕11可容許使用者瀏覽包含圖符及設定的選單。主頁按鈕12可容許甚至在電子裝置1000a正在顯示與觸控螢幕9上執行某一操作時亦顯現主頁畫面(home screen)以達成多工作模式(multi-working mode)。後退按鈕13可取消當前正由電子裝置1000a執行的操作並使使用者返回至前一畫面。
麥克風14可為用於語音呼叫或語音輸入訊號的輸入/輸出(I/O)介面。音訊輸出介面15(例如，耳機插孔)可用於正被播放的多媒體資料的音訊輸出。可藉由支援藍芽(BLUETOOTH)的裝置來介接音訊輸出及麥克風輸入。天線16可用於接收數位媒體廣播服務。可以此項技術中具有通常知識者所理解的各種方式來實施電子裝置1000a的元件。根據示例性實施例，圖2B所示元件中的一些元件可被省略或被替換成其他元件。
圖3是說明根據本發明概念示例性實施例的應用處理器的方塊圖。
參照圖3，在示例性實施例中，應用處理器2000包括系統匯流排2100、主機處理器CPU 100、語音觸發系統200、音訊子系統300、及感測器中樞400。音訊子系統300及感測器中樞400可包含於圖2A所示音訊處理系統250中。根據示例性實施例，應用處理器2000可更包括工作電源管理器APM、信箱模組MBXa、MBXb及MBXc(亦被稱為信箱電路)、以及中斷控制器ITRC。
系統匯流排2100在本文中亦可被稱為互連裝置或骨幹(backbone)。系統匯流排2100可包括較高層匯流排、較低層匯流排、以及將所述較高層匯流排連接至所述較低層匯流排的橋接器。舉例而言，系統匯流排2100可包括例如進階可延伸介面(advanced extensible interface，AXI)、進階高效能匯流排(advanced high-performance bus，AHB)、進階周邊匯流排(advanced peripheral bus，APB)等各種匯流排、以及連接所述各 匯流排的至少一個橋接器。主機處理器100可藉由系統匯流排2100來存取外部裝置，例如記憶體裝置1200及/或儲存裝置1300。另外，主機處理器100可藉由系統匯流排2100與語音觸發系統200、音訊子系統300及感測器中樞400進行通訊。
雖然為方便說明在圖3中繪示一個中斷控制器ITRC，然而本發明概念的示例性實施例並非僅限於此。舉例而言，根據示例性實施例，中斷控制器ITRC可包括至少一個通用中斷控制器(general interrupt controller，GIC)、至少一個向量化中斷控制器(vectored interrupt controller，VIC)等。中斷控制器ITRC可被實作為例如可程式化中斷控制器(programmable interrupt controller，PIC)。可利用具有由向量表示的優先級系統的多個層來實作可程式化中斷控制器。可程式化中斷控制器可自周邊裝置接收中斷訊號、確定所接收中斷訊號的優先級並向處理器或控制器發佈具有指標位址(pointer address)的中斷訊號。
工作電源管理器APM可管理應用處理器2000的電源。舉例而言，工作電源管理器APM可管理對應用處理器2000的相應區或功能區塊供應的電力。信箱模組MBXa、MBXb及MBXc可支援應用處理器2000中的各元件之間的資料通訊或應用處理器2000與外部裝置之間的資料通訊的同步化。以下將參照圖5來闡述信箱模組MBXa、MBXb及MBXc。
語音觸發系統200電性連接至系統匯流排2100。語音觸發系統200基於藉由觸發介面所提供的觸發輸入訊號來執行語音 觸發操作併發佈觸發事件。在示例性實施例中，語音觸發系統200可自數位麥克風DMIC 40及/或音訊編解碼器(編碼器及解碼器)CODEC 50接收觸發輸入訊號。舉例而言，語音觸發系統200的觸發介面可直接連接至數位麥克風40及音訊編解碼器50。音訊編解碼器50可對自數位麥克風40或類比麥克風AMIC 61接收的音訊訊號以及輸出至揚聲器62的音訊訊號執行編碼及解碼(或者類比至數位轉換(analog-to-digital conversion，ADC)及數位至類比轉換(digital-to-analog conversion，DAC))。數位麥克風40可例如為與應用處理器2000一起安裝於電子裝置的板上的板上(on-board)麥克風。類比麥克風61及揚聲器62可為可附裝至音訊編解碼器50的端子以及可自所述端子拆卸的裝置。
音訊子系統300電性連接至系統匯流排2100。音訊子系統300處理藉由音訊介面所重播或記錄的音訊串流，且支援音訊串流在記憶體裝置1200與音訊介面之間的傳遞。在示例性實施例中，音訊子系統300可與音訊編解碼器50及/或藍芽模組BTM 70交換音訊串流。藍芽模組70在本文中亦可被稱為藍芽電路。舉例而言，音訊子系統300的音訊介面可直接連接至音訊編解碼器50及藍芽模組70。藍芽模組70可藉由藍芽音訊模組BTAUD 80連接至藍芽麥克風BMIC 81及藍芽揚聲器82，以自藍芽麥克風81接收音訊訊號以及將音訊訊號輸出至藍芽揚聲器82。藍芽模組70可直接連接至任意的藍芽裝置85。音訊子系統300可連接至通用串列匯流排(USB)模組，以與所述USB模組交換音訊串流。
感測器中樞400電性連接至系統匯流排2100。感測器中樞400處理自一或多個感測器SEN1 31及SEN2 32提供的訊號。感測器中樞400可量測與電子裝置相關聯的物理量，以偵測電子裝置的操作狀態並處理所偵測的資訊。舉例而言，感測器31及32可包括運動感測器、陀螺儀感測器、大氣壓力感測器、磁感測器、加速度計、緊握感測器(grip sensor)、近接感測器、生物辨識感測器(biometric sensor)、溫度/濕度感測器、照度感測器、紫外線(ultra violet，UV)感測器、電子鼻(electrical-nose，E-nose)感測器、肌電圖(electromyography，EMG)感測器、腦電圖(electroencephalogram，EEG)感測器、心電圖(electrocardiogram，ECG)感測器、紅外線(infrared，IR)感測器、虹膜感測器、及/或指紋感測器。
在示例性實施例中，如圖3中所繪示，所有的系統匯流排2100、語音觸發系統200、音訊子系統300及感測器中樞400可整合於形成應用處理器2000的單個半導體晶片中。在其他示例性實施例中，系統匯流排2100、語音觸發系統200及音訊子系統300可整合於單個晶片中，且感測器中樞400可設置於應用處理器2000的外部。因此，根據本發明概念示例性實施例的應用處理器、包含所述應用處理器的電子裝置及操作所述應用處理器的方法可藉由將語音觸發系統整合於所述應用處理器中而以低電力及高效率來執行語音觸發操作。
圖4是說明根據本發明概念示例性實施例的應用處理器 中的語音觸發系統與音訊子系統的示例性連接的方塊圖。為方便闡釋，在本文中可不再對前面所述的元件及過程進行贅述，且在圖4中省略了圖3所示的主機處理器100及其他元件。
參照圖4，在示例性實施例中，應用處理器2006包括系統匯流排2100、語音觸發系統206、音訊子系統306、直接匯流排500、及信箱模組MBX。音訊子系統306可包含於圖2A所示音訊處理系統250中。
語音觸發系統206電性連接至系統匯流排2100。語音觸發系統206基於藉由觸發介面TIF所提供的觸發輸入訊號SDMIC及SAMIC來執行語音觸發操作。語音觸發系統206可自數位麥克風DMIC 40接收觸發輸入訊號SDMIC及/或自音訊編解碼器(編碼器及解碼器)CODEC 50接收觸發輸入訊號SAMIC。可在語音觸發系統206、數位麥克風40及音訊編解碼器50之間傳遞麥克風時脈訊號MICCLK，以使訊號傳遞同步化。可藉由觸發介面TIF中所包含的焊墊PD11、PD12及PD13來傳遞觸發輸入訊號SDMIC及SAMIC以及麥克風時脈訊號MICCLK。焊墊PD11、PD12及PD13可被實作成使得防止已使用的焊墊受其他未使用的焊墊干擾。
音訊子系統306電性連接至系統匯流排2100。音訊子系統306處理藉由音訊介面AIF所重播或記錄的音訊串流，且支援音訊串流在記憶體裝置1200與音訊介面之間的傳遞。
在示例性實施例中，音訊子系統306可與音訊編解碼器 50交換音訊串流。音訊子系統306可藉由音訊介面AIF的音訊輸入焊墊PD21自音訊編解碼器50接收音訊輸入訊號SDI，且可藉由音訊介面AIF的音訊輸出焊墊PD22將音訊輸出訊號SDO傳送至音訊編解碼器50。
在示例性實施例中，音訊子系統306可與藍芽模組70交換音訊串流。音訊子系統306可藉由音訊介面AIF的藍芽輸入焊墊PD23自藍芽模組70接收音訊輸入訊號SDIB，且可藉由音訊介面AIF的藍芽輸出焊墊PD24將音訊輸出訊號SDOB傳送至藍芽模組70。
語音觸發系統206可包括觸發介面電路IFV 216、包裝器(wrapper)WRPP 226、觸發記憶體MEMV 236、及觸發處理器PRCV 246。
觸發介面電路216以及焊墊PD11、PD12及PD13可形成觸發介面TIF，觸發介面TIF用以對自數位麥克風40或音訊編解碼器50提供的觸發輸入訊號SDMIC及SAMIC進行取樣及轉換。包裝器226可將自觸發介面電路216提供的資料儲存於觸發記憶體236中。當觸發記憶體236中儲存有預定量的資料時，包裝器226可向觸發處理器246發佈中斷訊號，以使得觸發處理器246可基於觸發記憶體236中所儲存的資料來執行語音觸發操作。
在示例性實施例中，語音觸發系統206可接收脈波密度調變(pulse density modulation，PDM)訊號作為觸發輸入訊號SDMIC及SAMIC，並將所述PDM訊號轉換成脈波碼調變(pulse code modulation，PCM)資料。包裝器226可將PCM資料儲存於觸發記憶體236中。包裝器226可例如以直接記憶體存取控制器來實作。
音訊子系統306可包括第一音訊介面電路IFA1 316、第一直接記憶體存取控制器DMA1 326、音訊記憶體MEMA 336、音訊處理器PRCA 346、第二音訊介面電路IFA2 356、第二直接記憶體存取控制器DMA2 366、以及中斷控制器ITRC 700。
第一音訊介面電路316、第二音訊介面電路356、以及焊墊PD21、PD22、PD23及PD24可形成音訊介面AIF，音訊介面AIF藉由音訊輸入訊號SDI及SDIB以及音訊輸出訊號SDO及SDOB來傳遞音訊串流。音訊記憶體336可儲存音訊串流的資料，且第一直接記憶體存取控制器326及第二直接記憶體存取控制器366可控制對音訊記憶體346的存取(例如，自音訊記憶體336讀取資料及將資料寫入至音訊記憶體336)。音訊處理器346可處理音訊記憶體336中所儲存的資料。
應用處理器2006可更包括支援語音觸發系統206與音訊子系統306之間的資料傳送或資料通訊的同步化的信箱模組MBX。以下將參照圖5A來闡述信箱模組MBX。
可在音訊子系統306執行音訊重播時利用回音消除來改良語音觸發操作的辨識率的效能。
在示例性實施例中，音訊子系統306中的音訊處理器346可如圖4所繪示包括回音消除器AEC 800。以下將參照圖5B 來闡述回音消除器800。回音消除器800在本文中亦可被稱為回音消除電路。
在示例性實施例中，在藉由音訊介面AIF的輸出焊墊執行音訊重播時，音訊子系統306可藉由音訊介面AIF的輸入焊墊接收中斷訊號ITRB。舉例而言，在示例性實施例中，同時地，藉由音訊介面AIF的輸出焊墊執行音訊重播操作，且音訊子系統306藉由音訊介面AIF的輸入焊墊接收中斷訊號ITRB。在此種情形中，語音觸發系統206可藉由觸發介面TIF接收觸發輸入訊號SDMIC或SAMIC，且基於觸發輸入訊號SDMIC或SAMIC來執行語音觸發操作。
舉例而言，如圖4中所繪示，在藉由藍芽輸出焊墊PD24執行音訊重播時，可藉由藍芽輸入焊墊PD23自藍芽模組70接收中斷訊號ITRB。舉例而言，根據示例性實施例，同時地，藉由藍芽輸入焊墊PD23自藍芽模組70接收中斷訊號ITRB，且藉由藍芽輸出焊墊PD24執行音訊重播操作。中斷訊號ITRB可例如表示音訊重播的錯誤。所接收的中斷訊號ITRB可被提供至中斷控制器700，且中斷控制器700可根據中斷訊號ITRB將控制訊號傳送至音訊處理器346。語音觸發系統206可藉由觸發介面TIF接收觸發輸入訊號SDMIC或SAMIC。在此種情形中，語音觸發系統206可將觸發輸入訊號SDMIC或SAMIC的樣本資料傳遞至音訊子系統306，且音訊子系統306中的回音消除器800可基於音訊輸出訊號SDO或SDOB的音訊輸出資料對樣本資料執行回音消除以產生 經補償樣本資料。音訊子系統306可將經補償樣本資料傳遞至語音觸發系統206，且語音觸發系統206可基於經補償樣本資料來執行語音觸發操作。可藉由系統匯流排2100或者與系統匯流排2100獨立地藉由直接匯流排500來執行經補償樣本資料的傳遞。直接匯流排500並非僅限於典型的匯流排系統，且直接匯流排500可以任意的訊號傳送方案來實作。
在示例性實施例中，第一音訊介面電路316與IC間聲音(Inter-IC Sound，I2S)標準或積體晶片間聲音(Integrated Interchip Sound，IIS)標準相容。在示例性實施例中，第一音訊介面電路316可根據I2S標準而基於時脈訊號運作。在示例性實施例中，第一音訊介面電路316可直接連接至數位麥克風40及/或音訊編解碼器50。
在示例性實施例中，第二音訊介面電路356可與通用異步收發器(universal asynchronous receiver transmitter，UART)標準相容。在示例性實施例中，第二音訊介面電路356可根據UART標準而基於時脈訊號運作。在示例性實施例中，第二音訊介面電路356可直接連接至藍芽模組70。
直接匯流排500可電性連接語音觸發系統206與音訊子系統306，以在其之間提供直接訊號路徑。
應用處理器2006可使用信箱模組MBX來執行語音觸發系統206與音訊子系統306之間的資料通訊。可藉由系統匯流排2100或與系統匯流排2100獨立地藉由直接匯流排500來執行資料 通訊。
直接匯流排500並非僅限於典型的匯流排系統，且直接匯流排500可以任意的訊號傳送方案來實作。
因此，根據本發明概念的示例性實施例，藉由支援在利用音訊介面AIF的輸出焊墊PD24執行音訊重播操作時利用音訊介面AIF的輸入焊墊PD23進行中斷，會以低電力消耗來執行音訊重播操作，且改良語音觸發操作的辨識率及效能。舉例而言，根據本發明概念的示例性實施例，同時地，藉由音訊介面AIF的輸入焊墊PD23提供中斷，且藉由音訊介面AIF的輸出焊墊PD24執行音訊重播操作。
圖5A是說明圖4所示應用處理器中所包含的信箱模組的示例性實施例的圖。
參照圖5A，在示例性實施例中，信箱模組900包括介面910、訊息方塊920、第一暫存器電路930及第二暫存器電路940，第一暫存器電路930包括多個暫存器INTGR0、INTCR0、INTMR0、INTSR0及INTMSR0，第二暫存器電路940包括多個暫存器INTGR1、INTCR1、INTMR1、INTSR1及INTMSR1。信箱模組900在本文中亦可被稱為信箱電路。圖5A繪示其中信箱模組900藉由APB介面連接至系統匯流排2100的AHB2APB橋接器2110且其中訊息方塊920是以具有6*32位元的共用暫存器來實作的非限制性實例。然而，本發明概念的示例性實施例並非僅限於此。舉例而言，根據示例性實施例，介面910的類型、訊息方塊 920中暫存器的數目及訊息方塊920中暫存器的位元數目可有所變化。第一暫存器電路930可產生向語音觸發系統206中的觸發處理器PRCV 246提供的中斷訊號(IRQ至PRCV)，且第二暫存器電路940可產生向音訊子系統306中的音訊處理器PRCA 346提供的中斷訊號(IRQ至PRCA)。可使用信箱模組900來使語音觸發系統206與音訊子系統306之間的資料傳送同步化。
信箱模組900可藉由在觸發處理器PRCV 246及音訊處理器PRCA 346中的一者在訊息方塊920中寫入訊息之後傳送中斷訊號來執行雙向通訊(bilateral communication)。可例如使用輪詢方法來實作語音觸發系統206與音訊子系統306之間的資料傳送的同步化。
圖5B是說明根據本發明概念示例性實施例的應用處理器中所包含的回音消除器的方塊圖。
參照圖5B，在示例性實施例中，聲回音消除器95(亦被稱為回音消除器)包括濾波器96及回音抑制器97。
自圖3所示音訊子系統300提供的音訊輸出訊號x(t)可自揚聲器98輸出至使用者。麥克風99可接收音訊輸入訊號y(t)。可在自揚聲器98回放之前對音訊輸出訊號x(t)(例如，數位訊號)應用數位至類比轉換(DAC)操作，且可對由麥克風99擷取的訊號應用類比至數位轉換(ADC)操作以獲得音訊輸入訊號y(t)(例如，數位訊號)。
由麥克風99接收的音訊輸入訊號y(t)可包含近端訊號 (near-end signal)v(t)及回音訊號s(t)。近端訊號v(t)可被稱為所需訊號(desired signal)或初級訊號(primary signal)，使用者預期使麥克風99接收所述所需訊號或初級訊號。回音訊號s(t)可包括由自揚聲器98輸出的音訊訊號產生的回音分量。音訊輸入訊號y(t)可包含雜訊。回音分量及雜訊可成為對近端訊號v(t)的干擾。因此，根據示例性實施例，消除或去除回音分量及雜訊。
在示例性實施例中，可使用例如雙邊通話偵測(doubletalk detection)、步長控制(step-size control)等各種演算法中的至少一者來執行回音消除。
濾波器96可基於音訊輸出訊號x(t)及音訊輸入訊號y(t)來估計音訊輸入訊號y(t)中所包含的回音訊號s(t)，以產生所估計回音訊號s'(t)。舉例而言，濾波器96可對音訊輸入訊號y(t)中的回音分量及引起所述回音分量的回音路徑進行建模，並估計所述回音路徑是如何將所需音訊輸出訊號x(t)改變成音訊輸入訊號y(t)中的非所需回音分量。音訊輸出訊號x(t)可用作參考訊號。
回音路徑表示遠端訊號(far-end signal)自揚聲器98至麥克風99所傳播過的聲路徑的效應。遠端訊號可自揚聲器98直接傳播至麥克風99，或者遠端訊號可自近端終端機的環境中的各種表面被反射而來。自揚聲器98輸出的遠端訊號所經過的回音路徑可被視為頻率及相位回應可隨時間變化的系統。
在示例性實施例中，可基於例如有限脈衝回應(finite impulse response，FIR)濾波器、無限脈衝回應(infinite impulse response，IIR)濾波器等各種線性濾波器中的至少一者對回音路徑進行建模。舉例而言，回音路徑的估計結果可為具有(N+1)個值的向量，其中N是自然數，且濾波器96可被實作為具有有限長度(在時間上)的N階濾波器。
在示例性實施例中，回音路徑的估計結果不被顯式地計算出，而是藉由依據各種隨機梯度演算法(stochastic gradient algorithm)(例如最小均方(Least Mean Squares，LMS)、正規化最小均方(Normalized Least Mean Squares，NLMS)、快速仿射投影(Fast Affine Projection，FAP)、及遞迴最小平方(Recursive Least Squares，RLS)等)中的至少一者所獲得的濾波係數的平均值來表示。
在示例性實施例中，可即時連續地更新回音路徑的估計結果。
回音抑制器97可基於所估計回音訊號s'(t)及音訊輸入訊號y(t)來產生所估計近端訊號v'(t)。舉例而言，回音抑制器97可基於所估計回音訊號s'(t)對音訊輸入訊號y(t)應用回音抑制以產生所估計近端訊號v'(t)，藉此抑制所接收音訊訊號中的回音。對回音路徑的估計愈精確，所估計近端訊號v'(t)可愈接近於近端訊號v(t)。
在示例性實施例中，回音抑制器97可被實作為回音減法器。舉例而言，所述回音減法器可自音訊輸入訊號y(t)減去所估計回音訊號s'(t)，以產生所估計近端訊號v'(t)。
根據示例性實施例，可以各種配置來實作回音消除器95中的元件，可將回音消除器95中的一些元件省略或替換成其他元件，且可對回音消除器95添加一些元件。根據示例性實施例，回音消除器95的至少一部分可被實作為硬體，或者被實作為指令及/或程式常式(例如，軟體程式)。
圖6是說明根據本發明概念示例性實施例操作應用處理器的方法的流程圖。
參照圖4及圖6，在操作S510中，藉由音訊介面AIF的輸出焊墊執行音訊重播。在操作S520中，在執行音訊重播時，由音訊子系統306藉由音訊介面AIF的輸入焊墊接收中斷訊號ITRB。舉例而言，在藉由藍芽輸出焊墊PD24執行音訊重播時，可藉由藍芽輸入焊墊PD23接收中斷訊號ITRB。舉例而言，根據示例性實施例，同時地，藉由藍芽輸入焊墊PD23接收中斷訊號ITRB，且藉由藍芽輸出焊墊PD24執行音訊重播操作。
在操作S530中，在藉由音訊介面AIF的輸出焊墊執行音訊重播時，由語音觸發系統206藉由觸發介面TIF接收觸發輸入訊號SDMIC或SAMIC，且在操作S540中，由語音觸發系統206基於觸發輸入訊號SDMIC或SAMIC執行語音觸發操作。
可在語音觸發操作之前執行回音消除，以改良語音觸發操作的可靠性。在示例性實施例中，回音消除器95可如圖4所繪示包含於音訊子系統306中。在其他示例性實施例中，回音消除器95可包含於語音觸發系統206中。根據示例性實施例，可藉由 系統匯流排2100或藉由直接匯流排500來執行語音觸發系統206與音訊子系統306之間的資料傳送。可使用信箱模組MBX來使資料通訊同步化。
圖7是說明根據本發明概念示例性實施例的應用處理器中的語音觸發系統與音訊子系統的示例性連接的方塊圖。為方便闡釋，在本文中可不再對前面所述的元件及過程進行贅述，且在圖7中省略了圖3所示的主機處理器100及其他元件。
參照圖7，在示例性實施例中，應用處理器2007包括系統匯流排2100、語音觸發系統207、音訊子系統307、直接匯流排500、及信箱模組MBX。音訊子系統307可包含於圖2A所示音訊處理系統250中。
語音觸發系統207電性連接至系統匯流排2100。語音觸發系統207基於藉由觸發介面TIF所提供的觸發輸入訊號SDMIC及SAMIC來執行語音觸發操作。語音觸發系統207可自數位麥克風DMIC 40接收觸發輸入訊號SDMIC，及/或可自音訊編解碼器CODEC 50接收觸發輸入訊號SAMIC。可在語音觸發系統207、數位麥克風40及音訊編解碼器50之間傳遞麥克風時脈訊號MICCLK，以使訊號傳遞同步化。可藉由焊墊PD11、PD12及PD13來傳遞觸發輸入訊號SDMIC及SAMIC以及麥克風時脈訊號MICCLK。
音訊子系統307電性連接至系統匯流排2100。音訊子系統307處理藉由音訊介面AIF所重播或記錄的音訊串流，且支援 音訊串流在記憶體裝置1200與音訊介面之間的傳遞。
在示例性實施例中，音訊子系統307可與音訊編解碼器50交換音訊串流。音訊子系統307可藉由音訊介面AIF的音訊輸入焊墊PD21自音訊編解碼器50接收音訊輸入訊號SDI，且藉由音訊介面AIF的音訊輸出焊墊PD22將音訊輸出訊號SDO傳送至音訊編解碼器50。
在示例性實施例中，音訊子系統307可與藍芽模組70交換音訊串流。音訊子系統307可藉由音訊介面AIF的藍芽輸入焊墊PD23自藍芽模組70接收音訊輸入訊號SDIB，且藉由音訊介面AIF的藍芽輸出焊墊PD24將音訊輸出訊號SDOB傳送至藍芽模組70。
語音觸發系統207可包括觸發介面電路IFV 217、包裝器WRPP 227、觸發記憶體MEMV 237及觸發處理器PRCV 247。音訊子系統307可包括第一音訊介面電路IFA1 317、第一直接記憶體存取控制器DMA1 327、音訊記憶體MEMA 337、音訊處理器PRCA 347、第二音訊介面電路IFA2 357、第二直接記憶體存取控制器DMA2 367及中斷控制器ITRC 700。語音觸發系統207及音訊子系統307的操作與參照圖4所述的操作實質上相同。因此，不再對所述操作進行贅述。
應用處理器2007可更包括支援語音觸發系統207與音訊子系統307之間的資料傳送或資料通訊的同步化的信箱模組MBX。信箱模組MBX與以上參照圖5A所述者相同。根據示例性 實施例，可在音訊子系統307執行音訊重播時執行回音消除操作，以改良語音觸發操作的辨識率效能。因此，在示例性實施例中，音訊子系統307中所包含的音訊處理器347可如圖7所繪示包括回音消除器AEC 800。回音消除器800與以上參照圖5B所述者相同。
在示例性實施例中，在藉由音訊介面AIF的輸出焊墊執行音訊重播時，藉由音訊介面AIF的附加中斷焊墊PD25接收中斷訊號ITRB。在此種情形中，音訊子系統307可藉由音訊介面AIF接收音訊輸入訊號，且基於音訊輸入訊號來執行語音觸發操作。
舉例而言，如圖7中所繪示，在藉由藍芽輸出焊墊PD24執行音訊重播時，可藉由藍芽中斷焊墊PD25自藍芽模組70接收中斷訊號ITRB。中斷訊號ITRB可例如表示音訊重播的錯誤。所接收的中斷訊號ITRB可被提供至中斷控制器700，且中斷控制器700可根據中斷訊號ITRB將控制訊號傳送至音訊子系統307中所包含的音訊處理器347。音訊子系統307可藉由藍芽輸入焊墊PD23接收藍芽輸入訊號SDIB。在此種情形中，音訊子系統307中所包含的回音消除器800可基於藍芽輸出訊號SDOB的音訊輸出資料對藍芽輸入訊號SDIB的音訊輸入資料執行回音消除，以產生經補償音訊輸入資料。音訊子系統307可將經補償音訊輸入資料傳遞至語音觸發系統207，且語音觸發系統207可基於經補償音訊輸入資料來執行語音觸發操作。可藉由系統匯流排2100或者與系統匯流排2100獨立地藉由直接匯流排500來執行音訊輸入資料及經補 償音訊輸入資料的傳遞。
由於可藉由藍芽中斷焊墊PD25來接收中斷，因此音訊子系統307可藉由藍芽輸入焊墊PD23接收語音觸發操作的輸入訊號，且因此，語音觸發系統207的觸發介面TIF可被去能(disable)。另外，音訊子系統307的第一音訊介面電路317、數位麥克風40及音訊編解碼器50可被去能。因此，可使用附加藍芽中斷焊墊PD25來更降低語音觸發操作的電力消耗。
在示例性實施例中，第一音訊介面電路317可與I2S標準或IIS標準相容。在示例性實施例中，第一音訊介面電路317可根據I2S標準而基於時脈訊號運作。在示例性實施例中，第一音訊介面電路317可直接連接至數位麥克風40及/或音訊編解碼器50。
在示例性實施例中，第二音訊介面電路357可與UART標準相容。在示例性實施例中，第二音訊介面電路357可根據UART標準而基於時脈訊號運作。在示例性實施例中，第二音訊介面電路357可直接連接至藍芽模組70。
直接匯流排500可電性連接語音觸發系統207與音訊子系統307，以在其之間提供直接訊號路徑。
應用處理器2007可使用信箱模組MBX、藉由系統匯流排2100、或者與系統匯流排2100獨立地藉由直接匯流排500來執行語音觸發系統207與音訊子系統307之間的資料通訊。
因此，根據本發明概念的示例性實施例，藉由支援在利 用音訊介面AIF的輸出焊墊PD24執行音訊重播時利用音訊介面AIF的附加中斷焊墊PD25進行中斷(例如，藉由同時支援中斷操作及音訊重播操作)，會以低電力消耗來執行音訊重播，且改良了語音觸發操作的辨識率及效能。
圖8是說明根據本發明概念示例性實施例操作應用處理器的方法的流程圖。
參照圖7及圖8，在示例性實施例中，在操作S610中，藉由音訊介面AIF的輸出焊墊執行音訊重播。在操作S620中，在執行音訊重播時，由音訊子系統307藉由音訊介面AIF的附加中斷焊墊接收中斷訊號ITRB。舉例而言，在藉由藍芽輸出焊墊PD24執行音訊重播時，可由音訊子系統307藉由藍芽中斷焊墊PD25接收中斷訊號ITRB。
在操作S630中，在藉由音訊介面AIF的輸出焊墊執行音訊重播時，由語音觸發系統207藉由觸發介面TIF接收觸發輸入訊號SDMIC或SAMIC，且在操作S640中，由語音觸發系統207基於觸發輸入訊號SDMIC或SAMIC來執行語音觸發操作。
如上所述，根據本發明概念的示例性實施例，可在語音觸發操作之前執行回音消除，以改良語音觸發操作的可靠性。在示例性實施例中，回音消除器800可如圖7所繪示包含於音訊子系統307中。在其他示例性實施例中，回音消除器800可包含於語音觸發系統207中。根據示例性實施例，可藉由系統匯流排2100或藉由直接匯流排500來執行語音觸發系統207與音訊子系統307 之間的資料傳送。可使用信箱模組MBX來使資料通訊同步化。
圖9及圖10是說明根據本發明概念示例性實施例的應用處理器中的語音觸發系統與音訊子系統的示例性連接的方塊圖。除音訊子系統之外，圖9及圖10所示元件與參照圖4至圖8所述的元件相同。為方便闡釋，本文中可不再對前面所述的元件進行贅述。
參照圖9，在示例性實施例中，應用處理器2008包括系統匯流排2100、語音觸發系統208、音訊子系統308、直接匯流排500、及信箱模組MBX。音訊子系統308可包含於圖2A所示音訊處理系統250中。
語音觸發系統208可包括觸發介面電路IFV 218、包裝器WRPP 228、觸發記憶體MEMV 238、及觸發處理器PRCV 248。音訊子系統308可包括音訊介面電路IFA 318、直接記憶體存取控制器DMA 328、音訊記憶體MEMA 338、音訊處理器PRCA 348、橋接器電路358、及中斷控制器ITRC 700。
與圖7所示應用處理器2007相較，圖9所示應用處理器2008不包括用於與音訊編解碼器50連接的介面，且音訊子系統308可與通用串列匯流排(USB)模組USBM 90交換音訊串流。USB模組90在本文中亦可被稱為USB電路。USB模組90連接至USB麥克風UMIC 91及USB揚聲器92。音訊子系統308可藉由音訊介面AIF的輸入焊墊PD21自USB模組90接收音訊輸入訊號SDI，且藉由音訊介面AIF的輸出焊墊PD22將音訊輸出訊號SDO 傳送至USB模組90。橋接器電路358可將USB訊號轉換成用於觸發介面電路218的訊號，例如脈波密度調變(PDM)訊號。
在示例性實施例中，在藉由音訊介面AIF的輸出焊墊PD 22執行音訊重播時，音訊子系統308藉由音訊介面AIF的附加USB中斷焊墊PD25接收中斷訊號ITRB。中斷訊號ITRB可例如表示音訊重播的錯誤。所接收的中斷訊號ITRB可被提供至中斷控制器700。中斷控制器700可根據中斷訊號ITRB將控制訊號傳送至音訊子系統308中所包含的音訊處理器348。
參照圖10，在示例性實施例中，應用處理器2009包括系統匯流排2100、語音觸發系統209、音訊子系統309、直接匯流排500、及信箱模組MBX。音訊子系統309可包含於圖2A所示音訊處理系統250中。
語音觸發系統209可包括觸發介面電路IFV 219、包裝器WRPP 229、觸發記憶體MEMV 239、及觸發處理器PRCV 249。音訊子系統309可包括音訊介面電路IFA 319、直接記憶體存取控制器DMA 329、音訊記憶體MEMA 339、音訊處理器PRCA 349、橋接器電路359、及中斷控制器ITRC 700。
與圖7所示應用處理器2007相較，圖10所示應用處理器2009不包括用於與音訊編解碼器50連接的介面，且音訊子系統309可與藍芽模組BTM 70交換音訊串流。藍芽模組70連接至藍芽揚聲器72。音訊子系統309可藉由音訊介面AIF的輸入焊墊PD21自藍芽模組70接收音訊輸入訊號SDI，且藉由音訊介面AIF 的輸出焊墊PD22將音訊輸出訊號SDO傳送至藍芽模組70。橋接器電路359可將USB訊號轉換成用於觸發介面電路219的訊號，例如脈波密度調變(PDM)訊號。
在示例性實施例中，在藉由音訊介面AIF的藍芽輸出焊墊PD22執行音訊重播時，音訊子系統309藉由音訊介面AIF的附加藍芽中斷焊墊PD25接收中斷訊號ITRB。中斷訊號ITRB可例如表示音訊重播的錯誤。所接收的中斷訊號ITRB可被提供至中斷控制器700，且中斷控制器700可根據中斷訊號ITRB將控制訊號傳送至音訊子系統309中所包含的音訊處理器349。
圖11A及圖11B是用於闡述根據本發明概念示例性實施例的應用處理器的電源域的圖。
應用處理器可包括被獨立地供電的多個電源域。圖11A及圖11B繪示第一電源域PWDM1及第二電源域PWDM2作為實例。第一電源域PWDM1對應於其中在工作模式及待機模式(或睡眠模式)中均供應電力的始終供電域(always-powered domain)，且第二電源域PWDM2對應於其中在待機模式中阻斷電力的省電域(power-save domain)。
參照圖11A，在示例性實施例中，系統計數器SYSCNT、工作電源管理器APM及語音觸發系統VTS設置於始終供電域PWDM1中。多個硬體區塊(例如主機處理器CPU、音訊子系統ABOX、感測器中樞CHUB等)可設置於省電域PWDM2中。
系統計數器SYSCNT可產生時間資訊TM並將時間資訊 TM提供至系統的內部電路。工作電源管理器APM可產生多個電源賦能訊號EN，所述多個電源賦能訊號EN控制系統中的各種元件的電源供應器、電源區塊等。語音觸發系統VTS可產生表示觸發事件的中斷訊號ITRR。
在本文中，工作模式表示其中至少主機處理器CPU被賦能且作業系統(operating system，OS)正在運行的模式。睡眠模式或待機模式表示其中主機處理器CPU被去能的電源關閉模式(power-down mode)。
與圖11A所示安排(disposition)相較，圖11B所示語音觸發系統VTS設置於省電域PWDM2中。
如圖11A及圖11B中所繪示，主機處理器CPU、語音觸發系統VTS、音訊子系統ABOX及感測器中樞CHUB可分別包括電源閘控電路PG1、PG2、PG3及PG4。電源閘控電路PG1至PG4可因應於電源賦能訊號EN1、EN2、EN3及EN4而選擇性地供應電力。因此，語音觸發系統VTS、音訊子系統ABOX及感測器中樞CHUB可為電源閘控式(power-gated)且與主機處理器CPU獨立地被賦能。
本發明概念的示例性實施例可應用於支援語音觸發功能的任何電子裝置及系統。舉例而言，本發明概念的示例性實施例可應用於例如以下等的系統：桌上型電腦、膝上型電腦、蜂巢式電話、智慧型電話、MP3播放器、個人數位助理(PDA)、可攜式多媒體播放器(PMP)、數位電視機、數位攝影機、伺服器電腦、 工作站、機上盒、可攜式遊戲機、導航系統、可穿戴裝置、物聯網(IoT)裝置、萬物聯網(IoE)裝置、電子書、虛擬實境(VR)裝置、擴增實境(AR)裝置等。
按照本發明概念的領域中的傳統，依據功能區塊、單元及/或模組來闡述並在圖式中繪示各示例性實施例。熟習此項技術者應瞭解，該些區塊、單元及/或模組是藉由可使用基於半導體的製作技術或其他製造技術而形成的電子(或光學)電路(例如邏輯電路、離散組件、微處理器、硬佈線電路(hard-wired circuit)、記憶體元件、佈線連接件等)來實體地實作。在由微處理器或類似元件實作所述區塊、單元及/或模組的情形中，所述微處理器或類似元件可使用軟體(例如，微碼)來進行程式化以執行本文所論述的各種功能，且可視需要由韌體及/或軟體來驅動。作為另外一種選擇，每一區塊、單元及/或模組可由專用硬體來實作，或者實作為用以執行一些功能的專用硬體與用以執行其他功能的處理器(例如，一或多個經程式化微處理器及相關聯的電路系統)的組合。此外，各示例性實施例的每一區塊、單元及/或模組可在不背離本發明概念的範圍的條件下被實體地分離成二或更多個互動的且離散的區塊、單元及/或模組。此外，各示例性實施例的區塊、單元及/或模組可在不背離本發明概念的範圍的條件下被實體地組合成更複雜的區塊、單元及/或模組。
儘管已參照本發明概念的示例性實施例具體示出並闡述了本發明概念，然而此項技術中具有通常知識者應理解，在不 背離由以下申請專利範圍所界定的本發明概念的精神及範圍的條件下，可在形式及細節上對所述示例性實施例作出各種改變。
S100、S200、S300:操作

Claims (20)

  1. 一種應用處理器，包括： 系統匯流排； 主機處理器，電性連接至所述系統匯流排； 語音觸發系統，電性連接至所述系統匯流排，其中所述語音觸發系統被配置成基於藉由觸發介面所提供的觸發輸入訊號來執行語音觸發操作併發佈觸發事件；以及 音訊子系統，電性連接至所述系統匯流排，其中所述音訊子系統被配置成處理藉由音訊介面所重播或記錄的音訊串流且在藉由所述音訊介面執行音訊重播操作時藉由所述音訊介面接收中斷訊號。
  2. 如申請專利範圍第1項所述的應用處理器，其中所述系統匯流排、所述主機處理器、所述語音觸發系統、及所述音訊子系統整合於單個半導體晶片中。
  3. 如申請專利範圍第2項所述的應用處理器，其中在藉由所述音訊介面的輸出焊墊執行所述音訊重播操作時，所述音訊子系統藉由所述音訊介面的輸入焊墊接收所述中斷訊號。
  4. 如申請專利範圍第3項所述的應用處理器，其中在藉由所述音訊介面的所述輸出焊墊執行所述音訊重播操作時，所述語音觸發系統藉由所述觸發介面接收所述觸發輸入訊號並基於所述觸發輸入訊號來執行所述語音觸發操作。
  5. 如申請專利範圍第4項所述的應用處理器，其中所述語音觸發系統將所述觸發輸入訊號的樣本資料傳遞至所述音訊子系統，且所述音訊子系統對所述樣本資料執行回音消除操作並將經補償樣本資料傳遞至所述語音觸發系統。
  6. 如申請專利範圍第2項所述的應用處理器，其中在藉由所述音訊介面的輸出焊墊執行所述音訊重播操作時，所述音訊子系統藉由所述音訊介面的中斷焊墊接收所述中斷訊號。
  7. 如申請專利範圍第6項所述的應用處理器，其中在藉由所述音訊介面的所述輸出焊墊執行所述音訊重播操作時，所述音訊子系統藉由所述音訊介面的輸入焊墊接收音訊輸入訊號，且所述語音觸發系統基於所述音訊輸入訊號來執行所述語音觸發操作。
  8. 如申請專利範圍第7項所述的應用處理器，其中所述音訊子系統對所述音訊輸入訊號的音訊輸入資料執行回音消除操作，並將經補償音訊輸入資料傳遞至所述語音觸發系統。
  9. 如申請專利範圍第6項所述的應用處理器，其中在藉由所述音訊介面的所述輸出焊墊執行所述音訊重播操作時，所述觸發介面被去能。
  10. 如申請專利範圍第2項所述的應用處理器，更包括： 信箱模組，被配置成支援所述語音觸發系統與所述音訊子系統之間的資料通訊的同步化。
  11. 如申請專利範圍第2項所述的應用處理器，更包括： 直接匯流排，電性連接所述語音觸發系統與所述音訊子系統。
  12. 如申請專利範圍第11項所述的應用處理器，其中所述語音觸發系統與所述音訊子系統之間的資料通訊是與所述系統匯流排獨立地藉由所述直接匯流排來執行。
  13. 如申請專利範圍第2項所述的應用處理器， 其中所述語音觸發系統將所述觸發輸入訊號的樣本資料傳遞至所述音訊子系統， 其中設置於所述音訊子系統中的回音消除器藉由基於音訊輸出訊號的音訊輸出資料對所述樣本資料執行回音消除操作來產生經補償樣本資料，並將所述經補償樣本資料傳遞至所述語音觸發系統， 其中所述語音觸發系統基於所述經補償樣本資料來執行所述語音觸發操作。
  14. 如申請專利範圍第11項所述的應用處理器， 其中設置於所述音訊子系統中的回音消除器藉由基於音訊輸出訊號的音訊輸出資料對音訊輸入訊號的音訊輸入資料執行回音消除操作來產生經補償音訊輸入資料，並將所述經補償音訊輸入資料傳遞至所述語音觸發系統， 其中所述語音觸發系統基於所述經補償音訊輸入資料來執行所述語音觸發操作。
  15. 如申請專利範圍第1項所述的應用處理器，其中所述音訊介面包括： 藍芽輸入焊墊，自藍芽模組接收音訊輸入訊號； 藍芽輸出焊墊，將音訊輸出訊號傳送至所述藍芽模組；以及 藍芽中斷焊墊，自所述藍芽模組接收所述中斷訊號。
  16. 如申請專利範圍第1項所述的應用處理器，其中所述音訊介面包括： 通用串列匯流排輸入焊墊，自通用串列匯流排模組接收音訊輸入訊號； 通用串列匯流排輸出焊墊，將音訊輸出訊號傳送至所述通用串列匯流排模組；以及 通用串列匯流排中斷焊墊，自所述通用串列匯流排模組接收所述中斷訊號。
  17. 如申請專利範圍第1項所述的應用處理器，其中所述語音觸發系統及所述音訊子系統中的每一者為電源閘控式且與所述主機處理器獨立地被賦能。
  18. 一種電子裝置，包括： 應用處理器；以及 至少一個音訊輸入/輸出裝置，其中所述應用處理器包括： 系統匯流排； 主機處理器，電性連接至所述系統匯流排； 語音觸發系統，電性連接至所述系統匯流排，其中所述語音觸發系統被配置成基於藉由觸發介面所提供的觸發輸入訊號來執行語音觸發操作併發佈觸發事件；以及 音訊子系統，電性連接至所述系統匯流排，其中所述音訊子系統被配置成處理藉由音訊介面所重播或記錄的音訊串流，且在藉由所述音訊介面執行音訊重播操作時藉由所述音訊介面接收中斷訊號。
  19. 如申請專利範圍第18項所述的電子裝置，其中所述音訊介面包括： 藍芽輸入焊墊，自藍芽模組接收音訊輸入訊號； 藍芽輸出焊墊，將音訊輸出訊號傳送至所述藍芽模組；以及 藍芽中斷焊墊，自所述藍芽模組接收所述中斷訊號。
  20. 一種操作應用處理器的方法，包括： 接收藉由觸發介面所提供的觸發輸入訊號； 由語音觸發系統基於所述觸發輸入訊號來發佈觸發事件， 其中在形成所述應用處理器的單個半導體晶片中，所述語音觸發系統、音訊子系統及主機處理器藉由系統匯流排彼此電性連接； 由所述音訊子系統處理藉由音訊介面所重播或記錄的音訊串流；以及 在藉由所述音訊介面執行音訊重播操作時，由所述音訊子系統藉由所述音訊介面接收中斷訊號。
TW107141342A 2018-01-25 2018-11-21 支援音訊回放期間中斷的應用處理器、包含該處理器的電子裝置以及其操作方法 TWI798291B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
??10-2018-0009376 2018-01-25
KR10-2018-0009376 2018-01-25
KR1020180009376A KR102585784B1 (ko) 2018-01-25 2018-01-25 오디오 재생시 인터럽트를 지원하는 애플리케이션 프로세서, 이를 포함하는 전자 장치 및 그 동작 방법

Publications (2)

Publication Number Publication Date
TW201933088A TW201933088A (zh) 2019-08-16
TWI798291B true TWI798291B (zh) 2023-04-11

Family

ID=67299476

Family Applications (1)

Application Number Title Priority Date Filing Date
TW107141342A TWI798291B (zh) 2018-01-25 2018-11-21 支援音訊回放期間中斷的應用處理器、包含該處理器的電子裝置以及其操作方法

Country Status (4)

Country Link
US (2) US10789190B2 (zh)
KR (1) KR102585784B1 (zh)
CN (1) CN110083224A (zh)
TW (1) TWI798291B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102585784B1 (ko) 2018-01-25 2023-10-06 삼성전자주식회사 오디오 재생시 인터럽트를 지원하는 애플리케이션 프로세서, 이를 포함하는 전자 장치 및 그 동작 방법
TWI727607B (zh) 2019-02-14 2021-05-11 美商萬國商業機器公司 用於具有中斷表之經引導中斷虛擬化之方法、電腦系統及電腦程式產品
TWI748594B (zh) * 2020-08-10 2021-12-01 盛微先進科技股份有限公司 可補償斷音的無線接收裝置及其資訊處理方法
US11792560B2 (en) 2021-05-21 2023-10-17 Skullcandy, Inc. Audio operating systems for portable electronic accessory systems and related systems, methods, and devices

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090307511A1 (en) * 2008-06-06 2009-12-10 Hugo Fiennes Portable electronic devices with power management capabilities
US20150070184A1 (en) * 2013-09-11 2015-03-12 Saurabh Dadu Low power voice trigger for finding mobile devices
US20150112690A1 (en) * 2013-10-22 2015-04-23 Nvidia Corporation Low power always-on voice trigger architecture
CN104969289A (zh) * 2013-02-07 2015-10-07 苹果公司 数字助理的语音触发器
WO2017069310A1 (ko) * 2015-10-23 2017-04-27 삼성전자 주식회사 전자 장치 및 이의 제어 방법

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5524261A (en) * 1991-12-31 1996-06-04 Dictaphone Corporation (U.S.) Voice processor interface chip with arbitration unit
US20020099893A1 (en) * 2001-01-24 2002-07-25 Nguyen Tuyet-Huong Thi System and method for the handling of system management interrupts in a multiprocessor computer system
KR100735413B1 (ko) 2006-08-08 2007-07-04 삼성전자주식회사 블루투스를 이용하여 음악 데이터 재생 중 음성을입출력하는 이동통신 단말기 및 음성 입출력 방법
EP2608444B1 (en) 2011-12-19 2014-10-22 GN Netcom A/S Method and system for synchronizing isochronous usb audio data to a rf communication device clock
CN103379231B (zh) 2012-04-17 2016-02-10 中兴通讯股份有限公司 一种无线会议电话及其进行语音信号传递的方法
US9479275B2 (en) 2012-06-01 2016-10-25 Blackberry Limited Multiformat digital audio interface
US9164935B2 (en) * 2013-01-04 2015-10-20 International Business Machines Corporation Determining when to throttle interrupts to limit interrupt processing to an interrupt processing time period
JP2015052466A (ja) 2013-09-05 2015-03-19 株式会社デンソー 車両用装置及び音声切換制御プログラム
KR20150077774A (ko) * 2013-12-30 2015-07-08 삼성전자주식회사 화면 전환 방법 및 그 장치
KR102299330B1 (ko) * 2014-11-26 2021-09-08 삼성전자주식회사 음성 인식 방법 및 그 전자 장치
KR102346302B1 (ko) * 2015-02-16 2022-01-03 삼성전자 주식회사 전자 장치 및 음성 인식 기능 운용 방법
CN106484441B (zh) * 2015-08-26 2020-02-28 鸿富锦精密电子(天津)有限公司 控制器初始化方法及应用该方法的电子装置
US10678494B2 (en) * 2016-06-27 2020-06-09 Qualcomm Incorporated Controlling data streams in universal serial bus (USB) systems
CN107017004A (zh) * 2017-05-24 2017-08-04 建荣半导体（深圳）有限公司 噪声抑制方法、音频处理芯片、处理模组及蓝牙设备
CN107124674B (zh) 2017-06-20 2019-11-08 歌尔科技有限公司 一种蓝牙耳机的音频输出方法、装置和蓝牙耳机
KR102585784B1 (ko) 2018-01-25 2023-10-06 삼성전자주식회사 오디오 재생시 인터럽트를 지원하는 애플리케이션 프로세서, 이를 포함하는 전자 장치 및 그 동작 방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090307511A1 (en) * 2008-06-06 2009-12-10 Hugo Fiennes Portable electronic devices with power management capabilities
CN104969289A (zh) * 2013-02-07 2015-10-07 苹果公司 数字助理的语音触发器
US20150070184A1 (en) * 2013-09-11 2015-03-12 Saurabh Dadu Low power voice trigger for finding mobile devices
US20150112690A1 (en) * 2013-10-22 2015-04-23 Nvidia Corporation Low power always-on voice trigger architecture
WO2017069310A1 (ko) * 2015-10-23 2017-04-27 삼성전자 주식회사 전자 장치 및 이의 제어 방법

Also Published As

Publication number Publication date
US11256638B2 (en) 2022-02-22
US20190227964A1 (en) 2019-07-25
US20200401539A1 (en) 2020-12-24
KR102585784B1 (ko) 2023-10-06
KR20190090550A (ko) 2019-08-02
CN110083224A (zh) 2019-08-02
TW201933088A (zh) 2019-08-16
US10789190B2 (en) 2020-09-29

Similar Documents

Publication Publication Date Title
TWI798291B (zh) 支援音訊回放期間中斷的應用處理器、包含該處理器的電子裝置以及其操作方法
US11216399B2 (en) Application processor for low power operation, electronic device including the same and method of operating the same
TWI791662B (zh) 包含具安全性之低電力語音觸發系統的應用處理器
CN108681474A (zh) 应用预加载方法、装置、存储介质及终端
TWI794342B (zh) 支援低功率回音消除之應用處理器、包含該處理器的電子裝置及其操作方法
TWI776988B (zh) 包含具插話用直接路徑之低電力語音觸發系統的應用處理器、包含該處理器的電子裝置及其操作方法
US10783887B2 (en) Application processor including low power voice trigger system with external interrupt, electronic device including the same and method of operating the same
WO2015027950A1 (zh) 立体声录制方法、装置和终端