TWI386863B

TWI386863B - 多媒體處理器、手持式電子通訊裝置及其影像處理方法

Info

Publication number: TWI386863B
Application number: TW097138049A
Authority: TW
Inventors: Chung Ching Tsai; Chin I Huang
Original assignee: Alpha Imaging Technology Corp
Priority date: 2008-10-03
Filing date: 2008-10-03
Publication date: 2013-02-21
Also published as: TW201015484A; US20100085354A1

Description

多媒體處理器、手持式電子通訊裝置及其影像處理方法

本發明是有關於一種多媒體處理器、手持式電子通訊裝置及其影像處理方法，且特別是有關於一種具有繪圖功能之多媒體處理器、手持式電子通訊裝置及其影像處理方法。

請參照第1圖，其繪示傳統行動電話(mobile phone)之示意圖。行動電話100包括光學感測器(sensor)110、影像訊號處理(image signal processing)晶片120、基頻(baseband)晶片130以及液晶面板140。其中，光學感測器110經由一國際無線電諮詢委員會(Consultative Committee of International Radio, CCIR)匯流排耦接至影像訊號處理晶片120，影像訊號處理晶片120經由另一CCIR匯流排耦接至基頻晶片130，此些CCIR匯流排均為單向(uni-directional)匯流排。光學感測器110用以產生多個原始影像畫面，此些原始影像畫面係為未經處理的(raw)影像畫面。光學感測器110將此些原始影像畫面傳送至影像訊號處理晶片120。

請參照第2圖，其繪示傳統影像訊號處理晶片之方塊圖。影像訊號處理晶片120包括CCIR接收器121、影像處理引擎(image processing engine)122、縮放引擎(scaling engine)123以及CCIR傳送器124。影像訊號處理晶片120經由CCIR接收器121從光學感測器110接收多個原始影像畫面。影像處理引擎122對此些原始影像畫面進行諸如自動曝光、自動白平衡或自動對焦等影像處理的功能而得到多個調整後影像畫面。縮放引擎123依據液晶面板140之解析度縮放此些調整後影像畫面而得到多個縮放後影像畫面。CCIR傳送器124將此些縮放後影像畫面輸出至基頻晶片130。基頻晶片130將此些縮放後影像畫面顯示於液晶面板140上。

然而，隨著行動電話100的功能越來越多元化，繪圖功能亦成為行動電話100所需附加的多種功能之一。是故，可能必須利用基頻晶片130以執行繪圖的功能，或是利用外部記憶體介面(external memory interface，EMI)或是記憶體映射週邊(memory mapped peripherals，MMP)於基頻晶片130處加載額外的電路元件以提供繪圖的功能。但如此一來，則必須對基頻晶片130之龐大且複雜的軟體架構，亦即人機界面(main-machine interface，MMI)，進行修改更動，使得成本增加，且不適用於整合型的架構。

本發明係有關於一種多媒體處理器、手持式電子通訊裝置及其影像處理方法，利用多媒體處理器實現繪圖的功能，並藉由可傳輸大容量資料的匯流排將圖像畫面傳送至主控處理器，使得主控處理器的軟體架構不需變更即可以顯示圖像畫面於顯示單元。

根據本發明之第一方面，提出一種多媒體處理器，包括一影像處理引擎、一動態影像處理引擎、一靜態影像處理引擎、一主控介面接收器、一繪圖引擎以及一縮放引擎。影像處理引擎用以將來自一影像感測單元之一原始影像畫面調整為一調整後影像畫面。動態影像處理引擎用以處理調整後影像畫面之一動態影像以得到一處理後動態影像畫面。靜態影像處理引擎用以處理調整後影像畫面之一靜態影像以得到一處理後靜態影像畫面。主控介面接收器用以經由一第一匯流排從一主控處理器接收一圖像描繪指令。繪圖引擎用以依據圖像描繪指令繪製一圖像畫面。縮放引擎用以分別縮放調整後影像畫面、處理後動態影像畫面、處理後靜態影像畫面、及圖像畫面至少其中之一，並經由一第二匯流排輸出縮放後的調整後影像畫面、處理後動態影像畫面、處理後靜態影像畫面、及圖像畫面至少其中之一至主控處理器。

根據本發明之第二方面，提出一種手持式電子通訊裝置，包括一主控處理器、一多媒體處理器以及一顯示單元。主控處理器用以輸出一圖像描繪指令。多媒體處理器係與主控處理器電性連接，用以調整一原始影像畫面為一調整後影像畫面、處理調整後影像畫面之一動態影像為一處理後動態影像畫面、處理調整後影像畫面之一靜態影像為一處理後靜態影像畫面，或依據圖像描繪指令繪製一圖像畫面，且縮放調整後影像畫面、處理後動態影像畫面、處理後靜態影像畫面或圖像畫面。顯示單元用以於主控處理器的控制之下，顯示縮放後的調整後影像畫面、處理後動態影像畫面、處理後靜態影像畫面或圖像畫面。

根據本發明之第三方面，提出一種手持式電子通訊裝置之影像處理方法，手持式電子通訊裝置包括一主控處理器、一多媒體處理器以及一顯示單元。影像處理方法包括下列步驟。利用主控處理器以輸出一圖像描繪指令。利用多媒體處理器以調整一原始影像畫面為一調整後影像畫面、處理調整後影像畫面之一動態影像為一處理後動態影像畫面、處理調整後影像畫面之一靜態影像為一處理後靜態影像畫面，或依據圖像描繪指令繪製一圖像畫面，且縮放調整後影像畫面、處理後動態影像畫面、處理後靜態影像畫面或圖像畫面。利用主控處理器以接收並顯示縮放後的調整後影像畫面、處理後動態影像畫面、處理後靜態影像畫面或圖像畫面於顯示單元。

為讓本發明之上述內容能更明顯易懂，下文特舉一較佳實施例，並配合所附圖式，作詳細說明如下：

本發明係提供一種多媒體處理器、手持式電子通訊裝置及其影像處理方法，利用多媒體處器內之繪圖引擎實現繪圖的功能，並藉由原有的可傳輸大容量資料的匯流排將圖像畫面傳送至主控處理器，使得主控處理器的軟體架構不需變更即可以顯示圖像畫面於顯示單元。

請參照第3圖，其繪示依照本發明較佳實施例之手持式電子通訊裝置之方塊圖。手持式電子通訊裝置300例如為一行動電話，其包括一多媒體處理器320、一主控處理器(host processor)330以及一顯示單元340。其中，主控處理器530例如為一基頻晶片(Baseband chip)或一應用處理器(Application Processor)。

多媒體處器320係經由一單向的第二匯流排360與主控處理器330溝通，第二匯流排360例如為一國際無線電諮詢委員會(CCIR)並列匯流排、一標準行動影像架構(Standard Mobile Imaging Architecture，SMIA)串列匯流排或一行動產業處理器介面(Mobile Industry Processor Interface，MIPI)串列匯流排，第二匯流排360可用以傳輸大容量的資料。此外，主控處理器330則經由一第一匯流排350與多媒體處器320溝通，第一匯流排350可為任意的串列或並列匯排，並不做限制。

請參照第4圖，其繪示依照本發明較佳實施例之多媒體處器之方塊圖。多媒體處器320包括CCIR接收器321、影像處理引擎322、動態影像處理引擎323、靜態影像處理引擎324、主控介面接收器(host controller)325、繪圖引擎(graphic engine)326、縮放引擎327以及CCIR傳送器324主控介面。多媒體處器320實質上係經由CCIR接收器321從一影像感測單元(未繪示於圖)接收多個原始影像畫面。影像感測單元例如為一互補金氧半導體(CMOS)感測器或一電荷耦合元件(CCD)感測器，其用以產生多個原始影像畫面，此些原始影像畫面係為未經處理的(raw)影像畫面。此些原始影像畫面例如為靜態影像(static image)。

影像處理引擎322例如對所接收到的一原始影像畫面進行諸如自動曝光、自動白平衡或自動對焦等影像處理的功能而得到一調整後影像畫面。動態影像處理引擎323用以處理調整後影像畫面中之一動態影像以得到一處理後動態影像畫面。動態影像可以被儲存於儲存單元，或是可以來自主控處理器330。靜態影像處理引擎324用以處理調整後影像畫面中之一靜態影像以得到一處理後靜態影像畫面。靜態影像可以被儲存於儲存單元，或是可以來自主控處理器330。

若手持式電子通訊裝置300欲執行繪圖功能時，則主控處理器330輸出一圖像描繪(graphic rendering)指令以控制多媒體處器320進行繪圖的動作。多媒體處器320利用主控介面接收器325經由第一匯流排350從主控處理器330接收圖像描繪指令。繪圖引擎326依據圖像描繪指令進行繪圖的動作而得到一圖像畫面。其中，繪圖引擎326可為一三維繪圖引擎或亦一向量繪圖引擎，並不做限制，兩者亦可同時存在。

縮放引擎327依據顯示單元340之解析度分別縮放調整後影像畫面、處理後動態影像畫面、處理後靜態影像畫面、及圖像畫面至少其中之一，此些縮放後的畫面例如為YUV/RGB影像畫面。CCIR傳送器328經由第二匯流排360將縮放後的調整後影像畫面、處理後動態影像畫面、處理後靜態影像畫面、及圖像畫面至少其中之一輸出至主控處理器330。主控處理器330將此些縮放後的畫面顯示於顯示單元340上。此外，多媒體處理器320更可包括一合成單元(未繪示於圖)。合成單元可被置於縮放引擎327 之前，以先將調整後影像畫面、處理後動態影像畫面、處理後靜態影像畫面、或圖像畫面進行合成再由縮放引擎327進行縮放的動作。合成單元亦可被置於縮放引擎327之後，以對縮放後的多個畫面進行合成的動作。

之後，多媒體處器320利用CCIR傳送器328經由可傳輸大容量資料的第二匯流排360將縮放後的調整後影像畫面、處理後動態影像畫面、處理後靜態影像畫面、或圖像畫面輸出至主控處理器330。主控處理器330將此些縮放後的畫面顯示於顯示單元340上。

於上述本發明較佳實施例之手持式電子通訊裝置300中，利用多媒體處器320內新增的繪圖引擎326進行繪圖的功能，並藉由原有可以傳輸大容量資料的第二匯流排360將圖像畫面傳輸至主控處理器330，使得主控處理器330得以顯示圖像畫面於顯示單元340上。如此一來，即可在不更動修改主控處理器330的軟體架構，亦即人機界面(MMI)，的情況下，整合繪圖的功能於手持式電子通訊裝置300中。

此外，本發明亦提供一種手持式電子通訊裝置之影像處理方法，手持式電子通訊裝置包括一主控處理器、一多媒體處器以及一顯示單元。影像處理方法包括下列步驟。利用主控處理器以輸出一圖像描繪指令。利用多媒體處理器以調整一原始影像畫面為一調整後影像畫面、處理調整後影像畫面之一動態影像為一處理後動態影像畫面、處理調整後影像畫面之一靜態影像為一處理後靜態影像畫面，或依據圖像描繪指令繪製一圖像畫面，且縮放調整後影像畫面、處理後動態影像畫面、處理後靜態影像畫面或圖像畫面。利用主控處理器以接收並顯示縮放後的調整後影像畫面、處理後動態影像畫面、處理後靜態影像畫面或圖像畫面於顯示單元。上述手持式電子通訊裝置之影像處理方法，其操作原理係已詳述於手持式電子通訊裝置300中，故於此不再重述。

本發明上述實施例所揭露之一種多媒體處理器、手持式電子通訊裝置及其影像處理方法，利用多媒體處器內之繪圖引擎實現繪圖的功能，並藉由原有的可傳輸大容量資料的匯流排將圖像畫面傳送至主控處理器，故在不變更主控處理器的軟體架構的情況下，使得主控處理器得以顯示圖像畫面於顯示單元，利於將繪圖的功能整合於手持式電子通訊裝置中。

綜上所述，雖然本發明已以一較佳實施例揭露如上，然其並非用以限定本發明。本發明所屬技術領域中具有通常知識者，在不脫離本發明之精神和範圍內，當可作各種之更動與潤飾。因此，本發明之保護範圍當視後附之申請專利範圍所界定者為準。

100‧‧‧行動電話

110‧‧‧光學感測器

120‧‧‧影像訊號處理晶片

121、321‧‧‧CCIR接收器

122、322‧‧‧影像處理引擎

123、327‧‧‧縮放引擎

124、328‧‧‧CCIR傳送器

130‧‧‧基頻晶片

140‧‧‧液晶面板

300‧‧‧手持式電子通訊裝置

320‧‧‧多媒體處器

323‧‧‧動態影像處理引擎

324‧‧‧靜態影像處理引擎

325‧‧‧主控介面接收器

326‧‧‧繪圖引擎

330‧‧‧主控處理器

340‧‧‧顯示單元

350‧‧‧第一匯流排

360‧‧‧第二匯流排

第1圖繪示傳統行動電話之示意圖。

第2圖繪示傳統影像訊號處理晶片之方塊圖。

第3圖繪示依照本發明較佳實施例之手持式電子通訊裝置之方塊圖。

第4圖繪示依照本發明較佳實施例之多媒體處器之方塊圖。

320‧‧‧多媒體處理器

321‧‧‧CCIR接收器

322‧‧‧影像處理引擎

323‧‧‧動態影像處理引擎

324‧‧‧靜態影像處理引擎

325‧‧‧主控介面接收器

326‧‧‧繪圖引擎

327‧‧‧縮放引擎

328‧‧‧CCIR傳送器

350‧‧‧第一匯流排

360‧‧‧第二匯流排

Claims

一種多媒體處理器，包括：一影像處理引擎，用以將來自一影像感測單元之一原始影像畫面調整為一調整後影像畫面；一動態影像處理引擎，用以處理該調整後影像畫面之一動態影像以得到一處理後動態影像畫面；一靜態影像處理引擎，用以處理該調整後影像畫面之一靜態影像以得到一處理後靜態影像畫面；一主控介面接收器(host controller)，用以經由一第一匯流排從一主控處理器(host processor)接收一圖像描繪(graphic rendering)指令；一繪圖引擎，用以依據該圖像描繪指令繪製一圖像畫面；以及一縮放引擎，用以分別縮放該調整後影像畫面、該處理後動態影像畫面、該處理後靜態影像畫面、及該圖像畫面至少其中之一，並經由一第二匯流排輸出縮放後的該調整後影像畫面、該處理後動態影像畫面、該處理後靜態影像畫面、及該圖像畫面至少其中之一至該主控處理器。
如申請專利範圍第1項所述之多媒體處理器，其中該第二匯流排係為一國際無線電諮詢委員會(CCIR)並列匯流排、一標準行動影像架構(SMIA)串列匯流排或一行動產業處理器介面(MIPI)串列匯流排。
如申請專利範圍第1項所述之多媒體處理器，其中該動態影像或該靜態影像係來自該主控處理器或一儲存單元。
如申請專利範圍第1項所述之多媒體處理器，其中該繪圖引擎係為一三維繪圖引擎或一向量繪圖引擎。
一種手持式電子通訊裝置，包括：一主控處理器，用以輸出一圖像描繪指令；一多媒體處理器，係與該主控處理器電性連接，用以調整一原始影像畫面為一調整後影像畫面、處理該調整後影像畫面之一動態影像為一處理後動態影像畫面、處理該調整後影像畫面之一靜態影像為一處理後靜態影像畫面，或依據該圖像描繪指令繪製一圖像畫面，且縮放該調整後影像畫面、該處理後動態影像畫面、該處理後靜態影像畫面或該圖像畫面；以及一顯示單元，用以於該主控處理器的控制之下，顯示縮放後的該調整後影像畫面、該處理後動態影像畫面、該處理後靜態影像畫面或該圖像畫面。
如申請專利範圍第5項所述之手持式電子通訊裝置，更包括一第一匯流排及一第二匯流排，其中該主控處理器經由該第一匯流排輸出該圖像描繪指令至該多媒體處理器，該多媒體處理器經由該第二匯流排輸出縮放後的該調整後影像畫面、該處理後動態影像畫面、該處理後靜態影像畫面或該圖像畫面至該主控處理器。
如申請專利範圍第6項所述之手持式電子通訊裝置，其中該第二匯流排係為一CCIR並列匯流排、一SMIA串列匯流排或一MIPI串列匯流排。
如申請專利範圍第5項所述之手持式電子通訊裝置，其中該主控處理器係為一基頻晶片或一應用處理器。
如申請專利範圍第5項所述之手持式電子通訊裝置，更包括一影像感測單元，用以產生該原始影像畫面。
如申請專利範圍第5項所述之手持式電子通訊裝置，其中該動態影像或該靜態影像係來自該主控處理器或一儲存單元。
如申請專利範圍第5項所述之手持式電子通訊裝置，其中該多媒體處理器包括：一影像處理引擎，用以調整該原始影像畫面為該調整後影像畫面；一動態影像處理引擎，用以處理該動態影像以得到該處理後動態影像畫面；一靜態影像處理引擎，用以處理該靜態影像以得到該處理後靜態影像畫面；一主控介面接收器，用以從該主控處理器接收該圖像描繪指令；一繪圖引擎，用以依據該圖像描繪指令繪製該圖像畫面；以及一縮放引擎，用以縮放該調整後影像畫面、該處理後動態影像畫面、該處理後靜態影像畫面或該圖像畫面。
如申請專利範圍第11項所述之手持式電子通訊裝置，其中該繪圖引擎係為一三維繪圖引擎或一向量繪圖引擎。
一種手持式電子通訊裝置之影像處理方法，該手持式電子通訊裝置包括一主控處理器、一多媒體處理器以及一顯示單元，該影像處理方法包括：利用該主控處理器以輸出一圖像描繪指令；利用該多媒體處理器以調整一原始影像畫面為一調整後影像畫面、處理該調整後影像畫面之一動態影像為一處理後動態影像畫面、處理該調整後影像畫面之一靜態影像為一處理後靜態影像畫面，或依據該圖像描繪指令繪製一圖像畫面，且縮放該調整後影像畫面、該處理後動態影像畫面、該處理後靜態影像畫面或該圖像畫面；以及利用該主控處理器以接收並顯示縮放後的該調整後影像畫面、該處理後動態影像畫面、該處理後靜態影像畫面或該圖像畫面於該顯示單元。
如申請專利範圍第13項所述之手持式電子通訊裝置之影像處理方法，其中該手持式電子通訊裝置更包括一第一匯流排及一第二匯流排，該影像處理方法更包括：利用該主控處理器經由該第一匯流排輸出該圖像描繪指令至該多媒體處理器；以及利用該多媒體處理器經由該第二匯流排輸出縮放後的該調整後影像畫面、該處理後動態影像畫面、該處理後靜態影像畫面或該圖像畫面至該主控處理器。
如申請專利範圍第14項所述之手持式電子通訊裝置之影像處理方法，其中該第二匯流排係為一CCIR並列匯流排、一SMIA串列匯流排或一MIPI串列匯流排。
如申請專利範圍第13項所述之手持式電子通訊裝置之影像處理方法，其中該主控處理器係為一基頻晶片或一應用處理器。
如申請專利範圍第13項所述之手持式電子通訊裝置之影像處理方法，其中該手持式電子通訊裝置更包括一影像感測單元，該影像處理方法更包括：利用該影像感測單元以產生該原始影像畫面。
如申請專利範圍第13項所述之手持式電子通訊裝置之影像處理方法，其中該動態影像或該靜態影像係來自該主控處理器或一儲存單元。
如申請專利範圍第13項所述之手持式電子通訊裝置之影像處理方法，其中該多媒體處理器包括一影像處理引擎、一動態影像處理引擎、一靜態影像處理引擎、一主控介面接收器、一繪圖引擎以及一縮放引擎，該影像處理方法更包括：利用該影像處理引擎以調整該原始影像畫面為該調整後影像畫面；利用該動態影像處理引擎以處理該動態影像以得到該處理後動態影像畫面；利用該靜態影像處理引擎以處理該靜態影像以得到該處理後靜態影像畫面；利用該主控介面接收器以從該主控處理器接收該圖像描繪指令；利用該繪圖引擎以依據該圖像描繪指令繪製該圖像畫面；以及利用該縮放引擎以縮放該調整後影像畫面、該處理後動態影像畫面、該處理後靜態影像畫面或該圖像畫面。
如申請專利範圍第19項所述之手持式電子通訊裝置之影像處理方法，其中該繪圖引擎係為一三維繪圖引擎或一向量繪圖引擎。