TW201924325A - 傳輸裝置 - Google Patents

傳輸裝置 Download PDF

Info

Publication number
TW201924325A
TW201924325A TW107138919A TW107138919A TW201924325A TW 201924325 A TW201924325 A TW 201924325A TW 107138919 A TW107138919 A TW 107138919A TW 107138919 A TW107138919 A TW 107138919A TW 201924325 A TW201924325 A TW 201924325A
Authority
TW
Taiwan
Prior art keywords
image
data
information
roi
area
Prior art date
Application number
TW107138919A
Other languages
English (en)
Other versions
TWI783075B (zh
Inventor
吉持直樹
杉岡達也
高橋知宏
飯沼隆弘
依田光二
小澤美穗
稻田喜昭
Original Assignee
日商索尼半導體解決方案公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日商索尼半導體解決方案公司 filed Critical 日商索尼半導體解決方案公司
Publication of TW201924325A publication Critical patent/TW201924325A/zh
Application granted granted Critical
Publication of TWI783075B publication Critical patent/TWI783075B/zh

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4347Demultiplexing of several video streams
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/38Information transfer, e.g. on bus
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • G09G5/006Details of the interface to the display terminal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4331Caching operations, e.g. of an advertisement for later insertion during playback
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/667Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/10Use of a protocol of communication by packets in interfaces along the display data pipeline

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Human Computer Interaction (AREA)
  • Image Processing (AREA)
  • Studio Devices (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Transplanting Machines (AREA)
  • Seal Device For Vehicle (AREA)
  • Eye Examination Apparatus (AREA)

Abstract

本發明提供一種傳輸裝置,其包含:一影像處理單元,其針對一影像中之若干列中之每一者設定對應於在該影像中設定之一區域之區域資訊且致使針對每一列傳輸對應於該區域之該設定區域資訊及區域資料。該區域資訊包含指示該列之一位置之資訊及指示該列中所包含的該區域之一行之一位置之資訊。

Description

傳輸裝置
本發明係關於一種傳輸裝置。
已開發用於切割由一成像裝置擷取之一影像之一部分區域且傳送經切割區域之資料的技術。舉例而言,下文在PTL 1中所闡述之技術可列於前述技術當中。另外,舉例而言,下文在專利文獻2至4中所闡述之技術可列於用於切割一影像之一部分區域之技術當中。
[引用清單]
[專利文獻]
[PTL 1]
JP 2016-201756A
[PTL 2]
JP 2013-164834
[PTL 3]
JP 2012-209831A
[PTL 4]
JP 2014-39219A
[技術問題]
舉例而言,在其中使用PTL 1中所闡述之技術之一情形中,可能自一影像切割一部分區域且傳送經切割區域之資料。因此,由於與在其中傳送整個影像之一情形中相比,在其中傳送藉由使用PTL 1中所闡述之技術切割之區域之影像之一情形中,與傳送相關之資料量較小,因此存在優點,諸如一傳送時間被縮短之一優點。
然而,根據PTL 1中所闡述之技術之經切割區域係一矩形區域,且未特別考量傳送具有另一形狀之一區域中之資料。另外,根據如PTL 2至PTL 4中所闡述之切割影像之部分區域之技術,經切割區域亦係矩形區域。因此,難以使用PTL 1至PTL 4中之現有技術傳送具有在一影像中設定之一任意形狀之一區域中之資料。
本發明將提出一種能夠傳輸具有在一影像中設定之一任意形狀之一區域中之資料的新穎且經改良的傳輸裝置。
[問題之解決方案]
根據本發明之一實施例,提供一種傳輸裝置,其包含:一影像處理單元,其針對一影像中之若干列中之每一者設定對應於在該影像中設定之一區域之區域資訊,且致使針對每一列傳輸對應於該區域之該設定區域資訊及區域資料。該區域資訊包含指示該列之一位置之資訊及指示該列中所包含的該區域之一行之一位置之資訊。
[本發明之有利效應]
根據本發明之一實施例,可能傳輸具有在一影像中設定之一任意形狀之一區域中之資料。
應注意,上文所闡述之效應不必係限制性的。與以上效應一起或代替以上效應,可達成本說明書中所闡述之效應中之任一者或可自本說明書獲得之其他效應。
[相關申請案之交叉參考]
本申請案主張2017年11月10日提出申請之日本優先權專利申請案JP 2017-217484之權益,該日本優先權專利申請案之全部內容以引用方式併入本文中。
下文中,將參考隨附圖式詳細闡述本發明之一(若干)較佳實施例。應注意,在本說明書及隨附圖式中,以相同元件符號表示具有實質上相同功能及結構之結構元件,且省略對此等結構元件之重複解釋。
另外,在以下說明中將使用下文所展示之次序。
1.根據實施例之傳輸方法
<1>可將根據實施例之傳輸方法應用到的通信系統之組態
<2>根據實施例之通信系統之應用實例
<3>根據實施例之傳輸方法
<4>藉由使用根據實施例之傳輸方法達成之優點之實例
2.根據實施例之程式
<<根據實施例之傳輸方法>>
<1>可將根據實施例之傳輸方法應用到的通信系統之組態
首先,將闡述可將根據一實施例之一傳輸方法應用到的一通信系統之一組態之一實例。
在以下說明中,將例示其中根據實施例之通信系統中所包含之裝置之間的一通信方案係根據行動產業處理器介面(MIPI)相機串列介面2 (CSI-2)標準之一通信方案的一情形。應注意,根據實施例之通信系統中所包含之裝置之間的通信方案不限於根據MIPI CSI-2標準之通信方案。舉例而言,根據實施例之通信系統中所包含之裝置之間的通信可係由MIPI聯盟定義之另一標準,諸如根據MIPI CSI-3標準之一通信方案或根據MIPI顯示器串列介面(DSI)之一通信方案。另外,無須贅言,可將根據實施例之傳輸方法應用到的通信方案不限於與由MIPI聯盟定義之標準相關之通信方案。
圖1係圖解說明根據實施例之一通信系統1000之一組態之一實例的一說明圖。作為通信系統1000,例示一通信裝置,舉例而言,諸如一智慧型電話、一無人飛行器(能夠透過遠端操作或自主操作執行操作之設備)、一移動主體(諸如一交通工具)及諸如此類。應注意,通信系統1000之應用實例不限於上文所闡述之實例。稍後將闡述通信系統1000之其他應用實例。
舉例而言,通信系統1000具有一影像感測器100、一處理器200、一記憶體300及一顯示裝置400。
影像感測器100具有一成像功能及一傳輸功能且傳輸指示藉由影像擷取產生之一影像之資料。處理器200接收自影像感測器100傳輸之資料且處理所接收資料。亦即,在通信系統1000中,影像感測器100充當一傳輸裝置,而處理器200充當一接收裝置。
應注意,儘管圖1圖解說明具有一個影像感測器100之通信系統1000,但根據實施例之通信系統具有之影像感測器100之數目不限於圖1中所圖解說明之實例。舉例而言,根據實施例之通信系統可具有兩個或多於兩個影像感測器100。
另外,儘管圖1圖解說明具有一個處理器200之通信系統1000,根據實施例之通信系統具有之處理器200之數目不限於圖1中所圖解說明之實例。舉例而言,根據實施例之通信系統可具有兩個或多於兩個處理器200。
在具有複數個影像感測器100及複數個處理器200之一通信系統中,影像感測器100與處理器200可具有一一對應性,或者一個處理器200可具有與複數個影像感測器100之對應性。另一選擇係,在具有複數個影像感測器100及複數個處理器200之通信系統中,複數個處理器200可具有與一個影像感測器100之對應性。
即使在具有複數個影像感測器100及複數個處理器200之通信系統中,亦在影像感測器100與處理器200之間以類似於圖1中所圖解說明之通信系統1000之方式執行通信。
影像感測器100及處理器200藉由一資料匯流排B1彼此電連接。資料匯流排B1係用於連接影像感測器100與處理器200之一個信號之一傳送路徑。舉例而言,指示自影像感測器100傳輸之一影像之資料(在某些情形中,下文中稱為「影像資料」)係自影像感測器100經由資料匯流排B1傳送至處理器200。
通信系統1000中經由資料匯流排B1傳送之一信號係根據預定標準(舉例而言,諸如MIPI CSI-2標準)根據一通信方案傳送。
圖2及圖3係圖解說明由MIPI CSI-2標準定義之封包之格式之說明圖。圖2圖解說明由MIPI CSI-2標準定義之一短封包之一格式,且圖3圖解說明由MIPI CSI-2標準定義之一長封包之一格式。
長封包係包含一封包標頭(圖3中所圖解說明之「PH」)、一有效負載(圖3中所圖解說明之「有效負載資料」)及一封包註腳(圖3中所圖解說明之「PF」)之資料。短封包係具有類似於如圖2中所圖解說明之封包標頭(圖3中所圖解說明之「PH」)之一結構之資料。
在短封包及長封包兩者之標頭部分中記錄虛擬通道(VC)數目(圖2及圖3中所圖解說明之「VC」;VC值),且可將任意VC數目應用於每一封包。將對其應用相同VC數目之封包處置為屬於相同影像資料之封包。
另外,在短封包及長封包兩者之標頭部分中記錄資料類型(DT)值(圖2及圖3中所圖解說明之「資料類型」)。因此,類似於VC數目,亦可能將已對其應用相同DT值之封包處置為屬於相同影像資料之封包。
將封包之末尾記錄為長封包之標頭部分中之字組計數中之字組之數目。在短封包及長封包之標頭部分中之ECC中記錄一錯誤校正碼。
根據MIPI CSI-2標準,在期間傳送一資料信號之一週期中使用一高速差動信號,且在資料信號之一遮沒週期中使用一低功率信號。另外,期間使用高速差動信號之週期稱作一高速狀態(HPS)週期,而期間使用低功率信號之週期稱作一低功率狀態(LPS)週期。
圖4係圖解說明與根據MIPI CSI-2標準之一封包之傳輸相關之一信號波形之一實例的一說明圖。圖4中之A圖解說明一封包之傳送之一實例,且圖4中之B圖解說明一封包之傳送之另一實例。圖4中所圖解說明之「ST」、「ET」、「PH」、「PF」、「SP」及「PS」具有以下意義。
-ST:傳輸開始
-ET:傳輸結束
-PH:封包標頭
-PF:封包註腳
-SP:短封包
-PS:封包間距
如圖4中所圖解說明,可能認識到,LPS週期(圖4中所圖解說明之「LPS」)中之一差動信號及HPS週期(除圖4中所圖解說明之「LPS」外)中之一差動信號之一振幅彼此不同。因此,鑒於改良傳送效率,包含儘可能少的LPS週期係合意的。
舉例而言,影像感測器100與處理器200藉由不同於資料匯流排B1之一控制匯流排B2彼此電連接。控制匯流排B2係用於其他信號之一傳送路徑,且將影像感測器100連接至處理器200。舉例而言,自處理器200輸出之控制資訊係自處理器200經由控制匯流排B2傳送至影像感測器100。
舉例而言,控制資訊包含用於控制及處理命令之資訊。作為用於控制之資訊,例示用於控制影像感測器100之功能之資料,諸如以下各項中之一者或兩者或者多於兩者:指示一影像大小之資料、指示一圖框速率之資料及指示自一影像輸出命令之接收至一影像輸出之一輸出延遲量之資料。另外,控制資訊可包含指示影像感測器100之識別資訊。作為識別資訊,例示可能以其規定影像感測器100 (諸如影像感測器100之一ID設定)之任意資料。
應注意,經由控制匯流排B2自處理器200傳送至影像感測器100之資訊不限於上文所闡述之實例。舉例而言,處理器200可經由控制匯流排B2傳送指定一影像中之一區域之區域指定資訊。作為區域指定資訊,例示可以其規定一區域之呈一任意形式之資料,諸如指示區域中所包含之一像素之一位置之資料(舉例而言,使用座標表示區域中所包含之一像素之一位置之座標資料)。
儘管圖1圖解說明其中影像感測器100與處理器200藉由控制匯流排B2彼此電連接之一實例,但影像感測器100與處理器200可不藉由控制匯流排B2連接。舉例而言,影像感測器100及處理器200可透過一任意通信方案之無線通信而傳輸且接收控制資訊及諸如此類。
下文中,將闡述圖1中所圖解說明之通信系統1000中所包含之各別裝置。
<1-1>記憶體300
記憶體300係通信系統1000具有之一記錄媒體。作為記憶體300,例示一揮發性記憶體(諸如一隨機存取記憶體(RAM))或一非揮發性記憶體(諸如一快閃記憶體)。記憶體300使用自通信系統1000中所包含之一內部電源(未圖解說明) (諸如一電池)供應之電力或自通信系統1000之一外部電源供應之電力來操作。
舉例而言,自影像感測器100輸出之一影像儲存於記憶體300中。舉例而言,記憶體300中對影像之記錄由處理器200控制。
<1-2>顯示裝置400
顯示裝置400係通信系統1000具有之一顯示裝置。作為顯示裝置400,例示一液晶顯示器及一有機電致發光顯示器(有機EL顯示器),亦稱為一有機發光二極體顯示器(OLED顯示器)。顯示裝置400使用自通信系統1000中所包含之一內部電源(未圖解說明) (諸如一電池)供應之電力或自通信系統1000之一外部電源供應之電力來操作。
在顯示裝置400之一顯示螢幕上顯示各種影像及畫面,諸如自影像感測器100輸出之一影像、與由處理器200執行之一應用程式相關之一畫面及與一使用者介面(UI)相關之一畫面。舉例而言,顯示裝置400之顯示螢幕上對影像及諸如此類之顯示由處理器200控制。
<1-3>處理器200 (接收裝置)
處理器200接收自影像感測器100傳輸之資料且處理所接收資料。如上文所闡述,處理器200充當通信系統1000中之一接收裝置。稍後將闡述與處理自影像感測器100傳輸之資料相關之一組態(用於充當接收裝置之一組態)之一實例。
處理器200包含一個或兩個或者多於兩個處理器、各種處理電路及包含算數電路(舉例而言,諸如一微處理單元(MPU))之類似裝置。處理器200使用自通信系統1000中所包含之一內部電源(未圖解說明) (諸如一電池)供應之電力或自通信系統1000之一外部電源供應之電力來操作。
處理器200執行各種處理,舉例而言,諸如與控制記錄媒體(諸如記憶體300)中對影像資料之記錄相關之處理、與控制顯示裝置400之顯示螢幕上對一影像之顯示相關之處理及執行任意應用程式軟體之處理。作為與控制記錄相關之處理,例示「將包含一記錄命令之控制資料及被致使記錄於記錄媒體(諸如記憶體300)中之資料遞送至該記錄媒體之處理」。另外,作為與控制顯示相關之處理,例示「將包含一顯示命令之控制資料及被致使顯示於顯示螢幕上之資料遞送至顯示裝置(諸如一顯示裝置400)之處理」。
另外,舉例而言,處理器200可藉由將控制資訊傳輸至影像感測器100而控制影像感測器100之功能。舉例而言,處理器200亦可藉由將區域指定資訊傳輸至影像感測器100而控制將自影像感測器100傳輸之資料。
<1-4>影像感測器100 (傳輸裝置)
影像感測器100具有一成像功能及一傳輸功能且傳輸指示藉由影像擷取產生之一影像之資料。如上文所闡述,影像感測器100充當通信系統1000中之一傳輸裝置。
影像感測器100包含「一成像裝置(諸如一數位靜態相機、一數位視訊攝影機或一立體攝影機)」或能夠產生一影像之一任意方案之一影像感測器裝置(諸如「一紅外線感測器」及「一距離影像感測器」),且具有傳輸所產生影像之一功能。由影像感測器100產生之影像對應於指示影像感測器100之一感測結果之資料。稍後將闡述影像感測器100之一組態之一實例。
影像感測器100根據稍後將闡述之根據實施例之傳輸方法傳輸對應於在一影像中設定之一區域之資料(下文中稱為「區域資料」)。舉例而言,與區域資料之傳輸相關之控制由用作影像感測器100中之一影像處理單元之一組件(稍後將闡述)執行。在某些情形中,在一影像中設定之區域稱為一所關注區域(ROI)。下文中,在某些情形中,將在影像中設定之區域表示為一「ROI」。
作為與在影像中設定一區域相關之處理,例示可能利用其規定影像中之一部分區域之任意處理(或能夠自影像切割一部分區域之任意處理),諸如「偵測影像中之一物件且設定包含所偵測物件之一區域之處理」或「設定藉由在一任意操作裝置或諸如此類上執行之一操作而指定之一區域之處理」。
與在影像中設定區域相關之處理可由影像感測器100執行或可由一外部裝置(諸如處理器200)執行。在其中影像感測器100執行與在影像中設定區域相關之處理之一情形中,影像感測器100根據與在影像中設定區域相關之處理之一結果而規定區域。另一選擇係,舉例而言,在其中與在影像中設定區域相關之處理由外部裝置執行之一情形中,影像感測器100基於自外部裝置獲取之區域指定資訊而規定區域。
與傳送整個影像時之資料量相比,由於傳輸區域資料(亦即,影像之部分資料),因此與傳送相關之資料量變得較小。因此,藉由減小資料量而達成之各種優點係藉由影像感測器100傳輸區域資料而達成,且(舉例而言)在通信系統1000中,一傳送時間縮短並且與傳送相關之一負載減小。
應注意,影像感測器100亦可傳輸指示整個影像之資料。
在其中影像感測器100具有傳輸區域資料之一功能及傳輸指示整個影像之資料之一功能之一情形中,影像感測器100可以一選擇性切換方式執行區域資料之傳輸及指示整個影像之資料之傳輸。
舉例而言,影像感測器100依據一設定操作模式而傳輸區域資料或傳輸指示整個影像之資料。舉例而言,操作模式之設定係藉由在一任意操作裝置上執行之一操作而執行。
另外,影像感測器100可基於自一外部裝置獲取之區域指定資訊而在傳輸區域資料與傳輸指示整個影像之資料之間選擇性地切換。舉例而言,當自外部裝置獲取到區域指定資訊時,影像感測器100傳輸對應於區域指定資訊之區域之區域資料。當未自外部裝置獲取區域指定資訊時,影像感測器100傳輸指示整個影像之資料。
舉例而言,通信系統1000具有圖1中所圖解說明之組態。應注意,根據實施例之通信系統之組態不限於圖1中所圖解說明之實例。
舉例而言,儘管已例示影像感測器100作為充當圖1中之傳輸裝置之裝置,但充當傳輸裝置之一裝置不限於影像感測器100。舉例而言,在其中根據實施例之通信系統具有具一影像感測器裝置(諸如一成像裝置)及電連接至該影像感測器裝置之一傳輸器之一組態之一情形中,傳輸器可充當傳輸裝置。
另外,儘管已例示處理器200作為充當圖1中之接收裝置之裝置,但充當接收裝置之裝置不限於處理器200。舉例而言,具有接收資料之一功能之一任意裝置可充當根據實施例之通信系統中之接收裝置。
另外,在其中將自影像感測器100傳輸之影像儲存於通信系統外部之一記錄媒體中之一情形中、在其中將自影像感測器100傳輸之影像儲存於提供於處理器200中之一記憶體中之一情形中、在其中不記錄自影像感測器100傳輸之影像之一情形中或在類似情形中,根據實施例之通信系統可不具有記憶體300。
另外,根據實施例之通信系統可採用其中通信系統不具有圖1中所圖解說明之顯示裝置400之一組態。
此外,根據實施例之通信系統可具有根據對其應用根據實施例之通信系統之一電子裝置之功能之一任意組態,如稍後將闡述。
<2>根據實施例之通信系統之應用實例
儘管上文已將通信系統闡述為實施例中之一實例,但實施例不限於此一實例。實施例可應用於各種電子裝置,諸如一通信裝置(諸如一智慧型電話)、一無人飛行器(能夠透過遠端操作或自主操作執行操作之設備)、一移動主體(諸如一交通工具)、一電腦(諸如一個人電腦(PC)),一平板型裝置及一遊戲主控台。
<3>根據實施例之傳輸方法
接下來,將闡述根據實施例之傳輸方法。下文中,將闡述其中將根據實施例之傳輸方法應用於圖1中所圖解說明之影像感測器100 (根據實施例之傳輸裝置)之一情形作為一實例。與根據實施例之傳輸方法相關之處理由用作一影像處理單元(舉例而言,在影像感測器100中)之一IC晶片(稍後將闡述)執行。應注意,與根據實施例之傳輸方法相關之處理可由用作影像感測器100中之一影像處理單元之另一組件執行。
圖5係圖解說明在影像中設定之區域之一實例之一說明圖。圖5圖解說明四個區域(亦即,一區域1、一區域2、一區域3及一區域4)作為區域之一實例。應注意,無須贅言,在影像中設定之區域不限於圖5中所圖解說明之實例。
如上文所闡述,在其中使用現有技術之一情形中,可能傳送一矩形區域(諸如圖5中之區域1)中之資料。
然而,即使使用現有技術,亦難以傳送具有在影像中設定之除矩形形狀外之一任意形狀之一區域(諸如圖5中之區域2、區域3及區域4)中之資料,如上文所闡述。另外,在其中在一列中設定複數個區域(諸如圖5中之區域1及區域2)之一情形中及在其中設定區域疊覆(諸如圖5中之區域3及區域4)之一情形中,即使使用現有技術,亦難以傳送區域中之資料。此處,影像中之列意指在像素之位置由一個二維平面座標(x, y)表示時y座標係相同的。
<3-1>基本處理
因此,影像感測器100針對影像中之每一列設定對應於在影像中設定之區域之區域資訊。
然後,影像感測器100致使針對每一列傳輸對應於區域之設定區域資訊及區域資料。影像感測器100致使根據一預定次序(舉例而言,諸如y座標之值之一升序、一降序)傳輸每一列之區域資訊及區域資料。另外,影像感測器100可致使以一隨機次序傳輸每一列之區域資訊及區域資料。
根據實施例之區域資訊係用於在接收裝置側規定在影像中設定之區域之資料(資料群組)。舉例而言,區域資訊包含指示列之位置之資訊、列中所包含之區域之識別資訊、指示列中所包含的區域之一行之位置之資訊及指示列中所包含之區域之大小之資訊。
應注意,區域資訊中所包含之資訊可依據稍後將闡述之一傳輸方案而改變。舉例而言,列中所包含之區域之識別資訊及指示列中所包含之區域之大小之資訊中之一者或兩者可不包含於稍後將闡述之一第二傳輸方案及一第三傳輸方案中。舉例而言,在其中藉由使用一VC數目而劃分區域之一情形中,根據稍後將闡述之第二傳輸方案及第三傳輸方案,VC數目可充當列中所包含之區域之識別資訊。另外,在其中藉由使用VC數目而劃分區域之情形中,根據稍後將闡述之第二傳輸方案及第三傳輸方案,可能替代地使用有效負載長度作為指示列中所包含之區域之大小之資訊。下文中,將例示「其中區域資訊包含指示列之位置之資訊、列中所包含之區域之識別資訊、指示列中所包含的區域之行之位置之資訊及指示列中所包含之區域之大小之資訊的情形」。
作為指示一列之位置之資訊,例示可能以其規定一列之任意資料,諸如指示一y座標之一數值之資料或指示藉由遞增一初始值(舉例而言,「0 (零)」)而計算的一y座標之一值之資料。下文中,在某些情形中,指示列之位置之資訊將稱為「Y」。
作為一區域之識別資訊,例示可能以其唯一地規定區域之任意資料,諸如指示一區域之一ID (諸如應用於區域之一數值)之資料。下文中,在某些情形中,區域之識別資訊將稱為「ROI ID」或「I」。
作為指示區域之一行之位置之資訊,例示可能以其規定行之任意資料,諸如指示一x座標之一數值之資料。下文中,在某些情形中,指示區域中之行之位置之資訊將稱為「ROI X」或「X」。
作為指示一區域之大小之資訊,例示可能以其規定列中之區域之大小之任意資料,諸如指示列處區域中之像素之數目之資料。下文中,在某些情形中,列處區域之大小將稱為「ROI長度」、「ROI LEN」或「L」。
已藉由在區域資訊中設定的指示列之位置之資訊、區域之識別資訊、指示區域之行之位置之資訊及指示區域之大小之資訊(舉例而言,如上文所闡述)而接收到區域資訊之接收裝置可執行區域之規定、區域之位置之規定及ROI長度之規定。另外,可能藉由執行區域之規定、區域之位置之規定及RIO長度之規定而唯一地規定已在列中設定處於何種位置及具有何種ROI長度之區域。
因此,通信系統1000可藉由在區域資訊中設定的指示列之位置之資訊、區域之識別資訊、指示區域之行之位置之資訊及指示區域之大小之資訊而分別與「矩形區域(諸如圖5中之區域1)中之區域資料」及「具有除矩形形狀外之任意形狀之區域(諸如圖5中之區域2、區域3及區域4)中之區域資料」之傳送相容。
另外,影像感測器100可在區域資訊中共同設定將包含於列中所包含之每一區域之區域資訊中之資訊。影像感測器100針對列中所包含之每一區域在區域資訊中共同設定區域之識別資訊、指示區域之行之位置之資訊及指示區域之大小之資訊(舉例而言)。每一區域之區域資訊之共同設定意指在區域資訊中設定區域之識別資訊、指示區域之行之位置之資訊及指示區域之大小之資訊(舉例而言) (區域資訊中所包含之資訊之一實例)作為一資料群組。
此處,由於影像感測器100設定每一列之區域資訊,因此即使包含複數個區域,但列之位置亦係恆定的。因此,影像感測器100在區域資訊中設定指示列之位置之一條資訊。應注意,無須贅言,影像感測器100可針對列中所包含之每一區域共同設定指示列之位置之資訊、區域之識別資訊、指示區域之行之位置之資訊及指示區域之大小之資訊。
舉例而言,已接收到區域資訊之接收裝置可藉由針對列中所包含之每一區域共同設定的區域之識別資訊、指示區域之行之位置之資訊及指示區域之大小之資訊而較容易地執行區域之規定、區域之位置之規定及每一區域之ROI長度之規定,如上文所闡述。另外,可能藉由執行區域之規定、區域之位置之規定及RIO長度之規定而唯一地規定已在列中設定處於何種位置、具有何種ROI長度之哪一區域。
因此,通信系統1000可藉由針對列中所包含之每一區域共同設定的區域之識別資訊、指示區域之行之位置之資訊及指示區域之大小之資訊而解決「在其中在一個列中設定複數個區域(諸如圖5中之區域1及區域2)之情形中區域資料之傳送」及「在其中設定區域疊覆(諸如圖5中之區域3及區域4)之情形中區域資料之傳送」。
另外,在一個列中依據一設定區域可存在複數個相同區域,舉例而言,如圖5中圖解說明為區域2。因此,在其中在一個列中存在複數個相同區域之情形中,影像感測器100可設定對應於若干個相同區域之區域資訊。在其中在一個列中存在複數個相同區域之情形中,影像感測器100在區域資訊中設定對應於若干個所存在區域的區域之識別資訊、指示區域之行之位置之資訊及指示區域之大小之資訊(舉例而言)。
已接收到區域資訊之接收裝置可藉由在區域資訊中設定的對應於在一個列中存在之若干個相同區域的區域之識別資訊、指示區域之行之位置之資訊及指示區域之大小之資訊(舉例而言)而針對複數個相同區域中之每一者執行區域之規定、區域之位置之規定及ROI長度之規定。
因此,通信系統1000可藉由在區域資訊中設定的對應於在一個列中存在之若干複數個相同區域之區域資訊而解決圖5中之區域2中之區域資料之傳送。
因此,已接收到區域資訊之接收裝置可藉由針對每一列設定的包含如上文所闡述之各種資訊(舉例而言)之區域資訊而唯一地規定在列中設定之區域。
應注意,區域資訊中所包含之資訊不限於上文所闡述之實例。舉例而言,區域資訊可包含其他資料,諸如指示列中所包含之區域之數目(下文中,在某些情形中,稱為「ROI之數目」)之資料及諸如此類。稍後將闡述區域資訊中所包含之資訊之特定實例。
<3-2>例外狀況處理
應注意,與根據實施例之傳輸方法相關之處理不限於以上基本處理。
(a)例外狀況處理之第一實例
舉例而言,影像感測器100可不在區域資訊中設定區域資訊中所包含之資訊中的未自緊接在前被致使傳輸的一列中之區域資訊中所包含之資訊改變之資訊。亦即,影像感測器100致使傳輸包含已自來自其之區域資訊緊接在前被致使傳輸之列改變之資訊的區域資訊。
可能藉由不傳輸未自緊接在前被致使傳輸的列中之區域資訊中所包含之資訊改變的資訊而致使進一步減小區域資訊之資料量,如上文所闡述。區域資訊之資料量之減小貢獻於一傳送時間之縮短及與通信系統1000中之傳送相關之一負載之減小。
應注意,即使資訊未自緊接在前被致使傳輸的列中之區域資訊中所包含之資訊改變,亦可存在根據其他資訊之一改變之在區域資訊中設定之資訊。
舉例而言,當在區域資訊中設定指示區域之行之位置之資訊時,影像感測器100在區域資訊中設定區域之識別資訊。另外,當在區域資訊中設定指示區域之大小之資訊時,影像感測器100在區域資訊中設定區域之識別資訊。亦即,在其中區域之x座標及ROI長度中之一者或兩者自緊接在前被致使傳輸的列中之區域資訊中所包含之內容改變之一情形中,影像感測器100在區域資訊中設定區域之識別資訊。
在其中區域之x座標及ROI長度中之一者或兩者改變之一情形中,已接收到區域資訊之接收裝置可藉由影像感測器100在區域資訊中設定區域之識別資訊而唯一地規定對應於改變之內容之區域。
(b)例外狀況處理之第二實例
如上文所闡述,影像感測器100可致使以一預定次序傳輸每一列之區域資訊及區域資料。在其中來自其之區域資訊及區域資料被致使傳輸之列係根據預定次序之列之一情形中,此時,影像感測器100可不在區域資訊中設定指示列之位置之資訊。
即使在其中影像感測器100不在區域資訊中設定指示列之位置之資訊之一情形中,接收裝置亦可藉由沿循預定次序而規定所接收區域資訊及區域資料包含於哪一列中。
<3-3>區域資訊及區域資料之傳輸方案
影像感測器100藉由執行「上文<3-1>」中所闡述之基本處理或「上文<3-1>」中所闡述之基本處理及「上文<3-2>」中所闡述之例外狀況處理而傳輸每一列之區域資訊及區域資料。接下來,將闡述傳輸區域資訊及區域資料之傳輸方案。
作為區域資訊及區域資料之傳輸方案,例示下文(1)中所闡述之一第一傳輸方案、下文(2)中所闡述之一第二傳輸方案及下文(3)中所闡述之一第三傳輸方案。
(1)第一傳輸方案
(1-1)與第一傳輸方案相關之處理
影像感測器100將區域資訊及區域資料儲存於一封包之一有效負載中且致使針對每一列傳輸區域資訊及區域資料。
圖6係圖解說明以與根據實施例之傳輸方法相關之一第一傳輸方案傳輸之資料之一實例的一說明圖。圖6圖解說明「其中將分別對應於圖5中所圖解說明之區域1、區域2、區域3及區域4之區域資訊及區域資料儲存於圖3中所圖解說明之MIPI之一長封包之一有效負載中且針對每一列傳輸該區域資訊及區域資料之一實例」。
圖6中所圖解說明之「FS」表示根據MIPI CSI-2標準之一圖框開頭(FS)封包,且圖6中所圖解說明之「FE」係根據MIPI CSI-2標準之一圖框末尾(FE)封包(相同情況適用於其他圖)。
圖6中所圖解說明之「嵌入式資料」係可嵌入於待傳輸之資料之一標頭或一註腳中之資料。作為「嵌入式資料」,例示由影像感測器100另外傳輸之額外資訊。下文中,在某些情形中,嵌入式資料將稱為「EBD」。
作為根據實施例之額外資訊,例示指示區域之資料量之資訊、指示區域之大小之資訊及指示區域之優先級之資訊中之一者或兩者或者多於兩者。
作為指示區域之資料量之資訊,例示呈可能以其規定區域之資料量之一任意形式之資料,諸如「區域中所包含之像素數目(或區域之資料量)及指示標頭之資料量之資料」。接收裝置可藉由作為圖6中所圖解說明之「嵌入式資料」傳輸之指示區域之資料量之資訊而規定每一區域之資料量。亦即,即使在其中接收裝置不具有基於區域資訊而計算每一區域之資料量之一功能之一情形中,亦可能致使接收裝置藉由作為圖6中所圖解說明之「嵌入式資料」傳輸之指示區域之資料量之資訊而規定區域之資料量。
作為指示區域之大小之資訊,例示呈可能以其規定區域之大小之一任意形式之資料,諸如「指示包含該區域之矩形區域之資料(舉例而言,指示矩形區域中沿水平方向之像素數目及沿垂直方向之像素數目之資料)」。
舉例而言,指示區域之優先級之資訊係在處理區域資料時使用之資料。在一項實例中,當在其中設定區域疊覆(諸如圖5中之區域3及區域4)及諸如此類之一情形中執行處理時,針對處理區域之一次序利用由指示區域之優先級之資訊指示之優先級。
應注意,根據實施例之額外資訊不限於上文所闡述之實例。作為根據實施例之額外資訊,例示各種資料,諸如指示影像感測器裝置之一曝光值或諸如此類之曝光資訊及指示影像感測器裝置之一增益之增益資訊。由曝光資訊指示之曝光值及由增益資訊指示之增益中之每一者係在影像感測器裝置中在由處理器200經由控制匯流排B2執行之控制下設定。
圖7係用於闡述根據與根據實施例之傳輸方法相關之第一傳輸方案傳輸之嵌入式資料之一實例的一說明圖。圖7圖解說明其中傳輸指示區域之大小之資訊作為圖6中所圖解說明之「嵌入式資料」且所傳輸指示區域之大小之資訊係指示包含該區域之一最小矩形區域之資料的一實例。另外,圖7圖解說明其中已類似於圖5設定四個區域(亦即,區域1、區域2、區域3及區域4)之一實例。
接收裝置可藉由作為圖6中所圖解說明之「嵌入式資料」傳輸之指示區域之大小之資訊而規定圖7中圖解說明為R1之包含區域1之最小矩形區域、圖7中圖解說明為R2之包含區域2之最小矩形區域、圖7中圖解說明為R3之包含區域3之最小矩形區域及圖7中圖解說明為R4之包含區域4之最小矩形區域。亦即,即使在其中接收裝置不具有基於區域資訊而規定包含每一區域之最小矩形區域之一功能之情形中,亦可能致使接收裝置藉由作為圖6中所圖解說明之「嵌入式資料」傳輸之指示區域之大小之資訊而基於區域資訊規定包含每一區域之最小矩形區域。應注意,無須贅言,指示區域之大小之資訊不限於指示包含每一區域之最小矩形區域之資料。
作為指示區域之優先級之資訊,例示呈可能以其規定區域之優先級之一任意形式之資料,諸如其中以自最高優先級之一次序對準ROI ID之資料或其中以自最低優先級之一次序對準ROI ID之資料。舉例而言,接收裝置可藉由作為圖6中所圖解說明之「嵌入式資料」傳輸之指示區域之優先級之資訊而規定區域之處理次序或按優先級將處理哪一區域。亦即,可能藉由作為圖6中所圖解說明之「嵌入式資料」傳輸之指示區域之優先級之資訊而控制由接收裝置對區域執行之處理。
應注意,無須贅言,作為圖6中所圖解說明之「嵌入式資料」傳輸的指示區域之資料量之資訊、指示區域之大小之資訊及指示區域之優先級之資訊之各別實例不限於上文所闡述之實例。
圖6中所圖解說明之「PH」係一長封包之一封包標頭。此處,與第一傳輸方案相關之長封包之封包標頭亦可用作指示區域資訊中所包含之資訊是否已自緊接在前被致使傳輸之一封包中所包含之區域資訊改變之資料(改變資訊)。亦即,可能陳述圖6中所圖解說明係「PH」係指示長封包之一資料類型之資料。
在一項實例中,在其中區域資訊中所包含之資訊已自緊接在前被致使傳輸之封包中所包含之區域資訊改變之一情形中,影像感測器100在「PH」中設定「0x38」。在此情形中,影像感測器100將區域資訊儲存於長封包之有效負載中。
在另一實例中,在其中區域資訊中所包含之資訊未自緊接在前被致使傳輸之封包中所包含之區域資訊改變之一情形中,影像感測器100在「PH」中設定「0x39」。在此情形中,影像感測器100不將區域資訊儲存於長封包之有效負載中。亦即,在其中區域資訊中所包含之資訊未自緊接在前被致使傳輸之封包中所包含之區域資訊改變之情形中,影像感測器100不傳輸區域資訊。
應注意,無須贅言,在「PH」中設定之資料不限於上文所闡述之實例。
圖6中所圖解說明之「資訊」係儲存於有效負載中之區域資訊(相同情況適用於其他圖)。如圖6中所圖解說明,區域資訊儲存於有效負載之頭部部分中。下文中,在某些情形中,區域資訊將稱為「ROI資訊」。
圖6中所圖解說明之「1」、「2」、「3」及「4」中之每一者對應於儲存於有效負載中的區域1之區域資料、區域2之區域資料、區域3之區域資料及區域4之區域資料(相同情況適用於其他圖式)。應注意,儘管圖6中以一劃分方式圖解說明各別條的區域資料,但此表示為了便利起見之劃分,且在將儲存於有效負載中之資料中不存在劃分(相同情況適用於其他圖式)。下文中,在某些情形中,區域資料將稱為「ROI資料」。
圖8係圖解說明根據與根據實施例之傳輸方法相關之第一傳輸方案傳輸之一長封包之一組態之一實例的一說明圖。
圖8中所圖解說明之「ROI資訊類型」係指示「ROI資訊參數」之一傳送方案之資料。已接收到區域資訊之接收裝置可藉由設定「ROI資訊類型」而唯一地規定「ROI資訊參數」之內容。
另外,「ROI資訊類型」對應於指示長封包之一資料類型之其他資料。亦即,針對與第一傳輸方案相關之長封包,將兩個項目(亦即,「PH」及「ROI資訊類型」)定義為長封包之資料類型。
舉例而言,「ROI資訊類型」係1位元組資料,且在由Verilog-HDL說明表示時具有以下意義。應注意,無須贅言,「ROI資訊類型」不限於1位元組資料。
- 〔7: 4〕…保留。
- 〔3〕…〔1’b1〕:傳送Y,〔1’b0〕:不傳送Y。
- 〔2〕…〔1’b1〕:傳送ROI ID,〔1’b0〕:不傳送ROI ID。
- 〔1〕…〔1’b1〕:傳送X,〔1’b0〕:不傳送X
- 〔0〕…〔1’b1〕:傳送ROI長度,〔1’b0〕:不傳送ROI長度。
另外,根據「ROI資訊類型」之資料儲存於圖8中所圖解說明之「ROI資訊參數」中。
應注意,舉例而言,與第一傳輸方案相關之區域資訊可包含指示區域之x座標及ROI長度兩者未自緊接在前被致使傳輸之封包中所包含之區域資訊改變之一旗標(下文中,稱為「無改變旗標」)。在其中無改變旗標指示不存在改變之一情形中(舉例而言,在其中無改變旗標係1’b1之一情形中),可省略「ROI資訊類型」之上文所闡述之〔1〕及〔0〕。
作為無改變旗標,例示ROI ID之一最高有效位元(MSB)。應注意,無改變旗標可係與ROI ID分開之資料。
圖9係圖解說明根據與根據實施例之傳輸方法相關之第一傳輸方案傳輸之資料之一實例的一說明圖且係具體圖解說明根據圖8中所圖解說明之長封包之組態之圖6中所圖解說明之資料之一圖。
在第一傳輸方案中,舉例而言,將對應於圖5中所圖解說明之區域1、區域2、區域3及區域4中之每一者之區域資訊及區域資料儲存於如圖9中所圖解說明之MIPI之長封包之有效負載中且針對每一列傳輸該區域資訊及區域資料。
如上文所闡述,影像感測器100可傳輸指示區域之資料量之資訊、指示區域之大小之資訊及指示區域之優先級之資訊(額外資訊之一項實例)中之一者或兩者或者多於兩者作為圖6中所圖解說明之「嵌入式資料」。
(1-2)第一傳輸方案之特徵及優點
舉例而言,與根據實施例之傳輸方法相關之第一傳輸方案具有下文所闡述之特徵。應注意,無須贅言,與根據實施例之傳輸方法相關之第一傳輸方案具有之特徵不限於下文所闡述之實例。
-藉由EBD傳輸額外資訊,且藉由有效負載傳輸對應於設定區域之區域資訊。
-僅傳輸對應於區域資訊中所包含之資訊之一改變點之資訊。
-可能解決具有一任意形狀之任一區域。
另外,在第一傳輸方案中,舉例而言,儲存於有效負載之頭部部分中且然後傳輸之區域資訊具有如下文所闡述之特徵。應注意,無須贅言,與第一傳輸方案相關之區域資訊具有之特徵不限於下文所闡述之實例。
-針對區域傳送定義長封包之兩種資料類型。
--當傳送區域資訊時,使用該等資料類型中之一者(舉例而言,指示「0x38」之資料)。
--在其中區域資訊與緊接在前被致使傳輸之一封包中所包含之區域資訊相同之一情形中,使用另一資料類型(舉例而言,指示「0x39」之資料)。
-由於不存在不同於與稍後將闡述之第二傳輸方案相關之短封包之劃分,因此傳輸一參數傳送格式。
-在其中在一個列中存在複數個相同區域之一情形中,藉由傳輸對應於若干個所存在區域之相同區域之識別資訊而傳送存在於一列中之複數個相同區域之資訊。
-指示列之位置之資訊(Y)。
--藉由一初始值0 (零)遞增。
--在傳輸不沿循一預定次序(舉例而言,執行稀疏化(thinning-out))時傳輸。
-無改變旗標。
--藉由利用區域之識別資訊(ROI ID)之MSB而執行傳輸。
-區域之識別資訊(I)。
--在區域增大或減小時傳輸。
--在其中行之位置及區域之OI長度改變之一情形中傳輸。
-指示區域之行之位置之資訊(X)。
--初始值0 (零)。
--在做出某一改變時傳輸。
--與區域之識別資訊一起作為一集合傳輸。
-指示區域之大小之資訊(L)。
--一定會針對第一次傳輸之一列設定。
--在做出某一改變時傳輸。
--與區域之識別資訊一起作為一集合傳輸。
另外,舉例而言,第一傳輸方案具有下文所闡述之優點。
-傳輸效率係高的。
-存在與已定義之CSI-2標準之反向相容性。
-可能傳送具有一任意形狀之任一區域(ROI)。
(1-3)與第一傳輸方案相關之組態實例
接下來,將闡述可與前述第一傳輸方案相容之影像感測器100之一組態之一實例及可與第一傳輸方案相容之處理器200之一組態之一實例(與自影像感測器100傳輸之資料之處理相關之一組態之一實例)。
(1-3-1)可與第一傳輸方案相容之影像感測器100 (傳輸裝置)之組態
圖10係圖解說明可與關於根據實施例之傳輸方法之第一傳輸方案相容之影像感測器100之一組態之一實例的一硬體方塊圖。舉例而言,影像感測器100包含一影像感測器裝置102及一IC晶片104。圖10中所圖解說明之影像感測器100使用自通信系統1000中所包含之一內部電源(未圖解說明) (諸如一電池)供應之電力或自通信系統1000之一外部電源供應之電力來操作。
影像感測器裝置102係「一成像裝置(諸如一數位靜態相機)」或能夠產生一影像之一任意方案之一影像感測器裝置,諸如一「紅外線感測器」或一「距離影像感測器」。
在一項實例中,用作影像感測器裝置102之成像裝置包含透鏡/成像元件及一信號處理電路。
舉例而言,透鏡/成像元件包含使用複數個成像元件之一光學系統透鏡及一影像感測器,諸如互補金屬氧化物半導體(CMOS)或電荷耦合裝置(CCD)。
舉例而言,信號處理電路包含一自動增益控制(AGC)電路或一類比轉數位轉換器(ADC),且將由成像元件產生之一類比信號轉換成一數位信號(影像資料)。另外,舉例而言,信號處理電路執行與RAW開發相關之各種處理。此外,信號處理電路可執行各種信號處理,舉例而言,諸如白平衡校正處理、色調校正處理、伽瑪校正處理、YCbCr轉換處理及邊緣強調處理。
另外,信號處理電路可執行與影像中一區域之設定相關之處理且將區域指定資訊遞送至IC晶片104。此外,信號處理電路可將諸如曝光資訊及增益資訊等各種資料遞送至IC晶片104。
指示由影像感測器裝置102產生之影像之信號遞送至IC晶片104。應注意,在其中將自影像感測器裝置102遞送至IC晶片104之指示影像之信號係一類比信號之一情形中,舉例而言,IC晶片104藉由使用其中所提供之一ADC而將該類比信號轉換為一數位信號且處理藉由該轉換獲得之影像資料。下文中,將闡述其中影像資料自影像感測器裝置102遞送至IC晶片104之一情形作為一實例。
IC晶片104係具有與根據第一傳輸方案傳輸資料之一功能相關之成形為一晶片形狀之一電路之一積體電路(IC)、處理自影像感測器裝置102遞送之影像資料且傳輸對應於所產生影像之資料。對應於影像之資料係自影像感測器裝置102遞送之影像資料(亦即,指示整個影像之資料)或區域資訊及區域資料。應注意,與根據第一傳輸方案傳輸資料之功能相關之電路不限於呈一個IC晶片之形式之實施方案且可由複數個IC晶片形成。
舉例而言,IC晶片104包含一影像處理電路106、一連結控制電路108、一ECC產生電路110、一PH產生電路112、一EBD緩衝器114、一影像資料緩衝器116、一合成電路118及一傳輸電路120。
影像處理電路106係具有執行與根據實施例之傳輸方法相關之處理之一功能之一電路。在其中執行與根據實施例之傳輸方法相關之處理之一情形中,影像處理電路106設定影像中之每一列之區域資訊,且致使連結控制電路108、ECC產生電路110、PH產生電路112、EBD緩衝器114、影像資料緩衝器116、合成電路118及傳輸電路120根據第一傳輸方案傳輸對應於區域之設定區域資訊及區域資料。另外,影像處理電路106亦可致使針對每一列傳輸自影像感測器裝置102遞送之影像資料(亦即,指示整個影像之資料)。
作為影像處理電路106,例示一處理器,諸如一MPU。
將針對功能區塊單獨闡述影像處理電路106具有之功能。舉例而言,如圖10中所圖解說明,影像處理電路106具有一區域切割單元122、一影像處理控制單元124及一編碼單元126。
區域切割單元122在執行與影像中一區域之設定相關之處理中起作用且在由自影像感測器裝置102遞送之影像資料指示之影像中設定區域(ROI)。舉例而言,區域切割單元122執行與根據一設定操作模式在影像中設定區域相關之處理。舉例而言,在其中操作模式係其中傳輸區域資料之一操作模式之一情形中,區域切割單元122執行與在影像中設定區域相關之處理。另外,在其中操作模式係其中傳輸指示整個影像之資料之一操作模式之一情形中,區域切割單元122不執行與在影像中設定區域相關之處理。
舉例而言,區域切割單元122藉由對影像執行任意物件偵測處理而偵測一物件且針對每一所偵測物件設定包含所偵測物件之一區域。另外,區域切割單元122可設定透過在一任意操作裝置或諸如此類上執行之一操作而指定之一區域。作為由區域切割單元122設定之區域,可包含如圖5中圖解說明為區域1之一矩形區域及具有在影像中設定之除矩形形狀外之任意形狀之區域,諸如圖5中之區域2、區域3及區域4。
舉例而言,在其中已設定區域之一情形中,區域切割單元122將指示設定區域之區域指定資訊遞送至影像處理控制單元124。另外,在其中尚未設定區域之一情形中,區域切割單元122不將區域指定資訊遞送至影像處理控制單元124。
另外,區域切割單元122將已自影像感測器裝置102遞送之影像資料遞送至編碼單元126。
影像處理控制單元124在執行與根據實施例之傳輸方法相關之處理中起作用、設定影像中之每一列之區域資訊且將設定區域資訊遞送至編碼單元126及PH產生電路112。
舉例而言,影像處理控制單元124基於自區域切割單元122獲取之區域指定資訊及自一外部裝置獲取之區域指定資訊(未圖解說明)而規定影像中之每一列中所包含之區域。然後,影像處理控制單元124基於經規定區域設定每一列之區域資訊。此時,影像處理控制單元124可不在區域資訊中設定未自緊接在前被致使傳輸之列中之區域資訊中所包含之資訊改變的資訊,如上文作為例外狀況處理所闡述。
另外,在其中未獲取到區域指定資訊之一情形中,影像處理控制單元124不設定區域資訊。
應注意,由影像處理控制單元124執行之處理不限於上文所闡述之實例。
舉例而言,影像處理控制單元124可產生圖框資訊(舉例而言)且將所產生圖框資訊遞送至連結控制電路108。作為圖框資訊,例示應用於每一圖框之一VC數目。另外,圖框資訊可包含指示一資料類型之資料,諸如YUV資料、RGB資料或RAW資料。
另外,影像處理控制單元124可執行設定額外資訊及將設定額外資訊遞送至EBD緩衝器114之處理。
作為設定額外資訊之處理,例示產生額外資訊之處理。作為產生額外資訊之處理,例示產生指示區域之資料量之資訊之處理、產生指示區域之大小之資訊之處理及產生指示區域之優先級之資訊之處理中之一者或兩者或者多於兩者。
應注意,設定額外資訊之處理不限於產生額外資訊之處理。舉例而言,影像處理控制單元124可設定自影像感測器裝置102獲取之資訊(諸如曝光資訊及增益資訊)作為額外資訊。另外,影像處理控制單元124可設定與區域相關之各種資料項目(舉例而言,諸如指示一實體區域長度之資料、指示一輸出區域長度之資料、指示一影像格式之資料及指示總資料量之資料)作為額外資訊。作為實體區域長度,例示影像感測器裝置102之像素數目。作為輸出區域長度,例示自影像感測器裝置102輸出之影像之像素數目(關於影像之長度)。
編碼單元126以一預定方案(舉例而言,諸如可與聯合照相專家組(JPEG)相容之一方案)將自影像感測器裝置102遞送之影像資料編碼。
在其中未自影像處理控制單元124獲取區域資訊之一情形中,編碼單元126將經編碼影像資料遞送至影像資料緩衝器116。下文中,在某些情形中,經編碼影像資料(亦即,指示整個經編碼影像之資料)將稱為「一般資料」。
另外,在其中自影像處理控制單元124獲取區域資訊之一情形中,編碼單元126將對應於區域之所獲取區域資訊及經編碼區域資料遞送至影像資料緩衝器116。
影像處理電路106藉由具有區域切割單元122、影像處理控制單元124及編碼單元126而執行與根據實施例之傳輸方法相關之處理。應注意,圖10中所圖解說明之影像處理電路106之功能區塊係藉由為了便利起見劃分影像處理電路106具有之功能而獲得,且影像處理電路106之功能之劃分不限於圖10中所圖解說明之實例。
舉例而言,連結控制電路108針對每一列將圖框資訊遞送至ECC產生電路110、PH產生電路112及合成電路118。
ECC產生電路110設定每一列之一錯誤校正碼。ECC產生電路110基於一個列之資料在圖框資訊(舉例而言,VC數目、資料類型或諸如此類)中產生該列之一錯誤校正碼。舉例而言,ECC產生電路110將所產生錯誤校正碼遞送至PH產生電路112及合成電路118。另外,ECC產生電路110可聯合PH產生電路112產生錯誤校正碼。
PH產生電路112藉由使用圖框資訊而產生每一列之一封包標頭。
PH產生電路112可基於自影像處理電路106 (圖10中之實例中之影像處理控制單元124)遞送之區域資訊而產生封包標頭。具體而言,PH產生電路112基於區域資訊在封包標頭中設定「指示區域資訊中所包含之資訊是否已自緊接在前被致使傳輸之封包中所包含之區域資訊改變之資料」(改變資訊),如上文所闡述。
EBD緩衝器114係暫時保存自影像處理電路106 (圖10中之實例中之影像處理控制單元124)遞送之額外資訊之一緩衝器。EBD緩衝器114以一預定時序將額外資訊作為「嵌入式資料」輸出至合成電路118。應注意,自EBD緩衝器114輸出之「嵌入式資料」可經由稍後將闡述之影像資料緩衝器116遞送至合成電路118。
影像資料緩衝器116係暫時保存自影像處理電路106 (圖10中之實例中之編碼單元126)遞送之資料(一般資料或區域資訊及區域資料)之一緩衝器。影像資料緩衝器116針對每一列以一預定時序將所保存資料輸出至合成電路118。
舉例而言,合成電路118基於分別自ECC產生電路110、PH產生電路112、EBD緩衝器114及影像資料緩衝器116獲取之資料而產生一待傳送封包。
傳輸電路120針對每一列經由資料匯流排B1 (一信號傳送路徑之一實例;相同情況適用於以下說明)傳輸自合成電路118遞送之封包。舉例而言,傳輸電路120藉由如圖4中所圖解說明之一高速差動信號而傳輸封包。
舉例而言,在其中設定圖5中所圖解說明之區域1、區域2、區域3及區域4之一情形中,傳輸電路120針對每一列以如圖9中所圖解說明之一長封包傳輸對應於區域之設定區域資訊及區域資料。
另外,在其中不設定區域之一情形中(亦即,在其中自影像資料緩衝器116輸出一般資料之一情形中),傳輸電路120針對每一列傳輸其中對應於每一列之資料儲存於有效負載中之長封包。應注意,即使在此情形中,傳輸電路120亦可傳輸額外資訊作為「嵌入式資料」。
舉例而言,對應於第一傳輸方案之影像感測器100具有圖10中所圖解說明之一硬體組態。應注意,無須贅言,對應於第一傳輸方案之影像感測器100之硬體組態不限於圖10中所圖解說明之實例。
(1-3-2)可與第一傳輸方案相容之處理器200 (接收裝置)之組態
圖11係圖解說明可與關於根據實施例之傳輸方法之第一傳輸方案相容之處理器200之一組態之一實例的一功能方塊圖。舉例而言,處理器200具有一標頭分離單元202、一標頭解譯單元204、一有效負載分離單元206、一影像處理單元208及一傳輸單元210。
標頭分離單元202自所接收資料分離對應於標頭部分之標頭資料及對應於有效負載部分之有效負載資料。舉例而言,標頭分離單元202根據由標準或諸如此類提前定義之一規則自所接收資料分離標頭資料。另外,舉例而言,標頭分離單元202可根據由標準或諸如此類提前定義之規則自所接收資料分離有效負載資料或可基於由標頭解譯單元204執行之處理之一結果而自所接收資料分離有效負載資料。
標頭解譯單元204解譯由標頭資料指示之內容。
在一項實例中,舉例而言,在其中標頭資料指示「0x38」之一情形中,標頭解譯單元204解譯區域資訊中所包含之資訊已自緊接在前被致使傳輸之封包中所包含之區域資訊改變。另外,在此情形中,標頭解譯單元204可解譯區域資訊包含於有效負載資料中。
在另一實例中,舉例而言,在其中標頭資料指示「0x39」之一情形中,標頭解譯單元204解譯區域資訊中所包含之資訊未自緊接在前被致使傳輸之封包中所包含之區域資訊改變。另外,在此情形中,標頭解譯單元204可解譯區域資訊不包含於有效負載資料中。
應注意,由標頭解譯單元204執行之處理之實例不限於上文所闡述之實例。舉例而言,標頭解譯單元204可規定有效負載資料之位置且將所規定位置遞送至標頭分離單元202。另外,標頭解譯單元204亦可解譯有效負載資料是否係「嵌入式資料」。
有效負載分離單元206基於由標頭解譯單元204執行之解譯之結果自有效負載資料分離額外資訊、區域資訊及影像資料(一般資料或區域資料;相同情況適用於下文圖11之說明)。
舉例而言,在其中標頭解譯單元204判定有效負載資料係「嵌入式資料」之一情形中,有效負載分離單元206將有效負載資料視為額外資訊。
另外,在其中標頭解譯單元204不解譯有效負載資料係「嵌入式資料」之一情形中,有效負載分離單元206自有效負載資料分離區域資訊及影像資料。舉例而言,如上文參考圖6、圖8及圖9所闡述,區域資訊及區域資料儲存於有效負載中而區域資訊儲存於有效負載之頭部部分中。另外,在其中自影像感測器100傳輸一般資料之情形中,區域資訊不儲存於有效負載中。因此,有效負載分離單元206可藉由自頭部部分處理有效負載而分離區域資訊及影像資料。
影像處理單元208基於自有效負載分離單元206遞送之額外資訊、區域資訊及影像資料而處理每一列之影像資料且獲得指示對應於區域之影像之資料或指示整個影像之資料。
舉例而言,影像處理單元208可基於自有效負載分離單元206遞送之資訊而判定經由資料匯流排B1獲取之資料是指示對應於區域之影像之資料還是指示整個影像之資料,且根據判定之結果而以一處理模式執行處理。
舉例而言,在其中在第一次執行以一特定圖框之一影像為目標之處理時(亦即,在執行對應於第一列之處理時)遞送區域資訊之一情形中,影像處理單元208判定經由資料匯流排B1獲取之資料係指示對應於區域之影像之資料。然後,影像處理單元208進行至其中處理區域資料之處理模式且基於每一列之區域資訊及區域資料而獲得指示對應於區域之影像之資料。
舉例而言,在其中不在第一次執行以一特定圖框之影像為目標之處理時遞送區域資訊之一情形中,影像處理單元208判定經由資料匯流排B1獲取之資料係指示整個影像之資料。然後,影像處理單元208進行至一般處理模式(其中處理一般資料之處理模式)且基於每一列之一般資料而獲得指示整個影像之資料。
應注意,判定經由資料匯流排B1獲取之資料之方法不限於上文所闡述之實例。舉例而言,在其中與區域相關之資訊(舉例而言,指示區域之資料量之資訊、指示區域之大小之資訊及指示區域之優先級之資訊中之一者或兩者或者多於兩者)之一情形中,影像處理單元208可判定經由資料匯流排B1獲取之資料係指示對應於區域之影像之資料。
舉例而言,影像處理單元208具有一解碼單元212及一影像產生單元214。
舉例而言,解碼單元212藉由對應於由影像感測器100執行之編碼之一預定方案將影像資料解碼。此時,解碼單元212可基於額外資訊改變處理之內容。
影像產生單元214自由解碼單元212基於區域資訊解碼的每一列之影像資料產生指示對應於區域之影像之資料或指示整個影像之資料。
舉例而言,在其中在第一次執行以一特定圖框之影像為目標之處理時遞送區域資訊之一情形中,影像產生單元214判定自解碼單元212遞送之影像資料係區域資料。然後,在其中判定影像資料係區域資料之一情形中,影像產生單元214基於區域資訊將每一列之區域資料劃分成每一區域之資料。此處,影像產生單元214用於處理之區域資訊可包含對應於作為處理之一目標之列之區域資訊及對應於已針對其執行處理之一列之區域資訊。
此處,由於區域資訊基本上包含指示列之位置之資訊、列中所包含之區域之識別資訊、指示列中所包含的區域之行之位置之資訊及指示列中所包含之區域之大小之資訊,因此影像產生單元214可唯一地規定每一列中所包含之區域資料。因此,影像產生單元214可針對每一區域產生指示對應於在一特定圖框之影像中設定之區域之影像之資料。
另外,在其中不在第一次執行以一特定圖框之影像為目標之處理時遞送區域資訊之一情形中,影像產生單元214判定所遞送影像資料係一般資料。在其中判定影像資料係一般資料之一情形中,影像產生單元214自從解碼單元212遞送的每一列之影像資料產生指示整個影像之資料。
舉例而言,影像處理單元208藉由具備解碼單元212及影像產生單元214而獲得指示對應於區域之影像之資料或指示整個影像之資料。
應注意,由影像處理單元208執行之處理不限於上文所闡述之實例。舉例而言,影像處理單元208可執行各種處理,舉例而言,諸如與控制一記錄媒體(諸如記憶體300)中對影像資料之記錄相關之處理、與控制顯示裝置400之一顯示螢幕上對一影像之顯示相關之處理及與一影像中之一區域之設定相關之處理,如上文所闡述。
傳輸單元210經由控制匯流排B2、各種信號線及諸如此類將各種資料(舉例而言,影像資料、控制資訊及諸如此類)傳輸至一外部裝置。作為傳輸單元210,例示提供於處理器200中且沿循預定標準(諸如積體電路間(I2C)或經改良積體電路間(I3C))之通信裝置。
舉例而言,由傳輸單元210執行之通信受影像處理單元208控制。記錄媒體(諸如記憶體300)中對影像資料之記錄、顯示裝置400之顯示螢幕上對影像之顯示及指示設定區域之區域指定資訊至影像感測器100之傳輸藉由影像處理單元208致使傳輸單元210傳輸各種資料(舉例而言,影像資料、控制資訊及諸如此類)而實現。
舉例而言,處理器200可藉由具備標頭分離單元202、標頭解譯單元204、有效負載分離單元206、影像處理單元208及傳輸單元210基於自影像感測器100接收之資料而獲得指示對應於區域之影像之資料或指示整個影像之資料。應注意,圖11中所圖解說明之處理器200之功能區塊係藉由為了便利起見劃分處理器200具有之功能而獲得,且如何劃分處理器200之功能不限於圖11中所圖解說明之實例。另外,在其中不提供將各種資料傳輸至外部裝置之功能之一情形中,處理器200可不具有傳輸單元210。
(2)第二傳輸方案
(2-1)與第二傳輸方案相關之處理
影像感測器100將區域資料儲存於一第一封包之一有效負載中且將區域資訊中所包含之每一條資訊儲存於不同於第一封包之一第二封包中。然後,影像感測器100致使針對每一列傳輸第一封包及第二封包。
例示MIPI之一長封包作為與第二傳輸方案相關之第一封包,而例示MIPI之一短封包作為與第二傳輸方案相關之第二封包。應注意,根據實施例之第一封包及第二封包之實例不限於上文所闡述之實例。將闡述根據實施例之第一封包及第二封包之其他實例作為稍後將闡述之一第三傳輸方案。針對下文所闡述之第二傳輸方案,將例示其中第一封包係MIPI之一長封包且第二封包係MIPI之一短封包之情形。
圖12係圖解說明根據與根據實施例之傳輸方法相關之第二傳輸方案傳輸之資料之一實例的一說明圖。圖12圖解說明「其中針對每一列藉由圖2中所圖解說明之MIPI之一短封包傳輸對應於圖5中所圖解說明之區域1、區域2、區域3及區域4之區域資訊中所包含之每一條資訊之一實例」。另外,圖12圖解說明「其中將對應於圖5中所圖解說明之區域1、區域2、區域3及區域4中之每一者之區域資料儲存於圖3中所圖解說明之MIPI之一長封包之一有效負載中且針對每一列傳輸該區域資料之一實例」。
圖12中所圖解說明之「Y」圖解說明其中儲存指示列之位置之資訊之一短封包。圖12中所圖解說明之「I1」、「I2」、「I3」及「I4」圖解說明其中分別儲存對應於圖5中所圖解說明之區域1、區域2、區域3及區域4之區域之識別資訊之短封包。圖12中所圖解說明之「X1」、「X2」、「X3」及「X4」圖解說明其中分別儲存指示對應於圖5中所圖解說明之區域1、區域2、區域3及區域4之區域之大小之資訊的短封包。圖12中所圖解說明之「L1」、「L2」、「L3」及「l4」表示其中儲存指示分別對應於圖5中所圖解說明之區域1、區域2、區域3及區域4之區域之大小之資訊的短封包。
在其中如圖6中所圖解說明使用上文在(1)中所闡述之第一傳輸方案之情形中,將區域資訊及區域資料儲存於一個封包(舉例而言,諸如MIPI之一長封包)之一有效負載中且針對每一列傳輸該區域資訊及區域資料。
同時,在其中如圖12中所圖解說明使用第二傳輸方案之一情形中,將區域資訊及區域資料單獨儲存於不同封包中且針對每一列傳輸該區域資訊及區域資料。
另外,即使在其中如圖12中所圖解說明使用第二傳輸方案之情形中,類似於其中使用第一傳輸方案之情形,亦可能傳輸「嵌入式資料」。亦即,影像感測器100可傳輸指示區域之資料量之資訊、指示區域之大小之資訊及指示區域之優先級之資訊中的一者或兩者或者多於兩者(額外資訊之一實例)作為圖12中所圖解說明之「嵌入式資料」。
(2-2)第二傳輸方案之特徵及優點
舉例而言,與根據實施例之傳輸方法相關之第二傳輸方案具有下文所闡述之特徵。應注意,無須贅言,與根據實施例之傳輸方法相關之第二傳輸方案具有之特徵不限於下文所闡述之實例。
-藉由EBD傳輸額外資訊,且藉由一短封包傳輸對應於設定區域之區域資訊。
-僅傳輸對應於區域資訊中所包含之資訊之一改變點之資訊。
-可能解決具有一任意形狀之任一區域。
另外,在第二傳輸方案中,舉例而言,藉由短封包傳輸之區域資訊具有下文所闡述之特徵。應注意,無須贅言,與第二傳輸方案相關之區域資訊具有之特徵不限於下文所闡述之實例。
-在其中在一個列中存在複數個相同區域之一情形中,藉由傳輸對應於若干個所存在區域之相同區域之識別資訊而遞送存在於一個列中之複數個相同區域之資訊。
-指示列之位置之資訊(Y)。
--藉由一初始值0 (零)遞增。
--在傳輸不沿循一預定次序(舉例而言,執行稀疏化)時傳輸。
-區域之識別資訊(I)。
--在區域增大或減小時傳輸。
--在其中行之位置及區域之ROI長度改變之一情形中傳輸。
-指示區域之行之位置之資訊(X)。
--初始值0 (零)。
--在做出某一改變時傳輸。
--與區域之識別資訊一起作為一集合傳輸。
-指示區域之大小之資訊(L)。
--一定會針對第一次傳輸之一列設定。
--在做出某一改變時傳輸。
--與區域之識別資訊一起作為一集合傳輸。
--在其中在一個列中僅存在一個區域之一情形中,即使已做出某一改變,亦可省略(此乃因長封包之有效負載長度變得與ROI長度相同)。
另外,舉例而言,第二傳輸方案具有下文所闡述之優點。
-可能執行區域資訊之錯誤校正。
-存在與已定義之CSI-2標準之反向相容性。
-可能傳送具有一任意形狀之任一區域(ROI)。
(2-3)與第二傳輸方案相關之實例之組態
接下來,將闡述可與前述第二傳輸方案相容之影像感測器100之一組態之一實例及可與第二傳輸方案相容之處理器200之一組態之一實例(與自影像感測器100傳輸之資料之處理相關之一組態之一實例)。
(2-3-1)可與第二傳輸方案相容之影像感測器100 (傳輸裝置)之組態
圖13係圖解說明可與關於根據實施例之傳輸方法之第二傳輸方案相容之影像感測器100之一組態之一實例的一硬體方塊圖。舉例而言,影像感測器100包含一影像感測器裝置102及一IC晶片150。類似於圖10中所圖解說明之影像感測器100,圖13中所圖解說明之影像感測器100使用自通信系統1000中所包含之一內部電源(未圖解說明)供應之電力或諸如此類來操作。
圖13中所圖解說明之影像感測器裝置102具有類似於圖10中所圖解說明之影像感測器裝置102之彼等功能及組態的一功能及一組態。
IC晶片150係藉由將上面整合有與根據第二傳輸方案傳輸資料之功能相關之電路之一IC成形為一晶片形狀而獲得、處理自影像感測器裝置102遞送之影像資料且傳輸對應於所產生影像之資料。應注意,與根據第二傳輸方案傳輸資料之功能相關之電路不限於呈一個IC晶片之形式之實施方案且可由複數個IC晶片形成。
舉例而言,IC晶片150包含一影像處理電路152、一連結控制電路108、一ECC產生電路110、一PH產生電路154、一EBD緩衝器114、一影像資料緩衝器116、一合成電路156及一傳輸電路120。
圖13中所圖解說明之連結控制電路108、ECC產生電路110、EBD緩衝器114、影像資料緩衝器116及傳輸電路120分別具有類似於圖10中所圖解說明之連結控制電路108、ECC產生電路110、EBD緩衝器114、影像資料緩衝器116及傳輸電路120之彼等功能及組態的功能及組態。
影像處理電路152係具有執行與根據實施例之傳輸方法相關之處理之一功能之一電路。在其中執行與根據實施例之傳輸方法相關之處理之一情形中,影像處理電路152設定影像中之每一列之區域資訊且致使連結控制電路108、ECC產生電路110、PH產生電路154、EBD緩衝器114、影像資料緩衝器116、合成電路156及傳輸電路120根據第二傳輸方案針對每一列傳輸對應於區域之設定區域資訊及區域資料。另外,影像處理電路152亦可致使針對每一列傳輸自影像感測器裝置102遞送之影像資料(亦即,指示整個影像之資料)。
作為影像處理電路152,例示一處理器,諸如一MPU。
將把影像處理電路152具有之功能劃分成功能區塊且將闡述該等功能。舉例而言,如圖13中所圖解說明,影像處理電路152具有一區域切割單元122、一影像處理控制單元124及一編碼單元158。
圖13中所圖解說明之區域切割單元122及影像處理控制單元124之功能類似於圖10中所圖解說明之區域切割單元122及影像處理控制單元124之彼等功能。
類似於圖10中所圖解說明之編碼單元126,編碼單元158藉由一預定方案將自影像感測器裝置102遞送之影像資料編碼。
在其中未自影像處理控制單元124獲取區域資訊之一情形中,類似於圖10中所圖解說明之編碼單元126,編碼單元158將經編碼影像資料遞送至影像資料緩衝器116。
另外,在其中自影像處理控制單元124獲取區域資訊之一情形中,編碼單元158基於所獲取區域資訊而規定區域且將對應於經規定區域之經編碼區域資料遞送至影像資料緩衝器116。
影像處理電路152藉由具備區域切割單元122、影像處理控制單元124及編碼單元158而執行與根據實施例之傳輸方法相關之處理。應注意,圖13中所圖解說明之影像處理電路152之功能區塊係藉由為了便利起見劃分影像處理電路152具有之功能而獲得,且如何劃分影像處理電路152之功能不限於圖13中所圖解說明之實例。
PH產生電路154基於自影像處理電路152 (圖13中之實例中之影像處理控制單元124)遞送之區域資訊而產生其中儲存區域資訊中所包含之每一條資訊之一短封包。
另外,類似於圖10中所圖解說明之PH產生電路112,PH產生電路154藉由使用圖框資訊而產生每一列之一長封包之一封包標頭。
合成電路156基於自ECC產生電路110、PH產生電路154、EBD緩衝器114及影像資料緩衝器116中之每一者獲取之資料而產生「其中儲存區域資訊之一短封包」及「其中將影像資料(一般資料或區域資料)或每一列儲存於有效負載中之一長封包」作為一待傳送封包。
傳輸電路120針對每一列經由資料匯流排B1傳輸自合成電路156遞送之封包。
舉例而言,在其中已設定圖5中所圖解說明之區域1、區域2、區域3及區域4之一情形中,傳輸電路120將區域資訊中所包含之每一條資訊儲存於一短封包中、將區域資料儲存於長封包之有效負載中且致使針對每一列傳輸該資訊及資料,如圖12中所圖解說明。
另外,在其中未設定區域之一情形中(亦即,在其中自影像資料緩衝器116輸出一般資料之一情形中),類似於圖10中所圖解說明之傳輸電路120,傳輸電路120針對每一列傳輸其中將對應於每一列之資料儲存於有效負載中之長封包。應注意,類似於圖10中所圖解說明之傳輸電路120,傳輸電路120可傳輸額外資訊作為「嵌入式資料」。
舉例而言,可與第二傳輸方案相容之影像感測器100具有圖13中所圖解說明之一硬體組態。應注意,無須贅言,可與第二傳輸方案相容之影像感測器100之硬體組態不限於圖13中所圖解說明之實例。
(2-3-2)可與第二傳輸方案相容之處理器200 (接收裝置)之組態
圖14係圖解說明可與關於根據實施例之傳輸方法之第二傳輸方案相容之處理器200之一組態之一實例的一功能方塊圖。舉例而言,處理器200具有一封包分離單元250、一短封包解譯單元252、一長封包解譯單元254、一標頭解譯單元256、一有效負載解譯單元258、一影像處理單元208及一傳輸單元210。
封包分離單元250自所接收資料分離短封包及長封包。舉例而言,封包分離單元250藉由偵測短封包之劃分而分離短封包及長封包。
短封包解譯單元252自從封包分離單元250遞送之短封包提取區域資訊中所包含之各種資訊且將區域資訊遞送至影像處理單元208。
類似於圖11中所圖解說明之標頭分離單元202,長封包解譯單元254自從封包分離單元250遞送之長封包分離對應於標頭部分之標頭資料及對應於有效負載部分之有效負載資料。
標頭解譯單元256解譯由標頭資料指示之內容。舉例而言,標頭解譯單元256解譯有效負載資料是否係「嵌入式資料」。另外,標頭解譯單元256可規定有效負載資料之位置且將經規定位置遞送至長封包解譯單元254。
有效負載解譯單元258基於由標頭解譯單元256執行之解譯之結果而自有效負載資料提取額外資訊或影像資料(一般資料或區域資料;相同情況適用於下文圖14之說明)。
舉例而言,在其中標頭解譯單元256解譯有效負載資料係「嵌入式資料」之一情形中,有效負載解譯單元258將有效負載資料視為額外資訊。
另外,在其中標頭解譯單元256不解譯有效負載資料係「嵌入式資料」之一情形中,有效負載解譯單元258將有效負載資料視為影像資料。
類似於圖11中所圖解說明之影像處理單元208,圖14中所圖解說明之影像處理單元208基於額外資訊、區域資訊及影像資料而處理每一列之影像資料且獲得指示對應於區域之影像之資料或指示整個影像之資料。
另外,類似於圖11中所圖解說明之影像處理單元208,圖14中所圖解說明之影像處理單元208可執行各種處理,諸如與控制記錄媒體諸如記憶體300中對影像資料之記錄相關之處理、與控制顯示裝置400之顯示螢幕上對一影像之顯示相關之處理及與影像中區域之設定相關之處理。
類似於圖11中所圖解說明之傳輸單元210,圖14中所圖解說明之傳輸單元210經由控制匯流排B2或各種信號線將各種資料(舉例而言,影像資料、控制資訊及諸如此類)傳輸至一外部裝置。
處理器200可藉由具備封包分離單元250、短封包解譯單元252、長封包解譯單元254、標頭解譯單元256、有效負載解譯單元258、影像處理單元208及傳輸單元210而基於自影像感測器100接收之資料獲得指示對應於區域之一影像之資料或指示整個影像之資料。應注意,圖14中所圖解說明之處理器200之功能區塊係藉由為了便利起見劃分處理器200具有之功能而獲得,且如何劃分處理器200之功能不限於圖14中所圖解說明之實例。另外,在其中不提供將各種資料傳輸至外部裝置之功能之一情形中,類似於圖11中所圖解說明之處理器200,處理器200可不具有傳輸單元210。
(3)第三傳輸方案
(3-1)與第三傳輸方案相關之處理
類似於上文在(2)中所闡述之第二傳輸方案,影像感測器100將區域資料儲存於第一封包之有效負載中且將區域資訊中所包含之資訊儲存於不同於第一封包之第二封包中。然後,影像感測器100致使針對每一列傳輸第一封包及第二封包。
例示MIPI之長封包作為與第三傳輸方案相關之第一封包,且例示一封包標頭作為與第三傳輸方案相關之第二封包。亦即,在第二傳輸方案中,舉例而言,藉由MIPI之短封包傳輸區域資訊,而在第三傳輸方案中,藉由封包標頭傳輸區域資訊。
此處,短封包及封包標頭具有如圖2及圖3中所圖解說明之類似結構。因此,類似於上文在(2)中所闡述之使用第二傳輸方案之影像感測器100,使用第三傳輸方案之影像感測器100可針對每一列傳輸區域資訊及區域資料。
應注意,與第三傳輸方案相關之第二封包不限於具有類似於圖3中所圖解說明之封包標頭之彼結構之一結構之封包標頭。舉例而言,與第三傳輸方案相關之第二封包可係具有其中圖2中所圖解說明之「資料欄位」已經擴展之一結構之一封包標頭(舉例而言,藉由將「資料欄位」自2個位元組擴展至3個位元組或更多而獲得之一封包標頭)。在其中與第三傳輸方案相關之第二封包係具有前述擴展結構之一封包標頭之一情形中,可將區域資訊中所包含之資訊儲存於一個第二封包中。
另外,其中儲存區域資訊中所包含之資訊之區域可係第三傳輸方案中之第一封包之一部分。亦即,在第三傳輸方案中,可能將前述第一封包及前述第二封包視為一個封包。
(3-2)第三傳輸方案之特徵及優點
與根據實施例之傳輸方法相關之第三傳輸方案具有類似於上文在(2)中所闡述之第二傳輸方案之特徵的特徵。
另外,舉例而言,第三傳輸方案具有下文所闡述之優點。
-傳輸效率係高的。
-可能執行區域資訊之錯誤校正。
-可能傳送具有一任意形狀之任一區域(ROI)。
(3-3)與第三傳輸方案相關之組態實例
舉例而言,可與第三傳輸方案相容之影像感測器100採用類似於如圖13中所圖解說明之可與上文在(2)中所闡述之第二傳輸方案相容之影像感測器100之彼組態(包含修改實例)的一組態。另外,舉例而言,可與第三傳輸方案相容之處理器200採用類似於如圖14中所圖解說明之可與上文在(2)中所闡述之第二傳輸方案相容之處理器200之彼組態(包含修改實例)的一組態。
<4>藉由使用根據實施例之傳輸方法達成之優點之實例
藉由使用根據實施例之傳輸方法達成下文所闡述之優點。應注意,無須贅言,藉由使用根據實施例之傳輸方法達成之優點不限於下文所闡述之實例。
-當傳送在影像中設定之區域(ROI)之資料時,不必針對每一區域劃分VC。
-當傳送在影像中設定之區域(ROI)之資料時,可能共同傳輸相同列中所包含之各別區域之資料。
-可能僅傳輸對應於區域資訊中所包含之資訊之一改變點之資訊且進一步減小區域資訊之資料量(亦即,可能傳送最小區域資訊)。
-可能解決具有一任意形狀(諸如一矩形形狀、一橢圓形形狀及一環形形狀)之任一區域。
-即使在其中設定區域疊覆(諸如圖5中之區域3及區域4)之一情形中,亦可能傳送區域之資料。
-在其中使用第一傳輸方案之一情形中,由於區域資訊之傳輸,LPS之週期不增加,此乃因區域資訊係儲存於封包之有效負載中且然後被傳輸。因此,在其中使用第一傳輸方案之情形中,存在區域資訊影響傳送效率之一低可能性。
(根據實施例之程式)
可能藉由一處理器或一電腦中之類似裝置執行致使電腦用作根據實施例之傳輸裝置之一程式(舉例而言,致使電腦執行與根據實施例之傳輸方法相關之處理之一程式)而傳輸具有在一影像中設定之一任意形狀之任一區域之資料。
另外,藉由使用根據實施例之前述傳輸方法而達成之效應可藉由一處理器或電腦中之類似裝置執行致使電腦用作根據實施例之傳輸裝置之程式而達成。
熟習此項技術者應理解,可依據設計要求及其他因素做出各種修改、組合、子組合及變更,因為其屬於隨附申請專利範圍或其等效內容之範疇內。
儘管上文說明已圖解說明提供致使電腦用作根據實施例之傳輸裝置之程式(電腦程式),但實施例可進一步提供其中共同儲存有前述程式之一記錄媒體。
前述組態係實施例之實例,且理所當然前述組態屬於本發明之一技術範疇。
此外,本說明書中所闡述之效應僅係說明性的或例示效應,且並非係限制性的。亦即,與以上效應一起或代替以上效應,根據本發明之技術可達成熟習此項技術者自本說明書之說明顯而易見之其他效應。
另外,本發明技術亦可如下文組態。
(1)
一種傳輸裝置,其包含:
一影像處理單元,其針對一影像中之若干列中之每一者設定對應於在該影像中設定之一區域之區域資訊且致使針對每一列傳輸對應於該區域之該設定區域資訊及區域資料,
其中該區域資訊包含指示該列之一位置之資訊及指示該列中所包含的該區域之一行之一位置之資訊。
(2)
如(1)之傳輸裝置,其中該區域資訊進一步包含該列中所包含之該區域之識別資訊及指示該列中所包含之該區域之一大小之資訊。
(3)
如(1)或(2)之傳輸裝置,其中該影像處理單元針對該每一區域在該區域資訊中共同設定該區域資訊中所包含之資訊。
(4)
如(3)之傳輸裝置,其中,在其中在一個列中存在複數個相同區域之一情形中,該影像處理單元設定該區域資訊使得區域資訊條之一數目與所存在之該等相同區域之一數目相同。
(5)
如(1)至(4)中任一項之傳輸裝置,其中該影像處理單元不在該區域資訊中設定未自緊接在前傳輸的一列中之該區域資訊中所包含之資訊改變之資訊。
(6)
如(5)之傳輸裝置,
其中,當在該區域資訊中設定指示該區域之該行之該位置之該資訊時,該影像處理單元在該區域資訊中設定該區域之識別資訊,且
當在該區域資訊中設定指示該區域之一大小之該資訊時,該影像處理單元在該區域資訊中設定該區域之識別資訊。
(7)
如(5)或(6)之傳輸裝置,
其中該影像處理單元致使根據一預定次序傳輸每一列之該區域資訊及該區域資料,且
在其中致使傳輸其區域資訊及區域資料之該列係根據該預定次序之一列之一情形中,不在該區域資訊中設定指示該列之該位置之該資訊。
(8)
如(1)至(7)中任一項之傳輸裝置,其中該影像處理單元致使將該區域資訊及該區域資料儲存於一封包之一有效負載中且在該有效負載中傳輸該區域資訊及該區域資料。
(9)
如(8)之傳輸裝置,其中將該區域資訊儲存於該有效負載之一頭部部分中。
(10)
如(8)或(9)之傳輸裝置,其中該影像處理單元進一步致使針對每一列傳輸改變資訊,該改變資訊指示該區域資訊中所包含之資訊是否已自緊接在前被致使傳輸之一封包中所包含之該區域資訊改變。
(11)
如(10)之傳輸裝置,其中,在其中該區域資訊中所包含之該資訊未自緊接在前被致使傳輸之該封包中所包含之該區域資訊改變之一情形中,該影像處理單元不致使傳輸該區域資訊。
(12)
如(8)至(11)中任一項之傳輸裝置,其中該影像處理單元進一步致使傳輸指示該區域中之一資料量之資訊、指示該區域之一大小之資訊及指示該區域之優先級之資訊中之一者或兩者或者多於兩者。
(13)
如(8)至(12)中任一項之傳輸裝置,其中該封包係MIPI之一長封包。
(14)
如(1)至(7)中任一項之傳輸裝置,
其中該影像處理單元將該區域資料儲存於一第一封包之一有效負載中,
該影像處理單元將該區域資訊中所包含之每一條資訊儲存於不同於該第一封包之一第二封包中,且
該影像處理單元致使針對每一列傳輸該第一封包及該第二封包。
(15)
如(13)之傳輸裝置,
其中該第一封包係MIPI之一長封包,且
該第二封包係MIPI之一短封包。
1‧‧‧區域/區域資料
2‧‧‧區域/區域資料
3‧‧‧區域/區域資料
4‧‧‧區域/區域資料
100‧‧‧影像感測器
102‧‧‧影像感測器裝置
104‧‧‧積體電路晶片
106‧‧‧影像處理電路
108‧‧‧連結控制電路
110‧‧‧錯誤校正碼產生電路
112‧‧‧封包標頭產生電路
114‧‧‧嵌入式資料緩衝器
116‧‧‧影像資料緩衝器
118‧‧‧合成電路
120‧‧‧傳輸電路
122‧‧‧區域切割單元
124‧‧‧影像處理控制單元
126‧‧‧編碼單元
150‧‧‧積體電路晶片
152‧‧‧影像處理電路
154‧‧‧封包標頭產生電路
156‧‧‧合成電路
158‧‧‧編碼單元
200‧‧‧處理器
202‧‧‧標頭分離單元
204‧‧‧標頭解譯單元
206‧‧‧有效負載分離單元
208‧‧‧影像處理單元
210‧‧‧傳輸單元
212‧‧‧解碼單元
214‧‧‧影像產生單元
250‧‧‧封包分離單元
252‧‧‧短封包解譯單元
254‧‧‧長封包解譯單元
256‧‧‧標頭解譯單元
258‧‧‧有效負載解譯單元
300‧‧‧記憶體
400‧‧‧顯示裝置
1000‧‧‧通信系統
B1‧‧‧資料匯流排
B2‧‧‧控制匯流排
I1‧‧‧短封包
I2‧‧‧短封包
I3‧‧‧短封包
I4‧‧‧短封包
L1‧‧‧短封包
L2‧‧‧短封包
L3‧‧‧短封包
L4‧‧‧短封包
R1‧‧‧最小矩形區域
R2‧‧‧最小矩形區域
R3‧‧‧最小矩形區域
R4‧‧‧最小矩形區域
X‧‧‧資訊
X1‧‧‧短封包
X2‧‧‧短封包
X3‧‧‧短封包
X4‧‧‧短封包
Y‧‧‧資訊/短封包
[圖1]
圖1係圖解說明根據一實施例之一通信系統之一組態之一實例的一說明圖。
[圖2]
圖2係圖解說明由MIPI CSI-2標準定義之一封包之一格式之一說明圖。
[圖3]
圖3係圖解說明由MIPI CSI-2標準定義之一封包之一格式之一說明圖。
[圖4]
圖4係圖解說明與根據MIPI CSI-2標準之一封包之傳輸相關之一信號波形之一實例的一說明圖。
[圖5]
圖5係圖解說明在一影像中設定之一區域之一實例之一說明圖。
[圖6]
圖6係圖解說明根據與根據實施例之一傳輸方法相關之一第一傳輸方案傳輸之資料之一實例的一說明圖。
[圖7]
圖7係用於闡述根據與根據實施例之傳輸方法相關之第一傳輸方案傳輸之嵌入式資料之一實例的一說明圖。
[圖8]
圖8係圖解說明根據與根據實施例之傳輸方法相關之第一傳輸方案傳輸之一長封包之一組態之一實例的一說明圖。
[圖9]
圖9係圖解說明根據與根據實施例之傳輸方法相關之第一傳輸方案傳輸之資料之一實例的一說明圖。
[圖10]
圖10係圖解說明與關於根據實施例之傳輸方法之第一傳輸方案對應之一影像感測器之一組態之一實例的一硬體方塊圖。
[圖11]
圖11係圖解說明可與關於根據實施例之傳輸方法之第一傳輸方案相容之一處理器之一組態之一實例的一功能方塊圖。
[圖12]
圖12係圖解說明根據與根據實施例之傳輸方法相關之一第二傳輸方案傳輸之資料之一實例的一說明圖。
[圖13]
圖13係圖解說明可與關於根據實施例之傳輸方法之第二傳輸方案相容之一影像感測器之一組態之一實例的一硬體方塊圖。
[圖14]
圖14係圖解說明可與關於根據實施例之傳輸方法之第二傳輸方案相容之一處理器之一組態之一實例的一功能方塊圖。

Claims (20)

  1. 一種傳輸裝置,其包括: 一影像處理電路,其具有一所關注區域(ROI)模式及一非所關注區域(ROI)模式,在該ROI模式中,該影像處理電路經組態以 傳輸一影像之一第一資料圖框,該第一資料圖框包含嵌入式資料、該影像之第一複數個影像線中之每一影像線之所關注區域(ROI)資訊及該影像之第二複數個影像線中之每一影像線之所關注區域(ROI)資料,該第二複數個影像線包含該第一複數個影像線,且 在該非ROI模式中,該影像處理電路經組態以 傳輸該影像之一第二資料圖框,該第二資料圖框包含該影像之第三複數個影像線中之每一影像線之所有有效負載資料,該第三複數個影像線包含該第二複數個影像線,且該第二資料圖框不包含該ROI資訊及該ROI資料。
  2. 如請求項1之傳輸裝置,其中在該ROI模式中,該影像處理電路進一步經組態以 判定是否可將該第一複數個影像線中之該每一影像線之該ROI資訊嵌入至該嵌入式資料中, 回應於判定可將該第一複數個影像線中之該每一影像線之該ROI資訊嵌入至該嵌入式資料中,將該ROI資訊插入至該嵌入式資料中,且 回應於將該ROI資訊插入至該嵌入式資料中,傳輸該影像之一第三資料圖框替代該第一資料圖框,該第三資料圖框包含該嵌入式資料及該第二複數個影像線中之該每一影像線之該ROI資料。
  3. 如請求項1之傳輸裝置,其中在該ROI模式中,該影像處理電路進一步經組態以 接收該影像中之一或多個所關注區域(ROI)之位置資訊,且 基於該位置資訊判定該第二複數個影像線。
  4. 如請求項3之傳輸裝置,其中在該ROI模式中,該影像處理電路進一步經組態以 基於該位置資訊判定該影像中之該一或多個所關注區域(ROI)之一或多個改變點,且 基於該一或多個改變點判定該第一複數個影像線。
  5. 如請求項4之傳輸裝置,其中該第一複數個影像線中之該每一影像線之該ROI資訊進一步包含指示該一或多個改變點之改變資訊。
  6. 如請求項1之傳輸裝置,其中該第一複數個影像線中之該每一影像線之該ROI資訊係指示該每一影像線之一位置及該每一影像線中所包含之一或多個所關注區域(ROI)之一行之一位置的資訊。
  7. 如請求項6之傳輸裝置,其中該ROI資訊進一步包含該每一影像線中所包含之該一或多個所關注區域(ROI)之識別資訊及指示該每一影像線中所包含之該一或多個所關注區域(ROI)之一大小之資訊。
  8. 如請求項6之傳輸裝置,其中該每一影像線中所包含之該一或多個所關注區域(ROI)係n,n係大於零之一正整數,該影像處理電路進一步經組態以在該ROI資訊中包含一定數目個區域資訊條,區域資訊條之該數目等於n。
  9. 如請求項1之傳輸裝置,其中該第二複數個影像線係根據一預定次序傳輸,且其中該第一複數個影像線中之該每一影像線之該ROI資訊不包含指示該每一影像線之一位置之資訊。
  10. 如請求項1之傳輸裝置,其中該第一資料圖框包括複數個封包,其中該嵌入式資料係在該複數個封包之一第一部分之一或多個有效負載中傳輸,且其中該第一複數個影像線中之該每一影像線之該ROI資訊及該ROI資料係在該複數個封包之一第二部分之有效負載中傳輸,該複數個封包之該第二部分不包含該複數個封包之該第一部分。
  11. 如請求項10之傳輸裝置,其中該ROI資訊係儲存於該等有效負載之一頭部部分中。
  12. 如請求項1之傳輸裝置,其中該嵌入式資料進一步包含以下各項中之至少一者: 指示該影像中之一或多個所關注區域(ROI)之一資料量之資訊, 指示該影像中之該一或多個ROI之一大小之資訊,或 指示該影像中之該一或多個ROI之優先級之資訊。
  13. 如請求項1之傳輸裝置,其中該嵌入式資料進一步包含以下各項中之至少一者: 該影像中之一或多個所關注區域(ROI)之識別資訊, 指示該影像中之該一或多個ROI之一左上方座標之資訊, 指示該影像中之該一或多個ROI之一高度之資訊, 指示該影像中之該一或多個ROI之一寬度之資訊, 指示一類比轉數位轉換器之一解析度之類比轉數位位元,或 感測資訊。
  14. 如請求項13之傳輸裝置,其中該感測資訊包含一增益設定資訊或一曝光時間資訊中之至少一者,且其中該嵌入式資料具有指派給該感測資訊之可變數目個位元組。
  15. 一種接收裝置,其包括: 一電子處理器,其經組態以 接收一影像之一第一資料圖框, 接收該影像之一第二資料圖框,且 基於該第一資料圖框或該第二資料圖框中之一者而產生一顯示影像, 其中該第一資料圖框包含嵌入式資料、該影像之第一複數個影像線中之每一影像線之所關注區域(ROI)資訊及該影像之第二複數個影像線中之每一影像線之所關注區域(ROI)資料,該第二複數個影像線包含該第一複數個影像線,且 其中該第二資料圖框包含該影像之第三複數個影像線中之每一影像線之所有有效負載資料,該第二資料圖框不包含該ROI資訊及該ROI資料。
  16. 如請求項15之接收裝置,其中該電子處理器進一步經組態以 接收該影像之一第三資料圖框,且 基於該第三資料圖框產生該顯示影像,該第三資料圖框包含該嵌入式資料及該影像之該第二複數個影像線中之該每一影像線之該ROI資料,該嵌入式資料包含該影像之該第一複數個影像線中之該每一影像線之該ROI資訊。
  17. 一種系統,其包括: 一傳輸裝置,其包含 一影像處理電路,其具有一所關注區域(ROI)模式及一非所關注區域(ROI)模式,在該ROI模式中,該影像處理電路經組態以 傳輸一影像之一第一資料圖框,該第一資料圖框包含嵌入式資料、該影像之第一複數個影像線中之每一影像線之所關注區域(ROI)資訊及該影像之第二複數個影像線中之每一影像線之所關注區域(ROI)資料,該第二複數個影像線包含該第一複數個影像線,且 在該非ROI模式中,該影像處理電路經組態以 傳輸該影像之一第二資料圖框,該第二資料圖框包含該影像之第三複數個影像線中之每一影像線之所有有效負載資料,該第三複數個影像線包含該第二複數個影像線,該第二資料圖框不包含該ROI資訊及該ROI資料;及 一電子處理器,其經組態以 接收該第一資料圖框, 接收該第二資料圖框,且 基於該第一資料圖框或該第二資料圖框中之一者而產生一顯示影像。
  18. 如請求項17之系統,其中在該ROI模式中,該影像處理電路進一步經組態以 判定是否可將該第一複數個影像線中之該每一影像線之該ROI資訊嵌入至該嵌入式資料中, 回應於判定可將該第一複數個影像線中之該每一影像線之該ROI資訊嵌入至該嵌入式資料中,將該ROI資訊插入至該嵌入式資料中,且 回應於將該ROI資訊插入至該嵌入式資料中,傳輸該影像之一第三資料圖框替代該第一資料圖框,該第三資料圖框包含該嵌入式資料及該第二複數個影像線中之該每一影像線之該ROI資料,且 其中該電子處理器進一步經組態以接收該第三資料圖框且基於該第三資料圖框產生該顯示影像。
  19. 一種方法,其包括: 利用一影像處理電路接收一模式選擇輸入,該模式選擇輸入指示一所關注區域(ROI)模式或一非所關注區域(ROI)模式中之一者; 回應於該模式選擇輸入指示該ROI模式,利用該影像處理電路傳輸一影像之一第一資料圖框,該第一資料圖框包含嵌入式資料、該影像之第一複數個影像線中之每一影像線之所關注區域(ROI)資訊及該影像之第二複數個影像線中之每一影像線之所關注區域(ROI)資料,該第二複數個影像線包含該第一複數個影像線;及 回應於該模式選擇輸入指示該非ROI模式,利用該影像處理電路傳輸該影像之一第二資料圖框,該第二資料圖框包含該影像之第三複數個影像線中之每一影像線之所有有效負載資料,該第三複數個影像線包含該第二複數個影像線,該第二資料圖框不包含該ROI資訊及該ROI資料。
  20. 如請求項19之方法,其進一步包括: 利用該影像處理電路判定是否可將該第一複數個影像線中之該每一影像線之該ROI資訊嵌入至該嵌入式資料中; 回應於判定可將該ROI資訊嵌入至該嵌入式資料中,利用該影像處理電路將該第一複數個影像線中之該每一影像線之該ROI資訊插入至該嵌入式資料中;及 回應於該模式選擇輸入指示該ROI模式且回應於將該ROI資訊插入至該嵌入式資料中,利用該影像處理電路傳輸該影像之一第三資料圖框替代該第一資料圖框,該第三資料圖框包含該嵌入式資料及該第二複數個影像線中之該每一影像線之該ROI資料。
TW107138919A 2017-11-10 2018-11-02 傳輸裝置 TWI783075B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017-217484 2017-11-10
JP2017217484A JP7007160B2 (ja) 2017-11-10 2017-11-10 送信装置

Publications (2)

Publication Number Publication Date
TW201924325A true TW201924325A (zh) 2019-06-16
TWI783075B TWI783075B (zh) 2022-11-11

Family

ID=64049633

Family Applications (1)

Application Number Title Priority Date Filing Date
TW107138919A TWI783075B (zh) 2017-11-10 2018-11-02 傳輸裝置

Country Status (8)

Country Link
US (1) US11074023B2 (zh)
EP (1) EP3707911A1 (zh)
JP (1) JP7007160B2 (zh)
KR (1) KR102617485B1 (zh)
CN (2) CN116233519A (zh)
SG (1) SG11202002803UA (zh)
TW (1) TWI783075B (zh)
WO (1) WO2019093072A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3993390A4 (en) * 2019-06-28 2022-08-31 Sony Semiconductor Solutions Corporation TRANSMITTER, RECEIVER AND COMMUNICATION SYSTEM
EP3993392A4 (en) * 2019-06-28 2022-08-24 Sony Semiconductor Solutions Corporation TRANSMITTER, RECEIVER AND COMMUNICATION SYSTEM
TW202107892A (zh) * 2019-07-31 2021-02-16 日商索尼半導體解決方案公司 發送裝置、接收裝置及通信系統
KR20210100853A (ko) * 2020-02-07 2021-08-18 삼성전자주식회사 이미지를 저장하는 전자 장치 및 방법
CN115362688A (zh) * 2020-03-25 2022-11-18 索尼半导体解决方案公司 接收装置和传输系统
KR20240090196A (ko) * 2021-10-08 2024-06-21 소니 세미컨덕터 솔루션즈 가부시키가이샤 화상 센서, 데이터 처리 장치, 및 화상 센서 시스템

Family Cites Families (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3349490B2 (ja) * 2000-02-14 2002-11-25 インターナショナル・ビジネス・マシーンズ・コーポレーション 画像表示方法、画像表示システム、ホスト装置、画像表示装置、およびディスプレイ用インターフェイス
US7128266B2 (en) * 2003-11-13 2006-10-31 Metrologic Instruments. Inc. Hand-supportable digital imaging-based bar code symbol reader supporting narrow-area and wide-area modes of illumination and image capture
CN1371043A (zh) * 2002-02-04 2002-09-25 钟林 数码操作系统
JP2006270400A (ja) * 2005-03-23 2006-10-05 Venture Creator:Kk 画像データの画像処理方法、画像処理装置、プログラム及び記録媒体
US20090067626A1 (en) * 2005-11-04 2009-03-12 Emittall Surveillance S.A. Region-based transform domain video scrambling
KR100739785B1 (ko) * 2006-01-09 2007-07-13 삼성전자주식회사 관심 영역 기반 영상 부호화, 복호화 방법 및 장치
JP4969985B2 (ja) * 2006-10-17 2012-07-04 株式会社東芝 超音波診断装置、及び超音波診断装置の制御プログラム
JP4777310B2 (ja) * 2007-07-31 2011-09-21 シャープ株式会社 検査装置、検査方法、検査システム、カラーフィルタの製造方法、検査装置制御プログラム、及び該プログラムを記録したコンピュータ読み取り可能な記録媒体
EP2890149A1 (en) * 2008-09-16 2015-07-01 Intel Corporation Systems and methods for video/multimedia rendering, composition, and user-interactivity
CN101692231B (zh) * 2009-01-14 2012-11-07 中国科学院地理科学与资源研究所 一种适合空间查询的遥感影像分块排序存储方法
US8194188B2 (en) 2009-04-02 2012-06-05 Texas Instruments Incorporated Displaying image frames in combination with a subpicture frame
US20110235706A1 (en) * 2010-03-25 2011-09-29 Texas Instruments Incorporated Region of interest (roi) video encoding
US20110301447A1 (en) * 2010-06-07 2011-12-08 Sti Medical Systems, Llc Versatile video interpretation, visualization, and management system
JP2011259332A (ja) * 2010-06-11 2011-12-22 Sony Corp 画像処理装置および方法
JP2012209831A (ja) 2011-03-30 2012-10-25 Panasonic Corp 画像データ制御装置
JP2013164834A (ja) 2012-01-13 2013-08-22 Sony Corp 画像処理装置および方法、並びにプログラム
JP5700703B2 (ja) 2012-08-20 2015-04-15 日本電信電話株式会社 映像復号装置、映像送受信システム、映像復号方法及び映像送受信方法
US20150049098A1 (en) * 2013-08-13 2015-02-19 Mediatek Inc. Data processing apparatus for transmitting/receiving compressed pixel data groups via multiple display ports of display interface and related data processing method
CN103903006A (zh) * 2014-03-05 2014-07-02 中国科学院合肥物质科学研究院 一种基于Android平台的农作物害虫识别方法及系统
CN105100577B (zh) * 2014-04-21 2019-03-26 浙江大华技术股份有限公司 一种图像处理方法及装置
JP6530658B2 (ja) * 2014-08-11 2019-06-12 キヤノン株式会社 撮像装置およびその制御方法、プログラムならびに記録媒体
JP6558976B2 (ja) * 2014-09-02 2019-08-14 キヤノン株式会社 撮像装置、その制御方法及びプログラム並びに撮像素子
KR102250493B1 (ko) * 2014-09-03 2021-05-12 삼성디스플레이 주식회사 디스플레이 구동 집적 회로, 이를 포함하는 디스플레이 모듈 및 디스플레이 시스템
CN104463781A (zh) * 2014-12-25 2015-03-25 成都晨电智能科技有限公司 控制pov显示装置显示图像的方法及显示动画的方法
JP6604019B2 (ja) 2015-04-14 2019-11-13 ソニー株式会社 画像処理装置、画像処理方法、および画像処理システム
US9485381B1 (en) 2015-05-06 2016-11-01 Xerox Corporation Scanner interface and protocol
CN206379017U (zh) * 2016-12-05 2017-08-04 贵州师范学院 一种基于wifi的智能教鞭
CN106846345B (zh) * 2017-01-04 2020-03-27 努比亚技术有限公司 一种实现交互式图像分割的方法、装置及终端
CN107168668A (zh) * 2017-04-28 2017-09-15 北京七鑫易维信息技术有限公司 图像数据传输方法、装置以及存储介质、处理器

Also Published As

Publication number Publication date
JP7007160B2 (ja) 2022-01-24
SG11202002803UA (en) 2020-04-29
CN116233519A (zh) 2023-06-06
TWI783075B (zh) 2022-11-11
CN111295887B (zh) 2023-04-04
KR102617485B1 (ko) 2023-12-27
JP2019091967A (ja) 2019-06-13
EP3707911A1 (en) 2020-09-16
CN111295887A (zh) 2020-06-16
WO2019093072A1 (en) 2019-05-16
US20200333993A1 (en) 2020-10-22
KR20200087134A (ko) 2020-07-20
US11074023B2 (en) 2021-07-27

Similar Documents

Publication Publication Date Title
TWI783075B (zh) 傳輸裝置
CN111295885B (zh) 发送器
JP7163285B2 (ja) 映像送信装置および映像受信装置
WO2020039992A1 (ja) 画像処理装置、および画像処理システム
JP7152475B2 (ja) 送信装置、受信装置、及び通信システム
TWI827725B (zh) 圖像處理裝置及圖像處理方法
JP7414733B2 (ja) 受信装置および送信装置