TWI656362B - 電子裝置及其物件重製方法 - Google Patents

電子裝置及其物件重製方法 Download PDF

Info

Publication number
TWI656362B
TWI656362B TW107110239A TW107110239A TWI656362B TW I656362 B TWI656362 B TW I656362B TW 107110239 A TW107110239 A TW 107110239A TW 107110239 A TW107110239 A TW 107110239A TW I656362 B TWI656362 B TW I656362B
Authority
TW
Taiwan
Prior art keywords
image
external object
electronic device
external
module
Prior art date
Application number
TW107110239A
Other languages
English (en)
Other versions
TW201940930A (zh
Inventor
曾俞豪
張堃鉉
劉子平
程信傑
翁明哲
Original Assignee
仁寶電腦工業股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 仁寶電腦工業股份有限公司 filed Critical 仁寶電腦工業股份有限公司
Priority to TW107110239A priority Critical patent/TWI656362B/zh
Priority to CN201810366723.1A priority patent/CN110365954A/zh
Priority to US15/982,716 priority patent/US10560672B2/en
Application granted granted Critical
Publication of TWI656362B publication Critical patent/TWI656362B/zh
Publication of TW201940930A publication Critical patent/TW201940930A/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179Video signal processing therefor
    • H04N9/3185Geometric adjustment, e.g. keystone or convergence
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00Details of cameras or camera bodies; Accessories therefor
    • G03B17/48Details of cameras or camera bodies; Accessories therefor adapted for combination with other photographic or optical apparatus
    • G03B17/54Details of cameras or camera bodies; Accessories therefor adapted for combination with other photographic or optical apparatus with projector
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B15/00Special procedures for taking photographs; Apparatus therefor
    • G03B15/02Illuminating scene
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/194Segmentation; Edge detection involving foreground-background segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/54Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/56Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/57Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141Constructional details thereof
    • H04N9/315Modulator illumination systems
    • H04N9/3155Modulator illumination systems for controlling the light source
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141Constructional details thereof
    • H04N9/3173Constructional details thereof wherein the projection device is specially adapted for enhanced portability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179Video signal processing therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3191Testing thereof
    • H04N9/3194Testing thereof including sensor feedback

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Geometry (AREA)
  • Studio Devices (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)

Abstract

本發明實施例提供一種電子裝置及其物件重製方法。於攝影模式時,所述電子裝置可以是利用相機模組來擷取其攝影範圍內的一背景影像,以及含有一外部物件與部分背景影像的第一影像,並且運用背景相減法來獲得到此外部物件的虛擬物件影像。然後,於投影模式時,所述電子裝置則是再利用影像投影模組來將此虛擬物件影像投影至工作平面上。

Description

電子裝置及其物件重製方法
本發明是有關於物件重製技術,且特別是一種能夠對外部物件進行重製,以產生出有關此外部物件影像的電子裝置及其物件重製方法。
隨著投影機相關產業的技術發展,影像投影模組的尺寸已可大幅縮小。因此,近年來,影像投影模組逐漸被整合到其他電子裝置上,例如個人化電腦。然而,具有投影功能的習知電子裝置僅能夠允許使用者對所投影的畫面進行操作,但卻無法與外部物件進行連動,且更無法進一步對此外部物件進行重製,以產生出有關此外部物件的影像。
有鑑於此,本發明實施例提供一種電子裝置。所述電子裝置具有攝影模式及投影模式,且其包括照明模組、影像投影模組、相機模組及至少一處理器。影像投影模組樞接於照明模組,相機模組配置於影像投影模組的一側,處理器則耦接於照明模組、影像投影模組及相機模組,並用來將一外部物件重製為虛擬物件。
本發明實施例另提供一種物件重製方法,可執行於前述電子裝置中,所述物件重製方法包括如下步驟。首先,於攝影模式時,利用相機模 組,擷取及儲存有關其攝影範圍內的至少一背景影像,並且感測此攝影範圍內是否出現外部物件。當感測到此攝影範圍內出現外部物件時,則利用利用處理器,將此外部物件重製為虛擬物件影像。然後,於投影模式時,利用影像投影模組,將虛擬物件影像投影至工作平面上,以及允許使用者對工作平面上的虛擬物件影像進行互動操作。
為使能更進一步瞭解本發明之特徵及技術內容,請參閱以下有關本發明之詳細說明與附圖,但是此等說明與所附圖式僅係用來說明本發明,而非對本發明的權利範圍作任何的限制。
10‧‧‧電子裝置
200‧‧‧主體
201‧‧‧基座
202‧‧‧支撐架
110‧‧‧照明模組
111‧‧‧燈罩
112‧‧‧發光元件
120‧‧‧影像投影模組
121‧‧‧外殼
122‧‧‧投影鏡頭
130‧‧‧相機模組
140‧‧‧處理器
150‧‧‧感應操控模組
C‧‧‧工作平面
L‧‧‧預設圖案
S310、S320、S330、S340、S350、S360、S370、S380、S380’、S410、S420、S430、S440‧‧‧流程步驟
圖1是本發明實施例所提供的電子裝置的功能方塊示意圖。
圖2A是圖1的電子裝置處於攝影模式時的情境示意圖。
圖2B是圖1的電子裝置處於攝影模式時的另一情境示意圖。
圖2C是圖1的電子裝置處於投影模式時的情境示意圖。
圖2D是圖1的電子裝置處於投影模式時的另一情境示意圖。
圖3A是本發明實施例所提供的物件重製方法的流程示意圖。
圖3B是本發明另一實施例所提供的物件重製方法的流程示意圖。
圖4A是本發明另一實施例所提供的物件重製方法的流程示意圖。
圖4B是本發明另一實施例所提供的物件重製方法的流程示意圖。
在下文中,將藉由圖式說明本發明之各種實施例來詳細描述本發明。然而,本發明概念可能以許多不同形式來體現,且不應解釋為限於本 文中所闡述之例示性實施例。此外,在圖式中相同參考數字可用以表示類似的元件。
請同時參閱到圖1及圖2A至圖2D,圖1是本發明實施例所提供的電子裝置的功能方塊圖,而圖2A至圖2D則分別是圖1的電子裝置所處於不同工作模式時的情境示意圖。所述電子裝置10主要具有攝影模式及投影模式,且其包括照明模組110、影像投影模組120、相機模組130及至少一處理器140。值得注意的是,為了方便以下說明,本實施例的處理器140則是僅採用數量為1的例子來進行說明,但其並非用以限制本發明。另外,上述照明模組110、影像投影模組120、相機模組130及處理器140可以是透過純硬件電路來實現,或者是透過硬件電路搭配固件或軟件來實現,但本發明皆不以此為限制。除此之外,上述各元件可以是整合或分開設置,本發明亦不以此為限制。
在本實施例中,電子裝置10可例如是具有投影功能的個人化電腦,但本發明卻不以此為限制。因此,若為了方便將上述各元件組構成個人化電腦,電子裝置10更必須包括有主體200(圖1未繪示)。以圖2A至圖2D為例,本實施例的主體200可例如具有用來放置於工作平面C上的基座201,以及連接於基座201的支撐架202。在本實施例中,因為耦接於照明模組110、影像投影模組120及相機模組130的處理器140可以是內建於基座201內,也可以是設置於與電子裝置10電性連接的外部裝置(未繪示)內,但本發明皆不以此為限制,所以為了方便以下說明,圖2A至圖2D中將不再繪示處理器140。
進一步來說,照明模組110連接於支撐架202,並且與工作平面C相面對,以用來對外部物件提供照明光線。具體而言,照明模組110是亮度可調整的照明設備,且其例如包括燈罩111,以及固定於燈罩111上的發光 元件112。總而言之,本發明並不限制照明模組110的具體實現方式,本技術領域中具有通常知識者應可依據實際需求或應用來進行相關設計。影像投影模組120則樞接於燈罩111,且其例如包括外殼121、投影鏡頭122,以及配置於外殼121內的發光元件(未繪示)與顯示元件(未繪示)。實務上,顯示元件係用來將外殼121內發光元件所提供的照明光束轉換成影像光束,且投影鏡頭122則用來將該影像光束投影至工作平面C上。
另外,相機模組130配置於影像投影模組120的一側,於攝影模式時,相機模組130則用來擷取及儲存有關其攝影範圍內的一背景影像,並且感測其攝影範圍內是否出現外部物件。以圖2A為例,因為相機模組130被配置於燈罩111上,且其例如包括至少一RGB相機(未繪示),所以其攝影範圍即包含了工作平面C。也就是說,相機模組130所用來擷取及儲存的背景影像,便可指的是工作平面C上的影像。舉例來說,當電子裝置10一經使用者的操作指令而切換至攝影模式時,處理器140即致能相機模組130來馬上擷取及儲存當前工作平面C上的影像,又或者是,致能相機模組130來週期性地擷取及儲存工作平面C上的影像。總而言之,本發明並不限制相機模組130所擷取及儲存背景影像時的具體實現方式,並且應當理解的是,這裡的背景影像便可指的是不含有使用者所期望重製的外部物件的影像。
然後,因為使用者開始期望利用電子裝置10來對某外部物件進行重製,所以使用者便可以將該外部物件(例如,圖2B中的蘋果)置於相機模組130的攝影範圍內。以圖2B為例,因為相機模組130的攝影範圍包含了工作平面C,所以當相機模組130感測到工作平面C上出現蘋果(亦即,外部物件)時,相機模組130則用來再次擷取及儲存含有該蘋果與部分背景影像的第一影像。接著,處理器140則用來根據含有該蘋果與部分背景影像的第一影像及背景影像,產生虛擬物件影像。在本實施例中,相機模組130 可以是運用背景相減法(Background Subtraction)來判斷其攝影範圍內是否出現外部物件。類似地,在本實施例中,處理器140也可以是運用背景相減法來將第一影像與背景影像進行影像相減處理,以產生出該虛擬物件影像,但本發明卻皆不以此為限制。舉例來說,在其它實施例中,處理器140也可以是將第一影像,經由物件剪裁(Object Crop)與梯形校正(Keystone Adjustment)等多種影像處理機制後而產生出該虛擬物件影像。總而言之,由於背景相減法、物件剪裁及梯形校正的運作原理皆已為本技術領域中具有通常知識者所習知,因此有關上述細節於此就不再多加贅述,並且應當理解的是,這裡的虛擬物件影像也就單純指的是只有該蘋果的影像。
另一方面,若為了讓處理器140能夠清楚且完整地重製出只有該蘋果的影像(亦即,前述虛擬物件影像),因此於攝影模式時,影像投影模組120更可用來將一個預設圖案L投影至工作平面C上,以提示使用者將所期望重製的該蘋果置於預設圖案L中,從而使得相機模組130更能夠擷取得到含有該蘋果全貌的第一影像。類似地,於攝影模式時,處理器140則可致能照明模組110以用來對外部物件提供照明光線,從而達到補光的效果。需要說明的是,為了突顯圖2B中的蘋果即為真實物件,因此圖2B中的蘋果才繪示含有影子的出現,但應當理解的是,在本實施例已使用照明模組110來進行補光後(亦即,光線充足的情況下),圖2B中的蘋果將應不再含有影子的出現。另外,根據以上內容的教示,本技術領域中具有通常知識者應亦可理解到,在相機模組130感測到其攝影範圍內出現外部物件後,相機模組130更可用來感測及判斷該外部物件的位置是否穩定,並且直到判斷該外部物件的位置為穩定時,相機模組130才再次來擷取及儲存含有該外部物件與部分背景影像的第一影像。實務上,相機模組130可以是運用影像中心偏移(Imaging Center Offset)法來判斷該外部物件的位置是否穩定,但本 發明卻不以此為限制。舉例來說,相機模組130可以是在某預設時間內,判斷第一影像的中心位置是否有改變。若有改變即表示產生偏移,也就是指「不穩定」,而若沒有改變即表示沒有偏移,也就是指「穩定」。總而言之,上述所採用的具體實現方式在此僅是舉例,並且有關圖2A及圖2B中的預設圖案L之輪廓亦僅作為示意,其非用以限制本發明。
接著,以圖2C為例,於投影模式時,處理器140則致能影像投影模組120來將虛擬物件影像投影至工作平面C上,以及允許使用者對工作平面C上的虛擬物件影像進行互動操作。然而,為了讓使用者能夠直接在工作平面C上對虛擬物件影像進行互動操作,因此,本實施例的電子裝置10更可包括感應操控模組150,以供作為電子裝置10的輸入介面。感應操控模組150耦接於處理器140,並且於投影模式時,感應操控模組150則用來感應使用者對於虛擬物件影像所進行的互動操作。應當理解的是,這裡所謂的互動操作即可例如包括放大、縮小、移動、單擊、雙擊或裁剪此虛擬物件影像,但本發明皆不以此為限制。實務上,感應操控模組150即可例如為一紅外線感應操控模組、一電容感應操控模組、一電阻感應操控模組、或一超音波感應操控模組,且其如圖2C所示被配置於照明模組110或其他合適位置上。總而言之,本發明並不限制感應操控模組150的具體實現方式,並且由於感應操控模組150已為本技術領域中具有通常知識者所習知,因此有關上述感應操控模組150的細部內容於此也就不再多加贅述。
另外,如同前面內容所述,由於電子裝置10可以是依據使用者的操作指令而主動切換至攝影模式,亦即,處理器140能夠是依據使用者的操作指令,決定使電子裝置10處於該攝影模式,因此當處理器140產生完虛擬物件影像時,處理器140也就可決定使電子裝置10經由該攝影模式切換至投影模式。需要說明的是,上述操作指令可以是由使用者按壓電子裝置10上 的實體或虛擬按鍵(未繪示)所取得,又或者是,由使用者透過對感應操控模組150進行手勢操控所取得。總而言之,本發明並不限制操作指令的具體實現方式,本技術領域中具有通常知識者應可依據實際需求或應用來進行相關設計。
然而,為了避免手勢操控上的誤判,因此在本實施例中,當電子裝置10處於攝影模式時,感應操控模組150雖可開啟但卻不作用。又或者是,在其它實施例中,當處理器140決定使電子裝置10切換至攝影模式時,處理器140更可直接禁能感應操控模組150以使其皆處於關機狀態,直到攝影模式結束為止。類似地,當處理器140決定使電子裝置10經由攝影模式切換至投影模式時,處理器140亦可直接禁能相機模組130以使其處於關機狀態,從而避免使用者的誤用。又或者是,在本實施例中,當影像投影模組120投影虛擬物件影像至工作平面C後,相機模組130還可用來感測及判斷外部物件是否消失於其攝影範圍內,並且直到判斷該外部物件消失於其攝影範圍內時,相機模組130才會處於關機狀態。實務上,相機模組130也可以是運用背景相減法來判斷外部物件是否消失於其攝影範圍內,但本發明卻亦不以此為限制。另外,在本實施例中,當相機模組130判斷外部物件消失於其攝影範圍內時,處理器140也可以是致能照明模組110來減少前述照明光線的亮度,從而降低使用者眼睛容易感到疲勞、甚至是影響視力或損害眼睛。總而言之,上述所採用的實現方式在此皆僅是舉例,其並非用以限制本發明,本技術領域中具有通常知識者應可依據實際需求或應用來進行相關設計。
更進一步來說,在本實施例中,當處理器140產生完虛擬物件影像後,電子裝置10將不僅可以是儲存該虛擬物件影像外,還可以是上傳該虛擬物件影像至一雲端資料庫(未繪示)中。雲端資料庫則用來儲存與前述 虛擬物件影像相關聯的至少一資訊標籤,並且透過至少一通訊協定來與電子裝置10進行數據傳輸。因此,當電子裝置10上傳完該虛擬物件影像後,電子裝置10更可自雲端資料庫中下載有關對應於該虛擬物件影像的資訊標籤,並且於投影模式時,根據前述資訊標籤,投影顯示一對應的圖形化用戶介面,以讓使用者無須再透過其他的管道就能取得有關該外部物件的相關資訊,從而滿足了使用者所對於該外部物件的求知需求,如圖2D所示。其中,所謂的資訊標籤則可例如包括該外部物件(例如,蘋果)的營養成份、烹飪食譜、廣告文宣或是購買網站等,但本發明皆不以此為限制。又或者是,在其它實施例中,電子裝置10也可以是直接上傳含有該外部物件與部分背景影像的第一影像至雲端資料庫中,並且自雲端資料庫中下載有關對應於第一影像的至少一資訊標籤。總而言之,上述所採用的實現方式在此皆僅是舉例,其並非用以限制本發明,本技術領域中具有通常知識者應可依據實際需求或應用來進行相關設計。
最後,為了更進一步說明關於前述電子裝置10的物件重製流程,本發明進一步提供其物件重製方法的一種實施方式。請參閱圖3A,圖3A是本發明實施例所提供的物件重製的流程示意圖。值得注意的是,圖3A的物件重製方法可以是在圖1至圖2D所示的電子裝置10中執行,因此請一併參照圖1至圖2D以利理解,但本發明並不限制圖3A的物件重製方法僅能夠執行於圖1至圖2D的電子裝置10中。另外,由於詳細步驟流程如前述實施例所述,故於此僅作概述而不再多加冗述。
如圖3A所示,首先,在步驟S320中,於攝影模式時,利用相機模組,擷取及儲存有關其攝影範圍內的背景影像。其次,在步驟S330中,利用相機模組,感測及判斷此攝影範圍內是否出現外部物件,並且直到判斷此攝影範圍內出現外部物件時,則才進行步驟S340。而在步驟S340中,則 再利用相機模組,感測及判斷此外部物件的位置是否穩定。若此外部物件的位置沒有穩定時,則返回到步驟S330;若此外部物件的位置有穩定時,則才進行步驟S350。而在步驟S350中,則利用處理器,將此外部物件重製為虛擬物件影像。然後,在步驟S360中,於投影模式時,利用影像投影模組來將虛擬物件影像投影至工作平面上,以及允許使用者對工作平面上的虛擬物件影像進行互動操作。
更進一步來說,本實施例的步驟S350可以包括:擷取及儲存此外部物件的形狀輪廓,並且計算此形狀輪廓內的面積,以及根據此形狀輪廓及其面積,在多個虛擬物件影像中,尋找出最匹配的一個虛擬物件影像。但本發明卻不限制步驟S350的具體實現方式,本技術領域中具有通常知識者應可依據實際需求或應用來進行相關設計。另外,如同前面內容所述,由於本實施例的電子裝置可以是依據使用者的操作指令而主動切換至攝影模式,因此在步驟S350中,當處理器產生完虛擬物件影像時,處理器也就可決定使電子裝置經由攝影模式切換至投影模式。然而,若為了讓處理器能夠清楚且完整地重製出該外部物件的影像(亦即,前述虛擬物件影像),因此請一併參閱到圖3B,圖3B是本發明另一實施例所提供的物件重製方法的流程示意圖。值得注意的是,圖3B的物件重製方法也可以是在圖1至圖2D所示的電子裝置10中執行,但本發明亦不限制圖3B的物件重製方法僅能夠執行於圖1至圖2D的電子裝置10中。另外,圖3B中部分與圖3A相同或相似之流程步驟以相同或相似之圖號標示,故於此不再多加詳述其細節。
相較於圖3A的物件重製方法,圖3B的物件重製方法更包括步驟S310、步驟S370及步驟S380。首先,在步驟S310中,於攝影模式時,則利用照明模組來對此外部物件提供照明光線,以達到補光的效果,並且利用影像投影模組來將一個預設圖案投影至工作平面上,以達到提示使用者將 所期望重製的此外部物件置於預設圖案中。另外,在步驟S360以後的步驟S370中,則使得照明模組來減少前述照明光線的亮度,從而降低使用者眼睛容易感到疲勞、甚至是影響視力或損害眼睛。而在步驟S380中,則使得電子裝置來投影顯示一圖形化用戶介面。
類似地,若考量到本實施例的電子裝置還可以上傳影像至一雲端資料庫中,並且自雲端資料庫中下載對應於該影像的至少一資訊標籤,因此請一併參閱到圖4A及圖4B,圖4A及圖4B則分別是本發明另一實施例所提供的物件重製方法的流程示意圖。值得注意的是,圖4A及圖4B的物件重製方法也可以是在圖1至圖2D所示的電子裝置10中執行,但本發明亦不限制圖4A及圖4B的物件重製方法僅能夠執行於圖1至圖2D的電子裝置10中。另外,圖4A中部分與圖3B相同或相似之流程步驟以相同或相似之圖號標示,而圖4B中部分與圖4A相同或相似之流程步驟也以相同或相似之圖號標示,故於此不再多加詳述其細節。
相較於圖3B的步驟S350,圖4A的步驟S350則更包括步驟S410及S420。在步驟S410中,則擷取及儲存含有此外部物件與部分背景影像的第一影像。而在步驟S420中,則包括:上傳此第一影像至雲端資料庫,並且自雲端資料庫中下載,對應於此第一影像的至少一資訊標籤,以及將此第一影像,經多個影像處理步驟後,產生虛擬物件影像,並且儲存此虛擬物件影像。類似地,相較於圖3B的步驟S350,圖4B的步驟S350則更包括步驟S410及S430。而在步驟S430中,則包括:將此第一影像,經多個影像處理步驟後,產生虛擬物件影像,並且儲存此虛擬物件影像,以及上傳此虛擬物件影像至雲端資料庫,並且自雲端資料庫中下載,對應於此虛擬物件影像的至少一資訊標籤。總而言之,上述所採用的實現方式在此皆僅是舉例,其並非用以限制本發明,本技術領域中具有通常知識者應可依據實際需求 或應用來進行相關設計。另外,如圖4A及圖4B所示,在步驟S360以後的步驟S440中,則利用相機模組,感測及判斷此外部物件是否消失於其攝影範圍內,並且直到判斷此外部物件消失於其攝影範圍內時,則才進行步驟S370。而在圖4A及圖4B的步驟S380’中,則使得電子裝置來將根據前述資訊標籤,投影顯示該形化用戶介面。
綜上所述,本發明實施例所提供的電子裝置及其物件重製方法,可以是於攝影模式時,利用相機模組來擷取其攝影範圍內的至少一背景影像,以及含有外部物件與部分背景影像的第一影像,並且運用背景相減法來獲得到單純只有此外部物件的虛擬物件影像,然後於投影模式時,則再利用影像投影模組來將此虛擬物件影像投影至工作平面上。此外,本發明實施例的電子裝置及其物件重製方法,除了可以是投影此外部物件的虛擬物件影像外,還可以是允許使用者對工作平面上的虛擬物件影像進行互動操作,並且亦投影有關此外部物件的其他相關資訊至工作平面上,從而增加了使用者與此外部物件間的互動。
以上所述僅為本發明之實施例,其並非用以侷限本發明之專利範圍。

Claims (22)

  1. 一種電子裝置,包括:一照明模組;一影像投影模組,樞接於該照明模組;一相機模組,配置於該影像投影模組的一側,用以擷取及儲存有關該相機模組的一攝影範圍內的一背景影像,並且感測該攝影範圍內是否出現一外部物件,以及判斷該外部物件的位置是否穩定;其中,當該相機模組感測到該攝影範圍內出現該外部物件,且判斷該外部物件的位置為穩定時,再次擷取及儲存含有穩定之該外部物件及部分該背景影像的一第一影像;以及至少一處理器,耦接於該照明模組、該影像投影模組及該相機模組,用以根據該第一影像及該背景影像,將該外部物件重製為一虛擬物件。
  2. 如請求項第1項所述的電子裝置,其中當該相機模組感測到該攝影範圍內出現該外部物件時,該照明模組則用來對該外部物件提供一照明光線。
  3. 如請求項第1項所述的電子裝置,其中該影像投影模組則用來投影該虛擬物件影像至一工作平面上。
  4. 如請求項第1項所述的電子裝置,其中該處理器係至少用一背景相減法,來將該第一影像與該背景影像進行影像相減處理,以產生該虛擬物件影像。
  5. 如請求項第1項所述的電子裝置,更包括一感應操控模組,耦接於該處理器,用來感應一使用者對於該虛擬物件影像所進行的一互動操作。
  6. 如請求項第5項所述的電子裝置,其中該互動操作包括放大、縮小、移動、單擊、雙擊或裁剪該虛擬物件影像。
  7. 如請求項第5項所述的電子裝置,其中該感應操控模組係為一紅外線感應操控模組、一電容感應操控模組、一電阻感應操控模組、或一超音波感應操控模組。
  8. 一種物件重製方法,包括:擷取及儲存一攝影範圍內的一背景影像;感測並判斷該攝影範圍內是否出現一外部物件;若該攝影範圍內出現該外部物件時,則感測並判斷該外部物件的位置是否穩定;若該外部物件的位置不穩定時,則回到感測並判斷該攝影範圍內是否出現該外部物件的步驟;以及若該攝影範圍內沒有出現該外部物件,則回到感測並判斷該攝影範圍內是否出現該外部物件的步驟。
  9. 如請求項第8項所述的物件重製方法,其中在感測並判斷該攝影範圍內是否出現該外部物件的步驟中,包含用以一背景相減法來進行影像相減處理。
  10. 如請求項第8項所述的物件重製方法,其中在感測並判斷該外部物件的位置是否穩定的步驟中,包含用以一影像中心偏移法來進行判斷。
  11. 如請求項第8項所述的物件重製方法,其中若該外部物件的位置穩定時,物件重製方法更包括:擷取及儲存該外部物件的一形狀輪廓;計算該形狀輪廓內的面積;以及根據該形狀輪廓及其面積,在多個虛擬物件影像中,尋找出最匹配的一虛擬物件影像。
  12. 如請求項第11項所述的物件重製方法,更包括:投影顯示該虛擬物件影像。
  13. 如請求項第8項所述的物件重製方法,更包括:提供一照明光線。
  14. 如請求項第8項所述的物件重製方法,更包括:投影顯示一預設圖案。
  15. 如請求項第13項所述的物件重製方法,更包括:減少該照明光線的亮度;以及投影顯示一圖形化用戶介面。
  16. 如請求項第13項所述的物件重製方法,其中若該外部物件的位置穩定時,物件重製方法更包括:擷取及儲存含有該外部物件與部分背景影像的第一影像。
  17. 如請求項第16項所述的物件重製方法,其中若該外部物件的位置穩定時,物件重製方法更包括:上傳該第一影像至一雲端資料庫;自該雲端資料庫下載,對應於該第一影像的至少一資訊標籤;將該第一影像,經多個影像處理步驟後,產生一虛擬物件影像;以及儲存該虛擬物件影像。
  18. 如請求項第17項所述的物件重製方法,其中該些影像處理步驟包含物件剪裁與梯形校正。
  19. 如請求項第8項所述的物件重製方法,更包括:感測並判斷該外部物件是否於該攝影範圍內消失;若該外部物件於該攝影範圍內沒有消失時,則回到感測並判斷該外部物件是否於該攝影範圍內消失的步驟。
  20. 如請求項第8項所述的物件重製方法,其中在感測並判斷該外部物件是否於該攝影範圍內消失的步驟中,包含用以一背景相減法來進行判斷。
  21. 如請求項第17項所述的物件重製方法,若該外部物件於該攝影範圍內消失時,物件重製方法更包括:減少該照明光線的亮度;以及根據資訊標籤,投影顯示一對應的圖形化用戶介面。
  22. 如請求項第16項所述的物件重製方法,其中若該外部物件的位置穩定時,物件重製方法更包括:將該第一影像,經多個影像處理步驟後,產生一虛擬物件影像;儲存該虛擬物件影像;上傳該虛擬物件影像至一雲端資料庫;自該雲端資料庫下載,對應於該虛擬物件影像的至少一資訊標籤。
TW107110239A 2018-03-26 2018-03-26 電子裝置及其物件重製方法 TWI656362B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
TW107110239A TWI656362B (zh) 2018-03-26 2018-03-26 電子裝置及其物件重製方法
CN201810366723.1A CN110365954A (zh) 2018-03-26 2018-04-23 电子装置及其对象重制方法
US15/982,716 US10560672B2 (en) 2018-03-26 2018-05-17 Electronic device and object reproduce method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW107110239A TWI656362B (zh) 2018-03-26 2018-03-26 電子裝置及其物件重製方法

Publications (2)

Publication Number Publication Date
TWI656362B true TWI656362B (zh) 2019-04-11
TW201940930A TW201940930A (zh) 2019-10-16

Family

ID=66996081

Family Applications (1)

Application Number Title Priority Date Filing Date
TW107110239A TWI656362B (zh) 2018-03-26 2018-03-26 電子裝置及其物件重製方法

Country Status (3)

Country Link
US (1) US10560672B2 (zh)
CN (1) CN110365954A (zh)
TW (1) TWI656362B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI653563B (zh) * 2016-05-24 2019-03-11 仁寶電腦工業股份有限公司 投影觸控的圖像選取方法
US20210056272A1 (en) 2019-08-23 2021-02-25 KEFI Holdings, Inc Object detection-based control of projected content
US11982926B2 (en) * 2021-06-25 2024-05-14 Konica Minolta Business Solutions U.S.A., Inc. Method for eliminating video echo in a projector-camera based remote collaborative system

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW201104494A (en) * 2009-07-20 2011-02-01 J Touch Corp Stereoscopic image interactive system
US20130182858A1 (en) * 2012-01-12 2013-07-18 Qualcomm Incorporated Augmented reality with sound and geometric analysis
US9110512B2 (en) * 2011-03-31 2015-08-18 Smart Technologies Ulc Interactive input system having a 3D input space
US20160255278A1 (en) * 2011-07-29 2016-09-01 Hewlett-Packard Development Company, L.P. Projecting an image of a real object
WO2016175992A1 (en) * 2015-04-27 2016-11-03 Microsoft Technology Licensing, Llc Integrated processing and projection device with object detection
TWI597623B (zh) * 2013-01-12 2017-09-01 微軟公司 可穿戴基於行爲的視覺系統

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101697597A (zh) * 2009-11-07 2010-04-21 福州华映视讯有限公司 产生3d影像的方法
US9069164B2 (en) * 2011-07-12 2015-06-30 Google Inc. Methods and systems for a virtual input device
TWI590193B (zh) 2011-09-29 2017-07-01 國立清華大學 昆蟲影像檢測方法以及昆蟲分類流程
CN105301771B (zh) * 2014-06-06 2020-06-09 精工爱普生株式会社 头部佩戴型显示装置、检测装置、控制方法以及计算机程序
US9800851B2 (en) * 2016-01-26 2017-10-24 Disney Enterprises, Inc. Apparatus and methods for bringing an object to life
TWI653563B (zh) * 2016-05-24 2019-03-11 仁寶電腦工業股份有限公司 投影觸控的圖像選取方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW201104494A (en) * 2009-07-20 2011-02-01 J Touch Corp Stereoscopic image interactive system
US9110512B2 (en) * 2011-03-31 2015-08-18 Smart Technologies Ulc Interactive input system having a 3D input space
US20160255278A1 (en) * 2011-07-29 2016-09-01 Hewlett-Packard Development Company, L.P. Projecting an image of a real object
US20130182858A1 (en) * 2012-01-12 2013-07-18 Qualcomm Incorporated Augmented reality with sound and geometric analysis
TWI597623B (zh) * 2013-01-12 2017-09-01 微軟公司 可穿戴基於行爲的視覺系統
WO2016175992A1 (en) * 2015-04-27 2016-11-03 Microsoft Technology Licensing, Llc Integrated processing and projection device with object detection

Also Published As

Publication number Publication date
TW201940930A (zh) 2019-10-16
CN110365954A (zh) 2019-10-22
US10560672B2 (en) 2020-02-11
US20190297307A1 (en) 2019-09-26

Similar Documents

Publication Publication Date Title
CN107426886B (zh) 智能照明装置
KR102598109B1 (ko) 이미지 분석에 기반하여, 디스플레이를 통해 표시된 영상과 메모리에 저장된 영상과 관련하여 알림을 제공하는 전자 장치 및 방법
US11405539B2 (en) Background replacement system and methods
TWI656362B (zh) 電子裝置及其物件重製方法
KR102661614B1 (ko) 화면 제공 방법 및 이를 지원하는 전자 장치
KR102661185B1 (ko) 전자 장치 및 그의 이미지 촬영 방법
TWI687812B (zh) 電子裝置及其運作方法
US20220385814A1 (en) Method for generating plurality of content items and electronic device therefor
KR102706932B1 (ko) 이미지의 생성 방법 및 그 전자 장치
JP2015154345A (ja) プロジェクタ
US20240107177A1 (en) Techniques for Correcting Images in Flash Photography
TW202114396A (zh) 攝像裝置、攝像控制方法及攝像控制程式