TWI651644B - 行動裝置、行動裝置的操作方法、及非揮發性電腦可讀取記錄媒體 - Google Patents

行動裝置、行動裝置的操作方法、及非揮發性電腦可讀取記錄媒體 Download PDF

Info

Publication number
TWI651644B
TWI651644B TW106116001A TW106116001A TWI651644B TW I651644 B TWI651644 B TW I651644B TW 106116001 A TW106116001 A TW 106116001A TW 106116001 A TW106116001 A TW 106116001A TW I651644 B TWI651644 B TW I651644B
Authority
TW
Taiwan
Prior art keywords
photo
preview image
video file
movie
file
Prior art date
Application number
TW106116001A
Other languages
English (en)
Other versions
TW201835749A (zh
Inventor
沈政達
簡維鋒
Original Assignee
宏達國際電子股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 宏達國際電子股份有限公司 filed Critical 宏達國際電子股份有限公司
Publication of TW201835749A publication Critical patent/TW201835749A/zh
Application granted granted Critical
Publication of TWI651644B publication Critical patent/TWI651644B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432—Content retrieval operation from a local storage medium, e.g. hard-disk
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/7837—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using objects detected or recognised in the video content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/7867—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, title and artist information, manually generated time, location and usage information, user ratings
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/44504—Circuit details of the additional information generator, e.g. details of the character or graphics signal generator, overlay mixing circuits

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Library & Information Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Studio Devices (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

一種應用於一行動裝置的操作方法包括：擷取一預覽影像；顯示該預覽影像；在該預覽影像中偵測一照片；相應於在該預覽影像中偵測到該照片，在一資料庫中搜尋相應於該照片的一影片檔案；以及相應於在該資料庫中搜尋到相應於該照片的該影片檔案，播放該影片檔案的一影片於顯示的該預覽影像的至少一部份上。

Description

行動裝置、行動裝置的操作方法、及非揮發性電腦可讀取記錄媒體
本案涉及一種電子裝置、一種方法、及一種非揮發性電腦可讀取記錄媒體。具體而言，本案涉及一種行動裝置、一種行動裝置的操作方法、及一種非揮發性電腦可讀取記錄媒體。
隨著電子技術的發展，行動裝置，如行動電話及平板電腦等，已廣泛地應用在人們的生活當中。
使用者可用行動裝置擷取照片及記錄影片。然而，當影片數量過多時，若影片未適當整理或置放，將不易找到特定的影片。因此，一種解決方法當被提出。
本案的一實施態樣涉及一種行動裝置的操作方法。根據本案一實施例，該操作方法包括：擷取一預覽影像；顯示該預覽影像；在該預覽影像中偵測一照片；相應於在該預覽影像中偵測到該照片，在一資料庫中搜尋相應於該照片的一影片檔案；以及相應於在該資料庫中搜尋到相應於該照片的該影片檔案，播放該影片檔案的一影片於顯示的該預覽影像的至少一部份上。
根據本案一實施例，播放的該影片重疊於該預覽影像中的該照片。
根據本案一實施例，播放該影片檔案的該影片於顯示的該預覽影像的該至少一部份上的操作包括：計算該照片的複數頂點與該影片的複數頂點間的對應關係；以及播放該影片於該預覽影像中的該照片的位置，其中播放的該影片的形狀與尺寸根據該照片的該些頂點與該影片的該些頂點間的對應關係變化。
根據本案一實施例，在該預覽影像中偵測該照片的操作包括：在該預覽影像中偵測具有一或多特徵的四邊形，其中該一或多特徵包括一邊框(frame)、一或多臉、一或多浮水印、一或多時間戳記(timestampe)、及/或一或多編碼(code)。
根據本案一實施例，搜尋相應於該照片的該影片檔案的操作包括：根據在該照片與該影片檔案間的一預設連結、該照片上的一或多浮水印、該照片上的一或多時間戳記、該照片上的一或多編碼、該照片的一直方圖 (histogram)、及或該照片的一影像頻率(image frequency)，搜尋該影片檔案。
根據本案一實施例，播放的該影片的形狀大致相同於該預覽影像中的該照片的形狀。
根據本案一實施例，播放的該影片的尺寸大致相同於該預覽影像中的該照片的尺寸。
本案的另一實施態樣涉及一種行動裝置。根據本案一實施例，該行動裝置包括一擷取元件、一顯示元件、一或多處理元件、一記憶體、以及一或多程式。該一或多處理元件電性連接該擷取元件與該顯示元件。該記憶體電性連接該一或多處理元件。該一或多程式儲存於該記憶體中，並用以被該一或多處理元件所執行，該一或多程式包括以下指令：控制該擷取元件擷取一預覽影像；控制該顯示元件顯示該預覽影像；在該預覽影像中偵測一照片；相應於在該預覽影像中偵測到該照片，在一資料庫中搜尋相應於該照片的一影片檔案；以及相應於在該資料庫中搜尋到相應於該照片的該影片檔案，控制該顯示元件播放該影片檔案的一影片於顯示的該預覽影像的至少一部份上。
根據本案一實施例，該一或多程式更包括以下指令：計算該照片的複數頂點與該影片的複數頂點間的對應關係；以及控制該顯示元件播放該影片於該預覽影像中的該照片的位置，其中播放的該影片的形狀與尺寸根據該照片的該些頂點與該影片的該些頂點間的對應關係變化。
本案的另一實施態樣涉及一種非揮發性電腦可 讀取記錄媒體。根據本案一實施例，該非揮發性電腦可讀取記錄媒體用以儲存一電腦程式，其中在執行該電腦程式時，將致使一處理器執行複數操作包括：擷取一預覽影像；顯示該預覽影像；在該預覽影像中偵測一照片；相應於在該預覽影像中偵測到該照片，在一資料庫中搜尋相應於該照片的一影片檔案；以及相應於在該資料庫中搜尋到相應於該照片的該影片檔案，播放該影片檔案的一影片於顯示的該預覽影像的至少一部份上。
透過應用上述一實施例，即可迅速地播放相應於預覽影像中的照片的影片檔案於預覽影像中，而令使用者無需手動地尋找相應的影片檔案。
100‧‧‧行動裝置
110‧‧‧處理元件
120‧‧‧記憶體
130‧‧‧顯示元件
140‧‧‧擷取元件
200‧‧‧方法
S1-S5‧‧‧操作
VT‧‧‧頂點
H‧‧‧矩陣
SH1‧‧‧影片
SH2‧‧‧照片
TSP‧‧‧時間戳記
PHG‧‧‧照片
PVW‧‧‧預覽影像
VDO‧‧‧影片
CDE‧‧‧編碼
FCE‧‧‧臉
FRM‧‧‧邊框
第1圖為根據本案一實施例所繪示的行動裝置的示意圖；第2圖為根據本發明一實施例的操作方法的流程圖；第3圖為根據本發明一操作例的操作方法的示意圖；第4A-4C圖為根據本發明一操作例的操作方法的示意圖；以及第5圖為根據本發明一操作例的操作方法的示意圖。
以下將以圖式及詳細敘述清楚說明本揭示內容 之精神，任何所屬技術領域中具有通常知識者在瞭解本揭示內容之實施例後，當可由本揭示內容所教示之技術，加以改變及修飾，其並不脫離本揭示內容之精神與範圍。
關於本文中所使用之『電性連接』，可指二或多個元件相互直接作實體或電性接觸，或是相互間接作實體或電性接觸，而『電性連接』還可指二或多個元件相互操作或動作。
關於本文中所使用之『第一』、『第二』、...等，並非特別指稱次序或順位的意思，亦非用以限定本發明，其僅為了區別以相同技術用語描述的元件或操作。
關於本文中所使用之『包含』、『包括』、『具有』、『含有』等等，均為開放性的用語，即意指包含但不限於。
關於本文中所使用之『及/或』，係包括所述事物的任一或全部組合。
關於本文中所使用之方向用語，例如：上、下、左、右、前或後等，僅是參考附加圖式的方向。因此，使用的方向用語是用來說明並非用來限制本案。
關於本文中所使用之用詞(terms)，除有特別註明外，通常具有每個用詞使用在此領域中、在此揭露之內容中與特殊內容中的平常意義。某些用以描述本揭露之用詞將於下或在此說明書的別處討論，以提供本領域技術人員在有關本揭露之描述上額外的引導。
關於本文中所使用之用語『大致』、『約』等， 一般係用以指涉與所述數值或範圍相近的任何數值或範圍，此數值或範圍會根據涉及的不同技藝而有所變化，且其解釋範圍符合本領域具通常知識者對其所為的最廣解釋範圍，以涵蓋所有的變形或相似結構。一些實施例中，此類用語所修飾的些微變化或誤差之範圍為20%，在部份較佳實施例中為10%，在部份更佳實施例中為5%。另外，本文中所述及的數值皆意指近似數值，在未作另外說明的情況下，其隱涵『大致』、『約』的詞意。
本揭示內容的一態樣涉及一種行動裝置。為使說明清楚，在以下段落中，將以智慧型手機為例描述行動裝置的細節。然而其它的行動裝置，如平板電腦、虛擬實境裝置、智慧型眼鏡等，亦在本案範圍之中。
第1圖為根據本案一實施例所繪示的行動裝置100的示意圖。在本實施例中，行動裝置100包括一或多處理元件110、記憶體120、顯示元件130、及擷取元件140。在本實施例中，此一或多處理元件110電性連接記憶體120、顯示元件130、及擷取元件140。
在一實施例中，前述一或多處理元件110例如可用中央處理器、數位訊號處理器(digital signal processor，DSP)、影像訊號處理器(image signal processor，ISP)、及/或微處理器等處理器實現，但不以此為限。在一實施例中，記憶體120可包括一或多個記憶體裝置，其中每一記憶體裝置或多個記憶體裝置之集合包括電腦可讀取記錄媒體。記憶體120可包括唯讀記憶體、快閃記憶體、軟碟、硬碟、光碟、 隨身碟、磁帶、可由網路存取之資料庫、或熟悉此技藝者可輕易思及具有相同功能之電腦可讀取紀錄媒體。在一實施例中，顯示元件130例如可用液晶顯示器(liquid crystal display，LCD)、主動矩陣有機發光二極體顯示器、或其他具顯示能力之顯示元件實現，但不以此為限。在一實施例中，擷取元件140例如可用相機實現，但不以此為限。
在一實施例中，前述一或多處理元件110可運行或執行儲存於記憶體120中的各種軟體程式及/或指令集，以執行行動裝置100的各種功能。
在一實施例中，擷取元件140可擷取相應於真實環境的即時預覽影像，並提供此一預覽影像至一或多處理元件110。在一實施例中，一或多處理元件110可控制顯示元件130顯示此一預覽影像。在一實施例中，一或多處理元件110可判斷擷取元件140是否有擷取到一或多照片。亦即，一或多處理元件110可判斷此一預覽影像是否出現一或多照片。若是，一或多處理元件110可搜尋相應於此一預覽影像中的此一或多照片的一或多影片檔案，並播放此一或多影片檔案的一或多影片於顯示的預覽影像的至少一部份上。
透過如此設置，藉由將行動裝置100放在一或多實體或數位照片前，並使用擷取元件140擷取相應於此一或多實體或數位照片的即時預覽影像，使用者即可觀看一或多特定影片。如此對使用者而言不但方便，亦具娛樂性。
在一些實施例中，每一搜尋到的前述一或多的影片檔案的一或多影片可顯示於預覽影像中的對應的一或 多照片上，且此一或此些影片的位置、形狀、及尺寸相同於對應的一或多照片的位置、形狀、及尺寸。
透過如此的設置，可讓預覽影像中原本靜態的照片顯示為動態影片，對使用者具有娛樂性。
以下將搭配第2圖中的操作方法以提供本案更具體細節，然本案不以下述實施例為限。
應注意到，此一操作方法可應用於相同或相似於第1圖中所示結構之行動裝置。而為使敘述簡單，以下將根據本發明一實施例，以第1圖中的行動裝置100為例進行對操作方法的敘述，然本發明不以此應用為限。
此外，此一操作方法亦可實作為一電腦程式，並儲存於一非暫態電腦可讀取記錄媒體中，而使電腦或電子裝置讀取此記錄媒體後執行虛擬實境方法。非暫態電腦可讀取記錄媒體可為唯讀記憶體、快閃記憶體、軟碟、硬碟、光碟、隨身碟、磁帶、可由網路存取之資料庫或熟悉此技藝者可輕易思及具有相同功能之非暫態電腦可讀取記錄媒體。
另外，應瞭解到，在本實施方式中所提及的操作方法的操作，除特別敘明其順序者外，均可依實際需要調整其前後順序，甚至可同時或部分同時執行。
再者，在不同實施例中，此些操作亦可適應性地增加、置換、及/或省略。
參照第1、2圖，操作方法200包括以下操作。
在操作S1中，一或多處理元件110控制擷取元件140擷取預覽影像。在一實施例中，預覽影像為相應於真 實環境的即時預覽影像。
在操作S2中，一或多處理元件110控制顯示元件130以顯示預覽影像。在一實施例中，預覽影像相應於真實環境顯示於顯示元件130上。亦即，當一物件出現在擷取元件140擷取的真實環境中時，此一物件會即時地出現在預覽影像中。
在操作S3中，一或多處理元件110在預覽影像中偵測照片，以判斷預覽影像中是否包含有照片。若是，則進行操作S4。若否，則持續執行操作S3。
在一實施例中，一或多處理元件110可藉由在預覽影像中偵測具有一或多特徵的四邊形，以在預覽影像中偵測照片。在一實施例中，此一或多特徵可包括包括一邊框(frame)、一或多臉、一或多浮水印、一或多時間戳記(timcstampe)、及/或一或多編碼(code)(如條碼、二維碼(如QR碼))，及其中的任何組合。例如，此一或多特徵可為一張臉及預設的浮水印。
在一實施例中，前述邊框可為圍繞前述照片的空白區域。
在一實施例中，前述一或多浮水印可為位於前述照片上任何位置的特定影像或圖形(pattern)。例如，前述一或多浮水印可為位於前述照片的角落、具有序號的標誌(logo)，然本案不以此為限。
在一實施例中，前述一或多時間戳記可包括此一照片的拍攝時間、儲存時間、修改時間、及/或輸出印刷 時間，然本案不以此為限。例如，前述一或多時間戳記可為位於前述照片的角落、對應於特定時間「01/01/2017 16：32」的字串。
在一實施例中，前述一或多編碼可為條碼或二維碼。例如，前述一或多編碼可為位於前述照片的邊框(其圍繞此一照片)上的條碼，然本案不以此為限。
在一實施例中，在於預覽影像中偵測到具有臉、時間戳記、及/或編碼的四邊形的情況下，一或多處理元件110可判斷預覽影像中包含有照片。在並未於預覽影像中偵測到任何具有臉、浮水印、時間戳記、及/或編碼的四邊形的情況下，一或多處理元件110可判斷預覽影像中不包含有照片。
應注意到，其它在預覽影像中偵測照片，以判斷預覽影像中是否包含有照片的方式亦在本案範圍之中。
在一實施例中，一或多處理元件110可藉由電腦視覺演算法(如臉部辨識演算法、特徵偵測演算法等)，偵測具有臉、浮水印、時間戳記、及/或編碼的四邊形。然而其它偵測方法亦在本案範圍之中。
在操作S4中，相應於在預覽影像中偵測到照片，一或多處理元件110在一資料庫中搜尋相應於此一照片的影片檔案。在找到相應於此一照片的影片檔案的情況下，執行操作S5；反之，則回到操作S3。
在一實施例中，前述資料庫可儲存複數影片檔案。在一實施例中，此些影片檔案可為ZOE影片檔案，但 不以此為限。在一實施例中，前述資料庫可儲存於記憶體120中、另一內部儲存裝置、及/或外部儲存裝置(如雲端儲存裝置)。
在一實施例中，一或多處理元件110可根據前述照片與一影片檔案之間的預設連結、此一照片中的一或多浮水印、此一照片中的一或多特徵、此一照片中的一或多時間戳記、此一照片中的一或多編碼、此一照片的直方圖(histogram)、及/或此一照片的影像頻率，搜尋相應於此一照片的此一影片檔案。
在一實施例中，前述照片與前述儲存於資料庫中影片檔案中的一者之間的連結可為預先設置。在一實施例中，當前述照片的拍攝時間相同或相近於前述影片檔案中的一者的影片的拍攝時間時，可建立其間的連結。在一實施例中，當前述照片及前述影片檔案中的一者的影片是在同一操作中完成時(例如，此一操作用以同時拍攝照片及影片)，可建立其間的連結。在一實施例中，當前述照片的檔案名稱相應於前述影片檔案中的一者，可建立其間的連結。在一實施例中，使用者可手動地建立前述照片與前述影片檔案中的一者間的連結。一或多處理元件110可根據此一預設連結，搜尋相應於此一照片的前述影片檔案中的一者。
應注意到，其它設置前述照片與前述影片檔案中的一者間的連結的方式亦在本案之中。
在一實施例中，前述照片可具有一或多浮水印於其上。此一或多浮水印可對應於前述影片檔案中的一者， 以令一或多處理元件110根據此一或多浮水印搜尋相應於此一照片的前述影片檔案中的一者。
在一實施例中，前述照片可具有一或多時間戳記於其上。此一或多時間戳記可對應於一或多特定時間點。一或多處理元件110可用對應於此一或多特定時間點的前述影片檔案中的一者作為搜尋到的影片檔案。例如，一或多處理元件110可用建立時間點大致相同或相近於前述一或多特定時間點的影片檔案，作為搜尋到的影片檔案。
在一實施例中，前述照片可具有一或多編碼於其上。此一或多編碼可對應於前述影片檔案中的一者(例如，此一或多編碼包含特定影片檔案的檔名資訊、特定影片檔案的檔案位址、序列號碼資訊等)，以令一或多處理元件110根據此一或多編碼搜尋相應於此一照片的前述影片檔案中的一者。
在一實施例中，一或多處理元件110可分析前述照片，以取得此一照片的直方圖。一或多處理元件110可分析資料庫中的影片檔案的影片之單幀影像(video frame)，以取得此些影片檔案的影片之複數單幀影像的直方圖，其中此處單幀影像指的是組成影片的靜止影像。而後，一或多處理元件110可比較前述照片的直方圖與資料庫中的影片檔案的影片之單幀影像的直方圖，並用前述影片檔案中的一者(其具有一或多直方圖大致相同或相近於前述照片的直方圖)，作為搜尋到的影片檔案。
在一實施例中，一或多處理元件110可分析前 述照片(例如對前述照片進行傅立葉轉換)，以取得此一照片的影像頻率(image frequency)。一或多處理元件110可分析資料庫中的影片檔案的影片之單幀影像，以取得此些影片檔案的影片之複數單幀影像的影像頻率。而後，一或多處理元件110可比較前述照片的影像頻率與資料庫中的影片檔案的影片之單幀影像的影像頻率，並用前述影片檔案中的一者(其具有一或多影像頻率大致相同或相近於前述照片的影像頻率)，作為搜尋到的影片檔案。
在操作S5中，相應於在資料庫中搜尋到相應於前述照片的影片檔案，一或多處理元件110播放此一影片檔案的一影片於顯示的預覽影像的至少一部份上。
在一實施例中，一或多處理元件110控制顯示元件130播放此一影片於顯示的預覽影像上。
在一實施例中，一或多處理元件110偵測預覽影像上的前述照片的位置、形狀、及尺寸，並根據偵測到的預覽影像上的前述照片的位置、形狀、及尺寸，使播放的影片重疊於預覽影像上的前述照片。在一實施例中，播放的影片的形狀大致相同於預覽影像中的前述照片的形狀。在一實施例中，播放的影片的尺寸大致相同於預覽影像中的前述照片的尺寸。在一實施例中，於預覽影像中播放的影片的位置大致相同於預覽影像中的前述照片的位置。
參照第3圖，在一實施例中，預覽影像中照片SH2可為平行四邊形，且搜尋到的影片檔案的影片SH1可為長方形。
在一實施例中，一或多處理元件110取得照片SH2的頂點VT及搜尋到的影片檔案的影片SH1的頂點VT。而後，一或多處理元件110計算照片SH2的頂點VT及搜尋到的影片檔案的影片SH1的頂點VT之間的對應關係。
在此一實施例中，搜尋到的影片的每一單幀影像及預覽影片相應於稱為單應性矩陣(homography)的影像座標轉換操作，其可用一3x3的矩陣H描述。搜尋到的影片檔案的影片SH1的每一頂點VT(xi,yi)可用向量[xi yi 1] T 表示(其中i=0、1、...、3)，其與矩陣H相乘而產生向量[ui vi wi] T 。預覽影像中照片SH2的頂點VT(x’i,y’i)可用向量[x’i y’i 1] T 表示(其中i=0、1、...、3)。矩陣H可用以下公式計算。
向量[ui vi wi] T 除以wi產生預覽影像中照片SH2的頂點VT(x’i,y’i)：
此些算式可重新寫為矩陣形式：
假設，且
AH=0因此，矩陣H可藉由解出AH=0的算式獲得。亦即，H為ATA對應於最小特徵值(eigenvalue)的特徵向量(eigenvector)。
在解出矩陣H後，一或多處理元件110可根據照片SH2的頂點VT及搜尋到的影片檔案的影片SH1的頂點VT之間的對應關係(亦即，矩陣H)，將搜尋到的影片檔案的影片SH1的形狀及尺寸轉換為預覽影像中照片SH2的形狀及尺寸。而後，一或多處理元件110可在預覽影像中前述照片的位置播放具有轉換後的形狀及尺寸的、前述搜尋到的影片檔案的影片。
透過如此的設置，可讓預覽影像中原本靜態的照片顯示為動態影片，對使用者具有娛樂性。
應注意到，在一些實施例中，在操作S4中，可能搜尋到多於一個相應於前述照片的影片檔案。在此一情況下，在操作S5中，一或多處理元件110可控制顯示元件130輪流播放此些影片檔案的影片。此外，在一些實施例中，部份或全部此些影片檔案的影片可如上所述，以轉換後的形狀及尺寸播放於預覽影像中前述照片的位置。
此外，應注意到，預覽影像中可能存在多於一張照片。在此一情況下，在操作S4中，一或多處理元件110可相應於預覽影像中的每一照片，搜尋相應於每一照片的一或多影片檔案。而後，在操作S5中，一或多處理元件110可控制顯示元件130在預覽影像中同時播放相應於不同照片所搜尋到的影片檔案的影片。此外，在一些實施例中，部份或全部此些影片檔案的影片可如上所述，以相應於不同照片所轉換後的形狀及尺寸，播放於預覽影像中不同照片的位置。
舉例而言，預覽影像中可能存在相應於第一影片檔案的第一照片及相應於第二影片檔案的第二照片。在預覽影像中，第一照片與第二照片的形狀、尺寸、及/或位置彼此不同。一或多處理元件110可控制顯示元件130，以相同於第一照片的形狀、尺寸、及位置播放第一影片，並同時以相同於第二照片的形狀、尺寸、及位置播放第二影片。
為使說明易懂，以下段落將提供一些操作例， 然本案不以此些操作例為限。
參照第4A-4C圖。在此操作例中，預覽影像PVW中存在具有時間戳記TSP的照片PHG。一或多處理元件110可控制擷取元件140擷取預覽影像PVW，並控制顯示元件130，使預覽影像PVW顯示於顯示元件130上。
在此操作例中，一或多處理元件110偵測到具有時間戳記TSP的四邊形，並判斷預覽影像PVW中存在照片。
而後，一或多處理元件110在ZOE影片資料庫中搜尋相應於時間戳記TSP的影片檔案。在此一操作例中，一或多處理元件110以建立時間(如01/01/2017 16：30)大致相同或相近於時間戳記TSP的時間點(例如，在一時間門檻內(5分鐘))的影片檔案，做為尋找到的影片檔案。
而後，一或多處理元件110控制顯示元件130，以在顯示元件130上，於顯示的預覽影像PVW中，播放尋找到的影片檔案的影片VDO於照片PHG上(如第4B圖)。在本實施例中，一或多處理元件110可即時地偵測預覽影像上的照片PHG的位置、形狀、及尺寸(如，即時地計算前述矩陣H)。如此一來，即便預覽影像PVW上的照片PHG的位置、形狀、及尺寸改變(如因為移動行動裝置100或在真實環境中移動照片)，一或多處理元件110仍可控制顯示元件130，於預覽影像中，在改變的照片PHG上，以相同於改變的照片PHG的形狀、尺寸、及位置，播放影片VDO。
透過如此的設置，可讓預覽影像中原本靜態的 照片顯示為動態影片，對使用者具有娛樂性。
參照第5圖。在另一操作例中，預覽影像PVW中存在具有時間戳記TSP、臉FCE、及位於照片PHG邊框FRM上的編碼CDE之照片PHG。
在此一操作例中，一或多處理元件110偵測到具有時間戳記TSP、臉FCE、及位於邊框FRM上的編碼CDE之四邊形，並判斷預覽影像PVW中存在照片。
而後，一或多處理元件110可分析編碼CDE，並根據編碼CDE取得對應於一影片檔案的資訊(例如此一資訊包含此一影片檔案的檔案名稱)。而後，一或多處理元件110可根據此一編碼CDE，控制顯示元件130，以在顯示元件130上，於顯示的預覽影像PVW中，播放相應於編碼CDE的影片檔案的影片。
在一實施例中，前述時間戳記、臉、及/或編碼包括一特定資訊，此一特定資訊對應於前述相關於照片的影片檔案的影片的一或多時段。在一實施例中，影片檔案的影片的此一或多時段可由使用者選擇。在一實施例中，一或多處理元件110可控制顯示元件130，於顯示的預覽影像上，播放對應於前述照片的影片檔案的在此一或多時段中的影片片段。
在一實施例中，前述時間戳記、臉、及/或編碼包括兩部份。前述時間戳記、臉、及/或編碼的第一部份對應於在前述資料庫中的一影片檔案，且前述時間戳記、臉、及/或編碼的第二部份對應於使用者選擇的一或多時段。一 或多處理元件110可根據前述時間戳記、臉、及/或編碼的第一部份在前述資料庫中搜尋對應於前述照片的影片檔案，並根據前述時間戳記、臉、及/或編碼的第二部份，決定要播放影片檔案的哪一或多時段於顯示的預覽影像上。
舉例而言，當前述時間戳記、臉、及/或編碼的第一部份對應於資料庫中的影片檔案「結婚十週年」，且前述時間戳記、臉、及/或編碼的第二部份對應於使用者選擇的時段[0：11：20-0：14：21]以及[0：15：25-0：15：22]，一或多處理元件110可控制顯示元件130，播放影片檔案「結婚十週年」於時段[0：11：20-0：14：21]以及[0：15：25-0：15：22]中的影片片段於顯示的預覽影像的至少一部份上。
應注意到，在一實施例中，對應於前述照片的影片檔案的相關資訊可包含於前述一或多特徵中的一者中，且前述一或多時段的相關資訊可包含於前述一或多特徵中的另一者中，故本案不以上述實施例為限。
雖然本發明已以實施例揭露如上，然其並非用以限定本發明，任何熟習此技藝者，在不脫離本發明之精神和範圍內，當可作各種之更動與潤飾，因此本發明之保護範圍當視後附之申請專利範圍所界定者為準。

Claims (10)

  1. 一種行動裝置的操作方法，包括：擷取一預覽影像；顯示該預覽影像；在該預覽影像中偵測一照片；相應於在該預覽影像中偵測到該照片，在一資料庫中搜尋相應於該照片的一影片檔案；以及相應於在該資料庫中搜尋到相應於該照片的該影片檔案，播放該影片檔案於顯示的該預覽影像的至少一部份上，其中該影片檔案與該照片是在同一個操作中拍攝完成的。
  2. 如請求項1所述之操作方法，其中該影片檔案重疊於該預覽影像中的該照片。
  3. 如請求項1所述之操作方法，其中播放該影片檔案於顯示的該預覽影像的該至少一部份上的操作包括：計算該照片的複數頂點與該影片檔案的複數頂點間的對應關係；以及播放該影片於該預覽影像中的該照片的位置，其中播放的該影片的形狀與尺寸根據該照片的該些頂點與該影片的該些頂點間的對應關係變化。
  4. 如請求項1所述之操作方法，其中在該預覽影像中偵測該照片的操作包括：在該預覽影像中偵測具有一或多特徵的四邊形，其中該一或多特徵包括一邊框(frame)、一或多臉、一或多浮水印、一或多時間戳記(timestampe)、及/或一或多編碼(code)。
  5. 如請求項1所述之操作方法，其中搜尋相應於該照片的該影片檔案的操作包括：根據在該照片與該影片檔案間的一預設連結、該照片上的一或多浮水印、該照片上的一或多時間戳記、該照片上的一或多編碼、該照片的一直方圖(histogram)、及或該照片的一影像頻率(image frequency)，搜尋該影片檔案。
  6. 如請求項1所述之操作方法，其中該影片檔案的形狀大致相同於該預覽影像中的該照片的形狀。
  7. 如請求項1至6中任一者所述之操作方法，其中該影片檔案的尺寸大致相同於該預覽影像中的該照片的尺寸。
  8. 一種行動裝置，包括：一擷取元件； 一顯示元件；一或多處理元件，電性連接該擷取元件及該顯示元件；一記憶體，電性連接該一或多處理元件；以及一或多程式，其中該一或多程式儲存於該記憶體中，並用以被該一或多處理元件所執行，該一或多程式包括以下指令：控制該擷取元件擷取一預覽影像；控制該顯示元件顯示該預覽影像；在該預覽影像中偵測一照片；相應於在該預覽影像中偵測到該照片，在一資料庫中搜尋相應於該照片的一影片檔案；以及相應於在該資料庫中搜尋到相應於該照片的該影片檔案，控制該顯示元件播放該影片檔案於顯示的該預覽影像的至少一部份上，其中該影片檔案與該照片是在同一個操作中拍攝完成的。
  9. 如請求項8所述之行動裝置，其中該一或多程式更包括以下指令：計算該照片的複數頂點與該影片檔案的複數頂點間的對應關係；以及控制該顯示元件播放該影片於該預覽影像中的該照片的位置，其中播放的該影片的形狀與尺寸根據該照片的該些頂點與該影片的該些頂點間的對應關係變化。
  10. 一種非揮發性電腦可讀取記錄媒體，用以儲存一電腦程式，其中在執行該電腦程式時，將致使一處理器執行複數操作包括：擷取一預覽影像；顯示該預覽影像；在該預覽影像中偵測一照片；相應於在該預覽影像中偵測到該照片，在一資料庫中搜尋相應於該照片的一影片檔案；以及相應於在該資料庫中搜尋到相應於該照片的該影片檔案，播放該影片檔案於顯示的該預覽影像的至少一部份上，其中該影片檔案與該照片是在同一個操作中拍攝完成的。
TW106116001A 2017-03-22 2017-05-15 行動裝置、行動裝置的操作方法、及非揮發性電腦可讀取記錄媒體 TWI651644B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/465,617 US10218911B2 (en) 2017-03-22 2017-03-22 Mobile device, operating method of mobile device, and non-transitory computer readable storage medium
US15/465,617 2017-03-22

Publications (2)

Publication Number Publication Date
TW201835749A TW201835749A (zh) 2018-10-01
TWI651644B true TWI651644B (zh) 2019-02-21

Family

ID=61054119

Family Applications (1)

Application Number Title Priority Date Filing Date
TW106116001A TWI651644B (zh) 2017-03-22 2017-05-15 行動裝置、行動裝置的操作方法、及非揮發性電腦可讀取記錄媒體

Country Status (4)

Country Link
US (1) US10218911B2 (zh)
EP (1) EP3379430A1 (zh)
CN (1) CN108628914B (zh)
TW (1) TWI651644B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017159353A1 (ja) * 2016-03-17 2017-09-21 富士フイルム株式会社 画像処理装置、画像処理システム、及び画像処理方法
CN114079812A (zh) * 2020-08-21 2022-02-22 海信视像科技股份有限公司 一种显示设备及摄像头的控制方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070019095A1 (en) * 2005-06-30 2007-01-25 Kabushiki Kaisha Toshiba File accessing method, specific image file playback method, and camera apparatus capable of playing back the image file
TW201137665A (en) * 2010-04-23 2011-11-01 Univ Nat Taiwan Method for actuating a digital event via a physical object, and computer system
CN102821323A (zh) * 2012-08-01 2012-12-12 成都理想境界科技有限公司 基于增强现实技术的视频播放方法、系统及移动终端
US20140169687A1 (en) * 2012-12-13 2014-06-19 Htc Corporation Image search systems and methods
TW201631960A (zh) * 2015-02-17 2016-09-01 奇為有限公司 擴增實境式串流影音顯示系統、其方法、電腦可讀取記錄媒體及電腦程式產品

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6191406B1 (en) * 1998-07-24 2001-02-20 Eastman Kodak Company Data reader and reader system having visible centerless targeting
JP2001155176A (ja) * 1999-09-14 2001-06-08 Sony Computer Entertainment Inc 画像作成方法、記憶媒体およびプログラム実行装置
CN100496113C (zh) * 2004-01-14 2009-06-03 英业达股份有限公司 影片的特征影像撷取系统及其方法
EP1932360A1 (en) * 2005-09-09 2008-06-18 Thomson Licensing Video watermark detection
US8261191B2 (en) * 2006-08-04 2012-09-04 Apple Inc. Multi-point representation
US7881505B2 (en) * 2006-09-29 2011-02-01 Pittsburgh Pattern Recognition, Inc. Video retrieval system for human face content
CN101639834A (zh) * 2008-08-01 2010-02-03 昆盈企业股份有限公司 自动影像辨识的数字相框、显示的系统及方法
US8239359B2 (en) * 2008-09-23 2012-08-07 Disney Enterprises, Inc. System and method for visual search in a video media player
US9237305B2 (en) * 2010-10-18 2016-01-12 Apple Inc. Overlay for a video conferencing application
US8645353B2 (en) * 2011-06-23 2014-02-04 Microsoft Corporation Anchor image identification for vertical video search
CN103514428A (zh) * 2012-06-18 2014-01-15 华晶科技股份有限公司 智能提示装置及其方法
CN103324682B (zh) * 2013-05-31 2017-06-06 百度在线网络技术（北京）有限公司 一种基于图片来搜索视频的方法及装置
CN104090878B (zh) * 2013-07-04 2017-09-05 腾讯科技（深圳）有限公司 一种多媒体查找方法、终端、服务器及系统
CN103530357A (zh) * 2013-10-11 2014-01-22 北京奇艺世纪科技有限公司 视频检索方法及系统
CA2924764C (en) * 2013-10-21 2020-03-10 Microsoft Technology Licensing, Llc Mobile video search
CN103942337B (zh) * 2014-05-08 2017-08-18 北京航空航天大学 一种基于图像识别与匹配的视频搜索系统
US10353569B2 (en) 2015-06-24 2019-07-16 Htc Corporation Crop frame adjusting method, image processing device, and non-transitory computer readable storage medium
CN105049959B (zh) * 2015-07-08 2019-09-06 广州酷狗计算机科技有限公司 多媒体文件播放方法及装置
US20170206711A1 (en) * 2015-12-30 2017-07-20 Mage Inc. Video-enhanced greeting cards

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070019095A1 (en) * 2005-06-30 2007-01-25 Kabushiki Kaisha Toshiba File accessing method, specific image file playback method, and camera apparatus capable of playing back the image file
TW201137665A (en) * 2010-04-23 2011-11-01 Univ Nat Taiwan Method for actuating a digital event via a physical object, and computer system
CN102821323A (zh) * 2012-08-01 2012-12-12 成都理想境界科技有限公司 基于增强现实技术的视频播放方法、系统及移动终端
US20140169687A1 (en) * 2012-12-13 2014-06-19 Htc Corporation Image search systems and methods
TW201631960A (zh) * 2015-02-17 2016-09-01 奇為有限公司 擴增實境式串流影音顯示系統、其方法、電腦可讀取記錄媒體及電腦程式產品

Also Published As

Publication number Publication date
CN108628914B (zh) 2021-11-12
US20180278851A1 (en) 2018-09-27
EP3379430A1 (en) 2018-09-26
US10218911B2 (en) 2019-02-26
CN108628914A (zh) 2018-10-09
TW201835749A (zh) 2018-10-01

Similar Documents

Publication Publication Date Title
WO2016127478A1 (zh) 一种图像处理方法、装置和终端
WO2018112788A1 (zh) 图像处理方法及设备
US20090273685A1 (en) Foreground/Background Segmentation in Digital Images
JP4798259B2 (ja) 被写体追尾装置、およびカメラ
JP2009053815A (ja) 被写体追跡プログラム、および被写体追跡装置
CN101998048A (zh) 数字图像信号处理方法和数字图像信号处理设备
WO2019080061A1 (zh) 基于摄像设备的遮挡检测修复装置及其遮挡检测修复方法
US20090115857A1 (en) Image capturing apparatus providing image blur information and method thereof
TWI651644B (zh) 行動裝置、行動裝置的操作方法、及非揮發性電腦可讀取記錄媒體
CN105607825B (zh) 用于图像处理的方法和设备
CN105120142B (zh) 能够容易地生成相簿的摄像设备及其控制方法
JP2015008385A (ja) 画像選択装置、撮像装置および画像選択プログラム
WO2012014946A1 (ja) 画像処理装置、および画像処理プログラム
JP6600397B2 (ja) ビデオシーケンスのフレームを選択する方法、システム、及び、装置
AU2016277643A1 (en) Using face detection metadata to select video segments
JP5499856B2 (ja) 画像評価装置
JP5573353B2 (ja) 撮影装置、画像表示装置、および画像表示プログラム
JP5029647B2 (ja) 被写体追尾装置、およびカメラ
TWI234997B (en) Method for using the image data to change the object and the type of the object
JP2017184021A (ja) コンテンツ提供装置及びコンテンツ提供プログラム
JP2010257041A (ja) 被写体追尾装置、およびカメラ
Koçberber et al. Video retargeting: video saliency and optical flow based hybrid approach
TW201537434A (zh) 電子裝置及其影像檢視方法
JP5665380B2 (ja) 画像処理装置、画像処理装置の制御方法、プログラム、及び記録媒体
JP2010074312A (ja) 画像処理装置および画像処理方法、プログラム