201137648 六、發明說明: 【發明所屬之技術領域】 本發明係有關於,對資料庫中所保存之影像資料進行 影像處理的影像處理裝置'影像處理方法、及記錄有影像 處理程式之電腦可讀取之記錄媒體的技術領域。 【先前技術】 近年來,攜帶型無線電話機等之行動終端日漸普及, 使用者即使身處外地,也能輕易地藉由行動終端,來瀏覽 Web網頁或電視節目等之動畫。 個顯面行還而,於將對數 比於畫。數數置,,到素 是基示術素素位標域收像 面將顯技像像定座領接的 畫係在之的的指應像旦料 示端示端部部而對影一資。 顯終顯終示示置該的,像部 的動,動顯顯裝於數此影 |不 端行等行比成標基素藉變 I 終此料的是少指,像。改在 動因資下料減由標之置不示 行,像如資數藉座部裝可顯 於小影了像素旦應示送則 ,, 由還的 |路影像一對顯配,式 , 面過揭原的,的於料料方 時畫縮 W 的料上上等資資的 覽的壓φί到資像料相像像像 潮等被 1 收像影資定影影影 些機而獻接影在像指至的大 這視寸文所原,影中送域放 行電尺利當使後原料發領分 進或之專係則然出資訊像部 在腦面如端,。算像資影以 電畫例終時示會影些於而 人示。動多顯則原這應, [先前技術文獻] 201137648 [專利文獻] [專利文獻1]日本特開2000- 1 3 659號公報 【發明內容】 [發明所欲解決之課題] 順便一提,隨著光纖等寬頻網際網路連接的普及,詳 細地圖資料等之數百萬像素至十億像素的靜止影像或高畫 質電視播送等之動畫等的高解析度之影像係被公開在Web 上,可藉由個人電腦等而瀏覽。 然而,在攜帶型無線電話機等之行動終端的情況下, 尤其是,除了顯示畫面之大小以外,通訊速度或記憶容量 等之機能上的限制較多,因此即使使用上記技術,想要順 暢地瀏覽詳細地圖資料等高解析度影像是有困難,而且也 難謂能夠充分提升使用者的操作性。又,在行動終端的情 況下,操作性相較於鍵盤而言較不充分,對顯示畫面上之 影像的操作,使用者之利便性也不見得較高。 本發明係有鑑於此種問題而硏發,其課題之一例係爲 ,提供一種可謀求行動終端的使用者利便性之影像處理裝 置、影像處理方法、及記錄有影像處理程式之電腦可讀取 之記錄媒體爲目的。 又,本發明的目的在於提供一種將1個影像之中有特 徵之領域予以抽出,使用者不必直接操作,就能將有特徵 之領域自動對使用者作顯示的影像處理裝置、影像處理方 法、及記錄有影像處理程式之電腦可讀取之記錄媒體。 -4 - 201137648 [用以解決課題之手段] 爲了解決上記課題,請求項1所記載之發明,其特徵 爲,具備:特徵量算出手段,係算出影像領域的特徵量; 和影像分割手段,係基於前記特徵量,將前記影像分割成 至少1個大小不同的複數部分領域而獲得分割影像;和顯 示順序決定手段,係基於各個前記分割影像的前記特徵量 ,而決定複數前記分割影像的顯示順序;和連結領域設定 手段,係與前記分割影像建立關連,而設定用來連結至所 定之Web網頁所需之連結領域。 請求項2所記載之發明,係於請求項1所記載之影像處 理裝置中,其特徵爲,還具備:送訊手段,係基於前記顯 示順序,而發送前記分割影像之影像資料及前記連結領域 之資料。 請求項3所記載之發明’係於請求項1或請求項2所記 載之影像處理裝置中’其特徵爲’前記顯示順序決定手段 ,係基於使用者資訊,而決定前記顯示順序。 請求項4所記載之發明’係於請求項1至請求項3之任1 項所記載之影像處理裝置中,其特徵舄,還具備:連結領 域可視化手段’係將前記連結領域進行影像處理成可見化 〇 請求項5所記載之發明,係於請求項1至請求項4之任1 項所記載之影像處理裝置中’其特徵爲,還具備:關連商 品連結手段’係將前記分割影像所關連到的關連商品,與 -5- 201137648 前記連結領域建立關連。 請求項6所記載之發明,係於請求項1至請求項5之任1 項所記載之影像處理裝置中,其特徵爲,前記特徵量係爲 即記影像的色相之値、彩度之値、亮度之値、前記色相的 方向成分、前記彩度的方向成分、及前記亮度的方向成分 之至少1者。 請求項7所記載之發明,其特徵爲,具有:特徵量算 出步驟’係算出影像領域的特徵量;和影像分割步驟,係 基於前記特徵量,將前記影像分割成至少1個大小不同的 複數部分領域而獲得分割影像;和顯示順序決定手段,係 基於各個前記分割影像的前記特徵量,而決定複數前記分 割影像的顯示順序;和連結領域設定步驟,係與前記分割 影像建立關連,而設定用來連結至所定之Web網頁所需之 連結領域。 請求項8所記載之發明,係記錄一種影像處理程式, 其特徵爲,係使電腦發揮機能而成爲:特徵量算出手段, 係算出影像領域的特徵量;影像分割手段,係基於前記特 徵量,將前記影像分割成至少1個大小不同的複數部分領 域而獲得分割影像;顯示順序決定手段’係基於各個前記 分割影像的前記特徵量’而決定複數前記分割影像的顯示 順序;及連結領域設定手段’係與前記分割影像建立關連 ,而設定用來連結至所定之W e b網頁所需之連結領域。 [發明效果] -6 - 201137648 若依據本發明,則會算出影像領域的特徵量’基於特 徵量,將影像分割成至少1個大小不同的複數部分領域而 獲得分割影像,基於各個分割影像的特徵量’而決定複數 分割影像的顯示順序,與分割影像建立關連’而設定用來 連結至所定之Web網頁所需之連結領域’藉此,可使被設 定有連結領域的分割影像,不必使用者直接操作就能自動 被行動終端所再生,因此使用者藉由對喜歡的地方點選等 ,就可對其他資訊作存取,因此可謀求終端的使用者利便 性之提升。 【實施方式】 以下,參照圖面來說明用以實施本發明的最佳形態。 (第1實施形態) 首先,關於本發明的第1實施形態所述之影像處理伺 服器系統的槪略構成及機能,基於圖面而加以說明。 圖1係本發明所述之第1實施形態所述之影像處理伺服 器系統之槪要構成例的模式圖。圖2係影像處理伺服器的 槪要構成之一例的區塊圖。 如圖1所示,影像處理裝置之一例的影像處理伺服器 系統1 0,係具備:基於行動終端20之要求等而進行影像處 理的影像處理伺服器1 1、將影像處理伺服器1 1的處理結果 或來自Web伺服器30之影像資料加以記憶的資料庫伺服器 U '與行動終端20或Web伺服器30進行通訊的通訊伺服器 201137648 13 〇 影像伺服器系統1 〇係被連接至網際網路等的網路3, 行動終端20係被連接至移動體通訊網2,移動體通訊網2與 網路3係藉由用來進行協定轉換或內容描述語言轉換等之 所需之閘道等而連接。又,影像伺服器系統1 〇係對保持 HTML ( HyperText Markup Language)文書或影像等資料 的Web伺服器30,透過網際網路等之網路3而連接。然後, 行動終端20係將所欲瀏覽之影像,亦即原影像的URL ( Uniform Resource Locator)等資訊,發送至影像伺服器系 統1 〇。 影像伺服器系統10,係從URL所對應之Web伺服器30 ’接收關於原影像的原影像資料,根據該原影像資料,作 成關於原影像的原影像資訊,或將原影像資料加工處理成 行動終端20用等,將關於原影像的資訊或影像資料,發送 至行動終端20。例如,作爲存取目標之影像伺服器系統i 〇 的URL ’係被內嵌至行動終端2〇側的軟體,而於行動終端 20側’將作爲原影像資料位址的web伺服器30的URL,藉 由直接輸入、或是點選Web伺服器3〇之URL所被內嵌之地 方等’請求資訊就會從行動終端20發送至影像伺服器系統 1〇 °然後’影像伺服器系統10,係從Web伺服器30取得原 影像資料後,可將施行所定加工後的原影像資料,提供至 行動終端20。如此,行動終端2〇係基於已安裝之軟體,透 過影像伺服器系統1〇,從Web伺服器30等,而取得資訊。 此外’原影像資料係亦可爲影像伺服器系統丨〇內的資料。 201137648 如圖2所示,作爲電腦而發揮機能的影像處 1 1 ’係具備:進行影像處理伺服器丨〗全體控制或 之演算等的控制部1 1 a、將控制部n a的途中結果 持的記憶部1 1 b、與資料庫伺服器丨2或通訊伺服 通訊的通訊部11c、顯示影像或文字等的顯示部1 盤或滑鼠等所構成的操作部1 1 e ;這些係藉由匯之 連接。 控制部 1 1 a係具有 CPU ( Central Processing 將從Web伺服器3 0下載到的影像資料予以壓縮以 的解析度,或成爲根據影像資料而算出特徵量的 出手段而發揮機能等,進行各種影像處理。CPU 1個CPU封裝中具有複數CPU核心的多核心型,可 處理。 記憶部 lib 係具有 RAM (Random Access Me ROM (Read Only Memory)或硬碟等,會被載入 之程式,或是形成用來保持影像資料的記憶體空f
通訊部11c係透過區域網路而與資料庫伺服 訊伺服器1 3進行通訊。又,顯示部1 1 d,係 Cathode Ray Tube)、液晶顯示元件、或EL
Luminescence)元件等所構成。 資料庫伺服器1 2,係控制著由硬碟所成之資 資料庫伺服器1 2的資料庫中係記憶著,從Web伺 載到的影像資料或將該資料進行影像處理而成的 來自行動終端20的要求等。 理伺服器 影像處理 等予以保 器1 3進行 Id、由鍵 ίί排1 1 f而 Unit ), 降低影像 特徵量算 ,係爲在 進行平行 m 〇 r y )或 影像處理 3等。 器12或通 由 CRT ( (Electro 料庫。在 服器30下 資料,或 -9 - 201137648 通訊伺服器13,係透過移動體通訊網2的基地台而與 行動終端20進行通訊,或透過網路3而與Web伺服器30進行 通訊’成爲閘道或認證用伺服器而發揮機能。 接著’行動終端20係如圖1所示,具備:顯示影像或 文字等的顯示部21'已被顯示在顯示部21上的指標之操作 等時所使用的操作部22、未圖示的與影像伺服器系統1 〇進 行收送訊的無線通訊部、進行通話所需之聲音輸出入的聲 音輸出入部、將從影像伺服器系統1 〇所發送過來之資料等 加以記憶的記憶部、進行行動終端20之各種控制的控制部 等。 顯示部21係由液晶顯示元件或EL ( Electro Luminescence )元件等所構成。操作部22,係由各種按鍵 所構成。使用者係藉由操作部22,而可移動顯示部21中所 被顯示的指標,或是選擇影像的一部分並確定。 接著,基於圖3,說明本實施形態中所用的影像資料 之一例。 圖3係影像伺服器的資料庫中的解析度不同之影像資 料之一例的模式圖。如圖3所示,影像(原影像)40係爲 ’對應於Web伺服器30或影像處理伺服器系統10之資料庫 中所存在之原影像資料的原影像之一例的模式圖。
Web伺服器30係具有使用者從行動終端20所要求之影 像的URL所示的原影像資料,例如具有如圖3所示的原影 像40的影像資料。此原影像4〇的影像資料,係爲詳細地圖 資料等,是數百萬〜十億像素大小的影像資料,在行動終 -10- 201137648 端20上無法直接顯示。 從Web伺服器30下載到影像伺服器系統1〇的原影像40 之影像資料,係被記憶在資料庫伺服器1 2。然後,影像處 理伺服器Π係將原影像40之影像資料進行影像處理,作成 各種解析度的影像41、42、45等之影像資料,或使用者可 能注意到的部分影像之影像資料等。此處,作爲原影像40 所述之原影像資訊可舉例如,關於原影像資料或所被作成 之各種解析度之影像資料的像素數(解析度)或寬度與高 度之比例的資訊等。 接著,關於本實施形態之動作,基於圖面來說明。 圖4係影像處理伺服器1 1所進行之劇本再生之一例的 流程圖。圖5係圖3的原影像資料的每一像素之特徵量的計 算結果之影像之一例的模式圖。圖6係原影像被分割成矩 形領域之一例的模式圖。圖7係劇本再生之一例的模式圖 〇 首先’影像處理伺服器1 1的控制部1 1 a係將某個網站 的影像所存在之URL·之資訊或所望之壓縮率(影像的解析 度之等級)的資訊等’從行動終端2 0予以接收。此時,控 制部1 1 a係也會接收關於行動終端2 〇的顯示部2 1之畫面大 小或解析度等之行動終端2〇機能的資訊。影像伺服器〗〗的 控制部1 1 a,係向所被要求之u R L所對應之W e b伺服器3 0進 行存取’下載如圖3所示的原影像4〇之影像資料,透過資 料庫伺服器1 2而記憶在資料庫中成爲原影像40之影像資料 -11 - 201137648 接著,基於圖4的流程圖來說明本實施形態之劇本再 生的槪要。 首先,如圖4所示,影像處理伺服器1 1的控制部1 1 a, 係基於特徵量而將影像分割成部分領域而獲得分割影像( 步驟S1 )。具體而言,首先,如圖5所示,對原影像40計 算特徵量而獲得影像50。然後,如圖6所示,基於特徵量 而分割成至少1個大小不同的複數部分領域(分割影像P 1 、P2、P3)等。大部分的影像經由此一處理會變成不均等 的分割影像。 此處,所謂特徵量,係爲表示在人類視覺的認知中, 存在於靜止影像中之物體之重要度的指標。在該視覺的認 知中,一般認爲色相或彩度或亮度或物體的輪廓線(邊緣 )是重要的因子。此外,特徵量之算出或基於特徵量的影 像分割之細節,將於後述。 如此,影像處理伺服器1 1係成爲,算出影像領域之特 徵量的特徵量算出手段之一例而發揮機能。又,影像處理 伺服器1 1係爲,作爲影像分割方法之一例,是基於特徵量 而將原影像4〇等之影像分割成至少1個大小不同的複數部 分領域而獲得分割影像。 接著,控制部1 1 a係對原影像40作成影像解析度爲各 等級之影像(步驟S2)。具體而言,原影像40之影像資料 的資料量是相對於行動終端20乏顯示機能等爲較大時,控 制部1 1 a係基於影像壓縮,而作成原影像40的各等級之低 解析度影像的影像資料。例如,控制部1 1 a係將原影像40 -12- 201137648 的影像尺寸予以縮小,使其能收容在顯示部2 1的畫面內, 作成降低像素數的低解析度之影像45的影像資料、或影像 41 、 42等。 此處,在降低解析度而減少像素數之際,控制部]1 a 係一度將原影像40之原影像資料分割成複數領域而成爲分 割影像。然後,控制部1 1 a係使用多核心CPU等進行平行處 理,將這些各分割影像的解析度予以減少而獲得低解析度 分割影像,然後將這些影像予以整合而獲得低解析度整合 影像。如此,將壓縮成低解析度的影像,首先分割成分割 影像,然後以複數解析度減少手段進行平行處理而進行分 割影像之壓縮,因此可實現高速的影像壓縮。又,隨應於 使用者之要求而要在行動終端2〇上瀏覽某個百萬像素影像 之影像時,可高速地回應其要求,發送已降低解析度的影 像。 接著,控制部1 1 a係基於特徵量而進行各分割影像的 排名(步驟S3 )。具體而言,如圖6所示,控制部1 1 a係基 於特徵量,而對各分割影像P 1、P2、P3等,將各個分割影 像的特徵量之値由高而低依序進行排名。各分割影像P 1、 P2、P3等的特徵量之値,係使用各分割影像之部分領域中 的特徵量之平均値等。 接著,控制部1 1 a係基於特徵量而決定顯示順序(步 驟S4 )。具體而言,控制部1 la係以特徵量爲一定以上’ 或取出上位的分割影像,於影像5 1中,將位於上方之分割 影像優先顯示等,以此方式來設定顯示順位。如此’控制 -13- 201137648 部lla係成爲,基於各個分割影像的特徵量而決定複 割影像的顯示順序的顯示順序決定手段之一例而發揮 〇 接著,控制部Π a係將所顯示之分割影像附近的 領域,加以決定(步驟S 5 )。具體而言,控制部1 1 a 圖6所示,以包含分割影像PI、P2、P3之部分或全體 式,來決定表示顯示領域的顯示框46 A、47 A、48Α» 示框46A的大小,係根據行動終端20的顯示部21之大 和將分割影像P1顯示於顯示部21時所必須之解析度等 定。又,分割影像PI、P2、P3等之大小係各有不同, 割影像P2時,是以包含分割影像P2的方式,來決定顯 47A。此外,於圖7的影像45中,對應於顯示框46A、 、48八的顯示框,係爲顯示框468、478、47(:。 接著,控制部1 1 a係基於特徵量而決定連結領域 驟S 6 )。具體而言,控制部1 1 a係於使用者的行動終 上所被顯示之分割影像PI、P2、P3中,決定包含有分 像之全部或部分的連結領域、和圍繞該連結領域的連 5 1 a、5 1 b、5 1 c。連結領域及連結框的資訊,例如 HTML等之標記語言所撰寫。 又,控制部1 1 a係於分割影像中,以特徵量高的 爲中心,來決定連結框5 1 a、5 1 b、5 1 c。此外,也可 人類參考把影像4〇之特徵量顯示成熱感圖方式的影像 51,來決定連結框51a、51b、51c。若使用者於行動 2 0上點選了該連結框的連結領域等,則會跳躍至連結 數分 機能 顯示 係如 的方 該顯 小、 而決 在分 示框 47 A (步 端20 割影 結框 係以 地方 以由 50、 終端 領域 14 - 201137648 所被建立關連的所定之Web網頁。如此’彳 ,與分割影像建立關連而設定用來連結至 所需之連結領域的連結領域設定手段之一 例如,控制部1 1 a係在分割影像附近設定 分割影像內設定連結領域等寺° 接著,控制部1 1 a係進行連結領域與 (步驟S7 )。具體而言,控制部1 1 a係將 關連之關連商品之—例的映著分割影像P1 的物品所關連之商品或服務的資訊(ΐ HTML資料),從資料庫伺服器I2的資料 更具體而言,由於分割影像P 1是以臉爲主 制部1 1 a係向資料庫伺服器1 2要求與臉關 的URL ;由於分割影像P2是以鐘錶爲主的 部11a係向資料庫伺服器12要求與鐘錶關 的U R L。然後,控制部1 1 a係爲了對各連 51c的座標或解析度之資訊等,與取出的 記憶在資料庫伺服器1 2的資料庫中,而將 庫伺服器1 2。 此外,連結領域與商品所建立關連而 可記憶在記憶部1 1 b的硬碟中。又,雖然 藉由影像辨識而抽出,但亦可作成一顯示 像40、或表示特徵量之影像50或表示分割 等,一起去檢索商品或服務資訊而加以表 品或服務的資訊提供者等,一面觀看影像 空制部1 1 a係成爲 :所定之Web網頁 例而發揮機能。 連結領域、或在 商品之關連建立 作爲分割影像所 、P 2 ' P 3之影像 可如商品網頁的 庫中加以取出。 的影像,因此控 連之商品或服務 影像,因此控制 連之商品或服務 結框 5 1 a、5 1 b、 URL建立關連而 資料發送至資料 成之資訊,係亦 商品亦可自動地 軟體,係連同影 之樣子的影像5 1 示,由欲提供商 處理伺服器11之 -15- 201137648 顯示部1 1 d上所映出的影像,一面將所欲販售之商品或服 務建立關連。如此’控制部1 1 a係成爲,將分割影像所關 連到的關連商品與連結領域建立關連的關連商品連結手段 之一例而發揮機能。 接著,控制部1 1 a係基於顯示順位’而將影像資料發 送至行動終端2 0 (步驟S 8 )。具體而言,控制部1 1 a與通 訊部1 1 c係透過通訊伺服器1 3,如圖7所示,將對應於顯示 框46B、47B、48B之地點的影像46、影像47、影像48之影 像資料,依序發送至行動終端20。這些影像資料中係含有 ,以HTML等標記語言所記載的連結框51a、51b、51c等之 連結領域的資訊。如此,控制部1 1 a係成爲,基於顯示順 序而發送分割影像之影像資料及連結領域之資料的送訊手 段之一例而發揮機能。 接著,基於圖示而詳細說明,基於步驟S1的特徵量而 將影像分割成分割影像之次常式。 圖8係基於特徵量所作之分割的次常式之一例的流程 圖。圖9係將特徵量之影像資料的影像分割成基本單位之 基本矩形領域的樣子之一例的模式圖。 首先,影像處理伺服器1 1的控制部1 1 a,係如圖8所示 ,計算原影像40之影像資料的每一像素之特徵量(步驟 S 1 〇 )。如此,控制部1 1 a係成爲特徵量算出手段之一例, 而算出原影像40等之領域的特徵量。 於本實施形態中,係在求出特徵量時,基於色相之値 、彩度之値、亮度之値、色相之方向成分、彩度之方向成 -16- 201137648 分、及亮度之方向成分’而以視覺性特徵量的方式,算出 特徵量。此外,色相之値、彩度之値、及亮度之値,係藉 由根據RGB ( Red,Green,Blue)之資料轉換成HSV ( Hue, Saturation,Value)之資料的一般式而求出。又,色相、 彩度及亮度的各方向成分,係採用由0。,45。,90。,135。之 Gabor filter所得之最大値。然後,特徵量係爲這6成分的 加權相加而成的値。此外,作爲求出特徵量的前處理係採 用將影像資料使用高斯金字塔先予以縮小然後放大,以使 用去除過雜訊等的影像資料。此種特徵量之一例係爲,原 影像4 0等之影像的色相之値、彩度之値、亮度之値、色相 的方向成分、前記彩度的方向成分、及前記亮度的方向成 分之至少1者。 如以上,控制部1 1 a係根據特徵量的強弱或大小,而 算出如圖5所示的點陣圖的影像5 0之影像資料。此外,該 圖5係僅用於說明,是模式性圖示原影像40之點陣圖的圖 〇 接著,控制部1 1 a係將點陣圖的影像50,如圖9所示, 分割成基本矩形領域(步驟S 1 1 )。此處,作爲基本單位 的基本矩形領域之大小,係爲寬w0、高h0。然後,寬w0 及高h0的自然數倍,係成了影像57的邊長。寬w0與高h0係 可相同,或者亦可爲寬w0與高h0之比例是和行動終端2〇的 顯示部2 1的比例相同。此外原點係設在面向圖面的左上, X軸係爲往右方向,y軸係爲往下方向。 接著,控制部1 1 a係基於特徵量而將矩形領域予以擴 -17- 201137648 張,分割成矩形領域(步驟S12) »藉由該步驟’控制部 1 1 a係將特徵量之値相近的相鄰之基本矩形領域予以結合 ,將影像區隔成人類容易注目的領域。又,藉由設成矩形 領域,在後續處理或行動終端20上的處理就會變得較爲容 易。 此處,偵測矩形領域的擴張次常式,基於圖10至圖13 而詳細說明。 圖1 0係單位之基本矩形領域的擴張次常式之一例的流 程圖。圖11 (A)至(D)係基本矩形領域之擴張方式之 —例的模式圖。圖1 2係依照基本矩形領域的擴張處理,影 像被分割成矩形領域之一例的模式圖。 如圖1 〇所示,首先,控制部1 1 a係從已被分割成基本 矩形領域的影像57之中,選擇出任意的基本矩形領域(步 驟S 20 )。例如,如圖9所示,從影像57中選擇出基本矩形 領域R i。 接著,控制部Π a係算出矩形領域的擴張方向(步驟 S21 )。具體而言,如圖1 1所示,是朝4個方向擴張。首先 ,作爲第1擴張方向,係如圖1 1 ( A )所示,於基本矩形領 域Ri中,將基本矩形領域Ri往方向(-X,0 )、方向(〇,-y )、及方向(-X,-y)分別擴張一個相鄰之基本矩形領域 份量。又,作爲第2擴張方向,係如圖1 1 ( B )所示,將基 本矩形領域Ri往方向(X,〇 )、方向(〇,-y )、及方向( X,-y )分別擴張一個相鄰之基本矩形領域份量。作爲第3 擴張方向,係如圖π ( C )所示,將基本矩形領域Ri往方 -18 - 201137648 向(-X,0)、方向(〇,y)、及方向(-X, y)分別擴張一 個相鄰之基本矩形領域份量。作爲第4擴張方向’係如圖 1 1 ( D )所示,將基本矩形領域Ri往方向(X, 〇 )、方向( 〇, y)、及方向(X, y)分別擴張一個相鄰之基本矩形領 域份量。此外,如圖11所示’這些擴張後的矩形領域之形 狀,係和基本矩形領域的形狀相似。 接著,控制部11a係判定在擴張方向上是否有基本矩 形領域存在(步驟S 2 2 )。若在任1擴張方向上有的話(步 驟S22 ; YES ),則控制部1 la係算出位於各擴張方向的基 本矩形領域與已被選擇之矩形領域的平均特徵量(步驟 S23 )。具體而言,控制部U a係如圖U所示,算出位於各 擴張方向的基本矩形領域、和步驟S 2 0中所選擇之矩形領 域(基本矩形領域Ri)的平均之特徵量。 然後,控制部1 1 a係將特徵量是最爲接近已被選擇之 矩形領域的擴張矩形領域,加以選擇(步驟S24 )。例如 ,於圖11 (A)中,被擴張之所有部分領域的特徵量係爲 相同,於圖1 1 ( B )中,被擴張之1個部分領域的特徵量係 爲相同,於圖11 (C)中,被擴張之2個部分領域的特徵量 係爲相同,於圖11 (D)中,被擴張之2個部分領域的特徵 量係爲相同。因此,如圖11 (A)所示的擴張方向上,基 本矩形領域擴張後的擴張矩形領域,就成爲被選擇的擴張 矩形領域。此外,於圖1 1中,各基本矩形領域的網點圖案 係表示特徵量之値。 接著,控制部1 1 a係算出已被選擇之矩形領域之特徵 -19- 201137648 量、和已被選擇之擴張矩形領域之特徵量的差(与 )。具體而言,控制部1 1 a係如圖1 1 ( A )所示,算 選擇之矩形領域(基本矩形領域Ri )之特徵量、和 擇之擴張矩形領域之特徵量的差。然後,控制部1 定該特徵量的差是否爲閾値以上(步驟S26 )。 特徵量的差若小於閾値(步驟S26 ; NO ),則 1 1 a係將所算出之擴張矩形領域當作選擇矩形領域 S27),返回步驟S21,再次進行擴張。 另一方面,特徵量的差若爲閾値以上(步顆 YES ),則控制部1 1 a係結束矩形領域的擴張,判定 有未選擇的基本矩形領域存在(步驟S28)。此外 選擇的矩形領域中,亦包含曾在擴張所使用過的基 領域。又,在步驟S26中,若特徵量的差是閾値以 已被選擇之擴張矩形領域的擴張過的部分’也會成 擇的基本矩形領域。 若有未選擇的基本矩形領域存在(步驟S28; ,則控制部11a係返回步驟S20,從不同的基本矩形 進行擴張。 然後,若沒有擴張的方向(步驟S22 : NO) ’ 未選擇的基本矩形領域(步驟S28 ; NO ) ’亦即, 的基本矩形領域都已使用,則控制部1 1 a係結束次 此時,點陣圖的影像5 0 ’在本實施形態的例子中’ 割成與基本矩形領域相似形狀的矩形領域。此外’ 基本矩形領域R 1開始擴張’則由於擴張方向係被限 > 驟 S25 出已被 已被選 la係判 控制部 (步驟 [S26 ; 是否還 ,該未 本矩形 上,則 爲未選 YES ) 領域起 也沒有 若全部 常式。 係被分 一旦從 制,因 -20- 201137648 此不需要進行4個方向的計算° 然後,結束基本矩形領域擴張的次常式’結束步驟 S 1 2。例如,如圖1 2所示’點陣的影像5 0係被分割成矩形 領域,如圖1 2所示,生成含有尺寸互異之矩形領域的複數 矩形領域所構成的影像58。這些已被擴張之矩形領域的大 小,係由於相鄰之基本矩形領域被結合而成的集合’因此 係爲分割影像單位的基本矩形領域的自然數倍之大小。又 ,已被擴張的矩形領域’係往基本矩形領域的相鄰邊的2 個方向,亦即往χ方向、y方向將基本矩形領域擴張自然數 倍而成的矩形之分割影像。 接著,如圖8所示,步驟S 1 2之後’控制部1 1 a係將特 徵量相近的矩形領域予以結合而作成新的矩形領域(步驟 S 1 3 )。如圖12所示,使相鄰之特徵量相近的基本矩形領 域或擴張矩形領域彼此結合。具體而言,對任意的矩形領 域,若爲與該矩形領域相同大小之矩形領域、且爲特徵量 相近之矩形領域,則會被結合,獲得影像5 9。該影像5 9中 的矩形領域、亦即部分領域之大小,係爲分割影像單位的 基本矩形領域的自然數倍之大小。又,該部分領域係對應 於,往基本矩形領域的相鄰邊的2個方向,亦即往χ方向、 y方向將基本矩形領域擴張自然數倍而成的矩形之分割影 像。 如以上,若對於點陣圖之影像5 0,不均等地分割成大 小或形狀不同之部分領域的分區已經完成,則將如圖1 3所 示的影像5 9之分區,適用於原影像4 0之影像資料’而獲得 -21 - 201137648 如圖6所示,獲得已被分割成部分領域之影像51的分區所 對應之影像40所相對之影像,控制部1 1 a係結束基於步驟 S1的特徵量而將影像分割成分割影像之次常式處理。然後 ,控制部1 la係開始步驟S2之處理,最終算出影像40的低 解析度之影像45等。此外,圖6與圖13之分區係僅爲模式 性的例示,並不一定一致。 接著,基於圖7,說明行動終端20上的劇本再生。 此外,於圖7中,隨著變成影像45、影像46、及影像 47,解析度會提升。影像47與影像48的解析度的等級係相 同。 首先,如圖7所示,行動終端2 0的顯示部2 1的畫面上 係顯示著,顯示有連結領域之連結框45a、45b、45c、45d 的影像45。該連結框45a、45b、45c、45d係爲,例如以綠 色虛線來顯示,會閃爍或變色等等,以吸引使用者的目光 。該畫面會暫時被顯示在行動終端20的顯示部21。如此, 影像處理伺服器11係成爲,將連結領域予以影像處理成可 視化的連結領域可視化手段之一例而發揮機能。此外,顯 示框46B、47B、48B,係僅爲了易於明瞭與影像46、47、 48之關連而記載,並未被顯示在顯示部21的畫面中。 然後,使用者係使用行動終端2 0的操作部2 2,移動指 標,在連結框45a、45b、45c、45d之任一連結領域按下確 定鍵等’則會跳躍至連結目標之URL。例如,使臉的地方 的連結框45 a被連結到,有關於臉或眼或口等之資訊或商 品或服務之資訊的Web網頁。如此,影像處理伺服器〗丨係 -22- 201137648 成爲,將分割影像所關連到的關連商品與連結領域建立關 連的關連商品連結手段之一例而發揮機能。並成爲與分割 影像建立關連而設定用來連結至所定之Web網頁所需之連 結領域的連結領域設定手段之一例而發揮機能。例如,控 制部1 1 a係在分割影像附近設定連結領域、或在分割影像 內設定連結領域等等。 接著,針對分割影像的顯示順序,影像處理伺服器Π 係連同特徵量,將位於影像45之上的某個特徵量之値較高 的分割影像,優先顯示。如此,影像處理伺服器1 1係成爲 ,基於各個分割影像的特徵量而決定複數分割影像的顯示 順序的顯示順序決定手段之一例而發揮機能。 然後,如圖7的(1 )所示,顯示框46 B之處的影像會 被放大,在行動終端20的顯示部21的畫面全體中會顯示出 影像46。此時,別的連結框46a、46b會被顯示。該連結框 4 6a、46b也是會閃爍或變色,以吸引使用者的目光。顯示 框4 6B,係含有特徵量之値較高之部分領域的部分,於影 像45中位於最上方之位置。 此外,亦可使連結框46a的連結領域,連結至關於眼 的其他商品或服務所相關之Web網頁或提供更詳細資訊的 W eb網頁。亦可使連結框4 6 b的連結領域,連結至有關於口 或唇或齒的商品或服務之資訊的Web網頁。此外,亦可使 影像4 6旋轉、或使影像的大小變動等等,將影像處理伺服 器1 1進行影像資料加工以容易吸引使用者目光。 接著,如圖7的(2 )所示,一度回到影像4 5,如圖7 -23- 201137648 的(3 )所示,從影像45放大成影像47。顯示框47B,係含 有特徵量之値較高之部分領域的部分’於影像45中位於從 上數來第2個位置。連結框47a係可被連結至,關於鐘錶之 資訊或商品等的Web網頁。在影像47旋轉等、影像47被暫 時顯示後,如圖7中的(4)所示,顯示部21上所被顯示之 影像,就會回到影像45。 接著,如圖7中的(5)所示,再次把含有特徵量之値 較高之部分領域之部分、於影像45中位於從上方數來第3 個位置的顯示框48B處的影像,予以放大。影像48中,以 包圍著衣服鈕扣的方式,顯示出連結框48a。連結框48a係 可被連結至,關於鈕扣之資訊或商品等的Web網頁。影像 48被暫時顯示後,如圖7中的(6)所示,顯示部21上所被 顯示之影像,就會回到影像45。然後,重複(1 )至(6 ) 之程序。 此外,顯示部21上所被顯示之影像,亦可從同解析度 等級之影像47直接平行移動至影像48。又,當從解析度等 級不同的影像46移到影像47時,以影像46的解析度而將影 像移動至對應於影像47之場所然後進行放大,顯示部21上 所被顯示之影像,就會移到影像47。只要如此讓使用者不 感到異樣感,使影像帶有連續性地來移動影像即可。 如此,若依據本實施形態,則影像處理伺服器1 1係算 出影像(原影像40 )領域的特徵量,基於特徵量,將影像 分割成至少1個大小不同的複數部分領域而獲得分割影像 PI、P2、P3等’基於特徵量而決定分割影像的顯示順序, -24- 201137648 與分割影像建立關連,而設定用來連結至所定之Web網頁 所需之連結領域(51a、51b、51c) (45a、45b、45c), 藉此,可使被設定有連結領域的分割影像,不必使用者直 接操作就能自動被行動終端20所再生,因此使用者藉由點 選中意的地方等,就可存取其他資訊,因此可謀求終端的 使用者利便性之提升。 又,影像處理伺服器1 1係可以使用者容易注目之順序 而向使用者提示影像,可謀求使用者利便性之提升。藉由 使用作爲影像特徵量之一例的特徵量,影像處理伺服器1 1 係可對影像在使用者容易注目的地方設定連結領域,可謀 求使用者利便性之提升。 又,當影像處理伺服器1 1是基於根據特徵量所決定之 分割影像的顯示順序,而發送分割影像之影像資料及連結 領域之資料時,使用者可不必操作就能自動地將設定有連 結領域之影像,按照注目容易程度順序而接收,因此可謀 求使用者利便性之提升。 又,當影像處理伺服器1 1把連結領域予以影像處理成 可視化時,例如藉由上色、閃爍、變色等等的連結框45 a 、45b、45c等,可讓使用者較容易點選較容易注意到之連 結領域,可謀求使用者利便性之提升。 又,當影像處理伺服器1 1把分割影像所關連之關連商 品,建立關連而對應於連結框45a、45b、45c等之連結領 域時,就可提供使用者注目到的影像物品的資訊,亦即可 提供使用者所關心的資訊,可謀求使用者利便性之提升等 -25- 201137648 ,可發掘使用者想要購買的商品’也可促進其購買。 又,影像處理伺服器11,係可抽出影像之特徵量來作 爲原影像40的特徵量,相應於特徵量而作成部分領域之影 像,以使用者可能注目之領域的單位’向行動終端20發送 影像資料,因此可預先涵蓋到使用者可能想要觀看的範圍 ,可提高影像處理的回應性,可謀求使用者利便性之提升 。又,當特徵量係爲影像的色相之値、彩度之値、亮度之 値、色相的方向成分、彩度的方向成分、及亮度的方向成 分之至少1者時,基於在人類視覺的認知中,存在於靜止 影像中之物體之重要度的指標亦即特徵量(顯著度),而 將影像作分割,因此特徵量較高而被降低解析度處理過的 低解析度分割影像,被使用者瀏覽的機率較高。因此會提 高使用者之利便性。 又,可根據特徵量這類每一分割影像的特徵量,來操 作分割影像,可提高分割影像的利便性。又,可將分割影 像按照每一特徵量而分類,或以特徵量來特定之,可提升 使用者之利便性或操作性。 此外,特徵量係亦可以原影像40等的色相之値、彩度 之値、亮度之値、色相的方向成分、彩度的方向成分、及 亮度的方向成分之6成分來表示,也可爲這些當中的至少1 種成分。又,特徵量係亦可爲頻率成分。 (第2實施形態) 接著說明,本發明所述之第2實施形態所述之影像處 -26- 201137648 理伺服器系統。 此外,影像處理伺服器系統的構成,係和前記第1實 施形態所述之影像處理伺服器系統相同,和第1實施形態 同一或對應之部分,係使用同一符號來說明動作等。其他 實施形態及變形例也同樣如此。 關於本發明所述之第2實施形態的動作,基於圖面來 說明。 圖1 4係本發明所述之第2實施形態的劇本再生之一例 的流程圖。圖1 5係本發明所述之第2實施形態的劇本再生 之一例的模式圖。圖16係圖6的矩形領域,基於特徵量而 更進一步分割成矩形領域之一例的模式圖。 如圖1 4所示,影像處理伺服器1 1的控制部1 1 a,係和 第1實施形態的步驟S 1同樣地基於特徵量而將影像分割成 部分領域而獲得分割影像(步驟S 3 0 )。此外,影像40的 分割方法,亦即,依照圖8或圖9所示的流程圖,將影像55 予以分割。 接著,控制部1 1 a係基於特徵量而進行各分割影像的 排名’抽出上位排名的部分影像(步驟S 3 1 )。例如,如 圖1 5所示,針對影像6 0,控制部1 1 a係抽出顯示框6 1 B或顯 示框64B所對應之分割影像。 接著,控制部1 1 a係判定是否還要將分割影像作分割 (步驟S32)。具體而言,各分割影像的平均而言之特徵 量的差較少時,控制部U a係中止分割影像的分割。
若有必要再次將分割影像作分割時(步驟S32 ; YES -27- 201137648 ),則返回步驟s 3 0,控制部1 1 a係將上位排名之分割影像 ,再次分割成分割影像。具體而言,如圖1 6所示’控制部 1 1 a係再將影像5 5 (對應於圖6之分割影像P 1 ),分割成部 分領域。控制部Ha係又如圖15所示,除了對應於影像55 的影像6 1以外,對影像64也進行影像之分割。此外,因爲 是限定於上位排名的分割影像,所以可限定控制部1 1 a需 要再次作分割的分割影像,可提升處理速度。 然後,如圖16所示,對影像55抽出顯示框62A或顯示 框63 A所對應之分割影像(步驟S31 ),如圖15所示,對影 像62或影像63也是基於特徵量而再次分割成分割影像(步 驟 S 3 0 )。 另一方面,若沒有必要再次將分割影像作分割時(步 驟S32 ; NO ),則控制部11a係基於特徵量而決定顯示順 序(步驟S33 )。具體而言,控制部1 la係除了特徵量、或 影像60或影像61中的顯示框61B、64B、62B、63B之位置 以外,也會如圖15所示,根據各影像的解析度等,而將顯 示順序決定成(1)至(8)。此外,步驟S33係對應於第1 實施形態的步驟S4。
接著,控制部1 la係和第1實施形態的步驟S5至步驟S8 同樣地,將所顯示之分割影像附近的顯示領域加以決定( 步驟S34),基於特徵量而決定連結領域(步驟S35),進 行連結領域與商品的關連建立(步驟S36 ),基於顯示順 位而將影像資料發送至行動終端20 (步驟S37 )。此外, 如圖15或圖16所不,顯不框62A、63A或顯示框62B、63B -28- 201137648 等,也是和第1實施形態同樣地被決定。又,連結框5 5 a、 55b、55c或連結框61a、61b或連結框62a、62b或連結框 6 3 a等’係和第1實施形態時同樣地設定,具有同樣的機能 〇 接著’基於圖1 5,說明行動終端20上的劇本再生。 如圖 15 的(1)至(8),影像 60' 61、62、63、64 係 如同第1實施形態所說明般地被顯示。但是,與第1實施形 態不同的是,影像61會被更深入放大。 如此’若依據本實施形態,則由於已被放大之影像還 會被放大,因此可提高戲劇性,可引起使用者的興趣,或 可提高使用者之利便性等。又,對於存在於原影像40中之 物品的影像’可更細緻地作階段式對應,隨著所顯示之物 品影像的階段’可使連結框所被連結之商品或服務的資訊 作變化’可引起使用者的興趣,或可提高使用者之利便性 等。又’因爲從分割影像P1中,基於特徵量而取出部分領 域’所以尤其當影像是十億像素級的時候,由於對每一解 析度等級,使用者注目的部分領域經常會有差異,所以可 正確地對應於使用者的要求,可謀求使用者利便性之提升 。例如’將原影像4 0全體顯示在行動終端2 〇的顯示部2 1, 使用者著眼於臉整體的部分領域,下載了臉整體的部分領 域的影像資料後,從臉整體中著眼於眼睛的部分領域等時 候,就很有效。 此外’作爲第1及第2實施形態的變形例,還亦可爲, 影像處理伺服器1 1係基於使用者資訊來決定顯示順序。如 -29- 201137648 圖17所示,亦可在影像49中,使用者本身或其他使用者是 對哪個部分以哪種解析度來觀看,取得此種統計資料,根 據該履歷的排行榜、或傳言之類的資訊,來決定顯示順序 。此時,可以對使用者更爲理想的順序來顯示,可提高使 用者之利便性。如此,控制部1 1 a係成爲,基於使用者資 訊而決定顯示順序的顯示順序決定手段之一例而發揮機能 〇 又,影像處理伺服器系統10的影像處理伺服器11或資 料庫伺服器12或通訊伺服器13之處理,係亦可在1台伺服 器上進行。又,除了多核心CPU以外,亦可爲連結複數台 電腦而進行計算的網格電腦。又,不限於攜帶型無線電話 機這類行動終端20,亦可爲PC終端。 再者,本發明係不限定於上記各實施形態。上記各實 施形態係爲例示,具有和本發明之申請專利範圍中所記載 之技術思想實質上相同之構成、而達到同樣作用效果者, 均應被包含在本發明的技術範圍中。 【圖式簡單說明】 [圖1 ]本發明所述之第1實施形態的影像處理伺服器系 統之槪要構成例的模式圖。 [圖2]圖1的影像處理伺服器的槪要構成之一例的區塊 圖。 [圖3 ]圖1的影像伺服器的資料庫中的解析度不同之影 像資料之一例的模式圖。 -30- 201137648 [圖4]圖1的影像處理伺服器所進行的劇本再生之一例 的流程圖。 [圖5]圖3的原影像資料的每一像素之特徵量的計算結 果之影像之一例的模式圖。 [圖6]圖3的原影像被分割成矩形領域之一例的模式圖 〇 [圖7]本發明所述之第1實施形態的劇本再生之一例的 模式圖。 [圖8]基於圖4之特徵量所作之分割的次常式之一例的 流程圖。 [圖9]將圖5的影像分割成基本單位之基本矩形領域的 樣子之一例的模式圖。 [圖1 0 ]圖8中的基本矩形領域擴張的次常式之一例的流 程圖。 [圖11] (A)至(D)係圖10中的基本矩形領域之擴張 方式之一例的模式圖。 [圖1 2 ]依照圖1 0之處理,影像被分割成矩形領域之一 例的模式圖。 [圖13]將圖12的矩形領域更進一步結合而成的矩形領 域之一例的模式圖。 [圖1 4]本發明所述之第2實施形態的劇本再生之一例的 流程圖。 [圖1 5]本發明所述之第2實施形態的劇本再生之一例的 模式圖。 -31 - 201137648 [圖16]圖6的矩形領域,基於特徵量而更進一步分割成 矩形領域之一例的模式圖。 [圖17]第1及第2實施形態的變形例中,劇本再生所需 之使用者履歷取得樣子之一例的模式圖。 【主要元件符號說明】 1 〇 :影像伺服器系統 1 1 :影像處理伺服器 1 1 a :控制部 1 1 b :記憶部 1 2 :資料庫伺服器 1 3 :通訊伺服器 40 :原影像(影像) -32-