JP6089830B2 - 映像特徴生成システム、映像特徴生成方法、映像特徴生成プログラム、映像照合システム、映像照合方法、映像照合プログラム - Google Patents
映像特徴生成システム、映像特徴生成方法、映像特徴生成プログラム、映像照合システム、映像照合方法、映像照合プログラム Download PDFInfo
- Publication number
- JP6089830B2 JP6089830B2 JP2013054894A JP2013054894A JP6089830B2 JP 6089830 B2 JP6089830 B2 JP 6089830B2 JP 2013054894 A JP2013054894 A JP 2013054894A JP 2013054894 A JP2013054894 A JP 2013054894A JP 6089830 B2 JP6089830 B2 JP 6089830B2
- Authority
- JP
- Japan
- Prior art keywords
- video
- frame
- frequency
- feature
- feature amount
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
- G06V20/48—Matching video sequences
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
- G06V20/46—Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
- G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/783—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
Description
また、本明細書に開示の映像特徴生成システムは、入力された映像を構成する単位としてのフレームの画素値の分散に基づいて、前記フレームを特徴付けるフレーム特徴量を抽出する抽出手段と、少なくとも2つの周波数と前記抽出手段によって抽出されたフレーム特徴量と前記周波数及び前記フレーム特徴量に応じて前記周波数の位相を生成するための生成情報とに基づいて、各周波数の位相を映像特徴として生成する生成手段と、を有する映像特徴生成システムである。
また、本明細書に開示の映像特徴生成方法は、コンピュータが、入力された映像を構成する単位としてのフレームの画素値の分散に基づいて、前記フレームを特徴付けるフレーム特徴量を抽出する抽出ステップと、少なくとも2つの周波数と前記抽出ステップによって抽出されたフレーム特徴量と前記周波数及び前記フレーム特徴量に応じて前記周波数の位相を生成するための生成情報とに基づいて、各周波数の位相を映像特徴として生成する生成ステップと、を実行する映像特徴生成方法である。
また、本明細書に開示の映像特徴生成プログラムは、入力された映像を構成する単位としてのフレームの画素値の分散に基づいて、前記フレームを特徴付けるフレーム特徴量を抽出する抽出ステップと、少なくとも2つの周波数と前記抽出ステップによって抽出されたフレーム特徴量と前記周波数及び前記フレーム特徴量に応じて前記周波数の位相を生成するための生成情報とに基づいて、各周波数の位相を映像特徴として生成する生成ステップと、をコンピュータに実行させるための映像特徴生成プログラムである。
また、本明細書に開示の映像照合システムは、入力された第1及び第2の映像のそれぞれを構成する単位としてのフレームの画素値の分散に基づいて、前記フレームを特徴付けるフレーム特徴量を映像毎に抽出する抽出手段と、少なくとも2つの周波数と前記抽出手段によって映像毎に抽出されたフレーム特徴量と前記周波数及び前記フレーム特徴量に応じて前記周波数の位相を生成するための生成情報とに基づいて、前記第1及び第2の映像のそれぞれについて各周波数の位相を第1及び第2の映像特徴として生成する生成手段と、前記生成手段によって生成された第1の映像特徴と第2の映像特徴とを照合する照合手段と、を有する映像照合システムである。
また、本明細書に開示の映像照合方法は、コンピュータが、入力された第1及び第2の映像のそれぞれを構成する単位としてのフレームの画素値の分散に基づいて、前記フレームを特徴付けるフレーム特徴量を映像毎に抽出する抽出ステップと、少なくとも2つの周波数と前記抽出ステップによって映像毎に抽出されたフレーム特徴量と前記周波数及び前記フレーム特徴量に応じて前記周波数の位相を生成するための生成情報とに基づいて、前記第1及び第2の映像のそれぞれについて各周波数の位相を第1及び第2の映像特徴として生成する生成ステップと、前記生成ステップによって生成された第1の映像特徴と第2の映像特徴とを照合する照合ステップと、を実行する映像照合方法である。
また、本明細書に開示の映像照合プログラムは、入力された第1及び第2の映像のそれぞれを構成する単位としてのフレームの画素値の分散に基づいて、前記フレームを特徴付けるフレーム特徴量を映像毎に抽出する抽出ステップと、少なくとも2つの周波数と前記抽出ステップによって映像毎に抽出されたフレーム特徴量と前記周波数及び前記フレーム特徴量に応じて前記周波数の位相を生成するための生成情報とに基づいて、前記第1及び第2の映像のそれぞれについて各周波数の位相を第1及び第2の映像特徴として生成する生成ステップと、前記生成ステップによって生成された第1の映像特徴と第2の映像特徴とを照合する照合ステップと、をコンピュータに実行させるための映像照合プログラムである。
図1(a)は、映像特徴生成システム100及び映像照合システム400を例示するブロック図である。図1(b)は、映像特徴テーブルの一例である。
映像特徴生成システム100は、図1(a)に示すように、フレーム特徴量抽出部101、第1の周波数選択部102、位相生成部103、及び位相登録部104を備えている。
映像照合システム400は、図1(a)に示すように、フレーム特徴量抽出部101、位相生成部103、第2の周波数選択部401、映像特徴照合部402を備えている。
映像特徴生成システム100は、Central Processing Unit(CPU)100a、Random Access Memory(RAM)100b、Read Only Memory(ROM)100c、Hard Disc Drive(HDD)100dを含んでいる。映像特徴生成システム100は、入力Interface(I/F)100e、出力I/F100f、入出力I/F100gも含んでいる。映像特徴生成システム100は、ドライブ装置100h、通信インタフェース100iも含んでいる。これらの各機器100a〜100iは、バス100jによって互いに接続されている。少なくともCPU100aとRAM100bとが協働することによってコンピュータが実現される。
出力I/F100fには、出力装置が接続される。出力装置としては、例えば表示装置520(例えば液晶ディスプレイ)や印刷装置530(例えばプリンタ)がある。
入出力I/F100gには、半導体メモリ540が接続される。半導体メモリ540としては、例えばUniversal Serial Bus(USB)メモリやフラッシュメモリなどがある。入出力I/F100gは、半導体メモリ540に記憶されたプログラムやデータを読み取る。
入力I/F100e、出力I/F100f、及び入出力I/F100gは、例えばUSBポートを備えている。
通信I/F100iは、Local Area Network(LAN)インタフェース(例えばLANカード、ネットワークアダプタ)及びモデムを備えている。通信I/F100iには、ネットワーク560が接続される。ネットワーク560としては、例えばLAN、公衆回線網、インターネットがある。
尚、映像照合システム400のハードウェア構成も基本的に映像特徴生成システム100のハードウェア構成と同様である。
図3に示すように、フレーム特徴量抽出部101に映像が入力されると、フレーム特徴量抽出部101は入力された映像のフレーム特徴量をすべて抽出する(ステップS101)。映像は、オリジナル映像又は改変された映像である。図4(a)を参照して具体的に説明すると、映像には複数のフレームが含まれている。各フレームには、フレーム0,フレーム1,・・・,フレームn,・・・,フレームN−1といった連続するフレーム番号が割り当てられている。以上から、この映像はN枚の連続するフレームによって構成されていることが分かる。複数のフレームは、時系列に並んでいる。このような映像に基づいて、時系列のフレーム特徴量が抽出される。この結果、図4(b)に示すように、時系列のフレーム特徴量が得られる。
フレーム特徴量が画素平均値である場合には、以下の数式(1)によってフレーム特徴量F[n]が算出される。
具体的には、図4(b)に示すように、時系列のフレーム特徴量に対し予め定めた幅Tを有する分析用窓(分析区間)が設定される。幅Tは、時系列のフレーム特徴量のサンプリング数を示している。例えばT=6である場合、F[0],・・・,F[5]がサンプリングされる。サンプリングされると、選択された周波数の位相が周波数毎に生成される。例えば、周波数ω1,ω2が選択されている場合、フレーム特徴量F[0],・・・,F[5]に対する位相θ1[0],θ2[0]が生成される。位相が周波数毎に1つ生成されると、分析用窓が1フレーム分ずれて新たな位相が周波数毎に生成される。この結果、フレーム特徴量F[1],・・・,F[6]に対する位相θ1[1],θ2[1]が生成される。以下、同様の手法により、位相θ1[N−T],θ2[N−T]が生成される。したがって、周波数ω1に対してN−T+1個の位相θ1[0],θ1[1],・・・θ1[N−T]が生成される。周波数ω2に対してN−T+1個の位相θ2[0],θ2[1]・・・θ2[N−T]が生成される。すなわち、時系列の位相が周波数毎に生成される。
続いて、第2実施形態について図7乃至図10を参照して説明する。第2実施形態は、フレーム特徴量の抽出方法及び映像特徴の形式が第1実施形態と相違する。
まず、映像特徴生成システム100で実行される映像特徴生成方法について図7及び図8を参照して説明する。
フレーム特徴量抽出部101に映像(例えば、オリジナル映像又は改変された映像)が入力されると、図7に示すように、フレーム特徴量抽出部101は入力された映像のフレーム上の各位置における画素値をフレーム特徴量として抽出する(ステップS201)。具体的には、入力された映像に含まれる複数のフレームから、図8(a)に示すように1つのフレームが選択されて、選択されたフレーム上の各位置における画素値がフレーム特徴量として抽出される。例えば、位置(x0,y0)における画素値がフレーム特徴量F[x0][y0]となる。位置(xW−1,yH−1)における画素値がフレーム特徴量F[xW−1][yH−1]となる。すべての画素に対してフレーム特徴量F[x][y]が抽出される。尚、詳細は後述するが、入力された映像に含まれる複数のフレームから少なくとも2つのフレームが選択されてもよい。
この結果、各周波数の位相が生成される。図8(c)では、例えば周波数(a1,b1),・・・,(a6,b6)のそれぞれの位相θ1,・・・,θ6が生成されている。各周波数の位相が1つに関連付けられて映像特徴が形成される。
尚、上述したように第2実施形態において入力された映像に含まれる複数のフレームから少なくとも2つフレームが選択された場合、ステップS203の位相生成処理を各フレームに適用すればよい。この結果、例えば周波数(a1,b1)の位相θ1[0],θ1[1],・・・θ1[N−T]から、周波数(a6,b6)の位相θ6[0],θ6[1],・・・θ6[N−T]までが生成される。すなわち、時系列の位相が周波数ごとに生成される。
(付記1)入力された映像を構成する単位としてのフレームの画素値に基づいて、前記フレームを特徴付けるフレーム特徴量を抽出する抽出手段と、少なくとも2つの周波数と前記抽出手段によって抽出されたフレーム特徴量と前記周波数及び前記フレーム特徴量に応じて前記周波数の位相を生成するための生成情報とに基づいて、各周波数の位相を映像特徴として生成する生成手段と、を有する映像特徴生成システム。
(付記2)前記抽出手段によって抽出されたフレーム特徴量に対するフーリエ変換の結果から前記少なくとも2つの周波数を選択する選択手段をさらに有することを特徴とする付記1に記載の映像特徴生成システム。
(付記3)前記抽出手段は、前記映像に含まれる複数のフレームにおけるそれぞれの画素値に基づいて、時系列のフレーム特徴量を抽出し、前記選択手段は、前記抽出手段によって抽出された時系列のフレーム特徴量に基づく周波数スペクトルから少なくとも2つの周波数を選択し、前記生成手段は、前記選択手段によって選択された少なくとも2つの周波数と前記抽出手段によって抽出された時系列のフレーム特徴量と前記生成情報とに基づいて、前記各周波数の時系列の位相を映像特徴として生成することを特徴とする付記2に記載の映像特徴生成システム。
(付記4)前記抽出手段は、前記フレームに含まれるすべての画素値に基づいて、前記フレーム特徴量を抽出することを特徴とする付記1から3のいずれか1項に記載の映像特徴生成システム。
(付記5)前記抽出手段は、前記フレームに含まれるすべての画素値の平均値に基づいて、前記フレーム特徴量を抽出することを特徴とする付記4に記載の映像特徴生成システム。
(付記6)前記抽出手段は、前記フレームに含まれるすべての画素値の分散に基づいて、前記フレーム特徴量を抽出することを特徴とする付記4に記載の映像特徴生成システム。
(付記7)前記抽出手段は、前記映像に含まれる少なくとも1つのフレーム上の各位置における画素値を前記フレーム特徴量として抽出し、前記選択手段は、前記抽出手段によって抽出されたフレーム特徴量に基づく周波数領域から水平方向成分と垂直方向成分とを含む少なくとも2つの周波数を選択し、前記生成手段は、前記選択手段によって選択された少なくとも2つの周波数と前記抽出手段によって抽出されたフレーム特徴量と前記生成情報とに基づいて、前記各周波数の位相を映像特徴として生成することを特徴とする付記2に記載の映像特徴生成システム。
(付記8)コンピュータが、入力された映像を構成する単位としてのフレームの画素値に基づいて、前記フレームを特徴付けるフレーム特徴量を抽出する抽出ステップと、少なくとも2つの周波数と前記抽出ステップによって抽出されたフレーム特徴量と前記周波数及び前記フレーム特徴量に応じて前記周波数の位相を生成するための生成情報とに基づいて、各周波数の位相を映像特徴として生成する生成ステップと、を実行する映像特徴生成方法。
(付記9)前記抽出ステップによって抽出されたフレーム特徴量に対するフーリエ変換の結果から前記少なくとも2つの周波数を選択する選択ステップをさらに有することを特徴とする付記8に記載の映像特徴生成方法。
(付記10)前記抽出ステップは、前記映像に含まれる複数のフレームにおけるそれぞれの画素値に基づいて、時系列のフレーム特徴量を抽出し、前記選択ステップは、前記抽出ステップによって抽出された時系列のフレーム特徴量に基づく周波数スペクトルから少なくとも2つの周波数を選択し、前記生成ステップは、前記選択ステップによって選択された少なくとも2つの周波数と前記抽出ステップによって抽出された時系列のフレーム特徴量と前記生成情報とに基づいて、各周波数の時系列の位相を映像特徴として生成することを特徴とする付記9に記載の映像特徴生成方法。
(付記11)前記抽出ステップは、前記フレームに含まれるすべての画素値に基づいて、前記フレーム特徴量を抽出することを特徴とする付記8から10のいずれか1項に記載の映像特徴生成方法。
(付記12)前記抽出ステップは、前記フレームに含まれるすべての画素値の平均値に基づいて、前記フレーム特徴量を抽出することを特徴とする付記11に記載の映像特徴生成方法。
(付記13)前記抽出ステップは、前記フレームに含まれるすべての画素値の分散に基づいて、前記フレーム特徴量を抽出することを特徴とする付記11に記載の映像特徴生成方法。
(付記14)前記抽出ステップは、前記映像に含まれる少なくとも1つのフレーム上の各位置における画素値を前記フレーム特徴量として抽出し、前記選択ステップは、前記抽出ステップによって抽出されたフレーム特徴量に基づく周波数領域から水平方向成分と垂直方向成分とを含む少なくとも2つの周波数を選択し、前記生成ステップは、前記選択ステップによって選択された少なくとも2つの周波数と前記抽出ステップによって抽出されたフレーム特徴量と前記生成情報とに基づいて、各周波数の位相を映像特徴として生成することを特徴とする付記9に記載の映像特徴生成方法。
(付記15)入力された映像を構成する単位としてのフレームの画素値に基づいて、前記フレームを特徴付けるフレーム特徴量を抽出する抽出ステップと、少なくとも2つの周波数と前記抽出ステップによって抽出されたフレーム特徴量と前記周波数及び前記フレーム特徴量に応じて前記周波数の位相を生成するための生成情報とに基づいて、各周波数の位相を映像特徴として生成する生成ステップと、をコンピュータに実行させるための映像特徴生成プログラム。
(付記16)前記抽出ステップによって抽出されたフレーム特徴量に対するフーリエ変換の結果から前記少なくとも2つの周波数を選択する選択ステップをさらに有することを特徴とする付記15に記載の映像特徴生成プログラム。
(付記17)前記抽出ステップは、前記映像に含まれる複数のフレームにおけるそれぞれの画素値に基づいて、時系列のフレーム特徴量を抽出し、前記選択ステップは、前記抽出ステップによって抽出された時系列のフレーム特徴量に基づく周波数スペクトルから少なくとも2つの周波数を選択し、前記生成ステップは、前記選択ステップによって選択された少なくとも2つの周波数と前記抽出ステップによって抽出された時系列のフレーム特徴量と前記生成情報とに基づいて、各周波数の時系列の位相を映像特徴として生成することを特徴とする付記16に記載の映像特徴生成プログラム。
(付記18)前記抽出ステップは、前記フレームに含まれるすべての画素値に基づいて、前記フレーム特徴量を抽出することを特徴とする付記15から17のいずれか1項に記載の映像特徴生成プログラム。
(付記19)前記抽出ステップは、前記フレームに含まれるすべての画素値の平均値に基づいて、前記フレーム特徴量を抽出することを特徴とする付記18に記載の映像特徴生成プログラム。
(付記20)前記抽出ステップは、前記フレームに含まれるすべての画素値の分散に基づいて、前記フレーム特徴量を抽出することを特徴とする付記18に記載の映像特徴生成方法。
(付記21)前記抽出ステップは、前記映像に含まれる少なくとも1つのフレーム上の各位置における画素値を前記フレーム特徴量として抽出し、前記選択ステップは、前記抽出ステップによって抽出されたフレーム特徴量に基づく周波数領域から水平方向成分と垂直方向成分とを含む少なくとも2つの周波数を選択し、前記生成ステップは、前記選択ステップによって選択された少なくとも2つの周波数と前記抽出ステップによって抽出されたフレーム特徴量と前記生成情報とに基づいて、各周波数の位相を映像特徴として生成することを特徴とする付記16に記載の映像特徴生成プログラム。
(付記22)入力された第1及び第2の映像のそれぞれを構成する単位としてのフレームの画素値に基づいて、前記フレームを特徴付けるフレーム特徴量を映像毎に抽出する抽出手段と、少なくとも2つの周波数と前記抽出手段によって映像毎に抽出されたフレーム特徴量と前記周波数及び前記フレーム特徴量に応じて前記周波数の位相を生成するための生成情報とに基づいて、前記第1及び第2の映像のそれぞれについて各周波数の位相を第1及び第2の映像特徴として生成する生成手段と、前記生成手段によって生成された第1の映像特徴と第2の映像特徴とを照合する照合手段と、を有する映像照合システム。
(付記23)コンピュータが、入力された第1及び第2の映像のそれぞれを構成する単位としてのフレームの画素値に基づいて、前記フレームを特徴付けるフレーム特徴量を映像毎に抽出する抽出ステップと、少なくとも2つの周波数と前記抽出ステップによって映像毎に抽出されたフレーム特徴量と前記周波数及び前記フレーム特徴量に応じて前記周波数の位相を生成するための生成情報とに基づいて、前記第1及び第2の映像のそれぞれについて各周波数の位相を第1及び第2の映像特徴として生成する生成ステップと、前記生成ステップによって生成された第1の映像特徴と第2の映像特徴とを照合する照合ステップと、を実行する映像照合方法。
(付記24)入力された第1及び第2の映像のそれぞれを構成する単位としてのフレームの画素値に基づいて、前記フレームを特徴付けるフレーム特徴量を映像毎に抽出する抽出ステップと、少なくとも2つの周波数と前記抽出ステップによって映像毎に抽出されたフレーム特徴量と前記周波数及び前記フレーム特徴量に応じて前記周波数の位相を生成するための生成情報とに基づいて、前記第1及び第2の映像のそれぞれについて各周波数の位相を第1及び第2の映像特徴として生成する生成ステップと、前記生成ステップによって生成された第1の映像特徴と第2の映像特徴とを照合する照合ステップと、をコンピュータに実行させるための映像照合プログラム。
101 フレーム特徴量抽出部(抽出手段)
102 第1の周波数選択部(選択手段)
103 位相生成部(生成手段)
104 位相登録部
300 映像特徴記憶部
400 映像照合システム
401 第2の周波数選択部
402 映像特徴照合部(照合手段)
Claims (16)
- 入力された映像を構成する単位としてのフレームの画素値の平均値に基づいて、前記フレームを特徴付けるフレーム特徴量を抽出する抽出手段と、
少なくとも2つの周波数と前記抽出手段によって抽出されたフレーム特徴量と前記周波数及び前記フレーム特徴量に応じて前記周波数の位相を生成するための生成情報とに基づいて、各周波数の位相を映像特徴として生成する生成手段と、
を有する映像特徴生成システム。 - 入力された映像を構成する単位としてのフレームの画素値の分散に基づいて、前記フレームを特徴付けるフレーム特徴量を抽出する抽出手段と、
少なくとも2つの周波数と前記抽出手段によって抽出されたフレーム特徴量と前記周波数及び前記フレーム特徴量に応じて前記周波数の位相を生成するための生成情報とに基づいて、各周波数の位相を映像特徴として生成する生成手段と、
を有する映像特徴生成システム。 - 前記抽出手段によって抽出されたフレーム特徴量に対するフーリエ変換の結果から前記少なくとも2つの周波数を選択する選択手段をさらに有することを特徴とする請求項1又は2に記載の映像特徴生成システム。
- 前記抽出手段は、前記映像に含まれる複数のフレームにおけるそれぞれの画素値に基づいて、時系列のフレーム特徴量を抽出し、
前記選択手段は、前記抽出手段によって抽出された時系列のフレーム特徴量に基づく周波数スペクトルから少なくとも2つの周波数を選択し、
前記生成手段は、前記選択手段によって選択された少なくとも2つの周波数と前記抽出手段によって抽出された時系列のフレーム特徴量と前記生成情報とに基づいて、前記各周波数の時系列の位相を映像特徴として生成することを特徴とする請求項3に記載の映像特徴生成システム。 - 前記抽出手段は、前記フレームに含まれるすべての画素値に基づいて、前記フレーム特徴量を抽出することを特徴とする請求項1から4のいずれか1項に記載の映像特徴生成システム。
- 前記抽出手段は、前記映像に含まれる少なくとも1つのフレーム上の各位置における画素値を前記フレーム特徴量として抽出し、
前記選択手段は、前記抽出手段によって抽出されたフレーム特徴量に基づく周波数領域から水平方向成分と垂直方向成分とを含む少なくとも2つの周波数を選択し、
前記生成手段は、前記選択手段によって選択された少なくとも2つの周波数と前記抽出手段によって抽出されたフレーム特徴量と前記生成情報とに基づいて、前記各周波数の位相を映像特徴として生成することを特徴とする請求項3に記載の映像特徴生成システム。 - コンピュータが、
入力された映像を構成する単位としてのフレームの画素値の平均値に基づいて、前記フレームを特徴付けるフレーム特徴量を抽出する抽出ステップと、
少なくとも2つの周波数と前記抽出ステップによって抽出されたフレーム特徴量と前記周波数及び前記フレーム特徴量に応じて前記周波数の位相を生成するための生成情報とに基づいて、各周波数の位相を映像特徴として生成する生成ステップと、
を実行する映像特徴生成方法。 - コンピュータが、
入力された映像を構成する単位としてのフレームの画素値の分散に基づいて、前記フレームを特徴付けるフレーム特徴量を抽出する抽出ステップと、
少なくとも2つの周波数と前記抽出ステップによって抽出されたフレーム特徴量と前記周波数及び前記フレーム特徴量に応じて前記周波数の位相を生成するための生成情報とに基づいて、各周波数の位相を映像特徴として生成する生成ステップと、
を実行する映像特徴生成方法。 - 入力された映像を構成する単位としてのフレームの画素値の平均値に基づいて、前記フレームを特徴付けるフレーム特徴量を抽出する抽出ステップと、
少なくとも2つの周波数と前記抽出ステップによって抽出されたフレーム特徴量と前記周波数及び前記フレーム特徴量に応じて前記周波数の位相を生成するための生成情報とに基づいて、各周波数の位相を映像特徴として生成する生成ステップと、
をコンピュータに実行させるための映像特徴生成プログラム。 - 入力された映像を構成する単位としてのフレームの画素値の分散に基づいて、前記フレームを特徴付けるフレーム特徴量を抽出する抽出ステップと、
少なくとも2つの周波数と前記抽出ステップによって抽出されたフレーム特徴量と前記周波数及び前記フレーム特徴量に応じて前記周波数の位相を生成するための生成情報とに基づいて、各周波数の位相を映像特徴として生成する生成ステップと、
をコンピュータに実行させるための映像特徴生成プログラム。 - 入力された第1及び第2の映像のそれぞれを構成する単位としてのフレームの画素値の平均値に基づいて、前記フレームを特徴付けるフレーム特徴量を映像毎に抽出する抽出手段と、
少なくとも2つの周波数と前記抽出手段によって映像毎に抽出されたフレーム特徴量と前記周波数及び前記フレーム特徴量に応じて前記周波数の位相を生成するための生成情報とに基づいて、前記第1及び第2の映像のそれぞれについて各周波数の位相を第1及び第2の映像特徴として生成する生成手段と、
前記生成手段によって生成された第1の映像特徴と第2の映像特徴とを照合する照合手段と、
を有する映像照合システム。 - 入力された第1及び第2の映像のそれぞれを構成する単位としてのフレームの画素値の分散に基づいて、前記フレームを特徴付けるフレーム特徴量を映像毎に抽出する抽出手段と、
少なくとも2つの周波数と前記抽出手段によって映像毎に抽出されたフレーム特徴量と前記周波数及び前記フレーム特徴量に応じて前記周波数の位相を生成するための生成情報とに基づいて、前記第1及び第2の映像のそれぞれについて各周波数の位相を第1及び第2の映像特徴として生成する生成手段と、
前記生成手段によって生成された第1の映像特徴と第2の映像特徴とを照合する照合手段と、
を有する映像照合システム。 - コンピュータが、
入力された第1及び第2の映像のそれぞれを構成する単位としてのフレームの画素値の平均値に基づいて、前記フレームを特徴付けるフレーム特徴量を映像毎に抽出する抽出ステップと、
少なくとも2つの周波数と前記抽出ステップによって映像毎に抽出されたフレーム特徴量と前記周波数及び前記フレーム特徴量に応じて前記周波数の位相を生成するための生成情報とに基づいて、前記第1及び第2の映像のそれぞれについて各周波数の位相を第1及び第2の映像特徴として生成する生成ステップと、
前記生成ステップによって生成された第1の映像特徴と第2の映像特徴とを照合する照合ステップと、
を実行する映像照合方法。 - コンピュータが、
入力された第1及び第2の映像のそれぞれを構成する単位としてのフレームの画素値の分散に基づいて、前記フレームを特徴付けるフレーム特徴量を映像毎に抽出する抽出ステップと、
少なくとも2つの周波数と前記抽出ステップによって映像毎に抽出されたフレーム特徴量と前記周波数及び前記フレーム特徴量に応じて前記周波数の位相を生成するための生成情報とに基づいて、前記第1及び第2の映像のそれぞれについて各周波数の位相を第1及び第2の映像特徴として生成する生成ステップと、
前記生成ステップによって生成された第1の映像特徴と第2の映像特徴とを照合する照合ステップと、
を実行する映像照合方法。 - 入力された第1及び第2の映像のそれぞれを構成する単位としてのフレームの画素値の平均値に基づいて、前記フレームを特徴付けるフレーム特徴量を映像毎に抽出する抽出ステップと、
少なくとも2つの周波数と前記抽出ステップによって映像毎に抽出されたフレーム特徴量と前記周波数及び前記フレーム特徴量に応じて前記周波数の位相を生成するための生成情報とに基づいて、前記第1及び第2の映像のそれぞれについて各周波数の位相を第1及び第2の映像特徴として生成する生成ステップと、
前記生成ステップによって生成された第1の映像特徴と第2の映像特徴とを照合する照合ステップと、
をコンピュータに実行させるための映像照合プログラム。 - 入力された第1及び第2の映像のそれぞれを構成する単位としてのフレームの画素値の分散に基づいて、前記フレームを特徴付けるフレーム特徴量を映像毎に抽出する抽出ステップと、
少なくとも2つの周波数と前記抽出ステップによって映像毎に抽出されたフレーム特徴量と前記周波数及び前記フレーム特徴量に応じて前記周波数の位相を生成するための生成情報とに基づいて、前記第1及び第2の映像のそれぞれについて各周波数の位相を第1及び第2の映像特徴として生成する生成ステップと、
前記生成ステップによって生成された第1の映像特徴と第2の映像特徴とを照合する照合ステップと、
をコンピュータに実行させるための映像照合プログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013054894A JP6089830B2 (ja) | 2013-03-18 | 2013-03-18 | 映像特徴生成システム、映像特徴生成方法、映像特徴生成プログラム、映像照合システム、映像照合方法、映像照合プログラム |
US14/075,268 US9141861B2 (en) | 2013-03-18 | 2013-11-08 | Video image feature generation system and video image feature generation method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013054894A JP6089830B2 (ja) | 2013-03-18 | 2013-03-18 | 映像特徴生成システム、映像特徴生成方法、映像特徴生成プログラム、映像照合システム、映像照合方法、映像照合プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014182440A JP2014182440A (ja) | 2014-09-29 |
JP6089830B2 true JP6089830B2 (ja) | 2017-03-08 |
Family
ID=51527331
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013054894A Expired - Fee Related JP6089830B2 (ja) | 2013-03-18 | 2013-03-18 | 映像特徴生成システム、映像特徴生成方法、映像特徴生成プログラム、映像照合システム、映像照合方法、映像照合プログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US9141861B2 (ja) |
JP (1) | JP6089830B2 (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9501154B2 (en) * | 2014-04-21 | 2016-11-22 | Microsoft Technology Licensing, Llc | Interactively stylizing camera motion |
JP6432182B2 (ja) * | 2014-07-02 | 2018-12-05 | 富士通株式会社 | サービス提供装置、方法、及びプログラム |
WO2020014495A1 (en) * | 2018-07-13 | 2020-01-16 | Irobot Corporation | Mobile robot cleaning system |
CN110969066B (zh) * | 2018-09-30 | 2023-10-10 | 北京金山云网络技术有限公司 | 直播视频的识别方法、装置及电子设备 |
DE102019204318A1 (de) * | 2019-03-28 | 2020-10-01 | Conti Temic Microelectronic Gmbh | Automatische Erkennung und Klassifizierung von Adversarial Attacks |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10134185A (ja) * | 1996-10-30 | 1998-05-22 | Yamatake Honeywell Co Ltd | 操作者照合装置 |
JP4328423B2 (ja) | 1999-10-04 | 2009-09-09 | セコム株式会社 | 音声識別装置 |
US8224064B1 (en) * | 2003-05-21 | 2012-07-17 | University Of Kentucky Research Foundation, Inc. | System and method for 3D imaging using structured light illumination |
JP4664147B2 (ja) * | 2005-07-29 | 2011-04-06 | 株式会社山武 | 虹彩認証装置 |
JP2009003889A (ja) | 2007-06-25 | 2009-01-08 | Fujitsu Microelectronics Ltd | 認証方法、認証装置及びプログラム |
JP5573131B2 (ja) | 2009-12-01 | 2014-08-20 | 日本電気株式会社 | 映像識別子抽出装置および方法、映像識別子照合装置および方法、ならびにプログラム |
WO2012026039A1 (ja) * | 2010-08-27 | 2012-03-01 | 富士通株式会社 | 電子透かし埋め込み装置、電子透かし埋め込み方法及び電子透かし埋め込み用コンピュータプログラムならびに電子透かし検出装置 |
-
2013
- 2013-03-18 JP JP2013054894A patent/JP6089830B2/ja not_active Expired - Fee Related
- 2013-11-08 US US14/075,268 patent/US9141861B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2014182440A (ja) | 2014-09-29 |
US20140270531A1 (en) | 2014-09-18 |
US9141861B2 (en) | 2015-09-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6089830B2 (ja) | 映像特徴生成システム、映像特徴生成方法、映像特徴生成プログラム、映像照合システム、映像照合方法、映像照合プログラム | |
JP5175854B2 (ja) | 画像認識のための画像記述子 | |
US9400939B2 (en) | System and method for relating corresponding points in images with different viewing angles | |
Barnes et al. | Patchtable: Efficient patch queries for large datasets and applications | |
Kwon et al. | Learning jpeg compression artifacts for image manipulation detection and localization | |
JP5404644B2 (ja) | 時間イベント・ベースの画紋法のためのコンピュータ・プログラム及び画像の著作権侵害を自動的に検出するための装置 | |
US20140044361A1 (en) | Device and method for analyzing the correlation between an image and another image or between an image and a video | |
JP5261493B2 (ja) | 拡張画像識別 | |
US10699156B2 (en) | Method and a device for image matching | |
JP5414620B2 (ja) | 画像処理装置、画像処理方法、プログラム、及び集積回路 | |
Shang et al. | Document forgery detection using distortion mutation of geometric parameters in characters | |
JP2002541598A (ja) | フーリエ変換の相関による回転の修正および重複イメージの識別 | |
KR101713197B1 (ko) | 서버 컴퓨팅 장치 및 이를 이용한 콘텐츠 인식 기반의 영상 검색 시스템 | |
US10339412B2 (en) | Image processing apparatus, image processing method, and storage medium | |
US8891836B2 (en) | Stripe pattern image analysis device, stripe pattern image analysis method, and program thereof | |
JP2018526754A (ja) | 画像処理装置、画像処理方法及び記憶媒体 | |
Sarma et al. | A study on digital image forgery detection | |
JP6919758B2 (ja) | 画像照合装置 | |
JP2016012767A (ja) | 画像処理装置 | |
Sekhar et al. | Review on image splicing forgery detection | |
JP6495219B2 (ja) | 映像検出装置、方法、及びプログラム | |
Zheng et al. | Exposing image forgery by detecting traces of feather operation | |
Ciptasari et al. | Exploiting reference images for image splicing verification | |
JP2010263327A (ja) | 特徴量算出装置およびプログラム | |
Vázquez-Padín et al. | Exposing original and duplicated regions using SIFT features and resampling traces |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20151007 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160915 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160927 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20161122 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170110 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170123 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6089830 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |