JP2900308B2 - 画像置換システム、画像置換装置及び画像置換方法 - Google Patents
画像置換システム、画像置換装置及び画像置換方法Info
- Publication number
- JP2900308B2 JP2900308B2 JP6044996A JP6044996A JP2900308B2 JP 2900308 B2 JP2900308 B2 JP 2900308B2 JP 6044996 A JP6044996 A JP 6044996A JP 6044996 A JP6044996 A JP 6044996A JP 2900308 B2 JP2900308 B2 JP 2900308B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- area
- replacement
- replacement area
- current
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/272—Means for inserting a foreground image in a background image, i.e. inlay, outlay
- H04N5/2723—Insertion of virtual advertisement; Replacing advertisements physical present in the scene by virtual advertisement
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
- H04N19/423—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
- H04N19/426—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements using memory downsizing methods
- H04N19/428—Recompression, e.g. by spatial or temporal decimation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/272—Means for inserting a foreground image in a background image, i.e. inlay, outlay
Description
【０００１】
【発明の属する技術分野】本発明は所定のエリアの画像
をロゴに置換する技術に関し、特に置換されるロゴは現
画像の変化に対応して現画像の一部であるように置換さ
れる技術に関する。
をロゴに置換する技術に関し、特に置換されるロゴは現
画像の変化に対応して現画像の一部であるように置換さ
れる技術に関する。
【０００２】
【従来の技術】近年、テレビ放送の隆盛に伴い、多くの
広告がテレビ放送を通して放送されている。野球中継の
場合、選手の動きを撮影すると共に、選手の背後にある
広告、例えばフェンスに書かれた企業名、ロゴ、スロー
ガン等が一緒に撮影されて放送される。
広告がテレビ放送を通して放送されている。野球中継の
場合、選手の動きを撮影すると共に、選手の背後にある
広告、例えばフェンスに書かれた企業名、ロゴ、スロー
ガン等が一緒に撮影されて放送される。
【０００３】
【発明が解決しようとする課題】ところで、なんらかの
事情により、中継中のみ元からあるロゴを消して、別の
ロゴを放送したい場合があった。又、元から何も描かれ
ていない場所に中継中のみロゴを描きたい場合もあっ
た。しかし、従来の技術では、ある画像のうち、所定の
エリアのみを特定のロゴに置換することは容易にできた
が、あたかも元からそのロゴがそこに存在していたかの
ように置換することは出来なかった。例えば、上述した
野球中継を例にとると、バックフェンスに描かれたロゴ
を別のロゴに置換しようとすれば、描かれたロゴの前に
立った選手まで別のロゴに置換されてしまい、とうてい
放送できるものではなかった。
事情により、中継中のみ元からあるロゴを消して、別の
ロゴを放送したい場合があった。又、元から何も描かれ
ていない場所に中継中のみロゴを描きたい場合もあっ
た。しかし、従来の技術では、ある画像のうち、所定の
エリアのみを特定のロゴに置換することは容易にできた
が、あたかも元からそのロゴがそこに存在していたかの
ように置換することは出来なかった。例えば、上述した
野球中継を例にとると、バックフェンスに描かれたロゴ
を別のロゴに置換しようとすれば、描かれたロゴの前に
立った選手まで別のロゴに置換されてしまい、とうてい
放送できるものではなかった。
【０００４】そこで、本発明の目的は、現画像の変化に
対応して、現画像の一部であるように現画像の一部をロ
ゴに置換する技術を提供することにある。
対応して、現画像の一部であるように現画像の一部をロ
ゴに置換する技術を提供することにある。
【０００５】
【課題を解決するための手段】上記本発明の目的は、現
画像のうち所定のエリアの画像を所望のＡ画像に置換す
る画像置換システムであって、撮影範囲が固定された少
なくとも１台のカメラと、予め前記カメラにより撮影さ
れ、現画像のうちＡ画像に置換される画像の基準となる
基準画像が記憶された記憶手段と、前記基準画像の中か
ら置換エリアを選択し、前記置換エリアの位置と前記置
換エリア内の基準画像とを記億する選択手段と、Ａ画像
を生成し、前記Ａ画像と前記置換エリアに対する前記Ａ
画像の位置とを記憶する画像生成手段と、前記カメラで
撮影された現画像のうち、前記選択した置換エリアに該
当するエリアを置換エリアと仮定し、前記仮定された置
換エリア内の現画像と記憶されている置換エリア内の基
準画像との差分を求めると共に、前記仮定された置換エ
リアを中心として、前記置換エリアを予め定めた画素分
だけずらしたエリア内の現画像と前記記憶されている置
換エリア内の基準画像との差分を求め、前記差分のうち
差分結果が最小のエリア位置を置換エリアの位置として
検出するエリア検出手段と、前記エリア検出手段が検出
した置換エリア位置に基づいて、現画像の置換エリア位
置に対する前記Ａ画像の位置及び前記基準画像の置換エ
リア位置のずれを補正する補正手段と、前記検出手段で
検出された置換エリア内の現画像と、前記補正手段で補
正された置換エリア内の基準画像とを比較し、現画像と
基準画像とが同一の部分を示すキー信号を生成するキー
信号生成手段と、前記キー信号に基づいて、現画像と基
準画像とが同一の部分を、前記Ａ画像のうち前記同一の
部分に対応する画像に置換する置換手段とを有すること
を特徴とする画像置換システムによって達成される。
画像のうち所定のエリアの画像を所望のＡ画像に置換す
る画像置換システムであって、撮影範囲が固定された少
なくとも１台のカメラと、予め前記カメラにより撮影さ
れ、現画像のうちＡ画像に置換される画像の基準となる
基準画像が記憶された記憶手段と、前記基準画像の中か
ら置換エリアを選択し、前記置換エリアの位置と前記置
換エリア内の基準画像とを記億する選択手段と、Ａ画像
を生成し、前記Ａ画像と前記置換エリアに対する前記Ａ
画像の位置とを記憶する画像生成手段と、前記カメラで
撮影された現画像のうち、前記選択した置換エリアに該
当するエリアを置換エリアと仮定し、前記仮定された置
換エリア内の現画像と記憶されている置換エリア内の基
準画像との差分を求めると共に、前記仮定された置換エ
リアを中心として、前記置換エリアを予め定めた画素分
だけずらしたエリア内の現画像と前記記憶されている置
換エリア内の基準画像との差分を求め、前記差分のうち
差分結果が最小のエリア位置を置換エリアの位置として
検出するエリア検出手段と、前記エリア検出手段が検出
した置換エリア位置に基づいて、現画像の置換エリア位
置に対する前記Ａ画像の位置及び前記基準画像の置換エ
リア位置のずれを補正する補正手段と、前記検出手段で
検出された置換エリア内の現画像と、前記補正手段で補
正された置換エリア内の基準画像とを比較し、現画像と
基準画像とが同一の部分を示すキー信号を生成するキー
信号生成手段と、前記キー信号に基づいて、現画像と基
準画像とが同一の部分を、前記Ａ画像のうち前記同一の
部分に対応する画像に置換する置換手段とを有すること
を特徴とする画像置換システムによって達成される。
【０００６】
【０００７】
【０００８】上記本発明の目的は、現画像のうち所定の
エリアの画像を所望のＡ画像に置換する画像置換装置で
あって、現画像のうちＡ画像に置換される画像の基準と
なる基準画像が記憶された記憶手段と、前記基準画像の
中から置換エリアを選択し、前記置換エリアの位置と前
記置換エリア内の基準画像とを記憶する選択手段と、前
記Ａ画像を生成し、前記Ａ画像と前記置換エリアに対す
る前記Ａ画像の位置とを記憶する画像生成手段と、カメ
ラで撮影された現画像のうち、前記選択した置換エリア
に該当するエリアを置換エリアと仮定し、前記仮定され
た置換エリア内の現画像と記憶されている置換エリア内
の基準画像との差分を求めると共に、前記仮定された置
換エリアを中心として、前記置換エリアを予め定めた画
素分だけずらしたエリア内の現画像と記憶されている置
換エリア内の基準画像との差分を求め、前記差分のうち
差分結果が最小のエリア位置を置換エリアの位置として
検出するエリア検出手段と、前記エリア検出手段が検出
したエリア位置に基づいて、現画像の置換エリア位置に
対する前記Ａ画像の位置及び前記基準画像の置換エリア
位置のずれを補正する補正手段と、前記エリア検出手段
で検出された置換エリア内の現画像と、前記補正手段で
補正された置換エリア内の基準画像とを比較し、現画像
と基準画像とが同一の部分を示すキー信号を生成するキ
ー信号生成手段と、前記キー信号に基づいて１画素単位
で切換可能であり、前記キー信号が現画像と基準画像と
が同一の画像を示している場合には位置補正されたＡ画
像を入力する側に切り換え、キー信号が現画像と基準画
像とが異なる画像を示している場合には現画像を入力す
る側に切り換えるスイッチとを有することを特徴とする
画像置換装置によって達成される。
エリアの画像を所望のＡ画像に置換する画像置換装置で
あって、現画像のうちＡ画像に置換される画像の基準と
なる基準画像が記憶された記憶手段と、前記基準画像の
中から置換エリアを選択し、前記置換エリアの位置と前
記置換エリア内の基準画像とを記憶する選択手段と、前
記Ａ画像を生成し、前記Ａ画像と前記置換エリアに対す
る前記Ａ画像の位置とを記憶する画像生成手段と、カメ
ラで撮影された現画像のうち、前記選択した置換エリア
に該当するエリアを置換エリアと仮定し、前記仮定され
た置換エリア内の現画像と記憶されている置換エリア内
の基準画像との差分を求めると共に、前記仮定された置
換エリアを中心として、前記置換エリアを予め定めた画
素分だけずらしたエリア内の現画像と記憶されている置
換エリア内の基準画像との差分を求め、前記差分のうち
差分結果が最小のエリア位置を置換エリアの位置として
検出するエリア検出手段と、前記エリア検出手段が検出
したエリア位置に基づいて、現画像の置換エリア位置に
対する前記Ａ画像の位置及び前記基準画像の置換エリア
位置のずれを補正する補正手段と、前記エリア検出手段
で検出された置換エリア内の現画像と、前記補正手段で
補正された置換エリア内の基準画像とを比較し、現画像
と基準画像とが同一の部分を示すキー信号を生成するキ
ー信号生成手段と、前記キー信号に基づいて１画素単位
で切換可能であり、前記キー信号が現画像と基準画像と
が同一の画像を示している場合には位置補正されたＡ画
像を入力する側に切り換え、キー信号が現画像と基準画
像とが異なる画像を示している場合には現画像を入力す
る側に切り換えるスイッチとを有することを特徴とする
画像置換装置によって達成される。
【０００９】上記本発明の目的は、現画像のうち所定の
エリアの画像を所望のＡ画像に置換する画像置換方法で
あって、Ａ画像に置換される画像の基準となる基準画像
を撮影し、基準画像の中からＡ画像に置換する置換エリ
アを選択する工程と、前記置換エリアの位置と、前記置
換エリア内の基準画像とを記憶する工程と、置換するＡ
画像を生成し、前記Ａ画像と前記Ａ画像の位置を記憶す
る工程と、カメラで撮影された現画像のうち、前記選択
した置換エリアに該当するエリアを置換エリアと仮定
し、前記仮定された置換エリア内の現画像と記憶されて
いる置換エリア内の基準画像との差分を求める工程と、
前記仮定された置換エリアを中心として、前記置換エリ
アを予め定めた画素分だけずらしたエリア内の現画像
と、記憶されている置換エリア内の基準画像との差分を
求める工程と、前記差分のうち差分結果が最小のエリア
位置を置換エリアの位置として検出する工程と、前記検
出したエリア位置に基づいて、現画像の置換エリア位置
に対する前記Ａ画像の位置及び前記基準画像の置換エリ
ア位置のずれを補正する工程と、前記検出された置換エ
リア内の現画像と、前記補正された置換エリア内の基準
画像とを比較し、現画像と基準画像とが同一の部分を示
すキー信号を生成する工程と、前記キー信号に基づい
て、現画像と基準画像とが同一の部分を、前記Ａ画像の
うち前記同一の部分に対応する画像に置換する工程とを
有することを特徴とする画像置換方法によって達成され
る。
エリアの画像を所望のＡ画像に置換する画像置換方法で
あって、Ａ画像に置換される画像の基準となる基準画像
を撮影し、基準画像の中からＡ画像に置換する置換エリ
アを選択する工程と、前記置換エリアの位置と、前記置
換エリア内の基準画像とを記憶する工程と、置換するＡ
画像を生成し、前記Ａ画像と前記Ａ画像の位置を記憶す
る工程と、カメラで撮影された現画像のうち、前記選択
した置換エリアに該当するエリアを置換エリアと仮定
し、前記仮定された置換エリア内の現画像と記憶されて
いる置換エリア内の基準画像との差分を求める工程と、
前記仮定された置換エリアを中心として、前記置換エリ
アを予め定めた画素分だけずらしたエリア内の現画像
と、記憶されている置換エリア内の基準画像との差分を
求める工程と、前記差分のうち差分結果が最小のエリア
位置を置換エリアの位置として検出する工程と、前記検
出したエリア位置に基づいて、現画像の置換エリア位置
に対する前記Ａ画像の位置及び前記基準画像の置換エリ
ア位置のずれを補正する工程と、前記検出された置換エ
リア内の現画像と、前記補正された置換エリア内の基準
画像とを比較し、現画像と基準画像とが同一の部分を示
すキー信号を生成する工程と、前記キー信号に基づい
て、現画像と基準画像とが同一の部分を、前記Ａ画像の
うち前記同一の部分に対応する画像に置換する工程とを
有することを特徴とする画像置換方法によって達成され
る。
【００１０】
【００１１】
【００１２】
【発明の実施の形態】本発明の具体的な実施の形態を述
べる前に、図１を参照して本発明の原理を説明する。ま
ず、基本的なカメラポジションに設置されたカメラによ
り、基準となる基準画像を撮影する。図１（Ａ）は、撮
影された基準画像を示したものである。尚、基準画像
は、後述する置換エリア内の画像を遮るものがない状態
で撮影される。例えば、図１（Ａ）において、置換エリ
ア内の画像○×△□の前に人が立ち、画像○×△□の一
部が欠けてしまうことがない状態で撮影される。
べる前に、図１を参照して本発明の原理を説明する。ま
ず、基本的なカメラポジションに設置されたカメラによ
り、基準となる基準画像を撮影する。図１（Ａ）は、撮
影された基準画像を示したものである。尚、基準画像
は、後述する置換エリア内の画像を遮るものがない状態
で撮影される。例えば、図１（Ａ）において、置換エリ
ア内の画像○×△□の前に人が立ち、画像○×△□の一
部が欠けてしまうことがない状態で撮影される。
【００１３】次に、この基準画像（図１（Ａ））の中か
ら、所望のロゴに置換しようとする置換エリアを選択す
る。本説明では、図１（Ａ）中の○×△□を囲む四角形
内のエリアを置換エリアとする。そして、基準画像全体
に対しての置換エリアの位置と、置換エリア内の画像、
例えば○×△□等の画像を１画素単位で記憶しておく。
ら、所望のロゴに置換しようとする置換エリアを選択す
る。本説明では、図１（Ａ）中の○×△□を囲む四角形
内のエリアを置換エリアとする。そして、基準画像全体
に対しての置換エリアの位置と、置換エリア内の画像、
例えば○×△□等の画像を１画素単位で記憶しておく。
【００１４】上述の如くの準備を完了してから、本番の
撮影を開始する。本番の撮影が開始されると、カメラで
撮影された本番の画像（以下、現画像という）の中か
ら、置換エリアを検出する。この検出方法は以下の通り
行う。まず、図１（Ｂ）に示される現画像のうち、予め
記憶しておいた置換エリアの位置に相当するエリアを置
換エリアと仮定する。そして、仮定した置換エリア内の
現画像と、記憶されている基準画像との差分を求める。
次に、仮定した置換エリア位置を中心として、図１
（Ｂ）に示される如く、置換エリアを８方向に所定画素
単位毎にずらし、その都度、ずらしたエリア内の現画像
と記憶していた基準画像データとの差分を求める。そし
て、差分が最小のエリアを置換エリアとして検出する。
このようにすれば、カメラが風等により揺れ、カメラの
撮影範囲が多少ずれたとしても、正確に置換エリアを検
出することが出来る。
撮影を開始する。本番の撮影が開始されると、カメラで
撮影された本番の画像（以下、現画像という）の中か
ら、置換エリアを検出する。この検出方法は以下の通り
行う。まず、図１（Ｂ）に示される現画像のうち、予め
記憶しておいた置換エリアの位置に相当するエリアを置
換エリアと仮定する。そして、仮定した置換エリア内の
現画像と、記憶されている基準画像との差分を求める。
次に、仮定した置換エリア位置を中心として、図１
（Ｂ）に示される如く、置換エリアを８方向に所定画素
単位毎にずらし、その都度、ずらしたエリア内の現画像
と記憶していた基準画像データとの差分を求める。そし
て、差分が最小のエリアを置換エリアとして検出する。
このようにすれば、カメラが風等により揺れ、カメラの
撮影範囲が多少ずれたとしても、正確に置換エリアを検
出することが出来る。
【００１５】続いて、検出された置換エリア内の現画像
データと、記憶されている基準画像データとを画素単位
で減算していく。すると、現画像と基準画像とが同一画
像の画素では減算結果が０となり、画像が異なる画素で
は０とはならない。この結果を用いて、キー信号を生成
する。このキー信号は、現画像と基準画像とが同一画像
の画素と、画像が異なる画素とを識別する信号であり、
通常同一画像の画素を０、画像が異なる画素を１として
示される。図１（Ｃ）は、キー信号の概念図である。図
１（Ｃ）中、黒色の部分は現画像と基準画像とが同一画
像の画素部分であり、白抜きの部分は基準画像と現画像
とが異なる画素の部分を示している。図１（Ｃ）に示さ
れる如く、現画像と基準画像との相違が識別できる。す
なわち、置換エリア内の画像のうち、人の背後となる画
像部分がわかるのである。
データと、記憶されている基準画像データとを画素単位
で減算していく。すると、現画像と基準画像とが同一画
像の画素では減算結果が０となり、画像が異なる画素で
は０とはならない。この結果を用いて、キー信号を生成
する。このキー信号は、現画像と基準画像とが同一画像
の画素と、画像が異なる画素とを識別する信号であり、
通常同一画像の画素を０、画像が異なる画素を１として
示される。図１（Ｃ）は、キー信号の概念図である。図
１（Ｃ）中、黒色の部分は現画像と基準画像とが同一画
像の画素部分であり、白抜きの部分は基準画像と現画像
とが異なる画素の部分を示している。図１（Ｃ）に示さ
れる如く、現画像と基準画像との相違が識別できる。す
なわち、置換エリア内の画像のうち、人の背後となる画
像部分がわかるのである。
【００１６】最後に、キー信号を用いて、置換エリア内
の画像をロゴに置換する。ここでは、図１（Ｄ）に示さ
れるロゴに置換するものとする。尚、置換するロゴは、
予め置換エリアの他の画像と共に、ロゴ画像として生成
しておく。例えば、図１（Ｄ）に示されるロゴ▽□△×
の画像と、このロゴ▽□△×の周りの画像とをセットで
生成しておく。置換する方法としては、キー信号が０の
とき、すなわち現画像と基準画像とが同一画像の画素で
ある場合には、予め生成しておいたロゴ画像のうち対応
する画素の画像に置換する。又、キー信号が１のとき、
すなわち現画像と基準画像とが異なる画像の画素の場合
には、現画像のままにしておく。
の画像をロゴに置換する。ここでは、図１（Ｄ）に示さ
れるロゴに置換するものとする。尚、置換するロゴは、
予め置換エリアの他の画像と共に、ロゴ画像として生成
しておく。例えば、図１（Ｄ）に示されるロゴ▽□△×
の画像と、このロゴ▽□△×の周りの画像とをセットで
生成しておく。置換する方法としては、キー信号が０の
とき、すなわち現画像と基準画像とが同一画像の画素で
ある場合には、予め生成しておいたロゴ画像のうち対応
する画素の画像に置換する。又、キー信号が１のとき、
すなわち現画像と基準画像とが異なる画像の画素の場合
には、現画像のままにしておく。
【００１７】このようにすれば、図１（Ｅ）のように、
人に遮られて見えない部分はロゴに置換されず、人に遮
られずにロゴが見える部分はロゴに置換され、人の背後
に自然とロゴが存在しているような画像を生成すること
ができるのである。次に、上述したロゴ置換方法を実現
する為のシステムについて説明する。図２はロゴ置換シ
ステムのブロック図である。
人に遮られて見えない部分はロゴに置換されず、人に遮
られずにロゴが見える部分はロゴに置換され、人の背後
に自然とロゴが存在しているような画像を生成すること
ができるのである。次に、上述したロゴ置換方法を実現
する為のシステムについて説明する。図２はロゴ置換シ
ステムのブロック図である。
【００１８】本発明の実施の形態におけるロゴ置換シス
テムは、カメラ１Ａと、ロゴ置換装置１Ｂとから構成さ
れる。そして、ロゴ置換装置１Ｂは、スイッチ２と、ロ
ゴ画像生成部３と、基準画像選択部４と、エリア検出部
５と、キー信号生成部６と、置換部７とから構成され
る。以下、各部を詳細に説明する。カメラ１Ａはテレビ
ジョン放送の撮影用のカメラである。このカメラ１Ａ
は、被写体に対する方向、角度等が固定されている。す
なわち、特定の撮影範囲のみを撮影するものである。
テムは、カメラ１Ａと、ロゴ置換装置１Ｂとから構成さ
れる。そして、ロゴ置換装置１Ｂは、スイッチ２と、ロ
ゴ画像生成部３と、基準画像選択部４と、エリア検出部
５と、キー信号生成部６と、置換部７とから構成され
る。以下、各部を詳細に説明する。カメラ１Ａはテレビ
ジョン放送の撮影用のカメラである。このカメラ１Ａ
は、被写体に対する方向、角度等が固定されている。す
なわち、特定の撮影範囲のみを撮影するものである。
【００１９】スイッチ２は、カメラ１Ａで撮影された画
像を入力し、基準画像選択部４とエリア検出部５とに切
り換えて出力する。すなわち、本番の撮影前、基準画像
を選択する場合には、カメラ１Ａからの画像を基準画像
選択部４に出力する。又、本番の撮影時、すなわちロゴ
に置換する場合には、カメラ１Ａからの画像をエリア検
出部５に出力する。
像を入力し、基準画像選択部４とエリア検出部５とに切
り換えて出力する。すなわち、本番の撮影前、基準画像
を選択する場合には、カメラ１Ａからの画像を基準画像
選択部４に出力する。又、本番の撮影時、すなわちロゴ
に置換する場合には、カメラ１Ａからの画像をエリア検
出部５に出力する。
【００２０】ロゴ画像生成部３は、所望のロゴ、すなわ
ち置換したいロゴ画像を生成し、このロゴの画像を記憶
しておくものである。ロゴ画像の生成は、コンピュータ
グラフィク等により、画素単位で生成される。基準画像
選択部４は、画像記憶回路４１と、置換エリア選択回路
４２と、置換エリア記憶回路４３とから構成される。
ち置換したいロゴ画像を生成し、このロゴの画像を記憶
しておくものである。ロゴ画像の生成は、コンピュータ
グラフィク等により、画素単位で生成される。基準画像
選択部４は、画像記憶回路４１と、置換エリア選択回路
４２と、置換エリア記憶回路４３とから構成される。
【００２１】画像記憶回路４１は、カメラ１Ａからの画
像を取り込み、基準画像として記憶する。置換エリア選
択回路４２は、記憶されている基準画像のうち、所望の
置換エリアの位置を選択する。尚、この選択方法は、基
準画像をモニターに表示し、置換エリアをキーボード、
マウス等で選択するものである。
像を取り込み、基準画像として記憶する。置換エリア選
択回路４２は、記憶されている基準画像のうち、所望の
置換エリアの位置を選択する。尚、この選択方法は、基
準画像をモニターに表示し、置換エリアをキーボード、
マウス等で選択するものである。
【００２２】置換エリア記憶回路４３は、選択された置
換エリアの位置と、置換エリア内の基準画像を記憶する
ものである。エリア検出部５は、置換エリア検出回路５
１と、ずれ補正制御回路５２と、ロゴ画像ずれ補正回路
５３と、基準画像ずれ補正回路５４とから構成される。
置換エリア検出回路５１は、本番時に撮影された現画像
から置換エリアを検出する回路である。この置換エリア
検出回路５１は、入力された現画像のうち、予め記憶し
ておいた置換エリアの位置に相当するエリアを置換エリ
アと仮定する。そして、仮定した置換エリア内の現画像
と、記憶されている基準画像との差分を求める。次に、
仮定した置換エリア位置を中心として置換エリアを８方
向に１／２画素毎にずらし、その都度、ずらしたエリア
内の現画像と記憶していた基準画像データとの差分を求
める。そして、差分が最小のエリアを置換エリアとして
検出する。
換エリアの位置と、置換エリア内の基準画像を記憶する
ものである。エリア検出部５は、置換エリア検出回路５
１と、ずれ補正制御回路５２と、ロゴ画像ずれ補正回路
５３と、基準画像ずれ補正回路５４とから構成される。
置換エリア検出回路５１は、本番時に撮影された現画像
から置換エリアを検出する回路である。この置換エリア
検出回路５１は、入力された現画像のうち、予め記憶し
ておいた置換エリアの位置に相当するエリアを置換エリ
アと仮定する。そして、仮定した置換エリア内の現画像
と、記憶されている基準画像との差分を求める。次に、
仮定した置換エリア位置を中心として置換エリアを８方
向に１／２画素毎にずらし、その都度、ずらしたエリア
内の現画像と記憶していた基準画像データとの差分を求
める。そして、差分が最小のエリアを置換エリアとして
検出する。
【００２３】ずれ補正制御回路５２は、置換エリア検出
回路５１から、置換エリアを検出した時にずらした画素
数を受けて、ロゴ画像ずれ補正回路５３と基準画像ずれ
補正回路５４とを制御する。基準画像補正回路５３は、
ずれ補正制御回路５２からの制御信号により、基準画像
と現画像とのずれ、すなわち検出された置換エリアの現
画像と、予め記憶されている置換エリアの基準画像との
位置を一致させる補正を行うものである。
回路５１から、置換エリアを検出した時にずらした画素
数を受けて、ロゴ画像ずれ補正回路５３と基準画像ずれ
補正回路５４とを制御する。基準画像補正回路５３は、
ずれ補正制御回路５２からの制御信号により、基準画像
と現画像とのずれ、すなわち検出された置換エリアの現
画像と、予め記憶されている置換エリアの基準画像との
位置を一致させる補正を行うものである。
【００２４】ロゴ画像補正回路５４は、ずれ補正制御回
路５２からの制御信号により、ロゴ画像と現画像とのず
れ、すなわち検出された置換エリアの現画像と、予め記
憶されているロゴ画像との位置を一致させる補正を行う
ものである。キー信号生成部６は、減算器６１と、キー
信号生成回路６２とから構成される。
路５２からの制御信号により、ロゴ画像と現画像とのず
れ、すなわち検出された置換エリアの現画像と、予め記
憶されているロゴ画像との位置を一致させる補正を行う
ものである。キー信号生成部６は、減算器６１と、キー
信号生成回路６２とから構成される。
【００２５】減算器６１は、現画像データと、基準画像
補正回路５３で位置補正された基準画像との差分を求め
る。キー信号生成回路６２は、減算器６１の差分結果に
基づいて、キー信号を生成する回路である。すなわち、
キー信号生成回路６２は、減算器６１からの差分が０の
画素を０、減算器６１からの差分が０以外の画素を１と
するキー信号を生成する。
補正回路５３で位置補正された基準画像との差分を求め
る。キー信号生成回路６２は、減算器６１の差分結果に
基づいて、キー信号を生成する回路である。すなわち、
キー信号生成回路６２は、減算器６１からの差分が０の
画素を０、減算器６１からの差分が０以外の画素を１と
するキー信号を生成する。
【００２６】置換部７は、キー信号に基づいて、１画素
単位で切り替わるスイッチである。この置換部７は、ロ
ゴ画像補正回路５４からのロゴ画像とカメラ１Ａからの
現画像とを入力とし、キー信号が０を示している場合に
はロゴ画像を出力し、キー信号が１を示している場合に
は現画像を出力する。そして、１画像としては、所定の
部分のみロゴに置換され現画像となる。
単位で切り替わるスイッチである。この置換部７は、ロ
ゴ画像補正回路５４からのロゴ画像とカメラ１Ａからの
現画像とを入力とし、キー信号が０を示している場合に
はロゴ画像を出力し、キー信号が１を示している場合に
は現画像を出力する。そして、１画像としては、所定の
部分のみロゴに置換され現画像となる。
【００２７】この様に構成されたシステムにれば、上述
したロゴ方法を達成することが出来る。
したロゴ方法を達成することが出来る。
【００２８】
【発明の効果】本発明によれば、現画像の変化に対応し
て、置換エリアの画像を現画像の一部であるようにロゴ
に置換することができる。すなわち、ロゴに置換すべき
画像のうち、人、物等に遮られて本来見えない部分はロ
ゴに置換されず、現画像そのままの画像となり、その他
の部分はロゴに置換されるので、置換されたロゴがあた
かも元からその場所に存在していたかのように表示され
る。
て、置換エリアの画像を現画像の一部であるようにロゴ
に置換することができる。すなわち、ロゴに置換すべき
画像のうち、人、物等に遮られて本来見えない部分はロ
ゴに置換されず、現画像そのままの画像となり、その他
の部分はロゴに置換されるので、置換されたロゴがあた
かも元からその場所に存在していたかのように表示され
る。
【図１】本発明のロゴ置換方法を説明する為の図であ
る。
る。
【図２】本発明のロゴ置換システム、及びロゴ置換装置
のブロック図である。
のブロック図である。
１Ａ カメラ １Ｂ ロゴ置換装置 ２ スイッチ ３ ロゴ画像生成部 ４ 基準画像選択部 ５ エリア検出部 ６ キー信号生成部 ７ 置換部
フロントページの続き (56)参考文献 特開 昭63−79492（ＪＰ，Ａ) 特開 平４−332274（ＪＰ，Ａ) 特開 平４−373085（ＪＰ，Ａ) 特開 平５−244630（ＪＰ，Ａ) (58)調査した分野(Int.Cl.6，ＤＢ名) H04N 5/262 - 5/28
Claims (3)
- 【請求項１】 現画像のうち所定のエリアの画像を所望
のＡ画像に置換する画像置換システムであって、 撮影範囲が固定された少なくとも１台のカメラと、 予め前記カメラにより撮影され、現画像のうちＡ画像に
置換される画像の基準となる基準画像が記憶された記憶
手段と、 前記基準画像の中から置換エリアを選択し、前記置換エ
リアの位置と前記置換エリア内の基準画像とを記憶する
選択手段と、 Ａ画像を生成し、前記Ａ画像と前記置換エリアに対する
前記Ａ画像の位置とを記憶する画像生成手段と、 前記カメラで撮影された現画像のうち、前記選択した置
換エリアに該当するエリアを置換エリアと仮定し、前記
仮定された置換エリア内の現画像と記憶されている置換
エリア内の基準画像との差分を求めると共に、前記仮定
された置換エリアを中心として、前記置換エリアを予め
定めた画素分だけずらしたエリア内の現画像と前記記憶
されている置換エリア内の基準画像との差分を求め、前
記差分のうち差分結果が最小のエリア位置を置換エリア
の位置として検出するエリア検出手段と、 前記エリア検出手段が検出した置換エリア位置に基づい
て、現画像の置換エリア位置に対する前記Ａ画像の位置
及び前記基準画像の置換エリア位置のずれを補正する補
正手段と、 前記検出手段で検出された置換エリア内の現画像と、前
記補正手段で補正された置換エリア内の基準画像とを比
較し、現画像と基準画像とが同一の部分を示すキー信号
を生成するキー信号生成手段と、 前記キー信号に基づいて、現画像と基準画像とが同一の
部分を、前記Ａ画像のうち前記同一の部分に対応する画
像に置換する置換手段とを有することを特徴とする画像
置換システム。 - 【請求項２】 現画像のうち所定のエリアの画像を所望
のＡ画像に置換する画像置換装置であって、 現画像のうちＡ画像に置換される画像の基準となる基準
画像が記憶された記憶 手段と、 前記基準画像の中から置換エリアを選択し、前記置換エ
リアの位置と前記置換エリア内の基準画像とを記憶する
選択手段と、 前記Ａ画像を生成し、前記Ａ画像と前記置換エリアに対
する前記Ａ画像の位置とを記憶する画像生成手段と、 カメラで撮影された現画像のうち、前記選択した置換エ
リアに該当するエリアを置換エリアと仮定し、前記仮定
された置換エリア内の現画像と記憶されている置換エリ
ア内の基準画像との差分を求めると共に、前記仮定され
た置換エリアを中心として、前記置換エリアを予め定め
た画素分だけずらしたエリア内の現画像と記憶されてい
る置換エリア内の基準画像との差分を求め、前記差分の
うち差分結果が最小のエリア位置を置換エリアの位置と
して検出するエリア検出手段と、前記エリア検出手段が
検出したエリア位置に基づいて、現画像の置換エリア位
置に対する前記Ａ画像の位置及び前記基準画像の置換エ
リア位置のずれを補正する補正手段と、 前記エリア検出手段で検出された置換エリア内の現画像
と、前記補正手段で補正された置換エリア内の基準画像
とを比較し、現画像と基準画像とが同一の部分を示すキ
ー信号を生成するキー信号生成手段と、 前記キー信号に基づいて１画素単位で切換可能であり、
前記キー信号が現画像と基準画像とが同一の画像を示し
ている場合には位置補正されたＡ画像を入力する側に切
り換え、キー信号が現画像と基準画像とが異なる画像を
示している場合には現画像を入力する側に切り換えるス
イッチとを有することを特徴とする画像置換装置。 - 【請求項３】 現画像のうち所定のエリアの画像を所望
のＡ画像に置換する画像置換方法であって、 Ａ画像に置換される画像の基準となる基準画像を撮影
し、基準画像の中からＡ画像に置換する置換エリアを選
択する工程と、 前記置換エリアの位置と、前記置換エリア内の基準画像
とを記憶する工程と、 置換するＡ画像を生成し、前記Ａ画像と前記Ａ画像の位
置を記憶する工程と、 カメラで撮影された現画像のうち、前記選択した置換エ
リアに該当するエリア を置換エリアと仮定し、前記仮定
された置換エリア内の現画像と記憶されている置換エリ
ア内の基準画像との差分を求める工程と、 前記仮定された置換エリアを中心として、前記置換エリ
アを予め定めた画素分だけずらしたエリア内の現画像
と、記憶されている置換エリア内の基準画像との差分を
求める工程と、 前記差分のうち差分結果が最小のエリア位置を置換エリ
アの位置として検出する工程と、 前記検出したエリア位置に基づいて、現画像の置換エリ
ア位置に対する前記Ａ画像の位置及び前記基準画像の置
換エリア位置のずれを補正する工程と、 前記検出された置換エリア内の現画像と、前記補正され
た置換エリア内の基準画像とを比較し、現画像と基準画
像とが同一の部分を示すキー信号を生成する工程と、 前記キー信号に基づいて、現画像と基準画像とが同一の
部分を、前記Ａ画像のうち前記同一の部分に対応する画
像に置換する工程とを有することを特徴とする画像置換
方法。
Priority Applications (4)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP6044996A JP2900308B2 (ja) | 1996-03-18 | 1996-03-18 | 画像置換システム、画像置換装置及び画像置換方法 |
| CA002200168A CA2200168A1 (en) | 1996-03-18 | 1997-03-17 | Picture replacement system, picture replacement device and picture replacement method |
| EP19970301791 EP0797352A1 (en) | 1996-03-18 | 1997-03-18 | Picture replacement system, device and method |
| KR1019970009199A KR100278497B1 (ko) | 1996-03-18 | 1997-03-18 | 화상치환시스템,화상치환장치및화상치환방법 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP6044996A JP2900308B2 (ja) | 1996-03-18 | 1996-03-18 | 画像置換システム、画像置換装置及び画像置換方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH09252427A JPH09252427A (ja) | 1997-09-22 |
| JP2900308B2 true JP2900308B2 (ja) | 1999-06-02 |
Family
ID=13142605
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP6044996A Expired - Lifetime JP2900308B2 (ja) | 1996-03-18 | 1996-03-18 | 画像置換システム、画像置換装置及び画像置換方法 |
Country Status (4)
| Country | Link |
|---|---|
| EP (1) | EP0797352A1 (ja) |
| JP (1) | JP2900308B2 (ja) |
| KR (1) | KR100278497B1 (ja) |
| CA (1) | CA2200168A1 (ja) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6327004B1 (en) | 1998-03-18 | 2001-12-04 | Nippon Television Network Corp. | Picture replacement system and method of the same |
| WO2002013516A1 (en) * | 2000-06-28 | 2002-02-14 | Koninklijke Philips Electronics N.V. | Method of and unit for processing an image |
| CN102456232A (zh) * | 2010-10-20 | 2012-05-16 | 鸿富锦精密工业（深圳）有限公司 | 人脸影像代换系统以及方法 |
Family Cites Families (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS60190078A (ja) * | 1984-03-12 | 1985-09-27 | Fuji Photo Film Co Ltd | 画像合成装置 |
| JPH02127886A (ja) * | 1988-11-07 | 1990-05-16 | Nec Corp | 動画像合成装置並びに前記装置を用いた特殊効果装置及びテレビ電話装置 |
| FR2661061B1 (fr) * | 1990-04-11 | 1992-08-07 | Multi Media Tech | Procede et dispositif de modification de zone d'images. |
| KR950003569B1 (ko) * | 1990-04-19 | 1995-04-14 | 미쯔비시덴끼 가부시끼가이샤 | 촬상장치 및 이를 이용한 자동 초점맞춤 장치 |
| DE69131384T2 (de) * | 1991-07-19 | 2000-04-06 | Princeton Video Image Inc | Fernsehanzeigen mit ausgewählten eingeblendeten zeichen |
| GB9119964D0 (en) * | 1991-09-18 | 1991-10-30 | Sarnoff David Res Center | Pattern-key video insertion |
-
1996
- 1996-03-18 JP JP6044996A patent/JP2900308B2/ja not_active Expired - Lifetime
-
1997
- 1997-03-17 CA CA002200168A patent/CA2200168A1/en not_active Abandoned
- 1997-03-18 EP EP19970301791 patent/EP0797352A1/en not_active Withdrawn
- 1997-03-18 KR KR1019970009199A patent/KR100278497B1/ko not_active IP Right Cessation
Also Published As
| Publication number | Publication date |
|---|---|
| CA2200168A1 (en) | 1997-09-18 |
| JPH09252427A (ja) | 1997-09-22 |
| KR100278497B1 (ko) | 2001-01-15 |
| EP0797352A1 (en) | 1997-09-24 |
| KR970068505A (ko) | 1997-10-13 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2940762B2 (ja) | 手振れ補正装置を有するビデオカメラ | |
| JP3496680B2 (ja) | ビデオイメージ中の複数の追跡基準領域から推定された目標領域の場所の安定的推定法 | |
| US6292227B1 (en) | Method and apparatus for automatic electronic replacement of billboards in a video image | |
| JP2846830B2 (ja) | ２次元映像を３次元映像に変換する方法 | |
| JP2848825B2 (ja) | テレビジョンカメラ | |
| US7098949B2 (en) | Apparatus and method for improved-resolution digital zoom in a portable electronic imaging device | |
| US7224392B2 (en) | Electronic imaging system having a sensor for correcting perspective projection distortion | |
| JP3830543B2 (ja) | 動き補正映像補間方式 | |
| JPH09252429A (ja) | 画像置換システム、及び画像置換方法 | |
| JP2007281555A (ja) | 撮像装置 | |
| JPWO2012049941A1 (ja) | 動画像配信システム、及び動画像配信方法 | |
| JPH11507796A (ja) | テレビの生放送中に静止画像と動画像を挿入するためのシステムおよび方法 | |
| KR100976718B1 (ko) | 필드 레이트 업변환을 위한 방법 및 장치 | |
| EP0921678A1 (en) | Image generating device and image generating method | |
| US6327004B1 (en) | Picture replacement system and method of the same | |
| JP2900308B2 (ja) | 画像置換システム、画像置換装置及び画像置換方法 | |
| JP3465264B2 (ja) | ビデオデータの動き検出装置および方法 | |
| JPH04213973A (ja) | 画像ゆれ補正装置 | |
| JPH06350897A (ja) | 追尾電子ズーム装置 | |
| US6175381B1 (en) | Image processing method and image processing apparatus | |
| JPH11275393A (ja) | 画像入力装置、画像入力方法、及び記録媒体 | |
| JP7316105B2 (ja) | 映像修正装置、及びプログラム | |
| JP3395186B2 (ja) | ビデオカメラおよびビデオカメラの画像の振動表示方法 | |
| KR20060059302A (ko) | 파노라믹 영상 생성을 위한 사용자 인터페이스 제공 방법 | |
| JP2925890B2 (ja) | 手振れ補正装置を有するビデオカメラ |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090319 Year of fee payment: 10 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100319 Year of fee payment: 11 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100319 Year of fee payment: 11 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110319 Year of fee payment: 12 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110319 Year of fee payment: 12 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110319 Year of fee payment: 12 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120319 Year of fee payment: 13 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130319 Year of fee payment: 14 |