JP2007295469A - 映像信号の変換装置及び方法 - Google Patents

映像信号の変換装置及び方法 Download PDF

Info

Publication number
JP2007295469A
JP2007295469A JP2006123457A JP2006123457A JP2007295469A JP 2007295469 A JP2007295469 A JP 2007295469A JP 2006123457 A JP2006123457 A JP 2006123457A JP 2006123457 A JP2006123457 A JP 2006123457A JP 2007295469 A JP2007295469 A JP 2007295469A
Authority
JP
Japan
Prior art keywords
video signal
signal
conversion
pixel
interlaced
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2006123457A
Other languages
English (en)
Other versions
JP4929819B2 (ja
Inventor
Teruyuki Sato
輝幸 佐藤
Hideki Matsuoka
秀樹 松岡
Ritsuko Tanaka
律子 田中
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Ltd
Original Assignee
Fujitsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd filed Critical Fujitsu Ltd
Priority to JP2006123457A priority Critical patent/JP4929819B2/ja
Priority to US11/787,979 priority patent/US8497937B2/en
Priority to CNA2007101047984A priority patent/CN101064817A/zh
Publication of JP2007295469A publication Critical patent/JP2007295469A/ja
Application granted granted Critical
Publication of JP4929819B2 publication Critical patent/JP4929819B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0117—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving conversion of the spatial resolution of the incoming video signal
    • H04N7/012—Conversion between an interlaced and a progressive signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/112—Selection of coding mode or of prediction mode according to a given display mode, e.g. for interlaced or progressive display mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/16—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter for a given display mode, e.g. for interlaced or progressive display mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/40—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/577—Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/14—Picture signal circuitry for video frequency region
    • H04N5/147—Scene change detection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0112—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level one of the standards corresponding to a cinematograph film standard
    • H04N7/0115—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level one of the standards corresponding to a cinematograph film standard with details on the detection of a particular field or frame pattern in the incoming video signal, e.g. 3:2 pull-down pattern

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Television Systems (AREA)

Abstract

【課題】映像伝送シーケンスに基づく映像信号と映像伝送シーケンスに基づかない映像信号との差が曖昧な場合でも、各映像信号に適したプログレッシブ化処理を可能とする。
【解決手段】本発明の変換装置は、入力されたインタレース映像信号が映像伝送シーケンスに基づく映像信号であるかを評価した結果が、第１，第２の基準を満たしているか否かを検出し、前記インタレース信号が第１の基準を満たしていると検出された場合に、当該インタレース映像信号を前記映像伝送シーケンスに基づいてプログレッシブ映像信号に変換し、前記インタレース信号が第１の基準を満たさず前記第２の基準を満たしていると検出された場合に、当該インタレース映像信号を画素単位でプログレッシブ映像信号に変換し、前記インタレース信号が前記第１及び第２の基準を満たさない場合に、当該インタレース信号をプログレッシブ映像信号に変換する。
【選択図】図３

Description

本発明は、ＮＴＳＣやＰＡＬのようなインタレース信号で伝送される映像を、プラズマディスプレイや液晶ディスプレイを代表とするノンインタレース受像機にて表示するとき等に用いられる、インタレース−プログレッシブ変換（以下ＩＰ変換）技術に関する。
従来、ＩＰ変換においては、映像の動きを検出して、それをもとに補間画素を作り出す動き適応や動き補償といった技術が用いられていた。これらの技術は、例えばＮＴＳＣ信号の場合、原画像が１／６０秒ごとの時間分解能をもったインタレース画像（以下６０ｉとも称す）であることを前提にしている。
一方、映画やアニメなどのフィルム素材、また、コンピュータによって生成されたＣＧ素材といった「コマ」を用いた映像は、２：３プルダウンや２：２プルダウンといったいわゆるテレシネ変換を行って、インタレース映像信号に乗せ替えて伝送される。例えば、プログレッシブ画像（フレーム）を２４fpsのフレームレートで伝送する映像信号であれ
ば、２：３プルダウンによって１フレームを２又は３フィールドに振り分ける。また、プログレッシブ画像（フレーム）を３０fpsのフレームレートで伝送する映像信号であれば
、２：２プルダウンによって１フレームを２フィールドに振り分ける。
このテレシネ変換された映像信号は、前記動き適応や動き補償といった補間技術によってＩＰ変換されると、映像信号の存在しないフレーム内のラインが補間データによって補われることになり、フリッカやジャギー、インタレース妨害といった問題が発生する。
しかし、このテレシネ変換された映像信号は、２：３や２：２という映像伝送シーケンスが分かりさえすれば、振り分けられたフィールドから元のプログレッシブ画像を復元できる。
このため、入力された映像信号がテレシネ変換された信号か否かを判定し、この判定結果に応じた変換処理を行う変換装置も提案されている。図１は、該変換装置の概略図であり、シーケンス検出部１０１、Transform型IP変換部１０２、動き補償型ＩＰ変換部１０
３を有している。
シーケンス検出部１０１は、入力された映像信号の各フィールドを比較し、２：３、２：２或はそれ以外といった映像伝送シーケンスを検出する。該映像情報が２：３又は２：２の映像伝送シーケンスであった場合、シーケンス検出部１０１は、該映像伝送シーケンスをTransform型IP変換部１０２に伝え、該映像伝送シーケンスに基づくＩＰ変換を行わ
せて出力させる。
そして、シーケンス検出部１０１は、入力された映像情報が２：３又は２：２の映像伝送シーケンスでないと判定した場合、前記動き適応や動き補償といった補間技術によってインタレース用ＩＰ変換部１０３がＩＰ変換した信号を選択して出力させる。
また、本願発明に関連する先行技術として、例えば、下記の特許文献１に開示される技術がある。
特開２００５−１０２１９１号公報
上述のように、ＩＰ変換の高画質化を図るには、映像伝送シーケンスを検出することが重要であった。
しかしながら、現実の映像信号には、異種のフレームレートが混在した素材を用いた映像信号や、変形した映像伝送シーケンスを用いた映像信号、動く文字を重ね合わせたテロップを含む映像信号など、２：３，２：２のシーケンスにあてはまらないものが存在する。これらのＮＴＳＣ映像信号を分類したときの模式図を図２に示す。
映像信号全体に対して、６０ｉの映像信号や、２：３／２：２というテレシネ変換された映像信号を、図中の円で囲むように分別すると、それらの円の外には、それ以外の映像伝送シーケンスを用いた映像信号が分類される。また、静止した絵ではそもそもそのような区別ができないことから、静止画からなる映像信号もまた円の外に分別される。また円の重なり部分は、素材の時間方向での混在または空間方向での混在を意味する。例えば、ＣＧの背景と６０ｉ信号の出演者とを合成した映像信号や、６０ｉ信号のフレームの一部に映画の宣伝を合成した映像信号などがある。なお、このような映像信号は、コンピュータの普及や編集（合成）技術の多様化に伴い、増加する傾向にある。
このように、種々の映像信号の中から、２：３／２：２のテレシネ変換された映像信号を確実に検出することは困難であり、誤検出することも考えられる。
なお、前述のように、誤検出によりテレシネ変換された画像をインタレース用ＩＰ変換すると、やや画像が乱れることになる。これに対し、誤検出により６０ｉの信号をTransform型IP変換すると、非常に大きな劣化となってしまう。
この為、どちらかといえば、６０ｉの映像信号が、誤ってテレシネ変換された信号と判定されてしまわないように、検出条件を設定する必要がある。
従って、２：３素材や２：２素材でありながらも検出できないものが存在した。
このような問題に対する従来技術として、特開２００５−１０２１９１には、誤検出ありきでTransform型IP変換し、あとから問題が出ている箇所をチェックしてエラー検出し
、その箇所についてインタレース用のＩＰ変換で修正するという技術が開示されている。この手法の場合、エラー検出が難しく、このエラー検出手段が、映像伝送シーケンス検出部と別に必要であることから装置構成が複雑化する。
そこで本発明は、上記問題点を解決するためになされたもので、実際の放送波にみられる種々の映像信号をＩＰ変換するにあたり、各映像信号に適したＩＰ変換を行うことが可能な技術を提供する。
上記課題を解決するため、本発明は、以下の構成を採用した。
即ち、本発明の映像信号の変換装置は、
入力されたインタレース映像信号が映像伝送シーケンスに基づく映像信号であるか評価した結果が、第１の基準を満たしているか否かを検出する第１の検出部と、
前記評価した結果が、第２の基準を満たしているか否かを検出する第２の検出部と、
前記インタレース信号が第１の基準を満たしていると検出された場合に、当該インタレース映像信号を前記映像伝送シーケンスに基づいてプログレッシブ映像信号に変換する第１の変換部と、
前記インタレース信号が第１の基準を満たさず前記第２の基準を満たしていると検出された場合に、当該インタレース映像信号を画素単位でプログレッシブ映像信号に変換する第２の変換部と、
前記インタレース信号が前記第１及び第２の基準を満たさない場合に、当該インタレース信号をプログレッシブ映像信号に変換する第３の変換部と、を備えた。
前記第２の変換部は、変換対象フィールドの各補間画素として、該変換対象フィールドの前及び後に隣接するフィールド中の該補間画素と対応する位置の画素を選択しても良い。
前記変換装置は、
前記映像信号のシーンの切り替わりを検出するシーンチェンジ検出部を更に備え、
前記シーンの切り替わりを検出した場合、前記第２の変換部が、変換対象フィールドと連続する側のフィールドから前記画素を選択しても良い。
前記変換後のプログレッシブ映像信号を出力する出力部を更に備えても良い。また、該出力部は、前記第１の検出部及び第２の検出部の検出結果に応じて、前記第１の変換部、前記第２の変換部及び前記第３の変換部の何れかからのプログレッシブ映像信号を選択的に出力しても良い。
前記第１の検出部は、前記入力されたインタレース映像信号から映像伝送シーケンスを検出しても良い。
また、本発明の映像信号の変換方法は、変換装置が、
入力されたインタレース映像信号が映像伝送シーケンスに基づく映像信号であるか評価した結果が、第１の基準を満たしているか否かを検出し、
前記評価した結果が、第２の基準を満たしているか否かを検出し、
前記インタレース信号が第１の基準を満たしていると検出された場合に、当該インタレース映像信号を前記映像伝送シーケンスに基づいてプログレッシブ映像信号に変換し、
前記インタレース信号が第１の基準を満たさず前記第２の基準を満たしていると検出された場合に、当該インタレース映像信号を画素単位でプログレッシブ映像信号に変換し、
前記インタレース信号が前記第１及び第２の基準を満たさない場合に、当該インタレース信号をプログレッシブ映像信号に変換する。
前記変換方法は、前記画素単位で変換する際、変換対象フィールドの各補間画素として、該変換対象フィールドの前及び後に隣接するフィールド中の該補間画素と対応する位置の画素を選択する。
前記変換方法は、前記映像信号のシーンの切り替わりを検出した場合、前記画素単位で変換する際、変換対象フィールドと連続する側のフィールドから前記画素を選択する。
前記変換方法は、前記変換後のプログレッシブ映像信号を出力しても良い。また、該出力をする際、前記第１の検出部及び第２の検出部の検出結果に応じて、前記第１の変換部、前記第２の変換部及び前記第３の変換部の何れかからのプログレッシブ映像信号を選択的に出力しても良い。
前記変換方法は、前記インタレース信号が第１の基準を満たしているか否かを検出する際、前記入力されたインタレース映像信号から映像伝送シーケンスを検出しても良い。
本発明によれば、映像伝送シーケンスに基づく映像信号と映像伝送シーケンスに基づかない映像信号との差が曖昧な場合でも、各映像信号に適したＩＰ変換が可能な技術を提供する。
〈実施形態１〉
本実施形態は、２：２，２：３といったシーケンスを検出する第１のシーケンス検出器と、Transform型IP変換、インタレース用ＩＰ変換に加えて、準２：２／２：３シーケン
ス検出をする第２のシーケンス検出器と、画素単位でのプログレッシブ処理を行う手段を具備することを特徴とする。
またこの画素単位でのプログレッシブ処理では、補間画素を求める際、輝度および色差の映像コンポーネントに対して、少なくとも補間対象フィールドに隣接する両フィールドの画素を選択候補とし、画素を選択出力する。
以下、図面を参照して本発明を実施するための最良の形態について説明する。以下の実施の形態の構成は例示であり、本発明は実施の形態の構成に限定されない。
図３は、本実施形態の変換装置の概略構成図である。図３に示すように、本実施形態の変換装置１０は、第１のシーケンス検出器（第１の検出部）１、第２のシーケンス検出器（第２の検出部）２、出力判定部３、Transform型IP変換部（第１の変換部）１１、画素
選択型ＩＰ変換部（第２の変換部）１２、インタレース用ＩＰ変換部（第３の変換部）１３、出力部１４を備えている。
第１のシーケンス検出器１は、入力されたインタレース映像信号が映像伝送シーケンスに基づく映像信号であるかを評価した結果が、第１の基準を満たしているか否かを検出する。また、第１のシーケンス検出器１は、入力されたインタレース映像信号が映像伝送シーケンスに基づく映像信号の場合に、このシーケンスを検出し、Transform型IP変換部１
１にプルダウン検出情報を供給している。
第２のシーケンス検出器２は、前記評価結果が、第２の基準を満たしているか否かを検出する。
出力判定部３は、第１のシーケンス検出器１と第２のシーケンス検出器２の検出結果に基づき、何れの変換部１１，１２，１３で変換したプログレッシブ信号を出力させるかを判定している。
Transform型IP変換部１１は、前記インタレース信号が第１の基準を満たしていると検
出された場合に、当該インタレース映像信号を前記映像伝送シーケンスに基づいてプログレッシブ映像信号に変換する。
画素選択型ＩＰ変換部１２は、前記インタレース信号が第１の基準を満たさず前記第２の基準を満たしていると検出された場合に、当該インタレース映像信号を画素単位でプログレッシブ映像信号に変換する。
この画素選択型ＩＰ変換部１２におけるＩＰ変換について図４を用いて説明する。図４は、水平・垂直・時間軸（ｘ，ｙ，ｔ）の３次元の映像データをある水平座標ｘで切ったｔ−ｙ面の様子である。図中の列設した○がｔ，ｔ−１，ｔ−２時刻のフィールドデータをあらわしており、隣接するフィールドの各○（画素）がｙ軸方向にずれているのは、Ｏｄｄ／Ｅｖｅｎフィールドの違いをあらわしている。
本例の画素選択型ＩＰ変換部１２は、ｔ−１時刻の補間画素（図中×印）を補間する場合、その画素の時間的に前後するｔ又はｔ−２時刻のフィールド内の該補間画素と対応する位置の画素Ｇｔ又はＧｔ−２のどちらかから適切な値を選択する。このどちらを選択するかは、ｙ軸方向に隣接した画素Ｇ５又はＧ３の値に基づいて選択する。コマ素材はどちらかのフィールドに真の画素が入っているため、このように前後のフィールドから画素を選択することで復元できる。
インタレース用IP変換部１３は、前記インタレース信号が前記第１及び第２の基準を満たさない場合、即ち６０ｉ信号の場合、当該インタレース信号を動き適応或は動き補償型の補間処理によりプログレッシブ映像信号に変換する。
出力部１４は、出力判定部３からの出力選択情報に基づき、各変換部１１，１２，１３で変換されたプログレッシブ信号の何れかを選択して出力している。
而して、第１のシーケンス検出部１は、インタレース映像信号が入力されると、各フィールドを比較し、２：２や２：３の映像伝送シーケンスに基づく映像信号であるか否かを評価する。本例では、後述のように、各フィールドの評価値（差分絶対値和）を求めている。そして、この評価値が２：３或は２：２といった所定のタイミングで第１の閾値未満となった場合、第１の基準を満たしている、即ち映像伝送シーケンスに基づく映像信号であると検出する。また、該評価値が第１の閾値以下となったタイミングが、映像伝送シーケンスを示す情報であり、これに基づいてプルダウン検出情報をTransform型IP変換部１
１に供給する。
また、第２のシーケンス検出器２は、前記評価値が、前記所定のタイミングで第１の閾値以上第２の閾値以下となった場合、第２の基準を満たしている、即ち映像伝送シーケンスに準じた映像信号であると検出する。この映像伝送シーケンスに準じた映像信号とは、映画の宣伝やプロモーションビデオの映像と６０ｉの信号とを合成した映像信号のように、大部分がテレシネ変換された画像で一部に６０ｉの画像を含むような映像信号である。
そして、出力判定部３は、前記入力画像信号が第１の基準を満たしていれば、Transform型IP変換部１１からの信号を選択する旨の出力選択信号を出力部１４に送り、前記入力
画像信号が第２の基準を満たしていれば、画素選択型IP変換部１２からの信号を選択する旨の出力選択信号を出力部１４に送り、第１及び第２の基準を満たしていなければインタレース用IP変換部１３からの信号を選択する旨の出力選択信号を出力部１４に送る。出力部１４は、この出力判定部３からの出力選択情報に基づき、各変換部１１，１２，１３からのプログレッシブ信号を選択的に出力している。
このように、本実施形態の変換装置は、第１のシーケンス検出部１の検出条件（第１の基準）から、ギリギリで外れた映像信号のように、映像伝送シーケンスに基づく映像信号であるか映像伝送シーケンスに基づかない映像信号であるかが曖昧な映像信号を第２のシーケンス検出器２で検出し、画素選択型IP変換部１２でＩＰ変換する。
これにより、第１のシーケンス検出器１では、確実に映像伝送シーケンスに基づく映像信号である信号のみを検出すれば良く、検出機構を簡素にできる。
次に、第１のシーケンス検出器１及び第２のシーケンス検出器２における検出について、具体的に説明する。
図５は本実施形態における２：３検出を行う構成の説明図である。バッファ２１が、現
時刻ｔのフィールドFld(t)と、時刻ｔ−１，ｔ−２の過去２フィールドFld(t-1)，Fld(t-2)を保持しており、フィールドFld(t)とFld(t-2)をＳＡＤ計算器２２へ送る。ＳＡＤ計算器２２は、フィールドFld(t)とFld(t-2)の間の画素値の差分を積算し、ＳＡＤ（差分絶対値和）値を求めている。
リピートフィールド候補判定部２０の第１閾値比較器２３は、ＳＡＤ値が第１の閾値未満であるものをリピートフィールドの候補として判定し、２：３状態判定部２６に通知する。また、リピートフィールド候補判定部２０の第３閾値比較器２４は、ＳＡＤ値が第３の閾値以上であるものをリピートフィールドの候補として判定し、２：３状態判定部２６に通知する。
２：３状態判定部２６は、リピートフィールドおよび非リピートフィールドの時間方向のシーケンス（タイミング）から、２：３伝送シーケンスか否かを判定し、２：３伝送シーケンスであれば、前記リピートフィールドのシーケンスに基づくプルダウン検出情報を出力する。
また、第２閾値比較器２５は、前記ＳＡＤ値が第１の閾値以上第２の閾値以下の場合、コマ素材である可能性が高い状態（文字の合成やフロアノイズが高い状態）として、２：３状態判定部２６に通知する。これに応じて２：３状態判定部２６は、画素選択型ＩＰ変換された信号を選択する旨の選択信号を出力する。
また、２：３状態判定部は、２：３状態から非２：３状態に遷移したとき、一定期間画素選択型ＩＰ変換された信号を選択する旨の選択信号を出力しても良い。
図６は本実施形態における２：２検出を行う構成の説明図である。２：２シーケンスを検出する場合、フィールド内補間画像作成器３０が、隣り合うフィールドの画素と対応する画素の値を補間し、ＳＡＤ計算器３１，３２が、この補間処理によって得られたフィールドFld(t)と隣り合うフィールドFld(t)，Fld(t-2)とのＳＡＤ値を求める。
そして、該ＳＡＤ計算器３１，３２で求めたＳＡＤ値の差分（２次微分）が第１の閾値未満である場合、リピートフィールド候補判定部４０の第１閾値比較器３３は、２次微分小として判定し、２：２状態判定部３６に通知する。また、リピートフィールド候補判定部４０の第３閾値比較器３４は、ＳＡＤ値が第３の閾値以上であるものを２次微分大として判定し、２：２状態判定部３６に通知する。
また、該ＳＡＤ計算器３１，３２で求めたＳＡＤ値の差分（２次微分）が第１の閾値以上第２の閾値以下である場合、リピートフィールド候補判定部４０の第１閾値比較器３３は、２次微分中として２：２状態判定部３６に通知する。
２：２状態判定部３６は、該２次微分の大小関係から２：２状態であるかを判定する。また、２：２状態判定部３６は、２：２状態である場合に、大小関係のシーケンス、即ちリピートフィールドを示すプルダウン検出情報を出力する。更に、２：２状態判定部３６は、２次微分が中の場合に、コマ素材である可能性が高い状態として、画素選択型ＩＰ変換された信号を選択する旨の出力選択信号を出力する。
出力判定部３は、前記２：３状態判定部２６或は２：２状態判定部３６から、プルダウン検出情報を受けると、これをTransform型IP変換部１１に送ると共に、該Transform型IP変換部１１からのプログレッシブ映像信号を選択する旨の出力選択情報を出力部１４に送る。
また、出力判定部３は、前記２：３状態判定部２６或は２：２状態判定部３６から、画素選択型ＩＰ変換された信号を選択する旨の出力選択信号を受けると、これを出力部１４へ送る。
そして、出力判定部３は、前記２：３状態判定部２６或は２：２状態判定部３６から、画素選択型ＩＰ変換された信号を選択する旨の出力選択信号もプルダウン検出情報も受けない場合、インタレース用IP変換部１３からのプログレッシブ映像信号を選択する旨の出力選択信号を出力部１４へ送る。
本実施形態では、第１及び第２のシーケンス検出器１，２として、上記２：２，２：３のシーケンスを検出する２つの構成を並列に設けたが、本発明はこれに限定するものではなく、他のシーケンスを検出する構成であっても良い。
《本実施形態の効果》
現実の映像シーケンスには２：２／２：３素材以外に判別の難しい素材やその切り替わり状態が多く存在し、どちらかの状態を確実に検出しないといけない従来の手法では限界があった。本実施形態では、２：２／２：３どちらの状態であるかの判定が難しく、２：３や２：２といったコマをベースとした素材である可能性が高いという状況において、面ごとのプログレッシブ化処理をするのでなく、画素単位でプログレッシブ化処理を行う。これにより、シーケンスが混在した素材や異種を合成した素材であっても適切な変換処理を選択でき、もし判定が間違ったとしても影響が画素近傍に閉じ込められることで画質の劣化を最低限に抑えることが可能になる。
〈実施形態２〉
図７は、本発明に係る実施形態２の概略図である。本実施形態は、前述の実施形態１と比べ、シーンチェンジ検出部を更に具備し、シーンの切換わりに応じて画素選択型ＩＰ変換部１２で選択する画素を決定する構成が異なっている。この他の構成は同じであるので、同一の要素に同符号を付すなどして、再度の説明を省略している。
シーンチェンジ検出部４１は、入力された映像信号のフィールドを順に比較し、画像の動きに連続性が無くなった時点をシーンの切換わり（シーンチェンジ）として検出し、このシーンチェンジ情報を画素選択型ＩＰ変換部１２に通知する。なお、このシーンチェンジの検出手法については、公知の技術であるので詳しい説明を省略する。
画素選択型IP変換部１２は、前述のように変換対象フィールドの画素を選択して補間処理を行う際、シーンチェンジ情報を受けると、該シーンチェンジ情報に基づいて、変換対象フィールドと連続する側のフィールドの画素を選択して該補間処理を行う。即ち、変換対象のフィールドFld(t-1)が、シーンの切れ目（後端のフィールド）である旨のシーンチェンジ情報を受けた場合、変換対象のフィールドFld(t-1)とシーンが連続している前方のフィールドFld(t-2)の画素Ｇt-2を選択する。また、変換対象のフィールドFld(t-1)が、
シーンの替わり目（先端のフィールド）である旨のシーンチェンジ情報を受けた場合、変換対象のフィールドFld(t-1)とシーンが連続している後方のフィールドFld(t)の画素Ｇt
を選択する。
このように本実施形態によれば、前述の実施形態の効果に加え、シーンの切り替えに応じて画素選択型IP変換を行うので、シーンの切り替わり時に、残像が残ることことなくプログレッシブ処理することができる。
関連技術の説明図 映像信号の分類を示す図 本発明に係る実施形態１の変換装置の概略図 画素選択型IP変換部の説明図 ２：３シーケンスの検出を行う構成の説明図 ２：２シーケンスの検出を行う構成の説明図 本発明に係る実施形態２の変換装置の概略図
符号の説明
１０ 変換装置
１ 第１のシーケンス検出器（第１の検出部）
２ 第２のシーケンス検出器（第２の検出部）
３ 出力判定部
１１ Transform型IP変換部（第１の変換部）
１２ 画素選択型ＩＰ変換部（第２の変換部）
１３ インタレース用ＩＰ変換部（第３の変換部）
１４ 出力部１４

Claims (10)

  1. 入力されたインタレース映像信号が映像伝送シーケンスに基づく映像信号であるか評価した結果が、第１の基準を満たしているか否かを検出する第１の検出部と、
    前記評価した結果が、第２の基準を満たしているか否かを検出する第２の検出部と、
    前記インタレース信号が第１の基準を満たしていると検出された場合に、当該インタレース映像信号を前記映像伝送シーケンスに基づいてプログレッシブ映像信号に変換する第１の変換部と、
    前記インタレース信号が第１の基準を満たさず前記第２の基準を満たしていると検出された場合に、当該インタレース映像信号を画素単位でプログレッシブ映像信号に変換する第２の変換部と、
    前記インタレース信号が前記第１及び第２の基準を満たさない場合に、当該インタレース信号をプログレッシブ映像信号に変換する第３の変換部と、
    を備えた変換装置。
  2. 前記第２の変換部は、変換対象フィールドの各補間画素として、該変換対象フィールドの前及び後に隣接するフィールド中の該補間画素と対応する位置の画素を選択する請求項１に記載の変換装置。
  3. 前記映像信号のシーンの切り替わりを検出するシーンチェンジ検出部を更に備え、
    前記シーンの切り替わりを検出した場合、前記第２の変換部は、変換対象フィールドと連続する側のフィールドから前記画素を選択する請求項２記載の変換装置。
  4. 前記変換後のプログレッシブ映像信号を出力する出力部を更に備えた請求項１から３の何れかに記載の変換装置。
  5. 前記第１の検出部が、前記入力されたインタレース映像信号から映像伝送シーケンスを検出する請求項１から４の何れかに記載の変換装置。
  6. 入力されたインタレース映像信号が映像伝送シーケンスに基づく映像信号であるか評価した結果が、第１の基準を満たしているか否かを検出し、
    前記評価した結果が、第２の基準を満たしているか否かを検出し、
    前記インタレース信号が第１の基準を満たしていると検出された場合に、当該インタレース映像信号を前記映像伝送シーケンスに基づいてプログレッシブ映像信号に変換し、
    前記インタレース信号が第１の基準を満たさず前記第２の基準を満たしていると検出された場合に、当該インタレース映像信号を画素単位でプログレッシブ映像信号に変換し、
    前記インタレース信号が前記第１及び第２の基準を満たさない場合に、当該インタレース信号をプログレッシブ映像信号に変換する、
    を備えた変換方法。
  7. 前記画素単位で変換する際、変換対象フィールドの各補間画素として、該変換対象フィールドの前及び後に隣接するフィールド中の該補間画素と対応する位置の画素を選択する請求項６に記載の変換方法。
  8. 前記映像信号のシーンの切り替わりを検出した場合、前記画素単位で変換する際、変換対象フィールドと連続する側のフィールドから前記画素を選択する請求項７記載の変換方法。
  9. 前記変換後のプログレッシブ映像信号を出力する請求項６から８の何れかに記載の変換方法。
  10. 前記インタレース信号が第１の基準を満たしているか否かを検出する際、前記入力されたインタレース映像信号から映像伝送シーケンスを検出する請求項６から９の何れかに記載の変換方法。
JP2006123457A 2006-04-27 2006-04-27 映像信号の変換装置及び方法 Expired - Fee Related JP4929819B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2006123457A JP4929819B2 (ja) 2006-04-27 2006-04-27 映像信号の変換装置及び方法
US11/787,979 US8497937B2 (en) 2006-04-27 2007-04-18 Converting device and converting method of video signals
CNA2007101047984A CN101064817A (zh) 2006-04-27 2007-04-27 视频信号的转换装置及转换方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006123457A JP4929819B2 (ja) 2006-04-27 2006-04-27 映像信号の変換装置及び方法

Publications (2)

Publication Number Publication Date
JP2007295469A true JP2007295469A (ja) 2007-11-08
JP4929819B2 JP4929819B2 (ja) 2012-05-09

Family

ID=38647919

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006123457A Expired - Fee Related JP4929819B2 (ja) 2006-04-27 2006-04-27 映像信号の変換装置及び方法

Country Status (3)

Country Link
US (1) US8497937B2 (ja)
JP (1) JP4929819B2 (ja)
CN (1) CN101064817A (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014212434A (ja) * 2013-04-18 2014-11-13 三菱電機株式会社 映像信号処理装置及び方法、並びにプログラム及び記録媒体
JP2016100635A (ja) * 2014-11-18 2016-05-30 株式会社東芝 映像伝送システム、送信機、および受信機

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8780957B2 (en) 2005-01-14 2014-07-15 Qualcomm Incorporated Optimal weights for MMSE space-time equalizer of multicode CDMA system
CL2006000541A1 (es) 2005-03-10 2008-01-04 Qualcomm Inc Metodo para el procesamiento de datos multimedia que comprende: a) determinar la complejidad de datos multimedia; b) clasificar los datos multimedia en base a la complejidad determinada; y aparato asociado.
US8879857B2 (en) 2005-09-27 2014-11-04 Qualcomm Incorporated Redundant data encoding methods and device
US8654848B2 (en) * 2005-10-17 2014-02-18 Qualcomm Incorporated Method and apparatus for shot detection in video streaming
US8948260B2 (en) 2005-10-17 2015-02-03 Qualcomm Incorporated Adaptive GOP structure in video streaming
US9131164B2 (en) 2006-04-04 2015-09-08 Qualcomm Incorporated Preprocessor method and apparatus
JP4517311B2 (ja) * 2008-04-08 2010-08-04 ソニー株式会社 情報処理装置および方法、並びにプログラム
CN101557491B (zh) * 2008-04-09 2011-06-22 宝利微电子系统控股公司 视频图像电影模式检测方法及装置
JP4388126B1 (ja) * 2008-06-27 2009-12-24 株式会社東芝 プルダウン信号検出装置及びプルダウン信号検出方法、順次走査変換装置
US20110001873A1 (en) * 2008-08-06 2011-01-06 Daniel Doswald Frame rate converter for input frames with video and film content
US20100177161A1 (en) * 2009-01-15 2010-07-15 Dell Products L.P. Multiplexed stereoscopic video transmission
WO2011072016A1 (en) * 2009-12-08 2011-06-16 Broadcom Corporation Method and system for handling multiple 3-d video formats
JPWO2012117464A1 (ja) * 2011-03-03 2014-07-07 パナソニック株式会社 立体映像処理装置および方法ならびに立体映像表示装置
CN105828185A (zh) * 2016-04-28 2016-08-03 乐视控股（北京）有限公司 视频播放方法及装置
CN111294544B (zh) * 2018-12-10 2023-08-08 深圳市中兴微电子技术有限公司 一种去隔行处理方法及装置、计算机可读存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001506112A (ja) * 1997-10-10 2001-05-08 ファルージャ・ラボラトリーズ・インコーポレイテッド 現在のシステムと互換性をもつ態様でテレビジョン信号の送信および受信を行なうための高精細度テレビジョン信号処理
JP2004015700A (ja) * 2002-06-11 2004-01-15 Sony Corp プログレッシブ変換方法、プログレッシブ変換装置、シーケンス検出方法、シーケンス検出装置および映像データ処理装置
JP2004165883A (ja) * 2002-11-12 2004-06-10 Matsushita Electric Ind Co Ltd 映像プログレッシブ変換再生装置

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR950000440B1 (ko) * 1991-12-27 1995-01-19 주식회사 금성사 티브이 신호의 주사선 수 2배 증가방법 및 회로
DE69431226T2 (de) * 1993-09-28 2003-04-17 Canon Kk Bildwiedergabegerät
JP4806849B2 (ja) * 2001-01-15 2011-11-02 ソニー株式会社 画像処理装置および方法、プログラム、並びに記録媒体
US7075581B1 (en) * 2003-06-03 2006-07-11 Zoran Corporation Interlaced-to-progressive scan conversion based on film source detection
JP4433949B2 (ja) 2003-09-03 2010-03-17 ソニー株式会社 画像処理装置及び方法
KR100633143B1 (ko) * 2004-08-26 2006-10-11 삼성전자주식회사 배드에딧 검출이 가능한 필름모드 판별장치 및 그 방법

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001506112A (ja) * 1997-10-10 2001-05-08 ファルージャ・ラボラトリーズ・インコーポレイテッド 現在のシステムと互換性をもつ態様でテレビジョン信号の送信および受信を行なうための高精細度テレビジョン信号処理
JP2004015700A (ja) * 2002-06-11 2004-01-15 Sony Corp プログレッシブ変換方法、プログレッシブ変換装置、シーケンス検出方法、シーケンス検出装置および映像データ処理装置
JP2004165883A (ja) * 2002-11-12 2004-06-10 Matsushita Electric Ind Co Ltd 映像プログレッシブ変換再生装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014212434A (ja) * 2013-04-18 2014-11-13 三菱電機株式会社 映像信号処理装置及び方法、並びにプログラム及び記録媒体
JP2016100635A (ja) * 2014-11-18 2016-05-30 株式会社東芝 映像伝送システム、送信機、および受信機

Also Published As

Publication number Publication date
CN101064817A (zh) 2007-10-31
US8497937B2 (en) 2013-07-30
US20070252894A1 (en) 2007-11-01
JP4929819B2 (ja) 2012-05-09

Similar Documents

Publication Publication Date Title
JP4929819B2 (ja) 映像信号の変換装置及び方法
JP4847040B2 (ja) ビデオシーケンスでのティッカー処理
US6118488A (en) Method and apparatus for adaptive edge-based scan line interpolation using 1-D pixel array motion detection
EP1422929B1 (en) Motion estimation apparatus, method, and machine-readable medium capable of detecting scrolling text and graphic data
US7961253B2 (en) Method of processing fields of images and related device for data lines similarity detection
JP2004350281A (ja) 映像信号のデインターレース方法およびデインターレース装置
JP2008167102A (ja) 映像処理装置及びそれを備えた映像表示装置
US6897903B1 (en) Apparatus for detecting mixed interlaced and progressive original sources in a video sequence
US7218354B2 (en) Image processing device and method, video display device, and recorded information reproduction device
JP4575431B2 (ja) 補正インタレース解除装置による保護
JP2006270823A (ja) 画像レート変換方法及び画像レート変換装置
US7499102B2 (en) Image processing apparatus using judder-map and method thereof
JP2005045803A (ja) ２：２プルダウンシーケンスの判別装置およびその方法
JPH11112940A (ja) 動きベクトルの生成方法および装置
KR101026298B1 (ko) 화상 처리 장치 및 화상 처리 방법
US8134643B2 (en) Synthesized image detection unit
JP2005167887A (ja) 動画像フォーマット変換装置及び方法
JP2006109488A (ja) フィールド選択が可能な映像処理装置及びその方法
JP2004208312A (ja) 映像フォーマットの変換装置及びその方法
KR100813986B1 (ko) 움직임 적응적 디인터레이싱 방법 및 그 장치
JP4339237B2 (ja) 順次走査変換装置
JP2009135847A (ja) 映像処理装置及びフレームレート変換方法
US8243814B2 (en) Combing artifacts detection apparatus and combing artifacts detection method
US7796189B2 (en) 2-2 pulldown signal detection device and a 2-2 pulldown signal detection method
JP2005333254A (ja) 画像処理装置および画像処理方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20090108

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110215

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110222

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20110621

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110921

A911 Transfer of reconsideration by examiner before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20110930

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20111129

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20111221

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120117

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120130

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150224

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees