JP2005033688A - 信号処理装置および方法、記録媒体、並びにプログラム - Google Patents

信号処理装置および方法、記録媒体、並びにプログラム Download PDF

Info

Publication number
JP2005033688A
JP2005033688A JP2003273155A JP2003273155A JP2005033688A JP 2005033688 A JP2005033688 A JP 2005033688A JP 2003273155 A JP2003273155 A JP 2003273155A JP 2003273155 A JP2003273155 A JP 2003273155A JP 2005033688 A JP2005033688 A JP 2005033688A
Authority
JP
Japan
Prior art keywords
signal
interest
difference
signals
neighboring
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2003273155A
Other languages
English (en)
Other versions
JP2005033688A5 (ja
JP4320572B2 (ja
Inventor
Kazuki Yokoyama
一樹 横山
Kazuhiko Ueda
和彦 上田
Mitsuyasu Asano
光康 浅野
Takeshi Kubozono
猛 窪園
Tetsuji Inada
哲治 稲田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2003273155A priority Critical patent/JP4320572B2/ja
Priority to US10/887,436 priority patent/US7106346B2/en
Priority to DE602004023158T priority patent/DE602004023158D1/de
Priority to EP04254109A priority patent/EP1496472B1/en
Priority to KR1020040053316A priority patent/KR101031153B1/ko
Priority to CNB200410063574XA priority patent/CN1292576C/zh
Publication of JP2005033688A publication Critical patent/JP2005033688A/ja
Publication of JP2005033688A5 publication Critical patent/JP2005033688A5/ja
Application granted granted Critical
Publication of JP4320572B2 publication Critical patent/JP4320572B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/70Denoising; Smoothing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/40Picture signal circuits
    • H04N1/409Edge or detail enhancement; Noise or error suppression
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/20Image enhancement or restoration using local operators
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20004Adaptive image processing
    • G06T2207/20012Locally adaptive
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20172Image enhancement details
    • G06T2207/20192Edge enhancement; Edge preservation

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)
  • Picture Signal Circuits (AREA)
  • Facsimile Image Signal Circuits (AREA)

Abstract

【課題】 画像を構成する画素値の微小なエッジも保持しつつ、エッジ以外の部分を平滑化する。
【解決手段】 nフィルタ11は、入力される画像信号S0を構成する画素の変動のうち、そのサイズが所定の閾値よりも大きい急峻なエッジを保持し、当該エッジ以外の部分を平滑化する非線形フィルタ12、入力される画像信号S0を構成する画素の変動の中に微小なエッジを検出した場合、その旨をスイッチ16に通知するパターン検出部15、およびパターン検出部15からの通知に対応して、入力される画像信号S0または非線形フィルタ12の出力である画像信号S1を後段に出力するスイッチ16から構成される。本発明は、ビデオカメラ、ディジタルスチルカメラ、プリンタ、ディスプレイ、コンピュータ等のような、画像信号を扱うあらゆる装置に適用することができる。
【選択図】 図7

Description

本発明は、信号処理装置および方法、記録媒体、並びにプログラムに関し、特に、例えば、画像を構成する画素の急峻なエッジを保持したままで、エッジ以外の部分を平滑化する場合に用いて好適な信号処理装置および方法、記録媒体、並びにプログラムに関する。
従来、ビデオカメラにおいては、CCD(Charge Coupled Device),CMOS(Complementary Metal-Oxide Semiconductor)などの撮像素子により撮像された画像のコントラスト(明暗の差)および鮮鋭度(境界の明確さ)を向上させる方法として、階調変換によるコントラスト強調方法や画像中の高域成分のコントラストを強調する高域成分強調方法が考えられている。
コントラスト強調方法としては、画像の各画素に対して、その画素レベルを所定の入出力関係を持つ関数(以下、これをレベル変換関数と称する)で変換するトーンカーブ調整や、画素レベルの頻度分布に応じてレベル変換関数を適応的に変化させるヒストグラムイコライゼーションと呼ばれる方法が提案されている。
高域成分強調方法としては、画像からエッジを抽出し、当該抽出したエッジを強調するいわゆる輪郭強調を行うアンシャープマスクと呼ばれる方法が提案されている。
しかしながら、コントラスト強調方法においては、画像の全ダイナミックレンジ(最大レベルと最小レベルの差)のうち一部の輝度域しかコントラストを向上させることができない問題があることに加えて、トーンカーブ調整の場合には画像の最明部と最暗部において、またヒストグラムイコライゼーションの場合には頻度分布の少ない輝度域付近において、逆にコントラストが低下するという問題があった。さらに高域成分強調方法においては、画像の高域成分のコントラストのみが強調され、これにより画像のエッジ付近が不自然に強調され、画質が劣化することを避け得ないという問題点があった。
そこで、従来、図1に示すように構成される画像信号処理装置により、入力画像データのうち画素値の変化が急峻なエッジを保存した状態で当該エッジ以外の部分を増幅することにより、エッジ以外の部分を強調する方法が存在する(例えば、特許文献1)。
図1に示された画像信号処理装置において、入力された画像信号(画素値)は、εフィルタ1、および減算部2に入力される。εフィルタ1は、所定の閾値ε1よりも大きいエッジ、例えば、図2Aに示されるような急峻なエッジを挟んで僅かに変動する画像信号が入力された場合、図2Bに示されるようなエッジのみが抽出された画像信号に変換して、減算部2および加算部4に出力する。
εフィルタ1の具体的な処理について、図3および図4を参照して説明する。εフィルタ1は、入力画像の各画素を順次、注目画素Cに決定し、図3に示すように、注目画素Cを中心として水平方向に連続する複数の近傍画素(いまの場合、4画素L2,L1,R1,R2)からなるタップを設定し、次式(1)のように、注目画素Cおよび複数の近傍画素の画素値を、タップ係数(例えば、{1,2,3,2,1})を用いて加重平均して、注目画素Cに対応する変換結果C’として出力する。
C’=(1・L2+2・L1+3・C+2・R1+1・R2)/9 …(1)
ただし、図4に示すように、注目画素Cの画素値との差分が、所定の閾値ε1よりも大きい近傍画素(図4の場合、近傍画素R2)については、画素値を注目画素Cのものと置換して計算するようにする。すなわち、図4の場合、次式(2)が計算される。
C’=(1・L2+2・L1+3・C+2・R1+1・R2)/9 …(2)
図1に戻る。減算部2は、前段から入力される画像信号(εフィルタ1に対する入力と同一のもの)から、εフィルタ1から入力される画像信号を減算することにより、エッジ以外の僅かに変動している画像信号を抽出して増幅部3に出力する。増幅部3は、減算部2の出力を増幅して加算部4に出力する。加算部4は、増幅部3から出力されるエッジ以外の部分が増幅されている画像信号と、εフィルタ1から入力されるエッジのみが抽出された画像信号を加算する。この加算結果が、急峻なエッジが保持された状態で当該エッジ以外の部分が増幅されている画像信号となっている。
特開2001−298621号公報
ところで、図1に示された画像信号処理装置のεフィルタ1では、例えば、図5に示されるように、画素値の変化に急峻なエッジが存在しても、そのサイズが所定の閾値ε1よりも小さい場合、εフィルタ1から出力される変換後の画像信号は、図6に示すように平滑化されてしまい、急峻なエッジがなくなってしまうので、特に微小なエッジで構成された単純なパターン画像等で著しく画質の劣化が生じてしまうという課題があった。
本発明はこのような状況に鑑みてなされたものであり、微小なエッジも保持しつつ、エッジ以外の部分を平滑化できるようにすることを目的とする。
本発明の信号処理装置は、連続的に配置されている信号を、順次、注目信号に指定する指定手段と、指定手段によって指定された注目信号を基準として、連続的に配置されている信号のなかから複数の近傍信号を決定する決定手段と、注目信号と各近傍信号との差分を演算し、差分と第1の閾値との比較結果に基づいて、注目信号と複数の近傍信号を加重平均して平滑化信号を演算する演算手段と、注目信号と各近傍信号との差分を演算し、差分と第1の閾値よりも小さな第2の閾値との比較結果に基づいて、注目信号の近傍に微小エッジが存在するか否かを判定する判定手段と、判定手段の判定結果に基づき、平滑化信号または注目信号の一方を選択する選択手段とを含むことを特徴とする。
前記信号は、画像を構成する画素の画素値であるようにすることができる。
本発明の信号処理方法は、連続的に配置されている信号を、順次、注目信号に指定する指定ステップと、指定ステップの処理で指定された注目信号を基準として、連続的に配置されている信号のなかから複数の近傍信号を決定する決定ステップと、注目信号と各近傍信号との差分を演算し、差分と第1の閾値との比較結果に基づいて、注目信号と複数の近傍信号を加重平均して平滑化信号を演算する演算ステップと、注目信号と各近傍信号との差分を演算し、差分と第1の閾値よりも小さな第2の閾値との比較結果に基づいて、注目信号の近傍に微小エッジが存在するか否かを判定する判定ステップと、判定ステップの判定結果に基づき、平滑化信号または注目信号の一方を選択する選択ステップとを含むことを特徴とする。
本発明の記録媒体のプログラムは、連続的に配置されている信号を、順次、注目信号に指定する指定ステップと、指定ステップの処理で指定された注目信号を基準として、連続的に配置されている信号のなかから複数の近傍信号を決定する決定ステップと、注目信号と各近傍信号との差分を演算し、差分と第1の閾値との比較結果に基づいて、注目信号と複数の近傍信号を加重平均して平滑化信号を演算する演算ステップと、注目信号と各近傍信号との差分を演算し、差分と第1の閾値よりも小さな第2の閾値との比較結果に基づいて、注目信号の近傍に微小エッジが存在するか否かを判定する判定ステップと、判定ステップの判定結果に基づき、平滑化信号または注目信号の一方を選択する選択ステップとを含むことを特徴とする。
本発明のプログラムは、連続的に配置されている信号を、順次、注目信号に指定する指定ステップと、指定ステップの処理で指定された注目信号を基準として、連続的に配置されている信号のなかから複数の近傍信号を決定する決定ステップと、注目信号と各近傍信号との差分を演算し、差分と第1の閾値との比較結果に基づいて、注目信号と複数の近傍信号を加重平均して平滑化信号を演算する演算ステップと、注目信号と各近傍信号との差分を演算し、差分と第1の閾値よりも小さな第2の閾値との比較結果に基づいて、注目信号の近傍に微小エッジが存在するか否かを判定する判定ステップと、判定ステップの判定結果に基づき、平滑化信号または注目信号の一方を選択する選択ステップとを含むことを特徴とする。
本発明の信号処理装置および方法、並びにプログラムにおいては、注目信号と各近傍信号との差分が演算され、差分と第1の閾値との比較結果に基づいて、注目信号と複数の近傍信号が加重平均されて平滑化信号が演算される。また、注目信号と各近傍信号との差分が演算されて、差分と第1の閾値よりも小さな第2の閾値との比較結果に基づいて、注目信号の近傍に微小エッジが存在するか否かが判定され、平滑化信号または注目信号の一方が選択される。
本発明によれば、画素値の微小なエッジも保持しつつ、エッジ以外の部分を平滑化することが可能となる。
以下に本発明の実施の形態を説明するが、請求項に記載の構成要件と、発明の実施の形態における具体例との対応関係を例示すると、次のようになる。この記載は、請求項に記載されている発明をサポートする具体例が、発明の実施の形態に記載されていることを確認するためのものである。従って、発明の実施の形態中には記載されているが、構成要件に対応するものとして、ここには記載されていない具体例があったとしても、そのことは、その具体例が、その構成要件に対応するものではないことを意味するものではない。逆に、具体例が構成要件に対応するものとしてここに記載されていたとしても、そのことは、その具体例が、その構成要件以外の構成要件には対応しないものであることを意味するものでもない。
さらに、この記載は、発明の実施の形態に記載されている具体例に対応する発明が、請求項に全て記載されていることを意味するものではない。換言すれば、この記載は、発明の実施の形態に記載されている具体例に対応する発明であって、この出願の請求項には記載されていない発明の存在、すなわち、将来、分割出願されたり、補正により追加されたりする発明の存在を否定するものではない。
[請求項1]
連続的に配置されている信号のレベル(例えば、画像を構成する画素の画素値)を調整(例えば、平滑化)する信号処理装置(例えば、図7のnフィルタ11)において、
連続的に配置されている前記信号を、順次、注目信号に指定する指定手段(例えば、図8のステップS1の処理を行う図7の制御信号生成部13)と、
前記指定手段によって指定された前記注目信号を基準として、連続的に配置されている前記信号のなかから複数の近傍信号を決定する決定手段(例えば、図8のステップS2の処理を行う図7の制御信号生成部13)と、
前記注目信号と各近傍信号との差分を演算し、前記差分と第1の閾値との比較結果に基づいて、前記注目信号と前記複数の近傍信号を加重平均して平滑化信号を演算する演算手段(例えば、図8のステップS3の処理を行う図7のローパスフィルタ14)と、
前記注目信号と各近傍信号との差分を演算し、前記差分と前記第1の閾値よりも小さな第2の閾値との比較結果に基づいて、前記注目信号の近傍に微小エッジが存在するか否かを判定する判定手段(例えば、図8のステップS4の処理を行う図7のパターン検出部15)と、
前記判定手段の判定結果に基づき、前記平滑化信号または前記注目信号の一方を選択する選択手段(例えば、図7のスイッチ16)と
を含むことを特徴とする信号処理装置。
[請求項3]
連続的に配置されている信号のレベルを調整する信号処理方法において、
連続的に配置されている前記信号を、順次、注目信号に指定する指定ステップ(例えば、図8のステップS1)と、
前記指定ステップの処理で指定された前記注目信号を基準として、連続的に配置されている前記信号のなかから複数の近傍信号を決定する決定ステップ(例えば、図8のステップS2)と、
前記注目信号と各近傍信号との差分を演算し、前記差分と第1の閾値との比較結果に基づいて、前記注目信号と前記複数の近傍信号を加重平均して平滑化信号を演算する演算ステップ(例えば、図8のステップS3)と、
前記注目信号と各近傍信号との差分を演算し、前記差分と前記第1の閾値よりも小さな第2の閾値との比較結果に基づいて、前記注目信号の近傍に微小エッジが存在するか否かを判定する判定ステップ(例えば、図8のステップS4)と、
前記判定ステップの判定結果に基づき、前記平滑化信号または前記注目信号の一方を選択する選択ステップ(例えば、図8のステップS5)と
を含むことを特徴とする信号処理方法。
なお、本発明の記録媒体に記録されているプログラム、および本発明のプログラムの請求項に記載の構成要件と、発明の実施の形態における具体例との対応関係は、上述した本発明の情報処理方法のものと同様であるので、その記載は省略する。
本発明の実施の形態について説明する。図7は、本発明の一実施の形態である画素値パターン検出機能付き非線形フィルタ(以下、nフィルタと記述する)の構成例を示している。このnフィルタ11は、図1に示された画像信号処理装置のεフィルタ1と置換して用いるものであり、入力される画像信号S0を構成する画素の変動のうち、そのサイズが閾値ε1よりも大きい急峻なエッジを保持し、当該エッジ以外の部分を平滑化する非線形フィルタ12、入力される画像信号S0を構成する画素の変動の中に微小なエッジを検出した場合、その旨をスイッチ16に通知するパターン検出部15、およびパターン検出部15からの通知に対応して、入力される画像信号S0または非線形フィルタ12の出力である画像信号S1を後段に出力するスイッチ16から構成される。
非線形フィルタ12は、注目画素Cと、各近傍画素L2,L1,R1,R2との画素値の差の絶対値を算出し、その算出結果に基づいてローパスフィルタ(LPF)14を制御する制御信号発生部13と、入力される画像信号S0に非線形フィルタリング処理を施すローパスフィルタ14から構成される。なお、非線形フィルタ12として、例えば、上述した従来のεフィルタ1を用いることができる。
nフィルタ11によるフィルタリング処理について、図3に示された注目画素Cを含む5画素のタップを用いる場合を例として、図8のフローチャートを参照して説明する。
ステップS1において、制御信号発生部13は、入力された画像信号S0を構成するラスター順の画素を、順次、1画素ずつ注目画素Cに決定する。また、制御信号発生部13は、注目画素に決定する。ステップS2において、制御信号発生部13は、注目画素Cの水平方向に隣接する近傍画素L2,L1,R1,R2を決定する。さらに、制御信号発生部13は、決定した注目画素Cと近傍画素L2,L1,R1,R2を、パターン検出部15に通知する。
ステップS3において、制御信号発生部13は、注目画素Cと、各近傍画素L2,L1,R1,R2との画素値の差の絶対値|C−L2|,|C−L1|,|C−R1|,|C−R2|を算出し、算出した各差の絶対値と所定の閾値ε1と比較して、この比較結果に対応して、ローパスフィルタ14を制御する。ローパスフィルタ14は、制御信号発生部13からの制御に基づいて、入力される画像信号S0に非線形フィルタリング処理を施す。具体的には、例えば、式(1)のように、注目画素Cおよび複数の近傍画素の画素値を、タップ係数を用いて加重平均して、注目画素Cに対応する変換結果C’として出力する。ただし、注目画素Cの画素値との差の絶対値が、所定の閾値ε1よりも大きい近傍画素については、画素値を注目画素Cの画素値と置換して加重平均するようにする。
ステップS4において、パターン検出部15は、注目画素Cと、各近傍画素L2,L1,R1,R2との画素値の差の絶対値を算出し、算出した各差の絶対値と、所定の閾値ε1よりも十分に小さい閾値ε2と比較することにより、注目画素Cの近傍に微小なエッジが存在するか否かを判定する。
このステップS4の処理について、図9のフローチャートを参照して説明する。ステップS11において、パターン検出部15は、注目画素Cと、各近傍画素L2,L1,R1,R2との画素値の差の絶対値を算出し、各差の絶対値が全て、閾値ε2よりも小さいか否かを判定し、各差の絶対値が全て閾値ε2よりも小さいと判定した場合、ステップS12において、注目画素Cの近傍には、微小なエッジが存在しないと判定する。
反対に、ステップS11において、算出された差の絶対値のうち、1つでも閾値ε2以上のものがあると判定された場合、処理はステップS13に進む。ステップS13において、パターン検出部15は、注目画素Cの左右の一方側の近傍画素(例えば、L2,L1)と注目画素Cとの差の絶対値が全て閾値ε2よりも小さく、かつ、注目画素Cの左右の他方側の近傍画素(いまの場合、R1,R2)と注目画素Cとの差の絶対値が全て閾値ε2以上であって、かつ、注目画素Cの左右の他方側の近傍画素(いまの場合、R1,R2)と注目画素Cとの各差の正負が一致しているか否かを判定する。上記条件を満たしていると判定された場合、処理はステップS14に進む。ステップS14において、パターン検出部15は、注目画素Cの近傍に、微小なエッジが存在すると判定する。
なお、ステップS13において、上記条件を満たしていないと判定された場合、処理はステップS12に進み、注目画素Cの近傍には、微小なエッジが存在しないと判定される。
例えば、注目画素Cと近傍画素L2,L1,R1,R2の関係が図10に示すような場合、注目画素Cと左側の近傍画素L2,L1の差の絶対値|L2−C|,|L1−C|が閾値ε2よりも小さく、かつ、注目画素Cと右側の近傍画素R1,R2の差の絶対値|R1−C|,|R2−C|が閾値ε2以上であり、かつ、注目画素Cと右側の近傍画素R1,R2の差(R1−C),(R2−C)の符号が一致する(いまの場合、ともに正)ので、注目画素Cの近傍に微小なエッジが存在すると判定される。
また例えば、注目画素Cと近傍画素L2,L1,R1,R2の関係が図11に示すような場合、注目画素Cと左側の近傍画素L2,L1の差の絶対値|L2−C|,|L1−C|が閾値ε2よりも小さく、かつ、注目画素Cと右側の近傍画素R1,R2の差の絶対値|R1−C|,|R2−C|が閾値ε2以上ではあるが、かつ、注目画素Cと右側の近傍画素R1,R2の差(R1−C),(R2−C)の符号が一致しない(いまの場合、それぞれ正、負)ので、注目画素Cの近傍に微小なエッジが存在しないと判定される。
さらに例えば、注目画素Cと近傍画素L2,L1,R1,R2の関係が図12に示すような場合、注目画素Cの左右いずれの側も、注目画素Cと近傍画素の差の絶対値が全て閾値ε2よりも小さいわけではないので、注目画素Cの近傍に微小なエッジが存在しないと判定される。
このようにして、注目画素Cの近傍に微小なエッジが存在するか否かが判定された後、処理は図8のステップS5に戻る。ステップS5において、パターン検出部15は、ステップS4の判定結果が、「注目画素Cの近傍に微小なエッジが存在する」であった場合、ステップS6に進み、注目画素Cの近傍に微小なエッジが存在する旨をスイッチ16に通知する。この通知に対応し、スイッチ16は、入力された画像信号S0を後段に出力する。
反対に、ステップS5において、ステップS4の判定結果が、「注目画素Cの近傍に微小なエッジが存在しない」であった場合、ステップS7に進み、注目画素Cの近傍に微小なエッジが存在しない旨をスイッチ16に通知する。この通知に対応し、スイッチ16は、入力された非線形フィルタ12の出力S1を後段に出力する。
この後、処理はステップS1に戻り、今まで近傍画素R1とされていた画素が、注目画素Cとされて、同様の処理が繰り返される。以上、nフィルタ11によるフィルタリング処理の説明を終了する。
このように、nフィルタ11では、閾値ε2を基準として微小エッジを検出し、微小エッジが存在する部分については、非線形フィルタ12の出力を適用しないようにしたので、特に微小なエッジで構成された単純なパターン画像等で著しく画質の劣化が生じてしまうという事態を抑止することができる。
なお、本発明は、ビデオカメラ、ディジタルスチルカメラ、プリンタ、ディスプレイ、コンピュータ等のような、画像信号を扱うあらゆる装置に適用することが可能である。
例えば、画像処理を実行するコンピュータに適用した場合、画像コントラストを修正する際、ダイナミックレンジを維持しながら高品位なコントラスト修正画像を得ることができ、また異なる照明条件下で得られた画像同士を合成する際、それぞれのコントラスト成分の違いだけを補正でき、自然な合成画像を生成することができる。
ところで、上述した一連の処理は、ハードウェアにより実行させることもできるが、ソフトウェアにより実行させることもできる。一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば、図13に示すように構成される汎用のパーソナルコンピュータなどに、記録媒体からインストールされる。
このパーソナルコンピュータ50は、CPU(Central Processing Unit)51を内蔵している。CPU51にはバス54を介して、入出力インタフェース55が接続されている。バス54には、ROM(Read Only Memory)52およびRAM(Random Access Memory)53が接続されている。
入出力インタフェース55には、ユーザが操作コマンドを入力するキーボード、マウス、リモートコントローラなどの入力デバイスよりなる入力部56、合成された映像信号をディスプレイに出力する出力部57、プログラムや各種データを格納するハードディスクドライブなどよりなる記憶部58、およびモデム、LAN(Local Area Network)アダプタなどよりなり、インタネットに代表されるネットワークを介した通信処理を実行する通信部59が接続されている。また、磁気ディスク61(フレキシブルディスクを含む)、光ディスク62(CD-ROM(Compact Disc-Read Only Memory)、DVD(Digital Versatile Disc)を含む)、光磁気ディスク63(MD(Mini Disc)を含む)、およびは半導体メモリ64などの記録媒体に対してデータを読み書きするドライブ60が接続されている。
CPU51に上述した第1または第2のフィルタリング処理を実行させるプログラムは、磁気ディスク61乃至半導体メモリ64に格納された状態でパーソナルコンピュータに供給され、ドライブ60によって読み出されて記憶部58に内蔵されるハードディスクドライブにインストールされている。あるいは、ネットワークを介して供給されることも考えられる。記憶部58にインストールされているプログラムは、入力部56に入力されるユーザからのコマンドに対応するCPU51の指令によって、記憶部58からRAM53にロードされて実行される。
なお、本明細書において、各フローチャートを記述するステップは、記載された順序に従って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
画像内の急峻なエッジを保存した状態でエッジ以外の部分を強調する画像信号処理装置の構成例を示すブロック図である。 図1のεフィルタに入力される画像信号と、出力される画像信号を示す図である。 図1のεフィルタで用いられるタップの一例を示す図である。 図1のεフィルタの動作を説明するための図である。 図1のεフィルタの問題点を説明するための図である。 図1のεフィルタの問題点を説明するための図である。 本発明の一実施の形態であるnフィルタの構成例を示すブロック図である。 図7のnフィルタによるフィルタリング処理を説明するフローチャートである。 図8のステップS4の処理を説明するフローチャートである。 微小エッジと判定される例を示す図である。 微小エッジと判定されない例を示す図である。 微小エッジと判定されない例を示す図である。 本発明の一実施の形態であるパーソナルコンピュータの構成例を示すブロック図である。
符号の説明
11 nフィルタ, 12 非線形フィルタ, 13 制御信号発生部, 14 炉^パスフィルタ, 15 パターン検出部, 16 スイッチ

Claims (5)

  1. 連続的に配置されている信号のレベルを調整する信号処理装置において、
    連続的に配置されている前記信号を、順次、注目信号に指定する指定手段と、
    前記指定手段によって指定された前記注目信号を基準として、連続的に配置されている前記信号のなかから複数の近傍信号を決定する決定手段と、
    前記注目信号と各近傍信号との差分を演算し、前記差分と第1の閾値との比較結果に基づいて、前記注目信号と前記複数の近傍信号を加重平均して平滑化信号を演算する演算手段と、
    前記注目信号と各近傍信号との差分を演算し、前記差分と前記第1の閾値よりも小さな第2の閾値との比較結果に基づいて、前記注目信号の近傍に微小エッジが存在するか否かを判定する判定手段と、
    前記判定手段の判定結果に基づき、前記平滑化信号または前記注目信号の一方を選択する選択手段と
    を含むことを特徴とする信号処理装置。
  2. 前記信号は、画像を構成する画素の画素値である
    ことを特徴とする請求項1に記載の信号処理装置。
  3. 連続的に配置されている信号のレベルを調整する信号処理方法において、
    連続的に配置されている前記信号を、順次、注目信号に指定する指定ステップと、
    前記指定ステップの処理で指定された前記注目信号を基準として、連続的に配置されている前記信号のなかから複数の近傍信号を決定する決定ステップと、
    前記注目信号と各近傍信号との差分を演算し、前記差分と第1の閾値との比較結果に基づいて、前記注目信号と前記複数の近傍信号を加重平均して平滑化信号を演算する演算ステップと、
    前記注目信号と各近傍信号との差分を演算し、前記差分と前記第1の閾値よりも小さな第2の閾値との比較結果に基づいて、前記注目信号の近傍に微小エッジが存在するか否かを判定する判定ステップと、
    前記判定ステップの判定結果に基づき、前記平滑化信号または前記注目信号の一方を選択する選択ステップと
    を含むことを特徴とする信号処理方法。
  4. 連続的に配置されている信号のレベルを調整するためのプログラムであって、
    連続的に配置されている前記信号を、順次、注目信号に指定する指定ステップと、
    前記指定ステップの処理で指定された前記注目信号を基準として、連続的に配置されている前記信号のなかから複数の近傍信号を決定する決定ステップと、
    前記注目信号と各近傍信号との差分を演算し、前記差分と第1の閾値との比較結果に基づいて、前記注目信号と前記複数の近傍信号を加重平均して平滑化信号を演算する演算ステップと、
    前記注目信号と各近傍信号との差分を演算し、前記差分と前記第1の閾値よりも小さな第2の閾値との比較結果に基づいて、前記注目信号の近傍に微小エッジが存在するか否かを判定する判定ステップと、
    前記判定ステップの判定結果に基づき、前記平滑化信号または前記注目信号の一方を選択する選択ステップと
    を含むことを特徴とするコンピュータが読み取り可能なプログラムが記録されている記録媒体。
  5. 連続的に配置されている信号のレベルを調整するためのプログラムであって、
    連続的に配置されている前記信号を、順次、注目信号に指定する指定ステップと、
    前記指定ステップの処理で指定された前記注目信号を基準として、連続的に配置されている前記信号のなかから複数の近傍信号を決定する決定ステップと、
    前記注目信号と各近傍信号との差分を演算し、前記差分と第1の閾値との比較結果に基づいて、前記注目信号と前記複数の近傍信号を加重平均して平滑化信号を演算する演算ステップと、
    前記注目信号と各近傍信号との差分を演算し、前記差分と前記第1の閾値よりも小さな第2の閾値との比較結果に基づいて、前記注目信号の近傍に微小エッジが存在するか否かを判定する判定ステップと、
    前記判定ステップの判定結果に基づき、前記平滑化信号または前記注目信号の一方を選択する選択ステップと
    を含む処理をコンピュータに実行させることを特徴とするプログラム。
JP2003273155A 2003-07-11 2003-07-11 信号処理装置および方法、記録媒体、並びにプログラム Expired - Fee Related JP4320572B2 (ja)

Priority Applications (6)

Application Number Priority Date Filing Date Title
JP2003273155A JP4320572B2 (ja) 2003-07-11 2003-07-11 信号処理装置および方法、記録媒体、並びにプログラム
DE602004023158T DE602004023158D1 (de) 2003-07-11 2004-07-08 Kantensensitive Bildverbesserung
EP04254109A EP1496472B1 (en) 2003-07-11 2004-07-08 Edge-sensitive image enhancement
US10/887,436 US7106346B2 (en) 2003-07-11 2004-07-08 Signal processing apparatus and method, recording medium, and program
KR1020040053316A KR101031153B1 (ko) 2003-07-11 2004-07-09 신호 처리 장치 및 방법
CNB200410063574XA CN1292576C (zh) 2003-07-11 2004-07-12 信号处理设备及方法、记录介质和程序

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003273155A JP4320572B2 (ja) 2003-07-11 2003-07-11 信号処理装置および方法、記録媒体、並びにプログラム

Publications (3)

Publication Number Publication Date
JP2005033688A true JP2005033688A (ja) 2005-02-03
JP2005033688A5 JP2005033688A5 (ja) 2006-08-24
JP4320572B2 JP4320572B2 (ja) 2009-08-26

Family

ID=33448063

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003273155A Expired - Fee Related JP4320572B2 (ja) 2003-07-11 2003-07-11 信号処理装置および方法、記録媒体、並びにプログラム

Country Status (6)

Country Link
US (1) US7106346B2 (ja)
EP (1) EP1496472B1 (ja)
JP (1) JP4320572B2 (ja)
KR (1) KR101031153B1 (ja)
CN (1) CN1292576C (ja)
DE (1) DE602004023158D1 (ja)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006302023A (ja) * 2005-04-21 2006-11-02 Noritsu Koki Co Ltd 粒状ノイズ抑制のための画像処理方法及びプログラム及びこの方法を実施する粒状抑制処理モジュール
JP2008109543A (ja) * 2006-10-27 2008-05-08 Matsushita Electric Ind Co Ltd 撮像装置
JP2011035776A (ja) * 2009-08-04 2011-02-17 Sanyo Electric Co Ltd 映像情報処理装置およびプログラム
US8045063B2 (en) 2006-01-16 2011-10-25 Sony Corporation Apparatus, method, and computer program for processing image, and recording medium storing the computer program
KR101318556B1 (ko) 2005-11-02 2013-10-16 소니 주식회사 신호 처리 장치, 방법 및 기록 매체

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4961182B2 (ja) * 2005-10-18 2012-06-27 株式会社リコー ノイズ除去装置、ノイズ除去方法、ノイズ除去プログラム及び記録媒体
JP2008258836A (ja) * 2007-04-03 2008-10-23 Sony Corp 撮像装置、信号処理回路、信号処理装置、信号処理方法及びコンピュータプログラム
EP2117233B1 (en) * 2008-05-07 2011-07-20 Vivante Corporation De-ringing filter for decompressed video data
CN101605254B (zh) * 2008-06-13 2011-09-07 深圳Tcl新技术有限公司 减少视频区块效应的系统和方法
KR20100016803A (ko) * 2008-08-05 2010-02-16 주식회사 몬도시스템즈 내용 적응적 해상도 비디오 압축을 위한 영상 분석 장치 및방법
US8184196B2 (en) 2008-08-05 2012-05-22 Qualcomm Incorporated System and method to generate depth data using edge detection
CN101778188B (zh) * 2009-01-14 2013-01-02 华晶科技股份有限公司 数字图像中的人脸美化方法
CN101930597B (zh) * 2010-08-10 2012-05-02 浙江大学 一种基于数学形态学的图像边缘检测方法
US9104941B1 (en) * 2011-12-02 2015-08-11 Marvell International Ltd. Method and apparatus for reducing noise in a scanned image while minimizing loss of detail in the scanned image
US9894269B2 (en) 2012-10-31 2018-02-13 Atheer, Inc. Method and apparatus for background subtraction using focus differences
US9804392B2 (en) 2014-11-20 2017-10-31 Atheer, Inc. Method and apparatus for delivering and controlling multi-feed data
US10097745B2 (en) 2016-04-27 2018-10-09 Zepp Labs, Inc. Head rotation tracking device for video highlights identification
US10304396B2 (en) 2016-10-28 2019-05-28 Himax Display, Inc. Image processing method for alleviating tailing phenomenon and related imaging processing circuit and display apparatus
CN111080550B (zh) * 2019-12-13 2023-03-07 北京金山云网络技术有限公司 图像处理方法、装置、电子设备及计算机可读存储介质

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4655561A (en) * 1983-04-19 1987-04-07 Canon Kabushiki Kaisha Method of driving optical modulation device using ferroelectric liquid crystal
JP3097785B2 (ja) * 1992-04-30 2000-10-10 株式会社リコー 画像処理装置
US6132765A (en) * 1996-04-12 2000-10-17 Uroteq Inc. Drug delivery via therapeutic hydrogels
EP0969674A3 (en) * 1998-07-03 2004-01-02 Canon Kabushiki Kaisha Image sensing device processing image signals in blocks
US7423983B1 (en) * 1999-09-20 2008-09-09 Broadcom Corporation Voice and data exchange over a packet based network
JP4415236B2 (ja) 2000-02-07 2010-02-17 ソニー株式会社 画像処理装置及び画像処理方法
US7868665B2 (en) * 2002-03-05 2011-01-11 Nova R&D, Inc. Integrated circuit and sensor for imaging

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006302023A (ja) * 2005-04-21 2006-11-02 Noritsu Koki Co Ltd 粒状ノイズ抑制のための画像処理方法及びプログラム及びこの方法を実施する粒状抑制処理モジュール
KR101318556B1 (ko) 2005-11-02 2013-10-16 소니 주식회사 신호 처리 장치, 방법 및 기록 매체
US8045063B2 (en) 2006-01-16 2011-10-25 Sony Corporation Apparatus, method, and computer program for processing image, and recording medium storing the computer program
JP2008109543A (ja) * 2006-10-27 2008-05-08 Matsushita Electric Ind Co Ltd 撮像装置
JP2011035776A (ja) * 2009-08-04 2011-02-17 Sanyo Electric Co Ltd 映像情報処理装置およびプログラム
US8665377B2 (en) 2009-08-04 2014-03-04 Semiconductor Components Industries, Llc Video information processing apparatus and recording medium having program recorded therein

Also Published As

Publication number Publication date
EP1496472A2 (en) 2005-01-12
EP1496472B1 (en) 2009-09-16
CN1292576C (zh) 2006-12-27
US7106346B2 (en) 2006-09-12
KR101031153B1 (ko) 2011-04-27
DE602004023158D1 (de) 2009-10-29
JP4320572B2 (ja) 2009-08-26
US20050035977A1 (en) 2005-02-17
KR20050009153A (ko) 2005-01-24
EP1496472A3 (en) 2008-08-27
CN1578382A (zh) 2005-02-09

Similar Documents

Publication Publication Date Title
JP4320572B2 (ja) 信号処理装置および方法、記録媒体、並びにプログラム
JP4894595B2 (ja) 画像処理装置および方法、並びに、プログラム
JP4240032B2 (ja) 信号処理装置および方法、記録媒体、並びにプログラム
JP4497160B2 (ja) 画像処理装置および方法、並びにプログラム
JP2004221644A (ja) 画像処理装置および方法、記録媒体、並びにプログラム
JP2010171940A (ja) 画像処理装置及び画像処理方法
JP5295854B2 (ja) 画像処理装置及び画像処理プログラム
JP6548403B2 (ja) 画像処理装置、画像処理方法、及びプログラム
JP2009145991A (ja) 画像処理装置、画像処理方法、プログラムおよび記憶媒体
JP4277550B2 (ja) 信号処理装置および方法、記録媒体、並びにプログラム
JP4329391B2 (ja) 信号処理装置および方法、記録媒体、並びにプログラム
US7558435B2 (en) Signal processing apparatus, method of processing a signal, recording medium, and program
JP2005101949A (ja) 画像処理装置、画像処理方法、画像処理プログラム、および輪郭強調機能を備えたデジタルカメラ
JP4304609B2 (ja) 信号処理装置および方法、記録媒体、並びにプログラム
JP2008048031A (ja) 画像処理装置及び画像処理方法
JP4315055B2 (ja) 信号処理装置および方法、記録媒体、並びにプログラム
JP4793147B2 (ja) 画像処理装置および方法、プログラム格納媒体、並びにプログラム
JP2005328277A (ja) 信号処理装置および方法、記録媒体、並びにプログラム
JP4103647B2 (ja) 信号処理装置および方法、記録媒体、並びにプログラム
JP2007006168A (ja) 画像処理装置および方法、並びにプログラム
JP4466454B2 (ja) 映像補正装置
JP2005328162A (ja) 信号処理装置および方法

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060707

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060707

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20080904

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080930

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20081128

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090507

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090520

R151 Written notification of patent or utility model registration

Ref document number: 4320572

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120612

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130612

Year of fee payment: 4

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees