DE112013004759T5 - Bildaufnahmevorrichtung und Bildverarbeitungsverfahren - Google Patents

Bildaufnahmevorrichtung und Bildverarbeitungsverfahren Download PDF

Info

Publication number
DE112013004759T5
DE112013004759T5 DE112013004759.4T DE112013004759T DE112013004759T5 DE 112013004759 T5 DE112013004759 T5 DE 112013004759T5 DE 112013004759 T DE112013004759 T DE 112013004759T DE 112013004759 T5 DE112013004759 T5 DE 112013004759T5
Authority
DE
Germany
Prior art keywords
subject distance
unit
estimated
lens
restoration
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
DE112013004759.4T
Other languages
English (en)
Other versions
DE112013004759B4 (de
Inventor
c/o FUJIFILM Corporation Endo Hiroshi
c/o FUJIFILM Corporation Irie Kousuke
c/o FUJIFILM CORPORATION Naruse Yousuke
c/o FUJIFILM Corporation Hayashi Kenkichi
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Publication of DE112013004759T5 publication Critical patent/DE112013004759T5/de
Application granted granted Critical
Publication of DE112013004759B4 publication Critical patent/DE112013004759B4/de
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/73—Deblurring; Sharpening
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B13/00—Optical objectives specially designed for the purposes specified below
    • G02B13/001—Miniaturised objectives for electronic devices, e.g. portable telephones, webcams, PDAs, small digital cameras
    • G02B13/0015—Miniaturised objectives for electronic devices, e.g. portable telephones, webcams, PDAs, small digital cameras characterised by the lens design
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/02—Mountings, adjusting means, or light-tight connections, for optical elements for lenses
    • G02B7/14—Mountings, adjusting means, or light-tight connections, for optical elements for lenses adapted to interchange lenses
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/28—Systems for automatic generation of focusing signals
    • G02B7/36—Systems for automatic generation of focusing signals using image sharpness techniques, e.g. image processing techniques for generating autofocus signals
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/50—Depth or shape recovery
    • G06T7/529—Depth or shape recovery from texture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95—Computational photography systems, e.g. light-field imaging systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2101/00—Still video cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)

Abstract

Gemäß der vorliegenden Erfindung, selbst falls Variation (Schätzvariation) in einer Subjektdistanz verursacht wird, die zum Zeitpunkt der Bildaufnahme geschätzt wird, wenn eine Restaurierungsverarbeitung eines aufgenommenen Bildes unter Verwendung eines Restaurierungsfilters entsprechend der Subjektdistanz durchgeführt wird, da ein optimaler Restaurierungsfilter, der einer Subjektdistanz genügt, berücksichtigend die maximale Unendlichkeitsseiten-Schätzvariation, und der keine Überkorrektur verursacht, ausgewählt wird, ist es möglich, eine Auflösungsdegradierung aufgrund von Überkorrektur zu verhindern und Verbesserung der Auflösung durch den Restaurierungsfilter zu erzielen.

Description

  • Technisches Gebiet
  • Die vorliegende Erfindung bezieht sich auf eine Bildaufnahmevorrichtung und ein Bildverarbeitungsverfahren und bezieht sich spezifisch auf eine Bildaufnahmevorrichtung und ein Bildverarbeitungsverfahren, das Punkt-Wiederherstellungsverarbeitung eines Bildes durchführt, das auf Basis einer PSF (Punkt-Spreizfunktion) aufgenommen ist.
  • Stand der Technik
  • Punkt-Wiederherstellverarbeitung eines aufgenommenen Bildes ist ein Prozessieren des Auffindens der Charakteristik der Degradierung (PSF) aufgrund von Aberration oder dergleichen eines fotografischen Objektivs Vorderhand und Wiederherstellen des aufgenommenen Bildes (degradierten Bildes) zu einem Originalbild hoher Auflösung durch Durchführen von Filterverarbeitung durch die Verwendung eines Wiederherstellfilters, das auf Basis der PSF erzeugt ist.
  • PTL 1 offenbart eine Bildverarbeitungsvorrichtung, die einen Bildaufnahmezustand einschließlich einer Subjektdistanz erfasst, einen Restaurierungsfilter entsprechend dem Bildaufnahmezustands jeder Restaurierungsregion eines degradierten Bildes erfasst und das degradierte Bild jeder Restaurierungsregion unter Verwendung des degradierten Bildes und des Restaurierungsfilters wiederherstellt. Hier variiert die PSF gemäß dem Objektivtyp, Zoom-Vergrößerung, dem Sichtwinkel (Bildhöhe) und einer Blende neben der Subjektdistanz und daher werden viele Restaurierungsfilter vorbereitet.
  • Darüber hinaus berechnet eine in PTL 1 beschriebene Subjektdistanz-Berechnungseinheit eine Distanz (Subjektdistanz) zu einem Subjekt an einer Fokusposition und die Subjektdistanz an jeder Fokusdetektionsregion aus einer Phasendifferenz in mehreren Fokusdetektionsregionen und Fokusobjektivpositionen zu einem Zeitpunkt der Fokusdetektion und des Fokussierens.
  • Andererseits enthält PTL 2 eine Beschreibung, dass ein Fehler zwischen einer detektierten Subjektdistanz und einer tatsächlichen Subjektdistanz verursacht wird, falls ein fotographisches Objektiv durch Temperatur transformiert wird, wenn eine Subjektdistanz berechnet wird, auf Basis einer Linsenposition und sie beschreibt ein Kamerasystem, welches diesen Fehler durch Detektieren der Temperatur auffindet.
  • Zitateliste
  • Patentliteratur
    • PTL 1: Japanische Patentoffenlegungsschrift Nr. 2011-211663
    • PTL 2: Japanische Patentoffenlegungsschrift Nr. 2005-173254
  • Zusammenfassung der Erfindung
  • Technisches Problem
  • Die in PTL 1 beschriebene Bildverarbeitungsvorrichtung erfasst einen Bildaufnahmezustand, der eine Subjektdistanz enthält, und führt einen Restaurierungsfilter-Verarbeitung eines degradierten Bildes unter Verwendung eines Restaurationsfilters entsprechend dem Bildaufnahmezustand durch.
  • Falls jedoch ein unangemessener Restaurierungsfilter als ein Restaurierungsfilter verwendet wird, der für die Restaurierungsfilterverarbeitung verwendet wird, gibt es ein Problem, das eine Überkorrektur und seine Beeinträchtigung der Auflösung gegenteilig verursacht wird.
  • Als eine Bedingung, dass die Überkorrektur verursacht wird, ist ein Fall möglich, bei dem die Subjektdistanz in einer inkorrekten Weise gemessen wird, und als Ergebnis ein der inkorrekten Subjektdistanz entsprechender Restaurierungsfilter verwendet wird.
  • Da die Aberration eines Objektivs gemäß einer Fokusposition (Subjektdistanz) variiert, ist es notwendig, einen der Subjektdistanz entsprechenden Restaurierungsfilter anzuwenden. Bezüglich der Subjektdistanz wird ein Verfahren ihres Auffindens aus der Fokussier-Stop-Position einer Fokuslinse zum Zeitpunkt zu dem der Autofokus (AF) verwendet wird, aber es gibt das Problem, dass, wenn die Charakteristik einer Objektivfassung durch Temperatur variiert, die Fokussier-Stop-Position der Fokuslinse variiert, selbst falls die Subjektdistanz konstant ist, und es wird eine inkorrekte Messung durchgeführt.
  • Derweil wird erwogen, dass ein Fehler zwischen einer Subjektdistanz und einer tatsächlichen Subjektdistanz durch Detektieren der Temperatur einer Kamera aufgefunden wird, wie im in PTL 2 beschriebenen Kamerasystem, aber es gibt dem bezüglich eine Grenze, die Subjektdistanz aus der Fokussier-Stop-Position der Fokuslinse exakt aufzufinden. Beispielsweise wird bei AF eines Kontrast-Detektionsschemas oder eines Phasendifferenz-Detektionsschemas berücksichtigt, dass die Genauigkeit der Fokussierbestimmung in einem Fall abnimmt, bei dem der Kontrast des Subjekts niedrig ist, und die Zuverlässigkeit der Fokussier-Stop-Position der Fokuslinse niedrig ist.
  • Darüber hinaus ist es in einem Fall, bei dem ein austauschbares Objektiv als bildgebendes Objektiv verwendet wird, da die Temperatur-Charakteristik abhängig von der Art des austauschbaren Objektivs variiert und es individuelle Differenzen gibt, schwierig, die Subjektdistanz aus der Fokussier-Stop-Position der Fokuslinse genau aufzufinden.
  • Die vorliegende Erfindung ist im Hinblick auf solche Umstände gemacht worden, und es ist eine Aufgabe, eine Bildaufnahmevorrichtung und Bildverarbeitungsverfahren bereitzustellen, welche: eine Auflösungsdegradierung aufgrund von Überkorrektur verhindern, selbst falls eine Variation (Schätzvariation) bei einer Subjektdistanz verursacht wird, welche zum Zeitpunkt der Bildgebung abgeschätzt wird, wenn die Restaurierungsverarbeitung eines aufgenommenen Bildes unter Verwendung eines der Subjektdistanz entsprechenden Restaurierungsfilters durchgeführt wird; und die Verbesserung der Auflösung durch den Restaurierungsfilter erzielen können.
  • Problemlösung
  • Eine Bildaufnahmevorrichtung gemäß einem Modus der vorliegenden Erfindung zum Erreichen der oben erwähnten Aufgabe beinhaltet: eine Bildaufnahmeeinheit, die konfiguriert ist, ein durch ein Bildaufnahmeobjektiv gebildetes Subjektbild aufzunehmen und ein das Subjektbild zeigendes Bild zu erfassen; eine erste Subjektdistanz-Schätzeinheit, welche konfiguriert ist, eine geschätzte Subjektdistanz durch eine Fokusdetektionseinheit bei der Bildaufnahme durch die Bildaufnahmeeinheit zu berechnen; eine Restaurierungsfilter-Speichereinheit, die konfiguriert ist, mehrere Restaurierungsfilter zu speichern, welche auf Basis zumindest einer Punkt-Spreizfunktion entsprechend einer Subjektdistanz erzeugt werden; eine Schätzvariationserfassungseinheit, die konfiguriert ist, eine maximale Unendlichkeits-Seitenschätzvariation in einem Bereich von Schätzvariation in Bezug auf die durch die erste Subjektdistanz-Schätzeinheit geschätzte Subjektdistanz zu erfassen; eine zweite Subjektdistanz-Schätzeinheit, die konfiguriert ist, eine Subjektdistanz zu berechnen, welche die durch die Schätzvariations-Erfassungseinheit erfasste maximale Unendlichkeits-Seitenschätzvariation zu der durch die erste Subjektdistanz-Schätzeinheit geschätzten Subjektdistanz addiert; eine Restaurierungsfilter-Auswahleinheit, die konfiguriert ist, einen Restaurierungsfilter entsprechend einer Unendlichkeitsseite am nächsten an der durch die zweite Subjektdistanz-Schätzeinheit berechneten Subjektdistanz aus den mehreren Restaurierungsfiltern, die in der Restaurierungsfilter-Speichereinheit gespeichert sind, auszuwählen; und eine Restaurierungsverarbeitungseinheit, die konfiguriert ist, eine Restaurierungsverarbeitung des durch die Bildaufnahmeeinheit erfassten Bildes unter Verwendung des durch die Restaurierungsfilter-Auswahleinheit ausgewählten Restaurierungsfilters durchzuführen.
  • Gemäß einem Modus der vorliegenden Erfindung wird die Subjektdistanz durch die erste Subjektdistanz-Schätzeinheit abgeschätzt und wird die maximale Unendlichkeits-Seitenschätzvariation im Bereich der Variation (Schätzvariation) in Bezug auf diese geschätzte Subjektdistanz durch die Schätzvariations-Erfassungseinheit erfasst. Eine Subjektdistanz, welche die durch die erste Subjektdistanz-Schätzeinheit geschätzte Subjektdistanz und die maximale, durch die Schätzvariations-Erfassungseinheit erfasste, unendlichkeitsseitige Schätzvariation addiert, wird berechnet. Diese berechnete Subjektdistanz ist eine Subjektdistanz, wenn die geschätzte Subjektdistanz am meisten auf der Unendlichkeitsseite variiert. Weiter, wenn ein für die Restaurierungsverarbeitung verwendeter Restaurierungsfilter aus mehreren Restaurierungsfiltern ausgewählt wird, die in der Restaurierungsfilter-Speichereinheit gespeichert werden, und die der Subjektdistanz entsprechen, wird ein der Unendlichkeitsseite am nächsten an der berechneten Subjektdistanz entsprechender Restaurierungsfilter ausgewählt.
  • Eine Punkt-Spreizfunktion (PSF) variiert gemäß der Subjektdistanz und eine PSF auf der Nah-Endseite hat eine breitere Form als eine PSF auf der Unendlichkeitsseite. Als Ergebnis wird der Restaurierungsfilter auf der Nah-Endseite vorab als derjenige vorbereitet, der im Vergleich zum Restaurierungsfilter auf der Unendlichkeitsseite stärkere Restaurierungsverarbeitung durchführt. Durch Auswählen eines Restaurierungsfilters entsprechend der Unendlichkeitsseite am nächsten an der Subjektdistanz, wenn die geschätzte Subjektdistanz am meisten auf der Unendlichkeitsseite variiert, ist es möglich, einen Restaurierungsfilter entsprechend der Subjektdistanz auszuwählen, wenn sie am meisten auf der Unendlichkeitsseite variiert, oder einen Restaurierungsfilter zum Durchführen schwächerer Restaurierungsverarbeitung als sie. Durch dieses Mittel ist es möglich, eine Restaurierungsverarbeitung der Überkorrektur durch den ausgewählten Restaurierungsfilter zu verhindern (Auflösungsdegradierung zu verhindern) und die Auflösungsverbesserung durch den Restaurierungsfilter zu erzielen.
  • In einer Bildaufnahmevorrichtung gemäß einem anderen Modus der vorliegenden Erfindung wird es bevorzugt, dass die erste Subjektdistanz-Schätzeinheit die Subjektdistanz abschätzt, basierend auf einer Linsenposition einer Fokuslinse des Bildaufnahmeobjektivs.
  • In einer Bildaufnahmevorrichtung gemäß einem anderen Modus der vorliegenden Erfindung wird es bevorzugt, dass: das Bildaufnahmeobjektiv ein austauschbares Objektiv ist und die Schätzvariations-Erfassungseinheit eine Schätzvariations-Speichereinheit aufweist, welche konfiguriert ist, die maximale Unendlichkeitsseiten-Schätzvariation des austauschbaren Objektivs für jedes austauschbare Objektiv zu speichern, Informationen zum austauschbaren Objektiv, welches anzubringen ist, zu erfassen und eine entsprechende Schätzvariation aus der Schätzvariations-Speichereinheit basierend auf der erfassten Information zu dem austauschbaren Objektiv zu erfassen. Eine Schätzvariation der durch die Art von austauschbarem Objektiv (Hochniveau-Objektiv und Mittelniveau-Objektiv usw.) geschätzte Subjektdistanz variiert, aber in diesem Fall wird Information zum angebrachten austauschbaren Objektiv erfasst und wird eine entsprechende Schätzvariation aus der Schätzvariations-Speichereinheit auf Basis der Information zum austauschbaren Objektiv erfasst.
  • In einer Bildaufnahmevorrichtung gemäß einem anderen Modus der vorliegenden Erfindung wird es bevorzugt, dass: das Bildaufnahmeobjektiv ein Objektiv ist, das eine Schätzvariations-Speichereinheit aufweist, welche konfiguriert ist, die maximale unendlichkeitsseitige Schätzvariation im Bereich der Schätzvariation in Bezug auf die durch die erste Subjektdistanz-Schätzeinheit geschätzte Subjektdistanz zu speichern; und die Schätzvariations-Erfassungseinheit erfasst die Schätzvariation aus der Schätzvariations-Speichereinheit des Objektivs. Durch dieses Mittel ist es möglich, die Schätzvariation aus der Schätzvariations-Erfassungseinheit auf der Objektivseite ohne Bereitstellung der Schätzvariations-Speichereinheit auf der Seite des Bildaufnahme-Vorrichtungsgehäuses zu erfassen.
  • In einer Bildaufnahmevorrichtung gemäß einem anderen Modus der vorliegenden Erfindung ist die maximale unendlichkeitsseitige Schätzvariation im Bereich der Schätzvariation in Bezug auf die durch die erste Subjektdistanz-Schätzeinheit geschätzte Subjektdistanz eine Schätzvariation durch eine individuelle Differenz des austauschbaren Objektivs oder/und der Schätzreaktion durch eine Temperaturcharakteristik des austauschbaren Objektivs.
  • In einer Bildaufnahmevorrichtung gemäß einem anderen Modus der vorliegenden Erfindung wird bevorzugt, dass die Restaurierungsfilter-Speichereinheit mehrere entsprechende Restaurierungsfilter in einem Bereich speichert, zwischen einer Unendlichkeit und einer Subjektdistanz, welche nur die maximale unendlichkeitsseitige Schätzvariation im Bereich der Schätzvariation in Bezug auf eine nächstseitige Subjektdistanz zur durch die erste Subjektdistanz-Schätzeinheit geschätzten nächsten Seitensubjektdistanz addiert. Ein Restaurierungsfilter innerhalb eines Bereichs auf der näheren Seite als einer Subjektdistanz (nachfolgend als „Schätzvariations-Nahbereich” bezeichnet), der die maximale unendlichkeitsseitige Schätzvariation im Bereich der Schätzvariation in Bezug auf die nächstseitige Subjektdistanz zur durch die erste Subjektdistanz-Schätzeinheit abgeschätzten nächstenseitigen Subjektdistanz addiert, kann eine Restaurierungsverarbeitung eine Überkorrektur durchführen. Daher, indem nur mehrere entsprechende Restaurierungsfilter in dem Bereich zwischen dem Schätzvariations-Nähebereich und Unendlichkeit so gespeichert werden, dass ein Restaurierungsfilter innerhalb eines Bereichs auf der näheren Seite als dem Schätzreaktions-Nahbereich nicht ab dem Anfang bereitgestellt wird, wird die Anzahl von in der Restaurierungsfilter-Speichereinheit gespeicherten Restaurierungsfiltern reduziert.
  • In einer Bildaufnahmevorrichtung gemäß einem anderen Modus der Erfindung wird es bevorzugt, dass die Restaurierungsfilter-Speichereinheit mehrere Restaurierungsfilter entsprechend einer Subjektdistanz unabhängig von dem Bildaufnahmeobjektiv speichert. Durch dieses Mittel ist es möglich, mehrere Restaurierungsfilter unabhängig von dem Bildaufnahmeobjektiv zu teilen.
  • In einer Bildaufnahmevorrichtung gemäß einem anderen Modus der vorliegenden Erfindung ist es möglich, dass das Bildaufnahmeobjektiv ein austauschbares Objektiv ist, in welchem die Restaurierungsfilter-Speichereinheit inkorporiert ist. Durch dieses Mittel ist es möglich, einen Restaurierungsfilter entsprechend dem Objektiv aus der Restaurierungsfilter-Speichereinheit auf einer Linsenseite ohne Bereitstellung der Restaurierungsfilter-Speichereinheit auf Seite des Bildaufnahme-Vorrichtungsgehäuses zu ermitteln.
  • In einer Bildaufnahmevorrichtung gemäß einem anderen Modus der vorliegenden Erfindung wird es bevorzugt, dass eine Aufzeichnungseinheit, welche zum Aufzeichnen eines durch Durchführen von Restaurierungsverarbeitung durch die Restaurierungs-Verarbeitungseinheit erfassten Bildes konfigurierte Aufzeichnungseinheit enthalten ist.
  • In einer Bildaufnahmevorrichtung gemäß einem anderen Modus der vorliegenden Erfindung wird es bevorzugt, dass: die Restaurierungsfilter-Speichereinheit mehrere Tabellen aufweist, in welchem mehrere Restaurierungsfilter entsprechend der Schätzvariation gespeichert sind; und die Restaurierungsfilter-Auswahleinheit eine entsprechende Tabelle aus den mehreren Tabellen gemäß der Größe der durch die Schätzvariations-Erfassungseinheit erfassten Schätzvariation auswählt und den Restaurierungsfilter aus der ausgewählten Tabelle auswählt.
  • Ein Bildaufnahmeverfahren gemäß einem anderen Modus der vorliegenden Erfindung beinhaltet: einen Bilderfassungsschritt des Erfassens eines Bildes, das ein Subjektbild zeigt, aus einer Bildaufnahmeeinheit; einen ersten Subjektdistanz-Schätzschritt des Berechnens einer geschätzten Subjektdistanz durch eine Fokusdetektionseinheit bei der Bildaufnahme durch die Bildaufnahmeeinheit; und ein Schritt des Vorbereitens einer Restaurierungsfilter-Speichereinheit, die konfiguriert ist, mehrere Restaurierungsfilter zu speichern, die auf Basis zumindest einer Punkt-Spreizfunktion entsprechend einer Subjektdistanz erzeugt werden; einen Schätzvariations-Erfassungsschritt des Erfassens einer maximalen Unendlichkeits-Seitenschätzvariation in einem Bereich von Schätzvariation in Bezug auf die in dem ersten Subjektdistanz-Schätzschritt geschätzte Subjektdistanz; einen zweiten Subjektdistanz-Schätzschritt des Berechnens einer Subjektdistanz, welche die in dem Schätzvariations-Erfassungsschritt erfasste maximale unendlichkeitsseitige Schätzvariation zu der in dem ersten Subjektdistanz-Schätzschritt geschätzten Subjektdistanz addiert; einen Restaurierungsfilter-Auswahlschritt des Auswählens eines Restaurierungsfilters, der einer Unendlichkeitsseite entspricht, die am nächsten an der in dem zweiten Subjektdistanz-Schätzschritt berechneten Subjektdistanz ist, aus den mehreren in der Restaurierungsfilter-Speichereinheit gespeicherten Restaurierungsfiltern; und einen Restaurierungs-Verarbeitungsschritt des Durchführens von Restaurierungsverarbeitung des durch die Bildaufnahmeeinheit erfassten Bildes unter Verwendung des in dem Restaurierungsfilter-Auswahlschritt ausgewählten Restaurierungsfilters.
  • Vorteilhafte Erfindungseffekte
  • Gemäß der vorliegenden Erfindung, selbst falls eine Variation (Schätzvariation) in einer zum Zeitpunkt der Bildaufnahme geschätzten Subjektdistanz verursacht wird, wenn eine Restaurierungsverarbeitung eines aufgenommenen Bildes unter Verwendung eines der Subjektdistanz entsprechenden Restaurierungsfilters durchgeführt wird, da ein optimaler Restaurierungsfilter, der einer Subjektdistanz genügt, welche die maximale Unendlichkeitsseiten-Schätzvariation berücksichtigt und keine Überkorrektur verursacht, ausgewählt wird, ist es möglich, eine Auflösungsdegradierung aufgrund von Überkorrektur zu verhindern und die Verbesserung der Auflösung durch den Restaurierungsfilter zu erzielen.
  • Kurze Beschreibung der Zeichnungen
  • 1 ist eine Umrisszeichnung einer Bildaufnahmevorrichtung gemäß einem Modus der vorliegenden Erfindung.
  • 2 ist eine Rückansicht der in 1 illustrierten Bildaufnahmevorrichtung.
  • 3 ist ein Hauptteil-Blockdiagramm der in 1 illustrierten Bildaufnahmevorrichtung.
  • 4 ist ein Diagramm, das den Ablauf einer Kontrast-Autofokus-Verarbeitung illustriert.
  • 5 ist ein Diagramm, das Kontrast-Autofokus illustriert.
  • 6 ist ein Hauptteil-Blockdiagramm einer Fokus-Objektiv-Steuereinheit.
  • 7 ist ein Hauptteil-Blockdiagramm einer Haupt-CPU und einer Digitalsignal-Verarbeitungseinheit, die Punkt-Restaurierungsverarbeitung durchführt.
  • 8 ist ein Diagramm, das die Weise des Speicherns und Auswählens eines Restaurierungsfilters in der ersten Ausführungsform der vorliegenden Erfindung illustriert.
  • 9 ist ein Diagramm, das die Weise des Speicherns und Auswählens eines Restaurierungsfilters in der ersten Ausführungsform der vorliegenden Erfindung illustriert.
  • 10 ist ein Diagramm, das die Weise des Speicherns und Auswählens eines Restaurierungsfilters in der ersten Ausführungsform der vorliegenden Erfindung illustriert.
  • 11 ist ein Diagramm, das die Weise des Speicherns und Auswählens eines Restaurierungsfilters in der zweiten Ausführungsform der vorliegenden Erfindung illustriert.
  • 12 ist ein Diagramm, das die Weise des Speicherns und Auswählens eines Restaurierungsfilters in der zweiten Ausführungsform der vorliegenden Erfindung illustriert.
  • 13 ist ein Diagramm, das die Weise des Speicherns und Auswählens eines Restaurierungsfilters in der zweiten Ausführungsform der vorliegenden Erfindung illustriert.
  • 14 ist eine Umrisszeichnung eines Smartphones, welches eine andere Ausführungsform der Bildaufnahmevorrichtung ist.
  • 15 ist ein Blockdiagramm, das eine Hauptteilkonfiguration eines Smartphones illustriert.
  • Beschreibung von Ausführungsformen
  • 1 ist eine Perspektivansicht, welche die Anmutung einer Bildaufnahmevorrichtung 100 gemäß einem Modus der vorliegenden Erfindung zeigt. Die Bildaufnahmevorrichtung 100 beinhaltet ein Bildaufnahme-Vorrichtungsgehäuse 200 und eine Objektivvorrichtung 300, die an dem Bildaufnahme-Vorrichtungsgehäuse 200 in einer austauschbaren Weise angebracht ist. Das Bildaufnahme-Vorrichtungsgehäuse 200 und die Objektivvorrichtung 300 sind in austauschbarer Weise angebracht, durch Kombinieren einer Fassung 246 (Übertragungsmittel und Empfangsmittel), die in dem Bildaufnahme-Vorrichtungsgehäuse 200 enthalten ist, und einer Fassung 346 (Empfangsmittel und Sendemittel) (siehe 3) auf Seite der Objektivvorrichtung 300 entsprechend der Fassung 246. Darüber hinaus ist neben dem Anschluss 246 ein Blitz 240 auf der Frontseite des Bildaufnahme-Vorrichtungsgehäuse 200 installiert und sind ein Auslöseknopf 220-1 und eine Wählscheibe 220-2 zum Einstellen eines Bildaufnahmemodus auf der oberen Oberfläche installiert.
  • Ein Anschluss 247 (Sendemittel und Empfangsmittel) ist in der Fassung 246 installiert, ein Anschluss 347 (Sendemittel und Empfangsmittel) (siehe 3) ist in der Fassung 346 installiert, und wenn die Objektivvorrichtung 300 am Bildaufnahme-Vorrichtungsgehäuse 200 angebracht ist, stehen der entsprechende Anschluss 247 und der Anschluss 347 in Kontakt und Kommunikation wird möglich. Hier sind der Anschluss 247 und der Anschluss 347 in den 1 und 3 konzeptionell illustriert und Position und Anzahl von Anschlüssen in der vorliegenden Erfindung ist nicht auf die in diesen Figuren beschränkt.
  • Derweil, wie in 2 illustriert, sind ein Monitor 212, eine Kreuztaste 260, eine Menü/Ok-Taste 265, eine Wiedergabe-Taste 270 und eine Zurück-Taste 275 usw. auf der Rückseite des Bildaufnahme-Vorrichtungsgehäuse 200 angeordnet. Hier kann die Bildaufnahmevorrichtung 100 gemäß einem Modus der vorliegenden Erfindung entweder eine Objektiv-Austauschtyp-Bildaufnahmevorrichtung oder eine Fest-Objektivtyp-Bildaufnahmevorrichtung sein.
  • 3 ist ein Blockdiagramm, welches die Konfiguration der Bildaufnahmevorrichtung 100 zeigt. Der Betrieb der Bildaufnahmevorrichtung 100 wird integral durch eine Haupt-CPU 214 des Bildaufnahme-Vorrichtungsgehäuses 200 und eine Objektiv-CPU 340 der Objektivvorrichtung 300 gesteuert. Ein Programm, einschließlich eines Programms zum Antrieb einer Zoom-Linse ZL, Fokuslinse FL und Blende I) und für den Betrieb der Haupt-CPU 214 erforderliche Daten werden in einem Flash-ROM 226 und einem ROM 228 in dem Bildaufnahme-Vorrichtungsgehäuse 200 gespeichert und ein Programm (einschließlich eines Programms zum Antreiben der Zoom-Linse ZL, Fokuslinse FL und der Blende I) und für den Betrieb der Objektiv-CPU 340 erforderliche Daten sind in einem ROM 344 in der Objektiv-CPU 340 gespeichert.
  • Neben dem Auslöseknopf 220-1 und der Wählscheibe 220-2 sind eine Bedieneinheit 220, die eine Wiedergabetaste, eine Menü/OK-Taste, eine Kreuztaste und eine Zurücktaste usw. enthält, im Bildaufnahme-Vorrichtungsgehäuse 200 installiert und durch Betätigen der Knöpfe und Tasten, die in der Bedieneinheit 220 enthalten sind, kann der Anwender eine Anweisung wie etwa Auswahl eines Fotografier/Wiedergabemodus, Start des Fotografierens, Auswahl/Wiedergabe/Löschen eines Bildes und eine Zoom-Anweisung erteilen.
  • Ein Signal aus der Bedieneinheit 220 wird an der Haupt-CPU 214 eingegeben und die Haupt-CPU 214 steuert jede Schaltung des Bildaufnahme-Vorrichtungsgehäuse 200 auf Basis des Eingangssignals und sendet/empfängt ein Signal an/aus der Objektivvorrichtung 300 über die Fassung 246 (Sendemittel und Empfangsmittel) und eine Fassungskommunikationseinheit 250 (Sendemittel und Empfangsmittel).
  • Beispielsweise beinhalten die oben erwähnten Anschlüsse einen Erdungsanschluss, einen Synchronisations-Signalanschluss, einen seriellen Kommunikationsanschluss, einen Steuerstatus-Kommunikationsanschluss und einen Stromversorgungsanschluss aus einer Batterie 242 des Bildaufnahme-Vorrichtungsgehäuse 200 an jedem Teil der Objektivvorrichtung 300.
  • Zum Zeitpunkt der Bildaufnahme wird Subjektlicht auf der Lichtempfangsoberfläche eines Bildaufnahmeelements 202 des Bildaufnahme-Vorrichtungsgehäuses 200, durch die Zoom-Linse ZL, die Fokuslinse FL (Bildaufnahmeobjektiv) und Blende I der Objektivvorrichtung 300 gebildet. Das Bildaufnahmeelement 202 wird als CMOS-Typ in der vorliegenden Ausführungsform angenommen, ist aber nicht auf den CMOS-Typ beschränkt und kann ein CCD-Typ sein. Eine Fokuslinse FL, eine Zoom-Linse ZL und eine Blende I werden durch eine Zoom-Linsen-Steuereinheit 310, Fokuslinsen-Steuereinheit 320 (Linsenantriebsmittel) und eine Blendensteuereinheit 330 angetrieben, die durch die Objektiv-CPU 340 gesteuert werden, und Fokus-Steuerung, Zoom-Steuerung und Blendensteuerung werden durchgeführt.
  • Die Zoom-Linsensteuereinheit 310 bewegt die Zoom-Linse ZL in optischer Achsenrichtung und ändert die Bildaufnahmevergrößerung anhand einer Anweisung aus der Objektiv-CPU 340. Darüber hinaus führt die Fokuslinsen-Steuereinheit 320 einen Betrieb zum Bewegen der Fokuslinse FL zurück und vor in der optischen Achsenrichtung durch und fokussiert es auf das Subjekt anhand einer Anweisung aus der Objektiv-CPU 340. Die Blendeneinheit 330 ändert den Blendenwert der Blende I gemäß einer Anweisung aus der Objektiv-CPU 340.
  • Wenn der Auslöseknopf 220-1 in der ersten Stufe (halbes Drücken) gedrückt wird, startet die Haupt-CPU 214 den AF und AE-Betrieb und demgemäß werden aus einem AD-Wandler 204 ausgegebene Bilddaten in einer AE/AWB-Detektionseinheit 224 importiert. Die Haupt-CPU 214 berechnet die Helligkeit (Bildaufnahme-EV-Wert) des Subjekts aus einem integrierten Wert eines in die AE/AWB-Detektionseinheit 224 eingegebenen G-Signals und steuert basierend auf dem Ergebnis den Blendenwert der Blende I, die Ladespeicherzeit (entsprechend einer Verschlussgeschwindigkeit) des Bildaufnahmeelements 202 und die Beleuchtungszeit des Blitzes 240 usw.
  • Eine AF-Detektionseinheit 222 ist ein Teil, der Kontrast AF-Prozessierung oder Phasendifferenz AF-Prozessierung durchführt. In einem Fall, bei dem die Kontrast AF-Prozessierung durchgeführt wird, wird die Fokuslinse FL in einer Objektivfassung so gesteuert, dass der AF-Valuierungswert, der den Fokusierzustand zeigt und durch Integrieren der Hochfrequenzkomponente von Bilddaten in einer Fokusregion berechnet wird, maximal wird. Darüber hinaus, in einem Fall, bei dem die Phasendifferenz AF-Verarbeitung durchgeführt wird, wird die Fokuslinse FL in der Objektivvorrichtung 300 so gesteuert, dass der Betrag von De-Fokus, der aus Phasendifferenzdaten gefunden wird, die unter Verwendung von Pixeln berechnet werden, die mehrere Phasendifferenz in der Fokusregion der Bilddaten aufweisen, 0 wird. Hier bewegt die AF-Detektionseinheit 222 als eine Fokusdetektionseinheit, die den Fokus detektiert.
  • Wenn der AE-Betrieb und der AF-Betrieb enden und der Auslöseknopf 220-1 in der zweiten Stufe (volles Drücken) gedrückt wird, emittiert der Blitz 240 Licht durch Steuerung über eine Blitzsteuereinheit 238. Darüber hinaus wird eine in dem Bildaufnahmeelement 202 akkumulierte Signalladung als ein Spannungssignal entsprechend der Signalladung auf Basis eines Auslesesignals ausgelesen, das aus einer Bildaufnahme-Elementsteuereinheit 201 addiert wird, und zu einer Analog-Signal-Verarbeitungseinheit 203 hinzugefügt. Die Analog-Signal-Verarbeitungseinheit 203 tastet R, G und B Signal jedes Pixels ab und hält sie, durch Korrelations-Doppelabtastverarbeitung für das aus dem Bildaufnahmeelement 202 ausgegebene Spannungssignal, verstärkt sie und fügt sie dann zum A/D-Wandler 204 hinzu. Der A/D-Wandler 204 wandelt analoge R, G und B Signale, die sequentiell einzugeben sind, in digitale R, G und B Signale um und gibt sie an eine Bildeingabesteuerung 205 aus. Hier, in einem Fall, bei dem das 202 ein CMOS-Bildaufnahmeelement ist, ist der A/D-Wandler 204 oft in das Bildaufnahmeelements 202 eingebaut und es gibt einen Fall, bei dem die oben erwähnte Korrelationsdoppelabtastung nicht notwendig ist.
  • Aus der Bildeingabesteuerung 205 ausgegebene Bilddaten werden in eine Digitalsignal-Verarbeitungseinheit 206 eingegeben, einer Signalverarbeitung wie etwa Versatzverarbeitung, Verstärkungssteuerungsverarbeitung einschließlich Weißbalancekorrektur Und Sensitivitätskorrektur, Gamma-Korrekturverarbeitung, Restaurierungsverarbeitung und YC-Verarbeitung unterworfen, die in einer Anzeigesteuereinheit 210 codiert sind, und an den Monitor 212 ausgegeben, nach Schreiben/Lesen zu/aus einem VRAM 230 und dadurch wird ein Subjektbild auf dem Monitor 212 angezeigt.
  • Darüber hinaus kann eine Aufzeichnungseinheit, die ein Mittel zum Aufzeichnen des oben erwähnten, erfassten Subjektbildes ist, enthalten sein. Beispielsweise kann ein durch Restaurierungsverarbeitung erfasstes Bild auf einer Speicherkarte 236 aufgezeichnet werden.
  • Darüber hinaus werden aus dem AD-Wandler 204 in Reaktion auf ein volles Drücken des Auslöseknopfs 220-1 ausgegebene Bilddaten aus der Bildeingabesteuerung 205 in ein SDRAM (Speicher) 232 eingegeben und zeitweilig gespeichert. Nachdem sie im SDRAM 232 zeitweilig gespeichert ist, wird eine Bilddatei über Signalverarbeitung wie etwa Verstärkungs-Steuerverarbeitung, Gamma-Korrekturverarbeitung und YC-Verarbeitung in der Digitalsignal-Verarbeitungseinheit 206, und Kompressionsverarbeitung in das JPEG (Joint Photograhic coding Experts Group) Format oder dergleichen in einer Kompressions/Expansions-Verarbeitungseinheit 208 erzeugt, und wird die Bilddatei durch eine Mediensteuereinheit 234 ausgelesen und auf der Speicherkarte 236 aufgezeichnet. Das auf der Speicherkarte 236 aufgezeichnete Bild kann auf dem Monitor 212 wiedergegeben und angezeigt werden, indem die Wiedergabetaste der Bedieneinheit 220 betätigt wird.
  • Als Nächstes wird Kommunikation zwischen dem Bildaufnahme-Vorrichtungsgehäuse 200 und der Objektivvorrichtung 300 beschrieben. Das Bildaufnahme-Vorrichtungsgehäuse 200 und die Objektivvorrichtung 300 führen eine Kommunikation über die Fassung 246 (Sendemittel und Empfangsmittel) und die Fassungskommunikationseinheit 250 (Sendemittel und Empfangsmittel) des Bildaufnahme-Vorrichtungsgehäuse 200, die Fassung 346 (Sendemittel und Empfangsmittel) und eine Fassungskommunikationseinheit 350 (Sendemittel und Empfangsmittel) der Objektivvorrichtung und von in der Fassung 246 und der Fassung 346 installierten Anschlüssen durch und eine Linsenbewegungsanweisung wird gesendet und empfangen.
  • Die Linsenbewegungsanweisung beinhaltet ein Steuerziel (Zoom-Linse ZL/Fokuslinse FL/Blende I), einen Antriebsmodus, einen numerischen Wert (die Zielposition der Zoom-Linse ZL/Fokuslinse FL und den Diaphragma-Wert der Blende I usw.) und Brems-Ein-Aus-Information (Information, welche zeigt, ob die Spule eines Motors 326 in der Zielposition kurzuschließen ist und eine Bremse anzulegen). Neben dem Obigen wird Kommunikation verschiedener Steuerstatusse (Linsenantriebsstart/Abschlussnotiz usw.) zwischen dem Bildaufnahme-Vorrichtungsgehäuse 200 und der Objektivvorrichtung 300 über einen Steuerstatus-Kommunikationsanschluss durchgeführt.
  • Kontrast-AF
  • Als Nächstes wird Kontrast-AF unter Bezugnahme auf 4 und 5 beschrieben.
  • 4 illustriert ein Flussdiagramm einer Kontrast-AF-Verarbeitung. Wenn die Kontrast-AF-Verarbeitung startet, gibt zuerst die Haupt-CPU 214 eine Linsenbewegungsanweisung, welche die Fokuslinse FL zu einer Ausgangsposition (HP) bewegt, an die Objektivvorrichtung 300 aus, um die Linsenposition der Fokuslinse FL zu detektierten und bewegt die Fokuslinse FL zur HP (Schritt S10).
  • Wenn die Fokuslinse FL sich zur HP bewegt, wird der Zählwert eines Auf-Ab-Zählers 320-8 (6) rückgesetzt, um einen Zählwert i = 0 zu machen (Schritt S12). Hier wird ein HP-Sensor 322 (6) wie etwa ein Fotounterbrecher in der HP eingestellt und wenn die Fokuslinse FL, die basierend auf der Linsenbewegungsanweisung bewegt wird, die HP erreicht, gibt der HP-Sensor 322 ein Linsendetektionssignal aus. Das Linsendetektionssignal wird als ein Rücksetzsignal verwendet, welches den Zählwert des Auf-Ab-Zählers 320-8, der als Linsenpositions-Detektionsmittel fungiert, auf 0 rücksetzt. Darüber hinaus kann die Fokuslinse FL zur HP bewegt werden, wenn die Objektivvorrichtung 300 am Bildaufnahme-Vorrichtungsgehäuse 200 angebracht ist, oder wenn eine Stromversorgung eingeschaltet wird.
  • Nachfolgend gibt die Haupt-CPU 214 eine Linsenbewegungsanweisung, welche die Fokuslinse FL von der Unendlichseite (INF) zur Nahseite bewegt (AF-Suche), wie in 5 illustriert, an die Objektivvorrichtung 300 aus (Schritt S14).
  • Während der AF-Suche erfasst die Haupt-CPU 214 den Zählwert aus dem Auf-Ab-Zähler 320-8 der Objektivvorrichtung 300 als ein Linsenpositionssignal (Schritt S16), erfasst Bilddaten in einer Fokusregion für jede richtige Linsenposition und berechnet den AF-Evaluierungswert in der AF-Detektionseinheit 222 (3) (Schritt S18). Hier berechnet die AF-Detektionseinheit 222 den AF-Evaluierungswert, der den Fokuszustand durch Integrieren der Hochfrequenzkomponente der Bilddaten in der Fokusregion berechnet, und gibt den berechneten AF-Evaluierungswert an die Haupt-CPU 214 aus.
  • Die Haupt-CPU 214 entscheidet, ob die AF-Suche endet (ob Zählwert i (Fokuslinsen-FL-Position) das Nahende ist (0,20)) (Schritt S20) und in einem Fall, bei dem der Zählwert i nicht das Nahende ist, verschiebt sie sich zu Schritt S14, um die AF-Suche fortzusetzen.
  • Derweil, wenn festgestellt wird, dass die AF-Suche endet, beendet die Haupt-CPU 214 die Linsenposition (Fokusierposition), in welcher der AF-Evaluierungswert Maximalwert auf Basis jedes AF-Evaluierungswerts und der Linsenposition, die in Schritt S16 und S18 erfasst werden (Schritt S22 und (A) von 5).
  • Die Haupt-CPU 214 gibt eine Linsenpositionsanweisung aus, welche die Fokuslinse FL zur berechneten Fokusierposition bewegt an die Objektivvorrichtung 300 und bewegt die Fokuslinse FL zur Fokusierposition (Schritt S24 und (B) von 5).
  • Darüber hinaus berechnet die Haupt-CPU 214 eine Subjektdistanz ab der Linsenposition, die in Schritt S22 berechnet ist (Schritt S26).
  • Fokuslinsen-Steuereinheit
  • 6 illustriert ein Funktionsblockdiagramm der Fokuslinsen-Steuereinheit 320. Eine Linsenbewegungsanweisung wird aus der Haupt-CPU 214 über die Objektiv-CPU 340 an die Fokuslinsen-Steuereinheit 320 gesendet.
  • Die Fokuslinsen-Steuereinheit 320 beinhaltet hauptsächlich eine Steuerung 320-2, einen Treiber 320-4, einen Motor 320-6 und den Auf-Ab-Zähler 320-8. Die Linsenbewegungsanweisung aus der Objektiv-CPU 340 wird durch die Steuerung 320-2 empfangen. Weiter wird ein der Linsenbewegungsanweisung entsprechendes Impulssignal aus der Steuerung 320-2 ausgegeben. Das aus der Steuerung 320-2 ausgegebene Impulssignal wird am Treiber 320-4 eingegeben. Weiter treibt der Treiber 320-4 den Motor 320-6 anhand des eingegebenen Impulssignals. Hier wird es bevorzugt, dass ein Schrittmotor als der Motor 320-6 verwendet wird. Andererseits wird das aus der Steuerung 320-2 ausgegebene Impulssignal auch an den Auf-Ab-Zähler 320-8 gesendet.
  • Der Auf-Ab-Zähler 320-8 zählt das gesendete Impulssignal und gibt den Zählwert aus. Hier, da der Auf-Ab-Zähler 320-8 auf 0 rückgesetzt wird, wenn die Fokuslinse FL die HP erreicht, durch den HP-Sensor 322, wie oben erwähnt, zeigt der Zählwert des Auf-Ab-Zählers 320-8 die Linsenposition der Fokuslinse FL basierend auf der HP.
  • Punkt-Restaurierungsverarbeitung
  • 7 illustriert ein Hauptblockdiagramm der Haupt-CPU 214 und der Digitalsignal-Verarbeitungseinheit 206, die Punkt-Restaurierungsverarbeitung durchführen. Die Haupt-CPU 214 beinhaltet eine Linsen-Positions-Eingabeeinheit 214-2, eine erste Subjektdistanz-Schätzeinheit 214-4, eine Schätzvariations-Erfassungseinheit 214-6 und eine zweite Subjektdistanz-Schätzeinheit 214-8 als eine Funktion für die Restaurierungsverarbeitung.
  • Die Linsenpositions-Eingabeeinheit 214-2 gibt den aktuellen Zählwert des Auf-Ab-Zählers 320-8 nach Fokussteuerung von Fokuslinse FL als Information ein, welche die Linsenposition zeigt.
  • Die erste Subjektdistanz-Schätzeinheit 214-4 gibt die, die Linsenposition zeigende Information aus der Linsenpositions-Eingabeeinheit 214-2 ein und schätzt die Distanz des Subjekts (Subjektdistanz), das durch die Fokuslinse FL fokussiert ist, der aktuellen Linsenposition ab. Da die Linsenposition der Fokuslinse FL und die durch die Linsenposition fokussierte Subjektdistanz eine gewisse Beziehung haben, ist es hier möglich, die Subjektdistanz aus der Linsenposition der Fokuslinse FL zu schätzen.
  • Die Subjektdistanz (erste Subjektdistanz) zeigende Information, abgeschätzt durch die erste Subjektdistanz-Schätzeinheit 214-4, wird an die Schätzvariations-Erfassungseinheit 214-6 und die zweite Subjektdistanz-Abschätzeinheit 214-8 ausgegeben.
  • Die Schätzvariations-Erfassungseinheit 214-6 berechnet den Fehler der ersten Subjektdistanz (Schätzvariation) auf Basis der die erste Subjektdistanz zeigenden Information, die aus der ersten Subjektdistanz-Schätzeinheit 214-4 ausgegeben wird. Hier ist die Schätzvariation eine Variation der aus der Linsenposition der Fokuslinse FL geschätzten ersten Subjektdistanz und wird abhängig von der Detektionsgenauigkeit der Fokussier-Stop-Position der Fokuslinse FL usw. verursacht. Wenn sich beispielsweise die Objektiv-Fassungscharakteristik durch Temperatur ändert, selbst falls die Subjektdistanz konstant ist, ändert sich die Fokussier-Stop-Position der Fokuslinse FL und wird eine inkorrekte Messung durchgeführt (Schätzvariation tritt auf).
  • Darüber hinaus gibt es bezüglich der Schätzvariation einen Fehlerbereich (Bereich der Schätzvariation) der sich zur Unendlichkeitsseite und zur Nahendseite um die erste Subjektdistanz herum erstreckt. Die Schätzvariations-Erfassungseinheit 214-6 berechnet die maximale Unendlichkeits-Seitenschätzvariation im Bereich der Schätzvariation in Bezug auf die erste Subjektdistanz.
  • Beispielsweise in einem Fall, bei dem der Zählwert des Auf-Ab-Zählers 320-8 ab der HP (oder INF) sich vom Original-Zählwert unterscheidet, selbst falls die Subjektdistanz konstant ist (in einem Fall, bei dem sich die Fokussier-Stop-Position der Fokuslinse FL unterscheidet), ist der Fehler dieses Zählwerts die Schätzvariation. In einem Fall einer Objektivvorrichtung, in welcher der Fehler des Zählwertes innerhalb des Bereichs von ±n Impulsen auftritt, entspricht der Bewegungsbetrag der Fokuslinse FL für n Impulse der maximalen Unendlichkeits-Seitenschätzvariation. Hier, da die Variation der Fokussier-Subjektdistanz pro Impuls abhängig von der aktuellen Fokussier-Stop-Position der Fokuslinse FL (erste Subjektdistanz) variiert, berechnet die Schätzvariations-Erfassungseinheit 214-6 die Schätzvariation der ersten Subjektdistanz auf Basis der die erste Subjektdistanz zeigenden Information und Information zum Fehler des Zählwerts (n Impulse).
  • Hier kann der Fehler zu verschiedenen Zuständen berechnet oder aus einer in einer Fehlerspeichereinheit (nicht illustriert) gespeicherten Fehlerdatenbank ausgewählt werden, die ein Mittel zum Speichern des Fehlers ist. Beispielsweise ist der Fehler für Individuelle (individuelle Differenzen) in einem austauschbaren Objektiv einmalig oder hängt von der Temperatur-Charakteristik des austauschbaren Objektivs ab.
  • Beispielsweise im Falle der Bildaufnahmevorrichtung 100 vom austauschbaren Objektivtyp, da der Fehlerbereich sich für jedes austauschbares Objektivs ändert, kann eine Schätzvariation-Speichereinheit, welche ein Mittel zum Speichern eines Fehlers (Schätzvariation) ist, in der Schätzvariations-Erfassungseinheit 214-6 enthalten sein, um den Fehler jedes austauschbaren Objektivs (Schätzvariation) zu speichern. In diesem Fall, wenn die Objektivvorrichtung 300 angebracht wird, wird sich auf die Objektivvorrichtung 300 beziehende Information erfasst und wird eine entsprechende Schätzvariation aus der Schätzvariations-Speichereinheit auf Basis der Information erfasst. Hier kann die oben erwähnte Schätzvariations-Speichereinheit in der Objektivvorrichtung 300 installiert sein.
  • Information, welche die durch die Schätzvariations-Erfassungseinheit 214-6 berechnete Schätzvariation zeigt, wird an die zweite Subjektdistanz-Schätzeinheit 214-8 ausgegeben. Die zweite Subjektdistanz-Schätzeinheit 214-8 berechnet die zweite Subjektdistanz, welche die geschätzte erste Subjektdistanz und den maximalen Fehler (Schätzvariation) auf der Unendlichkeitsseite addiert und gibt Information, welche die berechnete Subjektdistanz zeigt, an die Restaurierungsfilter-Auswahleinheit 206-4 der Digitalsignal-Verarbeitungseinheit 206 aus.
  • In der Digitalsignal-Verarbeitungseinheit 206 sind sich auf die Restaurierungsverarbeitung beziehenden Hauptteile eine Restaurierungs-Verarbeitungseinheit 206-2, die Restaurierungsfilter-Auswahleinheit 206-4 und eine Restaurierungsfilter-Speichereinheit 206-6.
  • Die Restaurierungsfilter-Speichereinheit 206-6 speichert mehrere Restaurierungsfilter, die auf Basis der Punkt-Spreizfunktion verschiedener Linsen, die in der Objektivvorrichtung 300 für jede Linse enthalten sind, erzeugt sind. Darüber hinaus entsprechen mehrere Restaurierungsfilter einer Kombination einer Subjektdistanz, Zoom-Vergrößerung, f-Zahl und Bildhöhe (Restaurierungsregion) und sind viele Restaurierungsfilter. Hier wird, zur leichteren Erläuterung angenommen, dass die Restaurierungsfilter-Speichereinheit 206-6 die Restaurierungsfilter anhand der Subjektdistanz diskret speichert.
  • In die Restaurierungsfilter-Auswahleinheit 206-4 wird Information, welche die zweite Subjektdistanz zeigt, aus der zweiten Subjektdistanz-Schätzeinheit 214-8 eingegeben und sie wählt einen Restaurierungsfilter entsprechend der zweiten Subjektdistanz aus der Restaurierungsfilter-Speichereinheit 206-6 auf Basis dieser eingegebenen Information aus. Hier wird in einem Fall, bei dem der, der zweiten Subjektdistanz entsprechende Restaurierungsfilter nicht in der Restaurierungsfilter-Speichereinheit 206-6 gespeichert wird, ein Restaurierungsfilter auf der Unendlichkeitsseite am nächsten an der zweiten Subjektdistanz ausgewählt. Hier werden Details eines Restaurierungsfilter-Auswahlverfahrens später beschrieben.
  • Die Restaurierungs-Verarbeitungseinheit 206-2 führt Restaurierungsverarbeitung in Bezug auf Bilddaten durch die Verwendung des Restaurierungsfilters durch, welcher durch die Restaurierungsfilter-Auswahleinheit 206-4 ausgewählt wird.
  • Als Nächstes wird das Restaurierungsfilter-Erzeugungsverfahren beschrieben.
  • Zuerst wird ein Punkt-Bild (Punkt-Lichtquelle) durch die Objektivvorrichtung 300 aufgenommen, um eine PSF (Punkt-Spreizfunktion) der Bildaufnahmelinse der Objektivvorrichtung 300 der Bildaufnahmevorrichtung 100 zum Zeitpunkt der Justierung, wie etwa zur Zeit bevor die Bildaufnahmevorrichtung 100 ausgeliefert wird, zu messen und wird ein Unschärfe-(Blur)-Bild (das Punktbild ist expandiert) durch Aberration erfasst.
  • Zu dieser Zeit gibt es ein Verfahren des Verwendens des Bildaufnahmeelements 202, das der Messung gewidmet ist, und ein Verfahren der Verwendung des Bildaufnahmeelements 202, das tatsächlich in der Bildaufnahmevorrichtung 100 inkorporiert ist. Im ersteren Fall ist es für die Messung von PSF entsprechend nur zur Objektivvorrichtung 300 geeignet und im letzteren Fall ist es zur Messung von der PSF geeignet, welche den Einfluss des Bildaufnahmeelements 202 (Filterelement usw.) ebenfalls berücksichtigt, geeignet.
  • Nachfolgend, wenn das durch Aufnehmen des Punktbilds durch eine Bildaufnahmeeinheit einschließlich der Objektivvorrichtung 300 und dem Bildaufnahmeelements 202 erfasste Unschärfe-Bild als G(X, Y) angenommen wird, das Ursprungspunktbild als F(X, Y) angenommen wird und die Punkt-Spreizfunktion (PSF) als H(X, Y) angenommen wird, können sie durch die nachfolgende Gleichung ausgedrückt werden.
  • Gleichung 1
    • G(X, Y) = H(X, Y)*F(X, Y) wobei * Konvolierung angibt.
  • H(X, Y) von Gleichung 1 (das heißt die Punkt-Spreizfunktion (PSF)) wird auf Basis des Unschärfe-Bilds G(X, Y) berechnet, welches durch Aufnehmen des Punkt-Bilds wie oben erfasst wird.
  • Als Nächstes wird die Inversfunktion der oben erwähnten berechneten Punkt-Spreizfunktion (PSF) berechnet. Wenn diese inverse Funktion als R(X, Y) angenommen wird, wird durch Durchführen von Konvolierungs-Verarbeitung von Bild G(X, Y), das einer Phasenmodulation unterworfen wird, wie die nachfolgende Gleichung 2 durch R(X, Y) ein Restaurierungsbild entsprechend dem Originalbild F(X, Y) erfasst (Restaurierungsverarbeitung).
  • Gleichung 2
    • G(X, Y)*R(X, Y) = F(X, Y)
  • Dieses R(X, Y) wird ein Restaurierungsfilter genannt. Als Restaurierungsfilter ist es möglich, einen Kleinste-Quadrate-Filter (Wiener-Filter) zu verwenden, der den Quadratdurchschnittsfehler zwischen dem Ursprungsbild und dem Restaurierungsbild minimiert, einen begrenzten Reverskonvolierungsfilter, einen rekursiven Filter und einen Homomorphismusfilter usw.
  • Erste Ausführungsform
  • 8 bis 10 sind Diagramme zum Beschreiben einer Weise des Speicherns und Auswählen eines Restaurierungsfilters in der ersten Ausführungsform der vorliegenden Erfindung, die durch die Restaurierungsfilter-Auswahleinheit 206-4 und die Restaurierungsfilter-Speichereinheit 206-6 durchgeführt wird.
  • 8 ist eine Bildansicht der Punkt-Spreizfunktion PSF für jede von mehreren Subjektdistanzen, die ein vorbestimmtes Subjekt-Distanzintervall in einen Bereich von Nah-Ende (0,2 m) bis unendlich (INF) aufweisen. Wie oben erwähnt, wird ein Restaurierungsfilter auf Basis dieser PSFs erzeugt.
  • Wie in 8 illustriert, hat die PSF auf der Unendlichkeitsseite ein kleineres Ausmaß als die PSF auf der Nahendseite und daher ist die Restaurierungsverarbeitung durch einen Restaurierungsfilter auf der Unendlichkeitsseite eine schwächere Restaurierungsverarbeitung als die Restaurierungsverarbeitung durch einen Restaurierungsfilter auf der Nahendseite.
  • Darüber hinaus wird im in 8 illustrierten Beispiel angenommen, dass Restaurierungsfilter entsprechend sechs Distanzen (Subjektdistanzen) des Nahendes (0,2 m), 0,25 m, 0,33 m, 0,5 m, 1 m und INF in einem Bereich (Bereich, in welchem Bildaufnahme möglich ist) von Nahende (0,2 m) bis unendlich gespeichert werden. Hier sind diese Subjektdistanzen zu entsprechenden Linsenpositionen korrespondierende Subjektdistanzen, welche den Bewegungsbetrag vom nahen Ende der Fokuslinse FL bis INF in fast fünf gleiche Teile unterteilen.
  • Der durch einen Pfeil in 8 gezeigte Bereich zeigt eine Schätzvariation in jeder Subjektdistanz in einem Fall, bei dem 0,2 m, 0,25 m, 0,33 m, 0,5 m, 1 m und INF durch die erste Subjektdistanz-Schätzeinheit 214-4 geschätzt wird.
  • Darüber hinaus zeigt ein Kreis an einer Pfeilspitze in der Figur eine Distanz (zweite Subjektdistanz), welche die erste Subjektdistanz und die maximale Unendlichkeitsseiten-Schätzvariation in einem Bereich von Schätzvariation in Bezug auf die erste Subjektdistanz in einem Fall addiert, bei dem die Subjektdistanz (erste Subjektdistanz), welche durch die erste Subjektdistanz-Schätzeinheit 214-4 geschätzt wird, 0,2 m, 0,25 m, 0,33 m, 0,5 m, 1 m oder INF beträgt.
  • In 8 gibt es in einem Fall, bei dem die durch die erste Subjektdistanz-Schätzeinheit 214-4 geschätzte erste Subjektdistanz 0,2 m ist, einen Fehlerbereich von 0,25 m bis 02 m und ist die durch die zweite Subjektdistanz-Schätzeinheit 214-8 abgeschätzte zweite Subjektdistanz, die maximale Unendlichkeits-Seitenschätzvariation berücksichtigend, 0,25 m. Weiter wird ein Restaurierungsfilter auf der Unendlichkeitsseite am nächsten an der zweiten Subjektdistanz verwendet. Das heißt, dass ein entsprechend einer Subjektdistanz von 0,25 m erzeugter Restaurierungsfilter ausgewählt wird und eine Überkorrektur verhindert wird. Das heißt, es wird angenommen, dass der, der Unendlichkeitsseite am nächsten an der zweiten Subjektdistanz entsprechenden Restaurierungsfilter ausgewählt wird.
  • Hier ist die Überkorrektur bei der Restaurierungsverarbeitung, eine nähere Subjektdistanz abzuschätzen als eine tatsächliche Subjektdistanz und Restaurierungsverarbeitung durch die Verwendung eines stärkeren (größeren) Restaurierungsfilters als einen ursprünglichen zu verwendenden Restaurierungsfilter durchzuführen. Wenn die Überkorrektur bei der Restaurierungsverarbeitung durchgeführt wird, verschlechtert sich die Qualität eines erfassten Bildes.
  • Als ein konkretes Beispiel, in welchem Überkorrektur bei der Restaurierungsverarbeitung auftritt, in einem Fall, bei dem die durch die erste Subjektdistanz-Schätzeinheit 214-4 geschätzte erste Subjektdistanz 0,25 m ist und der Fehlerbereich von 0,33 m bis 0,2 m reicht, wenn ein entsprechend einer Subjektdistanz von 0,25 m oder 0,2 m erzeugter Restaurierungsfilter ausgewählt wird, gibt es eine Möglichkeit einer Überkorrektur bei der Restaurierungsverarbeitung. Das heißt, da eine tatsächliche Subjektdistanz von 0,33 m bis 0,2 m reicht, in einem Fall, bei dem die tatsächliche Subjektdistanz 0,33 m ist, verursacht eine Restaurierungsverarbeitung, die einen Restaurierungsfilter verwendet, der entsprechend einer Subjektdistanz von 0,25 m oder 0,2 m erzeugt ist, Überkorrektur.
  • Andererseits, in einem Fall, bei dem ein anhand einer Subjektdistanz, die stark auf der Unendlichkeitsseite im Vergleich zur zweiten Subjektdistanz getrennt ist, erzeugter Restaurierungsfehler, kann der Effekt der Restaurierungsverarbeitung nicht ausreichend erfasst werden. Wenn beispielsweise die Restaurierungsverarbeitung unter Verwendung eines Restaurierungsfilters entsprechend INF durchgeführt wird, obwohl die zweite Subjektdistanz 0,25 m beträgt, ist die Restaurierungsverarbeitung schwach und es ist nicht möglich, den Effekt der Restaurierungsverarbeitung ausreichend zu ermitteln.
  • Daher ist es in einem Fall, bei dem die durch die erste Subjektdistanz-Schätzeinheit 214-4 geschätzte erste Subjektdistanz 0,25 m beträgt und die durch die zweite Subjektdistanz-Schätzeinheit 214-8 geschätzte zweite Subjektdistanz 0,33 m beträgt, möglich, das Auftreten von Überkorrektur unter Verwendung eines entsprechend einer Subjektdistanz von 0,33 m erzeugten Restaurierungsfilters zu verhindern.
  • In 8, ähnlich zu einem Fall, bei dem 0,25 m, 0,33 m, 0,5 m, 1 m oder INF als die erste Subjektdistanz geschätzt wird, zeigt ein Pfeilbereich den Fehlerbereich der Subjektdistanz und wird innerhalb eines Fehlerbereichs ein der Unendlichkeitsseite am nächsten an der zweiten Subjektdistanz entsprechender Restaurierungsfilter ausgewählt. Daher wird ein entsprechend einer Subjektdistanz von 0,33 m erzeugter Restaurierungsfilter in einem Fall verwendet, bei dem 0,25 m als die erste Subjektdistanz abgeschätzt wird, wirdt ein entsprechend einer Subjektdistanz von 0,5 m erzeugter Restaurierungsfilter in einem Fall verwendet, bei dem 0,33 m geschätzt wird, wird ein entsprechend einer Subjektdistanz von 1 m erzeugter Restaurierungsfilter in einem Fall verwendet, bei dem 0,5 m geschätzt wird, und wird ein entsprechend einer Subjektdistanz von INF erzeugter Restaurierungsfilter in einem Fall verwendet, bei dem INF geschätzt wird.
  • Darüber hinaus, in einem Fall, bei dem eine Subjektdistanz, die sich von 0,2 m, 0,25 m, 0,33 m, 0,5 m, 1 m und INF unterscheidet, als die erste Subjektdistanz geschätzt wird, beispielsweise in einem Fall, bei dem die Subjektdistanz zwischen 0,33 m und 0,5 m abgeschätzt wird, ist die zweite Subjektdistanz, welche die maximale Schätzvariation berücksichtigt eine Subjektdistanz zwischen 0,5 m und 1 m. Daher ist ein Restaurierungsfilter auf der Unendlichkeitsseite am nächsten an dieser zweiten Subjektdistanz ein Restaurierungsfilter, der entsprechend einer Subjektdistanz von 1 m erzeugt wird.
  • Darüber hinaus kann in der Bildaufnahmevorrichtung 100 beim Fotografieren in einem Fall, bei dem vorab entschieden wird, dass ein Distanzort fotografiert wird (Szenerie-Modus) ein entsprechend einer Subjektdistanz von INF erzeugter Restaurierungsfilter unabhängig von der zweiten Subjektdistanz verwendet werden kann.
  • 9 illustriert einen Messfehler oder dergleichen entsprechend einem Objektiv (austauschbares Objektiv), das sich von der Objektivvorrichtung 300 unterscheidet und da die Temperaturcharakteristik abhängig vom Objektivtyp variiert und es individuelle Differenzen gibt, variiert die Schätzvariation der aus der Fokussier-Stop-Position der Fokuslinse geschätzten Subjektdistanz.
  • Im Vergleich mit dem Fall von 8 illustriert 9 einen Fall, bei dem Schätzvariation (Fehlerbereich), der durch einen Fallbereich gezeigt ist, groß (lang) ist. Im Falle von 9 wird ein Restaurierungsfilter auf der Unendlichkeitsseite am nächsten an der maximal möglichen Subjektdistanz ab der zweiten Subjektdistanz verwendet. Das heißt, dass ein entsprechend einer Subjektdistanz von 0,33 m erzeugter Restaurierungsfilter in einem Fall verwendet wird, wo 0,2 m als die erste Subjektdistanz geschätzt wird, ein entsprechend einer Subjektdistanz von 0,5 m erzeugter Restaurierungsfilter in einem Fall verwendet wird, bei dem 0,25 m geschätzt wird, ein entsprechend einer Subjektdistanz von 1 m erzeugter Restaurierungsfilter in einem Fall verwendet wird, bei dem 0,33 m geschätzt wird, und ein entsprechend einer Subjektdistanz von INF erzeugter Restaurierungsfilter in einem Fall verwendet wird, bei dem 1 m oder mehr geschätzt wird.
  • Im Vergleich mit dem Fall von 9 illustriert 10 einen Fall, bei dem ein Fehlerbereich größer (länger) ist. Im Falle von 10, selbst falls das Nahende (0,2) als die erste Subjektdistanz geschätzt wird, ist eine Subjektdistanz (zweite Subjektdistanz), welche die Schätzvariation berücksichtigt, größer als 1 m. Daher ist ein Restaurierungsfilter, der keine Überkorrektur verursacht, nur ein entsprechend zu INF erzeugter Restaurierungsfilter. Das heißt, im Fall eines Objektivs, das die in 10 illustrierte Schätzvariation aufweist, wird nur ein entsprechend zu INF erzeugter Restaurierungsfilter unabhängig von einer geschätzten Subjektdistanz verwendet.
  • Zweite Ausführungsform
  • 11 bis 13 sind Diagramme zum Beschreiben einer Weise des Speicherns und Auswählens eines Restaurierungsfilters in der zweiten Ausführungsform der vorliegenden Erfindung.
  • Ähnlich zur in den 8 bis 10 illustrierten ersten Ausführungsform, wird ein einer Subjektdistanz entsprechender Restaurierungsfilter in der zweiten Ausführungsform, die in den 11 bis 13 illustriert ist, gespeichert, aber eine Weise des Speicherns des Restaurierungsfilter in der Restaurierungsfilter-Speichereinheit 206-6 ist in der zweiten Ausführungsform anders.
  • In der zweiten Ausführungsform speichert die Restaurierungsfilter-Speichereinheit 206-6, die eine Restaurierungsfilter-Speichereinheit ist, einen entsprechenden Restaurierungsfilter innerhalb eines Bereichs zwischen der Unendlichkeit und einer Subjektdistanz (nachfolgend als „Schätzvariations-Nahbereich” bezeichnet), die nur die maximale unendlichkeitsseitige Schätzvariation in einem Bereich von Schätzvariation in Bezug auf die Nächstseiten-Subjektdistanz zur durch die erste Subjektdistanz-Schätzeinheit 214-4 geschätzten Nächstseiten-Subjektdistanz addiert.
  • Es gibt die Möglichkeit, dass ein Restaurierungsfilter innerhalb eines Bereichs auf der näheren Seite als der Schätzvariation-Nahbereich Restaurierungsverarbeitung durchführt, die eine Überkorrektur verursacht. Daher werden nur mehrere entsprechende Restaurierungsfilter innerhalb eines Bereichs zwischen dem Schätzvariations-Nahbereich und Unendlichkeit in der Restaurierungsfilter-Speichereinheit 206-6 gespeichert, so dass ein Restaurierungsfilter innerhalb eines Bereichs auf der näheren Seite als dem Schätzvariations-Nahbereich nicht ab dem Anfang gespeichert wird. Durch dieses Mittel wird die Anzahl von in der Restaurierungsfilter-Speichereinheit 206-6 zu speichernden Restaurierungsfiltern reduziert.
  • Das heißt, während ein Restaurierungsfilter in der Restaurierungsfilter-Speichereinheit 206-6 unabhängig davon gespeichert wird, ob er für jede von mehreren Subjektdistanzen verwendet wird, die vorab in der ersten Ausführungsform eingestellt werden, wird in der zweiten Ausführungsform ein Restaurierungsfilter, der nicht verwendet wird, abhängig von einer Beziehung zwischen dem Fehlerbereich einer Subjektdistanz nicht in der Restaurierungsfilter-Speichereinheit 206-6 gespeichert (siehe 11 bis 13).
  • 11 ist ein Diagramm, welches die zweite Ausführungsform entsprechend der in 8 illustrierten ersten Ausführungsform illustriert. Wenn die in 11 illustrierte zweite Ausführungsform und die in 8 illustrierte erste Ausführungsform verglichen werden, gibt es den Unterschied, dass in der zweiten Ausführungsform ein, einer Subjektdistanz von 0,2 m entsprechender Restaurierungsfilter nicht vorgesehen ist.
  • Im Falle einer durch Pfeile in 11 gezeigten Schätzvariation, selbst falls die erste Subjektdistanz als am Nahende (0,2 m) befindlich abgeschätzt wird, wobei ein Fehlerbereich berücksichtigt wird, ist die zweite Subjektdistanz (Schätzvariations-Nahbereich) 0,25 m und ist ein der Unendlichkeitsseite am nächsten an dem Schätzvariations-Nahbereich entsprechender Restaurierungsfilter ein entsprechend einer Subjektdistanz von 0,25 m erzeugter Restaurierungsfilter. Mit anderen Worten, in einem Fall, bei dem ein Filterbereich, wie in 11 illustriert, vorgesehen ist, wird ein einer Subjektdistanz von 0,2 m entsprechend erzeugter Restaurierungsfilter, wie in 8 illustriert, nicht verwendet, unabhängig davon, wie die erste Subjektdistanz ist. Weiter wird der Restaurierungsfilter, der nicht verwendet wird, nicht in der Restaurierungsfilter-Speichereinheit 206-6 gespeichert.
  • 12 ist ein Diagramm, welches die der in 9 illustrierten ersten Ausführungsform entsprechende zweite Ausführungsform illustriert. Wenn die in 12 illustrierte zweite Ausführungsform und die in 9 illustrierte erste Ausführungsform verglichen werden, ist ein Unterschied, dass in der zweiten Ausführungsform die Restaurierungsfilter entsprechend Subjektdistanzen von 0,2 m und 0,25 m vorgesehen sind.
  • Im Falle einer durch Pfeile in 12 gezeigten Schätzvariation, selbst falls die erste Subjektdistanz als am Nahende (0,2 m) abgeschätzt wird, wobei ein Fehlerbereich berücksichtigt wird, ist die zweite Subjektdistanz (Schätzvariations-Nahbereich) 0,33 m und ist ein der Unendlichkeitsseite am nächsten an dem Schätzvariations-Nahbereich entsprechender Restaurierungsfilter ein entsprechend einer Subjektdistanz von 0,33 m erzeugter Restaurierungsfilter. Mit anderen Worten, in einem Fall, bei dem ein Fehlerbereich vorgesehen wird, wie in 12 illustriert, werden entsprechend Subjektdistanzen von 0,2 m und 0,25 m erzeugte Restaurierungsfilter, wie in 9 illustriert, nicht verwendet, unabhängig davon, wie die erste Subjektdistanz ist. Weiter werden die Restaurierungsfilter, die nicht verwendet werden, in der Restaurierungsfilter-Speichereinheit 206-6 nicht gespeichert.
  • 13 ist ein Diagramm, welches die zweite Ausführungsform entsprechend der in 10 illustrierten ersten Ausführungsform illustriert. Wenn die in 13 illustrierte zweite Ausführungsform und die in 10 illustrierte erste Ausführungsform verglichen werden, gibt es die Differenz, dass Restaurierungsfilter entsprechend Subjektdistanzen von 0,2 m, 0,25 m, 0,33 m, 0,5 m und 1 m in der zweiten Ausführungsform nicht vorgesehen sind.
  • Im Falle einer durch Pfeile in 13 gezeigten Schätzvariation, selbst falls die erste Subjektdistanz als am Nahende (0,2 m) befindlich abgeschätzt wird, wobei ein Fehlerbereich angenommen wird, ist die zweite Subjektdistanz (Schätzvariations-Nahbereich) größer als 1 m und ist ein, der Unendlichkeitsseite am nächsten an dem Schätzvariations-Nahbereich entsprechender Restaurierungsfilter ein Restaurierungsfilter von INF(1). Mit anderen Worten werden in einem Fall, bei dem ein Fehlerbereich wie in 13 illustriert vorgesehen ist, Restaurierungsfilter von (2) bis (6), illustriert in 10, nicht verwendet, unabhängig davon, wie die erste Subjektdistanz ist.
  • Weiter, werden die Restaurierungsfilter von (2) bis (6), die nicht verwendet werden, nicht in der Restaurierungsfilter-Speichereinheit 206-6 gespeichert und wird der abhängig von der Beziehung des Fehlerbereichs ausgewählte Restaurierungsfilter von (1) in der Restaurierungsfilter-Speichereinheit 206-6 gespeichert.
  • Somit wird in der in den 11 bis 13 illustrierten zweiten Ausführungsform ein Restaurierungsfilter, der nicht verwendet wird, abhängig von der Beziehung mit dem Fehlerbereich, nicht in der Restaurierungsfilter-Speichereinheit 206-6 gespeichert. Durch dieses Mittel ist es möglich, die Speicherkapazität zum Speichern von Restaurierungsfiltern zu reduzieren.
  • Darüber hinaus weist die Restaurierungsfilter-Speichereinheit, welche eine Restaurierungsfilter-Speichereinheit ist, mehrere Tabellen auf, in denen mehrere Restaurierungsfilter gespeichert sind, entsprechend Schätzvariation, und die Restaurierungsfilter-Auswahleinheit kann eine entsprechende Tabelle aus mehreren Tabellen anhand der Größe einer Schätzvariation auswählen, welche durch die Schätzvariations-Erfassungseinheit 214-6 erfasst ist, und einen Restaurierungsfilter aus der ausgewählten Tabelle auswählen.
  • 14 illustriert das Aussehen eines Smartphones 500, das eine andere Ausführungsform der Bildaufnahmevorrichtung 100 ist. Das in 14 illustrierte Smartphone 500 hat ein flaches Chassis 502 und beinhaltet eine Anzeigeeingabeeinheit 520, in der ein Anzeigepaneel 521 als der Monitor 212 und ein Bedienpaneel 522 als eine Eingabeeinheit auf einer Oberfläche des Chassis 502 integriert sind. Darüber hinaus beinhaltet das Chassis 502 einen Lautsprecher 531, ein Mikrophon 532, eine Bedieneinheit 540 und ein Kameraeinheit 541. Hierbei ist die Konfiguration des Chassis 502 nicht darauf beschränkt und es ist beispielsweise möglich, eine Konfiguration zu verwenden, in der der Monitor 212 und die Eingabeeinheit unabhängig sind, oder eine Konfiguration, die eine Klappstruktur oder einen Gleitmechanismus aufweist.
  • 15 ist ein Blockdiagramm, das die Konfiguration des in 14 illustrierten Smartphones 500 illustriert. Wie in 15 illustriert, sind eine Funkkommunikationseinheit 510, die Anzeigeeingabeeinheit 520, eine Anrufeinheit 530, die Bedieneinheit 540, die Kameraeinheit 541, eine Speichereinheit 550, eine externe Eingabe/Ausgabeeinheit 560, eine GPS(Global Positionierungssystem)-Empfangseinheit 570, eine Bewegungssensoreinheit 580, eine Stromversorgungseinheit 590 und eine Hauptsteuereinheit 501 als Hauptkomponenten des Smartphones enthalten. Darüber hinaus ist eine Funkkommunikationsfunktion zum Durchführen von Mobilfunkkommunikation durch Basisstationsvorrichtung BS und Mobilkommunikationsnetzwerk NW als eine Hauptfunktion des Smartphones 500 enthalten.
  • Die Funkkommunikationseinheit 510 führt Funkkommunikation mit Basisstationsvorrichtung BS durch, die im Mobilkommunikationsnetzwerk NW aufgenommen ist, gemäß einer Anweisung der Hauptsteuereinheit 501. Durch Verwendung dieser Funkkommunikation werden verschiedene Arten von Dateidaten wie etwa Sprachdaten und Bilddaten und E-Mail-Daten gesendet und empfangen, und werden Web-Daten und Streaming-Daten usw. empfangen.
  • Die Anzeigeeingabeeinheit 520 ist ein sogenanntes Touch-Paneel, das Bilder (Standbilder und Bewegbilder) und Zeicheninformation usw. anzeigt, Information visuell zum Anwender sendet und Anwenderbedienung in Bezug auf die angezeigte Information durch Steuerung der Hauptsteuereinheit 501 detektiert, und beinhaltet das Anzeigepaneel 521 und das Bedienpaneel 522. In einem Fall, bei dem ein erzeugtes 3D-Bild angenommen wird, wird es bevorzugt, dass das Anzeigepaneel 521 ein 3D-Anzeigepaneel ist.
  • Bezüglich des Anzeigepaneels 521 werden eine LCD-(Flüssigkristallanzeige) und eine OELD (organische Elektro-Lumineszanz-Anzeige) usw. als eine Anzeigevorrichtung verwendet. Das Bedienpaneel 522 ist eine Vorrichtung, die so platziert wird, dass sie in der Lage ist, visuell ein auf der Anzeigeoberfläche des Anzeigepaneels 521 angezeigtes Bild zu bestätigen, und die ein oder mehrere Koordinaten die durch Anwenderfinger oder einen Stift bedient werden, detektiert. Wenn diese Vorrichtung durch Anwenderfinger oder einen Stift bedient wird, wird ein Detektionssignal, das abhängig von der Bedienung erzeugt wird, an die Hauptsteuereinheit 501 ausgegeben. Als nächstes detektiert die Hauptsteuereinheit 501 die Bedienposition (Koordinaten) auf dem Anzeigepaneel 521 auf Basis des empfangenen Detektionssignals.
  • Wie in 14 illustriert, bilden das Anzeigepaneel 521 und das Bedienpaneel 522 des Smartphones 500 integral die Anzeigeeingabeeinheit 520 und sie sind so angeordnet, dass das Bedienpaneel 522 vollständig das Anzeigepaneel 521 bedeckt. In einem Fall, bei dem diese Anordnung verwendet wird, kann das Bedienpaneel 522 eine Funktion zum Detektieren von Anwenderbedienung selbst in einer Region außerhalb des Anzeigepaneels 521 aufweisen. Mit anderen Worten kann das Bedienpaneel 522 eine Detektionsregion für einen überlappenden Teil, der mit dem Anzeigepaneel 521 überlappt (nachfolgend als „Anzeigeregion” bezeichnet), und eine Detektionsregion für den verbleibenden äußeren Peripherieteil, der nicht dem Anzeigepaneel 521 überlappt (nachfolgend als „Nicht-Anzeigeregion” bezeichnet), enthalten.
  • Hier können die Größe der Anzeigeregion und die Größe des Anzeigepaneels 521 vollständig zueinander passen, müssen aber nicht notwendiger Weise beide zueinander passen. Darüber hinaus kann das Bedienpaneel 522 zwei Sensorregionen des äußeren Peripherieteils und des verbleibenden inneren Teils beinhalten. Zusätzlich ist die Breite des äußeren Peripherieteils beliebig ausgelegt, gemäß der Größe des Chassis 502 usw. Weiterhin gibt es als ein Positions-Detektionssystem, das im Bedienpaneel 522 verwendet wird, ein Matrix-Schaltsystem, ein Widerstandsfilmsystem, ein Oberflächenelastik-Wellensystem, ein Infrarotstrahlensystem, ein Elektromagnet-Induktionssystem und ein elektrostatisches Kapazitätssystem usw. und jedes System kann verwendet werden.
  • Die Anrufeinheit 530 beinhaltet den Lautsprecher 531 und das Mikrophon 532, wandelt über das Mikrophon 532 eingegebene Anwendersprache in Sprachdaten um, welche durch die Hauptsteuereinheit 501 prozessiert werden können, gibt sie an die Hauptsteuereinheit 501 aus, decodiert Sprachdaten, welche durch die Funkkommunikationseinheit 510 oder die externe Eingabe/Ausgabeeinheit 560 empfangen werden und gibt sie aus dem Lautsprecher 531 aus. Darüber hinaus, wie beispielsweise in 14 illustriert, ist es möglich, den Lautsprecher 531 an derselben Oberfläche zu montieren wie die Oberfläche, auf der die Anzeigeeingabeeinheit 520 installiert ist und das Mikrofon 532 auf der Seitenoberfläche des Chassis 502 zu montieren.
  • Die Bedieneinheit 540 ist eine Hardwaretaste, die einen Tastenschalter usw. verwendet, und eine Anweisung vom Anwender akzeptiert. Wie beispielsweise in 14 illustriert, ist die Bedieneinheit 540 an einem unteren Teil oder unterer Seitenoberfläche der Anzeigeeinheit des Chassis 502 des Smartphones 500 montiert, und ist ein Drucktastenschalter, der bei Druck durch einen Finger eingeschaltet wird usw., und geht in einen Aus-Zustand über, durch die Wiederherstellkraft einer Feder oder dergleichen, wenn der Finger gelöst wird.
  • Die Speichereinheit 550 speichert ein Steuerprogramm und steuert Daten der Hauptsteuereinheit 501, Adressdaten, welche den Namen und die Telefonnummer des Kommunikationsteilnehmers assoziieren, Daten von gesendeten und empfangenen E-mails, durch Web-Browsing heruntergeladen Web-Daten und heruntergeladenen Inhaltsdaten, oder Speicher-Temporär-Streamingdaten usw. Darüber hinaus beinhaltet die Speichereinheit 550 eine interne Speichereinheit 551, in der das Smartphone inkorporiert ist, und eine externe Speichereinheit 552, die einen abnehmbaren externen Speicherschlitz aufweist. Hier wird jede der internen Speichereinheit 551 und der externen Speichereinheit 552, welche die Speichereinheit 550 bilden, unter Verwendung von Speichermedien wie etwa einem Speicher (beispielsweise einem Mikro-SD (registriertes Warenzeichen) Speicher usw.) eines Flash-Speichertyps, Festplattentyps, Multimedia-Karten-Mikrotyps oder Kartentyps, eines RAM (wahlfreien Zugriffsspeicher) und eines ROM (nur Lesespeicher) realisiert.
  • Die externe Eingabe/Ausgabeeinheit 560 spielt die Rolle einer Schnittstelle zu allen externen Vorrichtungen, die mit dem Smartphone 500 gekoppelt sind, und ist direkt oder indirekt mit anderen externen Vorrichtungen durch Kommunikation oder dergleichen (beispielsweise einem universellen seriellen Bus (USB) und IEEE1394 usw.) oder einem Netzwerk (beispielsweise dem Internet, Funk-LAN, Bluetooth (registrierte Warenzeichen), RFID (Radio-Frequenz-Identifikation) Infrarot-Kommunikation (IrDA: Infrarot-Datenassoziierung) (registriertes Warenzeichen), UWB (Ultra-Weitband) (registriertes Warenzeichen) und ZigBee (registriertes Warenzeichen) usw. verbunden.
  • Als eine beispielsweise mit dem Smartphone 500 gekoppelte externe Vorrichtung gibt es ein kabelgebundenes/kabelloses Headset, einen kabelgebundenen/kabellosen externen Lader, einen kabelgebundenen/kabellosen Datenanschluss, eine Speicherkarte oder SIM(Subscriber Identity Module Karte)/UIM(User Identity Module Karte)-Karte, die über einen Kartensockel verbunden ist, eine externe Audio/Video-Vorrichtung, die über einen Audio/Video-E/A (Eingabe/Ausgabe) Anschluss verbunden ist, eine, einer kabellosen Verbindung unterworfene externe Audio/Videovorrichtung, ein kabelgebundener/kabelloser Verbindung unterworfenes Smartphone, ein, kabelgebundener/kabelloser Verbindung unterworfener persönlicher Computer (PC), ein kabelgebundener/kabelloser Verbindung unterworfener PDA, ein kabelgebundener/kabelloser Verbindung unterworfener persönlicher Computer und ein Ohrhörer, usw. Die externe Eingabe/Ausgabe-Einheit kann aus solch einer externen Vorrichtung gesendete Daten an jede Komponente im Smartphone 500 transferieren und Daten im Smartphone 500 zu der externen Vorrichtung senden.
  • Die GPS-Empfangseinheit 570 empfängt aus GPS-Satelliten ST1 bis STn gesendete GPS-Signale anhand einer Anweisung der Hauptsteuereinheit 501, führt Positionsberechnungsverarbeitung basierend auf den empfangenen mehreren GPS-Signalen durch und detektiert eine mit Breitengrad, Längengrad und Höhe des Smartphones gebildete Position. Die GPS-Empfangseinheit 570 kann die Position unter Verwendung von Positionsinformation detektieren, wenn die Positionsinformation aus der Funkkommunikationseinheit 510, oder der externen Eingabe/Ausgabe-Einheit 560 (beispielsweise Funk-LAN) erfasst werden kann.
  • Beispielsweise beinhaltet die Bewegungssensoreinheit 580 einen Dreiachsen-Beschleunigungssensor usw. und detektiert die physische Bewegung des Smartphones 500 anhand einer Anweisung der Hauptsteuereinheit 501. Durch Detektieren der physischen Bewegung des Smartphones 500 werden die Bewegungsrichtung und Beschleunigung des Smartphones 500 detektiert. Dieses Detektionsergebnis wird an die Hauptsteuereinheit 501 ausgegeben.
  • Die Stromversorgungseinheit 590 liefert in einer Batterie (nicht illustriert) akkumulierten Strom an jeden Teil des Smartphones 500 gemäß einer Anweisung der Hauptsteuereinheit 501.
  • Die Hauptsteuereinheit 501 beinhaltet einen Mikroprozessor, führt einen Betrieb anhand eines Steuerprogramms und von Steuerdaten, die in der Speichereinheit 550 gespeichert sind, durch, und integriert und steuert jeden Teil des Smartphones 500. Darüber hinaus, um Sprachkommunikation und Datenkommunikation über die Funkkommunikationseinheit 510 durchzuführen, weist die Hauptsteuereinheit 501 eine Mobilkommunikations-Steuerfunktion auf, um jeden Teil eines Kommunikationssystems und einer Anwendungsverarbeitungsfunktion zu steuern.
  • Die Anwendungsverarbeitungsfunktion wird realisiert, indem die Hauptsteuereinheit 501 dazu gebracht wird, einen Betrieb anhand von in der Speichereinheit 550 gespeicherter Anwendungssoftware durchzuführen. Als Anwendungsverarbeitungsfunktion gibt es beispielsweise eine Infrarot-Kommunikationsfunktion zum Steuern der externen Eingabe/Ausgabe-Einheit 560 und Durchführen von Datenkommunikation mit einer Gegenvorrichtung, eine E-Mail-Funktion zum Senden und Empfangen von E-Mail, eine Web-Browsing-Funktion zum Browsen von Web-Seiten und eine Funktion zum Erzeugen eines 3D-Bildes aus einem 2D-Bild gemäß der vorliegenden Erfindung usw.
  • Darüber hinaus weist die Hauptsteuereinheit 501 eine Bildverarbeitungsfunktion zur Anzeige eines Bildes auf der Anzeigeeingabeeinheit 520 usw. auf Basis von Bilddaten (Daten eines Standbildes und eines Bewegtbilds) auf, wie etwa Empfangsdaten und heruntergeladene Streaming-Daten. Die Bildverarbeitungsfunktion bezeichnet eine Funktion, welche die Hauptsteuereinheit 501 in den oben erwähnten Bilddaten decodiert, führt Bildverarbeitung an diesem Decodierergebnis aus und zeigt ein Bild auf der Anzeige-Eingabeeinheit 520 an.
  • Zusätzlich führt die Hauptsteuereinheit 501 Anzeigesteuerung für das Anzeigepaneel 521 und Betriebsdetektionssteuerung zum Detektieren von Anwenderoperation über die Bedieneinheit 540 und das Bedienpaneel 522 durch.
  • Durch Durchführen von Anzeigesteuerung zeigt die Hauptsteuereinheit 501 ein Icon zum Aktivieren von Anwendungssoftware und eine Softwaretaste wie etwa einen Scroll-Balken an, oder zeigt ein Fenster zum Erzeugen von E-Mail an. Hier bezeichnet der Scroll-Balken einen Softwareschlüssel zum Akzeptieren einer Anweisung zum Bewegen eines Bildanzeigeteils eines großen Bilds, das nicht in die Anzeigeregion des Anzeigepaneels 521 passt.
  • Darüber hinaus, indem Bediendetektionssteuerung durchgeführt wird, detektiert die Hauptsteuereinheit 501 eine Anwenderbedienung durch die Bedieneinheit 540, akzeptiert Bedienung in Bezug auf das oben erwähnte Icon oder eine Eingabe einer Zeichenkette in Bezug auf eine Eingabespalte des oben erwähnten Fensters durch das Bedienpaneel 522 oder akzeptiert eine Scroll-Anfrage eines Anzeigebildes durch einen Scroll-Balken.
  • Zusätzlich weist die Hauptsteuereinheit 501 eine Touchpaneel-Steuerfunktion auf, um: zu bestimmen, ob eine Bedienposition in Bezug auf das Bedienpaneel 522 ein überlappender Teil (Anzeigeregion) ist, welche mit dem Anzeigepaneel 521 überlappt, oder sie der verbleibende äußere periphere Teil (nicht Anzeigeregion) ist, der nicht mit dem Anzeigepaneel 521 überlappt, durch Durchführen von Bediendetektionssteuerung; und die Sensorregion im Bedienpaneel 522 und die Anzeigeposition der Softwaretaste zu steuern.
  • Darüber hinaus kann die Hauptsteuereinheit 501 Gestenbedienung in Bezug auf das Bedienpaneel 522 detektieren und eine Voreinstellfunktion anhand der detektierten Gestenbedienung ausführen. Die Gestenbedienung ist nicht eine einfache Berührbedienung im Stand der Technik und bedeutet Bedienung zum Ziehen einer Trajektorie mit einem Finger usw., Bezeichnen mehrerer Position gleichzeitig oder Kombinieren dieser zum Zeichnen einer Trajektorie von zumindest einer von mehreren Positionen.
  • Die Kameraeinheit 541 ist eine Digitalkamera, welche elektronisches Fotografieren unter Verwendung des Bildaufnahmeelements 202 wie etwa eines CMOS (Komplimentär-Metall-Oxidhalbleiter) und eines CCD (ladungsgekoppelte Vorrichtung) durchführt, und weist eine ähnliche Funktion zur in 1 usw. illustrierten Bildaufnahmevorrichtung 100 auf.
  • Das heißt, dass die Kameraeinheit 541 so konfiguriert ist, dass sie in der Lage ist, einen manuellen Fokusmodus und einen Autofokusmodus zu schalten, und wenn der manuelle Fokusmodus ausgewählt wird, ist es möglich, Fokussieren des Bildaufnahmeobjektivs der Kameraeinheit 541 durch Bedienen einer Icon-Taste für den Fokus oder dergleichen durchzuführen, die auf der Bedieneinheit 540 oder der Anzeigeeingabeeinheit 520 angezeigt wird. Weiter, zum Zeitpunkt des manuellen Fokusmodus, wird ein Live-Ansichtsbild, das gesplittete Bilder kombiniert, auf dem Anzeigepaneel 521 angezeigt und dadurch ist es möglich, den Fokussierzustand zum Zeitpunkt des manuellen Fokus zu bestätigen.
  • Darüber hinaus, indem die Hauptsteuereinheit 501 gesteuert wird, kann beispielsweise die Kameraeinheit 541 Bilddaten, welche durch Bildaufnahme erfasst sind, in komprimierte Bilddaten von JPEG (Joint Photographic coding Experts Group) oder dergleichen konvertieren, sie in der Speichereinheit 550 aufzeichnen und sie über die externe Eingabe/Ausgabe-Einheit 560 oder die Funkkommunikationseinheit 510 ausgeben. Im in 14 illustrierten Smartphone 500 ist die Kameraeinheit 541 an derselben Oberfläche wie die Anzeigeneingabeeinheit 520 montiert, aber die Montageposition der Kameraeinheit 541 ist nicht darauf beschränkt und sie kann an der Rückseite der Anzeigeneingabeeinheit 520 montiert sein, oder es können mehrere Kameras 541 montiert sein. Hier, in einem Fall, bei dem mehrere Kameras 541 montiert sind, ist es möglich, die Kameraeinheit 541, die zum Fotografieren und Durchführen von Fotografieren alleine vorgesehen ist, oder Durchführen von Fotografieren unter Verwendung der mehreren Kameras 541 gleichzeitig, umzuschalten.
  • Darüber hinaus kann die Kameraeinheit 541 für verschiedene Funktionen des Smartphones 500 verwendet werden. Beispielsweise ist es möglich, ein in der Kameraeinheit 541 erfasstes Bild auf dem Anzeigepaneel 521 anzuzeigen und ein Bild der Kameraeinheit 541 als eine von Bedieneingaben des Bedienpaneels 522 zu verwenden. Darüber hinaus, wenn die GPS-Empfangseinheit 570 eine Position detektiert, ist es möglich, die Position in Bezug auf ein Bild aus der Kameraeinheit 541 zu detektieren. Weiterhin ist es in Bezug auf das Bild aus der Kameraeinheit 541 möglich, die optische Achsenrichtung der Kameraeinheit 541 des Smartphones 500 zu bestimmen und die aktuelle Verwendungsumgebung zu bestimmen, ohne einen Dreiachsen-Beschleunigungssensor zu verwenden, oder während der Dreiachsen-Beschleunigungssensor zusammen verwendet wird. Es ist natürlich, dass es möglich ist, das Bild aus der Kameraeinheit 541 in Anwendungssoftware zu verwenden.
  • Übrigens kann Positionsinformation, welche durch die GPS-Empfangseinheit 570 erfasst ist, Sprachinformation (die Textinformation durch Durchführen von Sprachtextumwandlung durch die Hauptsteuereinheit usw. sein kann) erfasst durch das Mikrophon 532 und Haltungsinformation, welche durch die Bewegungssensoreinheit 580 usw. erfasst ist, zu den Bilddaten eines Standbildes oder Bewegbildes hinzugefügt werden und in der Speichereinheit 550 aufgezeichnet oder durch die externe Eingabe/Ausgabe-Einheit 560 oder die Funkkommunikationseinheit 510 ausgegeben werden.
  • Darüber hinaus erübrigt es sich, zu sagen, dass die vorliegende Erfindung nicht auf die oben erwähnten Ausführungsformen beschränkt ist und verschiedene Änderungen möglich sind, ohne vom Schutzumfang der vorliegenden Erfindung abzuweichen.
  • Bezugszeichenliste
    • 100
    Bildaufnahmevorrichtung
    200
    Bildaufnahme-Vorrichtungsgehäuse
    202
    Bildaufnahmeelements
    206
    Digitalsignal-Verarbeitungseinheit
    212
    Monitor
    214
    Haupt-CPU
    220
    Bedieneinheit
    214
    AF-Detektionseinheit
    300
    Objektivvorrichtung
    320
    F-Linsensteuereinheit
    340
    Objektiv-CPU
    500
    Smartphone

Claims (11)

  1. Bildaufnahmevorrichtung, umfassend: eine Bildaufnahmeeinheit, die konfiguriert ist, ein durch ein Bildaufnahmeobjektiv gebildetes Subjektbild aufzunehmen und ein das Subjektbild zeigendes Bild zu erfassen; eine erste Subjektdistanz-Schätzeinheit, welche konfiguriert ist, eine geschätzte Subjektdistanz durch eine Fokusdetektionseinheit bei der Bildaufnahme durch die Bildaufnahmeeinheit zu berechnen; eine Restaurierungsfilter-Speichereinheit, die konfiguriert ist, mehrere Restaurierungsfilter zu speichern, welche auf Basis zumindest einer Punkt-Spreizfunktion entsprechend einer Subjektdistanz erzeugt werden; eine Schätzvariationserfassungseinheit, die konfiguriert ist, eine maximale Unendlichkeits-Seitenschätzvariation in einem Bereich von Schätzvariation in Bezug auf die durch die erste Subjektdistanz-Schätzeinheit geschätzte Subjektdistanz zu erfassen; eine zweite Subjektdistanz-Schätzeinheit, die konfiguriert ist, eine Subjektdistanz zu berechnen, welche die durch die Schätzvariations-Erfassungseinheit erfasste maximale Unendlichkeits-Seitenschätzvariation zu der durch die erste Subjektdistanz-Schätzeinheit geschätzten Subjektdistanz addiert; eine Restaurierungsfilter-Auswahleinheit, die konfiguriert ist, einen Restaurierungsfilter entsprechend einer Unendlichkeitsseite am nächsten an der durch die zweite Subjektdistanz-Schätzeinheit berechneten Subjektdistanz aus den mehreren Restaurierungsfiltern, die in der Restaurierungsfilter-Speichereinheit gespeichert sind, auszuwählen; und eine Restaurierungsverarbeitungseinheit, die konfiguriert ist, eine Restaurierungsverarbeitung des durch die Bildaufnahmeeinheit erfassten Bildes unter Verwendung des durch die Restaurierungsfilter-Auswahleinheit ausgewählten Restaurierungsfilters durchzuführen.
  2. Bildaufnahmevorrichtung gemäß Anspruch 1, wobei die erste Subjektdistanz-Schätzeinheit die Subjektdistanz basierend auf einer Linsenposition einer Fokuslinse des Bildaufnahmeobjektivs schätzt.
  3. Bildaufnahmevorrichtung gemäß Anspruch 2, wobei: das Bildaufnahmeobjektiv ein austauschbares Objektiv ist; und die Schätzvariations-Erfassungseinheit eine Schätzvariations-Speichereinheit aufweist, die konfiguriert ist, die maximale Unendlichkeitsseiten-Schätzvariation des austauschbaren Objektivs für jedes austauschbare Objektiv zu speichern, Information zum austauschbaren Objektiv, das anzubringen ist, ermittelt und eine entsprechende Schätzvariation aus der Schätzvariations-Speichereinheit ermittelt, basierend auf der erfassten Information zu dem austauschbaren Objektiv.
  4. Bildaufnahmevorrichtung gemäß Anspruch 2, wobei: das Bildaufnahmeobjektiv ein Objektiv ist, das eine Schätzvariations-Speichereinheit aufweist, die zum Speichern der maximalen Unendlichkeitsseiten-Schätzvariation in dem Bereich von Schätzvariation in Bezug auf die durch die erste Subjektdistanz-Schätzeinheit geschätzte Subjektdistanz konfiguriert ist; und die Schätzvariations-Erfassungseinheit die Schätzvariation aus der Schätzvariations-Speichereinheit des Objektivs erfasst.
  5. Bildaufnahmevorrichtung gemäß einem der Ansprüche 2 bis 4, wobei die maximale Unendlichkeitsseiten-Schätzvariation im Bereich der Schätzvariation in Bezug auf die durch die erste Subjektdistanz-Schätzeinheit geschätzte Subjektdistanz eine Schätzvariation durch eine individuelle Differenz eines austauschbaren Objektivs oder/und eine Schätzvariation durch eine Temperatur-Charakteristik des austauschbaren Objektivs ist.
  6. Bildaufnahmevorrichtung gemäß einem der Ansprüche 1 bis 5, wobei die Restaurierungsfilter-Speichereinheit mehrere korrespondierende Restaurierungsfilter in einem Bereich zwischen einer Unendlichkeit und einer Subjektdistanz speichert, die nur die maximale Unendlichkeitsseiten-Schätzvariation im Bereich der Schätzvariation in Bezug auf die nächstseitige Subjektdistanz zur nächstseitigen Subjektdistanz geschätzt durch die erste Subjektdistanz-Schätzeinheit agiert.
  7. Bildaufnahmevorrichtung gemäß einem der Ansprüche 1 bis 6, wobei die Restaurierungsfilter-Speichereinheit mehrere Restaurierungsfilter entsprechend einer Subjektdistanz unbeachtlich des Bildaufnahmeobjektivs speichert.
  8. Bildaufnahmevorrichtung gemäß einem der Ansprüche 1 bis 7, wobei das Bildaufnahmeobjektiv ein austauschbares Objektiv ist, in welchem die Restaurierungsfilter-Speichereinheit inkorporiert ist.
  9. Bildaufnahmevorrichtung gemäß einem der Ansprüche 1 bis 8, weiter umfassend eine Aufzeichnungseinheit, die konfiguriert ist, ein durch Durchführen von Restaurierungsverarbeitung durch die Restaurierungsverarbeitungseinheit erfasstes Bild aufzuzeichnen.
  10. Bildaufnahmevorrichtung gemäß einem der Ansprüche 1 bis 9, wobei: die Restaurierungsfilter-Speichereinheit mehrere Tabellen aufweist, in denen mehrere Restaurierungsfilter entsprechend der Schätzvariation gespeichert sind und die Restaurierungsfilter-Auswahleinheit eine entsprechende Tabelle aus den mehreren Tabellen anhand der Größe der durch die Schätzvariations-Erfassungseinheit erfassten Schätzvariation auswählt und den Restaurierungsfilter aus der ausgewählten Tabelle auswählt.
  11. Bildverarbeitungsverfahren, umfassend: einen Bilderfassungsschritt des Erfassens eines Bildes, das ein Subjektbild zeigt, aus einer Bildaufnahmeeinheit; einen ersten Subjektdistanz-Schätzschritt des Berechnens einer geschätzten Subjektdistanz durch eine Fokusdetektionseinheit beim Bildaufnehmen durch die Bildaufnahmeeinheit; einen Schritt des Vorbereitens einer Restaurierungsfilter-Speichereinheit, die konfiguriert ist, mehrere Restaurierungsfilter zu speichern, die basierend auf zumindest einer Punkt-Spreizfunktion entsprechend einer Subjektdistanz erzeugt werden; einen Schätzvariations-Erfassungsschritt des Erfassens einer maximalen Unendlichkeitsseiten-Schätzvariation in einen Bereich von Schätzvariationen in Bezug auf die Subjektdistanz, die im ersten Subjektdistanz-Schätzschritt abgeschätzt ist; einen zweiten Subjektdistanz-Schätzschritt des Berechnens einer Subjektdistanz, welcher die in dem Schätzvariations-Erfassungsschritt erfasste maximale Unendlichkeitsseiten-Schätzvariation zu der im ersten Subjektdistanz-Schätzschritt geschätzten Subjektdistanz addiert; einen Restaurierungsfilter-Auswahlschritt des Auswählens eines Restaurierungsfilters entsprechend einer Unendlichkeitsseite am nächsten an der in dem zweiten Subjektdistanz-Schätzschritt berechneten Subjektdistanz, aus den in der Restaurierungsfilter-Speichereinheit gespeicherten mehreren Restaurierungsfiltern; und einen Restaurierungsverarbeitungsschritt des Durchführens von Restaurierungsverarbeitung des durch die Bildaufnahmeeinheit erfassten Bildes unter Verwendung des in dem Restaurierungsfilter-Auswahlschritt ausgewählten Restaurierungsfilters.
DE112013004759.4T 2012-09-27 2013-04-23 Bildaufnahmevorrichtung und Bildverarbeitungsverfahren Expired - Fee Related DE112013004759B4 (de)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2012213830 2012-09-27
JP2012213830 2012-09-27
JPJP2012213830 2012-09-27
PCT/JP2013/061841 WO2014050188A1 (ja) 2012-09-27 2013-04-23 撮像装置及び画像処理方法

Publications (2)

Publication Number Publication Date
DE112013004759T5 true DE112013004759T5 (de) 2015-08-06
DE112013004759B4 DE112013004759B4 (de) 2017-10-19

Family

ID=50387608

Family Applications (1)

Application Number Title Priority Date Filing Date
DE112013004759.4T Expired - Fee Related DE112013004759B4 (de) 2012-09-27 2013-04-23 Bildaufnahmevorrichtung und Bildverarbeitungsverfahren

Country Status (5)

Country Link
US (1) US9402024B2 (de)
JP (1) JP5746794B2 (de)
CN (1) CN104662890B (de)
DE (1) DE112013004759B4 (de)
WO (1) WO2014050188A1 (de)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104685863B (zh) * 2012-09-27 2017-11-03 富士胶片株式会社 摄像装置及图像处理方法
JP5874753B2 (ja) * 2014-01-28 2016-03-02 カシオ計算機株式会社 撮像装置、撮像方法及びプログラム
JP6381376B2 (ja) * 2014-09-02 2018-08-29 キヤノン株式会社 撮像装置、カメラシステム、画像処理装置および画像処理プログラム
JP6493702B2 (ja) * 2017-06-29 2019-04-03 エスゼット ディージェイアイ テクノロジー カンパニー リミテッドＳｚ Ｄｊｉ Ｔｅｃｈｎｏｌｏｇｙ Ｃｏ．，Ｌｔｄ 制御方法、撮像装置、撮像システム、移動体、制御方法、及びプログラム
CN111367054A (zh) * 2020-04-21 2020-07-03 厦门力鼎光电股份有限公司 一种小型高清的光学成像镜头

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20010008418A1 (en) * 2000-01-13 2001-07-19 Minolta Co., Ltd. Image processing apparatus and method
JP2001197354A (ja) * 2000-01-13 2001-07-19 Minolta Co Ltd デジタル撮像装置および画像復元方法
JP4389371B2 (ja) * 2000-09-28 2009-12-24 株式会社ニコン 画像修復装置および画像修復方法
JP4649836B2 (ja) 2003-12-11 2011-03-16 株式会社ニコン カメラシステム
US7711259B2 (en) * 2006-07-14 2010-05-04 Aptina Imaging Corporation Method and apparatus for increasing depth of field for an imager
JP2008172321A (ja) * 2007-01-09 2008-07-24 Olympus Imaging Corp 電気的画像回復処理を行う撮像装置
US8724013B2 (en) * 2007-12-27 2014-05-13 Qualcomm Incorporated Method and apparatus with fast camera auto focus
US8472744B2 (en) * 2008-05-27 2013-06-25 Nikon Corporation Device and method for estimating whether an image is blurred
JP5371331B2 (ja) * 2008-09-01 2013-12-18 キヤノン株式会社 撮像装置、撮像装置の制御方法及びプログラム
US8526754B2 (en) * 2009-05-28 2013-09-03 Aptina Imaging Corporation System for enhancing depth of field with digital image processing
JP5501069B2 (ja) 2010-03-31 2014-05-21 キヤノン株式会社 画像処理装置、撮像装置、画像処理方法およびプログラム
JP2011259314A (ja) * 2010-06-10 2011-12-22 Fujifilm Corp 撮像装置、画像処理装置及びプログラム
JP5676988B2 (ja) * 2010-09-14 2015-02-25 キヤノン株式会社 焦点調節装置
WO2012063449A1 (ja) * 2010-11-08 2012-05-18 パナソニック株式会社 撮像装置、撮像方法、プログラム、および集積回路
US9170791B1 (en) * 2010-11-30 2015-10-27 Symantec Corporation Storing data items with content encoded in storage addresses
CN102625043B (zh) * 2011-01-25 2014-12-10 佳能株式会社 图像处理设备、成像设备和图像处理方法
CN103430073B (zh) * 2011-03-31 2014-12-31 富士胶片株式会社 摄像装置及摄像装置的控制方法
CN108387996B (zh) * 2011-11-11 2020-11-03 株式会社尼康 焦点调节控制装置、摄像装置以及镜头镜筒
CN104798364B (zh) * 2012-06-07 2018-08-17 数位光学欧洲有限公司 Mems快速对焦照相机模块
JP6335423B2 (ja) * 2012-08-31 2018-05-30 キヤノン株式会社 情報処理装置および情報処理方法
CN104685863B (zh) * 2012-09-27 2017-11-03 富士胶片株式会社 摄像装置及图像处理方法
JP5775976B2 (ja) * 2012-11-22 2015-09-09 富士フイルム株式会社 撮像装置、デフォーカス量演算方法、及び撮像光学系
JP5960286B2 (ja) * 2012-12-19 2016-08-02 富士フイルム株式会社 画像処理装置、撮像装置、画像処理方法及び画像処理プログラム
JP6071669B2 (ja) * 2013-03-15 2017-02-01 キヤノン株式会社 レンズ装置およびカメラシステム
JP6021780B2 (ja) * 2013-10-07 2016-11-09 キヤノン株式会社 画像データ処理装置、距離算出装置、撮像装置および画像データ処理方法

Also Published As

Publication number Publication date
CN104662890B (zh) 2017-11-17
JPWO2014050188A1 (ja) 2016-08-22
US9402024B2 (en) 2016-07-26
WO2014050188A1 (ja) 2014-04-03
DE112013004759B4 (de) 2017-10-19
CN104662890A (zh) 2015-05-27
US20150195448A1 (en) 2015-07-09
JP5746794B2 (ja) 2015-07-08

Similar Documents

Publication Publication Date Title
DE112014006009B4 (de) Bildaufnahmegerät und Zeitraffer-Bildaufnahmeverfahren
DE112013002286B4 (de) Bildaufnahmevorrichtung und Verfahren zur Fokussierungssteuerung
DE112013006817B4 (de) Bildaufnahmevorrichtung, Signalverarbeitungsverfahren und Signalverarbeitungsprogramm
US10027909B2 (en) Imaging device, imaging method, and image processing device
US20210075954A1 (en) All-in-focus implementation
DE112013006596B4 (de) Bildverarbeitungsvorrichtung, Bildaufnahmevorrichtung, Bildverarbeitungsverfahren und Programm
DE112013004759B4 (de) Bildaufnahmevorrichtung und Bildverarbeitungsverfahren
US9800774B2 (en) Image capture device with restoration processing and image restoration processing method
US20180075617A1 (en) Image processing apparatus and imaging apparatus
DE102014215506A1 (de) Bildstabilisierungsvorrichtung, Steuerungsverfahren für diese, Speichermedium, das ein Steuerungsprogramm für diese speichert, und Bildaufnahmevorrichtung, die mit der Bildstabilisierungsvorrichtung ausgestattet ist
DE112013006814T5 (de) Bildbeurteilungseinrichtung, Aufnahmegerät, 3D-Messgerät, Bildbeurteilungsverfahren und Programm
JP6086975B2 (ja) 画像処理装置、撮像装置、画像処理方法及び画像処理プログラム
JP6000446B2 (ja) 画像処理装置、撮像装置、画像処理方法及び画像処理プログラム
DE112017004624T5 (de) Bildaufnahmevorrichtung und Bildaufnahmesteuerverfahren
DE112014006005T5 (de) Bildgebungsvorrichtung, Verfahren zur Steuerung der Bildgebungsvorrichtung, Verfahren zur Steuerung einer Anzeigesteuervorrichtung und Verfahren zur Steuerung einer Aufzeichnungsvorrichtung
DE112013004760B4 (de) Bilderfassungsvorrichtung und Bildverarbeitungsverfahren
DE102018123402A1 (de) Bildunschärfekorrekturvorrichtung und steuerverfahren
DE102011086597A1 (de) Bildaufnahmevorrichtung, die zum löschen eines auf einem bewegtbild überlagerten videoeffekts in der lage ist, verfahren zum steuern der vorrichtung, und bewegtbild-aufzeichungsvorrichtung, sowie ein speichermedium
JP5901780B2 (ja) 画像処理装置、撮像装置、画像処理方法及び画像処理プログラム

Legal Events

Date Code Title Description
R012 Request for examination validly filed
R016 Response to examination communication
R018 Grant decision by examination section/examining division
R020 Patent grant now final
R079 Amendment of ipc main class

Free format text: PREVIOUS MAIN CLASS: H04N0005232000

Ipc: H04N0023600000

R119 Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee