DE102005052901A1 - Digitalkameragerät mit auswählbarem bestem Aufnahmemoment - Google Patents

Digitalkameragerät mit auswählbarem bestem Aufnahmemoment Download PDF

Info

Publication number
DE102005052901A1
DE102005052901A1 DE102005052901A DE102005052901A DE102005052901A1 DE 102005052901 A1 DE102005052901 A1 DE 102005052901A1 DE 102005052901 A DE102005052901 A DE 102005052901A DE 102005052901 A DE102005052901 A DE 102005052901A DE 102005052901 A1 DE102005052901 A1 DE 102005052901A1
Authority
DE
Germany
Prior art keywords
mouth
module
eyes
blinking
waiting phase
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
DE102005052901A
Other languages
English (en)
Inventor
Jian Zhang
Wende Li
Jianqiang Huang
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Publication of DE102005052901A1 publication Critical patent/DE102005052901A1/de
Withdrawn legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/21Intermediate information storage
    • H04N1/2104Intermediate information storage for one or a few pictures
    • H04N1/2112Intermediate information storage for one or a few pictures using still video cameras
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00Details of cameras or camera bodies; Accessories therefor
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B7/00Control of exposure by setting shutters, diaphragms or filters, separately or conjointly
    • G03B7/08Control effected solely on the basis of the response, to the intensity of the light received by the camera, of a built-in light-sensitive device
    • G03B7/091Digital circuits
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/21Intermediate information storage
    • H04N1/2104Intermediate information storage for one or a few pictures
    • H04N1/2112Intermediate information storage for one or a few pictures using still video cameras
    • H04N1/2129Recording in, or reproducing from, a specific memory area or areas, or recording or reproducing at a specific moment
    • H04N1/2133Recording or reproducing at a specific moment, e.g. time interval or time-lapse

Abstract

Die vorliegende Erfindung betrifft ein Digitalkameragerät mit auswählbarem bestem Aufnahmemoment. Dieses Digitalkameragerät kann den momentanen besten Aufnahmemoment zum Aufnehmen von Fotos entscheiden. Das technische Schema umfasst: Umfassen eines Kamerakopfs, einer Speicherschaltung und eines Signalprozessors, wobei der Signalprozessor serienmäßig ein Gesichtserfassungsmodul, ein Modul für die Anordnung von Augen und Mund und ein Modul zur Beurteilung von Blinzeln und offenem Mund umfasst, wobei zwischenzeitlich das Gesichtserfassungsmodul das digitale Bild aus der Speicherschaltung ausliest und das Ergebnis nach einer Gesichtsanordnung zu dem Modul für die Anordnung von Augen und Mund übermittelt, das Modul für die Anordnung von Augen und Mund das Ergebnis nach einer Anordnung von Augen und Mund zu dem Modul zur Beurteilung von Blinzeln und offenem Mund übermittelt und das Modul zur Beurteilung von Blinzeln und offenem Mund das Beurteilungsergebnis aussendet, wobei die Steuereinheit einen Aufnahmesteuerbefehl ausgibt, wenn das Beurteilungsergebnis des Moduls zur Beurteilung von Blinzeln und offenem Mund einen besten Aufnahmemoment bedeutet.

Description

  • GEBIET DER ERFINDUNG
  • Die vorliegende Erfindung betrifft ein Digitalkameragerät mit auswählbarem bestem Aufnahmemoment, und diese betrifft insbesondere ein Digitalkameragerät, welches den Gesichtszustand einer Person erfassen kann, um den Aufnahmemoment zu entscheiden. Dieses ist für professionelle Fotofreunde und Amateure oder gewöhnliche Verwender geeignet.
  • HINTERGRUND DER ERFINDUNG
  • Ein gegenwärtiges typisches Digitalkameragerät weist keine Funktion zum Ermöglichen, dass ein Bediener den besten Aufnahmemoment auswählt, auf. Ein typisches Digitalkameragerät weist eine Funktion zum Ermöglichen, dass ein Bediener die aufgenommenen Bilder nach der Fotoaufnahme begutachtet, auf. Beispielsweise veranlasst der Verwender nach einer Fotoaufnahme eine Wiedergabe der aufgenommenen Bilder auf der Anzeigevorrichtung. Für viele aufgenommene Bilder, insbesondere die, welche vorwiegend Personenbilder sind, ist es aufgrund eines plötzlichen Blinzelns oder eines Stimmungswechsels der aufgenommenen Person jedoch schwierig, die Fotoqualität zu gewährleisten. Ein traditionelles Kameragerät kann den Aufnahmemoment nicht erkennen, kann nicht erkennen, ob die Person blinzelt und ob die Person einen heiteren Ausdruck trägt, so dass dies mit einer erheblichen Schwierigkeit der Aufnahmemomentauswahl verbunden ist und zu einer schlechten Fotoqualität führt.
  • GEGENSTAND DER ERFINDUNG
  • Die vorliegende Erfindung wird vorgeschlagen, um die oben erwähnten Probleme zu lösen, um ein Digitalkameragerät mit auswählbarem bestem Aufnahmemoment zu schaffen. Dieses Digitalkameragerät weist nicht nur die typischen Digitalkameragerätefunktionen auf, sondern kann ferner den momentanen besten Aufnahmemoment zum Aufnehmen eines Bilds entscheiden.
  • Das technische Schema der vorliegenden Erfindung umfasst: Ein Digitalkameragerät mit auswählbarem bestem Aufnahmemoment, umfassend einen Kamerakopf und eine Speicherschaltung, dadurch gekennzeichnet, dass: das Kameragerät ferner umfasst:
    einen Signalprozessor, serienmäßig umfassend ein Gesichtserfassungsmodul, ein Modul für die Anordnung von Augen und Mund und ein Modul zur Beurteilung von Blinzeln und offenem Mund, wobei:
    das Gesichtserfassungsmodul das digitale Bild nach der Anordnung eines Gesichts aus der Speicherschaltung ausliest und das Ergebnis in das Modul für die Anordnung von Augen und Mund leitet;
    das Modul für die Anordnung von Augen und Mund das Ergebnis nach der Anordnung von Augen und Mund in das Modul zur Beurteilung von Blinzeln und offenem Mund leitet;
    das Modul zur Beurteilung von Blinzeln und offenem Mund das Beurteilungsergebnis aussendet;
    die Steuerschaltung einen Aufnahmesteuerbefehl ausgibt, wenn das Beurteilungsergebnis des Moduls zur Beurteilung von Blinzeln und offenem Mund einen besten Aufnahmemoment bedeutet, und keinen Aufnahmesteu erbefehl ausgibt, wenn das Beurteilungsergebnis keinen besten Aufnahmemoment bedeutet.
  • Das Gesichtserfassungsmodul umfasst eine Modellschablone in mehreren Maßverhältnissen, ein in der Wartephase aufgenommenes Bild und eine arithmetische Einheit zur Modellschablonenanpassung, wobei die arithmetische Einheit zur Modellschablonenanpassung die Modellschablone in mehreren Maßverhältnissen und das in der Wartephase aufgenommene Bild in dem Speicher empfängt und das arithmetische Ergebnis zu der Gesichtsbildposition übermittelt, wobei die Modellschablone in mehreren Maßverhältnissen, das in der Wartephase aufgenommene Bild und die Gesichtsbildposition jeweils unter den verschiedenen Adressen des Speichers gespeichert werden.
  • Das Modul für die Anordnung von Augen und Mund umfasst das in der Wartephase aufgenommene Bild, die Gesichtsbildposition und eine Einheit zur horizontalen und zur vertikalen Projektion, wobei die Einheit zur horizontalen und zur vertikalen Projektion das in der Wartephase aufgenommene Bild und die Gesichtsbildposition in dem Speicher empfängt und das arithmetische Ergebnis zu der Position von Augen und Mund übermittelt, wobei das in der Wartephase aufgenommene Bild, die Gesichtsbildposition und die Position von Augen und Mund jeweils unter den verschiedenen Adressen des Speichers gespeichert werden.
  • Das Modul zur Beurteilung von Blinzeln und offenem Mund umfasst das in der Wartephase aufgenommene Bild, die Position von Augen und Mund und eine Einheit zur Beurteilung von Blinzeln und offenem Mund, wobei die Einheit zur Beurteilung von Blinzeln und offenem Mund das in der Wartephase aufgenommene Bild und die Position von Augen und Mund in dem Speicher empfängt, die Ergebnisse der Beurteilung von Blinzeln und offenem Mund für das Gesicht jeder Person erhält und den Befehl zu der Steuerschaltung ausgibt, wobei das in der Wartephase aufgenommene Bild und die Position von Augen und Mund jeweils unter den verschiedenen Adressen des Speichers gespeichert werden.
  • Die vorteilhaften Wirkungen der vorliegenden Erfindung bestehen darin, dass: diese zur Zeit einer Fotoaufnahme günstigerweise den Gesichtsausdruck jeder Person erkennen kann, wie etwa, ob die Augen geöffnet sind und ob die Person einen heiteren Ausdruck trägt, um einen besten Fotoaufnahmemoment auszuwählen und somit die Fotoaufnahmequalität stark zu verbessern.
  • KURZE BESCHREIBUNG DER BEIGEFÜGTEN ZEICHNUNG
  • 1 ist ein System-Blockschaltbild, welches die Struktur der vorliegenden Erfindung darstellt.
  • 2 ist ein Struktur-Blockschaltbild, welches den Signalprozessor in 1 darstellt.
  • 3 ist ein Struktur-Blockschaltbild, welches das Gesichtserfassungsmodul in 2 darstellt.
  • 4 ist ein Struktur-Blockschaltbild, welches das Modul für die Anordnung von Augen und Mund in 2 darstellt.
  • 5 ist ein Struktur-Blockschaltbild, welches das Modul zur Beurteilung von Blinzeln und offenem Mund in 2 darstellt.
  • 6 ist ein prinzipielles Blockschaltbild, welches das Modul für die Anordnung von Augen und Mund und zur Beurteilung von Blinzeln und offenem Mund darstellt.
  • 7 ist ein prinzipielles Blockschaltbild im Hinblick auf die Beurteilung eines offenen Munds in dem Modul zur Beurteilung von Blinzeln und offenem Mund.
  • 8 ist ein Flussdiagramm, welches die Modellschablonenanpassung bei der vorliegenden Erfindung darstellt.
  • 9 ist ein Flussdiagramm, welches das Modul zur Beurteilung von Blinzeln und offenem Mund in der vorliegenden Erfindung darstellt.
  • 10 ist ein Flussdiagramm, welches den Signalprozessor in der vorliegenden Erfindung darstellt.
  • BESCHREIBUNG DER AUSFÜHRUNGSBEISPIELE
  • Wie in 1 dargestellt, umfasst das bevorzugte Ausführungsbeispiel einen Kamerakopf 1, eine Speicherschaltung 2, einen Signalprozessor 3 und eine Steuerschaltung 4, wobei der Kamerakopf 1 die erhaltenen und digitalisierten Signale in die Speicherschaltung 2 einspeichert, der Signalprozessor 3 die digitalen Bilder, welche in der Speicherschaltung 2 gespeichert werden, verarbeitet, beurteilt, ob die Person auf dem digitalen Bild blinzelt und ob die Person einen heiteren Ausdruck trägt, und entscheidet, ob dies der beste Aufnahmemoment ist, wobei in dem Fall einer Entscheidung dafür, dass dies der beste Aufnahmemoment ist, der Signalprozessor 3 einen Aufnahmesteuerbefehl über die Steuerschaltung 4 ausgibt.
  • Wie in 2 dargestellt, umfasst der Signalprozessor 3 serienmäßig ein Gesichtserfassungsmodul 3-1, ein Modul 3-2 für die Anordnung von Augen und Mund und ein Modul 3-3 zur Beurteilung von Blinzeln und offenem Mund, wobei das Gesichtserfassungsmodul 3-1 das digitale Bild nach der Gesichtsanordnung aus der Speicherschaltung ausliest und das Ergebnis zu dem Modul 3-2 für die Anordnung von Augen und Mund übermittelt; das Mo dul 3-2 für die Anordnung von Augen und Mund das Ergebnis nach der Anordnung von Augen und Mund zu dem Modul 3-3 zur Beurteilung von Blinzeln und offenem Mund übermittelt; das Modul 3-3 zur Beurteilung von Blinzeln und offenem Mund das Beurteilungsergebnis zu der Steuerschaltung 4 sendet; und die Steuerschaltung 4 zu diesem Zeitpunkt einen Aufnahmesteuerbefehl ausgibt, wenn das empfangene Beurteilungsergebnis einen besten Aufnahmemoment bedeutet, und keinen Aufnahmesteuerbefehl ausgibt, wenn das Beurteilungsergebnis keinen besten Aufnahmemoment bedeutet.
  • Wie in 3 dargestellt, umfasst das Gesichtserfassungsmodul 3-1 eine Modellschablone 3-1-1 in mehreren Maßverhältnissen, ein in der Wartephase aufgenommenes Bild 3-1-2 und eine arithmetische Einheit 3-1-3 zur Modellschablonenanpassung, wobei die arithmetische Einheit 3-1-3 zur Modellschablonenanpassung die Modellschablone 3-1-1 in mehreren Maßverhältnissen und das in der Wartephase aufgenommene Bild 3-1-2 in dem Speicher 2 empfängt und das arithmetische Ergebnis zu der Gesichtsbildposition 3-1-4 übermittelt, wobei die Modellschablone 3-1-1 in mehreren Maßverhältnissen, das in der Wartephase aufgenommene Bild 3-1-2 und die Gesichtsbildposition 3-1-4 jeweils unter den verschiedenen Adressen des Speichers 2 gespeichert werden. Die Modellschablone in mehreren Maßverhältnissen ist eine Durchschnitts-Gesichtsmodellschablone mit 12 Arten verschiedener Größen, wobei diese durch reichlich Gesichtsbildanalyse und Training erhalten wird.
  • Wie in 4 dargestellt, umfasst das Modul 3-2 für die Anordnung von Augen und Mund das in der Wartephase aufgenommene Bild 3-1-2, die Gesichtsbildposition 3-1-4 und eine Einheit 3-2-1 zur horizontalen und zur vertikalen Projektion, wobei die Einheit zur horizontalen und zur vertikalen Projektion das in der Wartephase aufgenommene Bild 3-1-2 und die Gesichtsbildposition 3-1-4 in dem Speicher 2 empfängt und das arithmetische Resultat zu der Position 3-2-2 von Augen und Mund übermittelt, wobei das in der Warte phase aufgenommene Bild 3-1-2, die Gesichtsbildposition 3-1-4 und die Position 3-2-2 von Augen und Mund jeweils unter den verschiedenen Adressen des Speichers 2 gespeichert werden.
  • Wie in 5 dargestellt, umfasst das Modul 3-3 zur Beurteilung von Blinzeln und offenem Mund das in der Wartephase aufgenommene Bild 3-1-2, die Position 3-2-2 von Augen und Mund und eine Einheit 3-3-1 zur Beurteilung von Blinzeln und offenem Mund, wobei die Einheit 3-3-1 zur Beurteilung von Blinzeln und offenem Mund das in der Wartephase aufgenommene Bild 3-1-2 und die Position 3-2-2 von Augen und Mund in dem Speicher 2 empfängt, die Beurteilungsergebnisse für Blinzeln und offenen Mund für das Gesicht jeder Person erhält und den Befehl zu der Steuerschaltung 4 ausgibt, wobei das in der Wartephase aufgenommene Bild 3-1-2 und die Position 3-2-2 von Augen und Mund jeweils unter den verschiedenen Adressen des Speichers 2 gespeichert werden.
  • 6 ist ein prinzipielles Blockschaltbild, welches das Modul für die Anordnung von Augen und Mund und das Modul zur Beurteilung von Blinzeln und offenem Mund darstellt, wobei die Position von Augen und Mund geeigneterweise durch die Projektion in horizontaler und vertikaler Richtung entschieden wird. Die Blinzelbeurteilung kann entsprechend dem Umstand erfolgen, dass, wenn drei Maxima bei der entsprechenden Position in der Vertikalrichtungsprojektionsfigur vorhanden sind, lediglich ein Maximum in der Horizontalrichtungsprojektion vorhanden ist, wenn beide Augen geschlossen sind. Die Beurteilung eines offenen Munds kann entsprechend dem Umstand erfolgen, ob die Punkte, welche entlang der vertikalen Richtung von der Mundmitte zu den Ober- und Unterkanten des Munds verlaufen, eine durchgehende lippenfremde Farbe aufweisen.
  • 7 ist ein prinzipielles Blockschaltbild im Hinblick auf die Beurteilung eines offenen Munds, wobei auf Basis der Mundmittenposition, welche aus 6 erhalten wird, nach oben die Mundoberkante yUp entlang der ver tikalen Richtung und nach unten die Mundunterkante yDn entlang der vertikalen Richtung bestimmt wird, so dass die Mundöffnung (yUp – yDn) erhalten wird, diese mit dem Erfahrungsschwellenwert, welcher aus der Statistik erhalten wird, verglichen wird und beurteilt wird, ob der Mund offen ist.
  • 8 ist ein Flussdiagramm, welches eine Modellschablonenanpassung in dem Gesichtserfassungsmodul 3-1 darstellt:
    In S801 wird die Modellschablonenanpassung der Gesichtserfassung begonnen.
  • In S802 wird K = 1 festgelegt. K ist der Index der Modellschablone.
  • In S803 wird eine bestimmte Modellschablone Mk entnommen.
  • In S804 wird die Modellschablone Mk in N kleine Blöcke geteilt.
  • In S805 wird die kleine Wellenübertragung für jeden der kleinen Blöcke bewirkt.
  • In S806 wird das Element von maximal 1/4 für jeden kleinen Block entnommen und ein Vektor A(k) gebildet.
  • In S807 wird beurteilt, ob sämtliche Modellschablonen durchgegangen sind. Wenn JA, wird zu S808 übergegangen, wenn NEIN, wird zu S803 übergegangen.
  • In S808 wird K = 1 festgelegt. K ist der Index der Modellschablone.
  • In S809 werden die X- und Y-Werte zum Indizieren des Bilds initialisiert.
  • In S810 wird das in der Wartephase aufgenommene Fotobild eingelesen.
  • In S811 wird der Block S mit der gleichen Größe wie der des Moduls entnommen.
  • In S812 wird S in N kleine Blöcke geteilt.
  • In S813 wird die kleine Wellenübertragung für jeden der kleinen Blöcke bewirkt.
  • In S814 wird das Element von maximal 1/4 für jeden kleinen Block entnommen und ein Vektor B(k) gebildet.
  • In S815 wird die Abweichung von X und Y vergrößert, um zu erreichen, dass diese das nächste Pixel benennen. Wenn der X-Wert kleiner als die Bildbreite ist, wird der X-Wert lediglich um eine Pixelbreite vergrößert, und wenn X die Bildbreite erreicht, wird X auf null gesetzt und Y um ein Pixel vergrößert.
  • In S816 wird beobachtet, ob die Bildkante erreicht wird, wobei zu S817 übergegangen wird, wenn JA, und zu S815 übergegangen wird, wenn NEIN.
  • In S817 wird die Entfernung Dist AB(k) der Vektoren A(k) und B(k) berechnet.
  • In S818 wird beobachtet, ob der Wert von Dist AB(k) größer als der Schwellenwert Dist-ThreoldK ist, welcher vom Gesicht abgemessen wird. Wenn JA, wird zu S819 übergegangen, und wenn NEIN, wird zu S820 übergegangen.
  • In S819 wird die Gesichtsposition aufgezeichnet.
  • In S820 wird bestätigt, ob sämtliche Modellschablonen verarbeitet wurden, wobei zu S821 übergegangen wird, wenn JA, und zu S809 übergegangen wird, wenn NEIN.
  • In S822 wird der Vorgang beendet.
  • 9 ist ein Flussdiagramm, welches ein Modul 3-3 zur Beurteilung von Blinzeln und offenem Mund darstellt:
    In S901 wird das Gesichtsbild, welches von dem Gesichtserfassungsmodul erhalten wird, in der horizontalen Richtung projiziert.
  • In S902 wird beurteilt, ob das in dem letzten Schritt erhaltene Bild zwei Maxima aufweist, wobei zu S904 übergegangen wird, wenn JA, und zu S903 übergegangen wird, wenn NEIN.
  • In S904 wird die Koordinatenposition (y1, y2) des in S902 berechneten horizontalen Maximums aufgezeichnet. Tatsächlich stellt der Wert y1 die Projektionsposition der Mundmitte entlang der horizontalen Richtung dar, und y2 stellt die Projektionsposition der Augenmitte entlang der horizontalen Richtung dar.
  • In S903 wird gefolgert, dass die Augen in dem Gesicht geschlossen sind.
  • In S905 wird die in S902 berechnete Maximums-Koordinatenposition (y1) aufgezeichnet und in der horizontalen Richtung projiziert. Tatsächlich stellt der Wert y1 die Projektionsposition der Mundmitte entlang der horizontalen Richtung dar.
  • In S906 wird das von dem Gesichtserfassungsmodul erhaltene Gesichtsbild in der vertikalen Richtung projiziert.
  • In S907 wird beurteilt, ob das in dem letzten Schritt erhaltene Bild drei Maxima aufweist, wobei zu S90q9 übergegangen wird, wenn JA, und zu S908 übergegangen wird, wenn NEIN.
  • In S909 wird die in S907 berechnete Maximums-Koordinatenposition (x1, x2, x3) aufgezeichnet und in der vertikalen Richtung projiziert. Tatsächlich stellen die Werte x1, x2, x3 jeweils die Projektionsposition der Mitte des rechten Auges, des Munds und des linken Auges dar.
  • In S910 werden die Mundmittenkoordinaten (x2, y1) aufgezeichnet.
  • In S911 werden die Werte yUp und yDn auf die Vertikalkoordinate des Munds initialisiert.
  • In S912 wird beobachtet, ob sich der Pixelwert bei den Koordinaten (x2, yUp) innerhalb des Lippenfarbenbereichs befindet. Wenn JA, wird zu S914 übergegangen, und wenn NEIN, wird zu S913 übergegangen.
  • In S913 wird der Wert von yUp um 1 erhöht. Tatsächlich bedeutet dies, die Vertikalkoordinate um 1 Pixelposition zu erhöhen.
  • Bei der Suche der Oberkante der Lippe in S912, S913, wird die Horizontalkoordinate x2 unveränderlich gehalten, der Wert von y2 wird erhöht, der erhöhte Wert von y2 wird als yUp bezeichnet, und es wird beobachtet, ob sich der Pixelwert bei den Koordinaten (x2, yUp) innerhalb des Lippenfarbenbereichs befindet.
  • In S914 wird beobachtet, ob sich der Pixelwert bei den Koordinaten (x2, yDn) innerhalb des Lippenfarbenbereichs befindet. Wenn JA, wird zu S916 übergegangen, wenn NEIN, wird zu S915 übergegangen.
  • in S915 wird der Wert von yDn um 1 vermindert. Tatsächlich bedeutet dies, die Vertikalkoordinate um 1 Pixelposition zu vermindern.
  • Bei der Suche der Unterkante der Lippe in S914, S915 wird die Horizontalkoordinate x2 unveränderlich gehalten, der Wert von y2 wird vermindert, der verminderte Wert von y2 wird als yDn bezeichnet, und es wird beobachtet, ob sich der Pixelwert bei den Koordinaten (x2, yDn) innerhalb des Lippenfarbenbereichs befindet.
  • In S916 wird yDn von yUp subtrahiert und der Mundöffnungs-Schwellenwert davon subtrahiert. Wenn dies größer als der Mundöffnungsschwellenwert ist, wird zu S918 übergegangen, und wenn NEIN, wird zu S917 übergegangen.
  • In S917 wird beurteilt, dass das Gesichtsbereichsbild eines mit geschlossenem Mund ist.
  • In S918 wird beurteilt, dass das Gesichtsbereichsbild eines mit offenem Mund ist.
  • In S919 wird der Vorgang beendet.
  • 10 ist ein Flussdiagramm, welches einen Signalprozessor 3 in der vorliegenden Erfindung darstellt:
    In S1001 wird zu rechnen begonnen.
  • In S1002 wird X = 1 festgelegt. X bedeutet die zu erfassenden Bildrahmen. Dies wird verwendet, um zu entscheiden, welcher Rahmen des aufgenommenen Bilds die beste Wirkung erzielt.
  • In S1003 wird das digitale Bild des Bilds X erfasst.
  • In S1004 wird die Modellanpassung bewirkt.
  • In S1005 werden jeder Gesichtsort von FA1, FA2, ..., FaN und die gesamte Gesichtsanzahl N aufgezeichnet.
  • In S1006 wird K = 1 festgelegt. K bedeutet jede Gesichtsposition und dient für jeden angepassten Gesichtsblock.
  • In S1007 wird der Bildblock bei der Position Fak von dem Bild X eingelesen.
  • In S1008 wird das Bild X projiziert.
  • In S1009 wird gemäß dem Projektionsbild entschieden, ob eine Augenprojektion vorhanden ist. Wenn JA, wird zu S1010 übergegangen, und wenn NEIN, wird zu S1014 übergegangen.
  • In S1010 wird gemäß dem Projektionsbild entschieden, ob eine Mundprojektion vorhanden ist. Wenn JA, wird zu S1011 übergegangen, und wenn NEIN, wird zu S1014 übergegangen.
  • In S1011 wird entschieden, ob es notwendig ist, zu beurteilen, ob sich der Mund öffnet. Wenn JA, wird zu S1012 übergegangen, und wenn NEIN, wird zu S1013 übergegangen.
  • In S1012 wird entschieden, ob der Mund geöffnet ist. Wenn JA, wird zu S1013 übergegangen, und wenn NEIN, wird zu S1014 übergegangen.
  • In S1013 wird der Wert der gegenwärtigen besseren Gesichter um 1 erhöht.
  • In S1014 wird entschieden, ob die Gesichter mit normalem Ausdruck, welche gegenwärtig bei den erfassten Bildern erfasst werden, mehr als bei den früher erfassten sind, wobei zu S1015 übergegangen wird, wenn JA, und zu S1016 übergegangen wird, wenn NEIN.
  • In S1016 wird entschieden, ob sämtliche Gesichter in dem gegenwärtigen Bild bearbeitet wurden, wobei zu Schritt S1017 übergegangen wird, wenn JA, und zu S1018 übergegangen wird, wenn NEIN.
  • In S1017 wird entschieden, ob genügend Rahmen verarbeitet wurden, wobei zu S1020 übergegangen wird, wenn JA, und zu S1018 übergegangen wird, wenn NEIN.
  • In S1020 werden die besten Gesichtsbildrahmen aus dem Speicher entnommen.
  • In S1021 wird der Aufnahmesteuerbefehl ausgegeben, um den folgenden Vorgang und die Aufnahmezustandseinstellung zu vollenden.

Claims (4)

  1. Digitalkameragerät mit auswählbarem bestem Aufnahmemoment, umfassend einen Kamerakopf (1) und eine Speicherschaltung (2), dadurch gekennzeichnet, dass: die Kamera ferner umfasst: einen Signalprozessor (3), serienmäßig umfassend ein Gesichtserfassungsmodul (3-1), ein Modul (3-2) für die Anordnung von Augen und Mund und ein Modul (3-3) zur Beurteilung von Blinzeln und offenem Mund, wobei: das Gesichtserfassungsmodul (3-1) das digitale Bild aus der Speicherschaltung ausliest und das Ergebnis nach einer Gesichtsanordnung zu dem Modul (3-2) für die Anordnung von Augen und Mund übermittelt; das Modul (3-2) für die Anordnung von Augen und Mund das Ergebnis nach einer Anordnung von Augen und Mund zu dem Modul (3-3) zur Beurteilung von Blinzeln und offenem Mund übermittelt; das Modul (3-3) zur Beurteilung von Blinzeln und offenem Mund das Beurteilungsergebnis aussendet; die Steuerschaltung (4) einen Aufnahmesteuerbefehl ausgibt, wenn das Beurteilungsergebnis des Moduls (3-3) zur Beurteilung von Blinzeln und offenem Mund einen besten Aufnahmemoment bedeutet, und keinen Aufnahmesteuerbefehl ausgibt, wenn das Beurteilungsergebnis des Moduls (3-3) zur Beurteilung von Blinzeln und offenem Mund keinen besten Aufnahmemoment bedeutet.
  2. Digitalkameragerät mit auswählbarem bestem Aufnahmemoment nach Anspruch 1, dadurch gekennzeichnet, dass: das Gesichtserfassungsmodul (3-1) eine Modellschablone (3-1-1) in mehreren Maßverhältnissen, ein in der Wartephase aufgenommenes Bild (3-1-2) und eine arithmetische Einheit (3-1-3) zur Modellschablonenanpassung umfasst, wobei die arithmetische Einheit (3-1-3) zur Modellschablonenanpassung die Modellschablone (3-1-1) in mehreren Maßverhältnissen und das in der Wartephase aufgenommene Bild (3-1-2) in dem Speicher (2) empfängt und das arithmetische Ergebnis zu der Gesichtsbildposition (3-1-4) übermittelt, wobei die Modellschablone (3-1-1) in mehreren Maßverhältnissen, das in der Wartephase aufgenommene Bild (3-1-2) und die Gesichtsbildposition (3-1-4) jeweils unter den verschiedenen Adressen des Speichers (2) gespeichert werden.
  3. Digitalkameragerät mit auswählbarem bestem Aufnahmemoment nach Anspruch 1, dadurch gekennzeichnet, dass: das Modul (3-2) für die Anordnung von Augen und Mund das in der Wartephase aufgenommene Bild (3-1-2), die Gesichtsbildposition (3-1-4) und eine Einheit (3-2-1) zur horizontalen und zur vertikalen Projektion umfasst, wobei die Einheit zur horizontalen und zur vertikalen Projektion das in der Wartephase aufgenommene Bild (3-1-2) und die Gesichtsbildposition (3-1-4) in dem Speicher (2) empfängt und das arithmetische Ergebnis zu der Position (3-2-2) von Augen und Mund übermittelt, wobei das in der Wartephase aufgenommene Bild (3-1-2), die Gesichtsbildposition (3-1-4) und die der Position (3-2-2) von Augen und Mund jeweils unter den verschiedenen Adressen des Speichers (2) gespeichert werden.
  4. Digitalkameragerät mit auswählbarem bestem Aufnahmemoment nach Anspruch 1, dadurch gekennzeichnet, dass: das Modul (3-3) zur Beurteilung von Blinzeln und offenem Mund das in der Wartephase aufgenommene Bild (3-1-2), die Position (3-2-2) von Augen und Mund und eine Einheit (3-3-1) zur Beurteilung von Blinzeln und offenem Mund umfasst, wobei die Einheit zur Beurteilung von Blinzeln und offenem Mund das in der Wartephase aufgenommene Bild (3-1-2) und die Position (3-2-2) von Augen und Mund in dem Speicher (2) speichert, die Beurteilungsergebnisse für Blinzeln und offenen Mund für das Gesicht jeder Person erhält und den Befehl zu der Steuereinheit (4) ausgibt, wobei das in der Wartephase aufgenommene Bild (3-1-2) und die Position (3-2-2) von Augen und Mund jeweils unter den verschiedenen Adressen des Speichers (2) gespeichert werden.
DE102005052901A 2005-01-05 2005-11-03 Digitalkameragerät mit auswählbarem bestem Aufnahmemoment Withdrawn DE102005052901A1 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CNB2005100232565A CN100358340C (zh) 2005-01-05 2005-01-05 可选择最佳拍照时机的数码相机
CN2005100232565 2005-01-05

Publications (1)

Publication Number Publication Date
DE102005052901A1 true DE102005052901A1 (de) 2006-07-13

Family

ID=34875811

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102005052901A Withdrawn DE102005052901A1 (de) 2005-01-05 2005-11-03 Digitalkameragerät mit auswählbarem bestem Aufnahmemoment

Country Status (11)

Country Link
US (1) US20060147192A1 (de)
JP (1) JP2006191526A (de)
KR (1) KR100676408B1 (de)
CN (1) CN100358340C (de)
CA (1) CA2517989A1 (de)
DE (1) DE102005052901A1 (de)
FI (1) FI20051187L (de)
FR (1) FR2880452A1 (de)
GB (1) GB2422020B (de)
IT (1) ITMI20051990A1 (de)
RU (1) RU2302026C2 (de)

Families Citing this family (60)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8948468B2 (en) 2003-06-26 2015-02-03 Fotonation Limited Modification of viewing parameters for digital images using face detection information
US8593542B2 (en) 2005-12-27 2013-11-26 DigitalOptics Corporation Europe Limited Foreground/background separation using reference images
US7269292B2 (en) 2003-06-26 2007-09-11 Fotonation Vision Limited Digital image adjustable compression and resolution using face detection information
US7565030B2 (en) 2003-06-26 2009-07-21 Fotonation Vision Limited Detecting orientation of digital images using face detection information
US8498452B2 (en) 2003-06-26 2013-07-30 DigitalOptics Corporation Europe Limited Digital image processing using face detection information
US8155397B2 (en) 2007-09-26 2012-04-10 DigitalOptics Corporation Europe Limited Face tracking in a camera processor
US8494286B2 (en) 2008-02-05 2013-07-23 DigitalOptics Corporation Europe Limited Face detection in mid-shot digital images
US9692964B2 (en) 2003-06-26 2017-06-27 Fotonation Limited Modification of post-viewing parameters for digital images using image region or feature information
US9129381B2 (en) 2003-06-26 2015-09-08 Fotonation Limited Modification of post-viewing parameters for digital images using image region or feature information
US7471846B2 (en) 2003-06-26 2008-12-30 Fotonation Vision Limited Perfecting the effect of flash within an image acquisition devices using face detection
US8989453B2 (en) 2003-06-26 2015-03-24 Fotonation Limited Digital image processing using face detection information
US7620218B2 (en) 2006-08-11 2009-11-17 Fotonation Ireland Limited Real-time face tracking with reference images
US7574016B2 (en) 2003-06-26 2009-08-11 Fotonation Vision Limited Digital image processing using face detection information
US8330831B2 (en) 2003-08-05 2012-12-11 DigitalOptics Corporation Europe Limited Method of gathering visual meta data using a reference image
US7844076B2 (en) 2003-06-26 2010-11-30 Fotonation Vision Limited Digital image processing using face detection and skin tone information
US7792970B2 (en) 2005-06-17 2010-09-07 Fotonation Vision Limited Method for establishing a paired connection between media devices
US8896725B2 (en) 2007-06-21 2014-11-25 Fotonation Limited Image capture device with contemporaneous reference image capture mechanism
US7440593B1 (en) 2003-06-26 2008-10-21 Fotonation Vision Limited Method of improving orientation and color balance of digital images using face detection information
US8682097B2 (en) 2006-02-14 2014-03-25 DigitalOptics Corporation Europe Limited Digital image enhancement with reference images
US8320641B2 (en) 2004-10-28 2012-11-27 DigitalOptics Corporation Europe Limited Method and apparatus for red-eye detection using preview or other reference images
US7315631B1 (en) 2006-08-11 2008-01-01 Fotonation Vision Limited Real-time face tracking in a digital image acquisition device
US8503800B2 (en) 2007-03-05 2013-08-06 DigitalOptics Corporation Europe Limited Illumination detection using classifier chains
EP1962497B1 (de) * 2005-11-25 2013-01-16 Nikon Corporation Elektronische kamera und bildverarbeitungseinrichtung
US8125526B2 (en) 2006-02-03 2012-02-28 Olympus Imaging Corp. Camera for selecting an image from a plurality of images based on a face portion and contour of a subject in the image
JP2007318725A (ja) * 2006-04-27 2007-12-06 Olympus Imaging Corp カメラ、カメラの撮影制御方法、プログラム、記録媒体
JP4127296B2 (ja) * 2006-06-09 2008-07-30 ソニー株式会社 撮像装置、および撮像装置制御方法、並びにコンピュータ・プログラム
ATE497218T1 (de) 2006-06-12 2011-02-15 Tessera Tech Ireland Ltd Fortschritte bei der erweiterung der aam- techniken aus grauskalen- zu farbbildern
US7403643B2 (en) 2006-08-11 2008-07-22 Fotonation Vision Limited Real-time face tracking in a digital image acquisition device
US7916897B2 (en) 2006-08-11 2011-03-29 Tessera Technologies Ireland Limited Face tracking for controlling imaging parameters
JP4240108B2 (ja) * 2006-10-31 2009-03-18 ソニー株式会社 画像記憶装置、撮像装置、画像記憶方法およびプログラム
US8055067B2 (en) 2007-01-18 2011-11-08 DigitalOptics Corporation Europe Limited Color segmentation
US20090048908A1 (en) * 2007-01-31 2009-02-19 Vulcan Portals, Inc. Media delivery system
US20080183575A1 (en) * 2007-01-31 2008-07-31 Vulcan Portals, Inc. Back-channel media delivery system
EP2115662B1 (de) 2007-02-28 2010-06-23 Fotonation Vision Limited Trennung der direktionalen beleuchtungsvariabilität in der statistischen gesichtsmodellierung auf basis von texturraumzerlegungen
KR101247147B1 (ko) 2007-03-05 2013-03-29 디지털옵틱스 코포레이션 유럽 리미티드 디지털 영상 획득 장치에서의 얼굴 탐색 및 검출
WO2008131823A1 (en) * 2007-04-30 2008-11-06 Fotonation Vision Limited Method and apparatus for automatically controlling the decisive moment for an image acquisition device
US7916971B2 (en) 2007-05-24 2011-03-29 Tessera Technologies Ireland Limited Image processing method and apparatus
KR100932860B1 (ko) 2007-07-09 2009-12-21 이영태 키패드용 에프엘지에프 도광판
JP2009038649A (ja) * 2007-08-02 2009-02-19 Panasonic Corp 信号処理回路、及び撮影装置
JP4853425B2 (ja) * 2007-08-14 2012-01-11 ソニー株式会社 撮像装置、撮像方法およびプログラム
CN101378454B (zh) * 2007-08-31 2010-06-16 鸿富锦精密工业(深圳)有限公司 摄像设备及其拍摄方法
CN101388070B (zh) * 2007-09-14 2011-11-30 鸿富锦精密工业(深圳)有限公司 选择最佳时机捕获影像的系统及方法
JP4663700B2 (ja) * 2007-09-28 2011-04-06 富士フイルム株式会社 撮影装置、及び撮影方法
JP5169139B2 (ja) * 2007-10-25 2013-03-27 株式会社ニコン カメラ、および画像記録プログラム
CN100582851C (zh) * 2007-12-04 2010-01-20 鸿富锦精密工业(深圳)有限公司 提高光学镜头解像力的对焦系统及方法
US7855737B2 (en) 2008-03-26 2010-12-21 Fotonation Ireland Limited Method of making a digital camera image of a scene including the camera user
CN106919911A (zh) 2008-07-30 2017-07-04 快图有限公司 使用脸部检测的自动脸部和皮肤修饰
JP5361547B2 (ja) * 2008-08-07 2013-12-04 キヤノン株式会社 撮像装置及び撮影方法、プログラム
US8700451B2 (en) * 2008-10-29 2014-04-15 Vulcan Ip Holdings Inc. Systems and methods for tracking consumers
CN102006407B (zh) * 2009-09-03 2012-11-28 华晶科技股份有限公司 防眨眼拍摄系统及方法
US8379917B2 (en) 2009-10-02 2013-02-19 DigitalOptics Corporation Europe Limited Face recognition performance using additional image features
US20110205383A1 (en) * 2010-02-24 2011-08-25 Research In Motion Limited Eye blink avoidance during image acquisition in a mobile communications device with digital camera functionality
US20120300092A1 (en) * 2011-05-23 2012-11-29 Microsoft Corporation Automatically optimizing capture of images of one or more subjects
CN103312945A (zh) * 2012-03-07 2013-09-18 华晶科技股份有限公司 摄像装置及其摄像方法及人物辨识拍照系统
CN102710865A (zh) * 2012-06-18 2012-10-03 宇龙计算机通信科技(深圳)有限公司 具有拍照功能的移动终端及其人像自拍方法
CN103491297A (zh) * 2013-08-22 2014-01-01 英华达(南京)科技有限公司 拍照方法及设备
CN105282433A (zh) * 2015-06-25 2016-01-27 维沃移动通信有限公司 拍照方法及终端
CN105872352A (zh) * 2015-12-08 2016-08-17 乐视移动智能信息技术(北京)有限公司 一种拍摄照片的方法及装置
CN106454112A (zh) * 2016-11-21 2017-02-22 上海斐讯数据通信技术有限公司 一种拍摄方法及系统
US20200213510A1 (en) * 2018-12-30 2020-07-02 Luke Trevitt System and method to capture and customize relevant image and further allows user to share the relevant image over a network

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN87105458A (zh) * 1987-08-10 1988-05-18 程嵩岳 储能式照相机快门释放装置
JPH01193823A (ja) * 1988-01-29 1989-08-03 Konica Corp Idカードの撮影装置
CN2300931Y (zh) * 1997-05-30 1998-12-16 郭华有 带自拍蜂鸣装置的照相机
KR19990021639A (ko) * 1997-08-30 1999-03-25 정몽규 졸음운전 검출장치 및 판단방법
EP1380884B1 (de) * 1999-09-14 2010-09-29 Kabushiki Kaisha Toshiba Angesichtsphotographiervorrichtung und -verfahren
JP4345154B2 (ja) * 1999-09-29 2009-10-14 カシオ計算機株式会社 撮影画像記録装置および撮影画像記録制御方法
JP2001211377A (ja) 2000-01-26 2001-08-03 Fuji Photo Film Co Ltd デジタルカメラ
JP2001338303A (ja) 2000-05-30 2001-12-07 Canon Inc 撮像装置、方法、及びコンピュータ読み取り可能な記憶媒体
US7027618B2 (en) * 2001-09-28 2006-04-11 Koninklijke Philips Electronics N.V. Head motion estimation from four feature points
JP4063583B2 (ja) 2002-05-20 2008-03-19 三洋電機株式会社 デジタルカメラ
KR100459438B1 (ko) * 2002-10-02 2004-12-03 엘지전자 주식회사 카메라의 정지영상 캡처 방법
JP2004294498A (ja) * 2003-03-25 2004-10-21 Fuji Photo Film Co Ltd 自動撮影システム
JP2004297518A (ja) * 2003-03-27 2004-10-21 Matsushita Electric Ind Co Ltd 認証対象画像撮像装置及びその方法
JP2004343317A (ja) * 2003-05-14 2004-12-02 Sony Corp 撮像装置

Also Published As

Publication number Publication date
FR2880452A1 (fr) 2006-07-07
KR20060080526A (ko) 2006-07-10
GB0519288D0 (en) 2005-11-02
CA2517989A1 (en) 2006-07-05
CN100358340C (zh) 2007-12-26
KR100676408B1 (ko) 2007-01-30
CN1642233A (zh) 2005-07-20
RU2302026C2 (ru) 2007-06-27
JP2006191526A (ja) 2006-07-20
US20060147192A1 (en) 2006-07-06
FI20051187A0 (fi) 2005-11-22
GB2422020A (en) 2006-07-12
FI20051187L (fi) 2006-07-06
RU2005128136A (ru) 2007-03-20
ITMI20051990A1 (it) 2006-07-06
GB2422020B (en) 2007-05-23

Similar Documents

Publication Publication Date Title
DE102005052901A1 (de) Digitalkameragerät mit auswählbarem bestem Aufnahmemoment
KR102192899B1 (ko) 이미지에 보케 효과를 적용하는 방법 및 기록매체
JP4974788B2 (ja) 画像処理装置、画像処理方法、プログラム、及び記憶媒体
EP4322027A2 (de) Systeme und verfahren zur förderung von tiefenlernen zur selektiven speicherung von audiovisuellem inhalt
JP4035153B2 (ja) 画像処理方法および画像処理装置、並びに画像拡大方法
KR102616700B1 (ko) 영상 처리 장치 및 그 영상 처리 방법
US20230080693A1 (en) Image processing method, electronic device and readable storage medium
KR102410907B1 (ko) 영상 처리 장치 및 그 영상 처리 방법
US20140132794A1 (en) Information processing device, information processing method, and program
JP4752941B2 (ja) 画像合成装置及びプログラム
DE102007055912A1 (de) Augenliderfassungsvorrichtung, Augenliderfassungsverfahren und zugehöriges Programm
Hou et al. Deep feature consistent deep image transformations: Downscaling, decolorization and HDR tone mapping
AU2010313042B9 (en) Moving image processing program, moving image processing device, moving image processing method, and image-capturing device provided with moving image processing device
CN111967319B (zh) 基于红外和可见光的活体检测方法、装置、设备和存储介质
CN109190456B (zh) 基于聚合通道特征和灰度共生矩阵的多特征融合俯视行人检测方法
DE102020007465A1 (de) Steuern bzw. Regeln eines neuronalen Netzwerkes durch zwischengeschaltete Latenträume
CN109477715A (zh) 载体辅助跟踪
DE10315462A1 (de) Bildkorrektursystem und -verfahren
Hou et al. Learning based image transformation using convolutional neural networks
CN109477607A (zh) 用于跟踪的图像处理
WO2023221684A1 (zh) 数字人生成方法和装置及存储介质
JP2010286959A (ja) 顔画像高解像度化方法、顔画像高解像度化装置、及びそのプログラム
KR102430743B1 (ko) 데이터 증강 기반 사물 분석 모델 학습 장치 및 방법
CN111507149B (zh) 基于表情识别的交互方法、装置和设备
US20230298135A1 (en) Image super-resolution method using frequency domain features

Legal Events

Date Code Title Description
OP8 Request for examination as to paragraph 44 patent law
8139 Disposal/non-payment of the annual fee