HINTERGRUND DER ERFINDUNGBACKGROUND OF THE INVENTION
1. Gebiet der Erfindung1. Field of the invention
Die vorliegende Erfindung bezieht sich auf eine Bildbearbeitungsvorrichtung, ein Bildbearbeitungsverfahren und ein Bildbearbeitungsprogramm.The present invention relates to an image processing apparatus, an image processing method and an image processing program.
2. Beschreibung verwandten Stands der Technik2. Description of Related Art
In Laboratorien, Produktionsstätten und dergleichen werden Hochgeschwindigkeits-Bilderfassungsvorrichtungen eingesetzt, die in der Lage sind, Bilder von Subjekten bei hohen Einzelbildraten (frame rates) zu erfassen, um Bewegungen verschiedener Typen von Subjekten (Werkstücke, Vorrichtungen und dergleichen) zu analysieren. Wenn ein Bild eines Subjekts durch eine Kamera erfasst wird, werden Bilddaten einer Mehrzahl von Einzelbildern (Frames) entsprechend Bildern einer Mehrzahl von Einzelbildern sukzessive erfasst, und die erfassten Bilddaten der Mehrzahl von Einzelbildern werden als Bewegtbilddaten in einer Speichereinheit gespeichert. Basierend auf den in der Speichereinheit gespeicherten Bilddaten werden die Bilder der Mehrzahl von Einzelbildern als ein Bewegtbild des Subjektes auf einer Anzeigeneinheit, wie etwa ein Flüssigkristall-Anzeigepaneel, angezeigt. Unter Verwendung eines solchen Bewegtbildes werden die Bewegungen des Subjektes analysiert (siehe beispielsweise japanische ungeprüfte Patentveröffentlichung Nr. 2009-141709 ).In laboratories, manufacturing facilities, and the like, high-speed image capture devices are employed which are capable of capturing images of subjects at high frame rates to analyze motions of various types of subjects (workpieces, devices, and the like). When an image of a subject is detected by a camera, image data of a plurality of frames corresponding to images of a plurality of frames are successively detected, and the captured image data of the plurality of frames are stored as moving image data in a storage unit. Based on the image data stored in the storage unit, the images of the plurality of image frames are displayed as a moving image of the subject on a display unit such as a liquid crystal display panel. Using such a moving picture, the movements of the subject are analyzed (see, for example, FIG Japanese Unexamined Patent Publication No. 2009-141709 ).
Die japanische ungeprüfte Patentveröffentlichung Nr. 2009-141709 beschreibt eine Hochgeschwindigkeits-Bilderfassungsvorrichtung, die Bilder einer Mehrzahl von Einzelbildern bei einer hohen Geschwindigkeit während der Bilderfassung eines Subjektes aufzeichnet und die aufgezeichneten Bilder der Mehrzahl von Einzelbildern bei einer niedrigeren Einzelbildrate als der der Bilderfassung langsam wiedergibt. Daher ist es durch Erfassen eines Bildes eines Subjektes unter Verwendung der Hochgeschwindigkeits-Bilderfassungsvorrichtung möglich, momentane Bewegungen des Subjektes zu beobachten, die durch Menschen nicht visuell wahrgenommen werden können.The Japanese Unexamined Patent Publication No. 2009-141709 describes a high-speed image capture apparatus that records images of a plurality of frames at a high speed during image capture of a subject and slowly reproduces the recorded images of the plurality of frames at a frame rate lower than that of image capture. Therefore, by capturing an image of a subject using the high speed image capture device, it is possible to observe instantaneous movements of the subject that can not be visually perceived by humans.
In Fällen der Beobachtung gewisser momentaner Bewegungen eines Subjektes wird eine hinreichende längere Bildaufzeichnungszeit eingestellt, um die Aufzeichnung gewisser Bewegungen des zu beobachtenden Subjektes sicherzustellen. Daher, um nach Teilen, die solche gewisse Bewegungen des Subjektes zeigen, aus den aufgezeichneten Bildern einer Mehrzahl von Einzelbildern zu suchen, ist es notwendig, die aufgezeichneten Bilder über einen längeren Zeitraum wiederzugeben.In cases of observation of certain momentary movements of a subject, a sufficient longer image recording time is set to ensure the recording of certain movements of the subject to be observed. Therefore, in order to search for parts showing such certain movements of the subject from the recorded images of a plurality of frames, it is necessary to reproduce the recorded images over a long period of time.
ZUSAMMENFASSUNG DER ERFINDUNGSUMMARY OF THE INVENTION
Eine Aufgabe der vorliegenden Erfindung ist es, eine Bildbearbeitungsvorrichtung, eine Bildbearbeitungsverfahren und ein Bildbearbeitungsprogramm bereitzustellen, die unmittelbares und leichtes Suchen nach Bildern ermöglichen, die gewisse Zustände von Subjekten zeigen.
- (1) Eine Bildbearbeitungsvorrichtung gemäß einer Ausführungsform der vorliegenden Erfindung ist eine Bildbearbeitungsvorrichtung zum Anzeigen erster Bilder einer Mehrzahl von Einzelbildern, die ein Bewegtbild eines Objektes bilden, beinhaltend: eine Speichereinheit, die ausgelegt ist zum Speichern erster Bilddaten einer Mehrzahl von Einzelbildern zum Anzeigen der ersten Bilder der Mehrzahl von Einzelbildern, und zum Speichern einer Mehrzahl von mit den ersten Bilddaten der Mehrzahl von Einzelbildern assoziierten Evaluierungswerten; eine Anzeigeneinheit einschließlich einer ersten Anzeigefläche und einer zweiten Anzeigefläche; eine Steuereinheit, die zum Anzeigen, auf der ersten Anzeigefläche, der ersten Bilder, basierend auf den ersten Bilddaten der entsprechenden in der Speichereinheit gespeicherten Einzelbilder, Auswählen der ersten Bilddaten einiger Einzelbilder aus den ersten Bilddaten der Mehrzahl von Einzelbildern, basierend auf der Mehrzahl von in der Speichereinheit gespeicherten Evaluierungswerten, Erzeugen zweiter Bilddaten entsprechend den ersten Bilddaten der ausgewählten Einzelbilder und Anzeigen, auf der zweiten Anzeigenfläche, zweiten Bildes, basierend auf den erzeugten zweiten Bilddaten, ausgelegt ist, und eine Bedieneinheit, die dafür ausgelegt ist, so durch einen Anwender bedient zu werden, dass der Anwender die Bedieneinheit zur Auswahl des in der zweiten Anzeigefläche angezeigten zweiten Bildes bedient; wobei die Mehrzahl von Evaluierungswerten Werte sind, die anhand eines Zustands des Objektes variiert werden, das zweite Bild ein Bild äquivalent den entsprechenden ersten Bildern ist und die Steuereinheit dafür ausgelegt ist, wenn das zweite Bild durch die Bedieneinheit ausgewählt worden ist, das erste Bild entsprechend dem ausgewählten zweiten Bild auf der ersten Anzeigenfläche anzuzeigen.
An object of the present invention is to provide an image processing apparatus, an image processing method and an image processing program which enable immediate and easy searching for images showing certain states of subjects. - (1) An image processing apparatus according to an embodiment of the present invention is an image processing apparatus for displaying first images of a plurality of frames constituting a moving image of an object, including: a storage unit configured to store first image data of a plurality of frames for displaying the first one Images of the plurality of frames, and for storing a plurality of evaluation values associated with the first image data of the plurality of frames; a display unit including a first display area and a second display area; a control unit for displaying, on the first display area, the first images, based on the first image data of the respective image frames stored in the storage unit, selecting the first image data of a few frames from the first image data of the plurality of image frames based on the plurality of evaluation values stored in the memory unit, generating second image data corresponding to the first image data of the selected frames and displays, on the second display area, second image based on the generated second image data, and an operation unit configured thereby to be operated by a user to be that the user operates the operating unit to select the second image displayed in the second display area; wherein the plurality of evaluation values are values varied based on a state of the object, the second image is an image equivalent to the corresponding first images, and the control unit is configured, when the second image has been selected by the operation unit, corresponding to the first image the selected second image on the first ad slot.
Bei der Bildbearbeitungsvorrichtung werden die ersten Bilder auf der ersten Anzeigenfläche der Anzeigeneinheit angezeigt, basierend auf den ersten Bilddaten der in der Speichereinheit gespeicherten jeweiligen Einzelbilder. Die ersten Bilddaten einiger Einzelbilder werden aus den ersten Bilddaten der Mehrzahl von Einzelbildern ausgewählt, basierend auf der Mehrzahl von in der Speichereinheit gespeicherten Evaluierungswerten. Die Mehrzahl von Evaluierungswerten wird anhand des Zustands des Objektes variiert. Daher werden die ersten Bilddaten einiger Einzelbilder ausgewählt, basierend auf dem Zustand des Objekts. Die zweiten Bilddaten entsprechend den ersten Bilddaten der ausgewählten Einzelbilder werden erzeugt. Basierend auf den erzeugten zweiten Bilddaten wird das den entsprechenden ersten Bildern äquivalente zweite Bild auf der zweiten Anzeigenfläche angezeigt.In the image processing apparatus, the first images are displayed on the first display surface of the display unit based on the first image data of the respective individual images stored in the storage unit. The first image data of a few frames are selected from the first image data of the plurality of frames based on the plurality of evaluation values stored in the memory unit. The plurality of evaluation values are varied based on the state of the object. Therefore, the first image data of some frames are selected based on the Condition of the object. The second image data corresponding to the first image data of the selected frames are generated. Based on the generated second image data, the second image equivalent to the corresponding first images is displayed on the second display surface.
Ein Anwender kann das auf der zweiten Anzeigenfläche angezeigte zweite Bild durch Betätigen der Bedieneinheit auswählen. Das dem ausgewählten zweiten Bild entsprechende erste Bild wird auf der ersten Anzeigenfläche angezeigt. Dies ermöglicht dem Anwender, unmittelbar und leicht nach ersten Bildern zu suchen, die einen gewissen Zustand des Objektes zeigen.
- (2) Die Steuereinheit kann dafür ausgelegt sein, die ersten Bilddaten des einem Evaluierungswert, der eine vorbestimmte Charakteristik anzeigt, entsprechenden Einzelbildes aus der Mehrzahl von Evaluierungswerten auszuwählen.
A user may select the second image displayed on the second display area by operating the operation unit. The first image corresponding to the selected second image is displayed on the first ad slot. This allows the user to search directly and easily for first images showing a certain state of the object. - (2) The control unit may be configured to select the first image data of the one frame of the plurality of evaluation values corresponding to an evaluation value indicating a predetermined characteristic.
In diesem Fall zeigen die ersten Bilder, basierend auf den ersten Bilddaten der ausgewählten einigen Einzelbilder, das in einem vorbestimmten Zustand vorliegende Objekt. Daher wird das zum ersten Bild, welches das im vorbestimmten Zustand befindliche Objekt zeigt, äquivalente zweite Bild auf der zweiten Anzeigenfläche angezeigt. Dies ermöglicht dem Anwender, unmittelbar und leicht nach Bildern zu suchen, die das in dem vorbestimmten Zustand befindliche Objekt zeigen.
- (3) Das zweite Bild können Bilder sein, welche durch Reduzieren des entsprechenden ersten Bildes erzeugt werden.
In this case, the first images, based on the first image data of the selected few frames, show the object in a predetermined state. Therefore, the second image equivalent to the first image showing the object in the predetermined state is displayed on the second display area. This allows the user to search directly and easily for images showing the object located in the predetermined state. - (3) The second image may be images generated by reducing the corresponding first image.
In diesem Fall, falls die ersten Bilddaten einer Mehrzahl von Rahmen ausgewählt werden, kann ein zweites Bild auf der zweiten Anzeigenfläche aufgelistet werden. Dies ermöglicht dem Anwender, erste Bilder leicht anzuzeigen, die das in einem gewünschten Zustand befindliche Objekt auf der ersten Anzeigenfläche zeigen, durch Betrachten des zweiten Bildes.
- (4) Die Anzeigeneinheit kann weiter eine dritte Anzeigenfläche beinhalten, und die Steuereinheit kann dafür ausgelegt sein, auf der dritten Anzeigenfläche eine aus der Mehrzahl von in der Speichereinheit gespeicherten Evaluierungswerten geformte Wellenform anzuzeigen, die Rahmen des ersten Bildes entsprechend dem in der zweiten Anzeigenfläche angezeigten zweiten Bildes zu identifizieren und in der dritten Anzeigenfläche Indikatoren anzuzeigen, welche Positionen auf der Wellenform bezeichnen, die den ersten Bildern der identifizierten Einzelbilder entsprechen.
In this case, if the first image data of a plurality of frames are selected, a second image on the second display area may be listed. This allows the user to easily display first images showing the object in a desired state on the first display area by viewing the second image. - (4) The display unit may further include a third display area, and the control unit may be configured to display on the third display area a waveform shaped from among the plurality of evaluation values stored in the memory unit, the frames of the first image corresponding to the one displayed in the second display area second image and to display in the third display area indicators indicating positions on the waveform corresponding to the first images of the identified frames.
In diesem Fall wird die aus der Mehrzahl von Evaluierungswerten ausgeformte Wellenform auf der dritten Anzeigenfläche zusammen mit den Indikatoren angezeigt. Weiterhin werden die Einzelbilder des ersten Bilds entsprechend dem auf der zweiten Anzeigenfläche angezeigten zweiten Bild identifiziert. Die Indikatoren bezeichnen die Positionen der Wellenform, die den ersten Bildern der identifizierten Einzelbilder entsprechen.In this case, the waveform formed from the plurality of evaluation values is displayed on the third display area together with the indicators. Furthermore, the frames of the first image are identified according to the second image displayed on the second display area. The indicators indicate the positions of the waveform corresponding to the first images of the identified frames.
Dies ermöglicht dem Anwender, Änderungen beim Zustand des Objektes wahrzunehmen, welche durch die ersten Bilder der Mehrzahl von Einzelbildern gezeigt werden, indem die Wellenform angeschaut wird. Weiterhin kann der Anwender leicht die Zustände des Objektes erkennen, die den ersten Bildern der identifizierten Einzelbilder entsprechen, durch Betrachten der Positionen auf der Wellenform, welche durch die Indikatoren bezeichnet werden.
- (5) Die Bedieneinheit kann zur Auswahl der auf der dritten Anzeigenfläche angezeigten Indikatoren ausgelegt sein und die Steuereinheit kann dazu ausgelegt sein, wenn der auf der dritten Anzeigenfläche angezeigte Indikator durch die Bedieneinheit ausgewählt worden ist, das Einzelbild des ersten Bildes zu identifizieren, welches der Position der Wellenform entspricht, welche durch den ausgewählten Indikator bezeichnet wird, und das erste Bild des identifizierten Einzelrahmens auf der ersten Anzeigenfläche anzuzeigen.
This allows the user to perceive changes in the state of the object, which are shown by the first images of the plurality of frames, by looking at the waveform. Further, the user can easily recognize the states of the object corresponding to the first images of the identified frames by viewing the positions on the waveform indicated by the indicators. - (5) The operation unit may be configured to select the indicators displayed on the third display area, and the control unit may be configured, when the indicator displayed on the third display area has been selected by the operation unit, to identify the frame of the first image that the Corresponds to the position of the waveform indicated by the selected indicator and to display the first image of the identified single frame on the first display area.
In diesem Fall kann der Anwender den auf der dritten Anzeigenfläche angezeigten Indikator durch Betätigen der Bedieneinheit auswählen. Das erste Bild des Einzelbildes, das der Position auf der Wellenform entspricht, welche durch den ausgewählten Indikator bezeichnet wird, wird auf der ersten Anzeigenfläche angezeigt. Dies ermöglicht dem Anwender, unmittelbar und leicht nach ersten Bildern zu suchen, die einen gewissen Zustand des Objektes zeigen.
- (6) Die Mehrzahl von Evaluierungswerten können Werte sein, welche Charakteristika der ersten Bilder der Mehrzahl von Einzelbildern anzeigen.
In this case, the user can select the indicator displayed on the third display area by operating the operation unit. The first image of the frame corresponding to the position on the waveform indicated by the selected indicator is displayed on the first display area. This allows the user to search directly and easily for first images showing a certain state of the object. - (6) The plurality of evaluation values may be values indicating characteristics of the first images of the plurality of frames.
Die Mehrzahl von Evaluierungswerten wird aus ersten Bildern der Mehrzahl von Einzelbildern erfasst. Dies eliminiert die Notwendigkeit, eine zusätzliche Vorrichtung zum Erfassen der Mehrzahl von Evaluierungswerten bereitzustellen. Entsprechend kann die Struktur des die Bildbearbeitungsvorrichtung beinhaltenden Systems vereinfacht werden.
- (7) Die, die Charakteristika der Bilder der Mehrzahl von Einzelbildern anzeigenden Werte können Werte sein, die sich auf die Luminanz der Bilder der Mehrzahl von Einzelbildern beziehen.
The plurality of evaluation values are acquired from first images of the plurality of frames. This eliminates the need to provide an additional device for detecting the plurality of evaluation values. Accordingly, the structure of the system including the image processing apparatus can be simplified. - (7) The values indicative of the characteristics of the images of the plurality of frames may be values relating to the luminance of the images of the plurality of frames.
Die Luminanzen der ersten Bilder variieren gemäß dem Zustand des Objektes. Entsprechend variiert die Mehrzahl von Evaluierungswerten anhand des Zustands des Objektes. Daher werden die ersten Bilddaten einiger Einzelbilder entsprechend einem gewissen Zustand des Objektes leicht und korrekt ausgewählt, basierend auf den sich auf Luminanzen der ersten Bilder der Mehrzahl von Einzelbildern beziehenden Werten.
- (8) Die mehreren Evaluierungswerte können die Werte von Ausgaben aus einer Detektionsvorrichtung zum Detektieren eines Wertes sein, der mit der Änderung des Zustands des Objektes variiert wird.
The luminances of the first images vary according to the state of the object. Accordingly, the plurality of evaluation values vary based on the state of the object. Therefore, the first image data of some frames corresponding to a certain state of the object are easily and correctly selected based on the subject Luminances of the first images of the plurality of image-related values. - (8) The plurality of evaluation values may be the values of outputs from a detection device for detecting a value that is varied with the change of the state of the object.
In diesem Fall kann der Zustand des Objektes durch die Detektionsvorrichtung zuverlässig detektiert werden. Entsprechend, basierend auf den Werten von Ausgaben aus der Detektionsvorrichtung, können erste Bilddaten einiger Einzelbilder entsprechend dem gewissen Zustand des Objektes leicht und korrekt ausgewählt werden.
- (9) Die Bedieneinheit kann ausgelegt sein, ein Kommando zur Wiedergabe und reversen Wiedergabe eines Bewegtbildes zu erteilen und die Steuereinheit kann dafür ausgelegt sein, sukzessive Bilder einer Mehrzahl von Einzelbildern anzuzeigen, unter Verwendung des auf der ersten Anzeigenfläche als einer Referenz angezeigten ersten Bildes, basierend auf der Mehrzahl von ersten Bilddaten, die in der Speichereinheit gespeichert sind, wenn ein Befehl zur Wiedergabe oder reversen Wiedergabe eines Bewegtbildes durch die Bedieneinheit erteilt worden ist.
In this case, the state of the object can be reliably detected by the detection device. Accordingly, based on the values of outputs from the detection device, first image data of some frames can be easily and correctly selected according to the certain state of the object. - (9) The operation unit may be configured to issue a command to reproduce and reverse play a moving picture, and the control unit may be configured to display successive pictures of a plurality of frames using the first picture displayed on the first display area as a reference, based on the plurality of first image data stored in the storage unit, when a command for reproducing or reversing a moving image has been issued by the operation unit.
In diesem Fall kann der Anwender einen Befehl zur Wiedergabe und reversen Wiedergabe eines Bewegtbildes erzeugen. Falls ein Befehl zur Wiedergabe oder reversen Wiedergabe eines Bewegtbildes erteilt wird, werden Bilder einer Mehrzahl von Einzelbildern sukzessive angezeigt, unter Verwendung des in der ersten Anzeigenfläche als eine Referenz angezeigten ersten Bildes, basierend auf der Mehrzahl von ersten Bilddaten, die in der Speichereinheit gespeichert sind. Somit kann das Bewegtbild wiedergegeben oder revers wiedergegeben werden. Dies ermöglicht dem Anwender, leicht einen gewissen Zustand des Objektes, und Zustände des Objektes vor und nach dem gewissen Zustand zu betrachten.
- (10) Die Steuereinheit kann ausgelegt sein, erste Bilddaten von Einzelbildern aus den ersten Bilddaten der Mehrzahl von Einzelbildern auszuwählen, basierend auf der Mehrzahl von Evaluierungswerten, die in der Speichereinheit gespeichert sind, so dass die Anzahl von Einzelbildern der ausgewählten ersten Bilddaten gleich oder kleiner einer vorbestimmten Anzahl ist.
In this case, the user can generate a command for reproducing and reversing a moving picture. If a command for reproducing or reversing a moving picture is issued, pictures of a plurality of frames are displayed successively using the first picture displayed in the first display area as a reference, based on the plurality of first picture data stored in the memory unit , Thus, the moving picture can be reproduced or reversed. This allows the user to easily view a certain state of the object, and states of the object before and after the certain state. - (10) The control unit may be configured to select first image data of frames from the first image data of the plurality of frames based on the plurality of evaluation values stored in the storage unit such that the number of frames of the selected first image data is equal to or smaller a predetermined number.
In diesem Fall übersteigt die Anzahl von Einzelbildern der ausgewählten ersten Bilddaten nicht die vorgegebene Anzahl. Dies ermöglicht ein Anzeigen eines zweiten Bildes mit einer Größe gleich oder größer einer gewissen Größe auf der zweiten Anzeigenfläche. Dies ermöglicht dem Anwender, leicht den Zustand des Objektes im zweiten Bild zu betrachten.
- (11) Die Steuereinheit kann ausgelegt sein, eine Bewegtbilddatei zu erzeugen, welche die ersten Bilddaten der Mehrzahl von Einzelbildern, die mit den ersten Bilddaten der Mehrzahl von Einzelbildern assoziierte Mehrzahl von Evaluierungswerten, Daten, welche die ausgewählten ersten Bilddaten anzeigen, und die zweiten Bilddaten entsprechend den ausgewählten ersten Bilddaten enthalten, und kann ausgelegt sein, die erzeugte Bewegtbilddatei in der Speichereinheit zu speichern.
In this case, the number of frames of the selected first image data does not exceed the predetermined number. This allows displaying a second image having a size equal to or larger than a certain size on the second ad slot. This allows the user to easily view the state of the object in the second image. - (11) The control unit may be configured to generate a motion picture file including the first image data of the plurality of frames, the plurality of evaluation values associated with the first image data of the plurality of frames, data indicating the selected first image data, and the second image data corresponding to the selected first image data, and may be configured to store the generated motion picture file in the storage unit.
In diesem Fall können die ersten Bilddaten der Mehrzahl von Einzelbildern, die Mehrzahl von Evaluierungswerten, die die ausgewählten ersten Bilddaten anzeigenden Daten, und die zweiten Bilddaten integral als eine Bewegtbilddatei behandelt werden. Dies macht es einfacher, die ersten Bilddaten der Mehrzahl von Einzelbildern, die Mehrzahl von Evaluierungswerten, die die ausgewählten ersten Bilddaten anzeigenden Daten und die zweiten Bilddaten zu behandeln.
- (12) Ein Bildbearbeitungsverfahren gemäß einer anderen Ausführungsform der vorliegenden Erfindung ist ein Bildbearbeitungsverfahren zum Anzeigen erster Bilder einer Mehrzahl von Einzelbildern, die ein Bewegtbild eines Objektes bilden, auf einer ersten Anzeigenfläche in einer Anzeigeneinheit, beinhaltend die Schritte: Speichern erster Bilddaten einer Mehrzahl von Einzelbildern zum Anzeigen der ersten Bilder der Mehrzahl von Einzelbildern und Speichern einer Mehrzahl von mit den ersten Bilddaten der Mehrzahl von Einzelbildern assoziierten Evaluierungswerten; Auswählen der ersten Bilddaten einiger Einzelbilder aus den ersten Bilddaten der Mehrzahl von Einzelbildern, basierend auf der gespeicherten Mehrzahl von Evaluierungswerten; und Erzeugen zweiter Bilddaten entsprechend den ersten Bilddaten der ausgewählten Einzelbilder und Anzeigen von dem zweiten Bild basierend auf den erzeugten zweiten Bilddaten auf einer zweiten Anzeigenfläche in der Anzeigeneinheit; Anzeigen, wenn das in der zweiten Anzeigenfläche angezeigte zweite Bild ausgewählt worden ist, des dem ausgewählten zweiten Bild entsprechenden ersten Bildes auf der ersten Anzeigenfläche der Anzeigeneinheit; wobei die Mehrzahl von Evaluierungswerten Werte sind, die anhand eines Zustands des Objektes variiert werden und das zweite Bild ein Bild äquivalent den entsprechenden ersten Bildern ist.
In this case, the first image data of the plurality of image frames, the plurality of evaluation values, the data indicating the selected first image data, and the second image data may be integrally treated as one motion picture file. This makes it easier to handle the first image data of the plurality of image frames, the plurality of evaluation values, the data indicating the selected first image data, and the second image data. - (12) An image processing method according to another embodiment of the present invention is an image processing method for displaying first images of a plurality of frames constituting a moving image of an object on a first display surface in a display unit, including the steps of: storing first image data of a plurality of frames for displaying the first images of the plurality of image frames and storing a plurality of evaluation values associated with the first image data of the plurality of image frames; Selecting the first image data of a few frames from the first image data of the plurality of frames based on the stored plurality of evaluation values; and generating second image data corresponding to the first image data of the selected frames and displaying the second image based on the generated second image data on a second display surface in the display unit; Indicating, when the second image displayed in the second display area has been selected, the first image corresponding to the selected second image on the first display area of the display unit; wherein the plurality of evaluation values are values that are varied based on a state of the object and the second image is an image equivalent to the corresponding first images.
Bei diesem Bildbearbeitungsverfahren werden die ersten Bilddaten einiger Einzelbilder aus den ersten Bilddaten der Mehrzahl von Einzelbildern ausgewählt, basierend auf der gespeicherten Mehrzahl von Evaluierungswerten. Die Mehrzahl von Evaluierungswerten wird anhand des Zustands des Objektes variiert. Daher werden die ersten Bilddaten einiger Einzelbilder basierend auf dem Zustand des Objektes ausgewählt. Die zweiten Bilddaten entsprechend den ersten Bilddaten des ausgewählten Einzelbildes werden erzeugt. Basierend auf den erzeugten zweiten Bilddaten wird das zweite Bild äquivalent den entsprechenden ersten Bildern auf der zweiten Anzeigenfläche angezeigt.In this image processing method, the first image data of some frames are selected from the first image data of the plurality of frames based on the stored plurality of evaluation values. The plurality of evaluation values are varied based on the state of the object. Therefore, the first image data of some frames are based on the state of the Object selected. The second image data corresponding to the first image data of the selected frame is generated. Based on the generated second image data, the second image is displayed equivalent to the corresponding first images on the second display area.
Das auf der zweiten Anzeigenfläche angezeigte zweite Bild wird ausgewählt. Das dem ausgewählten zweiten Bild entsprechende erste Bild wird auf der ersten Anzeigenfläche angezeigt. Dies ermöglicht dem Anwender, unmittelbar und leicht nach ersten Bildern zu suchen, die einen gewissen Zustand des Objektes zeigen.
- (13) Ein Bildbearbeitungsprogramm gemäß noch einer anderen Ausführungsform der vorliegenden Erfindung ist ein Bildbearbeitungsprogramm zum veranlassen einer Bearbeitungsvorrichtung zur Ausführung von Bildverarbeitung zum Anzeigen erster Bilder einer Mehrzahl von Einzelbildern, die ein Bewegtbild eines Objektes bilden, auf einer ersten Anzeigenfläche in einer Anzeigeneinheit, wobei das Programm dafür ausgelegt ist, die Bearbeitungsvorrichtung zu veranlassen, die Prozesse auszuführen: Speichern erster Bilddaten einer Mehrzahl von Einzelbildern zum Anzeigen der ersten Bilder der Mehrzahl von Einzelbildern und Speichern einer Mehrzahl von mit den ersten Bilddaten der Mehrzahl von Einzelbildern assoziierten Evaluierungswerten; Auswählen der ersten Bilddaten einiger Einzelbilder aus den ersten Bilddaten der Mehrzahl von Einzelbildern, basierend auf der gespeicherten Mehrzahl von Evaluierungswerten; und Erzeugen zweiter Bilddaten entsprechend den ersten Bilddaten der ausgewählten Einzelbilder und Anzeigen von dem zweiten Bild basierend auf den erzeugten zweiten Bilddaten auf einer zweiten Anzeigenfläche in der Anzeigeneinheit; Anzeigen, wenn das in der zweiten Anzeigenfläche angezeigte zweite Bild ausgewählt worden ist, des dem ausgewählten zweiten Bild entsprechenden ersten Bildes auf der ersten Anzeigenfläche der Anzeigeneinheit; wobei die Mehrzahl von Evaluierungswerten Werte sind, die anhand eines Zustands des Objektes variiert werden und das zweite Bild ein Bild äquivalent den entsprechenden ersten Bildern ist.
The second image displayed on the second ad slot is selected. The first image corresponding to the selected second image is displayed on the first ad slot. This allows the user to search directly and easily for first images showing a certain state of the object. - (13) An image processing program according to still another embodiment of the present invention is an image processing program for executing a processing apparatus for executing image processing for displaying first images of a plurality of individual images constituting a moving image of an object on a first display surface in a display unit A program is configured to cause the editing device to perform the processes of: storing first image data of a plurality of frames for displaying the first images of the plurality of frames and storing a plurality of evaluation values associated with the first image data of the plurality of frames; Selecting the first image data of a few frames from the first image data of the plurality of frames based on the stored plurality of evaluation values; and generating second image data corresponding to the first image data of the selected frames and displaying the second image based on the generated second image data on a second display surface in the display unit; Indicating, when the second image displayed in the second display area has been selected, the first image corresponding to the selected second image on the first display area of the display unit; wherein the plurality of evaluation values are values that are varied based on a state of the object and the second image is an image equivalent to the corresponding first images.
Bei diesem Bildbearbeitungsprogramm werden die ersten Bilddaten einiger Einzelbilder aus den ersten Bilddaten der Mehrzahl von Einzelbildern ausgewählt, basierend auf der gespeicherten Mehrzahl von Evaluierungswerten. Die Mehrzahl von Evaluierungswerten wird anhand des Zustands des Objektes variiert. Daher werden die ersten Bilddaten einiger Einzelbilder basierend auf dem Zustand des Objektes ausgewählt. Die zweiten Bilddaten entsprechend den ersten Bilddaten des ausgewählten Einzelbildes werden erzeugt. Basierend auf den erzeugten zweiten Bilddaten wird das zweite Bild äquivalent den entsprechenden ersten Bildern auf der zweiten Anzeigenfläche angezeigt.In this image processing program, the first image data of some frames are selected from the first image data of the plurality of frames based on the stored plurality of evaluation values. The plurality of evaluation values are varied based on the state of the object. Therefore, the first image data of some frames are selected based on the state of the object. The second image data corresponding to the first image data of the selected frame is generated. Based on the generated second image data, the second image is displayed equivalent to the corresponding first images on the second display area.
Das auf der zweiten Anzeigenfläche angezeigte zweite Bild wird ausgewählt. Das dem ausgewählten zweiten Bild entsprechende erste Bild wird auf der ersten Anzeigenfläche angezeigt. Dies ermöglicht dem Anwender, unmittelbar und leicht nach ersten Bildern zu suchen, die einen gewissen Zustand des Objektes zeigen.The second image displayed on the second ad slot is selected. The first image corresponding to the selected second image is displayed on the first ad slot. This allows the user to search directly and easily for first images showing a certain state of the object.
Gemäß der vorliegenden Erfindung ist es möglich, unmittelbar und leicht das Suchen nach Bildern zu ermöglichen, die gewisse Zustände von Subjekten zeigen.According to the present invention, it is possible to readily and easily search for images showing certain states of subjects.
KURZE BESCHREIBUNG DER ZEICHNUNGENBRIEF DESCRIPTION OF THE DRAWINGS
1 ist ein Blockdiagramm, das eine Struktur eines Bildbearbeitungssystems gemäß einer Ausführungsform der vorliegenden Erfindung illustriert; 1 Fig. 10 is a block diagram illustrating a structure of an image processing system according to an embodiment of the present invention;
2 ist eine Ansicht, die eine beispielhafte Anzeige auf einer Anzeigeneinheit zum Zeitpunkt eines Einstellens von Bilderfassungsbedingungen illustriert; 2 Fig. 10 is a view illustrating an exemplary display on a display unit at the time of setting image sensing conditions;
3A bis 3C sind schematische Ansichten, die Speicherzustände einer Bildaufzeichnungseinheit in 1 während eines Bildaufzeichnungsprozesses illustrieren; 3A to 3C 12 are schematic views showing the storage states of an image recording unit in FIG 1 during an image recording process;
4 ist eine schematische Ansicht, die einen anderen beispielhaften Speicherzustand der Bildaufzeichnungseinheit in 1 während des Bildaufzeichnungsprozesses illustriert; 4 FIG. 12 is a schematic view illustrating another exemplary storage state of the image recording unit in FIG 1 illustrated during the image recording process;
5 ist eine Ansicht, die eine beispielhafte Anzeige auf der Anzeigeneinheit während des Bildaufzeichnungsprozesses illustriert; 5 Fig. 12 is a view illustrating an exemplary display on the display unit during the image recording process;
6 ist eine Ansicht, die eine beispielhafte Anzeige auf der Anzeigeneinheit illustriert, wenn der Bildaufzeichnungsprozess abgeschlossen worden ist; 6 Fig. 15 is a view illustrating an exemplary display on the display unit when the image recording process has been completed;
7 ist eine Konzeptansicht, di ein Beispiel von Bilddaten einer Mehrzahl von in einem Bewegtbild-Datenspeicherbereich gespeicherten Einzelbildern und die Beziehung zwischen einer Mehrzahl von in einem Wellenform-Datenspeicherbereich gespeicherten Evaluierungswerten und Bildern der Mehrzahl von Einzelbildern, basierend auf den Bilddaten der Mehrzahl von Einzelbildern, illustriert; 7 FIG. 11 is a conceptual view illustrating an example of image data of a plurality of image frames stored in a motion picture data storage area and the relationship between a plurality of evaluation values stored in a waveform data storage area and images of the plurality of image images based on the image data of the plurality of image frames ;
8 ist eine schematische Ansicht einer Bewegtbilddatei, welche durch einen Dateispeicherprozess erzeugt worden ist; 8th Fig. 10 is a schematic view of a motion picture file generated by a file storage process;
9 ist eine Ansicht, die eine beispielhafte Anzeige auf der Anzeigeneinheit während eines selektiven Wiedergabeprozesses illustriert; 9 Fig. 13 is a view illustrating an exemplary display on the display unit during a selective playback process;
10 ist eine Ansicht, die eine beispielhafte Anzeige auf der Anzeigeneinheit während des selektiven Wiedergabeprozesses illustriert; 10 Fig. 13 is a view illustrating an exemplary display on the display unit during the selective playback process;
11 ist eine Ansicht, die eine beispielhafte Anzeige auf der Anzeigeneinheit während des selektiven Wiedergabeprozesses illustriert; 11 Fig. 13 is a view illustrating an exemplary display on the display unit during the selective playback process;
12 ist ein Flussdiagramm eines Dateispeicherprozesses; 12 Fig. 10 is a flowchart of a file storage process;
13 ist ein Flussdiagramm des selektiven Wiedergabeprozesses; 13 Fig. 10 is a flow chart of the selective rendering process;
14 ist ein Flussdiagramm des selektiven Wiedergabeprozesses; 14 Fig. 10 is a flow chart of the selective rendering process;
15 ist ein Flussdiagramm des selektiven Wiedergabeprozesses; und 15 Fig. 10 is a flow chart of the selective rendering process; and
16 ist eine Ansicht, die eine andere beispielhafte Anzeige auf der Anzeigeneinheit während des selektiven Wiedergabeprozesses illustriert. 16 Figure 13 is a view illustrating another exemplary display on the display unit during the selective rendering process.
DETAILLIERTE BESCHREIBUNG VON BEVORZUGTEN AUSFÜHRUNGSFORMENDETAILED DESCRIPTION OF PREFERRED EMBODIMENTS
Nachfolgend wird eine Bildbearbeitungsvorrichtung, ein Bildbearbeitungsverfahren und ein Bildbearbeitungsprogramm gemäß einer Ausführungsform der vorliegenden Erfindung unter Bezugnahme auf die Zeichnungen beschrieben. Wie später beschrieben wird, beinhaltet die Bildbearbeitungsvorrichtung gemäß der vorliegenden Ausführungsform eine Anzeigeneinheit. Die Anzeigeneinheit ist ausgelegt, kontinuierlich Bilder einer Mehrzahl von Einzelbildern zum Anzeigen von Bewegtbildern anzuzeigen.Hereinafter, an image processing apparatus, an image processing method and an image processing program according to an embodiment of the present invention will be described with reference to the drawings. As will be described later, the image processing apparatus according to the present embodiment includes a display unit. The display unit is configured to continuously display images of a plurality of frames for displaying motion pictures.
(1) Grundstruktur des Bildbearbeitungssystems(1) Basic structure of the image processing system
1 ist ein Blockdiagramm, das eine Struktur eines Bildbearbeitungssystems 100 gemäß einer Ausführungsform der vorliegenden Erfindung illustriert. Wie in 1 illustriert, beinhaltet das Bildbearbeitungssystem 100 eine Bildbearbeitungsvorrichtung 1, eine Kamera 2, eine Beleuchtungsvorrichtung 3 und eine Bedieneinheit 4. Die Bildbearbeitungsvorrichtung 1 beinhaltet eine Steuereinheit 10, eine Anzeigeneinheit 20, eine Bildaufzeichnungseinheit 30, eine Speichereinheit 40, einen Videospeicher 50, eine Wellenformsammeleinheit 60, einen Bus BS und eine Mehrzahl von (nicht illustrierten) Schnittstellen. Die Steuereinheit 10, die Anzeigeneinheit 20, die Bildaufzeichnungseinheit 30, die Speichereinheit 40, der Videospeicher 50 und die Wellenformsammeleinheit 60 sind mit dem Bus BS verbunden. Die Kamera 2, die Beleuchtungsvorrichtung 3 und die Bedieneinheit 4 sind mit dem Bus BS über entsprechende Schnittstellen verbunden. 1 is a block diagram showing a structure of an image processing system 100 illustrated in accordance with an embodiment of the present invention. As in 1 illustrated, includes the image processing system 100 an image processing device 1 , a camera 2 , a lighting device 3 and a control unit 4 , The image processing device 1 includes a control unit 10 , a display unit 20 , an image recording unit 30 , a storage unit 40 , a video store 50 , a waveform collection unit 60 , a bus BS and a plurality of (not illustrated) interfaces. The control unit 10 , the ad unit 20 , the image recording unit 30 , the storage unit 40 , the video store 50 and the waveform collection unit 60 are connected to the bus BS. The camera 2 , the lighting device 3 and the control unit 4 are connected to the bus BS via corresponding interfaces.
Ein PLC (Programmierbarer Logik-Controller) 5, ein Sensor 6 und eine Wellenformsammelvorrichtung 7 können mit der Bildbearbeitungsvorrichtung 1 verbunden sein. Ein Sensor 8 kann mit der Wellenformsammelvorrichtung 7 verbunden sein. Die Details davon werden später beschrieben.A PLC (Programmable Logic Controller) 5 , a sensor 6 and a waveform collecting device 7 can with the image processing device 1 be connected. A sensor 8th Can with the waveform collection device 7 be connected. The details of this will be described later.
Die Kamera 2 beinhaltet eine Bilderfassungsvorrichtung, wie etwa einen CCD-(charge-coupled device, ladungsgekoppelte Vorrichtung)Bildsensor oder einen CMOS-(Komplementär-Metalloxid-Halbleiter)Bildsensor. Ein Anwender kann die Lichtexpositionszeit (Verschlusszeit), die Bilderfassungs-Einzelbildrate und dergleichen der Bilderfassungsvorrichtung unter Verwendung der Bedieneinheit 4 einstellen. Die Bilderfassungs-Einzelbildrate bezieht sich auf eine Anzahl von Einzelbildern von pro Einheitszeit zu erfassenden Bildern. Weiterhin ist in der vorliegenden Ausführungsform die Kamera 2 in der Lage, Bilder eines Subjekts W bei Bilderfassungs-Einzelbildraten im Bereich von nicht weniger als 14 fps (Einzelbilder pro Sekunde) und nicht mehr als 32000 fps zu erfassen.The camera 2 includes an image capture device, such as a CCD (charge-coupled device) image sensor or a CMOS (Complementary Metal Oxide Semiconductor) image sensor. A user can set the light exposure time (shutter speed), the image capture frame rate, and the like of the image capture device using the operation unit 4 to adjust. The image capture frame rate refers to a number of frames of images to be captured per unit time. Furthermore, in the present embodiment, the camera 2 capable of capturing images of a subject W at frame rate frame rates in the range of not less than 14 fps (frames per second) and not more than 32000 fps.
Falls am Subjekt W eine Bilderfassung durch die Kamera 2 durchgeführt wird, erfasst die Bilderfassungsvorrichtung Bilder des Subjekts W bei der eingestellten Bilderfassungs-Einzelbildrate und dann werden die erfassten Bilder als Bilddaten ausgegeben. Somit werden Bilddaten einer Mehrzahl von Einzelbildern entsprechend Bildern der Mehrzahl von Einzelbildern aus der Kamera 2 der Bildbearbeitungsvorrichtung 1 zugeführt. Es wird ein Bewegtbild aus den Bildern der Mehrzahl von Einzelbildern ausgebildet. Danach werden Bilddaten einer Mehrzahl von Einzelbildern als Bewegtbilddaten bezeichnet.If at the subject W, an image capture by the camera 2 is performed, the image capturing device acquires images of the subject W at the set image capturing frame rate, and then the captured images are output as image data. Thus, image data of a plurality of frames corresponding to images of the plurality of frames are taken out of the camera 2 the image processing device 1 fed. A motion picture is formed from the pictures of the plurality of frames. Thereafter, image data of a plurality of frames are referred to as moving image data.
Die Kamera 2 ist auf einem (nicht gezeigten) Auflagetisch, wie etwa einem Stativ, zusammen mit der Beleuchtungsvorrichtung 3 montiert. Die Beleuchtungsvorrichtung 3 beinhaltet eine Lichtquelle, wie etwa eine Metallhalidlampe oder eine Hochleistungs-LED (Licht emittierende Diode). Die Beleuchtungsvorrichtung 3 wird zum Bestrahlen des Subjekts W mit Licht verwendet. Wenn das Subjekt W ausreichende Helligkeit aufweist, ist die Beleuchtungsvorrichtung 3 nicht notwendig.The camera 2 is on a support table (not shown), such as a tripod, together with the lighting device 3 assembled. The lighting device 3 includes a light source such as a metal halide lamp or a high power LED (light emitting diode). The lighting device 3 is used to irradiate the subject W with light. When the subject W has sufficient brightness, the lighting device is 3 unnecessary.
Der Videospeicher 50 besteht aus einem Speicher, wie etwa einem RAM (Wahlzugriffsspeicher, Random Access Memory). Der Videospeicher 50 wird sukzessive mit Bilddaten einer Mehrzahl von Einzelbildern aus der Kamera 2, der Bildaufzeichnungseinheit 30 oder der Speichereinheit 40 beliefert. Solche zugeführten Bilddaten einer Mehrzahl von Einzelbildern werden sukzessive im Videospeicher 50 gespeichert. Die Anzeigeneinheit 20 besteht beispielsweise aus einem Flüssigkristallanzeigepaneel oder einem organischen EL-(Elektrolumineszenz)Paneel.The video memory 50 consists of a memory, such as a RAM (Random Access Memory). The video memory 50 is successively with image data of a plurality of individual images from the camera 2 , the image recording unit 30 or the storage unit 40 supplies. Such input image data of a plurality of Frames are successively in the video memory 50 saved. The ad unit 20 For example, it consists of a liquid crystal display panel or an organic EL (electroluminescence) panel.
Die Anzeigeneinheit 20 wird veranlasst, darauf Bilder einer Mehrzahl von Einzelbildern sequentiell anzuzeigen, basierend auf Bilddaten einer Mehrzahl von Einzelbildern, die sukzessive im Videospeicher 50 gespeichert worden sind. Dies veranlasst die Anzeigeneinheit 20, Bewegtbilder darauf anzuzeigen.The ad unit 20 is caused to sequentially display images of a plurality of frames based on image data of a plurality of frames successively in the video memory 50 have been stored. This causes the ad unit 20 To display moving pictures on it.
Die Bedieneinheit 4 besteht aus einer Zeigevorrichtung, wie etwa einer Maus oder einem Trackball. Die Bedieneinheit 4 kann durch eine Tastatur, eine Fernsteuervorrichtung oder ein Touch-Paneel ausgebildet sein, zusammen mit der Zeigevorrichtung oder anstelle der Zeigevorrichtung. Die Bedieneinheit 4 kann auch integral mit der Bildbearbeitungsvorrichtung 1 ausgebildet sein.The operating unit 4 consists of a pointing device, such as a mouse or a trackball. The operating unit 4 may be formed by a keyboard, a remote control device or a touch panel, together with the pointing device or instead of the pointing device. The operating unit 4 can also be integral with the image processing device 1 be educated.
Die Bildaufzeichnungseinheit 30 besteht aus einem Speicher, wie etwa einem RAM. Die Bildaufzeichnungseinheit 30 beinhaltet einen Bewegtbilddatenspeicherbereich zum Speichern von Bewegtbilddaten, die aus der Mehrzahl von Stücken von Informationsdaten ausgebildet sind, und einem Wellenform-Datenspeicherbereich zum Speichern von Wellenformdaten, die aus einer Mehrzahl von Evaluierungswerten ausgebildet sind. Solche aus einer Mehrzahl von Evaluierungswerten ausgebildeten Wellenformdaten werden später detailliert beschrieben.The image recording unit 30 consists of a memory, such as a RAM. The image recording unit 30 includes a moving image data storage area for storing moving image data formed of the plurality of pieces of information data and a waveform data storage area for storing waveform data formed of a plurality of evaluation values. Such waveform data formed of a plurality of evaluation values will be described later in detail.
Das Speichern von Bilddaten einer Mehrzahl von Einzelbildern (Bewegtbilddaten), die aus der Kamera 2 angeliefert werden, im Bewegtbilddatenspeicherbereich in der Bildaufzeichnungseinheit 30 wird als ”Bildaufzeichnung” bezeichnet. Der Anwender kann durch Bedienen der Bedieneinheit 4 eine Bildaufzeichnung von Bewegtbildern des Subjekts W, das durch die Kamera 2 erfasst wird, durchführen. In der vorliegenden Ausführungsform werden während der Bildaufzeichnungsprozesse eine Mehrzahl von Evaluierungswerten (Wellenformdaten), die die aus der Wellenformsammeleinheit 60 geliefert sind, gleichzeitig im Wellenformdatenspeicherbereich in der Bildaufzeichnungseinheit 30 gespeichert.Storing image data of a plurality of frames (moving image data) from the camera 2 in the moving image data storage area in the image recording unit 30 is referred to as "image recording". The user can operate by operating the operating unit 4 an image recording of moving images of the subject W, by the camera 2 recorded. In the present embodiment, during the image recording processes, a plurality of evaluation values (waveform data) obtained from the waveform collecting unit 60 are supplied simultaneously in the waveform data storage area in the image recording unit 30 saved.
Die Speichereinheit 40 besteht aus einer Speichervorrichtung großer Kapazität, wie etwa einer Festplatte. Der Anwender kann eine Bewegtbilddatei erzeugen, die Bewegtbilddaten und Wellenformdaten enthält, die in der Bildaufzeichnungseinheit 30 gespeichert sind, und kann die erzeugte Bewegtbilddatei in der Speichereinheit 40 speichern, indem er die Bedieneinheit 4 bedient. Weiterhin wird ein Bildbearbeitungsprogramm gemäß der vorliegenden Erfindung in der Speichereinheit 40 gespeichert. Das Bildbearbeitungsprogramm wird später detailliert beschrieben.The storage unit 40 consists of a large-capacity storage device such as a hard disk. The user may generate a motion picture file containing motion picture data and waveform data stored in the image recording unit 30 are stored, and can the generated moving image file in the storage unit 40 save by using the control unit 4 served. Furthermore, an image processing program according to the present invention is stored in the storage unit 40 saved. The image editing program will be described later in detail.
Die Wellenformsammeleinheit 60 sammelt Wellenformdaten, die aus der Mehrzahl von Evaluierungswerten gebildet sind, und liefert die gesammelten Wellenformdaten an die Bildaufzeichnungseinheit 30. Diese Mehrzahl von Evaluierungswerten sind Werte, die anhand des Zustands des Subjekts W in Bildern einer Mehrzahl von Einzelbildern variiert werden. Solch ein Zustand des Subjekts W ist die Position, die Orientierung, die Helligkeit, die Größe, die Form, die Farben oder dergleichen des Subjekts W.The waveform collection unit 60 Collects waveform data formed from the plurality of evaluation values and supplies the collected waveform data to the image recording unit 30 , These plurality of evaluation values are values that are varied based on the state of the subject W in images of a plurality of frames. Such a state of the subject W is the position, orientation, brightness, size, shape, colors or the like of the subject W.
Ein Evaluierungswert ist zum Beispiel ein Durchschnittsluminanzwert des Bilds jedes Einzelbildes, welches das Subjekt W beinhaltet, das durch die Kamera 2 erfasst ist (ein Durchschnittsluminanzwert über eine Mehrzahl von das Bild jedes Einzelbilds bildenden Pixeln). In diesem Fall berechnet die Wellenformsammeleinheit 60 sukzessive den Durchschnittsluminanzwert der Bilder der entsprechenden Einzelbilder als Evaluierungswerte, basierend auf den Bilddaten der entsprechenden Einzelbilder, die sukzessive aus der Kamera 2 an die Bildaufzeichnungseinheit 30 geliefert worden sind. Die Mehrzahl von sukzessive berechneten Durchschnittsluminanzwerten werden als Wellenformdaten im Wellenformdatenspeicherbereich in der Bildaufzeichnungseinheit 30 gespeichert. In diesem Fall kann die Mehrzahl von Evaluierungswerten synchron mit den Bilddaten der Mehrzahl von Einzelbildern erhalten werden. Entsprechend ist die Anzahl einer Mehrzahl von Evaluierungswerten pro Zeiteinheit gleich der Anzahl von Bilddaten eine Mehrzahl von Einzelbildern pro Einheitszeit. Ein Evaluierungswert kann entweder die Gesamtsumme von Luminanzwerten des Bildes jedes Einzelbildes sein, die Differenz zwischen der Gesamtsumme der Luminanzwerte des Bildes jedes Einzelbildes und der Gesamtsumme von Luminanzwerten des Bildes des nachfolgenden Einzelbildes, oder einer Dispersion von Luminanzwerten in jedem Einzelbild. Weiterhin kann ein Evaluierungswert die Differenz zwischen der Gesamtsumme von Luminanzwerten des Bildes eines Referenzeinzelbildes und der Gesamtsumme von Luminanzwerten des Bildes jedes Einzelbildes sein.An evaluation value is, for example, an average luminance value of the image of each frame including subject W through the camera 2 is detected (an average luminance value over a plurality of pixels forming the image of each frame). In this case, the waveform collection unit calculates 60 successively the average luminance value of the images of the respective frames as evaluation values, based on the image data of the respective frames successively extracted from the camera 2 to the image recording unit 30 have been delivered. The plurality of successively calculated average luminance values are displayed as waveform data in the waveform data storage area in the image recording unit 30 saved. In this case, the plurality of evaluation values can be obtained in synchronism with the image data of the plurality of frames. Accordingly, the number of a plurality of evaluation values per unit time is equal to the number of image data a plurality of frames per unit time. An evaluation value may be either the sum total of luminance values of the image of each frame, the difference between the sum total of the luminance values of the image of each frame and the sum total of luminance values of the frame of the succeeding frame, or a dispersion of luminance values in each frame. Further, an evaluation value may be the difference between the total sum of luminance values of the image of a reference frame and the sum total of luminance values of the image of each frame.
Die Wellenformsammeleinheit 60 kann ausgelegt sein, als Evaluierungswerte die Werte von Ausgangssignalen aus dem Sensor 6 zu erfassen, während der Erfassung von Bilddaten einer Mehrzahl von Einzelbildern. In diesem Fall kann eine Mehrzahl von Evaluierungswerten mit derselben Periode wie derjenige der Bilddaten der Mehrzahl von Einzelbildern oder mit einer dazu unterschiedlichen Periode erfasst werden. Dementsprechend stimmt die Anzahl einer Mehrzahl von Evaluierungswerten pro Einheitszeit nicht immer mit der Anzahl von Bilddaten einer Mehrzahl von Einzelbildern pro Einheitszeit überein. In Fällen, bei denen eine Mehrzahl von Evaluierungswerten in einer kürzeren Periode als der von Bilddaten einer Mehrzahl von Einzelbildern erfasst wird, wird mehr als ein Evaluierungswert mit Bilddaten jedes Einzelbildes assoziiert. In Fällen, bei denen eine Mehrzahl von Evaluierungswerten mit einer längeren Periode als der derjenigen von Bilddaten einer Mehrzahl von Einzelbildern erfasst wird, ist jeder Evaluierungswert mit Bilddaten von mehr als einem Einzelbild assoziiert.The waveform collection unit 60 can be designed, as evaluation values, the values of output signals from the sensor 6 during the capture of image data of a plurality of frames. In this case, a plurality of evaluation values having the same period as that of the image data of the plurality of frames or having a different period thereto may be detected. Accordingly, the number of a plurality of evaluation values per unit time does not always agree with the number of image data of one Plural number of frames per unit time. In cases where a plurality of evaluation values are detected in a shorter period than that of image data of a plurality of frames, more than one evaluation value is associated with image data of each frame. In cases where a plurality of evaluation values having a longer period than that of image data of a plurality of frames are detected, each evaluation value is associated with image data of more than one frame.
In Fällen, bei denen der Sensor 6 ein Temperatursensor, ein Distanzsensor, ein Drucksensor, ein Beschleunigungssensor, ein Wegsensor oder dergleichen ist, erfasst die Wellenformsammeleinheit 60 sukzessive als Evaluierungswerte gemessene Werte der Temperatur, der Distanz, des Drucks, der Beschleunigung, des Wegs, oder dergleichen, eines zu messenden Objekts, und die erfasste Mehrzahl von Evaluierungswerten wird als Wellenformdaten im Wellenformdatenspeicherbereich der Bildaufzeichnungseinheit 30 gespeichert.In cases where the sensor 6 a temperature sensor, a distance sensor, a pressure sensor, an acceleration sensor, a displacement sensor, or the like detects the waveform collecting unit 60 successively measured values of the temperature, distance, pressure, acceleration, travel, or the like of an object to be measured as evaluation values, and the detected plurality of evaluation values are displayed as waveform data in the waveform data storage area of the image recording unit 30 saved.
Weiterhin erfasst in Fällen des Einsatzes eines Mikrofons anstelle des Sensors 6 die Wellenformsammeleinheit 60 sukzessive Geräuschsignale als Evaluierungswerte und die erfasste Mehrzahl von Geräuschsignalen wird als Wellenformdaten im Wellenformdatenspeicherbereich der Bildaufzeichnungseinheit 30 gespeichert.Further detected in cases of using a microphone instead of the sensor 6 the waveform collection unit 60 successive noise signals as evaluation values and the detected plurality of noise signals become waveform data in the waveform data storage area of the image recording unit 30 saved.
Weiterhin, Bezug nehmend auf 1, weist die mit der Bildbearbeitungsvorrichtung 1 verbundene Wellenformsammelvorrichtung 7 dieselbe Struktur wie diejenige der Wellenformsammeleinheit 60 auf. Daher erfasst in Fällen, bei denen die Wellenformsammelvorrichtung 7 mit der Bildbearbeitungsvorrichtung 1 verbunden ist, die Wellenformsammelvorrichtung 7 sukzessive als Evaluierungswerte die Werte von Ausgangssignalen aus dem Sensor 8 und die erfasste Mehrzahl von Evaluierungswerten wird als Wellenformdaten im Wellenformdatenspeicherbereich der Bildaufzeichnungseinheit 30 gespeichert.Further, referring to 1 , points with the image processing device 1 connected waveform collector 7 the same structure as that of the waveform collecting unit 60 on. Therefore, in cases where the waveform collecting device detects 7 with the image processing device 1 connected, the waveform collecting device 7 successively as evaluation values the values of output signals from the sensor 8th and the detected plurality of evaluation values are called waveform data in the waveform data storage area of the image recording unit 30 saved.
Die Steuereinheit 10 besteht aus beispielsweise einer CPU (Zentraler Verarbeitungseinheit, Zentraleinheit, Central Processing Unit), einem ROM (Nur-Lese-Speicher, Read Only Memory) und einem RAM. Die CPU in der Steuereinheit 10 steuert die Operationen der Kamera 2, der Beleuchtungsvorrichtung 3 und der anderen Komponenten der Bildbearbeitungsvorrichtung 1, basierend auf Anwenderbedienungen der Bedieneinheit 4. Weiterhin führt die CPU in der Steuereinheit 10 im RAM das in der Speichereinheit 40 gespeicherte Bildbearbeitungsprogramm aus. Das ROM speichert ein Systemprogramm.The control unit 10 consists of, for example, a CPU (central processing unit, central processing unit, central processing unit), a ROM (read-only memory) and a RAM. The CPU in the control unit 10 controls the operations of the camera 2 , the lighting device 3 and the other components of the image processing apparatus 1 , based on user operation of the control unit 4 , Furthermore, the CPU performs in the control unit 10 in RAM in the memory unit 40 stored image editing program. The ROM stores a system program.
(2) Grundbetrieb des Bildbearbeitungssystems(2) Basic operation of the image processing system
Es werden die grundlegenden Operationen des Bildbearbeitungssystems 100 in 1 beschrieben.It will be the basic operations of the image processing system 100 in 1 described.
(2-1) Einstellen von Bilderfassungsbedingungen(2-1) Setting image acquisition conditions
Der Anwender stellt Bilderfassungsbedingungen der Kamera 2 durch Betätigen der Bedieneinheit 4 ein. 2 ist eine Ansicht, die eine beispielhafte Anzeige auf der Anzeigeneinheit 20 zum Zeitpunkt des Einstellens der Bilderfassungsbedingungen illustriert. Wie in 2 illustriert, werden zum Zeitpunkt des Einstellens der Bilderfassungsfläche eine Bildanzeigefläche Sa, eine Bildanzeigefläche Sb, eine Bedingungseinstellfläche Sc und eine Bildaufzeichnungstaste Se auf der Anzeigeneinheit 20 angezeigt.The user sets image acquisition conditions of the camera 2 by pressing the operating unit 4 one. 2 is a view showing an exemplary display on the display unit 20 at the time of setting the image sensing conditions. As in 2 illustrated, at the time of setting the image sensing surface, an image display area Sa, an image display area Sb, a condition setting area Sc, and an image recording key Se are displayed on the display unit 20 displayed.
Auf der Bildanzeigefläche Sa werden Bilder basierend auf in dem Videospeicher 50 gespeicherten Bilddaten angezeigt. In der Wellenformanzeigefläche Sb wird ein Graph einer Wellenform, basierend auf durch die Wellenformsammeleinheit 60 gesammelten Wellenformdaten angezeigt. Die horizontale Achse des Wellenformgraphs ist eine Zeitachse, während die vertikale Achse Evaluierungswerte repräsentiert.On the image display area Sa, images are based on in the video memory 50 stored image data displayed. In the waveform display area Sb, a graph of a waveform based on the waveform collecting unit is obtained 60 collected waveform data. The horizontal axis of the waveform graph is a time axis, while the vertical axis represents evaluation values.
In der Bedingungseinstellfläche Sc werden grundlegende Bilderfassungsbedingungen der Kamera 2 angezeigt. Eine Mehrzahl von Eingaberahmen Sc1, Sc2 und Sc3 zum Einstellen von Bilderfassungsbedingungen werden darin angezeigt, wobei diese Bilderfassungsbedingungen beispielsweise die Verschlusszeit, die Bilderfassungsbildrate und die Auflösung sind. Der Anwender gibt entsprechende Werte der Verschlusszeit, der Bilderfassungsaufnahmerate und der Auflösung in die Eingaberahmen Sc1, Sc2 und Sc3 unter Verwendung der Bedieneinheit 4 ein. Basierend auf den in den Eingaberahmen SC1, Sc2 und Sc3 eingegebenen jeweiligen Werten stellt die Steuereinheit 10 die Verschlusszeit, die Bilderfassungsbildrate und die Auflösung der Kamera 2 ein.In the condition setting area Sc, basic image capturing conditions of the camera become 2 displayed. A plurality of input frames Sc1, Sc2 and Sc3 for setting image sensing conditions are displayed therein, these image sensing conditions being, for example, the shutter speed, the image frame rate and the resolution. The user inputs respective values of the shutter speed, the image capture rate and the resolution into the input frames Sc1, Sc2 and Sc3 using the operation unit 4 one. Based on the respective values entered in the input frames SC1, Sc2 and Sc3, the control unit sets 10 the shutter speed, image frame rate, and camera resolution 2 one.
Weiter ist es in der vorliegenden Ausführungsform möglich, der Steuereinheit 10 ein Auslösesignal zuzuführen, das eine Referenz für das Timing des Abschlusses eines Bildaufzeichnungsprozesses bildet, der später beschrieben wird, beispielsweise anhand von Anwenderbedienungen auf der Bedieneinheit 4. In der Bedingungseinstellfläche Sc werden weiterhin Eingabenrahmen Sc4 und Sc5 zur Durchführung von Auslösereinstellungen für die Steuereinheit 10 basierend auf einem solchen Auslösesignal angezeigt.Further, in the present embodiment, it is possible for the control unit 10 supplying a triggering signal which constitutes a reference for the timing of completion of an image recording process, which will be described later, for example, based on user operations on the operation unit 4 , In the condition setting area Sc, input frames Sc4 and Sc5 are further used to perform trigger settings for the control unit 10 displayed based on such a trigger signal.
Der Anwender gibt in den Eingaberahmen Sc4 und Sc5 Werte einer Gesamtbildaufzeichnungs-Zeitperiode und einer Bildaufzeichnungsabschluss-Zeitperiode ein, die später beschrieben werden, unter Verwendung der Bedieneinheit 4. Basierend auf den in den Eingaberahmen Sc4 und Sc5 eingegebenen jeweiligen Werten führt die Steuereinheit 10 Auslösereinstellungen durch. Die Auslösereinstellungen werden im Detail beschrieben.The user gives in the input frames Sc4 and Sc5 values of a total image recording time period and an image recording completion time. Time period, which will be described later, using the operating unit 4 , Based on the respective values entered in the input frames Sc4 and Sc5, the control unit performs 10 Shutter settings through. The trigger settings are described in detail.
In der vorliegenden Ausführungsform beziehen sich die Auslösereinstellungen auf das Definieren der Speicherzeitperiode, in der Bilddaten in der Bildaufzeichnungseinheit 30 durch einen einzelnen Bildaufnahmeprozess zu speichern sind (nachfolgend als ”Gesamtbildaufzeichnungs-Zeitperiode” bezeichnet), und weiter auf das Definieren der Zeitperiode vom Zeitpunkt, an dem ein Auslösesignal der Steuereinheit 10 zugeführt wird, bis zum Abschluss des Bildaufzeichnungsprozesses (nachfolgend als ”Bildaufzeichnungsabschluss-Zeitperiode” bezeichnet).In the present embodiment, the trigger settings refer to defining the storage time period in the image data in the image recording unit 30 by a single image pickup process (hereinafter referred to as "overall image recording time period"), and further to defining the time period from the time when a trigger signal of the control unit 10 until completion of the image recording process (hereinafter referred to as "image recording completion period").
Beispielsweise wird in Fällen, in denen die Auslösereinstellungen durch Einstellen der Gesamtbild-Aufzeichnungsperiode auf 30 Sekunden und Einstellen der Bildaufzeichnungsabschluss-Zeitperiode auf 0 Sekunden durchgeführt werden, ein Bildaufzeichnungsprozess zum Zeitpunkt abgeschlossen, an dem nach Starten der Bildaufzeichnung das Auslösesignal der Steuereinheit 10 zugeführt wird. Somit werden Bewegtbilddaten und Wellenformdaten, die innerhalb des Zeitintervalls von 30 Sekunden vor dem Zeitpunkt des Zuführens des Auslösesignals zur Steuereinheit 10 bis zum Zeitpunkt der Zufuhr des Auslösesignals dazu erfasst werden, in der Bildaufzeichnungseinheit 30 gespeichert.For example, in cases where the shutter settings are made by setting the overall image recording period to 30 seconds and setting the image recording completion period to 0 seconds, an image recording process is completed at the time when the control unit is fired after starting the image recording 10 is supplied. Thus, moving image data and waveform data which are within the time interval of 30 seconds before the timing of supplying the triggering signal to the control unit 10 to the time of the supply of the trigger signal to be detected in the image recording unit 30 saved.
Andererseits wird in Fällen, bei denen Auslösereinstellungen durch Einstellen der Gesamtbild-Aufzeichnungsperiode auf 30 Sekunden und Einstellen der Bildaufzeichnungsabschluss-Zeitperiode auf 30 Sekunden vorgenommen werden, ein Bildaufzeichnungsprozess zum Zeitpunkt abgeschlossen, bei dem 30 Sekunden seit dem Zeitpunkt verstrichen sind, zu dem das Auslösesignal der Steuereinheit 10 zugeführt worden ist, nach Start der Bildaufzeichnung. Somit werden Bewegtbilddaten und Wellenformdaten, die innerhalb des Zeitintervalls vom Zeitpunkt der Zufuhr der Auslösesignals an die Steuereinheit 10 bis zum Verstreichen von 30 Sekunden seit dann, erfasst worden sind, in der Bildaufzeichnungseinheit 30 gespeichert.On the other hand, in cases where shutter settings are made by setting the overall picture recording period to 30 seconds and setting the picture recording completion period to 30 seconds, an image recording process is completed at the time when 30 seconds have elapsed from the time when the shutter signal of FIG control unit 10 has been supplied, after the start of the image recording. Thus, moving image data and waveform data that are within the time interval from the time of supplying the triggering signal to the control unit 10 until the elapse of 30 seconds since then have been detected in the image recording unit 30 saved.
Weiterhin wird in Fällen, bei denen Auslösereinstellungen durch Einstellen der Gesamtaufzeichnungs-Zeitperiode auf 30 Sekunden und durch Einstellen der Bildaufzeichnungsabschluss-Zeitperiode auf 15 Sekunden vorgenommen werden, ein Bildaufzeichnungsprozess zum Zeitpunkt abgeschlossen, zu dem 15 Sekunden seit dem Zeitpunkt der Zufuhr des Auslösesignals an die Steuereinheit 10 verstrichen sind. Somit werden Bewegtbilddaten und Wellenformdaten, die innerhalb des Zeitintervalls von 15 Sekunden vor dem Zeitpunkt der Zufuhr des Auslösesignals an die Steuereinheit 10, bis zum Verstreichen von 30 Sekunden seitdem erfasst worden sind, in der Bildaufzeichnungseinheit 30 gespeichert.Further, in cases where shutter settings are made by setting the total recording time period to 30 seconds and setting the image recording completion period to 15 seconds, an image recording process is completed at the time of 15 seconds from the time of supplying the triggering signal to the control unit 10 have passed. Thus, moving image data and waveform data that are within the time interval of 15 seconds before the timing of the supply of the triggering signal to the control unit 10 until the elapse of 30 seconds have elapsed since then in the image recording unit 30 saved.
Weiterhin können anstelle des Einstellens der zuvor erwähnten Gesamtbildaufzeichnungs-Zeitperiode als eienrr Auslösereinstellung die Gesamtanzahl von Einzelbildern von Bilddaten, die in der Bildaufzeichnungseinheit 30 durch einen Bildaufzeichnungsprozess zu speichern sind, eingestellt werden. Weiterhin kann anstelle des Einstellens der zuvor erwähnten Bildaufzeichnungsabschluss-Zeitperiode als einer Auslösereinstellung die Anzahl von Einzelbildern von Bilddaten, die in der Bildaufzeichnungseinheit 30 nach dem Zeitpunkt der Zufuhr eines Auslösesignals zu speichern sind, eingestellt werden.Further, instead of setting the aforementioned total image recording time period as a shutter release setting, the total number of frames of image data included in the image recording unit 30 be stored by an image recording process. Further, instead of setting the aforementioned image recording completion time period as a trigger setting, the number of frames of image data included in the image recording unit 30 after the time of the supply of a trigger signal are to be stored, are set.
Auch kann der PLC 5 dafür ausgelegt sein, der Steuereinheit 10 Auslösesignale zuzuführen. In diesem Fall können beispielsweise Auslösesignale der Steuereinheit 10 zugeführt werden, innerhalb eines Zeitraums, der vorläufig im PLC 5 eingestellt worden ist, in Reaktion auf Timings gewisser Operationen eines mit der PLC 5 verbundenen externen Apparates. Auch können Ausgangssignale aus verschiedenen Typen von Sensoren als Auslösesignale an die Steuereinheit 10 geliefert werden.Also, the PLC can 5 be designed for the control unit 10 Supply trigger signals. In this case, for example, trigger signals of the control unit 10 be fed within a period provisionally in the PLC 5 has been adjusted in response to timing of certain operations with the PLC 5 connected external apparatus. Also, output signals from various types of sensors can be used as triggering signals to the control unit 10 to be delivered.
Falls der Anwender die Bildaufzeichnungstaste Se unter Verwendung der Bedieneinheit 4 betätigt, startet die Steuereinheit 10 den Bildaufzeichnungsprozess, der später beschrieben wird.If the user uses the image recording key Se using the operation unit 4 pressed, the control unit starts 10 the image recording process which will be described later.
(2-2) Bildaufzeichnungsprozess(2-2) Image recording process
3A bis 3C sind schematische Ansichten, die Speicherzustände der Bildaufzeichnungseinheit 30 in 1 während eines Bildaufzeichnungsprozesses illustrieren. Wie oben beschrieben, ist die Bildaufzeichnungseinheit 30 mit einem Bewegtbilddatenspeicherbereich 30A zum Speichern von Bewegtbilddaten (Bilddaten einer Mehrzahl von Einzelbildern) Wellenformdatenspeicherbereich 30B zum Speichern von Wellenformdaten (einer Mehrzahl von Evaluierungswerten) versehen. 3A to 3C FIG. 12 are schematic views, the storage states of the image recording unit. FIG 30 in 1 during an image recording process. As described above, the image recording unit is 30 with a moving picture data storage area 30A for storing moving image data (image data of a plurality of frames) waveform data storage area 30B for storing waveform data (a plurality of evaluation values).
In der Bildbearbeitungsvorrichtung 1, wie in 3A illustriert, falls die Bildaufzeichnungstaste Se in 2 betätigt wird, startet die Steuereinheit 10 einen Bildaufzeichnungsprozess. Im Bildaufzeichnungsprozess werden Bilddaten v1 entsprechend einem Bild eines ersten aus der Kamera 2 gelieferten Einzelbildes im Bewegtbilddatenspeicherbereich 30A in der Bildaufzeichnungseinheit 30 gespeichert. Weiterhin wird ein aus der Wellenformsammeleinheit 60 zugeführter erster Evaluierungswert i1 im Wellenformdatenspeicherbereich 30B in der Bildaufzeichnungseinheit 30 gespeichert.In the image processing apparatus 1 , as in 3A illustrated if the image recording key Se in 2 is pressed, the control unit starts 10 an image recording process. In the image recording process, image data v1 corresponding to an image of a first one from the camera 2 supplied single image in the moving image data storage area 30A in the image recording unit 30 saved. Further, one of the waveform collecting unit becomes 60 supplied first evaluation value i1 in the waveform data storage area 30B in the image recording unit 30 saved.
Nachfolgend, wie in 3B illustriert, werden Bilddaten v2, v3 und v4 entsprechend Bildern zweiter, dritter und vierter Einzelbilder, die aus der Kamera 2 zugeführt werden, in dieser Reihenfolge im Bewegtbilddatenspeicherbereich 30A in der Bildaufzeichnungseinheit 30 gespeichert und weiter die Bilddaten v1, v2, v3 und v4 in dieser Reihenfolge im Bewegtbilddatenspeicherbereich 30A. Gleichzeitig werden die zweiten, dritten und vierten Evaluierungswerte i2, i3 und i4, die aus der Wellenformsammeleinheit 60 zugeführt werden, in dieser Reihenfolge im Wellenformdatenspeicherbereich 30B in der Bildaufzeichnungseinheit 30 gespeichert und auch diese Evaluierungswerte i1, i2, i3 und i4 verschieben sich in dieser Reihenfolge im Wellenformdatenspeicherbereich 30B. Below, as in 3B Illustrated, image data v2, v3 and v4 corresponding to images of second, third and fourth frames are taken from the camera 2 are supplied in this order in the moving image data storage area 30A in the image recording unit 30 and further stores the image data v1, v2, v3 and v4 in this order in the moving image data storage area 30A , At the same time, the second, third, and fourth evaluation values i2, i3, and i4 are obtained from the waveform collection unit 60 are supplied in this order in the waveform data storage area 30B in the image recording unit 30 and also these evaluation values i1, i2, i3 and i4 shift in this order in the waveform data storage area 30B ,
Falls die Menge an im Bewegtbilddatenspeicherbereich 30A gespeicherten Bilddaten die Speicherkapazität des Bewegtbilddatenspeicherbereich 30A während des Bildaufzeichnungsprozesses übersteigt, werden die Bilddaten des ältesten, in dem Bewegtbilddatenspeicherbereich 30A gespeicherten Einzelbildes jedes Mal eliminiert, wenn Bilddaten des jüngsten Einzelbildes (aktuelles Einzelbild) neu im Bewegtbilddatenspeicherbereich 30A gespeichert werden.If the amount of in the moving picture data storage area 30A stored image data, the storage capacity of the moving image data storage area 30A during the image recording process, the image data becomes the oldest one in the moving image data storage area 30A Stored frame is eliminated every time frame data of the most recent frame (current frame) is new in the moving-picture data storage area 30A get saved.
Ähnlich, falls die Menge an im Wellenformdatenspeicherbereich 30B gespeicherten Evaluierungswerten die Speicherkapazität des Wellenformdatenspeicherbereich 30B während des Bildaufzeichnungsprozesses übersteigt, wird der älteste, in dem Wellenformdatenspeicherbereich 30B gespeicherte Evaluierungswert jedes Mal eliminiert, wenn ein jüngster Evaluierungswert neu in dem Wellenformdatenspeicherbereich 30B gespeichert wird.Similarly, if the amount of in the waveform data storage area 30B stored evaluation values, the storage capacity of the waveform data storage area 30B during the image recording process, the oldest one in the waveform data storage area becomes 30B stored evaluation value is eliminated every time a recent evaluation value new in the waveform data storage area 30B is stored.
Im Beispiel von 3C werden weiter in einem Zustand, bei dem zwölf Stücke von Bilddaten v1 bis v12 im Bewegtbilddatenspeicherbereich 30A gespeichert sind, zwei Stück von Bilddaten v13 und v14 in dieser Reihenfolge darin gespeichert und daher werden die ältesten Bilddaten v1 und v2 in dieser Reihenfolge daraus eliminiert. Weiter werden in einem Zustand, wo zwölf Evaluierungswerte i1 bis i12 im Wellenformdatenspeicherbereich 30B gespeichert sind, zwei Bild-Evaluierungswerte i13 und i14 in dieser Reihenfolge darin gespeichert und somit werden daraus die ältesten Evaluierungswerte i1 und i2 in dieser Reihenfolge eliminiert. Als Ergebnis davon werden die Bilddaten v3 bis v14 im Bewegtbilddatenspeicherbereich 30A gespeichert und werden die Evaluierungswerte i3 bis i14 im Wellenformdatenspeicherbereich 30B gespeichert.In the example of 3C continue in a state where twelve pieces of image data v1 to v12 in the moving image data storage area 30A are stored two pieces of image data v13 and v14 in that order therein, and therefore the oldest image data v1 and v2 are eliminated therefrom in this order. Further, in a state where twelve evaluation values i1 to i12 in the waveform data storage area 30B 2 image evaluation values i13 and i14 are stored therein in this order, and hence the oldest evaluation values i1 and i2 are eliminated therefrom in this order. As a result, the image data v3 to v14 in the moving image data storage area 30A and the evaluation values i3 to i14 are stored in the waveform data storage area 30B saved.
Wie oben beschrieben, werden während Bildaufzeichnungsprozessen Bewegtbilddaten und Wellenformdaten sukzessive in einem sogenannten Ringpufferformat gespeichert, im Bewegtbilddatenspeicherbereich 30A und dem Wellenformdatenspeicherbereich 30B.As described above, during image recording processes, moving image data and waveform data are successively stored in a so-called ring buffer format in the moving image data storage area 30A and the waveform data storage area 30B ,
Im Beispiel von 3C stehen die in dem Wellenformdatenspeicherbereich 30B gespeicherten Evaluierungswerte i3 bis i14 in einer Eins-zu-Eins-Entsprechung zu den im Bewegtbilddatenspeicherbereich 30A gespeicherte Bilddaten v3 bis v14. In Fällen, bei denen eine Mehrzahl von Evaluierungswerten mit einer anderen Periode als derjenigen von Bilddaten einer Mehrzahl von Einzelbildern erfasst werden, wie oben beschrieben, stehen die im Bewegtbilddatenspeicherbereich 30A gespeicherten Evaluierungswerte nicht in einer Eins-zu-Eins-Entsprechung mit den im Bewegtbilddatenspeicherbereich 30A gespeicherten Bilddaten.In the example of 3C they are in the waveform data storage area 30B stored evaluation values i3 to i14 in a one-to-one correspondence to those in the moving-picture data storage area 30A stored image data v3 to v14. In cases where a plurality of evaluation values having a period other than that of image data of a plurality of frames are detected as described above, they are in the moving-picture data storage area 30A stored evaluation values in a one-to-one correspondence with those in the moving image data storage area 30A stored image data.
4 ist eine schematische Ansicht, die einen anderen beispielhaften Speicherzustand der Bildaufzeichnungseinheit 30 in 1 während eines Bildaufzeichnungsprozesses zeigt. Im Beispiel von 4 werden eine Mehrzahl von Evaluierungswerten mit einer kürzeren Periode als derjenigen von Bilddaten einer Mehrzahl von Einzelbildern erfasst. Daher stehen die in der Wellenformdatenspeicherbereich 30B gespeicherten Evaluierungswerte i7 bis i42 nicht in einer Eins-zu-Eins-Beziehung zu den im Bewegtbilddatenspeicherbereich 30A gespeicherten Bilddaten v3 bis v14. Drei kontinuierliche Evaluierungswerte entsprechen Bilddaten eines einzelnen Einzelbildes. Beispielsweise entsprechen die Evaluierungswerte i7, i8 und i9 den Bilddaten v3 und entsprechen die Evaluierungswerte i10, i11 und i12 den Bilddaten v4. 4 Fig. 12 is a schematic view showing another exemplary storage state of the image recording unit 30 in 1 during an image recording process. In the example of 4 For example, a plurality of evaluation values having a shorter period than that of image data of a plurality of frames are detected. Therefore, those are in the waveform data storage area 30B stored evaluation values i7 to i42 not in a one-to-one relationship with those in the moving picture data storage area 30A stored image data v3 to v14. Three continuous evaluation values correspond to image data of a single frame. For example, the evaluation values i7, i8, and i9 correspond to the image data v3, and the evaluation values i10, i11, and i12 correspond to the image data v4.
In Fällen, bei denen eine Mehrzahl von Evaluierungswerten mit einer längeren Periode als der der Bilddaten einer Mehrzahl von Einzelbildern erfasst werden, entspricht der Evaluierungswert Bilddaten einer Mehrzahl von Einzelbildern.In cases where a plurality of evaluation values having a longer period than the image data of a plurality of frames are detected, the evaluation value corresponds to image data of a plurality of frames.
5 ist eine Ansicht, die eine beispielhafte Anzeige auf der Anzeigeneinheit 20 während eines Bildaufzeichnungsprozesses illustriert. Wie in 5 illustriert, wird eine Auslösertaste Sf auf der Anzeigeneinheit 20 anstelle der Bildaufzeichnungstaste Se in 2 während des Bildaufzeichnungsprozesses angezeigt. 5 is a view showing an exemplary display on the display unit 20 during an image recording process. As in 5 illustrated, a shutter button Sf on the display unit 20 instead of the image recording button Se in 2 during the image recording process.
Falls der Anwender die Auslösertaste Sf unter Verwendung der Bedieneinheit 4 betätigt, wird der Steuereinheit 10 ein Auslösesignal zugeführt. Wie oben beschrieben, veranlasst dies, den Bildaufzeichnungsprozess zu einem Timing basierend auf den Auslösereinstellungen abzuschließen.If the user presses the shutter button Sf using the operation unit 4 pressed, the control unit 10 a trigger signal is supplied. As described above, this causes the image recording process to be timed based on the trigger settings.
(2-3) Dateispeicherprozess(2-3) File storage process
6 ist eine Ansicht, die eine beispielhafte Anzeige auf der Anzeigeneinheit 20 zeigt, wenn ein Bildaufzeichnungsprozess abgeschlossen worden ist. Wie in 6 illustriert, wenn der Bildaufzeichnungsprozess abgeschlossen worden ist, werden eine Dateitaste Sj und eine Wiedergabetaste Sg anstelle der Auslösertaste Sf in 5 auf der Anzeigeneinheit 20 angezeigt. 6 is a view showing an exemplary display on the display unit 20 shows, if an image recording process has been completed. As in 6 illustrates that when the image recording process has been completed, a file key Sj and a play key Sg are substituted for the trigger key Sf in FIG 5 on the ad unit 20 displayed.
Falls der Anwender die Dateitaste Sj unter Verwendung der Bedieneinheit 4 betätigt, führt die Steuereinheit 10 einen Dateispeicherprozess aus. Beim Dateispeicherprozess wählt die Steuereinheit 10 Bilddaten einiger Einzelbilder aus den Bilddaten einer Mehrzahl von Einzelbildern, die im Bewegtbilddatenspeicherbereich 30A gespeichert sind, basierend auf im Wellenformdatenspeicherbereich 30B gespeicherten Wellenformdaten. Weiterhin wird im Dateispeicherprozess ein die Bewegtbilddaten und die in der Bildaufzeichnungseinheit 30 gespeicherten Wellenformdaten enthaltende Bewegtbilddatei erzeugt und die erzeugte Bewegtbilddatei wird in der Speichereinheit 40 in 1 gespeichert.If the user uses the file key Sj using the operation unit 4 pressed, the control unit leads 10 a file storage process. In the file storage process, the control unit selects 10 Image data of some frames from the image data of a plurality of frames included in the moving image data storage area 30A are stored based on in the waveform data storage area 30B stored waveform data. Further, in the file storage process, the moving image data and the image recording unit become one 30 generated moving image data containing moving image file generated and the generated moving image file is in the memory unit 40 in 1 saved.
Auf der Bedingungseinstellfläche Sc wird weiter ein Eingaberahmen Sc6 zum Eingeben eines oberen Grenzwerts zur Anzahl von Einzelbildern von Bilddaten, die während des Dateispeicherprozesses ausgewählt werden (nachfolgend als aus ”Auswahlobergrenzenanzahl” bezeichnet) angezeigt, zusätzlich zu den Eingaberahmen Sc1 bis Sc5. Basierend auf dem im Eingaberahmen Sc6 eingegebenen Wert stellt die Steuereinheit 10 die Auswahlobergrenzenanzahl ein.Further, on the condition setting area Sc, an input frame Sc6 for inputting an upper limit to the number of frames of image data selected during the file storage process (hereinafter referred to as "the selection upper limit number") is displayed in addition to the input frames Sc1 to Sc5. Based on the value entered in input frame Sc6, the control unit sets 10 the selection limit number.
Der Dateispeicherprozess wird im Detail zusammen mit spezifischen Beispielen beschrieben. 7 ist eine Konzeptansicht, die ein Beispiel von Bilddaten einer Mehrzahl von Einzelbildern, die im Bewegtbilddatenspeicherbereich 30A gespeichert sind, und die Beziehung zwischen einer Mehrzahl von in dem Wellenformdatenspeicherbereich 30B gespeicherten Evaluierungswerten und Bildern einer Mehrzahl von Einzelbildern, basierend auf den Bilddaten der Mehrzahl von Einzelbildern, illustriert.The file storage process is described in detail along with specific examples. 7 FIG. 11 is a conceptual view showing an example of image data of a plurality of frames included in the moving image data storage area. FIG 30A are stored, and the relationship between a plurality of in the waveform data storage area 30B stored evaluation values and images of a plurality of frames based on the image data of the plurality of frames illustrated.
Bilddaten v1 bis v10 in 7 werden im Bewegtbilddatenspeicherbereich 30A in der Bildaufzeichnungseinheit 30 in 3 gespeichert und Evaluierungswerte i1 bis i10 in 7 werden im Wellenformdatenspeicherbereich 30B gespeichert.Image data v1 to v10 in 7 become in the moving image data storage area 30A in the image recording unit 30 in 3 stored and evaluation values i1 to i10 in 7 become in the waveform data storage area 30B saved.
In einer oberen Stufe von 7 sind, Bilddaten v1 bis v5 der ersten bis fünften Einzelbilder entsprechende Bilder v1 bis v5 in der erwähnten Reihenfolge längs einer Zeitachse in Links-Rechts-Richtung illustriert. In einer unteren Stufe von 7 sind den Bilddaten v6 bis v10 der sechsten bis zehnten Einzelbilder entsprechende Bilder V6 bis V10 in der erwähnten Reihenfolge längs einer Zeitachse in Links-Rechts-Richtung illustriert. Im vorliegenden Beispiel sind die Bilder V1 bis V10 durch Erfassen von Bildern von zwei Subjekten W1 und W2, die auf einem Bandtransporter BC transferiert worden sind, mit einem vorbestimmten zwischen ihnen eingehaltenen Intervall, erfasst worden.In an upper tier of 7 are illustrated image data v1 to v5 of the first to fifth frames corresponding images v1 to v5 in the order mentioned along a time axis in left-right direction. In a lower level of 7 are illustrated the image data v6 to v10 of the sixth to tenth frames corresponding images V6 to V10 in the order mentioned along a time axis in left-right direction. In the present example, the images V1 to V10 have been acquired by acquiring images of two subjects W1 and W2 transferred on a tape transporter BC at a predetermined interval maintained therebetween.
Bezug nehmend auf 7 wird die Zeitachse der oberen Stufe an ihrem rechten Ende zum linken Ende der Zeitachse in der unteren Stufe fortgesetzt. Die ersten bis zehnten Evaluierungswerte i1 bis i10 sind mit den Bilddaten V1 bis V10 der ersten Einzelbilder assoziiert. Unter den Bildern V1 bis V10 der ersten bis zehnten Einzelbilder wird ein Graph einer aus den ersten bis zehnten Evaluierungswerten i1 bis i10 gebildeten Wellenform angezeigt.Referring to 7 the timeline of the upper stage is continued at its right end to the left end of the timeline in the lower stage. The first to tenth evaluation values i1 to i10 are associated with the image data V1 to V10 of the first frames. Among the images V1 to V10 of the first to tenth frames, a graph of a waveform formed from the first to tenth evaluation values i1 to i10 is displayed.
Im Beispiel von 7 zeigen die Bilder V2, V3, V4, V8, V9 und V10 einen Teil der Gesamtheit der durch den Bandförderer BC transferierten Subjekte W1 und W2. Im vorliegenden Beispiel ist jeder Evaluierungswert die Differenz zwischen der Gesamtsumme an Luminanzwerten des Bildes des ersten Rahmens und der Gesamtsumme an Luminanzwerten des Bildes jedes Rahmens. In diesem Fall sind die den Bildern V3 und V9, die die gesamten Subjekte W1 und W2 zeigen, entsprechenden Evaluierungswerte i3 und i9 am größten.In the example of 7 Figures V2, V3, V4, V8, V9 and V10 show a part of the totality of the subjects W1 and W2 transferred by the belt conveyor BC. In the present example, each evaluation value is the difference between the total sum of luminance values of the image of the first frame and the total sum of luminance values of the image of each frame. In this case, the evaluation values i3 and i9 corresponding to the images V3 and V9 showing the entire subjects W1 and W2 are largest.
8 ist eine schematische Ansicht einer Bewegtbilddatei, welche durch den Dateispeicherprozess erzeugt wird. Im zuvor erwähnten Dateispeicherprozess stellt die Steuereinheit 10, falls beispielsweise ”2” im Eingaberahmen Sc6 in 6 eingegeben wird, die Auswahlobergrenzenanzahl auf 2 ein. Die Steuereinheit 10 erfasst die Bedienung v1 bis v10 der Mehrzahl von Einzelbildern aus dem Bewegtbilddatenspeicherbereich 30A in der Bildaufzeichnungseinheit 30 und erfasst auch die Evaluierungswerte i1 bis i10 entsprechend den Bilddaten v1 bis v10 der Mehrzahl von Einzelbildern aus dem Wellenformdatenspeicherbereich 30B in der Bildaufzeichnungseinheit 30. 8th Fig. 10 is a schematic view of a motion picture file generated by the file storage process. In the aforementioned file storage process, the control unit provides 10 if, for example, "2" in the input frame Sc6 in 6 is entered, the selection limit number is set to 2. The control unit 10 detects the operation v1 to v10 of the plurality of frames from the moving image data storage area 30A in the image recording unit 30 and also acquires the evaluation values i1 to i10 corresponding to the image data v1 to v10 of the plurality of frames from the waveform data storage area 30B in the image recording unit 30 ,
Die Steuereinheit 10 extrahiert einen oder mehrere Evaluierungswerte, die eine vorbestimmte Charakteristik anzeigen, aus den erfassten Evaluierungswerten. Die vorbestimmte Charakteristik kann entweder basierend auf der Größenbeziehung zwischen einer Mehrzahl von Evaluierungswerten definiert sein, oder kann basierend auf der Größenbeziehung zwischen der Mehrzahl von Evaluierungswerten und einem gewissen Schwellenwert definiert werden.The control unit 10 extracts one or more evaluation values indicative of a predetermined characteristic from the acquired evaluation values. The predetermined characteristic may be defined based on the magnitude relationship between a plurality of evaluation values, or may be defined based on the magnitude relationship between the plurality of evaluation values and a certain threshold value.
Im vorliegenden Beispiel werden größte Evaluierungswerte in absteigender Reihenfolge der Größe aus der Mehrzahl von Evaluierungswerten so extrahiert, dass die Anzahl extrahierter Evaluierungswerte gleich der Auswahlobergrenzenanzahl ist. Somit werden im vorliegenden Beispiel zwei Evaluierungswerte i3 und i9 extrahiert.In the present example, largest evaluation values are extracted in descending order of size from the plurality of evaluation values so that the number of extracted evaluation values is equal to the selection upper limit number. Thus, in the present example, two evaluation values i3 and i9 are extracted.
Nachfolgend erzeugt die Steuereinheit 10 Buchmarkierungsdaten, die die Bilddaten der den extrahierten Evaluierungswerten entsprechenden Einzelbildern entsprechen. Im vorliegenden Beispiel werden Lesezeichendaten bd1 und bd2, welche die entsprechenden Bilddaten v3 und v9 anzeigen, entsprechend den zwei Evaluierungswerten i3 und i9 erzeugt. Subsequently, the control unit generates 10 Bookmark data corresponding to the image data of the frames corresponding to the extracted evaluation values. In the present example, bookmark data bd1 and bd2 indicating the corresponding image data v3 and v9 are generated in accordance with the two evaluation values i3 and i9.
Weiterhin erzeugt die Steuereinheit 10 Bilddaten, die durch die Lesezeichendaten angezeigt werden, als charakteristische Bilddaten. Im vorliegenden Beispiel werden charakteristische Bilddaten sv3 und sv9 entsprechend den Bilddaten v3 und v9 erzeugt.Furthermore, the control unit generates 10 Image data displayed by the bookmark data as characteristic image data. In the present example, characteristic image data sv3 and sv9 corresponding to the image data v3 and v9 are generated.
Die charakteristischen Bilddaten sind Daten zur Anzeige, auf der Anzeigeneinheit 20, von Bildern äquivalent zu den auf den entsprechenden Bilddaten basierenden Bildern (nachfolgend als die Originalbilder bezeichnet). Die zu den Originalbildern äquivalenten Bilder sind Bilder, die die Identifikation der Originalbilder entsprechend diesen Äquivalentbildern ermöglichen. Beispielsweise enthalten die zu den Originalbildern äquivalenten Bilder reduzierte Bilder (nachfolgend als Vorschaubilder (thumbnail) bezeichnet), die durch Reduzieren der Originalbilder um ein gewisses Verkleinerungsverhältnis in Längs- und Querrichtungen erzeugt werden, durch Vergrößern der Originalbilder um einen bestimmten Vergrößerungsbetrag in Längs- und Querrichtung erzeugte vergrößerte Bilder, durch Vergrößern oder Reduzieren der Originalbilder mit jeweils verschiedenen Vergrößerungs- oder Verkleinerungsfaktoren in Längs- und Querrichtung erzeugte Bilder und dergleichen. Weiterhin können zu den Originalbildern äquivalente Bilder Bilder sein, die durch Neigung und Vergrößern oder Verkleinern der Originalbilder erzeugt werden.The characteristic image data is data for display on the display unit 20 , pictures equivalent to the pictures based on the corresponding picture data (hereinafter referred to as the original pictures). The images equivalent to the original images are images that allow the identification of the original images according to these equivalent images. For example, the images equivalent to the original images contain reduced images (hereinafter referred to as thumbnail images) which are formed by reducing the original images by a certain reduction ratio in longitudinal and transverse directions by enlarging the original images by a certain magnification amount in the longitudinal and transverse directions generated enlarged images, images formed by enlarging or reducing the original images with respectively different magnification or reduction factors in the longitudinal and transverse direction, and the like. Furthermore, images equivalent to the original images may be images produced by tilting and enlarging or reducing the original images.
Wie in 8 illustriert, erzeugt die Steuereinheit 10 eine Bewegtbilddatei FA, welche die Bilddaten v1 bis v10, die Evaluierungswerte i1 bis i10 und die Datei-Information fi enthält. Im vorliegenden Beispiel beinhaltet die Datei-Information fi die Lesezeichendaten bd1 und bd2 und die charakteristischen Bilddaten sv3 und sv9. Die wie oben beschrieben erzeugte Bewegtbilddatei FA wird in der Speichereinheit 40 gespeichert.As in 8th illustrated, generates the control unit 10 a moving image file FA containing the image data v1 to v10, the evaluation values i1 to i10, and the file information fi. In the present example, the file information fi includes the bookmark data bd1 and bd2 and the characteristic image data sv3 and sv9. The moving image file FA generated as described above is stored in the storage unit 40 saved.
Die Datei-Information fi beinhaltet weiter Informationen, die beispielsweise einen Dateinamen und Dateispeicherformat und dergleichen enthalten. Der zuvor erwähnte Bildaufzeichnungsprozess und der zuvor erwähnte Dateispeicherprozess werden wiederholt, was in einer Speicherung einer Mehrzahl von Bewegtbilddateien FA, FB, FC und FD in der Speichereinheit 40 in 1 resultiert.The file information fi further includes information including, for example, a file name and file storage format, and the like. The aforementioned image recording process and the aforementioned file storage process are repeated, resulting in storage of a plurality of moving image files FA, FB, FC and FD in the storage unit 40 in 1 results.
In der vorliegenden Ausführungsform werden die oben erwähnten Bewegtbilddateien in einem Containerformat wie etwa AVI (Audio Video Interleave), WMV (WindowsTM Media Video), MPEG (Moving Picture Experts Group) oder dergleichen erzeugt. In diesem Fall können die Lesezeichendaten bd1 und bd2 und die charakteristischen Bilddaten sv3 und sv9 in der Bewegtbilddatei als Metadaten enthalten sein.In the present embodiment, the above-mentioned moving picture files are generated in a container format such as AVI (Audio Video Interleave), WMV (Windows ™ Media Video), MPEG (Moving Picture Experts Group) or the like. In this case, the bookmark data bd1 and bd2 and the characteristic image data sv3 and sv9 may be included in the moving picture file as metadata.
(2-4) Bildaufzeichnungseinheits-Wiedergabeprozess(2-4) Image recording unit reproduction process
Als Nächstes wird ein Bildaufzeichnungseinheits-Wiedergabeprozess beschrieben. Im Bildaufzeichnungseinheits-Wiedergabeprozess gemäß der vorliegenden Ausführungsformen werden Bilder einer Mehrzahl von Einzelbildern, basierend auf den in der Bildaufzeichnungseinheit 30 gespeicherten Bewegtbilddaten auf der Anzeigeneinheit 20 als Bewegtbilder angezeigt.Next, an image recording unit reproducing process will be described. In the image recording unit reproducing process according to the present embodiment, images of a plurality of frames based on those in the image recording unit 30 stored moving image data on the display unit 20 displayed as moving pictures.
Nach einem Bildaufzeichnungsprozess, aber vor einem Dateispeicherprozess, falls der Anwender die Wiedergabetaste Sg in 6 unter Verwendung der Bedieneinheit 4 betätigt, speichert die Steuereinheit 10 im Videospeicher 50 sukzessive Bilddaten einer Mehrzahl von Einzelbildern im Bewegtbilddatenspeicherbereich 30A. Somit werden Bilder, basierend auf den Bilddaten, die sukzessive im Videospeicher 50 gespeichert worden sind, auf der Bildanzeigefläche Sa angezeigt. Somit wird ein Bewegtbild wiedergegeben, basierend auf den Bilddaten der Mehrzahl von Einzelbildern im Bewegtbilddatenspeicherbereich 30A.After an image recording process but before a file storage process, if the user presses the play button Sg in FIG 6 using the control unit 4 pressed, stores the control unit 10 in video memory 50 successively image data of a plurality of frames in the moving image data storage area 30A , Thus, images based on the image data successively become in the video memory 50 have been stored on the image display area Sa. Thus, a moving picture is reproduced based on the picture data of the plurality of frames in the moving picture data storage area 30A ,
Weiterhin speichert die Steuereinheit 10 im Videospeicher 50 die Wellenformdaten im Wellenformdatenspeicherbereich 30B. Somit wird ein Graph einer Wellenform, basierend auf den Wellenformdaten, auf der Wellenformanzeigefläche Sb angezeigt.Furthermore, the control unit stores 10 in video memory 50 the waveform data in the waveform data storage area 30B , Thus, a graph of a waveform based on the waveform data is displayed on the waveform display area Sb.
(2-5) Selektiver Wiedergabeprozess(2-5) Selective Playback Process
Als Nächstes wird ein selektiver Wiedergabeprozess beschrieben. Der selektive Wiedergabeprozess gemäß der vorliegenden Ausführungsform ist dafür ausgelegt, hauptsächlich als ein Bewegtbild auf der Anzeigeneinheit 20 Bilder einer Mehrzahl von Einzelbildern, startend ab einem Bild eines Einzelbildes, das unter Verwendung eines Vorschaubildes ausgewählt ist, von den Bilddaten einer Mehrzahl von Einzelbildern in den in der Speichereinheit 40 gespeicherten Bewegtbilddateien anzuzeigen.Next, a selective reproduction process will be described. The selective reproduction process according to the present embodiment is designed to be mainly as a moving picture on the display unit 20 Images of a plurality of frames starting from an image of a frame selected using a preview image, from the image data of a plurality of frames in the one in the storage unit 40 stored moving picture files.
Entsprechende Icons, die einer Mehrzahl von Bewegtbilddateien entsprechen, die in der Speichereinheit 40 mittels Dateispeicherprozessen gespeichert worden sind, werden auf der Anzeigeneinheit 20 in 1 angezeigt. In diesem Fall kann der Anwender durch Verwenden der Bedieneinheit 4 irgendeines aus der Mehrzahl von Icons, die auf der Anzeigeneinheit 20 angezeigt werden, auswählen, um als eine Zieldatei die aus der Mehrzahl von Bewegtbilddateien, die in der Speichereinheit 40 gespeichert sind, ausgewählte Bewegtbilddatei auszuwählen. Falls eine Zieldatei ausgewählt ist, wird ein selektiver Wiedergabeprozess gestartet.Corresponding icons corresponding to a plurality of moving picture files stored in the storage unit 40 stored by file storage processes are displayed on the display unit 20 in 1 displayed. In this case, the user can by using the operating unit 4 any of the plurality of icons displayed on the display unit 20 to be displayed as one of the plurality of Motion picture files stored in the storage unit 40 are stored to select selected moving picture file. If a destination file is selected, a selective playback process is started.
Die 9 bis 11 sind Ansichten, die beispielhafte Anzeigen auf der Anzeigeneinheit 20 während eines selektiven Wiedergabeprozesses illustrieren. Im vorliegenden Beispiel wählt der Anwender als eine Zieldatei die Bewegtbilddatei FA in 8 unter Verwendung der Bedieneinheit 4 aus.The 9 to 11 are views that are exemplary ads on the ad unit 20 during a selective rendering process. In the present example, the user selects the moving image file FA in as a destination file 8th using the control unit 4 out.
In diesem Fall, wie in 9 illustriert, werden hauptsächlich die Bildanzeigefläche Sa, die Wellenformanzeigefläche Sb, eine Vorschau-Anzeigenfläche Sk, eine Wiedergabetaste Tc, eine Pausetaste Td, eine Revers-Wiedergabetaste Te, ein Suchbalken Tf und eine Abschlusstaste Tx auf der Anzeigeneinheit 20 in 1 angezeigt. Der Suchbalken Tf beinhaltet einen Schieber Tg, der in horizontaler Richtung beweglich ist.In this case, as in 9 Illustrated are mainly the image display area Sa, the waveform display area Sb, a preview display area Sk, a play button Tc, a pause button Td, a reverse play button Te, a search bar Tf, and a finish button Tx on the display unit 20 in 1 displayed. The search bar Tf includes a slider Tg which is movable in the horizontal direction.
Auf den Bilddaten der entsprechenden Einzelbilder in der Zieldatei basierende Bilder werden auf der Bildanzeigefläche Sa angezeigt. Ein Graph einer Wellenform WL, basierend auf den Wellenformdaten in der Zieldatei, wird auf der Wellenformanzeigefläche Sb angezeigt. Die horizontale Achse im Graphen der Wellenform WL ist eine Zeitachse, während die vertikale Achse die Evaluierungswerte repräsentiert.Images based on the image data of the respective frames in the destination file are displayed on the image display area Sa. A graph of a waveform WL based on the waveform data in the destination file is displayed on the waveform display area Sb. The horizontal axis in the graph of the waveform WL is a time axis, while the vertical axis represents the evaluation values.
Auf der Wellenformanzeigefläche Sb wird ein aktueller Anzeigepositionsbalken L angezeigt, indem er dem Graphen überlagert ist, parallel zur vertikalen Achse, um so die Wellenform WL zu schneiden. Somit bezeichnet während des selektiven Wiedergabeprozesses der aktuelle Anzeigepositionsbalken L den Evaluierungswert entsprechend dem Einzelbild des Bildes, das aktuell auf der Bildanzeigefläche Sa angezeigt wird. Im Beispiel von 9 wird der aktuelle Anzeigepositionsbalken L an der Position eines Zeitpunkts t1 auf der Zeitachse auf der Wellenformanzeigefläche Sb angezeigt.On the waveform display area Sb, a current display position bar L is displayed by being superimposed on the graph, parallel to the vertical axis, so as to intersect the waveform WL. Thus, during the selective reproduction process, the current display position bar L indicates the evaluation value corresponding to the frame of the image currently displayed on the image display area Sa. In the example of 9 For example, the current display position bar L at the position of a time t1 on the time axis is displayed on the waveform display area Sb.
Im vorliegenden Beispiel enthält die Zieldatei die Lesezeichendaten bd1, welche die Bilddaten v3 des dritten Einzelbildes anzeigen, und die Lesezeichendaten bd2, welche die Bilddaten v9 des neunten Einzelbildes anzeigen.In the present example, the destination file contains the bookmark data bd1 indicating the image data v3 of the third frame, and the bookmark data bd2 indicating the image data v9 of the ninth frame.
In diesem Fall werden auf der Wellenformanzeigefläche Sb jeweils Lesezeichenleisten SL1 und SL2 entsprechend den zwei Lesezeichendaten bd1 und bd2 angezeigt, indem sie dem Graph überlagert werden. Die Lesezeichenleisten SL1 und SL2 sind parallel zur vertikalen Achse und schneiden die Wellenform WL. Die Lesezeichenleisten SL1 und SL2 bezeichnen die Positionen auf der Wellenform WL, die den Bilddaten v3 und den Bilddaten v9 entsprechen. Im Beispiel von 9 werden die Lesezeichenleisten SL1 und SL2 an entsprechenden Positionen der Zeitpunkte t3 und t9 auf der Zeitachse, in der Wellenformanzeigefläche Sb angezeigt.In this case, on the waveform display area Sb, respectively, bookmark bars SL1 and SL2 corresponding to the two bookmark data bd1 and bd2 are displayed by being superimposed on the graph. The bookmarks SL1 and SL2 are parallel to the vertical axis and intersect the waveform WL. The bookmark bars SL1 and SL2 denote the positions on the waveform WL corresponding to the image data v3 and the image data v9. In the example of 9 For example, the bookmarks SL1 and SL2 are displayed at respective positions of the timings t3 and t9 on the time axis, in the waveform display area Sb.
Auf der Vorschau-Anzeigenfläche Sk werden Vorschaubilder SV3 und SV9 aufgelistet. Die Vorschaubilder SV3 und SV9 sind Bilder, welche durch Reduzieren der Bilder V3 und V9 entsprechend den Bilddaten v3 und v9 der dritten und neunten Einzelbilder, welche durch die jeweiligen Lesezeichendaten bd1 und bd2 angezeigt sind, erzeugt werden. Weiterhin werden in der Vorschau-Anzeigenfläche Sk unter den Vorschaubildern SV3 und SV9 die Positionen der Lesezeichenleisten SL1 und SL2, die in der Wellenformanzeigefläche Sb angezeigt werden (Zeitpunkte t3 und t9 im vorliegenden Beispiel) angezeigt werden, angezeigt.Thumbnail previews SV3 and SV9 are listed on the preview panel Sk. The thumbnail images SV3 and SV9 are images produced by reducing the images V3 and V9 corresponding to the image data v3 and v9 of the third and ninth frames indicated by the respective bookmark data bd1 and bd2. Further, in the preview ad area Sk, among the preview images SV3 and SV9, the positions of the bookmark bars SL1 and SL2 displayed in the waveform display area Sb (times t3 and t9 in the present example) are displayed.
Wie oben beschrieben, beinhaltet der Suchbalken Tf den Schieber Tg, der in horizontaler Richtung beweglich ist. Die Position des Schiebers Tg entspricht der Position des aktuellen Anzeigepositionsbalkens, der auf der Wellenformanzeigefläche Sb am aktuellen Zeitpunkt auf der Zeitachse angezeigt wird.As described above, the search bar Tf includes the slider Tg which is movable in the horizontal direction. The position of the slider Tg corresponds to the position of the current display position bar displayed on the waveform display area Sb at the current time on the time axis.
Im Beispiel von 9 werden Lesezeichen-Flags SF1 und SF2 entsprechend den jeweiligen Lesezeichendaten bd1 und bd2 oberhalb des Suchbalkens Tf angezeigt. Die Positionen der Lesezeichen-Flags SF1 und SF2 entsprechen den Positionen auf der Zeitachse der Bilddaten v3 und v9 der dritten und neunten Einzelbilder, welche durch die Lesezeichendaten bd1 bzw. bd2 angezeigt sind.In the example of 9 Bookmark flags SF1 and SF2 are displayed according to the respective bookmark data bd1 and bd2 above the search bar Tf. The positions of the bookmark flags SF1 and SF2 correspond to the positions on the time axis of the image data v3 and v9 of the third and ninth frames indicated by the bookmark data bd1 and bd2, respectively.
Der Anwender betätigt die Wiedergabetaste Tc unter Verwendung der Bedieneinheit 4. In diesem Fall werden die Bilder der Mehrzahl von Einzelbildern, die ab dem Bild starten, das an der aktuellen Zeitposition angezeigt wird, basierend auf den Bewegtbilddaten in der Zieldatei sukzessive auf der Bildanzeigefläche Sa angezeigt. Somit wird das Bewegtbild wiedergegeben.The user operates the reproduction key Tc using the operation unit 4 , In this case, the images of the plurality of frames starting from the image displayed at the current time position are successively displayed on the image display area Sa based on the moving image data in the destination file. Thus, the moving picture is reproduced.
Mit Fortschreiten der Wiedergabe des Bewegtbildes bewegt sich die aktuelle Anzeigepositionsleiste L in einer einzelnen Richtung (in Links-Rechts-Richtung auf dem Bildschirm der Anzeigeneinheit 20 im vorliegenden Beispiel) längs der Zeitachse auf der Wellenformanzeigefläche Sb und bewegt sich auch der Schieber Tg in einer einzelnen Richtung (in Links-Rechts-Richtung auf dem Bildschirm der Anzeigeneinheit 20 im vorliegenden Beispiel) auf dem Suchbalken Tf.As the playback of the moving picture progresses, the current display position bar L moves in a single direction (in the left-right direction on the screen of the display unit 20 in the present example) along the time axis on the waveform display area Sb, and the slider Tg also moves in a single direction (in the left-right direction on the screen of the display unit 20 in the present example) on the search bar Tf.
Weiterhin betätigt der Anwender die reverse Wiedergabetaste Te unter Verwendung der Bedieneinheit 4. In diesem Fall werden die Bilder der Mehrzahl von Einzelbildern, die ab dem Bild starten, das am aktuellen Zeitpunkt angezeigt wird, basierend auf den Bewegtbilddaten in der Zieldatei sukzessive auf der Bildanzeigefläche Sa in entgegen gesetzter Richtung zu der der Wiedergabe längs der Zeitachse angezeigt. Somit wird das Bewegtbild revers wiedergegeben.Further, the user operates the reverse playback key Te using the operation unit 4 , In this case, the images of the plurality of frames starting from the image displayed at the current time are successively based on the moving image data in the target file the image display area Sa is displayed in the opposite direction to that of the reproduction along the time axis. Thus, the moving picture is reproduced in reverse.
Mit Fortschreiten der reversen Wiedergabe des Bewegtbildes bewegt sich der aktuelle Anzeigepositionsbalken L in einer anderen Richtung (im vorliegenden Beispiel in Rechts-Links-Richtung auf dem Bildschirm der Anzeigeneinheit 20) längs der Zeitachse auf der Wellenformanzeigefläche Sb und bewegt sich auch der Schieber Tg in einer anderen Richtung (im vorliegenden Beispiel in Rechts-Links-Richtung auf dem Bildschirm der Anzeigeneinheit 20) auf dem Suchbalken Tf.As the reverse playback of the moving picture progresses, the current display position bar L moves in a different direction (right-left direction on the screen of the display unit in the present example) 20 ) along the time axis on the waveform display surface Sb, and the slider Tg also moves in a different direction (right-left direction on the screen of the display unit in the present example) 20 ) on the search bar Tf.
Während Wiedergabe oder reverser Wiedergabe des Bewegtbildes, falls der Anwender die Pausetaste Td unter Verwendung der Bedieneinheit 4 betätigt, wird die Wiedergabe oder die reverse Wiedergabe des Bewegtbildes zeitweilig angehalten. Weiterhin, falls der Anwender kontinuierlich die Wiedergabetaste Tc betätigt, wird das Bewegtbild bei einer höheren Geschwindigkeit wiedergegeben, bis die Operation abgebrochen wird. Falls der Anwender kontinuierlich die reverse Wiedergabetaste Te betätigt, wird das Bewegtbild bei einer höheren Geschwindigkeit revers wiedergegeben, bis die Operation abgebrochen wird.During playback or reverse playback of the moving picture, if the user presses the pause button Td using the operation unit 4 is pressed, playback or reverse playback of the moving picture is temporarily stopped. Further, if the user continuously presses the play button Tc, the motion picture is reproduced at a higher speed until the operation is canceled. If the user continuously presses the reverse play key Te, the motion picture is reversed at a higher speed until the operation is canceled.
In diesem Fall kann der Anwender während des selektiven Wiedergabeprozesses unter Verwendung der Bedieneinheit 4 eines der zwei Vorschaubilder SV3 und SV9, die auf der Vorschau-Anzeigenfläche Sk angezeigt sind, und eine der auf der Wellenformanzeigefläche Sb angezeigten Lesezeichenleisten SL1 und SL2 auswählen.In this case, during the selective reproduction process, the user may use the operation unit 4 one of the two preview images SV3 and SV9 displayed on the preview display area Sk and one of the bookmark strips SL1 and SL2 displayed on the waveform display area Sb.
Im Beispiel von 9 wird das Bild V1 des ersten Einzelbildes auf der Bildanzeigefläche Sa angezeigt, der aktuelle Anzeigepositionsbalken L wird an der Position des Zeitpunkts t1 auf der Zeitachse auf der Wellenformanzeigefläche Sb angezeigt und der Schieber Tg wird an einem Endteil des Suchbalkens Tf angezeigt. In diesem Zustand wählt der Anwender ein Vorschaubild SV3 unter Verwendung der Bedieneinheit 4 aus.In the example of 9 is displayed the image V1 of the first frame on the image display area Sa, the current display position bar L is displayed at the position of the time t1 on the time axis on the waveform display area Sb, and the slider Tg is displayed at an end portion of the search bar Tf. In this state, the user selects a preview image SV3 using the operation unit 4 out.
Wie in 10 illustriert, wird als Ergebnis davon das Bild V3 des dritten Einzelbilds entsprechend dem Vorschaubild SV3 auf den Bildanzeigefläche Sa anstelle des Bildes V1 des ersten Einzelbildes angezeigt. Weiterhin, wie durch den gestrichelten Linienpfeil in 10 angezeigt, bewegt sich der aktuelle Anzeigepositionsbalken L von der Position zum Zeitpunkt t1 zur Position zum Zeitpunkt t3, an der die Lesezeichenleiste SL1 positioniert ist, auf der Zeitachse in der Wellenformanzeigefläche Sb. Weiter, wie durch den gestrichelten Linienpfeil in 10 angezeigt, bewegt sich der Schieber Tg auf dem Suchbalken Tf von einem Endbereich des Suchbalkens Tf zu einer Position, an der das Lesezeichen-Flag SF1 angezeigt wird.As in 10 As a result, as a result, the image V3 of the third frame corresponding to the preview image SV3 is displayed on the image display surface Sa instead of the image V1 of the first frame. Continue, as indicated by the dashed line arrow in 10 is displayed, the current display position bar L moves from the position at time t1 to the position at time t3 at which the bookmark bar SL1 is positioned on the time axis in the waveform display area Sb. Next as indicated by the dashed line arrow in FIG 10 is displayed, the slider Tg moves on the search bar Tf from an end portion of the search bar Tf to a position where the bookmark flag SF1 is displayed.
Falls die Wiedergabetaste Tc in diesem Zustand betätigt wird, werden die Bilder der Mehrzahl von Einzelbildern, beginnend ab dem auf der Bildanzeigefläche Sa gerade angezeigten Bild V3, sukzessive auf der Bildanzeigefläche Sa angezeigt. Falls andererseits die reverse Wiedergabetaste Te betätigt wird, werden die Bilder der Mehrzahl von Einzelbildern, beginnend ab dem auf der Bildanzeigefläche Sa gerade angezeigten Bild V3, sukzessive auf der Bildanzeigefläche Sa in der Richtung entgegengesetzt zu der einer Wiedergabe auf der Zeitachse angezeigt.If the reproduction key Tc is operated in this state, the images of the plurality of frames are successively displayed on the image display surface Sa starting from the image V3 currently being displayed on the image display surface Sa. On the other hand, if the reverse reproduction key Te is operated, the images of the plurality of frames starting from the image V3 currently being displayed on the image display surface Sa are successively displayed on the image display surface Sa in the direction opposite to that of reproduction on the time axis.
Wie oben beschrieben, kann der Anwender die Bewegtbilder vor und nach dem Bild V3 entsprechend dem Vorschaubild SV3 wiedergeben.As described above, the user can reproduce the moving pictures before and after the picture V3 according to the preview picture SV3.
Das eine auf der Vorschau-Anzeigenfläche Sk angezeigte Vorschaubild SV3 und die eine auf der Wellenformanzeigefläche Sb angezeigte Lesezeichenleiste SL1 werden basierend auf den Lesezeichendaten bd1 angezeigt.The preview image SV3 displayed on the preview display area Sk and the bookmark strip SL1 displayed on the waveform display area Sb are displayed based on the bookmark data bd1.
Daher werden in Fallen, wo der Anwender die eine Lesezeichenleiste SL1 auswählt, statt das eine Vorschaubild SV3 auszuwählen, das auf der Bildanzeigefläche Sa angezeigte Bild, die Position des aktuellen Anzeigepositionsbalkens L auf der Zeitachse auf der Wellenformanzeigefläche Sb und die Position des Schiebers Tg auf dem Suchbalken Tf in derselben Weise wie oben beschrieben geändert.Therefore, in cases where the user selects the bookmark bar SL1 instead of selecting a preview image SV3, the image displayed on the image display area Sa, the position of the current display position bar L on the time axis on the waveform display area Sb, and the position of the slider Tg on the Search bar Tf changed in the same manner as described above.
Weiterhin wählt im Zustand von 10 der Anwender das andere Vorschaubild SV9 unter Verwendung der Bedieneinheit 4 aus.Furthermore chooses in the state of 10 the user the other preview image SV9 using the control unit 4 out.
Als Ergebnis davon, wie in 11 illustriert, wird das Bild V9 des neunten Einzelbildes entsprechend dem Vorschaubild SV9 auf der Bildanzeigefläche Sa statt des Bildes V3 des dritten Einzelbildes angezeigt. Weiterhin, wie durch den Strichlinienpfeil in 11 angezeigt, bewegt sich der aktuelle Anzeigepositionsbalken L von der Position zur Zeit t3 zur Position der Zeit t9, an welcher die Lesezeichenleiste SL2 positioniert ist, auf der Zeitachse in der Wellenformanzeigefläche Sb. Weiterhin, wie durch den Strichlinienpfeil in 11 angezeigt, bewegt sich der Schieber Tg auf dem Suchbalken Tf von der Position, an welcher das Lesezeichen-Flag SF1 angezeigt wird, zur Position, an welcher das Lesezeichen-Flag SF2 angezeigt wird.As a result, as in 11 9, the image V9 of the ninth frame corresponding to the preview image SV9 is displayed on the image display area Sa instead of the image V3 of the third frame. Continue, as indicated by the dashed arrow in 11 is displayed, the current display position bar L moves from the position at time t3 to the position of time t9 at which the bookmark bar SL2 is positioned on the time axis in the waveform display area Sb. Further, as indicated by the dotted line arrow in FIG 11 is displayed, the slider Tg moves on the search bar Tf from the position at which the bookmark flag SF1 is displayed to the position at which the bookmark flag SF2 is displayed.
Falls die Wiedergabetaste Tc in diesem Zustand betätigt wird, werden die Bilder der Mehrzahl von Einzelbildern, beginnend ab dem auf der Bildanzeigefläche Sa angezeigten Bild V9, sukzessive auf der Bildanzeigefläche Sa angezeigt. Falls andererseits die reverse Wiedergabetaste Te betätigt wird, werden die Bilder der Mehrzahl von Einzelbildern, beginnend ab dem auf der Bildanzeigefläche Sa angezeigten Bild V9, sukzessive auf der Bildanzeigefläche Sa in entgegengesetzter Richtung zu der bei Wiedergabe längs der Zeitachse angezeigt.If the reproduction key Tc is operated in this state, the images of the plurality of frames starting from the image V9 displayed on the image display surface Sa are successively displayed on the image display surface Sa. If On the other hand, when the reverse reproduction key Te is operated, the images of the plurality of frames starting from the image V9 displayed on the image display surface Sa are successively displayed on the image display surface Sa in the opposite direction to that when reproduced along the time axis.
Wie oben beschrieben, kann der Anwender die Bewegtbilder vor und nach dem Bild V9 entsprechend dem Vorschaubild SV9 wiedergeben oder revers wiedergeben.As described above, the user can play the moving pictures before and after the picture V9 in accordance with the preview picture SV9 or reverse play.
Das andere auf der Vorschau-Anzeigenfläche Sk angezeigte Vorschaubild SV9 und die andere auf der Wellenformanzeigefläche Sb angezeigte Lesezeichenleiste SL2 werden basierend auf den Lesezeichendaten bd2 angezeigt.The other preview mark SV9 displayed on the preview display area Sk and the other bookmark bar SL2 displayed on the waveform display area Sb are displayed based on the bookmark data bd2.
Daher werden in Fällen, wenn der Anwender die andere Lesezeichenleiste SL2 betätigt, statt das andere Vorschaubild SV9 zu betätigen, das auf der Bildanzeigefläche Sa angezeigte Bild, die Position der aktuellen Anzeigepositionsleiste L auf der Zeitachse in der Wellenformanzeigefläche Sb und die Position des Schiebers Tg auf dem Suchbalken Tf in derselben Weise wie oben beschrieben verändert.Therefore, in cases where the user operates the other bookmark bar SL2, instead of operating the other preview image SV9, the image displayed on the image display area Sa, the position of the current display position bar L on the time axis in the waveform display area Sb, and the position of the slider Tg the search bar Tf changed in the same manner as described above.
Während des selektiven Wiedergabeprozesses kann der Anwender den Schieber Tg auf dem Suchbalken Tf durch Betätigen der Bedieneinheit 4 bewegen. Beispielsweise kann der Anwender das auf der Bildanzeigefläche Sa angezeigte Bild und die Position des aktuellen Anzeigepositionsbalkens L auf der Zeitachse in der Wellenformanzeigefläche Sb Sb in derselben Weise wie oben beschrieben ändern, durch Bewegen des Schiebers Tg auf dem Suchbalken Tf unter Verwendung der Bedieneinheit 4.During the selective reproduction process, the user can set the slider Tg on the search bar Tf by operating the operation unit 4 move. For example, the user can change the image displayed on the image display area Sa and the position of the current display position bar L on the time axis in the waveform display area Sb Sb in the same manner as described above by moving the slider Tg on the search bar Tf using the operation unit 4 ,
Entsprechend kann der Anwender leicht die Bilder V3 und V9, welche die Subjekte W1 und W2 zeigen, auf der Bildanzeigefläche Sa anzeigen, die Bewegung des Schiebers Tg auf dem Suchbalken Tf auf die Positionen der Lesezeichen-Flags SF1 und SF2. Weiterhin kann der Anwender die Bewegtbilder vor und nach den Bildern V3 und V9 wiedergeben oder revers wiedergeben.Accordingly, the user can easily display the images V3 and V9 showing the subjects W1 and W2 on the image display area Sa, the movement of the slider Tg on the search bar Tf to the positions of the bookmark flags SF1 and SF2. Furthermore, the user can play back or reverse the moving pictures before and after the pictures V3 and V9.
Falls der Anwender die Abschluß-Taste Tx in 9 bis 11 unter Verwendung der Bedieneinheit 4 betätigt, wird der selektive Wiedergabeprozess abgeschlossen.If the user presses the completion key Tx in 9 to 11 using the control unit 4 is pressed, the selective playback process is completed.
Während ein Fall beschrieben worden ist, wo ”2” im Eingaberahmen Sc6 in 6 eingegeben wird, können andere natürliche Zahlen als 2 in dem Eingaberahmen Sc6 in 6 eingegeben werden. Beispielsweise, annehmend, dass ”n” eine beliebige natürliche Zahl ist, stellt die Steuereinheit 10, falls ”n” im Eingaberahmen Sc6 eingegeben wird, die Auswahlobergrenzenanzahl auf ”n” ein.While a case has been described where "2" in the input frame Sc6 in 6 is input, other natural numbers than 2 in the input frame Sc6 in 6 be entered. For example, assuming that "n" is any natural number, the control unit provides 10 if "n" is input in the input frame Sc6, the selection upper limit number is set to "n".
Daher werden während Dateispeicherprozessen Bilddaten von n Einzelbildern basierend auf in dem Bildaufzeichnungseinheit 30 gespeicherten Wellenformdaten ausgewählt und es werden n Stücke von Lesezeichendaten, welche die ausgewählten Bilddaten der n Einzelbilder anzeigen, erzeugt.Therefore, during file storage processes, image data of n frames based on in the image recording unit 30 stored waveform data and n pieces of bookmark data indicating the selected image data of the n frames are generated.
Somit werden während Wiedergabeprozessen n Vorschaubilder entsprechend den Bilddaten von n Einzelbildern, welche durch n Stücke von Lesezeichendaten angezeigt werden, auf der Vorschau-Anzeigenfläche Sk angezeigt.Thus, during reproduction processes, n thumbnails corresponding to the image data of n frames displayed by n pieces of bookmark data are displayed on the preview display area Sk.
(2-6) Fluss des Dateispeicherprozesses(2-6) Flow of the file storage process
12 ist ein Flussdiagramm eines Dateispeicherprozesses. Wie oben beschrieben, wird ein Dateispeicherprozess gestartet, falls der Anwender die Dateitaste Sj in 6 unter Verwendung der Bedieneinheit 4 betätigt, wenn ein Bildaufzeichnungsprozess abgeschlossen worden ist. Die Steuereinheit 10 führt den Dateispeicherprozess durch, indem sie das in der Speichereinheit 40 gespeicherte Bildbearbeitungsprogramm ausführt. 12 is a flowchart of a file storage process. As described above, if the user inserts the file key Sj in FIG 6 using the control unit 4 when an image recording process has been completed. The control unit 10 performs the file storage process by doing so in the storage unit 40 stored image editing program executes.
Da der Dateispeicherprozess gestartet wird, erfasst die Steuereinheit 10 in 1 eine Mehrzahl von in der Bildaufzeichnungseinheit 30 in 1 gespeicherten Evaluierungswerten und extrahiert weiterhin einen oder mehrere Evaluierungswerte, die eine vorgegebene Charakteristik anzeigen, aus der ermittelten Mehrzahl von Evaluierungswerten (Schritt S11).As the file storage process starts, the controller detects 10 in 1 a plurality of in the image recording unit 30 in 1 stored evaluation values and further extracts one or more evaluation values indicating a predetermined characteristic from the determined plurality of evaluation values (step S11).
Als Nächstes erzeugt die Steuereinheit 10 Lesezeichendaten, welche die Bilddaten der Einzelbilder entsprechend den extrahierten Evaluierungswerten anzeigen (Schritt S12). Weiterhin erzeugt die Steuereinheit 10 charakteristische Bilddaten entsprechend den durch die Lesezeichendaten angezeigten Bilddaten (Schritt S13).Next, the control unit generates 10 Bookmark data indicating the image data of the frames corresponding to the extracted evaluation values (step S12). Furthermore, the control unit generates 10 characteristic image data corresponding to the image data displayed by the bookmark data (step S13).
Nachfolgend erzeugt die Steuereinheit 10 eine Bewegtbilddatei, welche Bilddaten einer Mehrzahl von in der Bildaufzeichnungseinheit 30 gespeicherten Einzelbildern enthält, die Mehrzahl von Evaluierungswerten, die erzeugten Lesezeichendaten und die erzeugten charakteristischen Bilddaten (Schritt S14) und speichert die erzeugte Bewegtbilddatei in der Speichereinheit 40 (Schritt S15). Somit ist der Dateispeicherprozess abgeschlossen worden.Subsequently, the control unit generates 10 a moving picture file containing image data of a plurality of in the image recording unit 30 stores the plurality of evaluation values, the generated bookmark data and the generated characteristic image data (step S14), and stores the generated motion picture file in the storage unit 40 (Step S15). Thus, the file storage process has been completed.
(2-7) Fluss selektiven Wiedergabeprozesses(2-7) Flow of Selective Rendering Process
13 bis 15 sind Flussdiagramme eines selektiven Wiedergabeprozesses. Wie oben beschrieben, wird der selektive Wiedergabeprozess gestartet, falls der Anwender eine Zieldatei einer Mehrzahl von in der Speichereinheit 40 gespeicherten Bewegtbilddateien unter Verwendung der Bedieneinheit 4 auswählt. Die Steuereinheit 10 führt den selektiven Wiedergabeprozess durch Ausführen des in der Speichereinheit 40 gespeicherten Bildbearbeitungsprogramms durch. 13 to 15 are flowcharts of a selective rendering process. As described above, if the user selects a destination file of a plurality of in the storage unit, the selective reproduction process is started 40 stored moving picture files using the operating unit 4 selects. The control unit 10 performs the selective reproduction process by executing the in the storage unit 40 stored image editing program.
Da der selektive Wiedergabeprozess gestartet wird, zeigt die Steuereinheit 10 in 1 einen Graph einer Wellenform WL (9), basierend auf den Wellenformdaten in der Zieldatei, auf der Wellenformanzeigefläche Sb an (Schritt S21).Since the selective reproduction process is started, the control unit shows 10 in 1 a graph of a waveform WL ( 9 ) based on the waveform data in the destination file on the waveform display area Sb (step S21).
Weiterhin zeigt die Steuereinheit 10 den aktuellen Anzeigepositionsbalken L an der Position des Starts der Zeitachse an, indem sie ihn dem Graphen der Wellenform WL auf der Wellenformanzeigefläche Sb überlagert (Schritt S22).Furthermore, the control unit shows 10 the current display position bar L at the position of the start of the time axis by superimposing it on the graph of the waveform WL on the waveform display area Sb (step S22).
Weiterhin zeigt die Steuereinheit 10 in der Bildanzeigefläche Sa (9) das Bild, basierend auf den Bilddaten des ersten Einzelbildes in der Zieldatei, an (das Bild des Einzelbildes entsprechend der Position auf der Wellenform WL, welche durch den aktuellen Anzeigepositionsbalken L bezeichnet ist) (Schritt S23).Furthermore, the control unit shows 10 in the image display area Sa (FIG. 9 ) the image based on the image data of the first frame in the destination file (the image of the frame corresponding to the position on the waveform WL indicated by the current display position bar L) (step S23).
Nachfolgend bestimmt die Steuereinheit 10, ob die Dateiinformation fi in der Zieldatei Lesezeichendaten bd1 und bd2 beinhaltet oder nicht (8) (Schritt S31). Falls sie Lesezeichendaten bd1 und bd2 enthält, schreitet die Steuereinheit 10 zur Bearbeitung in Schritt S41 fort, der später beschrieben wird.Subsequently determines the control unit 10 whether or not the file information fi in the destination file includes bookmark data bd1 and bd2 ( 8th ) (Step S31). If it contains bookmark data bd1 and bd2, the control unit proceeds 10 for processing in step S41, which will be described later.
Andererseits, falls sie Lesezeichendaten bd1 und bd2 enthält, zeigt die Steuereinheit 10 auf der Vorschau-Anzeigenfläche Sk Vorschaubilder an, basierend auf den charakteristischen Bilddaten sv3 und sv9 (8), die in der Dateiinformation fi enthalten sind (Schritt S32).On the other hand, if it contains bookmark data bd1 and bd2, the control unit shows 10 on the preview ad area Sk thumbnails based on the characteristic image data sv3 and sv9 ( 8th ) included in the file information fi (step S32).
Weiterhin zeigt die Steuereinheit 10 Lesezeichen-Flags SF1 und SF2 oberhalb des Suchbalkens Tf an den Positionen an, welche den Bilddaten der durch die entsprechenden Lesezeichendaten bd1 und bd2 angezeigten Einzelbilder entsprechen (Schritt S33).?Furthermore, the control unit shows 10 Bookmark flags SF1 and SF2 above the search bar Tf at the positions corresponding to the image data of the frames displayed by the corresponding bookmark data bd1 and bd2 (step S33).
Weiterhin zeigt Steuereinheit 10 Lesezeichenleisten SL1 und SL2 an den Positionen auf der Zeitachse an, welche den Bilddaten der durch die entsprechenden Lesezeichendaten bd1 und bd2 angezeigten Einzelbilder entsprechen, auf dem Graphen der Wellenform WL in der Wellenformanzeigefläche Sb (Schritt S34).Furthermore shows control unit 10 Bookmark bars SL1 and SL2 at the positions on the time axis, which correspond to the image data of the frames displayed by the corresponding bookmark data bd1 and bd2, on the graph of the waveform WL in the waveform display area Sb (step S34).
Nachfolgend bestimmt die Steuereinheit 10, ob eines der Vorschaubilder SV3 und SV9, die in der Vorschau-Anzeigenfläche Sk in 9 aufgelistet sind, oder eine der Lesezeichenleisten SL1 und SL2, die in der Wellenformanzeigefläche Sb angezeigt werden, ausgewählt worden sind (Schritt S41). Falls keines der Vorschaubilder SV3 und SV9 und der Lesezeichenleisten SL1 und SL2 ausgewählt worden sind, schreitet die Steuereinheit 10 zur Bearbeitung in Schritt S51 fort, der später beschrieben wird.Subsequently determines the control unit 10 whether to preview one of the preview images SV3 and SV9 in the preview ad area Sk in 9 or one of the bookmarks SL1 and SL2 displayed in the waveform display area Sb has been selected (step S41). If none of the thumbnails SV3 and SV9 and the bookmarks SL1 and SL2 have been selected, the control unit proceeds 10 for processing in step S51, which will be described later.
Falls eines der Vorschaubilder SV3 und SV9 oder eine der Lesezeichenleisten SL1 und SL2 ausgewählt worden sind, zeigt die Steuereinheit 10 das Bild des Einzelbildes entsprechend dem ausgewählten Vorschaubild oder der ausgewählten Lesezeichenleiste auf der Bildanzeigefläche Sa an, basierend auf den Bilddaten (Schritt S42).If one of the thumbnails SV3 and SV9 or one of the bookmarks SL1 and SL2 has been selected, the control unit will show 10 the image of the frame corresponding to the selected preview image or the bookmark bar on the image display area Sa based on the image data (step S42).
Weiterhin bewegt die Steuereinheit 10 den Schieber Tg auf dem Suchbalken Tf auf die Position des Lesezeichen-Flags, das dem ausgewählten Vorschaubild oder der ausgewählten Lesezeichenleiste entspricht (Schritt S43).The control unit continues to move 10 the slider Tg on the search bar Tf to the position of the bookmark flag corresponding to the selected preview image or bookmark bar (step S43).
Weiterhin bewegt die Steuereinheit 10 den aktuellen Anzeigepositionsbalken L längs der Zeitachse des Graphen der Wellenform WL zur Position der Lesezeichenleiste entsprechend dem ausgewählten Vorschaubild oder der ausgewählten Lesezeichenleiste, auf der Wellenformanzeigefläche Sb (Schritt S44).The control unit continues to move 10 the current display position bar L along the time axis of the graph of the waveform WL to the position of the bookmark bar corresponding to the selected preview image or bookmark bar, on the waveform display area Sb (step S44).
Nachfolgend entscheidet die Steuereinheit 10, ob ein Befehl zum Wiedergeben oder reversen Wiedergeben des Bewegtbildes erteilt worden ist oder nicht, über eine Betätigung der Wiedergabetaste Tc oder der reversen Wiedergabetaste Te in 9 (Schritt S51).Subsequently, the control unit decides 10 Whether or not a command for reproducing or reversing the moving picture has been issued or not by pressing the play button Tc or the reverse play button Te in 9 (Step S51).
Falls kein Befehl zur Wiedergabe oder reversen Wiedergabe des Bewegtbildes erteilt worden ist, schreitet die Steuereinheit 10 zur Verarbeitung in Schritt S57 fort, der später beschrieben wird.If no command for reproducing or reversing the moving picture has been issued, the control unit proceeds 10 for processing in step S57, which will be described later.
Falls ein Befehl zur Wiedergabe oder reversen Wiedergabe des Bewegtbildes erteilt worden ist, gibt die Steuereinheit 10 das Bewegtbild wieder, oder revers wieder, basierend auf den Bewegtbilddaten in der Zieldatei (Schritt S52). Weiterhin bewegt die Steuereinheit 10 den Schieber Tg auf dem Suchbalken Tf anhand der Einzelbilder der Bilder, die auf der Bildanzeigefläche Sa angezeigt werden, zusammen mit der Wiedergabe oder reversen Wiedergabe des Bewegtbildes (Schritt S53) und bewegt auch den aktuellen Anzeigepositionsbalken L längs der Zeitachse auf der Wellenformanzeigefläche Sb (Schritt S54).If a command for reproducing or reversing the moving picture has been issued, the control unit gives 10 the moving picture again, or reverse, based on the moving picture data in the destination file (step S52). The control unit continues to move 10 the slider Tg on the search bar Tf from the frames of the images displayed on the image display surface Sa together with the reproduction or reverse playback of the moving image (step S53) and also moves the current display position bar L along the time axis on the waveform display surface Sb (step S54).
In diesem Zustand stellt die Steuereinheit 10 durch eine Betätigung der Pausetaste Td in 9 fest, ob ein Befehl zum Anhalten der Wiedergabe oder der reversen Wiedergabe erteilt worden ist oder nicht (Schritt S55). Falls ein Befehl zum Anhalten der Wiedergabe oder der reversen Wiedergabe erteilt worden ist, stoppt die Steuereinheit 10 die Wiedergabe oder reverse Wiedergabe des Bewegtbildes, basierend auf den Bewegtbilddaten in der Zieldatei (Schritt S56).In this state, the control unit 10 by pressing the pause button Td in 9 determines whether or not a stop playback or reverse playback command has been issued (step S55). If a stop playback or reverse playback command has been issued, the control unit stops 10 the Reproducing or reversing the moving image based on the moving image data in the destination file (step S56).
Nachfolgend bestimmt die Steuereinheit 10, ob ein Befehl zum Abschließen des selektiven Wiedergabeprozesses erteilt worden ist oder nicht, über eine Betätigung der Abschlusstaste Tx in 9 (Schritt S57). Falls ein Befehl zum Abschluss des selektiven Wiedergabeprozesses erteilt worden ist, schließt die Steuereinheit 10 den selektiven Wiedergabeprozess ab. Falls andererseits kein Befehl zum Abschließen des selektiven Wiedergabeprozesses erteilt worden ist, kehrt die Steuereinheit 10 zur Verarbeitung in Schritt S41, der oben beschrieben ist, zurück.Subsequently determines the control unit 10 Whether or not an instruction for completing the selective reproduction process has been issued, by pressing the end key Tx in FIG 9 (Step S57). If an instruction to complete the selective playback process has been issued, the control unit will close 10 the selective reproduction process. On the other hand, if no command to complete the selective reproduction process has been issued, the control unit returns 10 for processing in step S41 described above.
Wie oben beschrieben, in Fällen, bei denen Bewegtbilddateien Lesezeichendaten und charakteristische Bilddaten als Meta-Daten enthalten, ist selbst die vorgenannte Bildbearbeitungsvorrichtung 1, die nicht die Funktion des Ausführens selektiver Wiedergabeprozesse aufweist, in der Lage, Bewegtbilder wiederzugeben und revers wiederzugeben, es werden jedoch nur Bewegtbilder auf der Anzeigeneinheit 20 angezeigt. Entsprechend werden Graphen von Wellenformen WL, Lesezeichenbalken und Vorschaubilder nicht auf dem Bildschirm in der Anzeigeneinheit 20 angezeigt.As described above, in cases where moving picture files include bookmark data and characteristic picture data as meta data, even the aforementioned picture processing apparatus is 1 which does not have the function of performing selective reproduction processes, is capable of reproducing moving pictures and reversing, but only moving pictures on the display unit become 20 displayed. Accordingly, graphs of WL waveforms, bookmark bars, and preview images are not displayed on the display unit 20 displayed.
(2-8) Wirkungen(2-8) effects
Mit der Bildbearbeitungsvorrichtung 1 gemäß der vorliegenden Erfindung, falls eine Zieldatei in selektiven Wiedergabeprozessen ausgewählt wird, werden, eine vorgegebene Charakteristik anzeigende Evaluierungswerte i3 und i9 (7) aus einer Mehrzahl von Evaluierungswerten i1 bis i9 (7) in der Zieldatei extrahiert. Basierend auf den extrahierten Evaluierungswerten i3 und i9 werden Bilddaten v3 und v9 einiger Einzelbilder aus den Bilddaten v1 bis v10 einer Mehrzahl von Einzelbildern ausgewählt. Charakteristische Bilddaten sv3 und sv9 entsprechend den ausgewählten Bilddaten v3 und v9 werden erzeugt. Vorschaubilder SV3 und SV9 werden, basierend auf den charakteristischen Bilddaten sv3 und sv9 auf der Vorschau-Anzeigenfläche Sk aufgelistet.With the image processing device 1 According to the present invention, if a target file is selected in selective reproduction processes, evaluation values i3 and i9 indicative of a predetermined characteristic (FIG. 7 ) from a plurality of evaluation values i1 to i9 ( 7 ) in the target file. Based on the extracted evaluation values i3 and i9, image data v3 and v9 of some frames are selected from the image data v1 to v10 of a plurality of frames. Characteristic image data sv3 and sv9 corresponding to the selected image data v3 and v9 are generated. Thumbnails SV3 and SV9 are listed on the preview ad area Sk based on the characteristic image data sv3 and sv9.
In diesem Fall werden die Evaluierungswerte anhand des Zustands des Subjektes W in den Bildern der Mehrzahl von Einzelbildern variiert. Entsprechend zeigen die Bilder V3 und V9, basierend auf den ausgewählten Bilddaten v3 und v9, einen gewissen Zustand des Subjekts W.In this case, the evaluation values are varied based on the state of the subject W in the images of the plurality of frames. Accordingly, the images V3 and V9, based on the selected image data v3 and v9, show a certain state of the subject W.
Falls der Anwender irgendeines der Vorschaubilder SV3 und SV9, die auf der Vorschau-Anzeigenfläche Sk angezeigt werden, unter Verwendung der Bedieneinheit 4 auswählt, wird das dem ausgewählten Vorschaubild entsprechende Bild auf der Bildanzeigefläche Sa angezeigt. In diesem Zustand kann der Anwender unmittelbar und leicht das Bewegtbild, das einen gewissen Zustand des Subjekts W zeigt, wiedergeben, durch Betätigen der Wiedergabetaste Tc unter Verwendung der Bedieneinheit 4.If the user of any of the preview images SV3 and SV9, which are displayed on the preview display area Sk, using the control unit 4 selects, the image corresponding to the selected preview image is displayed on the image display area Sa. In this state, the user can directly and easily reproduce the moving picture showing a certain state of the subject W by operating the play button Tc using the operation unit 4 ,
Weiterhin wird ein Graph einer Wellenform WL, die aus der Mehrzahl von Evaluierungswerten i1 bis i10 geformt ist, auf der Wellenformanzeigefläche Sb auf der Anzeigeneinheit 20 angezeigt. In diesem Graph werden auf der Zeitachse Lesezeichenleisten SL1 und SL2 entsprechend den ausgewählten Bilddaten v3 und v9 angezeigt. Diese Lesezeichenleisten SL1 und SL2 bezeichnen die Positionen auf der Wellenform WL, welche den Bilddaten v3 und v9 entsprechen.Further, a graph of a waveform WL formed from the plurality of evaluation values i1 to i10 is displayed on the waveform display area Sb on the display unit 20 displayed. In this graph, bookmark bars SL1 and SL2 corresponding to the selected image data v3 and v9 are displayed on the time axis. These bookmark bars SL1 and SL2 denote the positions on the waveform WL corresponding to the image data v3 and v9.
Dies ermöglicht dem Anwender, den Zustand des Subjekts W, das durch die Bilder V1 bis V10 aus der Mehrzahl von Einzelbildern gezeigt wird, durch Ansehen der Wellenform WL zu erkennen. Weiterhin, falls der Anwender eine der Lesezeichenleisten SL1 und SL2 unter Verwendung der Bedieneinheit 4 auswählt, wird das der ausgewählten Lesezeichenleiste entsprechende Bild auf der Bildanzeigefläche Sa angezeigt. In diesem Zustand kann der Anwender unmittelbar und leicht das Bewegtbild wiedergeben, das den gewissen Zustand des Subjekts W zeigt, durch Betätigen der Wiedergabetaste Tc unter Verwendung der Bedieneinheit 4.This enables the user to recognize the state of the subject W shown by the images V1 to V10 among the plurality of frames by watching the waveform WL. Further, if the user selects one of the bookmark bars SL1 and SL2 using the operation unit 4 selects the picture corresponding to the selected bookmark bar on the picture display area Sa. In this state, the user can immediately and easily reproduce the moving picture showing the certain state of the subject W by operating the play button Tc using the operation unit 4 ,
(3) Sonstiges(3) Other
Bei selektiven Wiedergabeprozessen können Bilddaten einiger Einzelbilder neu aus den Bilddaten einer Mehrzahl von Einzelbildern ausgewählt werden, basierend auf Anwenderbedienungen auf der Bedieneinheit 4. In diesem Fall erzeugt die Steuereinheit 10 Lesezeichendaten, welche die Bilddaten der Einzelbilder, die durch den Anwender ausgewählt sind, anzeigen, und weiter erzeugt sie charakteristische Bilddaten entsprechend den Lesezeichendaten.In selective reproduction processes, image data of some frames may be newly selected from the image data of a plurality of frames based on user operations on the operation unit 4 , In this case, the control unit generates 10 Bookmark data indicating the image data of the frames selected by the user, and further generating characteristic image data corresponding to the bookmark data.
16 ist eine Ansicht, die eine andere beispielhafte Anzeige auf der Anzeigeneinheit 20 während eines selektiven Wiedergabeprozesses illustriert. Bei der beispielhaften Anzeige in 16 werden desweiteren eine Lesezeichentaste Ty und eine Dateitaste Sj auf der Anzeigeneinheit 20 zusätzlich zur beispielhaften Anzeige in den 9 bis 11 angezeigt. 16 Figure 13 is a view showing another exemplary display on the display unit 20 during a selective rendering process. In the exemplary display in FIG 16 Furthermore, a bookmark key Ty and a file key Sj on the display unit 20 in addition to the exemplary display in the 9 to 11 displayed.
Wie in der beispielhaften Anzeige in den 9 bis 11 illustriert, betätigt in einem Zustand, wenn zwei Lesezeichenleisten SL1 und SL2 auf der Zeitachse eines Graphen einer Wellenform WL angezeigt werden und zwei Vorschaubilder SV3 und SV9 auf der Vorschau-Anzeigenfläche Sk aufgelistet sind, der Anwender die Lesezeichentaste Ty unter Verwendung der Bedieneinheit 4.As in the exemplary display in the 9 to 11 illustrated, operated in a state when two bookmark bars SL1 and SL2 are displayed on the time axis of a graph of a waveform WL, and two thumbnail images SV3 and SV9 are listed on the preview display area Sk the user is the bookmark key Ty using the control unit 4 ,
Dies ermöglicht das Bezeichnen einer beliebigen Position auf der Zeitachse des Graphen der Wellenform WL oder einer beliebigen Position auf dem Suchbalken Tf durch die Bedieneinheit 4. In diesem Zustand bezeichnet der Anwender die Position eines Zeitpunkts t6, beispielsweise auf der Zeitachse des Graphen der Wellenform WL unter Verwendung der Bedieneinheit 4.This allows designating any position on the time axis of the graph of the waveform WL or any position on the search bar Tf by the operation unit 4 , In this state, the user designates the position of a time t6, for example, on the time axis of the graph of the waveform WL using the operation unit 4 ,
In diesem Fall wählt die Steuereinheit 10 Bilddaten v6 eines Einzelbildes entsprechend der Position auf der Zeitachse, die durch den Anwender bezeichnet worden ist, aus den Bilddaten einer Mehrzahl von Einzelbildern aus. Weiterhin erzeugt die Steuereinheit 10 Lesezeichendaten, welche die Bilddaten v6 anzeigen, und charakteristische Bilddaten entsprechend den Lesezeichendaten. Weiterhin zeigt die Steuereinheit 10 eine neue Lesezeichenleiste SL3 an der Position des Zeitpunkts t6 auf der Zeitachse des Graphen der Wellenform WL an. Weiterhin zeigt die Steuereinheit 10 ein neues Vorschaubild SV6 auf der Vorschau-Anzeigenfläche Sk an, basierend auf den erzeugten charakteristischen Bilddaten.In this case, the control unit selects 10 Image data v6 of one frame corresponding to the position on the time axis designated by the user is selected from the image data of a plurality of frames. Furthermore, the control unit generates 10 Bookmark data indicating the image data v6 and characteristic image data corresponding to the bookmark data. Furthermore, the control unit shows 10 a new bookmark bar SL3 at the position of the time t6 on the time axis of the graph of the waveform WL. Furthermore, the control unit shows 10 a new preview image SV6 on the preview ad area Skan based on the generated characteristic image data.
In diesem Zustand betätigt der Anwender die Dateitaste Sj unter Verwendung der Bedieneinheit 4 und somit erzeugt die Steuereinheit 10 eine Bewegtbilddatei, die weiter neu erzeugte Lesezeichendaten und charakteristische Bilddaten enthält, und speichert dann die erzeugte Bewegtbilddatei in der Speichereinheit 40.In this state, the user operates the file key Sj using the operation unit 4 and thus generates the control unit 10 a moving picture file containing further newly generated bookmark data and characteristic picture data, and then stores the generated moving picture file in the memory unit 40 ,
Wie oben beschrieben, erzeugt im vorliegenden Beispiel die Steuereinheit 10 Lesezeichendaten und charakteristische Bilddaten, basierend auf Anwenderbetätigungen auf der Bedieneinheit 4. Dies ermöglicht dem Anwender, unmittelbar und leicht nach gewünschten Bildern zu suchen, unabhängig vom Zustand des Subjekts W.As described above, in the present example, the control unit generates 10 Bookmark data and characteristic image data based on user operations on the operation unit 4 , This allows the user to search immediately and easily for desired images, regardless of the state of the subject W.
(4) Entsprechung zwischen entsprechenden Komponenten in Ansprüchen und entsprechenden Einheiten in Ausführungsformen(4) Correspondence between corresponding components in claims and corresponding units in embodiments
Nachfolgend werden die beschriebenen Beispiele einer Beziehung zwischen entsprechenden Komponenten in den Ansprüchen und entsprechenden Einheiten in den Ausführungsformen beschrieben, aber die vorliegende Erfindung soll nicht durch die nachfolgenden Beispiele beschränkt sein.Hereinafter, the described examples of a relationship between respective components in the claims and corresponding units will be described in the embodiments, but the present invention should not be limited by the following examples.
In den vorstehenden Ausführungsformen sind die Subjekte W ein Beispiel eines Objekts, die Bilddaten v1 bis v10 sind ein Beispiel der ersten Bilddaten einer Mehrzahl von Einzelbildern, die charakteristischen Bilddaten sv3 und sv9 sind ein Beispiel von zweiten Bilddaten einer Mehrzahl von Einzelbildern, und die Bilder V1 bis V10 sind ein Beispiel von ersten Bildern einer Mehrzahl von Einzelbildern.In the above embodiments, the subjects W are an example of an object, the image data v1 to v10 are an example of the first image data of a plurality of frames, the characteristic image data sv3 and sv9 are an example of second image data of a plurality of frames, and the images V1 to V10 are an example of first pictures of a plurality of frames.
Weiterhin ist die Bildbearbeitungsvorrichtung 1 ein Beispiel einer Bildverarbeitungsvorrichtung, sind die Evaluierungswerte i1 bis i10 ein Beispiel einer Mehrzahl von Evaluierungswerten, ist die Speichereinheit 40 ein Beispiel einer Speichereinheit, ist die Bildanzeigefläche Sa ein Beispiel einer ersten Anzeigefläche, ist die Vorschau-Anzeigenfläche Sk ein Beispiel einer zweiten Anzeigefläche und ist die Anzeigeneinheit 20 ein Beispiel einer Anzeigeneinheit.Furthermore, the image processing apparatus is 1 an example of an image processing apparatus, the evaluation values i1 to i10 are an example of a plurality of evaluation values, is the storage unit 40 an example of a storage unit, if the image display area Sa is an example of a first display area, the preview display area Sk is an example of a second display area and is the display unit 20 an example of a display unit.
Weiterhin sind die Vorschaubilder SV3, SV6 und SV9 ein Beispiel von zweiten Bildern, ist die Steuereinheit 10 ein Beispiel einer Steuereinheit, ist die Bedieneinheit 4 ein Beispiel einer Bedieneinheit, ist die Wellenformanzeigefläche Sb ein Beispiel einer dritten Anzeigefläche, ist die Wellenform WL ein Beispiel einer Wellenform und sind die Lesezeichenleisten SL1, SL2 und SL3 ein Beispiel für Indikatoren.Further, the preview images SV3, SV6 and SV9 are an example of second images, is the control unit 10 an example of a control unit is the operating unit 4 As an example of an operation unit, the waveform display area Sb is an example of a third display area, the waveform WL is an example of a waveform, and the bookmark bars SL1, SL2, and SL3 are an example of indicators.
Weiterhin sind die Sensoren 6 und 8 und die Wellenformsammelvorrichtung 7 ein Beispiel einer Detektionsvorrichtung, ist die Auswahlobergrenzenanzahl ein Beispiel einer vorbestimmten Anzahl, sind die Lesezeichendaten bd1 und bd2 ein Beispiel von Daten, die ausgewählte erste Bilddaten anzeigen, sind die Bewegtbilddateien FA, FB, FC und FD ein Beispiel einer Bewegtbilddatei und ist die Steuereinheit 10 ein Beispiel einer Bearbeitungsvorrichtung.Furthermore, the sensors 6 and 8th and the waveform collecting device 7 an example of a detection device, the selection upper limit number is an example of a predetermined number, the bookmark data bd1 and bd2 are an example of data indicating selected first image data, the moving picture files FA, FB, FC and FD are an example of a moving picture file and is the control unit 10 an example of a processing device.
Als entsprechende Komponenten in den Ansprüchen ist es auch möglich, andere verschiedene Typen von Komponenten mit den Strukturen oder Funktionen, die in den Ansprüchen definiert sind, einzusetzen.As corresponding components in the claims, it is also possible to use other different types of components having the structures or functions defined in the claims.
Die vorliegende Erfindung kann effektiv auf verschiedene Typen von Bildprozessen angewendet werden.The present invention can be effectively applied to various types of image processes.
ZITATE ENTHALTEN IN DER BESCHREIBUNG QUOTES INCLUDE IN THE DESCRIPTION
Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of the documents listed by the applicant has been generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.
Zitierte PatentliteraturCited patent literature
-
JP 2009-141709 [0002, 0003] JP 2009-141709 [0002, 0003]
