WO2011111371A1 - 電子ズーム装置、電子ズーム方法、及びプログラム - Google Patents

電子ズーム装置、電子ズーム方法、及びプログラム Download PDF

Info

Publication number
WO2011111371A1
WO2011111371A1 PCT/JP2011/001341 JP2011001341W WO2011111371A1 WO 2011111371 A1 WO2011111371 A1 WO 2011111371A1 JP 2011001341 W JP2011001341 W JP 2011001341W WO 2011111371 A1 WO2011111371 A1 WO 2011111371A1
Authority
WO
WIPO (PCT)
Prior art keywords
zoom
center position
image
display screen
unit
Prior art date
Application number
PCT/JP2011/001341
Other languages
English (en)
French (fr)
Inventor
大岳　直人
Original Assignee
パナソニック株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by パナソニック株式会社 filed Critical パナソニック株式会社
Priority to US13/583,196 priority Critical patent/US20130235086A1/en
Priority to EP11753036A priority patent/EP2547089A1/en
Publication of WO2011111371A1 publication Critical patent/WO2011111371A1/ja

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body

Definitions

  • the present invention relates to an electronic zoom device, an electronic zoom method, and a program.
  • Photographer devices such as digital cameras often have a zoom function.
  • a general zoom function is an optical zoom that changes the size of a shooting area by adjusting the focal length of an optical lens, but is called digital zoom or electronic zoom for a device capable of digital processing such as a digital camera.
  • functions are installed.
  • an image obtained by shooting can be electronically processed, and an area in the image can be extracted and displayed in an enlarged or reduced display. Further, in addition to the enlargement / reduction process to the center of the screen as in the optical zoom, the enlargement / reduction process to an arbitrary position can be performed.
  • Such an electronic zoom is used when, for example, displaying an image of a shooting area on a display screen when a digital camera is shooting, and when reproducing and displaying the image after shooting on an arbitrary display device. Further, the electronic zoom can be used in various display devices such as a photo frame having a display area enlargement function in addition to a photographing device such as a digital camera.
  • Patent Document 1 and Patent Document 2 are known as conventional techniques related to electronic zoom.
  • Patent Document 1 discloses an electronic zoom that performs processing so as to automatically track a target subject even when the subject moves in a shootable region in a video camera or the like. Specifically, a motion vector is detected by comparing image feature amounts between a plurality of feeds, and electronic zoom processing and display area movement are automatically performed so as to follow the movement and size of the subject.
  • Patent Document 2 discloses that when a moving subject is monitored by a television camera, it automatically follows the movement of the subject and always displays the subject in an enlarged manner at the center of the screen. Specifically, the imageable range is divided into a number of areas, and changes in brightness levels and color characteristics are detected in multiple fields for each area, and the zoom center position and zoom magnification are determined according to the area where the change is detected. Adjust automatically.
  • the present invention provides an electronic zoom device, an electronic zoom method, and a program capable of switching an object to be zoomed with good operability even when a plurality of objects / regions are recognized in an image to be processed. For the purpose.
  • An electronic zoom device includes an image display unit that displays an image on a display screen, an object detection unit that detects a plurality of objects in the image displayed on the display screen, and an object detected by the object detection unit.
  • a reference position detection unit that detects a reference position
  • a rate calculation unit that calculates a rate parameter that changes according to the size of the object detected by the object detection unit with respect to the display screen
  • the rate calculation unit A zoom center position setting unit that sets, as a zoom center position, a reference position of a first object whose ratio parameter satisfies a predetermined reference, and a zoom process for an image displayed on the display screen with the zoom center position as a center.
  • a zoom processing unit wherein when the ratio parameter of the first object no longer satisfies the predetermined criterion, the zoom center position setting unit The center position, the reference position of the first object, the proportional parameter is changed to the reference position of the second object which satisfies a predetermined criterion.
  • this electronic zoom device even when a plurality of objects are recognized in the processing target image, it is possible to switch the zoom processing target object with good operability. Therefore, natural zoom processing can be performed when the user looks at the display screen.
  • the ratio calculation unit calculates a ratio of the image of the object detected by the object detection unit with respect to the entire display screen as the ratio parameter
  • the zoom center position setting unit The reference position of the first object in which the ratio of the image of the object calculated by the ratio calculation unit is less than a predetermined ratio is set as the zoom center position, and the ratio of the image of the first object is the When the predetermined ratio or more is reached, the zoom center position is changed from the reference position of the first object to the reference position of the second object whose image ratio is less than the predetermined ratio.
  • the zoom processing target can be transferred to an appropriate object according to the ratio of the display size of each object to the entire display screen.
  • the second object is the largest of the objects whose image ratio is less than the predetermined ratio.
  • the zoom processing target can be transferred to an appropriate object according to the size of the object as the display size of each object changes. Therefore, natural zoom processing can be performed without greatly changing the screen display.
  • the reference position of the second object is closest to the center position of the display screen.
  • the zoom processing target can be transferred to an object with a short distance from the center position of the display screen as the display size of each object changes during zoom processing. Therefore, natural zoom processing can be performed without greatly changing the screen display.
  • the reference position of the second object is located in the region of the first object.
  • the zoom processing target can be transferred to an object having a short distance from the reference position of the first object as the display size of each object changes. Therefore, natural zoom processing can be performed without greatly changing the screen display.
  • the zoom center position setting unit changes to an undetected state in which no object is detected by the object detection unit, the zoom center position is prohibited to change until the widest angle state is reached. To do.
  • the image display unit displays that the zoom center position has been changed when the zoom center position is changed by the zoom center position setting unit.
  • the object to be zoomed can be reliably grasped from the visible information displayed.
  • the electronic zoom method of the present invention is an electronic zoom method for an electronic zoom device that displays an image on a display screen, the step of detecting a plurality of objects in the image displayed on the display screen, and the detected A step of detecting a reference position of the object, a step of calculating a ratio parameter that changes according to a size of the detected object with respect to the display screen, and a first object in which the calculated ratio parameter satisfies a predetermined criterion Setting a reference position of the first object as a zoom center position, performing a zoom process on an image displayed on the display screen with the zoom center position as a center, and the ratio parameter of the first object being the predetermined parameter When the reference is no longer satisfied, the zoom center position is changed from the reference position of the first object, and the ratio parameter satisfies the predetermined reference. It has a step of changing plus the reference position of the second object, the.
  • this electronic zoom method even when a plurality of objects are recognized in the processing target image, it is possible to switch the zoom processing target object with good operability. Therefore, natural zoom processing can be performed when the user looks at the display screen.
  • the program of the present invention is a program for causing a computer to execute each step of the electronic zoom method.
  • FIG. 1 is a block diagram illustrating a main configuration example of a digital camera according to an embodiment of the present invention.
  • 6 is a flowchart showing an example of zoom center position control by the digital camera of the embodiment of the present invention.
  • FIGS. 8A to 8H are diagrams showing display examples when the zoom center position control shown in FIG. 2 is performed.
  • 7 is a flowchart showing a first modification of zoom center position control by the digital camera of the embodiment of the present invention.
  • FIGS. 4A to 4D are diagrams showing display examples when the zoom center position control shown in FIG. 4 is performed.
  • 9 is a flowchart showing a second modification of zoom center position control by the digital camera of the embodiment of the present invention.
  • FIGS. 6A to 6F are diagrams showing display examples when the zoom center position control shown in FIG. 6 is performed.
  • 10 is a flowchart showing a third modification of zoom center position control by the digital camera of the embodiment of the present invention.
  • FIGS. 8A to 8C are diagrams
  • a digital camera that captures an image
  • an image display device that reads image data obtained in advance from a recording medium such as a memory card, reproduces the image, and the like can be considered.
  • a digital camera is assumed as an example of the electronic zoom device.
  • FIG. 1 is a block diagram illustrating a main configuration example of a digital camera according to the present embodiment.
  • a digital camera 10 shown in FIG. 1 includes an image capturing unit 11, an image storage unit 12, an object detection unit 13, a reference position detection unit 14, a ratio calculation unit 15, a center position change unit 16, a zoom control unit 17, an operation unit 18, An image display unit 19 is provided.
  • the image photographing unit 11 includes an imaging device such as a CCD image sensor in order to photograph a predetermined photographing range including an arbitrary subject. An image obtained by shooting with this imaging device is output to the object detection unit 13 as moving image data composed of a still image such as a photograph or a set of images of a plurality of frames.
  • an imaging device such as a CCD image sensor in order to photograph a predetermined photographing range including an arbitrary subject.
  • An image obtained by shooting with this imaging device is output to the object detection unit 13 as moving image data composed of a still image such as a photograph or a set of images of a plurality of frames.
  • the image storage unit 12 includes a non-volatile storage device such as a memory card.
  • the image data acquired by the image capturing unit 11 and the image zoomed by the zoom control unit 17 are displayed as a still image or a moving image. As data.
  • the image display unit 19 is configured using a liquid crystal display device or the like.
  • the image display unit 19 is used for a preview display of an image to be captured and a playback display for the user to view the captured image.
  • the image data output from the image capturing unit 11 is subjected to zoom processing by the zoom control unit 17 and then input to the image display unit 19 to display the image in real time, thereby displaying a preview of the image to be captured. it can.
  • any image data that has been captured in advance and stored in the image storage unit 12 is read from the image storage unit 12, zoomed by the zoom control unit 17, and then input to the image display unit 19. Video can be played back and displayed.
  • the zoom control unit 17 provides an electronic zoom function of extracting a part from the processing target image and performing zoom processing by digital image processing. In the zoom process, at least one of enlargement display control (zoom-in) and reduction display control (zoom-out) is performed. That is, the zoom control unit 17 extracts from the image a range determined by the zoom magnification around the position (zoom center position) specified in the region of the image to be processed, and performs at least one of enlargement and reduction. Output. The zoom control unit 17 outputs the image after zoom processing to the image display unit 19 or the image storage unit 12.
  • the operation unit 18 includes a plurality of operation buttons for receiving input operations from the user.
  • the operation unit 18 includes, for example, a zoom-in button, a zoom-out button, a shooting button, and the like (see FIG. 9).
  • the operation unit 18 outputs an instruction signal such as zoom in / zoom out to the zoom control unit 17 in accordance with the input operation.
  • the operation unit 18 may be a touch panel arranged so as to overlap the display screen of the image display unit 19.
  • the object detection unit 13 recognizes various objects included in the image by analyzing the contents of the image data from the image capturing unit 11 or the image storage unit 12, and uses the information of each object as a reference. Output to the position detector 14. That is, a plurality of objects in the image displayed by the image display unit 19 are detected.
  • a plurality of objects includes the meaning of a plurality of regions of one object.
  • the object detection function can be realized using various known image recognition techniques.
  • the object detection unit 13 can recognize the entire body area of each person, the face area of each person, and the like as independent objects. Further, when a table with various kinds of dishes is included as an object in the image, the object detection unit 13 recognizes an area including the entire dish as one object, or only a specific dish. It can also be recognized as one object.
  • the object detection unit 13 outputs, to each of the detected one or more objects, region information representing the region of the object to the ratio calculation unit 15.
  • the area information includes information indicating the position and size of a predetermined area such as a rectangle surrounding the detected object.
  • the reference position detection unit 14 detects the reference position of each object detected by the object detection unit 13. For example, a position in the vicinity of the center of the object is detected as the reference position, such as the center position of the area surrounding the detected object and the center of gravity position of the detected object.
  • the ratio calculation unit 15 calculates a ratio parameter Px for each of the objects detected by the object detection unit 13.
  • the ratio parameter Px changes according to the size of the object detected by the object detection unit 13 with respect to the display screen.
  • the ratio parameter Px the display size (height or width direction) of the region surrounding each object displayed on the display screen with respect to the size (number of pixels in the height or width direction) of the entire display screen of the image display unit 19 The number of pixels) can be considered.
  • the ratio parameter Px is 0.85.
  • the zoom magnification from the zoom control unit 17 is also taken into consideration.
  • the ratio calculation unit 15 outputs the calculated ratio information to the center position changing unit 16.
  • the ratio parameter the ratio of the area of the object to the area of the entire display screen is also conceivable.
  • the ratio parameter Px may be a result of subtracting the display size of the object from the size of the entire display screen.
  • the center position changing unit 16 refers to the ratio parameter Px from the ratio calculating unit 15 for each of the plurality of objects detected by the object detecting unit 13, and performs an object (zoom target object) to be zoomed by the zoom control unit 17. ) Candidates (zoom target candidates). Then, the center position changing unit 16 determines a zoom target object from the zoom target candidates. Then, the center position changing unit 16 outputs the determined reference position of the zoom object to the zoom control unit 17 as a center position (zoom center position) when performing zoom processing. The zoom object is changed as the object moves or the zoom magnification changes.
  • the center position changing unit 16 sets the reference position of the object that satisfies the ratio parameter Px as a predetermined reference (for example, the ratio of the object size to the entire display screen is equal to or less than the predetermined ratio Pth) as the zoom center position. .
  • a predetermined reference for example, the ratio of the object size to the entire display screen is equal to or less than the predetermined ratio Pth
  • the predetermined ratio Pth is set to 0.9
  • the ratio parameter Px is 0.85
  • the predetermined ratio is smaller than the predetermined ratio, so that the predetermined standard is satisfied.
  • the center position changing unit 16 changes the zoom center position to the reference position of another object that satisfies the predetermined reference when the ratio parameter of the object having the reference position set as the zoom central position no longer satisfies the predetermined reference. change.
  • FIG. 2 is a flowchart illustrating an example of zoom center position control by the digital camera 10.
  • the control shown in FIG. 2 is executed when an image output in real time from the image photographing unit 11 is displayed on the image display unit 19 or when an image read from the image storage unit 12 is displayed on the image display unit 19. Is done.
  • step S11 the zoom control unit 17 initializes the zoom center position.
  • the center position on the display screen of the image display unit 19 is determined as the zoom center position.
  • the zoom magnification is set to, for example, 1.
  • the image output from the image capturing unit 11 or the image read from the image storage unit 12 is displayed on the screen of the image display unit 19 without being subjected to zoom processing.
  • step S ⁇ b> 12 the object detection unit 13 is an image input from the image capturing unit 11 or the image storage unit 12 to the object detection unit 13, and selects one object from the images displayed on the display screen of the image display unit 19. Identify whether or not more than one were detected. When an object is detected, the process proceeds to the next step S13.
  • step S13 the object detection unit 13 refers to information on the detected object. Then, it is identified whether or not a plurality of objects are detected. If a plurality of objects are detected, the process proceeds to step S14 in order to identify the zoom target. On the other hand, if only one object is detected, that object is determined as a zoom target and the process proceeds to step S16.
  • the center position changing unit 16 identifies whether or not a condition for determining a zoom target candidate is satisfied for each of the plurality of objects detected by the object detecting unit 13. For example, it is identified whether or not the ratio parameter Px output from the ratio calculator 15 is equal to or less than the threshold value Pth. Then, an object satisfying the condition of “Px ⁇ Pth” is determined as a zoom target candidate. For example, when the threshold value Pth is 0.8, only an object whose display size on the screen is 80% or less with respect to the size of the entire display screen satisfies the zoom target candidate condition, and the display size is 80%. The above objects are excluded from the zoom target candidates.
  • step S15 the center position changing unit 16 determines a zoom target object from the determined zoom target candidates. If there is only one object to be zoomed, that candidate is determined as the zoom object. Further, when there are a plurality of zoom target candidates, it is preferable to determine an object having the largest ratio parameter Px as a zoom target. Thereby, since the ratio of the object having the largest Px in the display screen is larger than that of the other objects, the display screen can be changed more smoothly during the zoom process. Furthermore, when there are a plurality of zoom target candidates having the same display size, an object whose reference position is closer to the center of the display screen is preferentially determined as the zoom target among the zoom target candidates. good. Thereby, since the change of the zoom center position can be minimized, the change of the display screen during zoom processing can be made smoother.
  • step S16 the reference position detection unit 14 calculates the reference position of the zoom target determined by the center position changing unit 16.
  • step S17 the center position changing unit 16 determines the reference position calculated by the reference position detecting unit 14 as a new zoom center position. Then, this zoom center position information is given to the zoom control unit 17.
  • the zoom control unit 17 zooms the image according to the designated zoom magnification with the zoom center position as the center.
  • the zoom control unit 17 gives the processed image to the image display unit 19.
  • step S18 the center position changing unit 16 identifies whether or not the zoom target candidate has changed. Specifically, when a new object is added to a candidate for zooming with a change in zoom magnification or the like, or an object of an existing candidate for zooming no longer satisfies a predetermined condition, the candidate for zooming changes. . If there is a change in the zoom target candidate, the process returns to step S13. If there is no change, the process of step S18 is performed again.
  • the zoom center position control shown in FIG. 2 it is possible to switch the zoom target with good operability even when a plurality of objects are recognized in the processing target image. That is, even when there are a plurality of zoom target candidates, it is possible to automatically follow a specific object as a zoom target without receiving an instruction via the operation unit 18.
  • FIG. 3 is a diagram showing a display example when the zoom center position control shown in FIG. 2 is performed.
  • FIG. 3A shows a state before the zoom center position control is started, and the entire image output from the image photographing unit 11 appears on the display screen 31.
  • FIG. 3A one person is included as a subject.
  • the reference position of the entire image displayed by the image display unit 19 is the zoom center position O.
  • the object detection unit 13 performs image analysis, and the objects 33 and 34 are detected as shown in FIG. 3 (B).
  • FIG. 3B an object 33 corresponding to the whole body of one person 32 is detected as one object, and an object 34 corresponding to the face area of the person 32 is detected as one object.
  • a rectangular frame is drawn by the image display unit 19 so as to surround each detected object.
  • a rectangle other than a rectangle may be drawn, and a frame may not be displayed.
  • the object 33 representing the entire body of the person 32 and the object 34 representing the face area are candidates for zooming, respectively, and an object with a large display size, that is, the body of the person 32.
  • An object 33 representing the whole is designated as a zoom target.
  • the vicinity of the center of the area of the zoom object is detected as a reference position, and this position is designated as a new zoom center position O.
  • zoom processing is started.
  • the zoom magnification increases, and the region including the object 33 that is the zoom target is enlarged and displayed on the display screen 31 as shown in FIGS. Since the reference position of the object 33 that is the zoom target is the zoom center position O, the enlarged object 33 is displayed at the center of the display screen 31 as shown in FIG.
  • the object 33 that is the zoom target is enlarged to the same size as the entire display screen 31, and it is considered that the condition of Px ⁇ Pth is not satisfied.
  • the zoom target does not satisfy the zoom target candidate condition, and an object satisfying the condition among the other zoom target candidates is selected as the zoom target.
  • the object 34 representing the face area that satisfies the zoom target candidate condition is selected as the next zoom target object.
  • the reference position of the object 34 representing the face region is detected, and this position is designated as a new zoom center position O.
  • the zoom object is changed to the object 34 and the zoom center position O is also changed according to the change of the situation.
  • the zoom-in button operation is further repeated, the zoom-in is performed around the new zoom center position O. Therefore, the vicinity of the center of the object 34 that is the zoom object changed as shown in FIGS. 3G and 3H moves to the center of the display screen 31 and is enlarged and displayed.
  • an object suitable for display can be automatically selected without the user performing a selection operation on any one of the objects. Operability is improved.
  • the zoom target candidate changes, the zoom target object and the zoom center position are changed as necessary.
  • the object 34 is detected as a zoom target in FIG. 3 (G), and the zoom target in FIG. 3 (D).
  • the object 33 is detected as an object.
  • the zoom target object may be changed to a more suitable object in accordance with the change in the situation.
  • the criterion is whether or not the ratio parameter is the maximum among objects having a predetermined ratio or less.
  • FIG. 4 is a flowchart showing Modification Example 1 of zoom center position control by the digital camera 10.
  • the same steps as those shown in FIG. 2 are denoted by the same reference numerals.
  • the content of step S14B is different from FIG.
  • step S14B the center position changing unit 16 determines a zoom target candidate from the objects in the area of the zoom target that has already been determined (selected).
  • the reference position of the zoom target candidate is located within the area of the zoom target that has already been determined for the object.
  • FIG. 5 is a diagram showing a display example when the zoom center position control shown in FIG. 4 is performed.
  • FIG. 5A shows a state before the zoom center position control is started, and the entire image output from the image photographing unit 11 appears on the display screen 51.
  • two persons 52 and 53 are included as subjects.
  • an object 54 corresponding to the entire body of the right person 52, an object 55 corresponding to the face area of the right person 52, and a face area of the left person 53 are equivalent.
  • an object 54 corresponding to the entire body of the person 52, an object 55 corresponding to the face area of the person 52, and an object 56 corresponding to the face area of the person 53 are displayed.
  • These zoom target candidates for example, an object 54 corresponding to the entire body of the person 52 that is the object with the largest display size is selected as the zoom target object.
  • the operation unit 18 When the operation unit 18 performs a zoom-in operation, the reference position of the object 54 corresponding to the entire body of the person 52 is designated as the zoom center position O as shown in FIG.
  • the object 54 is enlarged and displayed as the center.
  • the object 56 corresponding to the face area of the person 53 is located outside the object 54 corresponding to the whole body area of the person 52, and thus is not a zoom target candidate. Therefore, when the control shown in FIG. 4 is performed, the zoom process is not performed with the object 56 corresponding to the face area of the person 53 as the zoom center position O as shown in FIG.
  • the object 54 corresponding to the face area of the person 52 is not the object 56 corresponding to the face area of the person 53 but the object 56 corresponding to the face area of the person 53.
  • 55 reference positions are designated as zoom center positions. Therefore, the object to be followed during zoom processing can be switched without being unnaturally viewed from the user, such as when the position of the displayed object suddenly changes greatly.
  • FIG. 6 is a flowchart showing a second modification of the zoom center position control by the digital camera 10.
  • the same steps as those shown in FIG. 2 are denoted by the same reference numerals.
  • the control shown in FIG. 6 is different from FIG. 2 in that steps S21 and S22 are added.
  • step S21 after step S17, the object detection unit 13 identifies whether no object is detected in the image displayed by the image display unit 19. If one or more objects are being detected, the process proceeds to step S18, and if there is no detected object, the process proceeds to step S22.
  • step S22 the zoom control unit 17 identifies whether the image displayed by the image display unit 19 is an image captured by the image capturing unit 11 in the widest angle state (maximum wide angle state). If so, the process proceeds to step S11. If not, the process proceeds to step S21.
  • the center position changing unit 16 prohibits the change of the zoom center position until the object that has been determined as the zoom target is not detected by the object detecting unit 13 until the object is zoomed out to the widest angle state. Will do. Thereby, each object can be zoom-processed in a state where it looks more natural to the user. Note that when the widest angle state is reached, the processing is resumed from step S11, and the zoom center position O is also initialized.
  • FIG. 7 is a diagram showing a display example when the zoom center position control shown in FIG. 6 is performed.
  • a preview is displayed on the display screen 71 as shown in FIG. 7A, and the person 72 is zoomed in as a zoom target as shown in FIG. 7B.
  • the object detection unit 13 does not detect the object 73 corresponding to the entire body of the person 72 that has been the zoom target until then for some reason. It is assumed that
  • the zoom center position O is returned to the initial state in a state where the zoom object is not detected, that is, if the zoom center position O is suddenly returned to the reference position of the entire image captured by the image capturing unit 11, the zoom-in is continued.
  • the state changes to a state in which an enlarged image centered on the zoom center position O in the initial state is displayed. That is, even when the user of the digital camera 10 is paying attention to the person 72 who was the zoom object, the other object is suddenly enlarged and displayed, which may seem unnatural. .
  • the zoom center position O is not changed to the reference position of the entire image photographed by the image photographing unit 11, but is maintained at the reference position of the zoom object that is no longer detected. .
  • the zoom magnification is changed and the zoom center position O is enlarged and displayed as the center as shown in FIG. 7F, but the zoom center position O is not changed until the widest angle state is reached.
  • the zoom center position O is changed and initialized as shown in FIG.
  • FIG. 8 is a flowchart showing a third modification of the zoom center position control by the digital camera 10.
  • the same steps as those shown in FIG. 2 are denoted by the same reference numerals.
  • the control shown in FIG. 8 is different from FIG. 2 in that step S31 is added after step S17.
  • the image display unit 19 displays a frame surrounding the determined zoom object, a zoom-in button, a zoom-out button, a movement button, and the like in response to a command from the zoom control unit 17.
  • the shape of the frame may be, for example, a rectangle, an ellipse, or other shapes.
  • the zoom-in button is a button for increasing the zoom magnification by a predetermined magnification.
  • the zoom-out button is a button for decreasing the zoom magnification by a predetermined magnification. Also, changing the display of the frame surrounding the zoom object corresponds to displaying that the zoom center position has been changed.
  • FIG. 9 is a diagram illustrating a display example when the zoom center position control illustrated in FIG. 8 is performed.
  • a part of the operation unit 18 is arranged as a touch panel on the display screen 91 of the image display unit 19.
  • the user can perform an input operation by operating a button appearing on the display screen 91.
  • FIG. 9A a zoom-in button 95 and a zoom-out button 96 are displayed on the display screen 91.
  • a move button 97 is displayed on the display screen 91 in addition to the zoom-in button 95 and the zoom-out button 96.
  • a move button 98 is displayed on the display screen 91 in addition to the zoom-in button 95, the zoom-out button 96, and the move button 97.
  • frames 93 and 94 such as rectangles surrounding each object are displayed on the display screen 91 as visible information.
  • the zoom control unit 17 switches the display form (for example, icon design) of the zoom-in button 95 and the zoom button 96 so that the user can select each object surrounded by the frames 93 and 94 as a zoom target.
  • a move button 97 is also displayed on the display screen 91.
  • the movement button 97 has a function of giving an instruction to move at a stretch to the zoom object determined first.
  • information on the reference position and zoom magnification of the zoom object determined first is stored in the image storage unit 12.
  • the display size of the person 92 is larger than a predetermined size, and the zoom target candidate condition is not satisfied. Therefore, an object corresponding to the face area of the person 92 is determined as the zoom target object. .
  • a move button 98 is displayed on the display screen 91.
  • the movement button 98 has a function for giving an instruction to return to the display of the zoom object (here, an object corresponding to the whole body of the person 92) determined immediately before.
  • information on the reference position and zoom magnification of the zoom object selected immediately before is stored in the image storage unit 12.
  • an object corresponding to the entire body of the person 92 is determined as a zoom target, and the display is switched to the display of FIG.
  • the frame may not be displayed when the object is known without the frame.
  • the user can easily recognize the zoom object and the switching of the zoom object.
  • the present invention is useful for an electronic zoom or the like that can switch objects to be zoomed with good operability even when a plurality of objects are recognized in the image to be processed.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Indication In Cameras, And Counting Of Exposures (AREA)

Abstract

　処理対象の画像内で複数の物体を認識した場合であっても、ズーム処理対象の物体を操作性良く切り替えることが可能な電子ズーム装置を提供する。　本電子ズーム装置は、表示画面に画像を表示する画像表示部１９と、表示画面に表示される画像内の物体を複数検出する物体検出部１３と、検出された物体の基準位置を検出する基準位置検出部１４と、検出された物体の表示画面に対する大きさに応じて変化する割合パラメータを算出する割合算出部１５と、算出された割合パラメータが所定基準を満たす第１の物体の基準位置を、ズーム中心位置Ｏとして設定する中心位置変更部１６と、ズーム中心位置を中心として、表示画面に表示される画像のズーム処理を行うズーム制御部１７と、を備える。そして、中心位置変更部１６は、第１の物体の割合パラメータが所定基準を満たさなくなったとき、ズーム中心位置を、第１の物体の基準位置から、割合パラメータが所定基準を満たす第２の物体の基準位置へ変更する。

Description

電子ズーム装置、電子ズーム方法、及びプログラム
　本発明は、電子ズーム装置、電子ズーム方法、及びプログラムに関する。
　デジタルカメラ等の撮影装置には、ズーム機能が備わっている場合が多い。一般的なズーム機能は、光学レンズの焦点距離を調整して撮影する領域の大きさを変更する光学ズームであるが、デジタルカメラのようにデジタル処理が可能な装置にはデジタルズームあるいは電子ズームと呼ばれる機能が搭載されている場合も多い。電子ズームでは、撮影により得られた画像を電子的に処理し、その画像の中の領域を抽出して拡大表示したり縮小表示したりすることができる。また、光学ズームのように、画面の中心への拡大縮小処理以外にも、任意位置への拡大縮小処理ができる。
　このような電子ズームは、デジタルカメラの撮影時に、撮影領域の画像を表示画面にプレビュー表示する際、撮影後の画像を任意の表示装置で再生表示する際、などに利用される。また、電子ズームは、デジタルカメラのような撮影装置以外でも表示領域拡大機能をもつフォトフレームのような様々な表示装置で利用できる。
　電子ズームに関する従来技術としては、例えば特許文献１および特許文献２に開示された技術が知られている。
　特許文献１では、ビデオカメラ等の撮影装置において、撮影可能な領域の中で被写体が動く場合であっても、目的の被写体を自動的に追尾するように処理する電子ズームについて開示されている。具体的には、複数フィード間の画像の特徴量を比較して動きベクトルを検出し、被写体の動きと大きさに追従するように、電子ズーム処理と表示領域の移動とを自動的に行う。
　特許文献２では、移動する被写体をテレビジョンカメラで監視する場合に、被写体の動きに自動的に追従し、被写体を常に画面の中央で拡大表示することが開示されている。具体的には、撮影可能な範囲を多数の領域に分割し、領域毎に輝度レベルや色の特徴の変化を複数フィールドについて検出し、変化を検出した領域に応じてズームの中心位置やズーム倍率を自動的に調整する。
日本国特開平６－３５０８９７号公報 日本国特開平１１－７５１０３号公報
　ところで、近年では画像内に含まれる様々な物体を認識する技術が急速に進歩している。これにより、画像内に含まれる人物等の物体を認識するだけでなく、人物の顔の領域を認識したり、複数の人物の顔の違いを区別したり、更に顔の細かい部位についても認識したりすることが可能になりつつある。
　従って、物体認識の技術と電子ズームとを組み合わせることも可能である。例えば、静止画を表示する場合に、この静止画の中で特定の人物が存在する領域を検出し、この領域を拡大表示制御（ズームイン）して、拡大された画像を表示画面の中央に表示することが可能である。
　しかしながら、特許文献１および２に開示された従来技術では、追跡すべき物体が１つだけの場合を想定しており、複数の物体を追跡することはできない。従って、静止画の中で同時に複数の物体が認識された場合には、追跡対象の物体を特定するためにユーザが何らかの入力操作を行っていずれか１つの物体を選択せざるを得ず、操作性が不十分であった。
　本発明は、処理対象の画像内で複数の物体／領域を認識した場合であっても、ズーム処理対象の物体を操作性良く切り替えることが可能な電子ズーム装置、電子ズーム方法、プログラムを提供することを目的とする。
　本発明の電子ズーム装置は、表示画面に画像を表示する画像表示部と、前記表示画面に表示される画像内の物体を複数検出する物体検出部と、前記物体検出部により検出された物体の基準位置を検出する基準位置検出部と、前記物体検出部により検出された物体の前記表示画面に対する大きさに応じて変化する割合パラメータを算出する割合算出部と、前記割合算出部により算出された割合パラメータが所定基準を満たす第１の物体の基準位置を、ズーム中心位置として設定するズーム中心位置設定部と、前記ズーム中心位置を中心として、前記表示画面に表示される画像のズーム処理を行うズーム処理部と、を備え、前記ズーム中心位置設定部が、前記第１の物体の前記割合パラメータが前記所定基準を満たさなくなったとき、前記ズーム中心位置を、前記第１の物体の基準位置から、前記割合パラメータが前記所定基準を満たす第２の物体の基準位置へ変更する。
　この電子ズーム装置によれば、処理対象の画像内で複数の物体を認識した場合であっても、ズーム処理対象の物体を操作性良く切り替えることが可能である。したがって、ユーザが表示画面を見たときに、自然なズーム処理を行うことができる。
　また、本発明の電子ズーム装置は、前記割合算出部が、前記表示画面全体に対する、前記物体検出部により検出された物体の画像の割合を前記割合パラメータとして算出し、前記ズーム中心位置設定部が、前記割合算出部により算出された前記物体の画像の割合が所定割合未満である前記第１の物体の基準位置を、前記ズーム中心位置として設定し、前記第１の物体の画像の割合が前記所定割合以上となったとき、前記ズーム中心位置を、前記第１の物体の基準位置から、画像の割合が前記所定割合未満である前記第２の物体の基準位置へ変更する。
　この電子ズーム装置によれば、ズーム処理時に、各物体の表示サイズの表示画面全体に対する割合に応じて、適切な物体へズーム処理対象を移行することができる。
　また、本発明の電子ズーム装置は、前記第２の物体が、画像の割合が前記所定割合未満である物体の中で最大である。
　この電子ズーム装置によれば、ズーム処理時に、各物体の表示サイズの変化に伴って、物体の大きさに応じた適切な物体へズーム処理対象を移行することができる。したがって、画面表示が大きく変化することなく、自然なズーム処理を行うことができる。
　また、本発明の電子ズーム装置は、前記第２の物体の基準位置が前記表示画面の中心位置に最も近い。
　この電子ズーム装置によれば、ズーム処理時に、各物体の表示サイズの変化に伴って、表示画面中央位置からの距離が短い物体へズーム処理対象を移行することができる。したがって、画面表示が大きく変化することなく、自然なズーム処理を行うことができる。
　また、本発明の電子ズーム装置は、前記第２の物体の基準位置が前記第１の物体の領域内に位置する。
　この電子ズーム装置によれば、ズーム処理時に、各物体の表示サイズの変化に伴って、第１の物体の基準位置との距離が短い物体へズーム処理対象を移行することができる。したがって、画面表示が大きく変化することなく、自然なズーム処理を行うことができる。
　また、本発明の電子ズーム装置は、前記ズーム中心位置設定部が、前記物体検出部により物体が検出されない未検出状態に変化した場合、最広角状態に達するまで、前記ズーム中心位置の変更を禁止する。
　この電子ズーム装置によれば、物体を検出できない状態になった場合であっても、ズーム中心位置が急に変更されることがなく、自然なズーム処理を行うことができる。
　また、本発明の電子ズーム装置は、前記画像表示部が、前記ズーム中心位置設定部により前記ズーム中心位置が変更された場合、前記ズーム中心位置が変更された旨を表示する。
　この電子ズーム装置によれば、表示される可視情報により、ズーム処理対象の物体を確実に把握できる。
　また、本発明の電子ズーム方法は、表示画面に画像を表示する電子ズーム装置の電子ズーム方法であって、前記表示画面に表示される画像内の物体を複数検出するステップと、前記検出された物体の基準位置を検出するステップと、前記検出された物体の前記表示画面に対する大きさに応じて変化する割合パラメータを算出するステップと、前記算出された割合パラメータが所定基準を満たす第１の物体の基準位置を、ズーム中心位置として設定するステップと、前記ズーム中心位置を中心として、前記表示画面に表示される画像のズーム処理を行うステップと、前記第１の物体の前記割合パラメータが前記所定基準を満たさなくなったとき、前記ズーム中心位置を、前記第１の物体の基準位置から、前記割合パラメータが前記所定基準を満たす第２の物体の基準位置へ変更するステップと、を有する。
　この電子ズーム方法によれば、処理対象の画像内で複数の物体を認識した場合であっても、ズーム処理対象の物体を操作性良く切り替えることが可能である。したがって、ユーザが表示画面を見たときに、自然なズーム処理を行うことができる。
　また、本発明のプログラムは、上記電子ズーム方法の各ステップをコンピュータに実行させるためのプログラムである。
　このプログラムによれば、処理対象の画像内で複数の物体を認識した場合であっても、ズーム処理対象の物体を操作性良く切り替えることが可能である。したがって、ユーザが表示画面を見たときに、自然なズーム処理を行うことができる。
　本発明によれば、処理対象の画像内で複数の物体を認識した場合であっても、ズーム処理対象の物体を操作性良く切り替えることが可能である。
本発明の実施形態のデジタルカメラの主要な構成例を示すブロック図 本発明の実施形態のデジタルカメラによるズーム中心位置制御の一例を示すフローチャート （Ａ）～（Ｈ）図２に示したズーム中心位置制御を行った場合の表示例を示す図 本発明の実施形態のデジタルカメラによるズーム中心位置制御の変形例１を示すフローチャート （Ａ）～（Ｄ）図４に示したズーム中心位置制御を行った場合の表示例を示す図 本発明の実施形態のデジタルカメラによるズーム中心位置制御の変形例２を示すフローチャート （Ａ）～（Ｆ）図６に示したズーム中心位置制御を行った場合の表示例を示す図 本発明の実施形態のデジタルカメラによるズーム中心位置制御の変形例３を示すフローチャート （Ａ）～（Ｃ）図８に示したズーム中心位置制御を行った場合の表示例を示す図
　本発明の実施形態の電子ズーム装置、電子ズーム方法、プログラムについて、図面を参照しながら以下に説明する。
　本実施形態の電子ズーム装置としては、画像を撮影するデジタルカメラ、事前に撮影して得られた画像データをメモリカードなどの記録媒体から読み込んで再生し表示する画像表示装置、などが考えられる。ここでは、電子ズーム装置の一例として、デジタルカメラを想定する。
　図１は、本実施形態のデジタルカメラの主要な構成例を示すブロック図である。
　図１に示すデジタルカメラ１０は、画像撮影部１１、画像記憶部１２、物体検出部１３、基準位置検出部１４、割合算出部１５、中心位置変更部１６、ズーム制御部１７、操作部１８、画像表示部１９を備えている。
　画像撮影部１１は、任意の被写体を含む所定の撮影範囲を撮影するために、ＣＣＤイメージセンサ等の撮像デバイスを備えている。この撮像デバイスによる撮影で得られる画像は、写真のような静止画や複数フレームの画像の集合で構成される動画の画像データとして、物体検出部１３へ出力される。
　画像記憶部１２は、メモリカード等の不揮発性の記憶装置で構成されており、画像撮影部１１の撮影で得られた画像データやズーム制御部１７によりズーム処理された画像を、静止画や動画のデータとして蓄積する。
　画像表示部１９は、液晶表示デバイス等を用いて構成される。画像表示部１９は、撮影対象の画像のプレビュー表示や、撮影後の画像をユーザが鑑賞するための再生表示に用いられる。例えば、画像撮影部１１から出力される画像データを、ズーム制御部１７によりズーム処理した後に画像表示部１９に入力し、リアルタイムで画像を表示することにより、撮影対象の画像をプレビュー表示することができる。また、事前に撮影され画像記憶部１２に保存された任意の画像データを画像記憶部１２から読み出し、ズーム制御部１７によりズーム処理した後に画像表示部１９に入力すれば、撮影済みの静止画や動画を再生表示することができる。
　ズーム制御部１７は、処理対象の画像からその一部分を抽出して、デジタル画像処理によりズーム処理を行う電子ズーム機能を提供する。ズーム処理では、拡大表示制御（ズームイン）及び縮小表示制御（ズームアウト）の少なくとも一方が行われる。すなわち、ズーム制御部１７は、処理対象の画像の領域の中で指定された位置（ズーム中心位置）を中心として、ズーム倍率により定まる範囲を画像から抽出し、拡大及び縮小の少なくとも一方を行って出力する。ズーム制御部１７は、ズーム処理後の画像を画像表示部１９又は画像記憶部１２へ出力する。
　操作部１８は、ユーザからの入力操作を受け付けるための複数の操作ボタン等を有して構成される。操作部１８には、例えばズームインボタン、ズームアウトボタン、撮影ボタン等（図９参照）が含まれる。操作部１８は、入力操作に伴い、ズームイン／ズームアウト等の指示信号をズーム制御部１７へ出力する。なお、操作部１８は、画像表示部１９の表示画面と重ねて配置されたタッチパネルであっても良い。
　物体検出部１３は、画像撮影部１１又は画像記憶部１２からの画像データの内容を解析することにより、この画像の中に含まれている様々な物体を認識し、それぞれの物体の情報を基準位置検出部１４へ出力する。つまり、画像表示部１９により表示される画像内の物体を複数検出する。なお、本実施形態では、「複数の物体」には１つの物体の複数の領域の意味も含まれる。物体検出機能については、公知の様々な画像認識技術を用いて実現することができる。
　例えば、物体検出部１３は、画像の中に被写体として人物が含まれる場合には、各人物の体全体の領域、各人物の顔の領域、などをそれぞれ独立した物体として認識することができる。また、物体検出部１３は、様々な種類の料理が並んだ食卓が画像中に被写体として含まれている場合には、料理全体を含む領域を１つの物体として認識したり、特定の料理だけを１つの物体として認識したりすることもできる。
　また、物体検出部１３は、検出した１つ又は複数の物体のそれぞれについて、その物体の領域を表す領域情報を割合算出部１５へ出力する。領域情報には、検出された物体を囲む矩形のような所定の領域の位置や大きさを表す情報が含まれる。
　基準位置検出部１４は、物体検出部１３が検出した物体のそれぞれについて、その基準位置を検出する。例えば、検出された物体を囲む領域の中心位置や、検出された物体の重心位置のように、物体の中心近傍の位置が基準位置として検出される。
　割合算出部１５は、物体検出部１３が検出した物体のそれぞれについて、割合パラメータＰｘを算出する。この割合パラメータＰｘは、物体検出部１３により検出された物体の表示画面に対する大きさに応じて変化するものである。割合パラメータＰｘの一例として、画像表示部１９の表示画面全体のサイズ（高さ又は幅方向の画素数）に対する、表示画面上に表示された各物体を囲む領域の表示サイズ（高さ又は幅方向の画素数）の割合が考えられる。例えば、表示画面全体のサイズが１０００画素、物体のサイズが８５０画素の場合は、割合パラメータＰｘは０．８５になる。また、割合の算出時には、ズーム制御部１７からのズーム倍率も考慮される。割合算出部１５は、算出された割合の情報を中心位置変更部１６へ出力する。また、割合パラメータとして、表示画面全体の面積に対する物体の面積の割合も考えられる。
　なお、一般的には画像表示部１９の表示画面全体のサイズが一定であるので、割合算出部１５の計算を一部省略してもよい。例えば、各物体を囲む領域の表示サイズをそのまま割合パラメータＰｘとしても良い。あるいは、表示画面全体のサイズから物体の表示サイズを差し引いた結果を割合パラメータＰｘとしても良い。
　中心位置変更部１６は、物体検出部１３が検出した複数の物体のそれぞれについて、割合算出部１５からの割合パラメータＰｘを参照し、ズーム制御部１７によるズーム処理の対象となる物体（ズーム対象物）の候補（ズーム対象候補）を決定する。そして、中心位置変更部１６は、ズーム対象候補の中からズーム対象物を決定する。そして、中心位置変更部１６は、決定されたズーム対象物の基準位置を、ズーム処理を行う際の中心位置（ズーム中心位置）として、ズーム制御部１７に出力する。ズーム対象物は、物体の移動やズーム倍率の変化に伴って変更される。
　つまり、中心位置変更部１６は、割合パラメータＰｘが所定基準（例えば、表示画面全体に対する物体の大きさの割合が所定割合Ｐｔｈ以下であること）を満たす物体の基準位置をズーム中心位置として設定する。例えば、所定割合Ｐｔｈが０．９と設定された場合は、割合パラメータＰｘが０．８５のとき、所定割合より小さいので、所定基準に満たすこととなる。そして、中心位置変更部１６は、ズーム中心位置に設定された基準位置を有する物体の割合パラメータが所定基準を満たさなくなったときに、ズーム中心位置を、所定基準を満たす他の物体の基準位置へ変更する。
　次に、デジタルカメラ１０によるズーム中心位置制御について説明する。
　図２は、デジタルカメラ１０によるズーム中心位置制御の一例を示すフローチャートである。図２に示す制御は、画像撮影部１１からリアルタイムで出力される画像を画像表示部１９でプレビュー表示する際、画像記憶部１２から読み出した画像を画像表示部１９で表示する際、などに実行される。
　ステップＳ１１では、ズーム制御部１７は、ズーム中心位置を初期化する。初期化では、画像表示部１９の表示画面における中心位置をズーム中心位置に定める。また、ズーム倍率を例えば１倍にする。初期化された状態では、画像撮影部１１から出力される画像又は画像記憶部１２から読み出された画像が、ズーム処理されずに、画像表示部１９の画面上に表示される。
　ステップＳ１２では、物体検出部１３は、画像撮影部１１又は画像記憶部１２から物体検出部１３に入力される画像で、画像表示部１９の表示画面に表示される画像の中から、物体を１つ以上検出したか否かを識別する。物体を検出すると次のステップＳ１３に進む。
　ステップＳ１３では、物体検出部１３は、検出された物体の情報を参照する。そして、複数の物体を検出したか否かを識別する。複数の物体を検出した場合には、ズーム対象物を特定するために、ステップＳ１４に進む。一方、１つの物体のみ検出した場合には、その物体をズーム対象物に定めてステップＳ１６に進む。
　ステップＳ１４では、中心位置変更部１６は、物体検出部１３が検出した複数の物体のそれぞれについて、ズーム対象候補を決定するための条件を満たすか否かを識別する。例えば、割合算出部１５から出力される割合パラメータＰｘが閾値Ｐｔｈ以下か否かを識別する。そして、「Ｐｘ≦Ｐｔｈ」の条件を満たす物体をズーム対象候補に決定する。例えば、閾値Ｐｔｈが０．８の場合には、表示画面全体のサイズに対して画面上の表示サイズが８０％以下の物体のみがズーム対象候補の条件を満たすことになり、表示サイズが８０％以上の物体はズーム対象候補から除外される。
　ステップＳ１５では、中心位置変更部１６は、決定されたズーム対象候補の中から、ズーム対象物を決定する。ズーム対象候補の物体が１つだけの場合は、その候補をズーム対象物に決定する。また、ズーム対象候補が複数存在する場合には、それらの中で割合パラメータＰｘが最大の物体をズーム対象物に決定することが好ましい。これにより、Ｐｘが最大の物体は表示画面に占める割合が他の物体よりも大きいため、ズーム処理時の表示画面の変化をより滑らかにすることができる。さらに、表示サイズが同等のズーム対象候補が複数存在する場合には、それらのズーム対象候補の中で、その基準位置が表示画面の中央により近い物体を優先的にズーム対象物に決定しても良い。これにより、ズーム中心位置の変化が最低限で済むため、ズーム処理時の表示画面の変化をより滑らかにすることができる。
　ステップＳ１６では、基準位置検出部１４は、中心位置変更部１６により決定されたズーム対象物の基準位置を算出する。
　ステップＳ１７では、中心位置変更部１６は、基準位置検出部１４が算出した基準位置を新しいズーム中心位置として決定する。そして、このズーム中心位置の情報をズーム制御部１７に与える。ズーム制御部１７は、新しいズーム中心位置が入力されると、ズーム中心位置を中心に、指定されたズーム倍率に応じて画像をズーム処理する。ズーム制御部１７は、処理後の画像を画像表示部１９に与える。
　ステップＳ１８では、中心位置変更部１６は、ズーム対象候補が変化したか否かを識別する。具体的には、ズーム倍率の変化等に伴って新たな物体がズーム対象候補に追加されたり、既存のズーム対象候補の物体が所定条件を満たさなくなったりした場合には、ズーム対象候補が変化する。ズーム対象候補に変化があった場合には、ステップＳ１３に戻り、変化がない場合には、再びステップＳ１８の処理を行う。
　このような図２に示したズーム中心位置制御によれば、処理対象の画像内で複数の物体を認識した場合であっても、ズーム対象物を操作性良く切り替えることが可能である。すなわち、ズーム対象候補が複数ある場合であっても、操作部１８を介した指示を受けることなく、自動的に特定の物体をズーム対象物として追従することが可能である。
　次に、画像表示部１９による具体的な表示例について説明する。
　図３は、図２に示したズーム中心位置制御を行った場合の表示例を示す図である。
　図３（Ａ）では、ズーム中心位置制御を開始する前の状態を示しており、画像撮影部１１から出力される画像全体がこの表示画面３１上に現れている。図３（Ａ）では一人の人物が被写体として含まれている。また、図３（Ａ）では、画像表示部１９により表示された画像全体の基準位置がズーム中心位置Ｏとされる。
　図３（Ａ）のプレビュー表示が行われると、物体検出部１３が画像解析を行って、図３（Ｂ）に示すように、物体３３、３４が検出される。図３（Ｂ）では、一人の人物３２の体全体に相当する物体３３が１つの物体として検出され、更にこの人物３２の顔の領域に相当する物体３４が１つの物体として検出されている。図３（Ｂ）の例では、検出された各々の物体を囲むように、画像表示部１９により矩形の枠が描かれている。なお、矩形以外が描かれても良いし、特に枠が表示されなくてもよい。
　図３（Ｂ）の画像の表示中では、人物３２の体全体を表す物体３３と、顔の領域を表す物体３４とがそれぞれズーム対象候補になり、表示サイズの大きい物体、つまり人物３２の体全体を表す物体３３がズーム対象物に指定される。そして、図３（Ｃ）に示すように、このズーム対象物の領域の中心近傍が基準位置として検出され、この位置が新たなズーム中心位置Ｏに指定される。
　例えば、操作部１８のズームインボタンを操作してズーム制御部１７にズームインの指示を与えると、ズーム処理が開始される。ズームインの指示に従って、ズーム倍率は大きくなり、ズーム対象物である物体３３を含む領域が拡大され、図３（Ｄ）、（Ｅ）のように表示画面３１に表示される。ズーム対象物である物体３３の基準位置がズーム中心位置Ｏになるので、図３（Ｅ）のように表示画面３１の中央に拡大された物体３３が表示される。
　一方、図３（Ｅ）の状態では、ズーム対象物である物体３３が表示画面３１全体と同等の大きさまで拡大されており、Ｐｘ≦Ｐｔｈの条件を満たさなくなることが考えられる。この場合、ズーム対象物はズーム対象候補の条件を満たさなくなり、他のズーム対象候補で当該条件を満たす物体がズーム対象物として選択される。ここでは、ズーム対象候補の条件を満たす顔の領域を表す物体３４が次のズーム対象物として選択される。
　そして、図３（Ｆ）のように、顔の領域を表す物体３４の基準位置が検出され、この位置が新たなズーム中心位置Ｏに指定される。このように、ユーザが特別な操作をしなくても、状況の変化に伴ってズーム対象物が物体３４に変更され、ズーム中心位置Ｏも変更される。
　更にズームインボタンの操作を繰り返すと、新たなズーム中心位置Ｏを中心にズームインが行われる。そのため、図３（Ｇ）、（Ｈ）のように変更されたズーム対象物である物体３４の中心付近が表示画面３１の中央に移動し、拡大されて表示される。
　従って、表示画面３１内に認識された複数の物体が存在する場合には、いずれか１つの物体をユーザが選択操作しなくても、表示に適した物体を自動的に選択することができ、操作性が改善される。
　なお、ズームアウトボタンが操作された場合には、ズーム倍率が小さくなって表示画面３１内に現れる各物体の表示サイズが変化したり、新たな物体が表示画面３１内で検出されたりすることになる。その場合、ズーム対象候補が変化するので、必要に応じてズーム対象物やズーム中心位置が変更される。例えば、図３（Ｇ）の状態からズームアウトして図３（Ｄ）の状態に変化したとき、図３（Ｇ）ではズーム対象物として物体３４が検出され、図３（Ｄ）ではズーム対象物として物体３３が検出される。このように、割合パラメータが所定基準を継続して満たしている場合であっても、状況変化に伴い、より好適な物体にズーム対象物が変更されることがある。ここでは、割合パラメータが所定割合以下である物体の中で最大であるか否かが、判断基準となっている。
　また、下記のような場面を想定することもできる。
　図３（Ｄ）の状態でズーム処理を終了した後、被写体の人物３２が自ら移動して画像撮影部１１に近づくと、図３（Ｅ）のように表示画面３１に表示される。図３（Ｅ）の状態では、人物３２の体全体に相当する物体３３がズーム対象物として選択されている。しかし、人物３２が画像撮影部１１に近づいたために、人物３２の表示サイズが表示画面３１全体のサイズと同等まで大きくなっている。この人物３２の体全体に相当する物体３３の割合パラメータＰｘがズーム対象候補の条件を満たさなくなると、物体３３以外の他の物体がズーム対象物として決定される。ここでは、図３（Ｅ）の表示画面３１内で検出されている物体のうち、人物３２の体全体よりも小さい顔の領域を表す物体３４が、新たにズーム対象物として選択される。したがって、図３（Ｆ）のように、物体３４の基準位置が新たなズーム中心位置Ｏに指定される。
　このように、検出された物体が移動し、ズーム対象候補の条件を満たさなくなった場合であっても、操作部１８を介した指示を受けることなく、操作性良く他の物体をズーム対象物として追従することが可能である。
（変形例１）
　次に、デジタルカメラ１０によるズーム中心位置制御の変形例１について説明する。
　図４は、デジタルカメラ１０によるズーム中心位置制御の変形例１を示すフローチャートである。なお、図４において、図２に示したステップと同一のステップには同一の番号を付けて示してある。図４に示す制御においては、ステップＳ１４Ｂの内容が図２と異なっている。
　ステップＳ１４Ｂでは、中心位置変更部１６は、既に決定されている（選択中の）ズーム対象物の領域内の物体から、ズーム対象候補を決定する。ズーム対象候補の基準位置は、物体の基準既に決定されているズーム対象物の領域内に位置する。
　図５は、図４に示したズーム中心位置制御を行った場合の表示例を示す図である。
　図５（Ａ）は、ズーム中心位置制御を開始する前の状態であり、画像撮影部１１から出力される画像全体がこの表示画面５１上に現れている。図５（Ａ）では、二人の人物５２、５３が被写体として含まれている。また、図５（Ａ）の状態では、右側の人物５２の体全体に相当する物体５４と、右側の人物５２の顔の領域に相当する物体５５と、左側の人物５３の顔の領域に相当する物体５６とが、物体検出部１３によりそれぞれ検出される。
　図５（Ａ）に示すプレビュー表示を行う時には、人物５２の体全体に相当する物体５４と、人物５２の顔の領域に相当する物体５５と、人物５３の顔の領域に相当する物体５６と、がそれぞれズーム対象候補になる。これらのズーム対象候補の中で、例えば表示サイズが最大の物体である人物５２の体全体に相当する物体５４が、ズーム対象物として選択される。
　そして、操作部１８によりズームインの操作を行うと、図５（Ｂ）に示すように、人物５２の体全体に相当する物体５４の基準位置がズーム中心位置Ｏとして指定され、ズーム中心位置Ｏを中心としてこの物体５４が拡大されて表示される。
　図５（Ａ）のように、人物５２の体全体に相当する物体５４をズーム対象物として決定した後、図５（Ｂ）のようにズームインの操作を行うと、人物５２の体全体に相当する物体５４の割合パラメータＰｘがズーム対象候補の条件を満たさなくなる。また、図５（Ａ）では、人物５２の顔の領域に相当する物体５５と、人物５３の顔の領域に相当する物体５６と、の２つが互いに同等の表示サイズで表示画面５１に現れている。この場合、図４に示した制御を行うことで、人物５２のみがズーム対象候補となり、これが新たなズーム対象物として選択される。これは、人物５２の顔の領域に相当する物体５５が、既に決定された現在のズーム対象物である人物５２の体全体の領域に相当する物体５４の内側にあるためである。従って、図５（Ｃ）に示すように人物５２の顔の領域に相当する物体５５の基準位置をズーム中心位置Ｏとしてズーム処理がされる。
　一方、人物５３の顔の領域に相当する物体５６は、人物５２の体全体の領域に相当する物体５４の外側に位置するため、ズーム対象候補とはならない。従って、図４に示した制御を行う場合には、図５（Ｄ）に示すように人物５３の顔の領域に相当する物体５６をズーム中心位置Ｏとしてズーム処理がされることはない。
　このように、ズームインの操作において、人物５２の体全体の領域に相当する物体５４の次には、人物５３の顔の領域に相当する物体５６ではなく、人物５２の顔の領域に相当する物体５５の基準位置がズーム中心位置として指定される。したがって、表示される物体の位置が突然大きく変化するなど、ユーザからみて不自然な表示が行われずに、より自然に見える状態でズーム処理時に追従する物体を切り替えることができる。
（変形例２）
　次に、デジタルカメラ１０によるズーム中心位置制御の変形例２について説明する。
　図６は、デジタルカメラ１０によるズーム中心位置制御の変形例２を示すフローチャートである。なお、図６において、図２に示したステップと同一のステップには同一の番号を付けて示してある。図６に示す制御では、ステップＳ２１、２２が追加された点が図２と異なっている。
　ステップＳ２１では、ステップＳ１７の後に、物体検出部１３は、画像表示部１９により表示される画像の中に物体が１つも検出されない状態か否かを識別する。１つ以上の物体を検出中であればステップＳ１８に進み、検出物体なしであればステップＳ２２に進む。
　ステップＳ２２では、ズーム制御部１７は、画像表示部１９により表示される画像が、画像撮影部１１が最も広角の状態（最広角状態）で撮影された画像であるか否かを識別する。最広角状態であればステップＳ１１に進み、最広角状態でなければステップＳ２１に進む。
　従って、中心位置変更部１６は、ズーム対象物として決定されていた物体が物体検出部１３により検出されない状態となっても、最広角状態にズームアウトされるまでは、ズーム中心位置の変更を禁止することになる。これにより、ユーザからより自然に見える状態で各物体をズーム処理することができる。なお、最広角状態になると、ステップＳ１１から処理を再開するため、ズーム中心位置Ｏも初期化されることになる。
　図７は、図６に示したズーム中心位置制御を行った場合の表示例を示す図である。
　ここでは、図７（Ａ）のように表示画面７１にプレビュー表示し、図７（Ｂ）のように、人物７２をズーム対象物としてズームインすることを想定している。そして、人物７２のズームイン中に、図７（Ｃ）のように、何らかの原因でそれまでズーム対象物であった人物７２の体全体に相当する物体７３が、物体検出部１３により検出されない状態となることを想定している。
　ズーム対象物が検出されない状態で、仮にズーム中心位置Ｏを初期状態に戻すと、つまりズーム中心位置Ｏを画像撮影部１１により撮影された画像全体の基準位置に急に戻すと、ズームインを継続した場合、図７（Ｄ）のように、初期状態のズーム中心位置Ｏを中心とした拡大画像を表示する状態に変化してしまう。つまり、デジタルカメラ１０のユーザがズーム対象物であった人物７２に注目していた場合であっても、急に他の対象物が拡大表示された状態となるので、不自然に見えることがある。
　そこで、図７（Ｅ）のように、ズーム中心位置Ｏを、画像撮影部１１により撮影された画像全体の基準位置に変更するのではなく、検出されなくなったズーム対象物の基準位置に維持する。この場合、ズームインを行うと、ズーム倍率が変更され、図７（Ｆ）のようにズーム中心位置Ｏを中心として拡大表示されるが、最広角状態となるまではズーム中心位置Ｏは変更されない。一方、ズームアウトを継続して最広角状態に達すると、図７（Ｇ）のようにズーム中心位置Ｏが変更され、初期化される。
　このように、図６に示したズーム中心位置制御によれば、急に表示画面に表示される画像が変化することなく、自然なズーム処理が可能である。
（変形例３）
　次に、デジタルカメラ１０によるズーム中心位置制御の変形例３について説明する。
　図８は、デジタルカメラ１０によるズーム中心位置制御の変形例３を示すフローチャートである。なお、図８において、図２に示したステップと同一のステップには同一の番号を付けて示してある。図８に示す制御では、ステップＳ１７の後にステップＳ３１が追加された点が図２と異なっている。
　ステップＳ３１では、ズーム制御部１７の指令に応じて、画像表示部１９は、決定されたズーム対象物を囲む枠、ズームインボタン、ズームアウトボタン、移動ボタンなどを表示する。枠の形状は、例えば矩形であってもよいし、楕円形であってもよいし、その他の形状であってもよい。また、ズームインボタンは、所定倍率ずつズーム倍率を増大させるためのボタンである。ズームアウトボタンは、所定倍率ずつズーム倍率を減少させるためのボタンである。また、ズーム対象物を囲む枠の表示が変更されることは、ズーム中心位置が変更された旨を表示することに相当する。
　図９は、図８に示したズーム中心位置制御を行った場合の表示例を示す図である。
　なお、図９に示す例では、操作部１８の一部分がタッチパネルとして画像表示部１９の表示画面９１上に重ねて配置されている場合を想定している。この場合、ユーザは表示画面９１上に現れたボタンを操作して入力操作を行うことができる。
　図９（Ａ）では、表示画面９１に、ズームインボタン９５とズームアウトボタン９６が表示されている。図９（Ｂ）では、表示画面９１に、ズームインボタン９５、ズームアウトボタン９６の他に移動ボタン９７が表示されている。図９（Ｃ）では、表示画面９１に、ズームインボタン９５、ズームアウトボタン９６、移動ボタン９７の他に移動ボタン９８も表示されている。
　図９（Ａ）、図９（Ｂ）のように、表示画面９１内に人物９２が存在しない状態から存在する状態に変化した場合を想定する。この場合、表示画面９１において人物９２の体全体に相当する物体が１つの物体として検出され、人物９２の顔の領域に相当する物体も１つの物体として検出される。
　すると、図９（Ｂ）に示すように、それぞれの物体を囲む矩形等の枠９３、９４が可視情報として、表示画面９１に表示される。また、ズーム制御部１７は、枠９３、９４で囲まれた各物体をズーム対象物として選択できることがユーザに分かるように、ズームインボタン９５、ズームボタン９６の表示形態（例えばアイコンのデザイン）を切り替える。また、表示画面９１には、移動ボタン９７も表示される。移動ボタン９７は、最初に決定されたズーム対象物に一気に移動するための指示を与える機能を有する。移動ボタン９７の機能を実現するために、最初に決定されたズーム対象物の基準位置やズーム倍率に関する情報が、画像記憶部１２に保存される。移動ボタン９７が押下されると、人物９２の体全体に相当する物体がズーム対象物として決定され、この物体が表示画面９１の中央に拡大された状態で表示される。
　また、図９（Ｃ）では、人物９２の表示サイズが所定以上の大きさとなり、ズーム対象候補の条件を満たさなくなったため、人物９２の顔の領域に相当する物体がズーム対象物として決定される。この場合、表示画面９１に移動ボタン９８が表示される。移動ボタン９８は、１つ前に決定されたズーム対象物（ここでは人物９２の体全体に相当する物体）の表示に一気に戻る指示を与えるための機能を有する。移動ボタン９８の機能を実現するために、１つ前に選択されたズーム対象物の基準位置やズーム倍率に関する情報が、画像記憶部１２に保存される。移動ボタン９８が押下されると、人物９２の体全体に相当する物体がズーム対象物として決定され、ズーム処理がされる図９（Ｂ）の表示に切り替わる。
　なお、ここでは、枠が表示される一例を示したが、枠がなくても対象物が分かる場合、枠が表示されなくても良い。
　このように、図８に示したズーム中心位置制御によれば、ズーム対象物やズーム対象物の切り替えをユーザが容易に認識することができる。
　本発明を詳細にまた特定の実施態様を参照して説明したが、本発明の精神と範囲を逸脱することなく様々な変更や修正を加えることができることは当業者にとって明らかである。
　本出願は、2010年3月9日出願の日本特許出願No.2010-052163に基づくものであり、その内容はここに参照として取り込まれる。
　本発明は、処理対象の画像内で複数の物体を認識した場合であっても、ズーム処理対象の物体を操作性良く切り替えることが可能な電子ズーム等に有用である。
　１０　デジタルカメラ
　１１　画像撮影部
　１２　画像記憶部
　１３　物体検出部
　１４　基準位置検出部
　１５　割合算出部
　１６　中心位置変更部
　１７　ズーム制御部
　１８　操作部
　１９　画像表示部
 

Claims (9)

  1. 　表示画面に画像を表示する画像表示部と、
    　前記表示画面に表示される画像内の物体を複数検出する物体検出部と、
    　前記物体検出部により検出された物体の基準位置を検出する基準位置検出部と、
    　前記物体検出部により検出された物体の前記表示画面に対する大きさに応じて変化する割合パラメータを算出する割合算出部と、
    　前記割合算出部により算出された割合パラメータが所定基準を満たす第１の物体の基準位置を、ズーム中心位置として設定するズーム中心位置設定部と、
    　前記ズーム中心位置を中心として、前記表示画面に表示される画像のズーム処理を行うズーム処理部と、
    　を備え、
    　前記ズーム中心位置設定部は、前記第１の物体の前記割合パラメータが前記所定基準を満たさなくなったとき、前記ズーム中心位置を、前記第１の物体の基準位置から、前記割合パラメータが前記所定基準を満たす第２の物体の基準位置へ変更する電子ズーム装置。
  2. 　請求項１に記載の電子ズーム装置であって、
    　前記割合算出部は、前記表示画面全体に対する、前記物体検出部により検出された物体の画像の割合を前記割合パラメータとして算出し、
    　前記所定基準は、前記割合パラメータが所定割合以下であることである電子ズーム装置。
  3. 　請求項２に記載の電子ズーム装置であって、
    　前記所定基準は、前記割合パラメータが前記所定割合以下である物体の中で最大であることである電子ズーム装置。
  4. 　請求項２または３に記載の電子ズーム装置であって、
    　前記第２の物体は、当該物体の基準位置が前記表示画面の中心位置に最も近い電子ズーム装置。
  5. 　請求項１ないし４のいずれか１項に記載の電子ズーム装置であって、
    　前記第２の物体は、当該物体の基準位置が前記第１の物体の領域内に位置する電子ズーム装置。
  6. 　請求項１ないし５のいずれか１項に記載の電子ズーム装置であって、
    　前記ズーム中心位置設定部は、前記物体検出部により物体が検出されない未検出状態に変化した場合、最広角状態に達するまで、前記ズーム中心位置の変更を禁止する電子ズーム装置。
  7. 　請求項１ないし６のいずれか１項に記載の電子ズーム装置であって、
    　前記画像表示部は、前記ズーム中心位置設定部により前記ズーム中心位置が変更された場合、前記ズーム中心位置が変更された旨を表示する電子ズーム装置。
  8. 　表示画面に画像を表示する電子ズーム装置の電子ズーム方法であって、
    　前記表示画面に表示される画像内の物体を複数検出するステップと、
    　前記検出された物体の基準位置を検出するステップと、
    　前記検出された物体の前記表示画面に対する大きさに応じて変化する割合パラメータを算出するステップと、
    　前記算出された割合パラメータが所定基準を満たす第１の物体の基準位置を、ズーム中心位置として設定するステップと、
    　前記ズーム中心位置を中心として、前記表示画面に表示される画像のズーム処理を行うステップと、
    　前記第１の物体の前記割合パラメータが前記所定基準を満たさなくなったとき、前記ズーム中心位置を、前記第１の物体の基準位置から、前記割合パラメータが前記所定基準を満たす第２の物体の基準位置へ変更するステップと、
    　を有する電子ズーム方法。
  9. 　請求項８に記載の電子ズーム方法の各ステップをコンピュータに実行させるためのプログラム。
PCT/JP2011/001341 2010-03-09 2011-03-07 電子ズーム装置、電子ズーム方法、及びプログラム WO2011111371A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US13/583,196 US20130235086A1 (en) 2010-03-09 2011-03-07 Electronic zoom device, electronic zoom method, and program
EP11753036A EP2547089A1 (en) 2010-03-09 2011-03-07 Electronic zoom device, electronic zoom method, and program

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2010052163A JP4852652B2 (ja) 2010-03-09 2010-03-09 電子ズーム装置、電子ズーム方法、及びプログラム
JP2010-052163 2010-03-09

Publications (1)

Publication Number Publication Date
WO2011111371A1 true WO2011111371A1 (ja) 2011-09-15

Family

ID=44563204

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2011/001341 WO2011111371A1 (ja) 2010-03-09 2011-03-07 電子ズーム装置、電子ズーム方法、及びプログラム

Country Status (4)

Country Link
US (1) US20130235086A1 (ja)
EP (1) EP2547089A1 (ja)
JP (1) JP4852652B2 (ja)
WO (1) WO2011111371A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013118450A1 (en) * 2012-02-06 2013-08-15 Sony Corporation Image processing apparatus, image processing method, program, and recording medium
EP2703984A3 (en) * 2012-08-27 2017-10-11 Samsung Electronics Co., Ltd Zooming display method and apparatus

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8692907B2 (en) * 2010-09-13 2014-04-08 Sony Corporation Image capturing apparatus and image capturing method
US10127630B2 (en) * 2011-06-29 2018-11-13 Koninklijke Philips N.V. Zooming of medical images
US10586570B2 (en) 2014-02-05 2020-03-10 Snap Inc. Real time video processing for changing proportions of an object in the video
JP2015170343A (ja) * 2014-03-11 2015-09-28 オムロン株式会社 画像表示装置および画像表示方法
TWI539823B (zh) * 2014-09-29 2016-06-21 晶睿通訊股份有限公司 攝影畫面切換方法與監控系統
JP6436761B2 (ja) * 2014-12-24 2018-12-12 キヤノン株式会社 ズーム制御装置、撮像装置、ズーム制御装置の制御方法、及びズーム制御装置の制御プログラム
CN104580899B (zh) * 2014-12-26 2018-08-03 魅族科技（中国）有限公司 物体成像的控制方法及成像装置
US10116901B2 (en) 2015-03-18 2018-10-30 Avatar Merger Sub II, LLC Background modification in video conferencing
CN105357442A (zh) 2015-11-27 2016-02-24 小米科技有限责任公司 摄像头拍摄角度调整方法及装置
US10869026B2 (en) * 2016-11-18 2020-12-15 Amitabha Gupta Apparatus for augmenting vision
US10762653B2 (en) * 2016-12-27 2020-09-01 Canon Kabushiki Kaisha Generation apparatus of virtual viewpoint image, generation method, and storage medium
US10218901B2 (en) * 2017-04-05 2019-02-26 International Business Machines Corporation Picture composition adjustment
US11297244B2 (en) * 2020-02-11 2022-04-05 Samsung Electronics Co., Ltd. Click-and-lock zoom camera user interface
CN112532875B (zh) * 2020-11-24 2022-08-19 展讯通信（上海）有限公司 终端设备及其图像处理方法、装置、存储介质
TWI767714B (zh) * 2021-05-19 2022-06-11 華碩電腦股份有限公司 電子裝置以及其影像擷取器的控制方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05130477A (ja) * 1991-11-05 1993-05-25 Mitsubishi Electric Corp 電子ズーム方式
JPH06350897A (ja) 1993-06-03 1994-12-22 Matsushita Electric Ind Co Ltd 追尾電子ズーム装置
JPH1175103A (ja) 1997-08-29 1999-03-16 Hitachi Denshi Ltd テレビジョンカメラ
JP2005033508A (ja) * 2003-07-14 2005-02-03 Minolta Co Ltd 撮像装置

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7146023B2 (en) * 2000-12-15 2006-12-05 Sony Corporation Image processor, image signal generating method, information recording medium, and image processing program
US7190825B2 (en) * 2001-08-17 2007-03-13 Geo-Rae Co., Ltd. Portable communication device for stereoscopic image display and transmission
KR100474312B1 (ko) * 2002-12-12 2005-03-10 엘지전자 주식회사 디지털 카메라의 자동 주밍 방법
US20090040238A1 (en) * 2004-10-25 2009-02-12 Mitsue Ito Image display program and storage medium containing same
JP4692371B2 (ja) * 2006-04-26 2011-06-01 オムロン株式会社 画像処理装置、画像処理方法、画像処理プログラム、および画像処理プログラムを記録した記録媒体、ならびに移動物体検出システム
JP4388939B2 (ja) * 2006-09-25 2009-12-24 富士フイルム株式会社 画像再生装置ならびにその制御方法およびその制御プログラム
EP3462727B1 (en) * 2007-06-14 2020-05-13 FUJIFILM Corporation Photographing apparatus
JP5553472B2 (ja) * 2007-07-10 2014-07-16 キヤノン株式会社 焦点調節装置、撮像装置、及びその制御方法
JP5164692B2 (ja) * 2008-06-27 2013-03-21 キヤノン株式会社 画像処理装置、画像処理方法、及び、プログラム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05130477A (ja) * 1991-11-05 1993-05-25 Mitsubishi Electric Corp 電子ズーム方式
JPH06350897A (ja) 1993-06-03 1994-12-22 Matsushita Electric Ind Co Ltd 追尾電子ズーム装置
JPH1175103A (ja) 1997-08-29 1999-03-16 Hitachi Denshi Ltd テレビジョンカメラ
JP2005033508A (ja) * 2003-07-14 2005-02-03 Minolta Co Ltd 撮像装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013118450A1 (en) * 2012-02-06 2013-08-15 Sony Corporation Image processing apparatus, image processing method, program, and recording medium
US20140247374A1 (en) 2012-02-06 2014-09-04 Sony Corporation Image processing apparatus, image processing method, program, and recording medium
US10225462B2 (en) 2012-02-06 2019-03-05 Sony Corporation Image processing to track face region of person
EP2703984A3 (en) * 2012-08-27 2017-10-11 Samsung Electronics Co., Ltd Zooming display method and apparatus

Also Published As

Publication number Publication date
US20130235086A1 (en) 2013-09-12
EP2547089A1 (en) 2013-01-16
JP4852652B2 (ja) 2012-01-11
JP2011188297A (ja) 2011-09-22

Similar Documents

Publication Publication Date Title
JP4852652B2 (ja) 電子ズーム装置、電子ズーム方法、及びプログラム
CN113329160B (zh) 被配置为处理和显示图像数据的多相机系统及具有多相机系统的设备
JP4964807B2 (ja) 撮像装置及び撮像方法
KR101589501B1 (ko) 터치 스크린을 이용한 줌 제어 방법 및 장치
US8531557B2 (en) Method, apparatus and system for performing a zoom operation
US8831282B2 (en) Imaging device including a face detector
US8385607B2 (en) Imaging apparatus, image processing apparatus, image processing method and computer program
CN101465972B (zh) 在数字图像处理装置中使图像背景模糊的设备和方法
JP2011050038A (ja) 画像再生装置及び撮像装置
JP5331128B2 (ja) 撮像装置
TW201316760A (zh) 攝像裝置、及其之控制方法
KR20110100232A (ko) 정보 표시 장치, 정보 표시 방법 및 기록매체
US10958825B2 (en) Electronic apparatus and method for controlling the same
US11496670B2 (en) Electronic device with display screen capable of reliable detection of a user selected displayed eye region in a scene to be captured, and region selection method
TWI629550B (zh) 影像擷取裝置及其縮放影像的方法
WO2023185683A1 (zh) 微距拍摄方法、电子设备和计算机可读存储介质
JP4640198B2 (ja) 電子カメラ、多数ポイント同時合焦枠表示方法、及びプログラム
CN112740651B (zh) 用于操作包括显示器的系统的方法、设备、装置及计算机可读介质
JP2011211757A (ja) 電子ズーム装置、電子ズーム方法、及びプログラム
JP5733956B2 (ja) 撮像装置及びその制御方法、動画記録装置並びにその制御方法、プログラム、並びに記憶媒体
JP2011193066A (ja) 撮像装置
JP2008211534A (ja) 顔検知装置
JP7234497B2 (ja) 電子機器、情報処理方法、およびプログラム
JP6119380B2 (ja) 画像取込装置、画像取込方法、画像取込プログラムおよび移動通信端末
JP2023165555A (ja) 画像処理装置、撮像装置、制御方法及びプログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 11753036

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 13583196

Country of ref document: US

Ref document number: 2011753036

Country of ref document: EP

NENP Non-entry into the national phase

Ref country code: DE