WO2020153704A1 - 전자 장치 및 이를 이용한 카메라의 가림을 인식하는 방법 - Google Patents

전자 장치 및 이를 이용한 카메라의 가림을 인식하는 방법 Download PDF

Info

Publication number
WO2020153704A1
WO2020153704A1 PCT/KR2020/001000 KR2020001000W WO2020153704A1 WO 2020153704 A1 WO2020153704 A1 WO 2020153704A1 KR 2020001000 W KR2020001000 W KR 2020001000W WO 2020153704 A1 WO2020153704 A1 WO 2020153704A1
Authority
WO
WIPO (PCT)
Prior art keywords
camera
image
processor
electronic device
value
Prior art date
Application number
PCT/KR2020/001000
Other languages
English (en)
French (fr)
Inventor
이성민
맹성규
Original Assignee
삼성전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자 주식회사 filed Critical 삼성전자 주식회사
Publication of WO2020153704A1 publication Critical patent/WO2020153704A1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/634—Warning indications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/57—Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/52—Details of telephonic subscriber devices including functional features of a camera

Definitions

  • Various embodiments of the present invention relate to an electronic device and a method for recognizing the occlusion of a camera using the same.
  • an electronic device provides a camera function so that an image or video can be generated and stored by photographing a subject.
  • an electronic device may include a plurality of cameras (eg, dual cameras) capable of acquiring images or images with different angles of view of a subject.
  • the electronic device may acquire an image having a first angle of view obtained from one of the plurality of cameras and an image having a second angle of view of a narrower angle of view than the first angle of view obtained from another camera.
  • the electronic device may display the image having the first angle of view as a preview image, and may not display the image having the second angle of view as a preview image, but may synthesize the image having the first angle of view and store it as a high-quality image.
  • images obtained from a plurality of cameras having different angles of view may be used for adjusting the brightness, contrast, noise of the image, or for out-focusing.
  • any one of a plurality of cameras may be obscured by an object, for example, a user's finger being approached or touched. If a camera capable of acquiring an image having a second angle of view that is not displayed as a preview image among a plurality of cameras is hidden by an object, the user may not recognize that the camera is hidden because it is not displayed as a preview image. As the camera is obscured by an object, it is not possible to store a high quality image through the synthesis of a plurality of images obtained through a plurality of cameras.
  • the electronic device determines whether an object is detected in at least one camera using at least one of a sensor value and a parameter value for an image when an image of a subject is photographed using a plurality of cameras. Can decide.
  • the electronic device may provide a notification that the object is detected by the at least one camera, for example, a notification that the camera is obscured by the object.
  • An electronic device includes: a housing, a first camera and a second camera exposed outside the housing, at least one deco member formed of a conductive material surrounding the first camera and the second camera, And at least one sensing unit, and a processor electrically connected to the first camera, the second camera, the at least one deco member, and the at least one sensing unit, wherein the processor includes the at least one sensing unit.
  • a capacitance value for at least one deco member formed of the conductive material through, if a camera function is activated, and a change in the acquired capacitance value is detected, determine whether the changed capacitance value exceeds a specified value and , And when the changed capacitance value exceeds the specified value, it may be set to provide a notification that an object is detected in at least one of the first camera and the second camera.
  • a method of recognizing the occlusion of a camera of an electronic device may include a capacitance value for at least one deco member formed to surround the first camera and the second camera with a conductive material through at least one sensing unit.
  • An acquiring operation when a camera function is activated, and a change in the acquired capacitance value is detected, determining whether the changed capacitance value exceeds a specified value, and when the changed capacitance value exceeds the specified value, It may include an operation of providing a notification that an object is detected in at least one of the first camera and the second camera.
  • the electronic device may provide a notification for an object when it is detected by at least one camera. Accordingly, the user can intuitively check whether an object is detected in the at least one camera, and remove the object from an image acquired from the at least one camera. As the object sensed by the at least one camera is removed from the acquired image, the electronic device may acquire a high quality image through the plurality of cameras.
  • FIG. 1 is a block diagram of an electronic device in a network environment, according to various embodiments.
  • FIG. 2 is a block diagram illustrating a camera module, according to various embodiments.
  • FIG. 3 is a block diagram illustrating an electronic device according to various embodiments of the present disclosure.
  • FIG. 4 is a diagram illustrating a plurality of camera structures according to various embodiments.
  • FIG. 5 is a circuit diagram illustrating a method of detecting an object in at least one camera based on a capacitance value according to various embodiments.
  • FIG. 6 is a diagram illustrating a plurality of camera structures according to various embodiments.
  • FIG. 7 is a circuit diagram illustrating a method of detecting an object in at least one camera based on a capacitance value, according to various embodiments.
  • FIG. 8 is a flowchart illustrating a method of detecting an object in at least one camera based on a capacitance value, according to various embodiments.
  • FIG. 9 is a diagram for describing a method of sensing an object in at least one camera based on parameter values for an image according to various embodiments.
  • FIG. 10 is a diagram for describing a method of sensing an object in at least one camera based on parameter values for an image according to various embodiments.
  • 11 is a diagram for describing a method of detecting an object in at least one camera based on parameter values for an image according to various embodiments.
  • FIG. 12 is a flowchart illustrating a method of detecting an object in at least one camera based on parameter values for an image according to various embodiments.
  • FIG. 13 is a flowchart illustrating a method of sensing an object in at least one camera based on a capacitance value and a parameter value for an image according to various embodiments.
  • FIG. 14 is a diagram illustrating a case in which an object is detected in at least one camera according to various embodiments.
  • 15 is a diagram for describing a method of providing a notification that an object is detected in at least one camera according to various embodiments.
  • FIG. 1 is a block diagram of an electronic device 101 in a network environment 100 according to various embodiments.
  • the electronic device 101 communicates with the electronic device 102 through the first network 198 (eg, a short-range wireless communication network), or the second network 199. It may communicate with the electronic device 104 or the server 108 through (eg, a remote wireless communication network). According to an embodiment, the electronic device 101 may communicate with the electronic device 104 through the server 108.
  • the first network 198 eg, a short-range wireless communication network
  • the server 108 e.g, a remote wireless communication network.
  • the electronic device 101 may communicate with the electronic device 104 through the server 108.
  • the electronic device 101 includes a processor 120, a memory 130, an input device 150, an audio output device 155, a display device 160, an audio module 170, a sensor module ( 176), interface 177, haptic module 179, camera module 180, power management module 188, battery 189, communication module 190, subscriber identification module 196, or antenna module 197 ).
  • the components for example, the display device 160 or the camera module 180
  • the sensor module 176 eg, a fingerprint sensor, an iris sensor, or an illuminance sensor
  • the display device 160 eg., a display
  • the sensor module 176 eg, a fingerprint sensor, an iris sensor, or an illuminance sensor
  • the processor 120 executes software (eg, the program 140) to execute at least one other component (eg, hardware or software component) of the electronic device 101 connected to the processor 120. It can be controlled and can perform various data processing or operations. According to one embodiment, as at least part of data processing or computation, the processor 120 may receive instructions or data received from other components (eg, the sensor module 176 or the communication module 190) in the volatile memory 132. Loaded into, process instructions or data stored in volatile memory 132, and store result data in non-volatile memory 134.
  • software eg, the program 140
  • the processor 120 may receive instructions or data received from other components (eg, the sensor module 176 or the communication module 190) in the volatile memory 132. Loaded into, process instructions or data stored in volatile memory 132, and store result data in non-volatile memory 134.
  • the processor 120 includes a main processor 121 (eg, a central processing unit or an application processor), and an auxiliary processor 123 (eg, a graphics processing unit, an image signal processor) that can be operated independently or together. , Sensor hub processor, or communication processor). Additionally or alternatively, the coprocessor 123 may be set to use less power than the main processor 121, or to be specialized for a specified function. The coprocessor 123 may be implemented separately from the main processor 121 or as a part thereof.
  • a main processor 121 eg, a central processing unit or an application processor
  • an auxiliary processor 123 eg, a graphics processing unit, an image signal processor
  • the coprocessor 123 may be set to use less power than the main processor 121, or to be specialized for a specified function.
  • the coprocessor 123 may be implemented separately from the main processor 121 or as a part thereof.
  • the coprocessor 123 may replace, for example, the main processor 121 while the main processor 121 is in an inactive (eg, sleep) state, or the main processor 121 may be active (eg, execute an application) ) With the main processor 121 while in the state, at least one component of the components of the electronic device 101 (eg, the display device 160, the sensor module 176, or the communication module 190) It can control at least some of the functions or states associated with.
  • the coprocessor 123 eg, image signal processor or communication processor
  • may be implemented as part of other functionally relevant components eg, camera module 180 or communication module 190). have.
  • the memory 130 may store various data used by at least one component of the electronic device 101 (eg, the processor 120 or the sensor module 176).
  • the data may include, for example, input data or output data for software (eg, the program 140) and instructions related thereto.
  • the memory 130 may include a volatile memory 132 or a nonvolatile memory 134.
  • the program 140 may be stored as software in the memory 130, and may include, for example, an operating system 142, middleware 144, or an application 146.
  • the input device 150 may receive commands or data to be used for components (eg, the processor 120) of the electronic device 101 from outside (eg, a user) of the electronic device 101.
  • the input device 150 may include, for example, a microphone, mouse, keyboard, or digital pen (eg, a stylus pen).
  • the audio output device 155 may output an audio signal to the outside of the electronic device 101.
  • the audio output device 155 may include, for example, a speaker or a receiver.
  • the speaker can be used for general purposes such as multimedia playback or recording playback, and the receiver can be used to receive an incoming call.
  • the receiver may be implemented separately from, or as part of, the speaker.
  • the display device 160 may visually provide information to the outside of the electronic device 101 (eg, a user).
  • the display device 160 may include, for example, a display, a hologram device, or a projector and a control circuit for controlling the device.
  • the display device 160 may include a touch circuitry configured to sense a touch, or a sensor circuit (eg, a pressure sensor) configured to measure the strength of the force generated by the touch. have.
  • the audio module 170 may convert sound into an electrical signal, or vice versa. According to an embodiment, the audio module 170 acquires sound through the input device 150, or an external electronic device (eg, directly or wirelessly connected to the sound output device 155 or the electronic device 101) Sound may be output through the electronic device 102 (eg, a speaker or headphones).
  • an external electronic device eg, directly or wirelessly connected to the sound output device 155 or the electronic device 101
  • Sound may be output through the electronic device 102 (eg, a speaker or headphones).
  • the sensor module 176 detects an operating state (eg, power or temperature) of the electronic device 101 or an external environmental state (eg, a user state), and generates an electrical signal or data value corresponding to the detected state can do.
  • the sensor module 176 may include, for example, a gesture sensor, a gyro sensor, a barometric pressure sensor, a magnetic sensor, an acceleration sensor, a grip sensor, a proximity sensor, a color sensor, an infrared (IR) sensor, a biological sensor, It may include a temperature sensor, a humidity sensor, or an illuminance sensor.
  • the interface 177 may support one or more designated protocols that can be used for the electronic device 101 to directly or wirelessly connect to an external electronic device (eg, the electronic device 102).
  • the interface 177 may include, for example, a high definition multimedia interface (HDMI), a universal serial bus (USB) interface, an SD card interface, or an audio interface.
  • HDMI high definition multimedia interface
  • USB universal serial bus
  • SD card interface Secure Digital Card interface
  • audio interface audio interface
  • the connection terminal 178 may include a connector through which the electronic device 101 can be physically connected to an external electronic device (eg, the electronic device 102 ).
  • the connection terminal 178 may include, for example, an HDMI connector, a USB connector, an SD card connector, or an audio connector (eg, a headphone connector).
  • the haptic module 179 may convert electrical signals into mechanical stimuli (eg, vibration or movement) or electrical stimuli that the user can perceive through tactile or motor sensations.
  • the haptic module 179 may include, for example, a motor, a piezoelectric element, or an electrical stimulation device.
  • the camera module 180 may capture still images and videos. According to one embodiment, the camera module 180 may include one or more lenses, image sensors, image signal processors, or flashes.
  • the power management module 188 may manage power supplied to the electronic device 101.
  • the power management module 188 may be implemented, for example, as at least part of a power management integrated circuit (PMIC).
  • PMIC power management integrated circuit
  • the battery 189 may supply power to at least one component of the electronic device 101.
  • the battery 189 may include, for example, a non-rechargeable primary cell, a rechargeable secondary cell, or a fuel cell.
  • the communication module 190 is a direct (eg, wired) communication channel or a wireless communication channel between the electronic device 101 and an external electronic device (eg, the electronic device 102, the electronic device 104, or the server 108). It can support establishing and performing communication through the established communication channel.
  • the communication module 190 operates independently of the processor 120 (eg, an application processor) and may include one or more communication processors supporting direct (eg, wired) communication or wireless communication.
  • the communication module 190 may include a wireless communication module 192 (eg, a cellular communication module, a short-range wireless communication module, or a global navigation satellite system (GNSS) communication module) or a wired communication module 194 (eg : Local area network (LAN) communication module, or power line communication module.
  • a wireless communication module 192 eg, a cellular communication module, a short-range wireless communication module, or a global navigation satellite system (GNSS) communication module
  • GNSS global navigation satellite system
  • LAN Local area network
  • Corresponding communication module among these communication modules includes a first network 198 (eg, a short-range communication network such as Bluetooth, WiFi direct, or infrared data association (IrDA)) or a second network 199 (eg, a cellular network, the Internet, Or, it may communicate with an external electronic device through a computer network (eg, a telecommunication network such as a LAN or WAN).
  • a computer network eg, a telecommunication
  • the wireless communication module 192 uses a subscriber information (eg, International Mobile Subscriber Identifier (IMSI)) stored in the subscriber identification module 196 in a communication network such as the first network 198 or the second network 199.
  • IMSI International Mobile Subscriber Identifier
  • the antenna module 197 may transmit a signal or power to the outside (eg, an external electronic device) or receive it from the outside.
  • the antenna module 197 may include a single antenna including a conductor formed on a substrate (eg, a PCB) or a radiator made of a conductive pattern.
  • the antenna module 197 may include a plurality of antennas. In this case, at least one antenna suitable for a communication method used in a communication network, such as the first network 198 or the second network 199, is transmitted from the plurality of antennas by, for example, the communication module 190. Can be selected.
  • the signal or power may be transmitted or received between the communication module 190 and an external electronic device through the at least one selected antenna.
  • other components eg, RFIC
  • other than the radiator may be additionally formed as part of the antenna module 197.
  • peripheral devices for example, a bus, a general purpose input and output (GPIO), a serial peripheral interface (SPI), or a mobile industry processor interface (MIPI)
  • GPIO general purpose input and output
  • SPI serial peripheral interface
  • MIPI mobile industry processor interface
  • commands or data may be transmitted or received between the electronic device 101 and the external electronic device 104 through the server 108 connected to the second network 199.
  • Each of the electronic devices 102 and 104 may be the same or a different type of device from the electronic device 101.
  • all or some of the operations performed on the electronic device 101 may be performed on one or more external electronic devices of the external electronic devices 102, 104, or 108.
  • the electronic device 101 when the electronic device 101 needs to perform a certain function or service automatically or in response to a request from a user or another device, the electronic device 101 instead executes the function or service itself.
  • one or more external electronic devices may be requested to perform at least a portion of the function or the service.
  • the one or more external electronic devices receiving the request may execute at least a part of the requested function or service, or an additional function or service related to the request, and deliver the result of the execution to the electronic device 101.
  • the electronic device 101 may process the result, as it is or additionally, and provide it as at least part of a response to the request.
  • cloud computing, distributed computing, or client-server computing technology can be used, for example.
  • FIG. 2 is a block diagram 200 illustrating a camera module 180 according to various embodiments.
  • the camera module 180 includes a lens assembly 210, a flash 220, an image sensor 230, an image stabilizer 240, a memory 250 (eg, a buffer memory), or an image signal processor It may include (260).
  • the lens assembly 210 may collect light emitted from a subject that is an object of image capture.
  • the lens assembly 210 may include one or more lenses.
  • the camera module 180 may include a plurality of lens assemblies 210. In this case, the camera module 180 may form, for example, a dual camera, a 360 degree camera, or a spherical camera.
  • Some of the plurality of lens assemblies 210 have the same lens properties (eg, angle of view, focal length, autofocus, f number, or optical zoom), or at least one lens assembly is another lens assembly It may have one or more lens properties different from the lens properties of.
  • the lens assembly 210 may include, for example, a wide-angle lens or a telephoto lens.
  • the flash 220 may emit light used to enhance light emitted or reflected from the subject.
  • the flash 220 may include one or more light emitting diodes (eg, red-green-blue (RGB) LED, white LED, infrared LED, or ultraviolet LED), or xenon lamp.
  • the image sensor 230 may obtain an image corresponding to the subject by converting light emitted from or reflected from the subject and transmitted through the lens assembly 210 into an electrical signal.
  • the image sensor 230 is, for example, an RGB sensor, a black and white (BW) sensor, an IR sensor, or an image sensor selected from among image sensors having different attributes, such as a UV sensor, the same It may include a plurality of image sensors having attributes, or a plurality of image sensors having different attributes.
  • Each image sensor included in the image sensor 230 may be implemented using, for example, a charged coupled device (CCD) sensor or a complementary metal oxide semiconductor (CMOS) sensor.
  • CCD charged coupled device
  • CMOS complementary metal oxide semiconductor
  • the image stabilizer 240 may move at least one lens or image sensor 230 included in the lens assembly 210 in a specific direction in response to the movement of the camera module 180 or the electronic device 101 including the same.
  • the operating characteristics of the image sensor 230 may be controlled (eg, read-out timing may be adjusted). This makes it possible to compensate for at least some of the negative effects of the motion on the image being shot.
  • the image stabilizer 240 uses a gyro sensor (not shown) or an acceleration sensor (not shown) disposed inside or outside the camera module 180 to provide a camera module 180 or an electronic device 101 ) Can detect such movement.
  • the image stabilizer 240 may be implemented as, for example, an optical image stabilizer.
  • the memory 250 may temporarily store at least a part of the image acquired through the image sensor 230 for the next image processing operation. For example, when the image acquisition according to the shutter is delayed, or when a plurality of images are acquired at high speed, the acquired original image (eg, a Bayer-patterned image or a high resolution image) is stored in the memory 250 , The corresponding copy image (eg, a low resolution image) may be previewed through the display device 160. Thereafter, when a specified condition is satisfied (eg, a user input or a system command), at least a part of the original image stored in the memory 250 may be obtained and processed, for example, by the image signal processor 260. According to an embodiment, the memory 250 may be configured as at least a part of the memory 130 or a separate memory operated independently of the memory 130.
  • the image signal processor 260 may perform one or more image processes on an image acquired through the image sensor 230 or an image stored in the memory 250.
  • the one or more image processes include, for example, depth map generation, three-dimensional modeling, panorama generation, feature point extraction, image synthesis, or image compensation (eg, noise reduction, resolution adjustment, brightness adjustment, blurring ( blurring, sharpening, or softening.
  • the image signal processor 260 controls for at least one of the components included in the camera module 180 (eg, the image sensor 230) (eg, exposure time control, or lead-out timing control) Etc.).
  • the image processed by the image signal processor 260 is stored in the memory 250 again for further processing or external components of the camera module 180 (eg, the memory 130, the display device 160, the electronic device ( 102), the electronic device 104, or the server 108.
  • the image signal processor 260 may be configured as at least a part of the processor 120 or a separate processor that operates independently of the processor 120.
  • the image signal processor 260 is composed of a processor and a separate processor, at least one image processed by the image signal processor 260 is displayed as it is or after additional image processing by the processor 120 It may be displayed through the device 160.
  • the electronic device 101 may include a plurality of camera modules 180 each having different attributes or functions.
  • at least one of the plurality of camera modules 180 may be a wide-angle camera and at least another may be a telephoto camera.
  • at least one of the plurality of camera modules 180 may be a front camera, and at least another one may be a rear camera.
  • FIG. 3 is a block diagram 300 illustrating an electronic device according to various embodiments.
  • the electronic device 301 (eg, the electronic device 101 of FIG. 1) includes a wireless communication circuit 310 (eg, the communication module 190 of FIG. 1 ), a memory 320 (eg: The memory 130 of FIG. 1 ), the touch screen display 330 (eg, the display device 160 of FIG. 1 ), the camera 340 (eg, the camera module 180 of FIG. 1 ), the sensing unit 350 (Eg, sensor module 176 of FIG. 1 ), and a processor 360 (eg, processor 120 of FIG. 1 ).
  • a wireless communication circuit 310 eg, the communication module 190 of FIG. 1
  • a memory 320 eg: The memory 130 of FIG. 1
  • the touch screen display 330 eg, the display device 160 of FIG. 1
  • the camera 340 eg, the camera module 180 of FIG. 1
  • the sensing unit 350 Eg, sensor module 176 of FIG. 1
  • a processor 360 eg, processor 120 of FIG. 1
  • the wireless communication circuit 310 (eg, the communication module 190 of FIG. 1) includes an electronic device 301 (eg, the electronic device 101 of FIG. 1) and an external electronic device (eg, FIG. Communication between the electronic device 102, the electronic device 104 of 1, or a server (eg, the server 108 of FIG. 1) may be connected.
  • an electronic device 301 eg, the electronic device 101 of FIG. 1
  • an external electronic device eg, FIG. Communication between the electronic device 102, the electronic device 104 of 1, or a server (eg, the server 108 of FIG. 1) may be connected.
  • the memory 320 (eg, the memory 130 of FIG. 1) includes an operation program of the camera 340 and a program according to embodiments of the present invention, and images taken from the camera 340. Can be saved.
  • the memory 320 may store a reference value to determine whether an object (eg, a user's finger) is detected in the camera 340.
  • the touch screen display 330 (eg, the display device 160 of FIG. 1) may be configured as an integral type including the display 331 and the touch panel 333.
  • the touch screen display 330 may display an image received from the camera 340 as a preview image.
  • the touch screen display 330 may display a notification that the object is detected on the camera 340 when it is determined that the object is detected by the camera 340 under the control of the processor 360.
  • the touch screen display 330 displays a pop-up window under the control of the processor 360, or displays a preview image by mixing pixels obtained from one of the at least one camera and pixels obtained from the other camera, or Alternatively, an image obtained from the camera where the object is detected may be displayed as a preview image.
  • the present invention is not limited thereto, and the notification is provided as a sound through a speaker (for example, the sound output device 155 of FIG. 1) under the control of the processor 360, or a haptic module (for example, the haptic module 179 of FIG. 1). )).
  • a speaker for example, the sound output device 155 of FIG. 1
  • a haptic module for example, the haptic module 179 of FIG. 1).
  • the camera 340 (eg, the camera module 180 of FIG. 1) transmits the collected image to the display 331 as a preview image, so that the user checks the image projected through the camera 340 You can do it.
  • the camera 340 may generate image data by photographing the collected image at the time when the input requesting the photographing occurs in response to an input requesting photographing.
  • the camera 340 may include a first camera 341 and a second camera 343.
  • the shooting using the first camera 341 and the shooting using the second camera 343 may be performed simultaneously.
  • the first camera 341 may take an image indicating a wider range compared to the second camera 343.
  • the first camera 341 may provide a wider angle of view compared to the second camera 343.
  • an image obtained from one of the cameras 340 may be displayed on the display 331 as a preview image.
  • the image obtained from the other camera, for example, the second camera 343, is not displayed on the display 331 as a preview image, but compared with the image obtained from the one camera, for example, the first camera 341, of high quality. It may contain an image.
  • the electronic device 301 may have more than two cameras.
  • the sensing unit 350 surrounds the first camera 341 and the second camera 343 provided on the rear surface of the electronic device 301. It may be connected to a deco member formed of a conductive material (eg, a metal material).
  • the sensing unit 350 may include a grip sensor and/or a touch integrated circuit (IC).
  • the sensing unit 350 detects an object (eg, a user's finger) on a deco member formed of a conductive material surrounding the first camera 341 and the second camera 343 (eg, by proximity or contact). It is possible to detect a change in the capacitance value.
  • the sensing unit 350 may transmit the sensed changed capacitance value to the processor 360.
  • the processor 360 controls the overall operation of the electronic device 301 and the signal flow between the internal components of the electronic device 301, and performs data processing. It can perform, and control the power supply from the battery to the above components.
  • the processor 360 acquires a capacitance value for a deco member formed to surround the first camera 341 and the second camera 343 with a conductive material at a specified time interval through the sensing unit 350 can do.
  • the processor 360 may detect a change in the acquired capacitance value.
  • the processor 360 may acquire a capacitance value for the deco member through the sensing unit 350, and detect a change in the capacitance value based on this.
  • the processor 360 may determine whether the changed capacitance value exceeds a specified value, and based on this, determine whether an object (eg, a user's finger) is detected by the camera 340. When it is determined that the object is detected by the camera 340, the processor 360 may provide a notification that the object is detected to the camera 340.
  • an object eg, a user's finger
  • the processor 360 may perform a photographing function in response to a user input for performing photographing using the camera 340.
  • the processor 360 may control at least one parameter value for the first image obtained from the first camera 341.
  • the operation of comparing at least one parameter value for the second image obtained from the 2 camera 343 may be further performed.
  • the at least one parameter value may include at least one of brightness information, contrast information, phase information, or boundary lines extracted from the image.
  • the processor 360 compares parameter values between pixels of the same coordinates of the first image and the second image, or compares parameter values between the same region of the first image and the second image partitioned by a specified number, or the region At least one parameter value for a specified number of pixels may be compared.
  • the processor 360 may provide a notification that the object is detected by the camera 340.
  • FIG. 4 is a diagram 400 illustrating a plurality of camera structures according to various embodiments.
  • the electronic device 401 (eg, the electronic device 301 of FIG. 3) has a plurality of cameras on the rear surface 430, such as a first camera 415. (Eg, the first camera 341 in FIG. 3) and the second camera 420 (eg, the second camera 343 in FIG. 3) may be provided.
  • the back surface 430 of the electronic device 401 may be formed of a non-conductive material (eg, glass or plastic material).
  • a deco member 425 surrounding the first camera 415 and the second camera 420 may be formed on the rear surface 430 of the electronic device 401.
  • the deco member 425 may be formed of a conductive material (eg, a metal material).
  • the first camera 415 and the second camera 420 are covered on the rear surface 430 of the electronic device 401, and the first camera 415 and the second camera 420 are respectively A camera window 435 exposing the lens may be formed.
  • the camera window 435 may be formed of a non-conductive material.
  • the camera window 435 may not be formed on the rear surface 430 of the electronic device 401.
  • the deco member 425 may be formed to surround the camera window 435.
  • a plurality of cameras for example, the first camera 415 and the second camera 420 may be provided on the substrate 440.
  • the substrate 440 may include a printed circuit board (PCB), or a flexible printed circuit board (FPCB).
  • a contact 445 may be provided on the substrate 440 such that the substrate 440 and the deco member 425 are connected.
  • a processor may determine whether an object, for example, a user's finger is detected, in at least one of the first camera 415 and the second camera 420.
  • the processor includes a sensing unit (eg, a sensing unit 350 in FIG.
  • a deco member 425 formed of a conductive material surrounding the first camera 415 and the second camera 420 (eg, a grip sensor)
  • FIG. 5 is a circuit diagram 500 illustrating a method of sensing an object in at least one camera based on a capacitance value, according to various embodiments.
  • the electronic device (eg, the electronic device 301 of FIG. 3) includes a sensing unit 520 (eg, the sensing unit 350 of FIG. 3) and a deco member 510 (eg, of FIG. 4) Deco member 425) may include a first capacitor (capacitor) 530 connected between and a second capacitor (capacitor) 540 connected between the sensing unit 520 and the ground.
  • the sensing unit 520 may include a grip sensor and/or a touch integrated circuit (IC).
  • IC touch integrated circuit
  • the first capacitor 530 connected between the sensing unit 520 and the deco member 510 may adjust the sensitivity of the capacitance as the object approaches the deco member 510.
  • the second capacitor 540 connected between the sensing unit 520 and the ground may block an electrostatic discharge (ESD) voltage generated from the ground.
  • ESD electrostatic discharge
  • the ESD voltage is cut off, it is possible to prevent the ESD voltage generated from the ground from being transmitted to the user.
  • the ESD function is blocked when the camera function is activated, it is possible to prevent malfunction of the camera function as well as to prevent malfunction of the sensing unit 520 as the ESD voltage is applied to the decor member 510.
  • the processor may control the sensing unit 520 and the deco member 510 to be electrically connected.
  • the sensing unit 520 may detect a change in a capacitance value for the decor member 510.
  • the sensing unit 520 may transmit the sensed capacitance change value to the processor.
  • the processor based on the capacitance change value received from the sensing unit 520, at least one camera (eg, the first camera 415 or the second camera 420 of FIG. 4) object (for example: it is possible to determine whether the user's finger) is detected. For example, if the capacitance change value exceeds a specified value, the processor may determine that an object is detected in the at least one camera. If the capacitance change value does not exceed the specified value (eg, hereinafter), the processor may determine that the object is not detected in the at least one camera.
  • the processor may determine that the object is not detected in the at least one camera.
  • the processor may provide a notification that the object is detected by the at least one camera. Through the provided notification, the user can intuitively confirm that at least one camera is obscured by the object.
  • FIG. 6 is a diagram 600 illustrating a plurality of camera structures according to various embodiments.
  • the electronic device 601 includes a plurality of cameras, for example, a rear surface 645 (eg, a rear surface 430 of the electronic device 401 of FIG. 4).
  • 1 camera 615 e.g., first camera 341 in FIG. 3, first camera 415 in FIG. 4
  • second camera 630 e.g., second camera 343 in FIG. 3, FIG. 4
  • the second camera 420 may be provided.
  • the back surface 645 of the electronic device 601 may be formed of a non-conductive material (eg, glass or plastic material).
  • a first deco member 620 and a second deco member 635 surrounding each of the first camera 615 and the second camera 630 on the back 645 of the electronic device 601 Can be formed.
  • the first deco member 620 and the second deco member 635 may be formed of a conductive material (eg, a metal material).
  • a first camera window 625 covering the first camera 615 may be formed on the rear surface 645 of the electronic device 601 and exposing the lens of the first camera 615.
  • a second camera window 640 that covers the second camera 630 provided on the rear 645 and exposes the lens of the second camera 630 may be formed on the rear 645 of the electronic device 601. Can.
  • the first camera window 625 and the second camera window 640 may be formed of a non-conductive material.
  • first camera window 625 and the second camera window 640 may not be formed on the rear surface 645 of the electronic device 601.
  • first camera window 625 and the second camera window 640 are formed on the rear surface 645 of the electronic device 601, the first deco member 620 and the second deco member 635 )
  • Each of the first camera window 625 and the second camera window 640 may be formed to surround each.
  • a plurality of cameras for example, the first camera 615 and the second camera 630 may be provided on the substrate 650.
  • a first contact 655 may be provided on the substrate 650 such that at least a portion of the substrate 650 and the first decor member 620 are connected.
  • a second contact 660 may be provided on the substrate 650 such that at least a portion of the substrate 650 and the second decor member 635 are connected.
  • an object eg, a user
  • a processor for example, the processor 360 of FIG. 3 is an object in at least one camera of the first camera 615 and the second camera 630
  • the processor may include a sensing unit (eg, sensing of FIG. 3) connected to the first deco member 620 and the second deco member 635 formed of a conductive material surrounding the first camera 615 and the second camera 630.
  • the unit 350 eg, a grip sensor and/or a touch IC
  • FIG. 7 is a circuit diagram 700 for describing a method of sensing an object in at least one camera based on a capacitance value, according to various embodiments.
  • an electronic device (eg, the electronic device 301 of FIG. 3) includes a sensing unit 730 (eg, the sensing unit 350 of FIG. 3) and a first decor member 710 (eg, FIG. It may include a first capacitor (740) connected between the first deco member (620) of (6) and a second capacitor (capacitor) 750 connected between the sensing unit 730 and the ground.
  • the electronic device includes a third capacitor 760 and the sensing unit 730 connected between the sensing unit 730 and the second deco member 720 (eg, the second deco member 635 of FIG. 6 ). It may include a fourth capacitor (capacitor) 770 connected between the ground.
  • the first capacitor 740 and the third capacitor 760 adjust the sensitivity of the capacitance as the object approaches the first deco member 710 and/or the second deco member 720 can do.
  • the second capacitor 750 and the fourth capacitor 770 may block an electrostatic discharge (ESD) voltage generated from ground. It is possible to prevent the ESD voltage generated from the ground from being transmitted to the user.
  • ESD electrostatic discharge
  • the processor may control the sensing unit 730 to be electrically connected to the first deco member 710 and the second deco member 720.
  • the sensing unit 730 may detect a change in the capacitance value of the first deco member 710 and/or the second deco member 720.
  • the sensing unit 730 may transmit the sensed capacitance change value to a processor (eg, the processor 360 of FIG. 3 ).
  • the processor is a first camera (eg, the first camera 615 of FIG. 6) or a second camera (eg, the second of FIG. 6) based on the capacitance change value received from the sensing unit 730.
  • the camera 630 may determine whether an object (eg, a user's finger) is detected. For example, when the capacitance change value for the first deco member 710 received from the sensing unit 730 exceeds a specified value, the processor detects an object in the first camera included in the first deco member 710. You can decide. Alternatively, when the capacitance change value for the second deco member 720 received from the sensing unit 730 exceeds a specified value, the processor determines that the object is detected by the second camera included in the second deco member 720. Can decide.
  • the processor May determine that the object is not detected by the first camera or the second camera.
  • the processor may provide a notification that the object is detected by the at least one camera. Through the provided notification, the user can intuitively confirm that at least one camera is obscured by the object.
  • first deco member 710 and the second deco member 720 are described as being connected to the sensing unit 730, when a plurality of sensing units are provided, the first deco member is provided in each of the plurality of sensing units. 710 and the second deco member 720 may be connected.
  • the user may make the object the first camera. It is possible to accurately check whether it is detected by or in the second camera.
  • FIG. 8 is a flow chart 800 for describing a method for sensing an object in at least one camera based on a capacitance value, according to various embodiments.
  • the processor detects a change in the capacitance value obtained through at least one sensing unit (eg, the sensing unit 350 of FIG. 3) in operation 801. can do.
  • the processor displays an image obtained from one of at least one camera (eg, first camera 341 and second camera 343 in FIG. 3) as a preview image (Eg, display 331 in FIG. 3).
  • the image obtained from the other camera is not displayed on the display as a preview image, but may include an image with a narrower angle of view compared to the image obtained from the one camera.
  • the processor may include at least one deco member (eg, a deco member 510 of FIG. 5, a first deco member 710 of FIG. 7, and a second deco member 720). )) and a sensing unit (eg, the sensing unit 520 of FIG. 5 and the sensing unit 730 of FIG. 7) can be controlled to be electrically connected.
  • the at least one deco member is made of a conductive material (eg, a metal material), such that the back of the electronic device (eg, the back 430 of the electronic device 401 of FIG. 4 and the back of the electronic device 601 of FIG. 6) (645)) may be formed to surround at least one camera.
  • the processor may acquire a capacitance value for at least one deco member formed to surround the at least one camera with a conductive material at a specified time interval through at least one sensing unit.
  • the processor may detect a change in the capacitance value based on the capacitance value obtained through at least one sensing unit. For example, the processor detects an object (eg, a user's finger) on at least one deco member formed to surround the at least one camera with the conductive material through at least one sensing unit (eg, detected by proximity or contact). It is possible to detect a change in the capacitance value.
  • a capacitance value for at least one deco member at a specified time interval through at least one sensing unit and detecting a change in the capacitance value when the camera function is activated, but is not limited thereto.
  • a capacitance value for at least one deco member may be acquired through at least one sensing unit, and based on this, a change in the capacitance value may be detected.
  • the processor may determine whether the changed capacitance value exceeds a specified value in operation 803. For example, the processor may determine whether to detect an object in at least one camera based on whether the changed capacitance value exceeds the specified value.
  • the processor determines, in operation 805, that the object is detected by the at least one camera.
  • Notifications can be provided.
  • the notification that the object is detected in the at least one camera is displayed as a preview image by mixing a vibration, a pop-up window, a pixel obtained from one of the at least one camera, and a pixel obtained from the other camera,
  • an image obtained from the camera where the object is sensed may be provided as at least one of the display on the display as a preview image. The user can intuitively confirm that the at least one camera is obscured by the object through the notification that the object is detected in the provided at least one camera.
  • the processor photographs using the at least one camera in operation 807.
  • the photographing function may be performed in response to a user input for performing.
  • FIG. 9 is a diagram 900 for describing a method of detecting an object in at least one camera based on parameter values for an image according to various embodiments.
  • a processor (eg, the processor 360 of FIG. 3) is a first obtained from a first camera (eg, the first camera 341 of FIG. 3) as shown in reference numeral ⁇ 910>.
  • An object in at least one camera through comparison of the image 915 and the second image 955 obtained from the second camera (eg, the second camera 343 in FIG. 3) as shown in reference number ⁇ 950> For example, it may be determined whether the user's finger 960 is detected.
  • the processor uses the at least one of brightness information, contrast information, phase information, or boundary lines extracted from each image of the first image 915 and the second image 955 to determine the user's It can be determined whether the finger 960 is detected.
  • the user's finger 960 is detected on at least a portion of the second camera while displaying the image 915 obtained from the first camera as a preview image on the display (eg, the display 331 of FIG. 3 ). It is assumed that it has been done.
  • the amount of light obtained through the second camera may be small compared to the amount of light obtained through the first camera.
  • the brightness information of the second image 955 obtained from the second camera is the first image 915 obtained from the first camera It may be lower than the brightness information.
  • the processor may calculate a difference in brightness information (eg, brightness value) between pixels of the same coordinates of the first image 915 and the second image 955. Based on the calculated difference in brightness information, the processor may determine that the user's finger 960 is sensed (eg, close or in contact) in at least a portion of the second camera.
  • a difference in brightness information eg, brightness value
  • the second camera determines whether the user's finger 960 is detected based on the brightness information, but is not limited thereto, and the difference in contrast value, phase difference, or extracted from the image
  • the second camera may determine whether the user's finger 960 is detected based on the boundary line.
  • the processor may compare the contrast value for the first image 915 obtained from the first camera and the contrast value for the second image 955 obtained from the second camera. When the difference between the contrast values for the two images 915 and 955 exceeds the specified value through the comparison operation, the processor detects (eg, close or touches) the user's finger 960 on at least a portion of the second camera. You can decide.
  • the processor may perform the contrast of the subject obtained from each of the first camera and the second camera (eg, based on the difference between the light and dark areas, the focus on the subject may be automatically adjusted (eg, contrast AF (auto focus)).
  • contrast AF auto focus
  • the processor adjusts the contrast AF of the first camera providing the preview image and the contrast AF of the second camera, and then detects whether the user's finger 960 is detected in at least a portion of the second camera Can be.
  • the processor since the contrast difference for each image obtained from each camera may vary according to the AF value (eg, an image for a subject when focus is achieved) Since the contour of the image is high and the contrast is high, and the image is out of focus, the contour of the image may be blurred and the contrast may be lowered).
  • the processor may adjust the contrast AF for the subject obtained from the first camera, and then adjust the contrast AF for the subject acquired from the second camera using the autofocus value of the first camera.
  • the sensing unit eg, the sensing unit 350 of FIG. 3
  • a user's finger is at least a part of the second camera based on the phase difference obtained through the phase difference AF sensor It is possible to detect whether 960 is detected. For example, as the user's finger 960 is detected in at least a portion of the second camera, the phase difference AF value of the second camera may be different from the phase difference AF value of the first camera in which the user's finger 960 is not detected. have.
  • the processor detects (eg, close or touches) the user's finger 960 on at least a portion of the second camera. You can decide.
  • the boundary line extracted from the second image 955 obtained from the second camera may be different from the boundary line extracted from the first image 915 obtained from the first camera where the user's finger 960 is not detected.
  • the processor may determine whether the user's finger 960 is detected in at least a portion of the second camera by comparing the boundary line extracted from the first image 915 with the boundary line extracted from the second image 955. .
  • the at least one camera is used by using at least one of the brightness information, contrast information, phase information, or boundary lines extracted from each image of the first image 915 and the second image 955 described above. It is determined whether the user's finger 960 is detected, and based on this, a notification that the user's finger 960 is detected may be provided by the at least one camera.
  • FIG. 10 is a diagram 1000 illustrating a method of sensing an object in at least one camera based on parameter values for an image according to various embodiments.
  • a processor (eg, the processor 360 of FIG. 3) is a first obtained from a first camera (eg, the first camera 341 of FIG. 3) as shown in reference numeral ⁇ 1010>.
  • An object in at least one camera through comparison of the image 1015 and the second image 1055 obtained from the second camera (eg, the second camera 343 in FIG. 3) as shown in reference numeral ⁇ 1050>. For example, it may be determined whether the user's finger 1060 is detected.
  • a user's finger 1060 is detected on at least a portion of the second camera while displaying the image 1015 obtained from the first camera as a preview image on the display (eg, the display 331 of FIG. 3 ). It is assumed that it has been done.
  • the processor may divide the first image 1015 and the second image 1055 for each zone to determine whether the user's finger 1060 is detected in at least one camera.
  • the number of zones for the partitioned image is assumed to be nine, but is not limited thereto, and the maximum number of pixels of the image sensor embedded in each of the first camera and the second camera (Eg, 256).
  • a parameter value for a specified number (eg, 10) of pixels in each zone of the first image 1015 (eg, first to ninth zones) and each of the first image 1015 It is possible to compare parameter values for a specified number of pixels (for example, 10) in a region (eg, the first to ninth regions) of the second image 1055 corresponding to the region.
  • the parameter value may include at least one of brightness information, contrast information, phase information, or a boundary line extracted from an image.
  • the processor may compare brightness information for a specified number of pixels in the first image 1015 (eg, average brightness information) and brightness information for a specified number of pixels in the second image 1055.
  • the brightness information for the specified number of pixels in the second image 1055 is the number of the specified number in the first image 1015 as the user's finger 1060 is detected (eg, close or in contact) with at least a portion of the second camera. It may be lower than the average brightness information for the pixel. If the difference in brightness information for the specified number of pixels in the first image 1015 and the second image 1055 exceeds a specified value, the processor may determine that the user's finger 1060 is detected in at least one camera. have.
  • the difference and phase of the contrast information for the specified number of pixels in the same manner as determining whether the object 1060 is detected in at least one camera based on the difference in brightness information for the specified number of pixels described above. It is possible to determine whether a user's finger 1060 is detected in at least one camera based on a boundary extracted from a difference or image.
  • the processor is configured to compare a user's finger with at least one camera by comparing a parameter value for a specified number of pixels in a first image 1015 and a parameter value for a specified number of pixels in a second image 1055. If it is determined that 1060 is detected, a notification that the object is detected may be provided to the at least one camera.
  • the processor may quickly detect an object in at least one camera through an operation of comparing only parameter values for a specified number of pixels in each region of the first image 1015 and the second image 1055 Can.
  • the processor corresponds to a parameter value of each zone of the first image 1015 (eg, first zone to ninth zone) and each zone of the first image 1015.
  • the parameter values of the regions of the second image 1055 may be compared.
  • the camera may be covered.
  • the object may be detected in an area in the image, for example, an outer area or a central area among the first to ninth areas.
  • the processor may assign a higher priority to the outer zone or the central zone among the first to ninth zones as a zone for comparing parameter values.
  • the processor may include parameter values of the outer zone (or central zone) of the first image 1015 and the outer zone of the second image 1055 corresponding to the outer zone (or central zone) of the first image 1015.
  • the parameter values of the zone (or central zone) can be compared. By first comparing the parameter values of an area where an object is likely to be detected, an object in at least one camera can be quickly detected.
  • 11 is a diagram 1100 for describing a method of detecting an object in at least one camera based on parameter values for an image according to various embodiments.
  • a processor may include a first image (eg, a first camera 341 from the first camera (eg, the first camera 341 of FIG. 3 )) as shown in reference numeral ⁇ 1110>. 1115), and a second image 1155 may be obtained from a second camera (eg, the second camera 343 in FIG. 3) as shown in reference numeral ⁇ 1150>.
  • the processor may extract a boundary line from the first image 1115 and the second image 1155.
  • a method of detecting a border between colors of a subject included in the first image 1115 and the second image 1155 according to an embodiment is a known technique, and a person having ordinary knowledge in the technical field of the present invention Since it is self-evident, the detailed description will be omitted.
  • the processor may compare the boundary line extracted from the first image 1115 and the boundary line extracted from the second image 1155.
  • a specific area of the second image 1155 corresponds to a specific area of the second image 1155 as the boundary 1165 is extracted by an object detected by the second camera, for example, the user's finger 1160.
  • the boundary of a specific area of the image 1115 may be different.
  • the processor determines that the user's finger 1160 is detected in at least one camera, and the at least one The camera may provide a notification that the object is detected.
  • FIG. 12 is a flowchart 1200 illustrating a method of sensing an object in at least one camera based on parameter values for an image according to various embodiments.
  • the processor first image (eg, the first image of FIGS. 9 to 11) from the first camera (eg, first camera 341 of FIG. 3) (915, 1015, 1115), and a second image (eg, second image 955, 1055, 1155 of FIGS. 9 to 11) from a second camera (eg, second camera 343 of FIG. 3) )).
  • first image eg, the first image of FIGS. 9 to 11
  • a second image eg, second image 955, 1055, 1155 of FIGS. 9 to 11
  • an object eg, a user's finger (eg, a user's finger (eg, : It will be described on the assumption that the user's fingers 960, 1060, and 1160 in FIGS. 9 to 11 are detected.
  • the processor may compare at least one parameter value for the first image obtained from the first camera and at least one parameter value for the second image obtained from the second camera.
  • the at least one parameter value may include at least one of brightness information, contrast information, phase information, or boundary lines extracted from the image.
  • the processor compares parameter values between pixels of the same coordinates of the first image and the second image, compares parameter values between the same region of the first image and the second image partitioned by the specified number, or a specified number of regions within the region You can compare the parameter values for the pixels of.
  • the processor may determine whether an object is detected in at least one camera in operation 1205 through the comparison operation. For example, the processor may generate an object in at least one camera based on at least one of a case in which a difference between brightness information, contrast information, and phase information exceeds a specified value or a boundary line extracted from each image is determined to be different through the comparison. You can decide whether it is detected.
  • the processor may provide a notification that the object is detected in the at least one camera in operation 1207.
  • the user can intuitively confirm that the at least one camera is obscured by the object through the notification that the object is detected in the provided at least one camera.
  • the processor performs a shooting function in operation 1209 in response to a user input for performing shooting using the at least one camera. Can.
  • a weight may be assigned to each of the at least one parameter value, and the processor may determine whether an object is detected in at least one camera based on the at least one parameter value having a high weight.
  • the at least one parameter value includes at least one of brightness information, contrast information, phase information, or a boundary line extracted from the image, and the weight is high in the order of brightness information, contrast information, phase information, and boundary line extracted from the image. It is assumed that it is given.
  • the processor may determine whether an object is detected in at least one camera based on at least one parameter value having high weight, for example, brightness information.
  • the present invention is not limited thereto, and the processor may determine whether an object is detected in at least one camera based on two or more high-weighted parameter values, such as brightness information and contrast information.
  • FIG. 13 is a flowchart 1300 for explaining a method of sensing an object in at least one camera based on a capacitance value and a parameter value for an image according to various embodiments.
  • FIG. 13 is a view for explaining a method of sensing an object in at least one camera using the capacitance value of FIG. 8 and the parameter value of FIG. 12.
  • operations 1301 and 1303 are the same as operations 801 and 803 of FIG. 8 described above, and operations 1305 to 1311 are the same as operations 1201 to 1209 of FIG. 12 described above, and thus detailed descriptions thereof. It will be replaced with the description related to FIGS. 8 and 12 above.
  • the processor detects a change in the capacitance value obtained through at least one sensing unit (eg, the sensing unit 350 of FIG. 3) in operation 1301. can do.
  • the processor may determine, in operation 1303, whether the changed capacitance value exceeds a specified value. If the changed capacitance value exceeds the specified value, the processor in operation 1305, the first image (eg, the first camera 341 of FIG. 3) obtained from the first image (eg, the first of FIGS. 9 to 11) At least one parameter value for the first image (915, 1015, 1115) and a second image (eg, the second image from FIGS. 9 to 11) obtained from the second camera (eg, the second camera 343 in FIG. 3) It is possible to compare at least one parameter value for 2 images (955, 1055, 1155).
  • the processor determines whether an object is detected in at least one camera in operation 1307, and if the object is detected, in operation 1309, the object is detected in the at least one camera. It can provide notification of being.
  • the processor uses at least one camera in operation 1311 In response, a photographing function may be performed in response to a user input for performing photographing.
  • FIG. 14 is a diagram 1400 illustrating a case in which an object is detected in at least one camera according to various embodiments.
  • an electronic device for example, the electronic device 301 of FIG. 3 has a first camera 1415 at the rear (for example, the third device of FIG. 3). 1 camera 341) and a second camera 1420 (eg, the second camera 343 in FIG. 3).
  • the electronic device includes at least one deco member 1425 surrounding the first camera 1415 and the second camera 1420 on a rear surface (for example, the deco member 510 of FIG. 5 and the first deco member of FIG. 7 ). (710), the second deco member (720).
  • the at least one deco member 1425 may be formed of a conductive material (eg, a metal material).
  • the processor (eg, the processor 360 of FIG. 3) includes a sensing unit (eg, the sensing unit 350 of FIG. 3 ), a sensing unit 520 of FIG. 5, and a sensing unit 730 of FIG. 7. ) And the at least one decor member 1425 can be controlled to be electrically connected. As the sensing unit and the at least one deco member 1425 are electrically connected, the processor detects an object, such as a user's finger 1430, on the at least one deco member 1425, and a capacitance value through the sensing unit. Changes can be detected.
  • an object such as a user's finger 1430
  • a capacitance value may change as the user's finger 1430 is detected by the second camera 1420, and the processor may designate the changed capacitance value. When it exceeds, the second camera 1420 may provide a notification indicating that the user's finger 1430 is detected.
  • FIG. 15 is a diagram 1500 illustrating a method of providing a notification that an object is detected in at least one camera according to various embodiments.
  • an image obtained from the first camera (eg, the first camera 341 in FIG. 3) is displayed on the display as a preview image, and a second camera (eg, the second camera 343 in FIG. 3) It is assumed that at least a part of the user's finger 1540 is detected.
  • a processor for example, the processor 360 of FIG. 3 has a camera (for example, the camera of FIG. 3) on a display (for example, the display 331 of FIG. 3).
  • the processor may output a vibration or sound to provide a notification that at least a part of the camera is obscured by the object.
  • the processor displays the image obtained from the first camera as a preview image, but instead includes the detected user's finger 1540 obtained with the second camera. (1535) can be displayed on the display as a preview image.
  • the processor may display the first image obtained from the first camera and the second image acquired from the second camera on a display at a specified time interval. The first image and the second image may provide a notification that at least a part of the camera is obscured by an object through a blinking visual effect according to the display at the specified time interval.
  • the processor mixes the pixel 1555 for the first image obtained from the first camera and the pixel 1560 for the second image obtained from the second camera. By creating it as a preview image, it can be displayed on the display. As the pixel 1555 for the first image and the pixel 1560 for the second image are mixed and displayed as a preview image, the user's finger is displayed in the pixel 1560 region for the second image where the user's finger is located. Can be.
  • the user can intuitively confirm that the at least one camera is blocked by a finger.
  • the electronic device may be various types of devices.
  • the electronic device may include, for example, a portable communication device (eg, a smart phone), a computer device, a portable multimedia device, a portable medical device, a camera, a wearable device, or a home appliance device.
  • a portable communication device eg, a smart phone
  • a computer device e.g., a smart phone
  • a portable multimedia device e.g., a portable medical device
  • a camera e.g., a portable medical device
  • a camera e.g., a portable medical device
  • a camera e.g., a portable medical device
  • a wearable device e.g., a smart bracelet
  • a home appliance device e.g., a home appliance
  • any (eg first) component is referred to as a “coupled” or “connected” to another (eg second) component, with or without the term “functionally” or “communically” If mentioned, it means that any of the above components can be connected directly to the other components (eg by wire), wirelessly, or through a third component.
  • module may include units implemented in hardware, software, or firmware, and may be used interchangeably with terms such as, for example, logic, logic blocks, components, or circuits.
  • the module may be an integrally configured component or a minimum unit of the component or a part thereof performing one or more functions.
  • the module may be implemented in the form of an application-specific integrated circuit (ASIC).
  • ASIC application-specific integrated circuit
  • Various embodiments of the present disclosure may include one or more instructions stored in a storage medium (eg, internal memory 136 or external memory 138) readable by a machine (eg, electronic device 101). It may be implemented as software (eg, the program 140) including them.
  • a processor eg, processor 120
  • a device eg, electronic device 101
  • the one or more instructions may include code generated by a compiler or code executable by an interpreter.
  • the storage medium readable by the device may be provided in the form of a non-transitory storage medium.
  • non-transitory only means that the storage medium is a tangible device, and does not include a signal (eg, electromagnetic waves), and this term is used when data is stored semi-permanently in a storage medium. It does not distinguish between temporary storage cases.
  • a signal eg, electromagnetic waves
  • a method according to various embodiments disclosed in this document may be provided as being included in a computer program product.
  • Computer program products can be traded between sellers and buyers as products.
  • the computer program product is distributed in the form of a device-readable storage medium (eg compact disc read only memory (CD-ROM)), or through an application store (eg Play Store TM ) or two user devices ( For example, it can be distributed directly between smartphones) and online (eg, downloaded or uploaded).
  • a portion of the computer program product may be stored at least temporarily on a storage medium readable by a device such as a memory of a manufacturer's server, an application store's server, or a relay server, or may be temporarily generated.
  • each component (eg, module or program) of the above-described components may include a singular or a plurality of entities.
  • one or more components or operations among the above-described corresponding components may be omitted, or one or more other components or operations may be added.
  • a plurality of components eg, modules or programs
  • the integrated component may perform one or more functions of each component of the plurality of components the same or similar to that performed by the corresponding component among the plurality of components prior to the integration. .
  • operations performed by a module, program, or other component may be executed sequentially, in parallel, repeatedly, or heuristically, or one or more of the operations may be executed in a different order, or omitted Or, one or more other actions can be added.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)

Abstract

본 발명의 다양한 실시예들에 따르면, 전자 장치는, 하우징, 상기 하우징 외부로 노출되는 제1 카메라 및 제2 카메라, 상기 제1 카메라 및 상기 제2 카메라를 둘러싸는 전도성 재질로 형성된 적어도 하나의 데코 부재, 적어도 하나의 센싱부, 및 상기 제1 카메라, 상기 제2 카메라, 상기 적어도 하나의 데코 부재, 및 상기 적어도 하나의 센싱부와 전기적으로 연결된 프로세서를 포함하며, 상기 프로세서는, 상기 적어도 하나의 센싱부를 통해 상기 전도성 재질로 형성된 적어도 하나의 데코 부재에 대한 캐패시턴스 값을 획득하고, 카메라 기능이 활성화되고, 상기 획득된 캐패시턴스 값의 변화가 감지되면, 상기 변화된 캐패시턴스 값이 지정된 값을 초과하는지 여부를 결정하고, 및 기 변화된 캐패시턴스 값이 상기 지정된 값을 초과하면, 상기 제1 카메라 및 상기 제2 카메라 중 적어도 하나의 카메라에서 오브젝트가 감지됨에 대한 알림을 제공하도록 설정될 수 있다. 본 발명에 개시된 다양한 실시예들 이외의 다른 다양한 실시예가 가능하다.

Description

전자 장치 및 이를 이용한 카메라의 가림을 인식하는 방법
본 발명의 다양한 실시예는 전자 장치 및 이를 이용한 카메라의 가림을 인식하는 방법에 관한 것이다.
전자 장치는 피사체를 촬영하여 이미지 또는 동영상을 생성 및 저장할 수 있도록 카메라 기능을 제공하고 있다. 최근 전자 장치는 피사체에 대해 화각이 상이한 이미지 또는 영상을 획득할 수 있는 복수의 카메라(예: 듀얼 카메라)를 구비할 수 있다. 예컨대, 전자 장치는 복수의 카메라 중 하나의 카메라로부터 획득되는 제1 화각을 가지는 이미지 및 다른 카메라로부터 획득되는 제1 화각보다 좁은 화각의 제2 화각을 가지는 이미지를 획득할 수 있다. 전자 장치는 제1 화각을 가지는 이미지를 프리뷰 이미지로서 표시할 수 있으며, 제2 화각을 가지는 이미지를 프리뷰 이미지로 표시하지 않지만 제1 화각을 가지는 이미지와 합성하여 고화질 이미지로서 저장할 수 있다. 뿐만 아니라, 화각이 상이한 복수의 카메라로부터 획득된 이미지들은 이미지의 밝기, 명암비, 노이즈를 조정하거나, 또는 아웃 포커싱을 위해 이용될 수 있다.
전자 장치의 그립을 통해 피사체를 촬영하는 경우, 복수의 카메라 중 어느 하나의 카메라는 오브젝트 예컨대, 사용자의 손가락이 근접되거나, 또는 접촉됨에 따라 가려질 수 있다. 복수의 카메라 중 프리뷰 이미지로 표시하지 않는 제2 화각을 가지는 이미지를 획득할 수 있는 카메라가 오브젝트에 의해 가려지는 경우, 프리뷰 이미지로서 표시되지 않기 때문에 사용자는 카메라가 가려졌음을 인식하지 못할 수 있다. 카메라가 오브젝트에 의해 가려짐에 따라, 복수의 카메라를 통해 획득되는 복수의 이미지의 합성을 통해 고화질의 이미지를 저장할 수 없다.
본 발명의 다양한 실시예에 따른 전자 장치는, 복수의 카메라를 이용하여 피사체에 대한 이미지를 촬영할 시 센서 값 및 이미지에 대한 파라미터 값 중 적어도 하나를 이용하여 적어도 하나의 카메라에서 오브젝트가 감지되는지 여부를 결정할 수 있다. 상기 적어도 하나의 카메라에서 오브젝트가 감지되면, 전자 장치는 적어도 하나의 카메라에서 오브젝트가 감지됨에 대한 알림, 예컨대, 카메라가 오브젝트에 의해 가려졌음에 대한 알림을 사용자에게 제공할 수 있다.
본 발명의 다양한 실시예에 따른 전자 장치는, 하우징, 상기 하우징 외부로 노출되는 제1 카메라 및 제2 카메라, 상기 제1 카메라 및 상기 제2 카메라를 둘러싸는 전도성 재질로 형성된 적어도 하나의 데코 부재, 적어도 하나의 센싱부, 및 상기 제1 카메라, 상기 제2 카메라, 상기 적어도 하나의 데코 부재, 및 상기 적어도 하나의 센싱부와 전기적으로 연결된 프로세서를 포함하며, 상기 프로세서는, 상기 적어도 하나의 센싱부를 통해 상기 전도성 재질로 형성된 적어도 하나의 데코 부재에 대한 캐패시턴스 값을 획득하고, 카메라 기능이 활성화되고, 상기 획득된 캐패시턴스 값의 변화가 감지되면, 상기 변화된 캐패시턴스 값이 지정된 값을 초과하는지 여부를 결정하고, 및 상기 변화된 캐패시턴스 값이 상기 지정된 값을 초과하면, 상기 제1 카메라 및 상기 제2 카메라 중 적어도 하나의 카메라에서 오브젝트가 감지됨에 대한 알림을 제공하도록 설정될 수 있다.
본 발명의 다양한 실시예에 따른 전자 장치의 카메라의 가림을 인식하는 방법은, 적어도 하나의 센싱부를 통해 전도성 재질로 제1 카메라 및 제2 카메라를 둘러싸도록 형성된 적어도 하나의 데코 부재에 대한 캐패시턴스 값을 획득하는 동작, 카메라 기능이 활성화되고, 상기 획득된 캐패시턴스 값의 변화가 감지되면, 상기 변화된 캐패시턴스 값이 지정된 값을 초과하는지 여부를 결정하는 동작, 및 상기 변화된 캐패시턴스 값이 상기 지정된 값을 초과하면, 상기 제1 카메라 및 상기 제2 카메라 중 적어도 하나의 카메라에서 오브젝트가 감지됨에 대한 알림을 제공하는 동작을 포함할 수 있다.
본 발명의 다양한 실시예에 따른 전자 장치는, 적어도 하나의 카메라에서 오브젝트가 감지되는 경우 이에 대한 알림을 제공할 수 있다. 이에 따라, 사용자는 적어도 하나의 카메라에서 오브젝트의 감지 여부를 직관적으로 확인하고, 적어도 하나의 카메라로부터 획득되는 이미지로부터 오브젝트를 제거할 수 있다. 적어도 하나의 카메라에서 감지된 오브젝트가 획득되는 이미지로부터 제거됨에 따라, 전자 장치는 복수의 카메라를 통해 고화질의 이미지를 획득할 수 있다.
도 1은, 다양한 실시예들에 따른, 네트워크 환경 내의 전자 장치의 블록도이다.
도 2는, 다양한 실시예들에 따른, 카메라 모듈을 예시하는 블록도이다.
도 3은, 다양한 실시예들에 따른, 전자 장치를 나타내는 블록도이다.
도 4는, 다양한 실시예들에 따른, 복수의 카메라 구조를 도시한 도면이다.
도 5는, 다양한 실시예들에 따른, 캐패시턴스 값에 기초하여 적어도 하나의 카메라에서 오브젝트를 감지하는 방법을 설명하기 위한 회로도이다.
도 6은, 다양한 실시예들에 따른, 복수의 카메라 구조를 도시한 도면이다.
도 7은, 다양한 실시예들에 따른, 캐패시턴스 값에 기초하여 적어도 하나의 카메라에서 오브젝트를 감지하는 방법을 설명하기 위한 회로도이다.
도 8은, 다양한 실시예들에 따른, 캐패시턴스 값에 기초하여 적어도 하나의 카메라에서 오브젝트를 감지하는 방법을 설명하기 위한 흐름도이다.
도 9는, 다양한 실시예들에 따른, 이미지에 대한 파라미터 값에 기초하여 적어도 하나의 카메라에서 오브젝트를 감지하는 방법을 설명하기 위한 도면이다.
도 10은, 다양한 실시예들에 따른, 이미지에 대한 파라미터 값에 기초하여 적어도 하나의 카메라에서 오브젝트를 감지하는 방법을 설명하기 위한 도면이다.
도 11은, 다양한 실시예들에 따른, 이미지에 대한 파라미터 값에 기초하여 적어도 하나의 카메라에서 오브젝트를 감지하는 방법을 설명하기 위한 도면이다.
도 12는, 다양한 실시예들에 따른, 이미지에 대한 파라미터 값에 기초하여 적어도 하나의 카메라에서 오브젝트를 감지하는 방법을 설명하기 위한 흐름도이다.
도 13은, 다양한 실시예들에 따른, 캐패시턴스 값 및 이미지에 대한 파라미터 값에 기초하여 적어도 하나의 카메라에서 오브젝트를 감지하는 방법을 설명하기 위한 흐름도이다.
도 14는, 다양한 실시예들에 따른, 적어도 하나의 카메라에서 오브젝트가 감지되는 경우를 도시한 도면이다.
도 15는, 다양한 실시예들에 따른, 적어도 하나의 카메라에서 오브젝트가 감지됨에 대한 알림을 제공하는 방법을 설명하기 위한 도면이다.
도 1은, 다양한 실시예들에 따른, 네트워크 환경(100) 내의 전자 장치(101)의 블록도이다.
도 1을 참조하면, 네트워크 환경(100)에서 전자 장치(101)는 제1 네트워크(198)(예: 근거리 무선 통신 네트워크)를 통하여 전자 장치(102)와 통신하거나, 또는 제2 네트워크(199)(예: 원거리 무선 통신 네트워크)를 통하여 전자 장치(104) 또는 서버(108)와 통신할 수 있다. 일 실시예에 따르면, 전자 장치(101)는 서버(108)를 통하여 전자 장치(104)와 통신할 수 있다. 일 실시예에 따르면, 전자 장치(101)는 프로세서(120), 메모리(130), 입력 장치(150), 음향 출력 장치(155), 표시 장치(160), 오디오 모듈(170), 센서 모듈(176), 인터페이스(177), 햅틱 모듈(179), 카메라 모듈(180), 전력 관리 모듈(188), 배터리(189), 통신 모듈(190), 가입자 식별 모듈(196), 또는 안테나 모듈(197)을 포함할 수 있다. 어떤 실시예에서는, 전자 장치(101)에는, 이 구성요소들 중 적어도 하나(예: 표시 장치(160) 또는 카메라 모듈(180))가 생략되거나, 하나 이상의 다른 구성 요소가 추가될 수 있다. 어떤 실시예에서는, 이 구성요소들 중 일부들은 하나의 통합된 회로로 구현될 수 있다. 예를 들면, 센서 모듈(176)(예: 지문 센서, 홍채 센서, 또는 조도 센서)은 표시 장치(160)(예: 디스플레이)에 임베디드된 채 구현될 수 있다.
프로세서(120)는, 예를 들면, 소프트웨어(예: 프로그램(140))를 실행하여 프로세서(120)에 연결된 전자 장치(101)의 적어도 하나의 다른 구성요소(예: 하드웨어 또는 소프트웨어 구성요소)를 제어할 수 있고, 다양한 데이터 처리 또는 연산을 수행할 수 있다. 일 실시예에 따르면, 데이터 처리 또는 연산의 적어도 일부로서, 프로세서(120)는 다른 구성요소(예: 센서 모듈(176) 또는 통신 모듈(190))로부터 수신된 명령 또는 데이터를 휘발성 메모리(132)에 로드하고, 휘발성 메모리(132)에 저장된 명령 또는 데이터를 처리하고, 결과 데이터를 비휘발성 메모리(134)에 저장할 수 있다. 일 실시예에 따르면, 프로세서(120)는 메인 프로세서(121)(예: 중앙 처리 장치 또는 어플리케이션 프로세서), 및 이와는 독립적으로 또는 함께 운영 가능한 보조 프로세서(123)(예: 그래픽 처리 장치, 이미지 시그널 프로세서, 센서 허브 프로세서, 또는 커뮤니케이션 프로세서)를 포함할 수 있다. 추가적으로 또는 대체적으로, 보조 프로세서(123)는 메인 프로세서(121)보다 저전력을 사용하거나, 또는 지정된 기능에 특화되도록 설정될 수 있다. 보조 프로세서(123)는 메인 프로세서(121)와 별개로, 또는 그 일부로서 구현될 수 있다.
보조 프로세서(123)는, 예를 들면, 메인 프로세서(121)가 인액티브(예: 슬립) 상태에 있는 동안 메인 프로세서(121)를 대신하여, 또는 메인 프로세서(121)가 액티브(예: 어플리케이션 실행) 상태에 있는 동안 메인 프로세서(121)와 함께, 전자 장치(101)의 구성요소들 중 적어도 하나의 구성요소(예: 표시 장치(160), 센서 모듈(176), 또는 통신 모듈(190))와 관련된 기능 또는 상태들의 적어도 일부를 제어할 수 있다. 일 실시예에 따르면, 보조 프로세서(123)(예: 이미지 시그널 프로세서 또는 커뮤니케이션 프로세서)는 기능적으로 관련 있는 다른 구성 요소(예: 카메라 모듈(180) 또는 통신 모듈(190))의 일부로서 구현될 수 있다.
메모리(130)는, 전자 장치(101)의 적어도 하나의 구성요소(예: 프로세서(120) 또는 센서 모듈(176))에 의해 사용되는 다양한 데이터를 저장할 수 있다. 데이터는, 예를 들어, 소프트웨어(예: 프로그램(140)), 및 이와 관련된 명령에 대한 입력 데이터 또는 출력 데이터를 포함할 수 있다. 메모리(130)는, 휘발성 메모리(132) 또는 비휘발성 메모리(134)를 포함할 수 있다.
프로그램(140)은 메모리(130)에 소프트웨어로서 저장될 수 있으며, 예를 들면, 운영 체제(142), 미들 웨어(144), 또는 어플리케이션(146)을 포함할 수 있다.
입력 장치(150)는, 전자 장치(101)의 구성요소(예: 프로세서(120))에 사용될 명령 또는 데이터를 전자 장치(101)의 외부(예: 사용자)로부터 수신할 수 있다. 입력 장치(150)는, 예를 들면, 마이크, 마우스, 키보드, 또는 디지털 펜(예: 스타일러스 펜)을 포함할 수 있다.
음향 출력 장치(155)는 음향 신호를 전자 장치(101)의 외부로 출력할 수 있다. 음향 출력 장치(155)는, 예를 들면, 스피커 또는 리시버를 포함할 수 있다. 스피커는 멀티미디어 재생 또는 녹음 재생과 같이 일반적인 용도로 사용될 수 있고, 리시버는 착신 전화를 수신하기 위해 사용될 수 있다. 일 실시예에 따르면, 리시버는 스피커와 별개로, 또는 그 일부로서 구현될 수 있다.
표시 장치(160)는 전자 장치(101)의 외부(예: 사용자)로 정보를 시각적으로 제공할 수 있다. 표시 장치(160)는, 예를 들면, 디스플레이, 홀로그램 장치, 또는 프로젝터 및 해당 장치를 제어하기 위한 제어 회로를 포함할 수 있다. 일 실시예에 따르면, 표시 장치(160)는 터치를 감지하도록 설정된 터치 회로(touch circuitry), 또는 상기 터치에 의해 발생되는 힘의 세기를 측정하도록 설정된 센서 회로(예: 압력 센서)를 포함할 수 있다.
오디오 모듈(170)은 소리를 전기 신호로 변환시키거나, 반대로 전기 신호를 소리로 변환시킬 수 있다. 일 실시예에 따르면, 오디오 모듈(170)은, 입력 장치(150)를 통해 소리를 획득하거나, 음향 출력 장치(155), 또는 전자 장치(101)와 직접 또는 무선으로 연결된 외부 전자 장치(예: 전자 장치(102))(예: 스피커 또는 헤드폰)를 통해 소리를 출력할 수 있다.
센서 모듈(176)은 전자 장치(101)의 작동 상태(예: 전력 또는 온도), 또는 외부의 환경 상태(예: 사용자 상태)를 감지하고, 감지된 상태에 대응하는 전기 신호 또는 데이터 값을 생성할 수 있다. 일 실시예에 따르면, 센서 모듈(176)은, 예를 들면, 제스처 센서, 자이로 센서, 기압 센서, 마그네틱 센서, 가속도 센서, 그립 센서, 근접 센서, 컬러 센서, IR(infrared) 센서, 생체 센서, 온도 센서, 습도 센서, 또는 조도 센서를 포함할 수 있다.
인터페이스(177)는 전자 장치(101)가 외부 전자 장치(예: 전자 장치(102))와 직접 또는 무선으로 연결되기 위해 사용될 수 있는 하나 이상의 지정된 프로토콜들을 지원할 수 있다. 일 실시예에 따르면, 인터페이스(177)는, 예를 들면, HDMI(high definition multimedia interface), USB(universal serial bus) 인터페이스, SD카드 인터페이스, 또는 오디오 인터페이스를 포함할 수 있다.
연결 단자(178)는, 그를 통해서 전자 장치(101)가 외부 전자 장치(예: 전자 장치(102))와 물리적으로 연결될 수 있는 커넥터를 포함할 수 있다. 일 실시예에 따르면, 연결 단자(178)는, 예를 들면, HDMI 커넥터, USB 커넥터, SD 카드 커넥터, 또는 오디오 커넥터(예: 헤드폰 커넥터)를 포함할 수 있다.
햅틱 모듈(179)은 전기적 신호를 사용자가 촉각 또는 운동 감각을 통해서 인지할 수 있는 기계적인 자극(예: 진동 또는 움직임) 또는 전기적인 자극으로 변환할 수 있다. 일 실시예에 따르면, 햅틱 모듈(179)은, 예를 들면, 모터, 압전 소자, 또는 전기 자극 장치를 포함할 수 있다.
카메라 모듈(180)은 정지 영상 및 동영상을 촬영할 수 있다. 일 실시예에 따르면, 카메라 모듈(180)은 하나 이상의 렌즈들, 이미지 센서들, 이미지 시그널 프로세서들, 또는 플래시들을 포함할 수 있다.
전력 관리 모듈(188)은 전자 장치(101)에 공급되는 전력을 관리할 수 있다. 일 실시예에 따르면, 전력 관리 모듈(188)은, 예를 들면, PMIC(power management integrated circuit)의 적어도 일부로서 구현될 수 있다.
배터리(189)는 전자 장치(101)의 적어도 하나의 구성 요소에 전력을 공급할 수 있다. 일 실시예에 따르면, 배터리(189)는, 예를 들면, 재충전 불가능한 1차 전지, 재충전 가능한 2차 전지 또는 연료 전지를 포함할 수 있다.
통신 모듈(190)은 전자 장치(101)와 외부 전자 장치(예: 전자 장치(102), 전자 장치(104), 또는 서버(108)) 간의 직접(예: 유선) 통신 채널 또는 무선 통신 채널의 수립, 및 수립된 통신 채널을 통한 통신 수행을 지원할 수 있다. 통신 모듈(190)은 프로세서(120)(예: 어플리케이션 프로세서)와 독립적으로 운영되고, 직접(예: 유선) 통신 또는 무선 통신을 지원하는 하나 이상의 커뮤니케이션 프로세서를 포함할 수 있다. 일 실시예에 따르면, 통신 모듈(190)은 무선 통신 모듈(192)(예: 셀룰러 통신 모듈, 근거리 무선 통신 모듈, 또는 GNSS(global navigation satellite system) 통신 모듈) 또는 유선 통신 모듈(194)(예: LAN(local area network) 통신 모듈, 또는 전력선 통신 모듈)을 포함할 수 있다. 이들 통신 모듈 중 해당하는 통신 모듈은 제1 네트워크(198)(예: 블루투스, WiFi direct, 또는 IrDA(infrared data association) 같은 근거리 통신 네트워크) 또는 제2 네트워크(199)(예: 셀룰러 네트워크, 인터넷, 또는 컴퓨터 네트워크(예: LAN 또는 WAN)와 같은 원거리 통신 네트워크)를 통하여 외부 전자 장치와 통신할 수 있다. 이런 여러 종류의 통신 모듈들은 하나의 구성 요소(예: 단일 칩)로 통합되거나, 또는 서로 별도의 복수의 구성 요소들(예: 복수 칩들)로 구현될 수 있다. 무선 통신 모듈(192)은 가입자 식별 모듈(196)에 저장된 가입자 정보(예: 국제 모바일 가입자 식별자(IMSI))를 이용하여 제1 네트워크(198) 또는 제2 네트워크(199)와 같은 통신 네트워크 내에서 전자 장치(101)를 확인 및 인증할 수 있다.
안테나 모듈(197)은 신호 또는 전력을 외부(예: 외부 전자 장치)로 송신하거나 외부로부터 수신할 수 있다. 일 실시예에 따르면, 안테나 모듈(197)은 서브스트레이트(예: PCB) 위에 형성된 도전체 또는 도전성 패턴으로 이루어진 방사체를 포함하는 하나의 안테나를 포함할 수 있다. 일 실시예에 따르면, 안테나 모듈(197)은 복수의 안테나들을 포함할 수 있다. 이런 경우, 제1 네트워크(198) 또는 제2 네트워크(199)와 같은 통신 네트워크에서 사용되는 통신 방식에 적합한 적어도 하나의 안테나가, 예를 들면, 통신 모듈(190)에 의하여 상기 복수의 안테나들로부터 선택될 수 있다. 신호 또는 전력은 상기 선택된 적어도 하나의 안테나를 통하여 통신 모듈(190)과 외부 전자 장치 간에 송신되거나 수신될 수 있다. 어떤 실시예에 따르면, 방사체 이외에 다른 부품(예: RFIC)이 추가로 안테나 모듈(197)의 일부로 형성될 수 있다.
상기 구성요소들 중 적어도 일부는 주변 기기들간 통신 방식(예: 버스, GPIO(general purpose input and output), SPI(serial peripheral interface), 또는 MIPI(mobile industry processor interface))을 통해 서로 연결되고 신호(예: 명령 또는 데이터)를 상호간에 교환할 수 있다.
일 실시예에 따르면, 명령 또는 데이터는 제2 네트워크(199)에 연결된 서버(108)를 통해서 전자 장치(101)와 외부의 전자 장치(104) 간에 송신 또는 수신될 수 있다. 전자 장치(102, 104) 각각은 전자 장치(101)와 동일한 또는 다른 종류의 장치일 수 있다. 일 실시예에 따르면, 전자 장치(101)에서 실행되는 동작들의 전부 또는 일부는 외부 전자 장치들(102, 104, 또는 108) 중 하나 이상의 외부 전자 장치들에서 실행될 수 있다. 예를 들면, 전자 장치(101)가 어떤 기능이나 서비스를 자동으로, 또는 사용자 또는 다른 장치로부터의 요청에 반응하여 수행해야 할 경우에, 전자 장치(101)는 기능 또는 서비스를 자체적으로 실행시키는 대신에 또는 추가적으로, 하나 이상의 외부 전자 장치들에게 그 기능 또는 그 서비스의 적어도 일부를 수행하라고 요청할 수 있다. 상기 요청을 수신한 하나 이상의 외부 전자 장치들은 요청된 기능 또는 서비스의 적어도 일부, 또는 상기 요청과 관련된 추가 기능 또는 서비스를 실행하고, 그 실행의 결과를 전자 장치(101)로 전달할 수 있다. 전자 장치(101)는 상기 결과를, 그대로 또는 추가적으로 처리하여, 상기 요청에 대한 응답의 적어도 일부로서 제공할 수 있다. 이를 위하여, 예를 들면, 클라우드 컴퓨팅, 분산 컴퓨팅, 또는 클라이언트-서버 컴퓨팅 기술이 이용될 수 있다.
도 2는, 다양한 실시예들에 따른, 카메라 모듈(180)을 예시하는 블록도(200)이다.
도 2를 참조하면, 카메라 모듈(180)은 렌즈 어셈블리(210), 플래쉬(220), 이미지 센서(230), 이미지 스태빌라이저(240), 메모리(250)(예: 버퍼 메모리), 또는 이미지 시그널 프로세서(260)를 포함할 수 있다. 렌즈 어셈블리(210)는 이미지 촬영의 대상인 피사체로부터 방출되는 빛을 수집할 수 있다. 렌즈 어셈블리(210)는 하나 또는 그 이상의 렌즈들을 포함할 수 있다. 일 실시예에 따르면, 카메라 모듈(180)은 복수의 렌즈 어셈블리(210)들을 포함할 수 있다. 이런 경우, 카메라 모듈(180)은, 예를 들면, 듀얼 카메라, 360도 카메라, 또는 구형 카메라(spherical camera)를 형성할 수 있다. 복수의 렌즈 어셈블리(210)들 중 일부는 동일한 렌즈 속성(예: 화각, 초점 거리, 자동 초점, f 넘버(f number), 또는 광학 줌)을 갖거나, 또는 적어도 하나의 렌즈 어셈블리는 다른 렌즈 어셈블리의 렌즈 속성들과 다른 하나 이상의 렌즈 속성들을 가질 수 있다. 렌즈 어셈블리(210)는, 예를 들면, 광각 렌즈 또는 망원 렌즈를 포함할 수 있다.
플래쉬(220)는 피사체로부터 방출 또는 반사되는 빛을 강화하기 위하여 사용되는 빛을 방출할 수 있다. 일 실시예에 따르면, 플래쉬(220)는 하나 이상의 발광 다이오드들(예: RGB(red-green-blue) LED, white LED, infrared LED, 또는 ultraviolet LED), 또는 xenon lamp를 포함할 수 있다. 이미지 센서(230)는 피사체로부터 방출 또는 반사되어 렌즈 어셈블리(210)를 통해 전달된 빛을 전기적인 신호로 변환함으로써, 상기 피사체에 대응하는 이미지를 획득할 수 있다. 일 실시예에 따르면, 이미지 센서(230)는, 예를 들면, RGB 센서, BW(black and white) 센서, IR 센서, 또는 UV 센서와 같이 속성이 다른 이미지 센서들 중 선택된 하나의 이미지 센서, 동일한 속성을 갖는 복수의 이미지 센서들, 또는 다른 속성을 갖는 복수의 이미지 센서들을 포함할 수 있다. 이미지 센서(230)에 포함된 각각의 이미지 센서는, 예를 들면, CCD(charged coupled device) 센서 또는 CMOS(complementary metal oxide semiconductor) 센서를 이용하여 구현될 수 있다.
이미지 스태빌라이저(240)는 카메라 모듈(180) 또는 이를 포함하는 전자 장치(101)의 움직임에 반응하여, 렌즈 어셈블리(210)에 포함된 적어도 하나의 렌즈 또는 이미지 센서(230)를 특정한 방향으로 움직이거나 이미지 센서(230)의 동작 특성을 제어(예: 리드 아웃(read-out) 타이밍을 조정 등)할 수 있다. 이는 촬영되는 이미지에 대한 상기 움직임에 의한 부정적인 영향의 적어도 일부를 보상하게 해 준다. 일 실시예에 따르면, 이미지 스태빌라이저(240)는 카메라 모듈(180)의 내부 또는 외부에 배치된 자이로 센서(미도시) 또는 가속도 센서(미도시)를 이용하여 카메라 모듈(180) 또는 전자 장치(101)의 그런 움직임을 감지할 수 있다. 일 실시예에 따르면, 이미지 스태빌라이저(240)는, 예를 들면, 광학식 이미지 스태빌라이저로 구현될 수 있다. 메모리(250)는 이미지 센서(230)를 통하여 획득된 이미지의 적어도 일부를 다음 이미지 처리 작업을 위하여 적어도 일시 저장할 수 있다. 예를 들어, 셔터에 따른 이미지 획득이 지연되거나, 또는 복수의 이미지들이 고속으로 획득되는 경우, 획득된 원본 이미지(예: Bayer-patterned 이미지 또는 높은 해상도의 이미지)는 메모리(250)에 저장이 되고, 그에 대응하는 사본 이미지(예: 낮은 해상도의 이미지)는 표시 장치(160)를 통하여 프리뷰될 수 있다. 이후, 지정된 조건이 만족되면(예: 사용자 입력 또는 시스템 명령) 메모리(250)에 저장되었던 원본 이미지의 적어도 일부가, 예를 들면, 이미지 시그널 프로세서(260)에 의해 획득되어 처리될 수 있다. 일 실시예에 따르면, 메모리(250)는 메모리(130)의 적어도 일부로, 또는 이와는 독립적으로 운영되는 별도의 메모리로 구성될 수 있다.
이미지 시그널 프로세서(260)는 이미지 센서(230)를 통하여 획득된 이미지 또는 메모리(250)에 저장된 이미지에 대하여 하나 이상의 이미지 처리들을 수행할 수 있다. 상기 하나 이상의 이미지 처리들은, 예를 들면, 깊이 지도(depth map) 생성, 3차원 모델링, 파노라마 생성, 특징점 추출, 이미지 합성, 또는 이미지 보상(예: 노이즈 감소, 해상도 조정, 밝기 조정, 블러링(blurring), 샤프닝(sharpening), 또는 소프트닝(softening))을 포함할 수 있다. 추가적으로 또는 대체적으로, 이미지 시그널 프로세서(260)는 카메라 모듈(180)에 포함된 구성 요소들 중 적어도 하나(예: 이미지 센서(230))에 대한 제어(예: 노출 시간 제어, 또는 리드 아웃 타이밍 제어 등)를 수행할 수 있다. 이미지 시그널 프로세서(260)에 의해 처리된 이미지는 추가 처리를 위하여 메모리(250)에 다시 저장되거나 카메라 모듈(180)의 외부 구성 요소(예: 메모리(130), 표시 장치(160), 전자 장치(102), 전자 장치(104), 또는 서버(108))로 제공될 수 있다. 일 실시예에 따르면, 이미지 시그널 프로세서(260)는 프로세서(120)의 적어도 일부로 구성되거나, 프로세서(120)와 독립적으로 운영되는 별도의 프로세서로 구성될 수 있다. 이미지 시그널 프로세서(260)가 프로세서(120)와 별도의 프로세서로 구성된 경우, 이미지 시그널 프로세서(260)에 의해 처리된 적어도 하나의 이미지는 프로세서(120)에 의하여 그대로 또는 추가의 이미지 처리를 거친 후 표시 장치(160)를 통해 표시될 수 있다.
일 실시예에 따르면, 전자 장치(101)는 각각 다른 속성 또는 기능을 가진 복수의 카메라 모듈(180)들을 포함할 수 있다. 이런 경우, 예를 들면, 상기 복수의 카메라 모듈(180)들 중 적어도 하나는 광각 카메라이고, 적어도 다른 하나는 망원 카메라일 수 있다. 유사하게, 상기 복수의 카메라 모듈(180)들 중 적어도 하나는 전면 카메라이고, 적어도 다른 하나는 후면 카메라일 수 있다.
도 3은, 다양한 실시예들에 따른, 전자 장치를 나타내는 블록도(300)이다.
도 3을 참조하면, 전자 장치(301)(예: 도 1의 전자 장치(101))는 무선 통신 회로(310)(예: 도 1의 통신 모듈(190)), 메모리(320)(예: 도 1의 메모리(130)), 터치스크린 디스플레이(330)(예: 도 1의 표시 장치(160)), 카메라(340)(예: 도 1의 카메라 모듈(180)), 센싱부(350)(예: 도 1의 센서 모듈(176)), 및 프로세서(360)(예: 도 1의 프로세서(120))를 포함할 수 있다.
일 실시예에 따르면, 무선 통신 회로(310)(예: 도 1의 통신 모듈(190))는 전자 장치(301)(예: 도 1의 전자 장치(101))와 외부 전자 장치(예: 도 1 의 전자 장치(102), 전자 장치(104)) 또는 서버(예: 도 1의 서버(108)) 간의 통신을 연결할 수 있다.
일 실시예에 따르면, 메모리(320)(예: 도 1의 메모리(130))는 카메라(340)의 동작 프로그램 및 본 발명의 실시예들에 따른 프로그램, 상기 카메라(340)로부터 촬영되는 이미지들을 저장할 수 있다. 메모리(320)는 카메라(340)에 오브젝트(예: 사용자의 손가락)가 감지되는지 여부를 결정하기 위해 기준이 되는 값을 저장할 수 있다.
일 실시예에 따르면, 터치스크린 디스플레이(330)(예: 도 1의 표시 장치(160))는 디스플레이(331)와 터치패널(333)을 포함하는 일체형으로 구성될 수 있다.
일 실시예에 따르면, 터치스크린 디스플레이(330)는 프로세서(360)의 제어 하에 카메라 기능이 활성화되면, 카메라(340)로부터 수신된 영상을 프리뷰 이미지로 표시할 수 있다. 터치스크린 디스플레이(330)는 프로세서(360)의 제어 하에 상기 카메라(340)에서 오브젝트가 감지된 것으로 결정되면 상기 카메라(340)에 상기 오브젝트가 감지됨에 대한 알림을 표시할 수 있다. 예컨대, 터치스크린 디스플레이(330)는 프로세서(360)의 제어 하에 팝업창을 표시하거나, 적어도 하나의 카메라 중 하나의 카메라로부터 획득되는 픽셀 및 다른 하나의 카메라로부터 획득되는 픽셀을 혼합하여 프리뷰 이미지로서 표시하거나, 또는 오브젝트가 감지된 카메라로부터 획득되는 이미지를 프리뷰 이미지로서 표시할 수 있다.
하지만 이에 한정하는 것은 아니며, 상기 알림은 프로세서(360)의 제어 하에 스피커(예: 도 1의 음향 출력 장치(155))를 통해 소리로서 제공되거나, 햅틱 모듈(예: 도 1의 햅틱 모듈(179))을 통해 진동으로 제공될 수 있다.
일 실시예에 따르면, 카메라(340)(예: 도 1의 카메라 모듈(180))는 수집된 영상을 프리뷰 이미지로 디스플레이(331)에 전달하여 사용자가 카메라(340)를 통해 비추어지는 영상을 확인하도록 할 수 있다. 카메라(340)는 촬영을 요청하는 입력에 응답하여, 상기 촬영을 요청하는 입력이 발생한 시점에 수집된 영상을 촬영하여 이미지 데이터를 생성할 수 있다.
일 실시예에 따르면, 카메라(340)는 제1 카메라(341) 및 제2 카메라(343)를 포함할 수 있다. 상기 제1 카메라(341)를 이용한 촬영 및 상기 제2 카메라(343)를 이용한 촬영은 동시에 이루어질 수 있다. 제1 카메라(341)는 제2 카메라(343)와 비교하여 보다 넓은 범위를 나타내는 이미지를 촬영할 수 있다. 예컨대, 제1 카메라(341)는 제2 카메라(343)와 비교하여 보다 넓은 화각을 제공할 수 있다.
일 실시예에 따르면, 카메라(340) 중 하나의 카메라 예컨대, 제1 카메라(341)로부터 획득되는 이미지를 프리뷰 이미지로서 디스플레이(331)에 표시할 수 있다. 다른 하나의 카메라 예컨대, 제2 카메라(343)로부터 획득되는 이미지는 프리뷰 이미지로 디스플레이(331)에 표시되지 않지만, 상기 하나의 카메라 예컨대, 제1 카메라(341)로부터 획득되는 이미지와 비교하여 고화질의 이미지를 포함할 수 있다.
본 발명의 다양한 실시예에서, 2개의 카메라를 구비하는 것으로 설명하였지만, 이에 한정하는 것은 아니며, 전자 장치(301)는 2개를 초과하는 개수의 카메라를 구비할 수 있다.
일 실시예에 따르면, 센싱부(350)(예: 도 1의 센서 모듈(176))는 전자 장치(301)의 후면에 구비된 제1 카메라(341) 및 제2 카메라(343)를 둘러싸는 전도성 재질(예: 메탈(metal) 재질)로 형성된 데코 부재와 연결될 수 있다. 센싱부(350)는 그립 센서 및/또는 터치 IC(integrated circuit)를 포함할 수 있다. 센싱부(350)는 제1 카메라(341) 및 제2 카메라(343)를 둘러싸는 전도성 재질로 형성된 데코 부재에 오브젝트(예: 사용자의 손가락)가 감지(예: 근접 또는 접촉에 의해 감지)됨에 따른 캐패시턴스 값의 변화를 감지할 수 있다. 센싱부(350)는 상기 감지되는 변화된 캐패시턴스 값을 프로세서(360)에 전달할 수 있다.
일 실시예에 따르면, 프로세서(360)(예: 도 1의 프로세서(120))는 전자 장치(301)의 전반적인 동작 및 전자 장치(301)의 내부 구성들 간의 신호 흐름을 제어하고, 데이터 처리를 수행하고, 배터리에서 상기 구성들로의 전원 공급을 제어할 수 있다.
일 실시예에 따르면, 프로세서(360)는 센싱부(350)를 통해 지정된 시간 간격으로 도전성 재질로 제1 카메라(341) 및 제2 카메라(343)를 둘러싸도록 형성된 데코 부재에 대한 캐패시턴스 값을 획득할 수 있다. 프로세서(360)는 카메라(340)의 기능이 활성화되면, 획득된 캐패시턴스 값의 변화를 감지할 수 있다.
다른 실시예에서, 카메라(340)의 기능이 활성화되면, 프로세서(360)는 센싱부(350)를 통해 데코 부재에 대한 캐패시턴스 값을 획득하고, 이에 기초하여 캐패시턴스 값의 변화를 감지할 수 있다.
일 실시예에서, 프로세서(360)는 상기 변화된 캐패시턴스 값이 지정된 값을 초과하는지 여부를 결정하고, 이에 기초하여 카메라(340)에서 오브젝트(예: 사용자의 손가락)의 감지 여부를 결정할 수 있다. 프로세서(360)는 상기 카메라(340)에서 상기 오브젝트가 감지된 것으로 결정되면, 상기 카메라(340)에 상기 오브젝트가 감지됨에 대한 알림을 제공할 수 있다.
일 실시예에서, 프로세서(360)는 카메라(340)에서 오브젝트가 감지되지 않은 것으로 결정되면, 상기 카메라(340)를 이용하여 촬영을 수행하기 위한 사용자 입력에 응답하여 촬영 기능을 수행할 수 있다.
일 실시예에서, 프로세서(360)는 센싱부(350)를 통해 획득되는 변화된 캐패시턴스 값이 지정된 값을 초과하면, 제1 카메라(341)로부터 획득되는 제1 이미지에 대한 적어도 하나의 파라미터 값과 제2 카메라(343)로부터 획득되는 제2 이미지에 대한 적어도 하나의 파라미터 값을 비교하는 동작을 더 수행할 수 있다. 예컨대, 상기 적어도 하나의 파라미터 값은 각 이미지에 대한 밝기 정보, 명암 정보, 위상 정보, 또는 이미지에서 추출된 경계선 중 적어도 하나를 포함할 수 있다. 예컨대, 프로세서(360)는 제1 이미지 및 제2 이미지의 동일한 좌표의 픽셀 간의 파라미터 값을 비교하거나, 지정된 개수로 구획된 제1 이미지 및 제2 이미지의 동일한 구역 간의 파라미터 값을 비교하거나, 또는 구역 내 지정된 개수의 픽셀에 대한 적어도 하나의 파라미터 값을 비교할 수 있다.
일 실시예에서, 상기 비교 동작을 통해 카메라(340)에서 오브젝트가 감지되면, 프로세서(360)는 상기 카메라(340)에서 상기 오브젝트가 감지됨에 대한 알림을 제공할 수 있다.
도 4는, 다양한 실시예들에 따른, 복수의 카메라 구조를 도시한 도면(400)이다.
도 4를 참조하면, 참조번호 <410>에 도시된 바와 같이 전자 장치(401)(예: 도 3의 전자 장치(301))는 후면(430)에 복수의 카메라 예컨대, 제1 카메라(415)(예: 도 3의 제1 카메라(341)) 및 제2 카메라(420)(예: 도 3의 제2 카메라(343))를 구비할 수 있다.
일 실시예에서, 전자 장치(401)의 후면(430)은 비도전성 재질(예: 글래스(glass) 또는 플라스틱 재질)로 형성될 수 있다.
일 실시예에서, 전자 장치(401)의 후면(430)에 제1 카메라(415) 및 제2 카메라(420)를 둘러싸는 데코 부재(deco member)(425)가 형성될 수 있다. 상기 데코 부재(425)는 도전성 재질(예: 메탈(metal) 재질)로 형성될 수 있다.
일 실시예에서, 전자 장치(401)의 후면(430)에 제1 카메라(415) 및 제2 카메라(420)를 덮으며, 상기 제1 카메라(415) 및 상기 제2 카메라(420) 각각의 렌즈를 노출시키는 카메라 윈도우(camera window)(435)가 형성될 수 있다. 상기 카메라 윈도우(435)는 비도전성 재질로 형성될 수 있다.
다른 실시예에서, 상기 카메라 윈도우(435)는 전자 장치(401)의 후면(430)에 형성되지 않을 수 있다.
일 실시예에서, 전자 장치(401)의 후면(430)에 카메라 윈도우(435)가 형성되는 경우, 데코 부재(425)는 상기 카메라 윈도우(435)를 둘러싸도록 형성될 수 있다.
일 실시예에서, 참조번호 <460>에 도시된 바와 같이 복수의 카메라 예컨대, 제1 카메라(415) 및 제2 카메라(420)는 기판(440) 상에 구비될 수 있다. 예컨대, 상기 기판(440)는 인쇄 회로 기판(printed circuit board, PCB), 또는 연성 인쇄 회로 기판(flexible printed circuit board, FPCB)을 포함할 수 있다.
일 실시예에서, 기판(440)과 데코 부재(425)가 연결되도록 상기 기판(440) 상에 컨택(contact)(445)이 구비될 수 있다.
일 실시예에서, 제1 카메라(415) 및 제2 카메라(420)를 둘러싸는 도전성 재질로 형성된 데코 부재(425)에 오브젝트(예: 사용자의 손가락)가 근접함에 따른 캐패시턴스 값의 변화에 기초하여, 프로세서(예: 도 3의 프로세서(360))는 상기 제1 카메라(415) 및 상기 제2 카메라(420) 중 적어도 하나의 카메라에서 오브젝트 예컨대, 사용자의 손가락의 감지 여부를 결정할 수 있다. 예컨대, 프로세서는 제1 카메라(415) 및 제2 카메라(420)를 둘러싸는 도전성 재질로 형성된 데코 부재(425)와 연결된 센싱부(예: 도 3의 센싱부(350))(예: 그립 센서 및/또는 터치 IC)에 의해 감지되는 캐패시턴스 값의 변화에 기초하여 적어도 하나의 카메라에서 오브젝트 예컨대, 사용자 손가락의 감지 여부를 결정할 수 있다. 이와 관련하여, 도 5에서 상세히 살펴보도록 한다.
도 5는, 다양한 실시예들에 따른, 캐패시턴스 값에 기초하여 적어도 하나의 카메라에서 오브젝트를 감지하는 방법을 설명하기 위한 회로도(500)이다.
도 5를 참조하면, 전자 장치(예: 도 3의 전자 장치(301))는 센싱부(520)(예: 도 3의 센싱부(350))와 데코 부재(510)(예: 도 4의 데코 부재(425)) 사이에 연결된 제1 캐패시터(capacitor)(530) 및 상기 센싱부(520)와 그라운드 사이에 연결된 제2 캐패시터(capacitor)(540)를 포함할 수 있다.
일 실시예에서, 센싱부(520)는 그립 센서 및/또는 터치 IC(integrated circuit)를 포함할 수 있다.
일 실시예에서, 센싱부(520)와 데코 부재(510) 사이에 연결된 제1 캐패시터(530)는 데코 부재(510)에 오브젝트가 근접함에 따른 캐패시턴스의 민감도를 조정(tuning)할 수 있다.
일 실시예에서, 센싱부(520)와 그라운드 사이에 연결된 제2 캐패시터(540)는 그라운드로부터 발생되는 ESD(electrostatic discharge) 전압을 차단할 수 있다. ESD 전압이 차단됨에 따라, 그라운드로부터 발생되는 ESD 전압이 사용자에게 전달되는 것을 방지할 수 있다. 카메라 기능이 활성화된 경우 ESD 전압이 차단됨에 따라, 카메라 기능의 오동작을 방지할 뿐만 아니라, ESD 전압이 데코 부재(510)로 인가됨에 따른 센싱부(520)의 오동작을 방지할 수 있다.
일 실시예에서, 프로세서(예: 도 3의 프로세서(360))는 센싱부(520)와 데코 부재(510)가 전기적으로 연결되도록 제어할 수 있다. 센싱부(520)는 데코 부재(510)에 대한 캐패시턴스(capacitance) 값의 변화를 감지할 수 있다. 센싱부(520)는 상기 감지된 캐패시턴스 변화 값을 프로세서에 전달할 수 있다.
일 실시예에서, 프로세서는 상기 센싱부(520)로부터 수신한 캐패시턴스 변화 값에 기초하여, 적어도 하나의 카메라(예: 도 4의 제1 카메라(415) 또는 제2 카메라(420))에서 오브젝트(예: 사용자의 손가락)의 감지 여부를 결정할 수 있다 예컨대, 캐패시턴스 변화 값이 지정된 값을 초과하면, 프로세서는 상기 적어도 하나의 카메라에서 오브젝트가 감지된 것으로 결정할 수 있다. 캐패시턴스 변화 값이 상기 지정된 값을 초과하지 않으면(예: 이하이면), 프로세서는 상기 적어도 하나의 카메라에서 오브젝트가 감지되지 않은 것으로 결정할 수 있다.
일 실시예에서, 상기 적어도 하나의 카메라에서 상기 오브젝트가 감지된 것으로 결정되면, 프로세서는 상기 적어도 하나의 카메라에 상기 오브젝트가 감지됨에 대한 알림을 제공할 수 있다. 상기 제공되는 알림을 통해 사용자는 적어도 하나의 카메라가 오브젝트에 의해 가려졌음을 직관적으로 확인할 수 있다.
도 6은, 다양한 실시예들에 따른, 복수의 카메라 구조를 도시한 도면(600)이다.
도 6을 참조하면, 참조번호 <610>에 도시된 바와 같이 전자 장치(601)는 후면(645)(예: 도 4의 전자 장치(401)의 후면(430))에 복수의 카메라 예컨대, 제1 카메라(615)(예: 도 3의 제1 카메라(341), 도 4의 제1 카메라(415)) 및 제2 카메라(630)(예: 도 3의 제2 카메라(343), 도 4의 제2 카메라(420))를 구비할 수 있다.
일 실시예에서, 전자 장치(601)의 후면(645)은 비도전성 재질(예: 글래스 또는 플라스틱 재질)로 형성될 수 있다.
일 실시예에서, 상기 전자 장치(601)의 후면(645)에 상기 제1 카메라(615) 및 제2 카메라(630) 각각을 둘러싸는 제1 데코 부재(620) 및 제2 데코 부재(635)가 형성될 수 있다. 상기 제1 데코 부재(620) 및 제2 데코 부재(635)는 도전성 재질(예: 메탈 재질)로 형성될 수 있다.
일 실시예에서, 전자 장치(601)의 후면(645)에 제1 카메라(615)를 덮으며, 제1 카메라(615)의 렌즈를 노출시키는 제1 카메라 윈도우(625)가 형성될 수 있다. 전자 장치(601)의 후면(645)에 상기 후면(645)에 구비된 제2 카메라(630)를 덮으며, 제2 카메라(630)의 렌즈를 노출시키는 제2 카메라 윈도우(640)가 형성될 수 있다. 상기 제1 카메라 윈도우(625) 및 상기 제2 카메라 윈도우(640)는 비도전성 재질로 형성될 수 있다.
다른 실시예에서, 상기 제1 카메라 윈도우(625) 및 상기 제2 카메라 윈도우(640)는 전자 장치(601)의 후면(645)에 형성되지 않을 수 있다.
일 실시예에서, 전자 장치(601)의 후면(645)에 제1 카메라 윈도우(625) 및 제2 카메라 윈도우(640)가 형성되는 경우, 제1 데코 부재(620) 및 제2 데코 부재(635) 각각은 상기 제1 카메라 윈도우(625) 및 제2 카메라 윈도우(640) 각각을 둘러싸도록 형성될 수 있다.
일 실시예에서, 참조번호 <670>에 도시된 바와 같이 복수의 카메라 예컨대, 제1 카메라(615) 및 제2 카메라(630)는 기판(650) 상에 구비될 수 있다. 일 실시예에서, 상기 기판(650)과 제1 데코 부재(620)의 적어도 일부가 연결되도록 상기 기판(650) 상에 제1 컨택(contact)(655)이 구비될 수 있다. 상기 기판(650)과 제2 데코 부재(635)의 적어도 일부가 연결되도록 상기 기판(650) 상에 제2 컨택(contact)(660)이 구비될 수 있다.
일 실시예에서, 제1 카메라(615) 및 제2 카메라(630) 각각을 둘러싸는 도전성 재질로 형성된 제1 데코 부재(620) 및 제2 데코 부재(635) 중 적어도 하나에 오브젝트(예: 사용자의 손가락)가 근접함에 따른 캐패시턴스 값의 변화에 기초하여, 프로세서(예: 도 3의 프로세서(360))는 상기 제1 카메라(615) 및 상기 제2 카메라(630) 중 적어도 하나의 카메라에서 오브젝트 예컨대, 사용자의 손가락의 감지 여부를 결정할 수 있다. 예컨대, 프로세서는 제1 카메라(615) 및 제2 카메라(630)를 둘러싸는 도전성 재질로 형성된 제1 데코 부재(620) 및 제2 데코 부재(635)와 연결된 센싱부(예: 도 3의 센싱부(350))(예: 그립 센서 및/또는 터치 IC)에 의해 감지되는 캐패시턴스 값의 변화에 기초하여 적어도 하나의 카메라에서 오브젝트 예컨대, 사용자 손가락의 감지 여부를 결정할 수 있다. 이와 관련하여, 도 7에서 상세히 살펴보도록 한다.
도 7은, 다양한 실시예들에 따른, 캐패시턴스 값에 기초하여 적어도 하나의 카메라에서 오브젝트를 감지하는 방법을 설명하기 위한 회로도(700)이다.
도 7을 참조하면, 전자 장치(예: 도 3의 전자 장치(301))는 센싱부(730)(예: 도 3의 센싱부(350))와 제1 데코 부재(710)(예: 도 6의 제1 데코 부재(620)) 사이에 연결된 제1 캐패시터(capacitor)(740) 및 상기 센싱부(730)와 그라운드 사이에 연결된 제2 캐패시터(capacitor)(750)를 포함할 수 있다. 전자 장치는 센싱부(730)와 제2 데코 부재(720)(예: 도 6의 제2 데코 부재(635)) 사이에 연결된 제3 캐패시터(capacitor)(760) 및 상기 센싱부(730)와 그라운드 사이에 연결된 제4 캐패시터(capacitor)(770)를 포함할 수 있다.
일 실시예에서, 제1 캐패시터(740) 및 제3 캐패시터(760)는 제1 데코 부재(710) 및/또는 제2 데코 부재(720)에 오브젝트가 근접함에 따른 캐패시턴스의 민감도를 조정(tuning)할 수 있다.
일 실시예에서, 제2 캐패시터(750) 및 제4 캐패시터(770)는 그라운드로부터 발생되는 ESD(electrostatic discharge) 전압을 차단할 수 있다. 그라운드로부터 발생되는 ESD 전압이 사용자에게 전달되는 것을 방지할 수 있다. 카메라 기능이 활성화된 경우 ESD 전압이 차단됨에 따라, 카메라 기능의 오동작을 방지할 뿐만 아니라, ESD 전압이 제1 데코 부재(710) 및/또는 제2 데코 부재(720)로 인가됨에 따른 센싱부(730)의 오동작을 방지할 수 있다.
일 실시예에서, 프로세서(예: 도 3의 프로세서(360))는 센싱부(730)와 제1 데코 부재(710) 및 제2 데코 부재(720)가 전기적으로 연결되도록 제어할 수 있다. 센싱부(730)는 제1 데코 부재(710) 및/또는 제2 데코 부재(720)에 대한 캐패시턴스(capacitance) 값의 변화를 감지할 수 있다. 상기 센싱부(730)는 상기 감지된 캐패시턴스 변화 값을 프로세서(예: 도 3의 프로세서(360))에 전달할 수 있다.
일 실시예에서, 프로세서는 상기 센싱부(730)로부터 수신한 캐패시턴스 변화 값에 기초하여 제1 카메라(예: 도 6의 제1 카메라(615)) 또는 제2 카메라(예: 도 6의 제2 카메라(630))에서 오브젝트(예: 사용자의 손가락)의 감지 여부를 결정할 수 있다. 예컨대, 센싱부(730)로부터 수신된 제1 데코 부재(710)에 대한 캐패시턴스 변화 값이 지정된 값을 초과하면, 프로세서는 상기 제1 데코 부재(710) 내 포함된 제1 카메라에서 오브젝트가 감지된 것으로 결정할 수 있다. 또는, 센싱부(730)로부터 수신된 제2 데코 부재(720)에 대한 캐패시턴스 변화 값이 지정된 값을 초과하면, 프로세서는 제2 데코 부재(720) 내 포함된 제2 카메라에서 오브젝트가 감지된 것으로 결정할 수 있다.
일 실시예에서, 제1 데코 부재(710)에 대한 캐패시턴스 변화 값 또는 제2 데코 부재(720)에 대한 캐패시턴스 변화 값 중 적어도 하나의 값이 지정된 값을 초과하지 않으면(예: 이하이면), 프로세서는 제1 카메라 또는 제2 카메라에 오브젝트가 감지되지 않은 것으로 결정할 수 있다.
일 실시예에서, 상기 적어도 하나의 카메라에서 상기 오브젝트가 감지된 것으로 결정되면, 프로세서는 상기 적어도 하나의 카메라에 상기 오브젝트가 감지됨에 대한 알림을 제공할 수 있다. 상기 제공되는 알림을 통해 사용자는 적어도 하나의 카메라가 오브젝트에 의해 가려졌음을 직관적으로 확인할 수 있다.
일 실시예에서, 센싱부(730)에 제1 데코 부재(710) 및 제2 데코 부재(720)가 연결된 것으로 설명하였지만, 복수의 센싱부를 구비하는 경우 복수의 센싱부 각각에 상기 제1 데코 부재(710) 및 상기 제2 데코 부재(720)가 연결될 수 있다.
일 실시예에 따른 도 6 및 도 7에서 제1 카메라를 둘러싸는 제1 데코 부재(710) 및 제2 카메라를 둘러싸는 제2 데코 부재(720)가 형성됨에 따라, 사용자는 오브젝트가 제1 카메라에서 감지되는지, 또는 제2 카메라에서 감지되는지 정확하게 확인할 수 있다.
도 8은, 다양한 실시예들에 따른, 캐패시턴스 값에 기초하여 적어도 하나의 카메라에서 오브젝트를 감지하는 방법을 설명하기 위한 흐름도(800)이다.
도 8을 참조하면, 프로세서(예: 도 3의 프로세서(360))는 801동작에서, 적어도 하나의 센싱부(예: 도 3의 센싱부(350))를 통해 획득되는 캐패시턴스 값의 변화를 감지할 수 있다.
일 실시예에서, 카메라 기능이 활성화되면, 프로세서는 적어도 하나의 카메라(예: 도 3의 제1 카메라(341) 및 제2 카메라(343)) 중 하나의 카메라로부터 획득되는 이미지를 프리뷰 이미지로서 디스플레이(예: 도 3의 디스플레이(331))에 표시할 수 있다. 다른 하나의 카메라로부터 획득되는 이미지는 프리뷰 이미지로 디스플레이에 표시되지 않지만, 상기 하나의 카메라로부터 획득되는 이미지와 비교하여 보다 좁은 화각의 이미지를 포함할 수 있다.
다양한 실시예에 따른 도 5 및 도 7에서 살펴본 바와 같이 프로세서는 적어도 하나의 데코 부재(예: 도 5의 데코 부재(510), 도 7의 제1 데코 부재(710), 제2 데코 부재(720))와 센싱부(예: 도 5의 센싱부(520), 도 7의 센싱부(730))가 전기적으로 연결되도록 제어할 수 있다. 상기 적어도 하나의 데코 부재는 도전성 재질(예: 메탈(metal) 재질)로 전자 장치의 후면(예: 도 4의 전자 장치(401)의 후면(430), 도 6의 전자 장치(601)의 후면(645))에 적어도 하나의 카메라를 둘러싸도록 형성될 수 있다.
일 실시예에서, 프로세서는 적어도 하나의 센싱부를 통해 지정된 시간 간격으로 도전성 재질로 상기 적어도 하나의 카메라를 둘러싸도록 형성된 적어도 하나의 데코 부재에 대한 캐패시턴스 값을 획득할 수 있다. 프로세서는 카메라 기능이 활성화되면, 적어도 하나의 센싱부를 통해 획득된 캐패시턴스 값에 기초하여 캐패시턴스 값의 변화를 감지할 수 있다. 예컨대, 프로세서는 적어도 하나의 센싱부를 통해 상기 도전성 재질로 상기 적어도 하나의 카메라를 둘러싸도록 형성된 적어도 하나의 데코 부재에 오브젝트(예: 사용자의 손가락)가 감지(예: 근접 또는 접촉에 의해 감지)됨에 따른 캐패시턴스 값의 변화를 감지할 수 있다.
일 실시예에서, 적어도 하나의 센싱부를 통해 지정된 시간 간격으로 적어도 하나의 데코 부재에 대한 캐패시턴스 값을 획득하고, 카메라 기능이 활성화되면 캐패시턴스 값의 변화를 감지하는 것으로 설명하였지만 이에 한정하는 것은 아니다. 예컨대, 다른 실시예에서, 카메라 기능이 활성화되면, 적어도 하나의 센싱부를 통해 적어도 하나의 데코 부재에 대한 캐패시턴스 값을 획득하고, 이에 기초하여 캐패시턴스 값의 변화를 감지할 수 있다.
일 실시예에서, 프로세서는 803동작에서, 상기 변화된 캐패시턴스 값이 지정된 값을 초과하는지 여부를 결정할 수 있다. 예컨대, 프로세서는 상기 변화된 캐패시턴스 값이 상기 지정된 값을 초과하는지 여부에 기초하여 적어도 하나의 카메라에서 오브젝트의 감지 여부를 결정할 수 있다.
일 실시예에서, 상기 변화된 캐패시턴스 값이 상기 지정된 값을 초과함에 따라 상기 적어도 하나의 카메라에서 상기 오브젝트가 감지된 것으로 결정되면, 프로세서는 805동작에서, 상기 적어도 하나의 카메라에 상기 오브젝트가 감지됨에 대한 알림을 제공할 수 있다. 예컨대, 상기 적어도 하나의 카메라에 상기 오브젝트가 감지됨에 대한 알림은, 진동, 팝업창, 적어도 하나의 카메라 중 하나의 카메라로부터 획득되는 픽셀 및 다른 하나의 카메라로부터 획득되는 픽셀을 혼합하여 프리뷰 이미지로서 표시, 또는 오브젝트가 감지된 카메라로부터 획득되는 이미지를 프리뷰 이미지로서 디스플레이에 표시 중 적어도 하나를 이용하여 제공될 수 있다. 상기 제공되는 적어도 하나의 카메라에 상기 오브젝트가 감지됨에 대한 알림을 통해 사용자는 적어도 하나의 카메라가 오브젝트에 의해 가려졌음을 직관적으로 확인할 수 있다.
일 실시예에서, 상기 변화된 캐패시턴스 값이 상기 지정된 값을 초과하지 않음에 따라 상기 적어도 하나의 카메라에서 상기 오브젝트가 감지되지 않은 것으로 결정되면, 프로세서는 807동작에서, 상기 적어도 하나의 카메라를 이용하여 촬영을 수행하기 위한 사용자 입력에 응답하여 촬영 기능을 수행할 수 있다.
도 9는, 다양한 실시예들에 따른, 이미지에 대한 파라미터 값에 기초하여 적어도 하나의 카메라에서 오브젝트를 감지하는 방법을 설명하기 위한 도면(900)이다.
도 9를 참조하면, 프로세서(예: 도 3의 프로세서(360))는 참조번호 <910>에 도시된 바와 같이 제1 카메라(예: 도 3의 제1 카메라(341))로부터 획득되는 제1 이미지(915)와 참조번호 <950>에 도시된 바와 같이 제2 카메라(예: 도 3의 제2 카메라(343))로부터 획득되는 제2 이미지(955)의 비교를 통해 적어도 하나의 카메라에서 오브젝트 예컨대, 사용자의 손가락(960)이 감지되는지 여부를 결정할 수 있다. 예컨대, 프로세서는 상기 제1 이미지(915)와 상기 제2 이미지(955)의 밝기 정보, 명암 정보, 위상 정보, 또는 각 이미지에서 추출된 경계선 중 적어도 하나를 이용하여 상기 적어도 하나의 카메라에서 사용자의 손가락(960)이 감지되는지 여부를 결정할 수 있다.
일 실시예에서, 제1 카메라로부터 획득되는 이미지(915)를 프리뷰 이미지로서 디스플레이(예: 도 3의 디스플레이(331))에 표시하는 중에 제2 카메라의 적어도 일부에 사용자의 손가락(960)이 감지된 것으로 가정하여 설명한다.
일 실시예에서, 제2 카메라에 사용자의 손가락(960)이 근접 또는 접촉됨에 따라 상기 제2 카메라를 통해 획득되는 광량은 제1 카메라를 통해 획득되는 광량과 비교하여 작을 수 있다. 제2 카메라를 통해 획득되는 광량이 제1 카메라를 통해 획득되는 광량에 비해 작음에 따라 제2 카메라로부터 획득되는 제2 이미지(955)의 밝기 정보는 제1 카메라로부터 획득되는 제1 이미지(915)의 밝기 정보보다 낮을 수 있다.
일 실시예에서, 프로세서는 상기 제1 이미지(915)와 상기 제2 이미지(955)의 동일한 좌표의 픽셀 간의 밝기 정보(예: 밝기 값)의 차를 산출할 수 있다. 상기 산출된 밝기 정보의 차에 기초하여, 프로세서는 제2 카메라의 적어도 일부에서 사용자의 손가락(960)이 감지(예: 근접 또는 접촉)된 것으로 결정할 수 있다.
일 실시예에서, 제2 카메라에서 사용자의 손가락(960)의 감지 여부를 밝기 정보에 기초하여 결정하는 것으로 가정하여 설명하였으나, 이에 한정하는 것은 아니며, 명암 값의 차이, 위상차, 또는 이미지에서 추출된 경계선에 기초하여 상기 제2 카메라에서 상기 사용자의 손가락(960)의 감지되는지 여부를 결정할 수 있다.
일 실시예에서, 명암 값의 차이에 기초하여 제2 카메라에서 사용자의 손가락(960)의 감지 여부를 결정하는 경우, 상기 사용자의 손가락(960)에 의해 제2 카메라의 적어도 일부가 가려짐에 따라 상기 제2 카메라로부터 획득되는 제2 이미지(955) 내 명암 차는 사용자의 손가락(960)이 감지되지 않은 제1 카메라로부터 획득되는 제1 이미지(915)의 명암 차와 비교하여 작기 때문에 콘트라스트(contrast)가 낮을 수 있다. 프로세서는 제1 카메라로부터 획득되는 제1 이미지(915)에 대한 콘트라스트 값과 제2 카메라로부터 획득되는 제2 이미지(955)에 대한 콘트라스트 값을 비교할 수 있다. 상기 비교 동작을 통해 두 개의 이미지(915, 955)에 대한 콘트라스트 값의 차가 지정된 값을 초과하면, 프로세서는 제2 카메라의 적어도 일부에 사용자의 손가락(960)이 감지(예: 근접 또는 접촉)된 것으로 결정할 수 있다.
일 실시예에서, 상기 제1 이미지(915) 및 상기 제2 이미지(955)에 대한 콘트라스트 값을 비교하는 동작을 수행하기 전에, 프로세서는 제1 카메라 및 제2 카메라 각각으로부터 획득되는 피사체의 대비(예: 밝은 부분과 어두운 부분의 차이)에 기초하여, 상기 피사체에 대한 초점을 자동으로 조정(예: 콘트라스트 AF(auto focus))할 수 있다.
일 실시예에서, 프로세서는 프리뷰 이미지를 제공하는 제1 카메라의 콘트라스트 AF 및 제2 카메라의 콘트라스트 AF를 조정한 후, 제2 카메라의 적어도 일부에서 사용자의 손가락(960)이 감지되는지 여부를 감지할 수 있다. 상기 제1 카메라의 콘트라스트 AF와 제2 카메라의 콘트라스트 AF를 조정하는 동작은, AF 값에 따라 각 카메라로부터 획득되는 각 이미지에 대한 명암 차가 달라질 수 있기 때문에(예: 초점이 맞는 경우 피사체에 대한 이미지의 윤곽이 뚜렷하여 콘트라스트가 높아지고, 초점이 맞지 않는 경우 상기 이미지의 윤곽이 흐려져 콘트라스트가 낮아질 수 있기 때문에), 이를 방지하기 위한 동작일 수 있다.
일 실시예에서, 제1 카메라 및 제2 카메라 각각으로부터 획득되는 피사체의 대비에 기초하여 피사체에 대한 초점을 자동으로 조정하는 것으로 설명하였지만, 이에 한정하는 것은 아니다. 예컨대, 프로세서는 제1 카메라로부터 획득되는 피사체에 대한 콘트라스트 AF를 조정한 후, 상기 제1 카메라의 자동 초점 값을 이용하여 제2 카메라로부터 획득되는 피사체에 대한 콘트라스트 AF를 조정할 수 있다.
일 실시예에서, 센싱부(예: 도 3의 센싱부(350))가 위상차 AF 센서를 구비하는 경우, 상기 위상차 AF 센서를 통해 획득되는 위상차에 기초하여 제2 카메라의 적어도 일부에 사용자의 손가락(960)이 감지되는지 여부를 감지할 수 있다. 예컨대, 사용자의 손가락(960)이 제2 카메라의 적어도 일부에서 감지됨에 따라 상기 제2 카메라의 위상차 AF 값은 상기 사용자의 손가락(960)이 감지되지 않은 제1 카메라의 위상차 AF 값과 상이할 수 있다. 상기 제1 카메라의 위상차 값과 및 제2 카메라의 위상차 AF 값의 차가 지정된 값을 초과하면, 프로세서는 상기 제2 카메라의 적어도 일부에 사용자의 손가락(960)이 감지(예: 근접 또는 접촉)된 것으로 결정할 수 있다.
일 실시예에서, 이미지에서 추출된 경계선에 기초하여 제2 카메라에서 사용자의 손가락(960)의 감지 여부를 결정하는 경우, 상기 사용자의 손가락(960)에 의해 제2 카메라의 적어도 일부가 가려짐에 따라 상기 제2 카메라로부터 획득되는 제2 이미지(955)에서 추출된 경계선은 사용자의 손가락(960)이 감지되지 않은 제1 카메라로부터 획득되는 제1 이미지(915)에서 추출된 경계선과 상이할 수 있다. 프로세서는 상기 제1 이미지(915)에서 추출된 경계선과 상기 제2 이미지(955)에서 추출된 경계선의 비교를 통해 제2 카메라의 적어도 일부에서 사용자의 손가락(960)이 감지되는지 여부를 결정할 수 있다. 전술한 각 이미지에서 추출된 경계선에 기초하여 제2 카메라에서 사용자의 손가락(960)을 감지하는 동작과 관련하여, 도 11에서 상세히 살펴보도록 한다.
일 실시예에서, 전술한 제1 이미지(915)와 상기 제2 이미지(955)의 밝기 정보, 명암 정보, 위상 정보, 또는 각 이미지에서 추출된 경계선 중 적어도 하나를 이용하여 상기 적어도 하나의 카메라에서 사용자의 손가락(960)이 감지되는지 여부를 결정하고, 이에 기초하여 상기 적어도 하나의 카메라에서 상기 사용자의 손가락(960)이 감지됨에 대한 알림을 제공할 수 있다.
도 10은, 다양한 실시예들에 따른, 이미지에 대한 파라미터 값에 기초하여 적어도 하나의 카메라에서 오브젝트를 감지하는 방법을 설명하기 위한 도면(1000)이다.
도 10을 참조하면, 프로세서(예: 도 3의 프로세서(360))는 참조번호 <1010>에 도시된 바와 같이 제1 카메라(예: 도 3의 제1 카메라(341))로부터 획득되는 제1 이미지(1015)와 참조번호 <1050>에 도시된 바와 같이 제2 카메라(예: 도 3의 제2 카메라(343))로부터 획득되는 제2 이미지(1055)의 비교를 통해 적어도 하나의 카메라에서 오브젝트 예컨대, 사용자의 손가락(1060)이 감지되는지 여부를 결정할 수 있다.
일 실시예에서, 제1 카메라로부터 획득되는 이미지(1015)를 프리뷰 이미지로서 디스플레이(예: 도 3의 디스플레이(331))에 표시하는 중에 제2 카메라의 적어도 일부에 사용자의 손가락(1060)이 감지된 것으로 가정하여 설명한다.
일 실시예에서, 프로세서는 제1 이미지(1015) 및 제2 이미지(1055)를 구역 별로 구획하여 적어도 하나의 카메라에서 사용자의 손가락(1060)이 감지되는지 여부를 결정할 수 있다. 이하, 도 10에 따른 실시예에서, 상기 구획된 이미지에 대한 구역의 개수는 9개로 가정하여 설명하지만, 이에 한정하는 것은 아니며, 제1 카메라 및 제2 카메라 각각에 내장된 이미지 센서의 최대 픽셀 수(예: 256개)를 포함할 수 있다.
일 실시예에서, 제1 이미지(1015)의 각 구역(예: 제1 구역 내지 제9 구역) 내 지정된 개수(예: 10개)의 픽셀에 대한 파라미터 값과 상기 제1 이미지(1015)의 각 구역에 대응하는 제2 이미지(1055)의 구역(예: 제1 구역 내지 제9 구역) 내 지정된 개수(예: 10개)의 픽셀에 대한 파라미터 값을 비교할 수 있다. 예컨대, 상기 파라미터 값은 밝기 정보, 명암 정보, 위상 정보, 또는 이미지에서 추출된 경계선 중 적어도 하나를 포함할 수 있다.
일 실시예에서, 프로세서는 제1 이미지(1015) 내 지정된 개수의 픽셀에 대한 밝기 정보(예: 평균 밝기 정보), 제2 이미지(1055) 내 지정된 개수의 픽셀에 대한 밝기 정보를 비교할 수 있다. 제2 이미지(1055) 내 지정된 개수의 픽셀에 대한 밝기 정보는 사용자의 손가락(1060)이 제2 카메라의 적어도 일부에서 감지(예: 근접 또는 접촉)됨에 따라 제1 이미지(1015) 내 지정된 개수의 픽셀에 대한 평균 밝기 정보보다 낮을 수 있다. 상기 제1 이미지(1015) 및 제2 이미지(1055) 내 지정된 개수의 픽셀에 대한 밝기 정보의 차가 지정된 값을 초과하면, 프로세서는 적어도 하나의 카메라에서 사용자의 손가락(1060)이 감지된 것으로 결정할 수 있다.
일 실시예에서, 제1 이미지(1015) 및 제2 이미지(1055) 내 지정된 개수의 픽셀에 대한 밝기 정보의 차에 기초하여 적어도 하나의 카메라에서 오브젝트(1060)가 감지되는지 여부를 결정하는 것으로 설명하였지만, 이에 한정하는 것은 아니다. 예컨대, 전술한 지정된 개수의 픽셀에 대한 밝기 정보의 차에 기초하여 적어도 하나의 카메라에서 오브젝트(1060)가 감지되는지 여부를 결정하는 동작과 동일한 방법으로 지정된 개수의 픽셀에 대한 명암 정보의 차, 위상 차, 또는 이미지에서 추출된 경계선에 기초하여 적어도 하나의 카메라에서 사용자의 손가락(1060)이 감지되는지 여부를 결정할 수 있다.
일 실시예에서, 프로세서는 제1 이미지(1015) 내 지정된 개수의 픽셀에 대한 파라미터 값과 제2 이미지(1055) 내 지정된 개수의 픽셀에 대한 파라미터 값의 비교를 통해 적어도 하나의 카메라에서 사용자의 손가락(1060)이 감지된 것으로 결정되면, 상기 적어도 하나의 카메라에 상기 오브젝트가 감지됨에 대한 알림을 제공할 수 있다.
일 실시예에 따른 프로세서는 제1 이미지(1015) 및 제2 이미지(1055)의 각 구역 내 지정된 개수의 픽셀에 대한 파라미터 값만을 비교하는 동작을 통해, 적어도 하나의 카메라에서의 오브젝트를 빠르게 감지할 수 있다.
하지만 이에 한정하는 것은 아니며, 다른 실시예에서, 프로세서는 제1 이미지(1015)의 각 구역(예: 제1 구역 내지 제9 구역)의 파라미터 값과 상기 제1 이미지(1015)의 각 구역에 대응하는 제2 이미지(1055)의 구역(예: 제1 구역 내지 제9 구역)의 파라미터 값을 비교할 수 있다.
다른 실시예에서, 일반적으로 오브젝트에 의해 카메라가 가려지는 경우 카메라 전체 또는 일부가 가려질 수 있다. 카메라 전체 또는 일부가 가려지는 경우, 오브젝트는 이미지 내 구역 예컨대, 제1 구역 내지 제9 구역 중 외곽 구역 또는 중앙 구역에서 감지될 수 있다. 프로세서는 제1 구역 내지 제9 구역 중 외곽 구역 또는 중앙 구역을 파라미터 값을 비교하는 구역으로서 우선순위를 높게 부여할 수 있다. 예컨대, 프로세서는 제1 이미지(1015)의 외곽 구역(또는, 중앙 구역)의 파라미터 값과 상기 제1 이미지(1015)의 외곽 구역(또는, 중앙 구역)에 대응하는 제2 이미지(1055)의 외곽 구역(또는, 중앙 구역)의 파라미터 값을 비교할 수 있다. 오브젝트가 감지될 가능성이 높은 구역의 파라미터 값을 먼저 비교함에 따라 적어도 하나의 카메라에서의 오브젝트를 빠르게 감지할 수 있다.
도 11은, 다양한 실시예들에 따른, 이미지에 대한 파라미터 값에 기초하여 적어도 하나의 카메라에서 오브젝트를 감지하는 방법을 설명하기 위한 도면(1100)이다.
도 11을 참조하면, 프로세서(예: 도 3의 프로세서(360))는 참조번호 <1110>에 도시된 바와 같이 제1 카메라(예: 도 3의 제1 카메라(341))로부터 제1 이미지(1115)를 획득하고, 참조번호 <1150>에 도시된 바와 같이 제2 카메라(예: 도 3의 제2 카메라(343))로부터 제2 이미지(1155)를 획득할 수 있다. 프로세서는 상기 제1 이미지(1115) 및 제2 이미지(1155)에서 경계선을 추출할 수 있다.
일 실시예에 따른 상기 제1 이미지(1115) 및 제2 이미지(1155)에 포함된 피사체에 대한 색상 간 경계선을 검출하는 방법은, 공지된 기술로 본 발명의 기술 분야에서 통상의 지식을 가진 자에게 있어 자명하므로 상세한 설명은 생략하기로 한다.
일 실시예에서, 프로세서는 제1 이미지(1115)에서 추출된 경계선과 제2 이미지(1155)에서 추출된 경계선을 비교할 수 있다. 제2 이미지(1155)의 특정 영역은 제2 카메라에서 감지되는 오브젝트 예컨대, 사용자의 손가락(1160)에 의해 경계선(1165)이 추출됨에 따라 상기 제2 이미지(1155)의 특정 영역에 대응하는 제1 이미지(1115)의 특정 영역의 경계선과 상이할 수 있다. 제1 이미지(1115) 및 제2 이미지(1155) 간 비교를 통해 경계선이 상이한 영역이 존재하는 경우, 프로세서는, 적어도 하나의 카메라에서 사용자의 손가락(1160)이 감지된 것으로 결정하고, 상기 적어도 하나의 카메라에 상기 오브젝트가 감지됨에 대한 알림을 제공할 수 있다.
도 12는, 다양한 실시예들에 따른, 이미지에 대한 파라미터 값에 기초하여 적어도 하나의 카메라에서 오브젝트를 감지하는 방법을 설명하기 위한 흐름도(1200)이다.
도 12를 참조하면, 프로세서는 1201동작에서, 카메라 기능이 활성화되면, 제1 카메라(예: 도 3의 제1 카메라(341))로부터 제1 이미지(예: 도 9 내지 도 11의 제1 이미지(915, 1015, 1115))를 획득하고, 제2 카메라(예: 도 3의 제2 카메라(343))로부터 제2 이미지(예: 도 9 내지 도 11의 제2 이미지(955, 1055, 1155))를 획득할 수 있다.
일 실시예에서, 제1 카메라로부터 획득되는 제1 이미지를 프리뷰 이미지로서 디스플레이(예: 도 3의 디스플레이(331))에 표시하는 중에 제2 카메라의 적어도 일부에 오브젝트(예: 사용자의 손가락(예: 도 9 내지 도 11의 사용자의 손가락(960, 1060, 1160))가 감지된 것으로 가정하여 설명한다.
일 실시예에서, 프로세서는 1203동작에서, 제1 카메라로부터 획득되는 제1 이미지에 대한 적어도 하나의 파라미터 값과 제2 카메라로부터 획득되는 제2 이미지에 대한 적어도 하나의 파라미터 값을 비교할 수 있다. 예컨대, 상기 적어도 하나의 파라미터 값은 각 이미지에 대한 밝기 정보, 명암 정보, 위상 정보, 또는 이미지에서 추출된 경계선 중 적어도 하나를 포함할 수 있다. 예컨대, 프로세서는 제1 이미지 및 제2 이미지의 동일한 좌표의 픽셀 간의 파라미터 값을 비교하거나, 지정된 개수로 구획된 제1 이미지 및 제2 이미지의 동일한 구역 간의 파라미터 값을 비교하거나, 또는 구역 내 지정된 개수의 픽셀에 대한 파라미터 값을 비교할 수 있다.
일 실시예에서, 상기 비교 동작을 통해 프로세서는 1205동작에서, 적어도 하나의 카메라에서 오브젝트가 감지되는지 여부를 결정할 수 있다. 예컨대, 프로세서는 상기 비교를 통해 밝기 정보, 명암 정보, 위상 정보의 차가 지정된 값을 초과하는 경우, 또는 각 이미지에서 추출된 경계선이 상이한 것으로 결정된 경우 중 적어도 하나에 기초하여 적어도 하나의 카메라에서 오브젝트가 감지되는지 여부를 결정할 수 있다.
일 실시예에서, 상기 비교 동작을 통해 적어도 하나의 카메라에서 오브젝트가 감지되면, 프로세서는 1207동작에서, 상기 적어도 하나의 카메라에서 상기 오브젝트가 감지됨에 대한 알림을 제공할 수 있다. 상기 제공되는 적어도 하나의 카메라에 상기 오브젝트가 감지됨에 대한 알림을 통해 사용자는 적어도 하나의 카메라가 오브젝트에 의해 가려졌음을 직관적으로 확인할 수 있다.
일 실시예에서, 상기 비교 동작을 통해 적어도 하나의 카메라에서 오브젝트가 감지되지 않으면, 프로세서는 1209동작에서, 상기 적어도 하나의 카메라를 이용하여 촬영을 수행하기 위한 사용자 입력에 응답하여 촬영 기능을 수행할 수 있다.
일 실시예에서, 적어도 하나의 파라미터 값 각각에 가중치가 부여될 수 있으며, 프로세서는 가중치가 높은 적어도 하나의 파라미터 값에 기초하여 적어도 하나의 카메라에서 오브젝트가 감지되는지 여부를 결정할 수 있다.
예컨대, 상기 적어도 하나의 파라미터 값은 밝기 정보, 명암 정보, 위상 정보, 또는 이미지에서 추출된 경계선 중 적어도 하나를 포함하며, 가중치는 밝기 정보, 명암 정보, 위상 정보, 이미지에서 추출된 경계선 순으로 높게 부여된 것으로 가정하여 설명한다. 프로세서는 가중치가 높은 적어도 하나의 파라미터 값 예컨대, 밝기 정보에 기초하여 적어도 하나의 카메라에서 오브젝트가 감지되는지 여부를 결정할 수 있다. 이에 한정하는 것은 아니며, 프로세서는 가중치가 높은 두 개 이상의 파라미터 값 예컨대, 밝기 정보 및 명암 정보에 기초하여 적어도 하나의 카메라에서 오브젝트가 감지되는지 여부를 결정할 수 있다.
도 13은, 다양한 실시예들에 따른, 캐패시턴스 값 및 이미지에 대한 파라미터 값에 기초하여 적어도 하나의 카메라에서 오브젝트를 감지하는 방법을 설명하기 위한 흐름도(1300)이다.
다양한 실시예에 따른 도 13은, 도 8의 캐패시턴스 값 및 도 12의 파라미터 값을 이용하여 적어도 하나의 카메라에서 오브젝트를 감지하는 방법을 설명하기 위한 도면이다.
일 실시예에 따른, 1301동작 및 1303동작은 전술한 도 8의 801동작 및 803동작과 동일하고, 1305동작 내지 1311동작은 전술한 도 12의 1201동작 내지 1209동작과 동일하므로 그에 대한 상세한 설명은 상기 도 8 및 도 12와 관련된 설명으로 대신한다.
도 13을 참조하면, 프로세서(예: 도 3의 프로세서(360))는 1301동작에서, 적어도 하나의 센싱부(예: 도 3의 센싱부(350))를 통해 획득되는 캐패시턴스 값의 변화를 감지할 수 있다.
일 실시예에서, 프로세서는 1303동작에서, 상기 변화된 캐패시턴스 값이 지정된 값을 초과하는지 여부를 결정할 수 있다. 상기 변화된 캐패시턴스 값이 상기 지정된 값을 초과하면, 프로세서는 1305동작에서, 제1 카메라(예: 도 3의 제1 카메라(341))로부터 획득되는 제1 이미지(예: 도 9 내지 도 11의 제1 이미지(915, 1015, 1115))에 대한 적어도 하나의 파라미터 값과 제2 카메라(예: 도 3의 제2 카메라(343))로부터 획득되는 제2 이미지(예: 도 9 내지 도 11의 제2 이미지(955, 1055, 1155))에 대한 적어도 하나의 파라미터 값을 비교할 수 있다.
일 실시예에서, 상기 비교 동작을 통해 프로세서는 1307동작에서, 적어도 하나의 카메라에서 오브젝트가 감지되는지 여부를 결정하고, 상기 오브젝트가 감지되면, 1309동작에서, 상기 적어도 하나의 카메라에서 상기 오브젝트가 감지됨에 대한 알림을 제공할 수 있다.
일 실시예에서, 1303동작의 변화된 캐패시턴스 값이 지정된 값을 초과하지 않거나, 또는 1307동작의 비교 동작을 통해 적어도 하나의 카메라에서 오브젝트가 감지되지 않으면, 프로세서는 1311동작에서, 적어도 하나의 카메라를 이용하여 촬영을 수행하기 위한 사용자 입력에 응답하여 촬영 기능을 수행할 수 있다.
일 실시예에 따른 도 13에서, 1303동작의 변화된 캐패시턴스 값이 지정된 값을 초과하는지 여부 및 1305동작의 각 이미지에 대한 파라미터 값 비교를 통해 보다 정확하게 적어도 하나의 카메라에서 오브젝트가 감지되는지 여부를 결정할 수 있다.
도 14는, 다양한 실시예들에 따른, 적어도 하나의 카메라에서 오브젝트가 감지되는 경우를 도시한 도면(1400)이다.
도 14를 참조하면, 참조번호 <1410> 및 <1450>에 도시된 바와 같이 전자 장치(예: 도 3의 전자 장치(301))는 후면에 제1 카메라(1415)(예: 도 3의 제1 카메라(341)) 및 제2 카메라(1420)(예: 도 3의 제2 카메라(343))를 구비할 수 있다. 전자 장치는 후면에 상기 제1 카메라(1415) 및 상기 제2 카메라(1420)를 둘러싸는 적어도 하나의 데코 부재(1425)(예: 도 5의 데코 부재(510), 도 7의 제1 데코 부재(710), 제2 데코 부재(720))를 구비할 수 있다. 상기 적어도 하나의 데코 부재(1425)는 도전성 재질(예: 메탈(metal) 재질)로 형성될 수 있다.
일 실시예에서, 프로세서(예: 도 3의 프로세서(360))는 센싱부(예: 도 3의 센싱부(350)), 도 5의 센싱부(520), 도 7의 센싱부(730))와 상기 적어도 하나의 데코 부재(1425)를 전기적으로 연결되도록 제어할 수 있다. 상기 센싱부와 상기 적어도 하나의 데코 부재(1425)가 전기적으로 연결됨에 따라 프로세서는 상기 적어도 하나의 데코 부재(1425)에 오브젝트 예컨대, 사용자의 손가락(1430)이 감지되면, 상기 센싱부를 통해 캐패시턴스 값의 변화를 감지할 수 있다.
예컨대, 참조번호 <1410> 및 <1450>에 도시된 바와 같이 제2 카메라(1420)에 사용자의 손가락(1430)이 감지됨에 따라 캐패시턴스 값이 변화할 수 있으며, 프로세서는 상기 변화된 캐패시턴스 값이 지정된 값을 초과하는 경우 상기 제2 카메라(1420)에서 사용자의 손가락(1430)이 감지됨을 나타내는 알림을 제공할 수 있다.
일 실시예에 따른 상기 알림을 제공하는 구성과 관련하여, 도 15에서 상세히 살펴보도록 한다.
도 15는, 다양한 실시예들에 따른, 적어도 하나의 카메라에서 오브젝트가 감지됨에 대한 알림을 제공하는 방법을 설명하기 위한 도면(1500)이다.
일 실시예에서, 제1 카메라(예: 도 3의 제1 카메라(341))로부터 획득되는 이미지를 프리뷰 이미지로서 디스플레이에 표시하고, 제2 카메라(예: 도 3의 제2 카메라(343))의 적어도 일부에서 사용자의 손가락(1540)이 감지된 것으로 가정하여 설명한다.
도 15를 참조하면, 참조번호 <1510>에 도시된 바와 같이 프로세서(예: 도 3의 프로세서(360))는 디스플레이(예: 도 3의 디스플레이(331))에 카메라(예: 도 3의 카메라(340))의 적어도 일부가 오브젝트 예컨대, 사용자 손가락에 의해 가려졌음을 알리는 팝업창(1515)을 표시할 수 있다. 이에 한정하는 것은 아니며, 프로세서는 진동 또는 소리를 출력하여 카메라의 적어도 일부가 오브젝트에 의해 가려졌음에 대한 알림을 제공할 수 있다.
일 실시예에서, 참조번호 <1530>에 도시된 바와 같이 프로세서는 제1 카메라로부터 획득되는 이미지를 프리뷰 이미지로서 표시하는 대신 제2 카메라로 획득되는 상기 감지된 사용자의 손가락(1540)을 포함하는 이미지(1535)를 프리뷰 이미지로서 디스플레이에 표시할 수 있다. 이에 한정하는 것은 아니며, 프로세서는 제1 카메라로부터 획득되는 제1 이미지와 제2 카메라로부터 획득되는 제2 이미지를 지정된 시간 간격으로 디스플레이에 표시할 수 있다. 상기 제1 이미지 및 상기 제2 이미지가 상기 지정된 시간 간격으로 표시됨에 따른 깜빡이는 시각적 효과를 통해 카메라의 적어도 일부가 오브젝트에 의해 가려졌음에 대한 알림을 제공할 수 있다.
일 실시예에서, 참조번호 <1550>에 도시된 바와 같이 프로세서는 제1 카메라로부터 획득되는 제1 이미지에 대한 픽셀(1555)와 제2 카메라로부터 획득되는 제2 이미지에 대한 픽셀(1560)을 혼합하여 하나의 프리뷰 이미지로 생성하여 디스플레이에 표시할 수 있다. 제1 이미지에 대한 픽셀(1555)과 제2 이미지에 대한 픽셀(1560)이 혼합되어 프리뷰 이미지로서 표시됨에 따라 사용자의 손가락이 위치하는 제2 이미지에 대한 픽셀(1560) 영역에 사용자의 손가락이 표시될 수 있다.
일 실시예에 따른 전술한 적어도 하나의 카메라에서 오브젝트가 감지됨에 대한 알림을 제공함에 따라 사용자는 손가락에 의해 적어도 하나의 카메라가 가려졌음을 직관적으로 확인할 수 있다.
본 문서에 개시된 다양한 실시예들에 따른 전자 장치는 다양한 형태의 장치가 될 수 있다. 전자 장치는, 예를 들면, 휴대용 통신 장치(예: 스마트 폰), 컴퓨터 장치, 휴대용 멀티미디어 장치, 휴대용 의료 기기, 카메라, 웨어러블 장치, 또는 가전 장치를 포함할 수 있다. 본 문서의 실시예에 따른 전자 장치는 전술한 기기들에 한정되지 않는다.
본 문서의 다양한 실시예들 및 이에 사용된 용어들은 본 문서에 기재된 기술적 특징들을 특정한 실시예들로 한정하려는 것이 아니며, 해당 실시예의 다양한 변경, 균등물, 또는 대체물을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 또는 관련된 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다. 아이템에 대응하는 명사의 단수 형은 관련된 문맥상 명백하게 다르게 지시하지 않는 한, 상기 아이템 한 개 또는 복수 개를 포함할 수 있다. 본 문서에서, "A 또는 B", "A 및 B 중 적어도 하나", “A 또는 B 중 적어도 하나”, "A, B, 또는 C", "A, B, 및 C 중 적어도 하나”, 및 “A, B, 또는 C 중 적어도 하나"와 같은 문구들 각각은 그 문구들 중 해당하는 문구에 함께 나열된 항목들 중 어느 하나, 또는 그들의 모든 가능한 조합을 포함할 수 있다. "제1", "제2", 또는 "첫째" 또는 "둘째"와 같은 용어들은 단순히 해당 구성요소를 다른 해당 구성요소와 구분하기 위해 사용될 수 있으며, 해당 구성요소들을 다른 측면(예: 중요성 또는 순서)에서 한정하지 않는다. 어떤(예: 제1) 구성요소가 다른(예: 제2) 구성요소에, “기능적으로” 또는 “통신적으로”라는 용어와 함께 또는 이런 용어 없이, “커플드” 또는 “커넥티드”라고 언급된 경우, 그것은 상기 어떤 구성요소가 상기 다른 구성요소에 직접적으로(예: 유선으로), 무선으로, 또는 제3 구성요소를 통하여 연결될 수 있다는 것을 의미한다.
본 문서에서 사용된 용어 "모듈"은 하드웨어, 소프트웨어 또는 펌웨어로 구현된 유닛을 포함할 수 있으며, 예를 들면, 로직, 논리 블록, 부품, 또는 회로 등의 용어와 상호 호환적으로 사용될 수 있다. 모듈은, 일체로 구성된 부품 또는 하나 또는 그 이상의 기능을 수행하는, 상기 부품의 최소 단위 또는 그 일부가 될 수 있다. 예를 들면, 일 실시예에 따르면, 모듈은 ASIC(application-specific integrated circuit)의 형태로 구현될 수 있다.
본 문서의 다양한 실시예들은 기기(machine)(예: 전자 장치(101)) 의해 읽을 수 있는 저장 매체(storage medium)(예: 내장 메모리(136) 또는 외장 메모리(138))에 저장된 하나 이상의 명령어들을 포함하는 소프트웨어(예: 프로그램(140))로서 구현될 수 있다. 예를 들면, 기기(예: 전자 장치(101))의 프로세서(예: 프로세서(120))는, 저장 매체로부터 저장된 하나 이상의 명령어들 중 적어도 하나의 명령을 호출하고, 그것을 실행할 수 있다. 이것은 기기가 상기 호출된 적어도 하나의 명령어에 따라 적어도 하나의 기능을 수행하도록 운영되는 것을 가능하게 한다. 상기 하나 이상의 명령어들은 컴파일러에 의해 생성된 코드 또는 인터프리터에 의해 실행될 수 있는 코드를 포함할 수 있다. 기기로 읽을 수 있는 저장 매체는, 비일시적(non-transitory) 저장 매체의 형태로 제공될 수 있다. 여기서, ‘비일시적’은 저장 매체가 실재(tangible)하는 장치이고, 신호(signal)(예: 전자기파)를 포함하지 않는다는 것을 의미할 뿐이며, 이 용어는 데이터가 저장 매체에 반영구적으로 저장되는 경우와 임시적으로 저장되는 경우를 구분하지 않는다.
일 실시예에 따르면, 본 문서에 개시된 다양한 실시예들에 따른 방법은 컴퓨터 프로그램 제품(computer program product)에 포함되어 제공될 수 있다. 컴퓨터 프로그램 제품은 상품으로서 판매자 및 구매자 간에 거래될 수 있다. 컴퓨터 프로그램 제품은 기기로 읽을 수 있는 저장 매체(예: compact disc read only memory(CD-ROM))의 형태로 배포되거나, 또는 어플리케이션 스토어(예: 플레이 스토어TM)를 통해 또는 두개의 사용자 장치들(예: 스마트 폰들) 간에 직접, 온라인으로 배포(예: 다운로드 또는 업로드)될 수 있다. 온라인 배포의 경우에, 컴퓨터 프로그램 제품의 적어도 일부는 제조사의 서버, 어플리케이션 스토어의 서버, 또는 중계 서버의 메모리와 같은 기기로 읽을 수 있는 저장 매체에 적어도 일시 저장되거나, 임시적으로 생성될 수 있다.
다양한 실시예들에 따르면, 상기 기술한 구성요소들의 각각의 구성요소(예: 모듈 또는 프로그램)는 단수 또는 복수의 개체를 포함할 수 있다. 다양한 실시예들에 따르면, 전술한 해당 구성요소들 중 하나 이상의 구성요소들 또는 동작들이 생략되거나, 또는 하나 이상의 다른 구성요소들 또는 동작들이 추가될 수 있다. 대체적으로 또는 추가적으로, 복수의 구성요소들(예: 모듈 또는 프로그램)은 하나의 구성요소로 통합될 수 있다. 이런 경우, 통합된 구성요소는 상기 복수의 구성요소들 각각의 구성요소의 하나 이상의 기능들을 상기 통합 이전에 상기 복수의 구성요소들 중 해당 구성요소에 의해 수행되는 것과 동일 또는 유사하게 수행할 수 있다. 다양한 실시예들에 따르면, 모듈, 프로그램 또는 다른 구성요소에 의해 수행되는 동작들은 순차적으로, 병렬적으로, 반복적으로, 또는 휴리스틱하게 실행되거나, 상기 동작들 중 하나 이상이 다른 순서로 실행되거나, 생략되거나, 또는 하나 이상의 다른 동작들이 추가될 수 있다.

Claims (18)

  1. 전자 장치에 있어서,
    하우징;
    상기 하우징 외부로 노출되는 제1 카메라 및 제2 카메라;
    상기 제1 카메라 및 상기 제2 카메라를 둘러싸는 전도성 재질로 형성된 적어도 하나의 데코 부재;
    적어도 하나의 센싱부; 및
    상기 제1 카메라, 상기 제2 카메라, 상기 적어도 하나의 데코 부재, 및 상기 적어도 하나의 센싱부와 전기적으로 연결된 프로세서를 포함하며,
    상기 프로세서는,
    상기 적어도 하나의 센싱부를 통해 상기 전도성 재질로 형성된 적어도 하나의 데코 부재에 대한 캐패시턴스 값을 획득하고,
    카메라 기능이 활성화되고, 상기 획득된 캐패시턴스 값의 변화가 감지되면, 상기 변화된 캐패시턴스 값이 지정된 값을 초과하는지 여부를 결정하고, 및
    상기 변화된 캐패시턴스 값이 상기 지정된 값을 초과하면, 상기 제1 카메라 및 상기 제2 카메라 중 적어도 하나의 카메라에서 오브젝트가 감지됨에 대한 알림을 제공하도록 설정된 전자 장치.
  2. 제 1 항에 있어서,
    상기 프로세서는,
    상기 변화된 캐패시턴스 값이 상기 지정된 값을 초과하면, 상기 제1 카메라로부터 획득되는 제1 이미지에 대한 적어도 하나의 파라미터 값과 상기 제2 카메라로부터 획득되는 제2 이미지에 대한 적어도 하나의 파라미터 값을 비교하고, 및
    상기 비교 결과에 기초하여, 상기 적어도 하나의 카메라에서 상기 오브젝트가 감지됨에 대한 알림을 제공하도록 설정된 전자 장치.
  3. 제 2 항에 있어서,
    상기 프로세서는,
    상기 제1 이미지 및 상기 제2 이미지의 동일한 좌표의 픽셀 간의 적어도 하나의 파라미터 값을 비교하거나,
    지정된 개수로 구획된 상기 제1 이미지 및 상기 제2 이미지의 동일한 구역 간의 적어도 하나의 파라미터 값을 비교하거나, 또는
    상기 제1 이미지 및 상기 제2 이미지의 각 구역 내 지정된 개수의 픽셀에 대한 적어도 하나의 파라미터 값을 비교하도록 설정된 전자 장치.
  4. 제 2 항에 있어서,
    상기 적어도 하나의 파라미터 값은, 이미지에 대한 밝기 정보, 명암 정보, 위상 정보, 또는 상기 이미지에서 추출된 경계선 중 적어도 하나를 포함하는 전자 장치.
  5. 제 4 항에 있어서,
    상기 프로세서는,
    상기 적어도 하나의 파라미터 값 각각에 가중치를 부여하고, 상기 가중치가 높은 적어도 두 개의 파라미터 값에 기초하여 상기 제1 카메라로부터 획득되는 상기 제1 이미지에 대한 적어도 두 개의 파라미터 값과 상기 제2 카메라로부터 획득되는 상기 제2 이미지에 대한 적어도 두 개의 파라미터 값을 비교하도록 설정된 전자 장치.
  6. 제 1 항에 있어서,
    디스플레이를 더 포함하며,
    상기 프로세서는,
    상기 제1 카메라 및 상기 제2 카메라 중 하나의 카메라로부터 획득되는 이미지를 프리뷰 이미지로서 상기 디스플레이에 표시하도록 설정되고, 다른 하나의 카메라로부터 고화질의 이미지를 획득하도록 설정된 전자 장치.
  7. 제 6 항에 있어서,
    상기 프로세서는,
    상기 알림을 소리, 진동, 팝업창, 상기 제1 카메라로부터 획득되는 픽셀 및 상기 제2 카메라로부터 획득되는 픽셀을 혼합한 이미지를 프리뷰 이미지로서 상기 디스플레이에 표시, 또는 상기 오브젝트가 감지된 카메라로부터 획득되는 이미지를 프리뷰 이미지로서 상기 디스플레이에 표시 중 적어도 하나를 이용하여 제공하도록 설정된 전자 장치.
  8. 제 1 항에 있어서,
    상기 프로세서는,
    상기 변화된 캐패시턴스 값이 상기 지정된 값 이하이면, 상기 제1 카메라 및 상기 제2 카메라를 이용하여 촬영을 수행하기 위한 사용자 입력에 응답하여 촬영 기능을 수행하도록 설정된 전자 장치.
  9. 제 1 항에 있어서,
    상기 적어도 하나의 센싱부는, 그립 센서 또는 터치 IC(integrated circuit) 중 적어도 하나를 포함하는 전자 장치.
  10. 제 1 항에 있어서,
    상기 하우징은, 비전도성 물질로 형성된 전자 장치.
  11. 전자 장치의 카메라의 가림을 인식하는 방법에 있어서,
    적어도 하나의 센싱부를 통해 전도성 재질로 제1 카메라 및 제2 카메라를 둘러싸도록 형성된 적어도 하나의 데코 부재에 대한 캐패시턴스 값을 획득하는 동작;
    카메라 기능이 활성화되고, 상기 획득된 캐패시턴스 값의 변화가 감지되면, 상기 변화된 캐패시턴스 값이 지정된 값을 초과하는지 여부를 결정하는 동작; 및
    상기 변화된 캐패시턴스 값이 상기 지정된 값을 초과하면, 상기 제1 카메라 및 상기 제2 카메라 중 적어도 하나의 카메라에서 오브젝트가 감지됨에 대한 알림을 제공하는 동작을 포함하는 방법.
  12. 제 11 항에 있어서,
    상기 변화된 캐패시턴스 값이 상기 지정된 값을 초과하면, 상기 제1 카메라로부터 획득되는 제1 이미지에 대한 적어도 하나의 파라미터 값과 상기 제2 카메라로부터 획득되는 제2 이미지에 대한 적어도 하나의 파라미터 값을 비교하는 동작을 더 포함하는 방법.
  13. 제 12 항에 있어서,
    상기 적어도 하나의 파라미터 값을 비교하는 동작은,
    상기 제1 이미지 및 상기 제2 이미지의 동일한 좌표의 픽셀 간의 적어도 하나의 파라미터 값을 비교하는 동작;
    지정된 개수로 구획된 상기 제1 이미지 및 상기 제2 이미지의 동일한 구역 간의 적어도 하나의 파라미터 값을 비교하는 동작; 또는
    상기 제1 이미지 및 상기 제2 이미지의 각 구역 내 지정된 개수의 픽셀에 대한 적어도 하나의 파라미터 값을 비교하는 동작 중 적어도 하나를 포함하는 방법.
  14. 제 12 항에 있어서,
    상기 적어도 하나의 파라미터 값은, 이미지에 대한 밝기 정보, 명암 정보, 위상 정보, 또는 상기 이미지에서 추출된 경계선 중 적어도 하나를 포함하는 방법.
  15. 제 14 항에 있어서,
    상기 적어도 하나의 파라미터 값을 비교하는 동작은,
    상기 적어도 하나의 파라미터 값 각각에 가중치를 부여하는 동작; 및
    상기 가중치가 높은 적어도 두 개의 파라미터 값에 기초하여 상기 제1 카메라로부터 획득되는 상기 제1 이미지에 대한 적어도 두 개의 파라미터 값과 상기 제2 카메라로부터 획득되는 상기 제2 이미지에 대한 적어도 두 개의 파라미터 값을 비교하는 동작을 포함하는 방법.
  16. 제 11 항에 있어서,
    상기 제1 카메라 및 상기 제2 카메라 중 하나의 카메라로부터 획득되는 이미지는 프리뷰 이미지로서 디스플레이에 표시되는 이미지를 포함하고, 및
    상기 제1 카메라 및 상기 제2 카메라 중 다른 하나의 카메라로부터 획득되는 이미지는 상기 디스플레이에 표시되지 않으며 고화질의 이미지를 포함하는 방법.
  17. 제 16 항에 있어서,
    상기 알림을 제공하는 동작은,
    소리, 진동, 팝업창, 상기 제1 카메라로부터 획득되는 픽셀 및 상기 제2 카메라로부터 획득되는 픽셀을 혼합한 이미지를 프리뷰 이미지로서 상기 디스플레이에 표시, 또는 상기 오브젝트가 감지된 카메라로부터 획득되는 이미지를 프리뷰 이미지로서 상기 디스플레이에 표시 중 적어도 하나를 이용하여 상기 알림을 제공하는 동작을 포함하는 방법.
  18. 제 11 항에 있어서,
    상기 변화된 캐패시턴스 값이 상기 지정된 값 이하이면, 상기 제1 카메라 및 상기 제2 카메라를 이용하여 촬영을 수행하기 위한 사용자 입력에 응답하여 촬영 기능을 수행하는 동작을 더 포함하는 방법.
PCT/KR2020/001000 2019-01-25 2020-01-21 전자 장치 및 이를 이용한 카메라의 가림을 인식하는 방법 WO2020153704A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020190010098A KR20200092762A (ko) 2019-01-25 2019-01-25 전자 장치 및 이를 이용한 카메라의 가림을 인식하는 방법
KR10-2019-0010098 2019-01-25

Publications (1)

Publication Number Publication Date
WO2020153704A1 true WO2020153704A1 (ko) 2020-07-30

Family

ID=71735527

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2020/001000 WO2020153704A1 (ko) 2019-01-25 2020-01-21 전자 장치 및 이를 이용한 카메라의 가림을 인식하는 방법

Country Status (2)

Country Link
KR (1) KR20200092762A (ko)
WO (1) WO2020153704A1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210072498A (ko) 2019-12-09 2021-06-17 삼성전자주식회사 디스플레이의 지정된 영역에 표시를 변경하는 전자 장치 및 이의 동작 방법

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR19990038706U (ko) * 1998-03-31 1999-10-25 유무성 이안 반사식 카메라의 촬영 렌즈 가림 경고 장치
JP2003235053A (ja) * 2002-02-08 2003-08-22 Canon Inc 撮像装置及び撮像方法
JP2006154450A (ja) * 2004-11-30 2006-06-15 Casio Comput Co Ltd カメラ装置及びカメラ制御プログラム
JP2012015751A (ja) * 2010-06-30 2012-01-19 Fujifilm Corp 複眼カメラ、撮影条件設定方法、及び撮影条件設定プログラム
KR20140060760A (ko) * 2012-11-12 2014-05-21 엘지전자 주식회사 어레이 카메라, 휴대 단말기 및 그 동작 방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR19990038706U (ko) * 1998-03-31 1999-10-25 유무성 이안 반사식 카메라의 촬영 렌즈 가림 경고 장치
JP2003235053A (ja) * 2002-02-08 2003-08-22 Canon Inc 撮像装置及び撮像方法
JP2006154450A (ja) * 2004-11-30 2006-06-15 Casio Comput Co Ltd カメラ装置及びカメラ制御プログラム
JP2012015751A (ja) * 2010-06-30 2012-01-19 Fujifilm Corp 複眼カメラ、撮影条件設定方法、及び撮影条件設定プログラム
KR20140060760A (ko) * 2012-11-12 2014-05-21 엘지전자 주식회사 어레이 카메라, 휴대 단말기 및 그 동작 방법

Also Published As

Publication number Publication date
KR20200092762A (ko) 2020-08-04

Similar Documents

Publication Publication Date Title
WO2020032555A1 (en) Electronic device and method for providing notification related to image displayed through display and image stored in memory based on image analysis
WO2020171583A1 (en) Electronic device for stabilizing image and method for operating same
WO2020171512A1 (en) Electronic device for recommending composition and operating method thereof
WO2019143050A1 (en) Electronic device and method for controlling autofocus of camera
WO2021133025A1 (en) Electronic device comprising image sensor and method of operation thereof
WO2020071823A1 (en) Electronic device and gesture recognition method thereof
WO2021141287A1 (ko) 카메라 프리뷰를 제공하는 전자 장치 및 그 방법
WO2021112525A1 (en) Electronic device and method for controlling camera motion
WO2020171333A1 (ko) 이미지 내의 오브젝트 선택에 대응하는 서비스를 제공하기 위한 전자 장치 및 방법
WO2019208915A1 (ko) 외부 장치의 자세 조정을 통해 복수의 카메라들을 이용하여 이미지를 획득하는 전자 장치 및 방법
WO2019172723A1 (ko) 이미지 센서와 연결된 인터페이스 및 복수의 프로세서들간에 연결된 인터페이스를 포함하는 전자 장치
WO2021145667A1 (ko) 카메라 이동 제어 방법 및 장치
WO2021112500A1 (en) Electronic device and method for correcting image in camera switching
WO2019054626A1 (ko) 제 1 이미지 센서에서 제공된 신호를 이용하여 제 2 이미지 센서에서 데이터를 획득하는 방법 및 전자 장치
WO2020231156A1 (en) Electronic device and method for acquiring biometric information using light of display
WO2021033921A1 (ko) 인쇄 회로 기판을 포함하는 카메라 모듈 및 이를 포함하는 전자 장치
WO2019059635A1 (ko) 하나의 이미지 센서를 통해 획득된 rgb 이미지와 ir 이미지를 이용하여 기능을 제공하는 전자 장치
WO2020171450A1 (ko) 뎁스 맵을 생성하는 전자 장치 및 방법
WO2020153704A1 (ko) 전자 장치 및 이를 이용한 카메라의 가림을 인식하는 방법
WO2020145482A1 (en) Electronic device for controlling frame rate of image sensor and method thereof
WO2022010193A1 (ko) 이미지 개선을 위한 전자장치 및 그 전자장치의 카메라 운용 방법
WO2019190250A1 (ko) 이미지에 포함된 반사 객체의 속성에 기반하여, 반사 객체에 다른 이미지를 합성하는 방법 및 전자 장치
WO2022092706A1 (ko) 복수의 카메라를 이용한 사진 촬영 방법 및 그 장치
WO2021235747A1 (ko) 카메라 및 마이크를 포함하는 전자 장치 및 그 운용 방법
WO2021158043A1 (ko) 전자 장치 및 오토 포커스 수행 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20744648

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 20744648

Country of ref document: EP

Kind code of ref document: A1