WO2024085506A1 - 이미지를 획득하기 위한 전자 장치 및 방법 - Google Patents

이미지를 획득하기 위한 전자 장치 및 방법 Download PDF

Info

Publication number
WO2024085506A1
WO2024085506A1 PCT/KR2023/015275 KR2023015275W WO2024085506A1 WO 2024085506 A1 WO2024085506 A1 WO 2024085506A1 KR 2023015275 W KR2023015275 W KR 2023015275W WO 2024085506 A1 WO2024085506 A1 WO 2024085506A1
Authority
WO
WIPO (PCT)
Prior art keywords
user input
electronic device
capture operation
capture
shutter
Prior art date
Application number
PCT/KR2023/015275
Other languages
English (en)
French (fr)
Inventor
맹숙영
권범준
김동현
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020220159804A external-priority patent/KR20240056370A/ko
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Publication of WO2024085506A1 publication Critical patent/WO2024085506A1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/62—Control of parameters via user interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/907—Television signal recording using static stores, e.g. storage tubes or semiconductor memories

Definitions

  • Various embodiments of the present disclosure relate to electronic devices and methods for acquiring images.
  • the user may press the shutter button to acquire an image using a camera included in the electronic device.
  • the electronic device may acquire an image.
  • the electronic device may trigger auto exposure (AE), auto focusing (AF), and auto white balance (AWB) functions and then acquire images through capture events and/or shutter events. .
  • AE auto exposure
  • AF auto focusing
  • AVB auto white balance
  • the electronic device may include a camera, at least one processor, and a memory having storage space.
  • the at least one processor may be configured to receive a first user input for capture.
  • the at least one processor based on receiving a second user input for capture while a first capture operation corresponding to the first user input is performed through the camera, Information can be stored in the storage space.
  • the at least one processor may be configured to identify whether a time difference between the second user input and completion of the first capture operation is less than or equal to a threshold, based on identifying completion of the first capture operation. .
  • the at least one processor may be configured to perform a second capture operation corresponding to the second user input when the time difference is less than or equal to the threshold.
  • a method performed by an electronic device may include receiving a first user input for capture.
  • the method includes an operation of storing information about the second user input in a storage space based on receiving a second user input for capture while a first capture operation corresponding to the first user input is performed. It can be included.
  • the operation may include, based on identifying completion of the first capture operation, identifying whether a time difference between the second user input and completion of the first capture operation is less than or equal to a threshold.
  • the operation may include performing a second capture operation corresponding to the second user input when the time difference is less than or equal to the threshold.
  • Non-transitory computer-readable media in accordance with embodiments are provided.
  • the non-transitory computer-readable medium may include memory configured to store instructions.
  • the instructions when executed by a processor, cause the electronic device to receive a first user input for capture, and while a first capture operation corresponding to the first user input is performed, to receive a second user input for capture.
  • the time difference between the second user input and completion of the first capture operation It may be determined whether is less than or equal to a threshold, and if the time difference is less than or equal to the threshold, a second capture operation corresponding to the second user input may be caused to be performed.
  • FIG. 1 is a block diagram of an electronic device in a network environment, according to embodiments.
  • FIG. 2A is a block illustrating a camera module according to embodiments.
  • 2B shows an example of a functional configuration of an electronic device, according to one embodiment.
  • FIG 3 shows an example of a capture procedure, according to one embodiment.
  • 4A-4B illustrate examples of capture operations corresponding to consecutive user inputs according to one embodiment.
  • FIG. 5 shows an example of capture operations according to a post processing picture (PPP) method, according to one embodiment.
  • PPP post processing picture
  • FIG. 6 illustrates an operational flow of an electronic device for capture operations corresponding to continuous user inputs, according to one embodiment.
  • FIG. 7 illustrates an operation flow of an electronic device for storing user input for capture, according to an embodiment.
  • FIG. 8 illustrates an operational flow of an electronic device after completion of a capture operation, according to an embodiment.
  • Terms referring to storage used in the following description e.g. storage space, memory, buffer, queue, list, container
  • terms referring to user input e.g. shutter, button input, press input, Capture event, or shutter event
  • terms referring to internal operations of the system e.g., trigger, procedure, event, or operation
  • terms referring to device components, etc. are provided as examples for convenience of explanation. Accordingly, the present disclosure is not limited to the terms described below, and other terms having equivalent technical meaning may be used.
  • terms such as '...bu', '...gi', '...mul', or '...body' used hereinafter mean at least one shape structure or processing function. It can mean a unit.
  • expressions such as greater than or less than may be used to determine whether a specific condition is satisfied or fulfilled, but this is only a description for expressing an example and a description of more or less than or equal to It is not excluded.
  • Conditions written as ‘more than’ can be replaced with ‘more than’
  • conditions written as ‘less than’ can be replaced with ‘less than’
  • conditions written as ‘more than and less than’ can be replaced with ‘greater than and less than’.
  • 'A' to 'B' means at least one of the elements from A to (including A) and B (including B).
  • 'C' and/or 'D' means including at least one of 'C' or 'D', i.e. ⁇ 'C', 'D', 'C' and 'D' ⁇ .
  • FIG. 1 is a block diagram of an electronic device in a network environment, according to one embodiment.
  • the electronic device 101 communicates with the electronic device 102 through a first network 198 (e.g., a short-range wireless communication network) or a second network 199. It is possible to communicate with at least one of the electronic device 104 or the server 108 through (e.g., a long-distance wireless communication network). According to one embodiment, the electronic device 101 may communicate with the electronic device 104 through the server 108.
  • a first network 198 e.g., a short-range wireless communication network
  • a second network 199 e.g., a long-distance wireless communication network.
  • the electronic device 101 may communicate with the electronic device 104 through the server 108.
  • the electronic device 101 includes a processor 120, a memory 130, an input module 150, an audio output module 155, a display module 160, an audio module 170, and a sensor module ( 176), interface 177, connection terminal 178, haptic module 179, camera module 180, power management module 188, battery 189, communication module 190, subscriber identification module 196 , or may include an antenna module 197.
  • at least one of these components eg, the connection terminal 178) may be omitted or one or more other components may be added to the electronic device 101.
  • some of these components are integrated into one component (e.g., display module 160). It can be.
  • the processor 120 for example, executes software (e.g., program 140) to operate at least one other component (e.g., hardware or software component) of the electronic device 101 connected to the processor 120. It can be controlled and various data processing or calculations can be performed. According to one embodiment, as at least part of data processing or computation, the processor 120 stores commands or data received from another component (e.g., sensor module 176 or communication module 190) in volatile memory 132. The commands or data stored in the volatile memory 132 can be processed, and the resulting data can be stored in the non-volatile memory 134.
  • software e.g., program 140
  • the processor 120 stores commands or data received from another component (e.g., sensor module 176 or communication module 190) in volatile memory 132.
  • the commands or data stored in the volatile memory 132 can be processed, and the resulting data can be stored in the non-volatile memory 134.
  • the processor 120 includes a main processor 121 (e.g., a central processing unit or an application processor) or an auxiliary processor 123 that can operate independently or together (e.g., a graphics processing unit, a neural network processing unit ( It may include a neural processing unit (NPU), an image signal processor, a sensor hub processor, or a communication processor).
  • a main processor 121 e.g., a central processing unit or an application processor
  • auxiliary processor 123 e.g., a graphics processing unit, a neural network processing unit ( It may include a neural processing unit (NPU), an image signal processor, a sensor hub processor, or a communication processor.
  • the electronic device 101 includes a main processor 121 and a secondary processor 123
  • the secondary processor 123 may be set to use lower power than the main processor 121 or be specialized for a designated function. You can.
  • the auxiliary processor 123 may be implemented separately from the main processor 121 or as part of it.
  • the auxiliary processor 123 may, for example, act on behalf of the main processor 121 while the main processor 121 is in an inactive (e.g., sleep) state, or while the main processor 121 is in an active (e.g., application execution) state. ), together with the main processor 121, at least one of the components of the electronic device 101 (e.g., the display module 160, the sensor module 176, or the communication module 190) At least some of the functions or states related to can be controlled.
  • co-processor 123 e.g., image signal processor or communication processor
  • may be implemented as part of another functionally related component e.g., camera module 180 or communication module 190. there is.
  • the auxiliary processor 123 may include a hardware structure specialized for processing artificial intelligence models.
  • Artificial intelligence models can be created through machine learning. For example, such learning may be performed in the electronic device 101 itself on which the artificial intelligence model is performed, or may be performed through a separate server (e.g., server 108).
  • Learning algorithms may include, for example, supervised learning, unsupervised learning, semi-supervised learning, or reinforcement learning, but It is not limited.
  • An artificial intelligence model may include multiple artificial neural network layers.
  • Artificial neural networks include deep neural network (DNN), convolutional neural network (CNN), recurrent neural network (RNN), restricted boltzmann machine (RBM), belief deep network (DBN), bidirectional recurrent deep neural network (BRDNN), It may be one of deep Q-networks or a combination of two or more of the above, but is not limited to the examples described above.
  • artificial intelligence models may additionally or alternatively include software structures.
  • the memory 130 may store various data used by at least one component (eg, the processor 120 or the sensor module 176) of the electronic device 101. Data may include, for example, input data or output data for software (e.g., program 140) and instructions related thereto.
  • Memory 130 may include volatile memory 132 or non-volatile memory 134.
  • the program 140 may be stored as software in the memory 130 and may include, for example, an operating system 142, middleware 144, or application 146.
  • the input module 150 may receive commands or data to be used in a component of the electronic device 101 (e.g., the processor 120) from outside the electronic device 101 (e.g., a user).
  • the input module 150 may include, for example, a microphone, mouse, keyboard, keys (eg, buttons), or digital pen (eg, stylus pen).
  • the sound output module 155 may output sound signals to the outside of the electronic device 101.
  • the sound output module 155 may include, for example, a speaker or a receiver. Speakers can be used for general purposes such as multimedia playback or recording playback.
  • the receiver can be used to receive incoming calls. According to one embodiment, the receiver may be implemented separately from the speaker or as part of it.
  • the display module 160 can visually provide information to the outside of the electronic device 101 (eg, a user).
  • the display module 160 may include, for example, a display, a hologram device, or a projector, and a control circuit for controlling the device.
  • the display module 160 may include a touch sensor configured to detect a touch, or a pressure sensor configured to measure the intensity of force generated by the touch.
  • the audio module 170 can convert sound into an electrical signal or, conversely, convert an electrical signal into sound. According to one embodiment, the audio module 170 acquires sound through the input module 150, the sound output module 155, or an external electronic device (e.g., directly or wirelessly connected to the electronic device 101). Sound may be output through the electronic device 102 (e.g., speaker or headphone).
  • the electronic device 102 e.g., speaker or headphone
  • the sensor module 176 detects the operating state (e.g., power or temperature) of the electronic device 101 or the external environmental state (e.g., user state) and generates an electrical signal or data value corresponding to the detected state. can do.
  • the sensor module 176 includes, for example, a gesture sensor, a gyro sensor, an air pressure sensor, a magnetic sensor, an acceleration sensor, a grip sensor, a proximity sensor, a color sensor, an IR (infrared) sensor, a biometric sensor, It may include a temperature sensor, humidity sensor, or light sensor.
  • the interface 177 may support one or more designated protocols that can be used to connect the electronic device 101 directly or wirelessly with an external electronic device (eg, the electronic device 102).
  • the interface 177 may include, for example, a high definition multimedia interface (HDMI), a universal serial bus (USB) interface, an SD card interface, or an audio interface.
  • HDMI high definition multimedia interface
  • USB universal serial bus
  • SD card interface Secure Digital Card interface
  • audio interface audio interface
  • connection terminal 178 may include a connector through which the electronic device 101 can be physically connected to an external electronic device (eg, the electronic device 102).
  • the connection terminal 178 may include, for example, an HDMI connector, a USB connector, an SD card connector, or an audio connector (eg, a headphone connector).
  • the haptic module 179 can convert electrical signals into mechanical stimulation (e.g., vibration or movement) or electrical stimulation that the user can perceive through tactile or kinesthetic senses.
  • the haptic module 179 may include, for example, a motor, a piezoelectric element, or an electrical stimulation device.
  • the camera module 180 can capture still images and moving images.
  • the camera module 180 may include one or more lenses, image sensors, image signal processors, or flashes.
  • the power management module 188 can manage power supplied to the electronic device 101.
  • the power management module 188 may be implemented as at least a part of, for example, a power management integrated circuit (PMIC).
  • PMIC power management integrated circuit
  • the battery 189 may supply power to at least one component of the electronic device 101.
  • the battery 189 may include, for example, a non-rechargeable primary battery, a rechargeable secondary battery, or a fuel cell.
  • Communication module 190 is configured to provide a direct (e.g., wired) communication channel or wireless communication channel between electronic device 101 and an external electronic device (e.g., electronic device 102, electronic device 104, or server 108). It can support establishment and communication through established communication channels. Communication module 190 operates independently of processor 120 (e.g., an application processor) and may include one or more communication processors that support direct (e.g., wired) communication or wireless communication.
  • processor 120 e.g., an application processor
  • the communication module 190 may be a wireless communication module 192 (e.g., a cellular communication module, a short-range wireless communication module, or a global navigation satellite system (GNSS) communication module) or a wired communication module 194 (e.g., : LAN (local area network) communication module, or power line communication module) may be included.
  • a wireless communication module 192 e.g., a cellular communication module, a short-range wireless communication module, or a global navigation satellite system (GNSS) communication module
  • GNSS global navigation satellite system
  • wired communication module 194 e.g., : LAN (local area network) communication module, or power line communication module
  • the corresponding communication module is a first network 198 (e.g., a short-range communication network such as Bluetooth, wireless fidelity (WiFi) direct, or infrared data association (IrDA)) or a second network 199 (e.g., legacy It may communicate with an external electronic device 104 through a telecommunication network such as a cellular network, a 5G network, a next-generation communication network, the Internet, or a computer network (e.g., LAN or WAN).
  • a telecommunication network such as a cellular network, a 5G network, a next-generation communication network, the Internet, or a computer network (e.g., LAN or WAN).
  • a telecommunication network such as a cellular network, a 5G network, a next-generation communication network, the Internet, or a computer network (e.g., LAN or WAN).
  • a telecommunication network such as a cellular network, a 5G network, a next-generation communication network
  • the wireless communication module 192 uses subscriber information (e.g., International Mobile Subscriber Identifier (IMSI)) stored in the subscriber identification module 196 to communicate within a communication network such as the first network 198 or the second network 199.
  • subscriber information e.g., International Mobile Subscriber Identifier (IMSI)
  • IMSI International Mobile Subscriber Identifier
  • the wireless communication module 192 may support 5G networks after 4G networks and next-generation communication technologies, for example, NR access technology (new radio access technology).
  • NR access technology provides high-speed transmission of high-capacity data (enhanced mobile broadband (eMBB)), minimization of terminal power and access to multiple terminals (massive machine type communications (mMTC)), or ultra-reliable and low-latency (URLLC). -latency communications)) can be supported.
  • the wireless communication module 192 may support a high frequency band (eg, mmWave band), for example, to achieve a high data transmission rate.
  • a high frequency band eg, mmWave band
  • the wireless communication module 192 uses various technologies to secure performance in high frequency bands, for example, beamforming, massive array multiple-input and multiple-output (MIMO), and full-dimensional multiplexing. It can support technologies such as input/output (FD-MIMO: full dimensional MIMO), array antenna, analog beam-forming, or large scale antenna.
  • the wireless communication module 192 may support various requirements specified in the electronic device 101, an external electronic device (e.g., electronic device 104), or a network system (e.g., second network 199).
  • the wireless communication module 192 supports Peak data rate (e.g., 20 Gbps or more) for realizing eMBB, loss coverage (e.g., 164 dB or less) for realizing mmTC, or U-plane latency (e.g., 164 dB or less) for realizing URLLC.
  • Peak data rate e.g., 20 Gbps or more
  • loss coverage e.g., 164 dB or less
  • U-plane latency e.g., 164 dB or less
  • the antenna module 197 may transmit or receive signals or power to or from the outside (eg, an external electronic device).
  • the antenna module 197 may include an antenna including a radiator made of a conductor or a conductive pattern formed on a substrate (eg, PCB).
  • the antenna module 197 may include a plurality of antennas (eg, an array antenna). In this case, at least one antenna suitable for a communication method used in a communication network such as the first network 198 or the second network 199 is, for example, connected to the plurality of antennas by the communication module 190. can be selected. Signals or power may be transmitted or received between the communication module 190 and an external electronic device through the at least one selected antenna.
  • other components eg, radio frequency integrated circuit (RFIC) may be additionally formed as part of the antenna module 197.
  • RFIC radio frequency integrated circuit
  • the antenna module 197 may form a mmWave antenna module.
  • a mmWave antenna module includes a printed circuit board, an RFIC disposed on or adjacent to a first side (e.g., bottom side) of the printed circuit board and capable of supporting a designated high-frequency band (e.g., mmWave band); And a plurality of antennas (e.g., array antennas) disposed on or adjacent to the second side (e.g., top or side) of the printed circuit board and capable of transmitting or receiving signals in the designated high frequency band. can do.
  • a mmWave antenna module includes a printed circuit board, an RFIC disposed on or adjacent to a first side (e.g., bottom side) of the printed circuit board and capable of supporting a designated high-frequency band (e.g., mmWave band); And a plurality of antennas (e.g., array antennas) disposed on or adjacent to the second side (e.g., top or side)
  • peripheral devices e.g., bus, general purpose input and output (GPIO), serial peripheral interface (SPI), or mobile industry processor interface (MIPI)
  • signal e.g. commands or data
  • commands or data may be transmitted or received between the electronic device 101 and the external electronic device 104 through the server 108 connected to the second network 199.
  • Each of the external electronic devices 102 or 104 may be of the same or different type as the electronic device 101.
  • all or part of the operations performed in the electronic device 101 may be executed in one or more of the external electronic devices 102, 104, or 108.
  • the electronic device 101 may perform the function or service instead of executing the function or service on its own.
  • one or more external electronic devices may be requested to perform at least part of the function or service.
  • One or more external electronic devices that have received the request may execute at least part of the requested function or service, or an additional function or service related to the request, and transmit the result of the execution to the electronic device 101.
  • the electronic device 101 may process the result as is or additionally and provide it as at least part of a response to the request.
  • cloud computing distributed computing, mobile edge computing (MEC), or client-server computing technology can be used.
  • the electronic device 101 may provide an ultra-low latency service using, for example, distributed computing or mobile edge computing.
  • the external electronic device 104 may include an Internet of Things (IoT) device.
  • Server 108 may be an intelligent server using machine learning and/or neural networks.
  • the external electronic device 104 or server 108 may be included in the second network 199.
  • the electronic device 101 may be applied to intelligent services (e.g., smart home, smart city, smart car, or healthcare) based on 5G communication technology and IoT-related technology.
  • FIG. 2A is a block diagram 200 illustrating a camera module 180, according to embodiments.
  • the camera module 180 includes a lens assembly 210, a flash 220, an image sensor 230, an image stabilizer 240, and a memory 250 (for example, a buffer memory), or an image signal processor 260.
  • the lens assembly 210 may collect light emitted from a subject that is the target of image capture.
  • Lens assembly 210 may include one or more lenses.
  • the camera module 180 may include a plurality of lens assemblies 210. In this case, the camera module 180 may form, for example, a dual camera, a 360-degree camera, or a spherical camera.
  • Some of the plurality of lens assemblies 210 have the same lens properties (e.g., angle of view, focal length, autofocus, f number, or optical zoom), or at least one lens assembly is different from another lens assembly. It may have one or more lens properties that are different from the lens properties of .
  • the lens assembly 210 may include, for example, a wide-angle lens or a telephoto lens.
  • the flash 220 may emit light used to enhance light emitted or reflected from a subject.
  • the flash 220 may include one or more light emitting diodes (eg, red-green-blue (RGB) LED, white LED, infrared LED, or ultraviolet LED), or a xenon lamp.
  • the image sensor 230 may acquire an image corresponding to the subject by converting light emitted or reflected from the subject and transmitted through the lens assembly 210 into an electrical signal.
  • the image sensor 230 is one image sensor selected from among image sensors with different properties, such as an RGB sensor, a BW (black and white) sensor, an IR sensor, or a UV sensor, and the same It may include a plurality of image sensors having different properties, or a plurality of image sensors having different properties.
  • Each image sensor included in the image sensor 230 may be implemented using, for example, a charged coupled device (CCD) sensor or a complementary metal oxide semiconductor (CMOS) sensor.
  • CCD charged coupled device
  • CMOS complementary metal oxide semiconductor
  • the image stabilizer 240 moves at least one lens or image sensor 230 included in the lens assembly 210 in a specific direction in response to the movement of the camera module 180 or the electronic device 101 including the same.
  • the operating characteristics of the image sensor 230 can be controlled (e.g., adjusting read-out timing, etc.). This allows to compensate for at least some of the negative effects of said movement on the image being captured.
  • the image stabilizer 240 is a gyro sensor (not shown) or an acceleration sensor (not shown) disposed inside or outside the camera module 180. It is possible to detect such movement of the camera module 180 or the electronic device 101 using .
  • the image stabilizer 240 may be implemented as, for example, an optical image stabilizer.
  • the memory 250 may at least temporarily store at least a portion of the image acquired through the image sensor 230 for the next image processing task. For example, when image acquisition is delayed due to the shutter or when multiple images are acquired at high speed, the acquired original image (e.g., Bayer-patterned image or high-resolution image) is stored in the memory 250. , the corresponding copy image (e.g., a low-resolution image) may be previewed through a display device (e.g., the display module 160 of FIG. 1). Thereafter, when a specified condition is satisfied (eg, user input or system command), at least a portion of the original image stored in the memory 250 may be obtained and processed, for example, by the image signal processor 260. According to one embodiment, the memory 250 may be configured as at least part of the memory 130 or as a separate memory that operates independently.
  • a specified condition e.g, user input or system command
  • the image signal processor 260 may perform one or more image processes on an image acquired through the image sensor 230 or an image stored in the memory 250.
  • the one or more image processes may include, for example, depth map creation, three-dimensional modeling, panorama creation, feature point extraction, image compositing, or image compensation (e.g., noise reduction, resolution adjustment, brightness adjustment, blurring).
  • the image signal processor 260 may include blurring, sharpening, or softening, and may include at least one of the components included in the camera module 180 (eg, an image sensor).
  • the image processed by the image signal processor 260 may be stored back in the memory 250 for further processing.
  • the image signal processor 260 may be configured as at least a part of the processor 120, or the image signal processor 260 may be configured as a separate processor that operates independently of the processor 120. When configured as a separate processor, at least one image processed by the image signal processor 260 may be displayed through the display module 160 as is or after additional image processing by the processor 120.
  • the electronic device 101 may include a plurality of camera modules 180, each having different properties or functions.
  • at least one of the plurality of camera modules 180 may be a wide-angle camera, and at least another one may be a telephoto camera.
  • at least one of the plurality of camera modules 180 may be a front camera, and at least another one may be a rear camera.
  • FIG. 2B shows an example of a functional configuration of an electronic device according to embodiments.
  • an electronic device e.g., electronic device 101 of FIG. 1 includes a processor), a camera (e.g., camera module 180), and memory (e.g., memory 130 or memory 250). may include.
  • the electronic device 101 may include a processor 120.
  • the processor 120 may be implemented with one or more integrated circuit (IC) chips and may perform various data processing.
  • the processor 120 may be implemented as a system on chip (SoC).
  • SoC system on chip
  • the processor 120 includes a central processing unit (CPU), a graphics processing unit (GPU), a neural processing unit (NPU), an image signal processor (ISP), a display controller, a memory controller, a storage controller, and an application (AP). It may include sub-components including a processor), a communication processor (CP), and/or a sensor interface.
  • the processor 120 may further include other sub-components. For example, some sub-components may be omitted from processor 120.
  • the electronic device 101 transmits a capture event to a system for controlling the camera 180 to acquire an image through the camera 180, or performs auto exposure (AE) or auto exposure (AF). focusing), and/or auto white balance (AWB) functions.
  • the electronic device 101 may store a user input for image capture in the memory 130.
  • the electronic device 130 may include a memory 130.
  • the memory 130 may store data such as basic programs, application programs, or setting information for operation of the electronic device 101.
  • Memory 130 may be referred to as a storage unit.
  • the memory 130 may be implemented as a volatile memory (eg, volatile memory 132), a non-volatile memory (eg, non-volatile memory 134), or a combination of volatile memory and non-volatile memory. Additionally, the memory 130 may provide stored data according to a request from the processor 120.
  • the memory 130 may include a storage space 280 for storing user input for capture.
  • the storage space 280 may be referred to as a shutter queue, shutter list, or shutter array.
  • the memory 130 may store images captured by at least one camera (eg, camera 180) for processing by the processor 120.
  • the storage space 280 is shown within a separate memory 130, but the embodiments of the present disclosure are not limited thereto.
  • the storage space for storing user input for capture may be stored in a storage space (eg, memory 250) inside the camera 180. That is, the illustration in FIG. 2B should not be construed as limiting other embodiments of the present disclosure.
  • the electronic device 101 may include a camera 180.
  • the cameras may include at least one of a wide-angle camera, an ultra-wide camera, a first telephoto camera, or a second telephoto camera.
  • the wide-angle camera may be used to obtain an image of an object located at a certain distance (eg, about 28 centimeters) or more from the electronic device 101 at low magnification (eg, less than about 3-magnification).
  • the ultra-wide-angle camera may be used to obtain an image of an object located less than the certain distance from the electronic device 101 at low magnification.
  • the first telephoto camera may be used to acquire an image of an object in a first magnification range (eg, 3-magnification or higher but 10-magnification or higher).
  • the second telephoto camera may be used to acquire an image of the object in a second magnification range (eg, 10-magnification or higher and 15-magnification or lower).
  • the electronic device 101 may acquire an image through the camera 180.
  • the electronic device 101 may acquire an image. For example, as soon as the user presses the shutter, the electronic device 101 ) By starting the capture, the electronic device 101 can acquire the desired scene at the desired timing. Therefore, the electronic device 101 cannot start the next capture operation. Since the shutter input received during the capture operation of the device 101 is ignored, the user can press the shutter of the electronic device 101 again after the capture operation is completed. Since the next capture is possible only by pressing the button, the user may feel that the shot-to-shot speed is slow, and it may be difficult for the user to acquire the image at the desired timing.
  • the electronic device 101 performs continuous capture as soon as the user presses the shutter input, so that the user can obtain the desired scene shot-to-shot at the desired timing.
  • the perceived speed of (shot-to-shot) can be improved.
  • the capture operation may be performed by a processor (eg, processor 120) and a camera (eg, camera module 180) of an electronic device (eg, electronic device 101).
  • a processor eg, processor 120
  • a camera eg, camera module 180
  • the electronic device 101 may receive a user input 340 for image capture.
  • the user input 340 may include an input for an object for image capture (hereinafter referred to as a shutter button).
  • the electronic device 101 may display an object (hereinafter referred to as a shutter button) for image capture on a user interface (UI) 310 displayed through a display (e.g., display module 160) of the electronic device 101. ) can receive a user input 340 that touches .
  • the UI 310 is a UI for the camera 180 and may correspond to an application layer.
  • the electronic device 101 may receive a user input 340 of touching the shutter button displayed on the UI 310.
  • the electronic device 101 may receive a control signal received from an external electronic device (eg, a stylus pen).
  • the control signal may include a control command for image capture.
  • the electronic device 101 may request the 3A interface 330 to trigger the AE function or the AF function.
  • the 3A interface 330 may provide activation of auto focusing (AF), activation of auto exposure (AE), and activation of auto white balance (AWB).
  • the electronic device 101 can change the trigger state for each function.
  • the electronic device 101 can change the AF trigger state.
  • the electronic device 101 in an initial state where the AF state is not focused, a state in which CAF (continuous auto focus) is scanning to focus, or a state in which movement of the lens is required to focus with CAF, the electronic device (101 ) can trigger the AF function.
  • the electronic device 101 can change the AE trigger state.
  • the electronic device 101 may trigger an AE function to use a flash.
  • the electronic device 101 may change the auto white balance (AWB) trigger state.
  • AVB auto white balance
  • the electronic device 101 may identify that the change of the AE trigger state and the AF trigger state is complete. For example, once focus is achieved, the lens is locked, and the appropriate exposure value is identified, the application layer of the electronic device 101 may obtain an AE, AF trigger completion event from the 3A interface 330.
  • electronic device 101 may transmit a capture event to camera system 320.
  • the camera system 320 may refer to an interface for controlling the camera 180.
  • a request to acquire an image may be provided to camera 180 through camera system 320.
  • electronic device 101 may obtain a shutter event corresponding to a capture event from camera system 320.
  • a sound effect eg, shutter sound
  • vibration eg, shutter vibration
  • the electronic device 101 waits until capture is completed and may request the camera system 320 to complete capture.
  • the electronic device 101 may transmit a command requesting AF lock cancellation to the 3A interface 330 for the next capture.
  • electronic device 101 may receive a captured image from camera system 320 .
  • the captured image may mean an image that has been captured and processed by the camera system 320.
  • the captured image is acquired in the application layer of the electronic device 101, it can be identified that the capture operation corresponding to the user input 340 is completed.
  • the capture operation corresponding to the user input 340 may include operations 342 to 352. If the user's additional capture request, for example, a shutter input, received while a series of operations corresponding to operations 342 to 352 are in progress, it may be difficult for the user to obtain a desired image at a desired timing. Accordingly, the electronic device 101 according to embodiments may store the shutter input in a separate storage space (eg, the storage space 280) instead of ignoring the shutter input. For example, the storage space may be referred to as a shutter queue. According to one embodiment, the electronic device 101 may store the shutter input in the shutter queue until the existing capture operation is completed.
  • a separate storage space eg, the storage space 280
  • the electronic device 101 may store the shutter inputs in the section in which the capture operation is performed (hereinafter, the capturing section). For example, if the next shutter input is received within the time from the start of capture to the completion of the capture operation, the electronic device 101 may store the shutter input in the shutter queue. In one embodiment, after the capture operation is completed, the electronic device 101 checks whether the shutter input stored in the shutter queue is valid, and if the shutter input is valid, immediately performs the capture operation corresponding to the shutter input. can be initiated.
  • FIGS. 4A to 4B an example of a continuous capture operation using a shutter queue is described through FIGS. 4A to 4B.
  • 4A-4B illustrate examples of capture operations corresponding to consecutive user inputs according to one embodiment.
  • the user may provide four user inputs to the electronic device 101.
  • Each user input may be an input for capture.
  • the user inputs may include, for example, a first shutter input 411, a second shutter input 412, a third shutter input 413, and a fourth shutter input 414.
  • the electronic device 101 may sequentially receive a first shutter input 411, a second shutter input 412, a third shutter input 413, and a fourth shutter input 414.
  • the electronic device 101 may receive the first shutter input 411. Based on receiving the first shutter input 411, the electronic device 101 may perform a first capture operation 431 corresponding to the first shutter input 411. For example, a series of operations for the first capture operation 431 may include operations 342 to 352 of FIG. 3 .
  • the electronic device 101 may receive the second shutter input 412 while the first capture operation 431 is in progress. The reception time of the second shutter input 412 may be earlier than the completion time 451 of the first capture operation 431. If the electronic device 101 ignores the second shutter input 412, the electronic device 101 may not perform the second capture operation corresponding to the second shutter input 412. After completion of the first capture operation 431, the electronic device 101 may receive the third shutter input 413.
  • the electronic device 101 may perform a third capture operation 433 corresponding to the third shutter input 413. Because a capture operation is not in progress, the third capture operation 433 can be initiated as soon as the third shutter input 413 is received. After completion of the third capture operation 433, the electronic device 101 may receive the fourth shutter input 414. Based on receiving the fourth shutter input 414, the electronic device 101 may perform the fourth capture operation 434 corresponding to the fourth shutter input 414. Since the fourth shutter input 414 is received after the completion point 453 of the third capture operation 433, the fourth capture operation 434 will be initiated as soon as the fourth shutter input 414 is received. You can.
  • a gap 444 may exist between the completion point 451 of the first capture operation 433 and the start point of the third shutter input 413. Due to the gap 444, the user may feel a timing discrepancy between sequentially acquired images. Additionally, since the image corresponding to the second capture operation is not acquired, the user may feel that the shot-to-shot speed is slow.
  • the electronic device 101 may store the user input for capture in the internal storage space (eg, storage space 280) of the electronic device 101.
  • the internal storage space may include a shutter queue.
  • the same reference numerals may be used for the same description.
  • the electronic device 101 may sequentially receive a first shutter input 411, a second shutter input 412, a third shutter input 413, and a fourth shutter input 414. Based on receiving the first shutter input 411, the electronic device 101 may perform a first capture operation 461 corresponding to the first shutter input 411. For example, a series of operations for the first capture operation 461 may include operations 342 to 352 of FIG. 3 .
  • a second user input 412 may be received.
  • the electronic device 101 may store the second user input 412 in the shutter queue. Thereafter, the electronic device 101 may identify completion of the first capture operation 461. According to one embodiment, the electronic device 101 may identify whether there is a user input stored in the shutter queue based on identifying completion of the first capture operation 461. If there is a user input stored in the shutter queue, the electronic device 101 may identify whether the user input, for example, the second user input 412, is valid. In order to identify whether the second user input 412 is valid, the electronic device 101 determines the time point 482 when the first capture operation 461 is completed and the time point 492 when the second user input 412 is received.
  • the electronic device 101 can obtain the time difference (472) between them. If the time difference 472 is within a threshold (e.g., about 100 ms (milliseconds)), the electronic device 101 performs the second user input as soon as the first capture operation 461 is completed. The second capture operation 462 corresponding to 412 may be initiated. Additionally, the electronic device 101 may remove the second user input 412 stored in the shutter queue. In one embodiment, although not shown in FIG. 4B, the electronic device 101 may ignore the second user input 412 if the time difference 472 is greater than or equal to the threshold. For example, the electronic device 101 may remove the second user input 412 stored in the shutter queue without performing the second capture operation 462.
  • a threshold e.g., about 100 ms (milliseconds)
  • a third user input 413 may be received.
  • the electronic device 101 may store the third user input 413 in the shutter queue.
  • the electronic device 101 may obtain a time difference 473 between the time 483 when the second capture operation 462 is completed and the time 493 when the third user input 413 is received. You can. For example, if the time difference 473 is within a threshold, the electronic device 101 responds to the third user input 413 as soon as the second capture operation 462 is completed.
  • the third capture operation 463 may be started. For example, the electronic device 101 may remove the third user input 413 stored in the shutter queue. Thereafter, the electronic device 101 may perform the fourth capture operation 464 corresponding to the fourth shutter input 414 based on receiving the fourth shutter input 414 . Since the fourth shutter input 414 is received after completion of the third capture operation 463, the fourth capture operation 464 can be initiated as soon as the fourth shutter input 414 is received.
  • the electronic device 101 may check whether a user input is stored in the shutter queue each time a capture operation is completed. Because four capture operations corresponding to four user inputs are performed through the shutter cue, the electronic device 101 can acquire four images. Because there are no separate gaps between capture operations, users can notice an improvement in shot-to-shot speed. For example, because the capture operation is performed in response to a shutter input, in situations where acquisition of continuous images is required (e.g., capturing a sports scene or capturing a moving subject), the user can acquire the desired image without perceived delay. there is.
  • the interval of the capture operation may be long due to the large image size.
  • additional capture can be performed immediately through sequential shutter input of the present disclosure.
  • the electronic device 101 may identify whether the user input stored in the shutter queue is valid whenever a capture operation is completed. If there is more than a threshold (e.g., 100 ms) left from the time of user input, for example, shutter input, to the time of capture completion, the capture operation may be excessively prolonged due to the shutter input being stored indiscriminately.
  • the electronic device 101 can increase perceived performance and increase the efficiency of the capture operation by setting a threshold range that is a time before completion.
  • FIG. 5 shows an example of capture operations according to a post processing picture (PPP) method, according to one embodiment.
  • the PPP method is a method that allows the next capture operation while processing images in the background once collection of frames is completed in a hardware interface (e.g., HAL (hardware abstraction layer)).
  • a hardware interface e.g., HAL (hardware abstraction layer)
  • an image processor e.g., image processor 260
  • subsequent image processing e.g., multi-frame image synthesis, noise reduction). reduction
  • bokeh image creation e.g.
  • the user may provide four or more user inputs to the electronic device 101.
  • Each user input may be an input for capture.
  • the user inputs may include a first shutter input 411, a second shutter input 412, a third shutter input 413, and a fourth shutter input 414.
  • the electronic device 101 may sequentially receive a first shutter input 411, a second shutter input 412, a third shutter input 413, and a fourth shutter input 414.
  • the same reference numerals may be used for the same description.
  • the continuous PPP capture operation 530 When the continuous PPP capture operation 530 is performed without a shutter queue, it takes time to receive the image from the hardware interface, so completion of capture may be delayed. Because capture completion is delayed, a situation may occur where shutter input is ignored. For example, capture may not be performed as the user continuously inputs the shutter. For example, despite four user inputs, the electronic device 101 performs a first PPP capture operation 531 corresponding to the first user input 411 and a third capture operation 531 corresponding to the third user input 413. A PPP capture operation 533 can be performed. The electronic device 101 can acquire two images. The capture operation corresponding to the second user input 412 and the capture operation corresponding to the fourth user input 414 do not occur.
  • the continuous capture operation using a shutter queue can also be applied to the PPP method.
  • the electronic device 101 may perform a continuous PPP capture operation 550 using a shutter queue.
  • a shutter event input by the user through a shutter queue may be processed after the previous capture operation is completed.
  • the electronic device 101 can perform the PPP capture operation corresponding to each user input without missing. Since continuous capture is possible through the shutter queue, the electronic device 101 performs a first PPP capture operation 551 corresponding to the first user input 411 and a second PPP capture operation 551 corresponding to the second user input 412. All of the capture operation 552, the third PPP capture operation 553 corresponding to the third user input 413, and the fourth PPP capture operation 554 corresponding to the fourth user input 414 can be performed. .
  • the electronic device 101 may perform subsequent image processing on the image acquired through the first PPP capture operation 551 in the background.
  • the electronic device 101 may store the second shutter input 412 in the shutter queue and capture the second PPP Operation 552 may be initiated by the second shutter input 412 stored in the shutter queue without waiting for a new shutter input. Since subsequent image processing is performed on the image acquired through the first PPP capture operation 551 while the electronic device 101 performs the second PPP capture operation 552, the first PPP capture operation 551 The time to obtain a post-processed image may be reduced.
  • the electronic device 101 may perform subsequent image processing for the first PPP capture operation 531 and then perform subsequent image processing for the third PPP capture operation 533. can be performed. Next, subsequent image processing may be performed after the third PPP capture operation 533 according to the third shutter input 413. Accordingly, after subsequent image processing for the first PPP capture operation 531, a period of time may occur during which subsequent image processing is not performed.
  • the electronic device 101 may perform subsequent processing for the second PPP capture operation 552 after subsequent processing for the first PPP capture operation 551. You can.
  • the second PPP capture operation 552 may be performed in response to completion of the first PPP capture operation 551. Accordingly, the time during which subsequent image processing is not performed can be relatively reduced compared to the continuous PPP capture operation 530 without a shutter queue.
  • the next capture operation is possible while processing subsequent image processing in the background, so the time required for successive capture operations using the PPP method can be reduced. Additionally, by using a shutter queue with the PPP method, the gap between image capture operations can be reduced, allowing for faster continuous capture.
  • FIG. 6 illustrates an operational flow of an electronic device (eg, the electronic device 101) for capture operations corresponding to continuous user inputs, according to an embodiment.
  • the electronic device 101 may receive a first user input for capture.
  • the first user input for capturing the first image may include a touch input of a shutter button on the camera UI.
  • the first user input for capturing the first image may include a control signal received from a peripheral device (eg, a stylus pen).
  • the control signal may indicate capture at the electronic device 101.
  • transmission of the control signal may be triggered in response to a button input of the peripheral device.
  • the electronic device 101 stores information about the second user input based on receiving the second user input for capture while the first capture operation corresponding to the first user input is performed. You can.
  • the electronic device 101 may receive a second user input for image capture while the first capture operation corresponding to the first user input is performed. For example, before acquiring an image corresponding to the first capture operation, the electronic device 101 may receive a second user input for the capture.
  • the electronic device 101 may store information about the second user input if the second user input is received before completion of the first capture operation.
  • the electronic device 101 may have a separate storage space to store user input for capture, for example, shutter input.
  • the electronic device 101 may set a shutter cue in a memory (eg, memory 130 or memory 250).
  • the electronic device 101 may store information about the second user input in the shutter queue.
  • the electronic device 101 may store the second user input obtained from the application layer (eg, UI 310) in the memory.
  • the electronic device 101 does not use a queue to store frames in the system layer (e.g., camera system 320), but uses a storage space to store information about the second user input in the application layer. Available.
  • the electronic device 101 can identify completion of the first capture operation.
  • the electronic device 101 may identify completion of the first capture operation by obtaining a processed image in response to the first user input.
  • the electronic device 101 may identify completion of the first capture operation by obtaining a capture completion event from a camera system (eg, camera system 320).
  • the electronic device 101 may acquire the processed image in the application layer.
  • the electronic device 101 may identify that the time difference between the second user input and completion of the first capture operation is less than or equal to a threshold.
  • the electronic device 101 can identify the reception point of the second user input.
  • the electronic device 101 can identify the completion point of the first capture operation.
  • the electronic device 101 may identify whether the second user input was received a certain period before the completion of the first capture operation. For example, the electronic device 101 may calculate the difference between the time when the first capture operation is completed and the time when the second user input is received.
  • the electronic device 101 may identify whether the difference between the completion point of the first capture operation and the reception point of the second user input is less than or equal to a threshold value.
  • the threshold may identify whether the stored user input is valid.
  • the first capture operation is completed a certain period of time after the second user input is stored, not only will the continuous capture operation be delayed overall, but the user may also feel a decrease in shot-to-shot performance. Due to the difference between the desired point in time through the second user input and the point in time when the actual capture begins (eg, immediately after completion of the first capture operation), the user may feel disconnected.
  • the electronic device 101 may set a threshold value (or threshold range) based on the completion point of the capture operation.
  • the threshold may be determined in various ways.
  • the threshold may be determined to be a fixed value (eg, about 100 ms).
  • the fixed value may be determined by user settings.
  • the threshold may be determined based on the type of camera used for capture and/or image processing performance. For example, the higher the image quality obtained through the camera, the longer the processing time may be. In one embodiment, the longer the image processing time corresponding to one capture, the longer the threshold may be set.
  • the threshold may be determined based on the preview state.
  • Preview state may refer to object information and background information identified in the preview stage before capture.
  • the electronic device 101 may obtain object information or background information in an image to be captured through frames acquired before capture.
  • the electronic device 101 may calculate a threshold value corresponding to the image processing time based on the preview state.
  • the threshold may depend on the object and background perceived in the preview state.
  • the electronic device 101 selects a second user input corresponding to the second user input. Capture operations can be performed.
  • FIG. 6 Although two capture operations are described in FIG. 6, embodiments of the present disclosure are not limited thereto. As depicted in FIG. 4B, even in capture operations more than two times (e.g., four times), a continuous capture operation that utilizes storage space for shutter input, according to embodiments of the present disclosure, may be used. You can.
  • FIG. 7 illustrates an operation flow of an electronic device (eg, the electronic device 101) for storing user input for capture, according to an embodiment.
  • an electronic device eg, the electronic device 101
  • the electronic device 101 may receive a user input for capture.
  • the user input for the capture may include a touch input of a shutter button on the camera UI.
  • the user input for the capture may include a control signal received from a peripheral device (eg, a stylus pen).
  • the control signal may indicate capture at the electronic device 101. Transmission of the control signal may be triggered in response to a button input of the peripheral device.
  • the electronic device 101 can identify whether another capture operation is in progress.
  • the electronic device 101 may identify whether another capture operation corresponding to the previous user input is in progress. If the user input received in operation 701 is received while the other capture operation is in progress, the electronic device 101 may be required to not miss the user input.
  • the electronic device 101 may perform operation 705 when the user input is received and if the other capture operation is in progress. The electronic device 101 may not perform separate storage if the other capture operation is not in progress.
  • the electronic device 101 may store the user input in a storage space.
  • the electronic device 101 may store the user input in a storage space.
  • the storage space may mean a storage area configured for a shutter input within a memory (eg, memory 130 or memory 250).
  • the storage space may mean a storage area in the form of a container such as a queue, list, or array.
  • the electronic device 101 may store the user input in a storage space to store the user input until another capture operation of operation 703 is completed.
  • the electronic device 101 may immediately initiate a capture operation corresponding to the received user input without a separate storage operation. .
  • FIG. 8 illustrates an operation flow of an electronic device (eg, the electronic device 101) after completion of a capture operation, according to an embodiment.
  • the electronic device 101 may identify completion of the capture operation. For a series of operations for the capture operation, operations 342 to 352 of FIG. 3 may be referred to. For example, the electronic device 101 may identify completion of the capture operation by obtaining a processed image corresponding to a capture completion event from a camera system.
  • the electronic device 101 may identify whether the storage space is empty.
  • the storage space may refer to an area for a shutter queue for storing user input (eg, shutter input) for capture until the capture operation is completed.
  • the electronic device 101 may monitor the storage space to identify whether a capture operation by another user input is waiting.
  • the electronic device 101 identifies that the storage space is empty, it can end the capture operation.
  • the electronic device 101 may perform a capture operation corresponding to the user input.
  • the electronic device 101 determines that the storage space is not empty, it can perform operation 805.
  • the electronic device 101 may identify whether user input was received within a threshold range from completion of the capture operation.
  • the electronic device 101 can identify user input.
  • the user input may be a user input subsequent to the user input of the capture operation of operation 801.
  • the electronic device 101 may identify a user input stored in a storage space for capture input (or shutter input).
  • the electronic device 101 may identify the point in time when a user input is received.
  • the electronic device 101 may identify when the capture operation is completed.
  • the electronic device 101 may identify whether the user input has been received within a threshold range preceding the completion of the capture operation.
  • the electronic device 101 may identify whether the stored user input is valid. If the time of reception of the user input is within the threshold range, the electronic device 101 determines that the difference between the time of reception of the user input and the completion of the capture operation is set to a threshold value (e.g., the length of the threshold range). ), the electronic device 101 can identify that the user input is valid. However, if the reception point of the user input is not within the threshold range, the electronic device 101 may identify that the user input is invalid. The electronic device 101 may perform operation 807 when the user input is received within a threshold range from completion of the capture operation. For example, if the user input is valid, the electronic device 101 may perform operation 807.
  • a threshold value e.g., the length of the threshold range
  • the electronic device 101 may end the operation without additional capture operation. For example, if the user input is invalid, the electronic device 101 may end the operation. Although not shown in FIG. 8, the electronic device 101 may ignore invalid user input and remove it from the storage space.
  • the electronic device 101 may perform a capture operation corresponding to a user input.
  • the capture operation 801 corresponding to the previous user input is completed (upon)
  • the electronic device 101 may perform the capture operation corresponding to the subsequent user input.
  • operations 342 to 352 of FIG. 3 may be referred to.
  • the electronic device 101 stores the user input for capture in the storage space 280, such as a shutter queue, and after the previous capture operation is completed, initiates a capture operation corresponding to the stored user input.
  • the electronic device 101 may select only the user input that precedes the previous capture operation within a threshold range from the completion time.
  • the electronic device 101 may initiate a capture operation corresponding to the selected user input.
  • continuous capture is possible during panoramic capture or night capture, and the electronic device 101 can acquire images of higher quality than burst shots through continuous high-definition/AF capture.
  • a capture operation using a shutter cue of the electronic device 101 can provide high shot-to-shot performance with zero shutter lag.
  • High pixel resolution (e.g., approximately 200 million pixels) requires a large amount of memory to store images. Storing images sequentially can cause a strain on memory.
  • the electronic device 101 may perform the next capture operation corresponding to the valid user input. However, if the next capture operation is performed without an identification operation for available memory, memory may become insufficient. Available memory refers to memory available for continuous capture operation using the shutter queue. To reduce problems due to memory, the electronic device 101 simply conditions whether a valid user input has been stored in a storage space (e.g., a shutter cue) (e.g., operations 803 and 805 of FIG. 8). In addition, conditions for available memory can be additionally determined.
  • a storage space e.g., a shutter cue
  • the electronic device 101 may further include an operation of checking available memory for a continuous capture operation using a shutter queue. For example, when the size of the available memory is greater than or equal to the threshold, the electronic device 101 may identify that memory (i.e., available memory) for a continuous capture operation using the shutter queue is secured. Additionally, for example, if the electronic device 101 is equipped with RAM that can provide a sufficient size of available memory (e.g., 12 GB of RAM), the electronic device 101 may perform a continuous capture operation using the shutter queue. It can be identified that memory for this is secured. If the available memory is secured and a valid user input is stored in the shutter queue, the electronic device 101 can perform a capture operation for the user input, that is, the next capture operation.
  • memory i.e., available memory
  • the electronic device 101 may perform a continuous capture operation using the shutter queue. It can be identified that memory for this is secured. If the available memory is secured and a valid user input is stored in the shutter queue, the electronic device 101 can perform a capture operation for the user input,
  • the electronic device 101 may identify whether the storage space (e.g., shutter queue) is empty (e.g., operation 803).
  • the order of identifying the available memory and identifying whether the storage space (eg, shutter queue) is empty is not limited thereto.
  • the operation of identifying the available memory may be performed overlapping with or after the operation of identifying whether the storage space (eg, shutter queue) is empty.
  • the electronic device 101 identifies whether the storage space (e.g., shutter queue) is empty (e.g., operation 803) and then determines whether the electronic device 101 has available memory. can be identified.
  • the electronic device 101 identifies whether a valid user input is stored in the storage space (e.g., a shutter cue) (e.g., operation 805), and then You can identify whether there is available memory.
  • the electronic device 101 may include a camera 180, at least one processor 120, and memories 130 and 250 having a storage space 280.
  • the at least one processor 120 may be configured to receive a first user input for capture.
  • the at least one processor 120 based on receiving a second user input for capture while a first capture operation corresponding to the first user input is performed through the camera 180, Information about the second user input may be stored in the storage space 280.
  • the at least one processor 120 is configured to identify whether a time difference between the second user input and completion of the first capture operation is less than or equal to a threshold, based on identifying completion of the first capture operation. It can be.
  • the at least one processor 120 may be configured to perform a second capture operation corresponding to the second user input when the time difference is less than or equal to the threshold.
  • completion of the first capture operation may be identified based on obtaining a processed image according to the first user input from a system layer.
  • the first capture operation includes an event triggering auto exposure (AE) and auto focusing (AF), an event requesting capture, a shutter callback event, an AF lock event, and the processed An event for acquiring an image may be included.
  • AE event triggering auto exposure
  • AF auto focusing
  • the at least one processor 120 may be configured to identify whether the storage space 280 is empty based on identifying completion of the first capture operation. When the storage space 280 is not empty, the at least one processor 120 performs the second capture operation corresponding to the second user input and responds to the second user input within the storage space 280. It can be configured to remove information about
  • the at least one processor 120 when the time interval between the second user input and completion of the first capture operation is greater than the threshold, the at least one processor 120 It may be additionally configured to remove information about the second user input in the storage space 280 without a second capture operation.
  • the first capture operation may be used to obtain an image processed in a PPP (post processing picture) method.
  • the second capture operation can be used to obtain an image processed in the PPP method.
  • the at least one processor 120 may be configured to identify that the time difference is less than or equal to the threshold to perform the second capture operation.
  • the at least one processor 120 may be configured to provide a capture event corresponding to the second user input to a system layer for the camera 180 in order to perform the second capture operation.
  • the second capture operation may include an operation of playing a shutter sound corresponding to the second user input.
  • the shutter sound may be played after completion of the first capture operation.
  • the at least one processor 120 may be configured to receive a third user input for image capture.
  • the at least one processor 120 may be configured to store information about the third user input in the storage space 280 when the third user input is received while the second capture operation is performed. there is.
  • the at least one processor 120 may be configured to perform a third capture operation corresponding to the third user input when the third user input is received while the second capture operation is not performed.
  • the storage space 280 may include a queue, array, or list for storing information about user input for capture.
  • a method performed by the electronic device 101 may include receiving a first user input for capture.
  • the method stores information about the second user input in the storage space 280 based on receiving a second user input for capture while a first capture operation corresponding to the first user input is performed. It may include actions such as:
  • the operation may include, based on identifying completion of the first capture operation, identifying whether a time difference between the second user input and completion of the first capture operation is less than or equal to a threshold.
  • the operation may include performing a second capture operation corresponding to the second user input when the time difference is less than or equal to the threshold.
  • completion of the first capture operation may be identified based on obtaining a processed image according to the first user input from a system layer.
  • the first capture operation includes an event triggering auto exposure (AE) and auto focusing (AF), an event requesting capture, a shutter callback event, an AF lock event, and the processed An event for acquiring an image may be included.
  • AE event triggering auto exposure
  • AF auto focusing
  • the method may include identifying whether the storage space 280 is empty based on identifying completion of the first capture operation.
  • the method includes an operation of removing information about the second user input in the storage space 280 along with the second capture operation corresponding to the second user input when the storage space 280 is not empty. It can be included.
  • the method may be performed without the second capture operation corresponding to the second user input when the time interval between the second user input and completion of the first capture operation is greater than the threshold. It may include an operation of removing information about the second user input in the storage space 280.
  • the first capture operation may be used to obtain an image processed in a PPP (post processing picture) method.
  • the second capture operation can be used to obtain an image processed in the PPP method.
  • performing the second capture operation may include identifying that the time difference is less than or equal to the threshold.
  • Performing the second capture operation may include providing a capture event corresponding to the second user input to the system layer for the camera 180.
  • the second capture operation may include an operation of playing a shutter sound corresponding to the second user input.
  • the shutter sound may be played after completion of the first capture operation.
  • the method may include receiving a third user input for image capture.
  • the method may include storing information about the third user input in the storage space 280 when the third user input is received while the second capture operation is performed.
  • the method may include performing a third capture operation corresponding to the third user input when the third user input is received while the second capture operation is not performed.
  • the storage space 280 may include a queue, array, or list for storing information about user input for capture.
  • non-transitory computer-readable media may include memory configured to store instructions.
  • the instructions when executed by a processor, cause the electronic device to receive a first user input for capture, and while a first capture operation corresponding to the first user input is performed, to receive a second user input for capture. Based on, storing information about the second user input in the storage space 280, and identifying completion of the first capture operation, the second user input and completion of the first capture operation It is possible to determine whether the time difference is less than or equal to a threshold, and when the time difference is less than or equal to the threshold, a second capture operation corresponding to the second user input can be caused to be performed.
  • Electronic devices may be of various types.
  • Electronic devices may include, for example, portable communication devices (e.g., smartphones), computer devices, portable multimedia devices, portable medical devices, cameras, electronic devices, or home appliances.
  • Electronic devices according to embodiments of this document are not limited to the above-described devices.
  • first, second, or first or second may be used simply to distinguish one element from another, and may be used to distinguish such elements in other respects, such as importance or order) is not limited.
  • One (e.g. first) component is said to be “coupled” or “connected” to another (e.g. second) component, with or without the terms “functionally” or “communicatively”.
  • any of the components can be connected to the other components directly (e.g. wired), wirelessly, or through a third component.
  • module used in various embodiments of this document may include a unit implemented in hardware, software, or firmware, and is interchangeable with terms such as logic, logic block, component, or circuit, for example. It can be used as A module may be an integrated part or a minimum unit of the parts or a part thereof that performs one or more functions. For example, according to one embodiment, the module may be implemented in the form of an application-specific integrated circuit (ASIC).
  • ASIC application-specific integrated circuit
  • Various embodiments of the present document are one or more instructions stored in a storage medium (e.g., built-in memory 136 or external memory 138) that can be read by a machine (e.g., electronic device 101). It may be implemented as software (e.g., program 140) including these.
  • a processor e.g., processor 120
  • the one or more instructions may include code generated by a compiler or code that can be executed by an interpreter.
  • a storage medium that can be read by a device may be provided in the form of a non-transitory storage medium.
  • 'non-transitory' only means that the storage medium is a tangible device and does not contain signals (e.g. electromagnetic waves).
  • This term refers to cases where data is stored semi-permanently in the storage medium. There is no distinction between cases where it is temporarily stored.
  • Computer program products are commodities and can be traded between sellers and buyers.
  • the computer program product may be distributed in the form of a machine-readable storage medium (e.g. compact disc read only memory (CD-ROM)) or through an application store (e.g. Play StoreTM) or on two user devices (e.g. It can be distributed (e.g. downloaded or uploaded) directly between smart phones) or online.
  • a machine-readable storage medium e.g. compact disc read only memory (CD-ROM)
  • an application store e.g. Play StoreTM
  • two user devices e.g. It can be distributed (e.g. downloaded or uploaded) directly between smart phones) or online.
  • at least a portion of the computer program product may be at least temporarily stored or temporarily created in a machine-readable storage medium, such as the memory of a manufacturer's server, an application store's server, or a relay server.
  • each component (e.g., module or program) of the above-described components may include a single or plural entity, and some of the plurality of entities may be separately placed in other components. there is.
  • one or more of the components or operations described above may be omitted, or one or more other components or operations may be added.
  • multiple components eg, modules or programs
  • the integrated component may perform one or more functions of each component of the plurality of components identically or similarly to those performed by the corresponding component of the plurality of components prior to the integration. .
  • operations performed by a module, program, or other component may be executed sequentially, in parallel, iteratively, or heuristically, or one or more of the operations may be executed in a different order, or omitted. Alternatively, one or more other operations may be added.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)

Abstract

실시예들에 있어서, 전자 장치는, 카메라, 적어도 하나의 프로세서, 및 저장 공간을 갖는 메모리를 포함할 수 있다. 상기 적어도 하나의 프로세서는, 캡쳐를 위한 제1 사용자 입력을 수신하도록 구성될 수 있다. 상기 적어도 하나의 프로세서는, 상기 카메라를 통해, 상기 제1 사용자 입력에 대응하는 제1 캡쳐 동작이 수행되는 동안, 캡쳐를 위한 제2 사용자 입력을 수신하는 것에 기반하여, 상기 제2 사용자 입력에 대한 정보를 상기 저장 공간에 저장할 수 있다. 상기 적어도 하나의 프로세서는, 상기 제1 캡쳐 동작의 완료를 식별하는 것에 기반하여, 상기 제2 사용자 입력과 상기 제1 캡쳐 동작의 완료의 시간 차이가 임계값 이하인지 여부를 식별하도록 구성될 수 있다. 상기 적어도 하나의 프로세서는, 상기 시간 차이가 상기 임계값 이하인 경우, 상기 제2 사용자 입력에 대응하는 제2 캡쳐 동작을 수행하도록 구성될 수 있다.

Description

이미지를 획득하기 위한 전자 장치 및 방법
본 개시의 다양한 실시예들은, 이미지를 획득하기 위한 전자 장치 및 방법에 관한 것이다.
사용자는 전자 장치에 포함된 카메라를 이용하여 이미지를 획득하기 위해서 셔터 버튼을 누를 수 있다. 셔터 버튼을 누르는 사용자 입력에 응답하여, 전자 장치는 이미지를 획득할 수 있다. 예를 들어, 전자 장치는, AE(auto exposure), AF(auto focusing), 및 AWB(auto white balance) 기능을 트리거한 뒤, 캡쳐 이벤트, 및/또는 셔터 이벤트를 통해, 이미지를 획득할 수 있다.
상술한 정보는 본 개시에 대한 이해를 돕기 위한 목적으로 하는 배경 기술(related art)로 제공될 수 있다. 상술한 내용 중 어느 것도 본 개시와 관련된 종래 기술(prior art)로서 적용될 수 있는지에 대하여 어떠한 주장이나 결정이 제기되지 않는다.
실시예들에 따른 전자 장치가 제공된다. 상기 전자 장치는, 카메라, 적어도 하나의 프로세서, 및 저장 공간을 갖는 메모리를 포함할 수 있다. 상기 적어도 하나의 프로세서는, 캡쳐를 위한 제1 사용자 입력을 수신하도록 구성될 수 있다. 상기 적어도 하나의 프로세서는, 상기 카메라를 통해, 상기 제1 사용자 입력에 대응하는 제1 캡쳐 동작이 수행되는 동안, 캡쳐를 위한 제2 사용자 입력을 수신하는 것에 기반하여, 상기 제2 사용자 입력에 대한 정보를 상기 저장 공간에 저장할 수 있다. 상기 적어도 하나의 프로세서는, 상기 제1 캡쳐 동작의 완료를 식별하는 것에 기반하여, 상기 제2 사용자 입력과 상기 제1 캡쳐 동작의 완료의 시간 차이가 임계값 이하인지 여부를 식별하도록 구성될 수 있다. 상기 적어도 하나의 프로세서는, 상기 시간 차이가 상기 임계값 이하인 경우, 상기 제2 사용자 입력에 대응하는 제2 캡쳐 동작을 수행하도록 구성될 수 있다.
실시예들에 따른 전자 장치에 의해 수행되는 방법이 제공된다. 상기 방법은, 캡쳐를 위한 제1 사용자 입력을 수신하는 동작을 포함할 수 있다. 상기 방법은 상기 제1 사용자 입력에 대응하는 제1 캡쳐 동작이 수행되는 동안, 캡쳐를 위한 제2 사용자 입력을 수신하는 것에 기반하여, 상기 제2 사용자 입력에 대한 정보를 저장 공간에 저장하는 동작을 포함할 수 있다. 상기 동작은 상기 제1 캡쳐 동작의 완료를 식별하는 것에 기반하여, 상기 제2 사용자 입력과 상기 제1 캡쳐 동작의 완료의 시간 차이가 임계값 이하인지 여부를 식별하는 동작을 포함할 수 있다. 상기 동작은 상기 시간 차이가 상기 임계값 이하인 경우, 상기 제2 사용자 입력에 대응하는 제2 캡쳐 동작을 수행하는 동작을 포함할 수 있다.
실시예들에 따른 비-일시적 컴퓨터 판독 가능 매체가 제공된다. 상기 비-일시적 컴퓨터 판독 가능 매체는 인스트럭션들을 저장하도록 구성되는 메모리를 포함할 수 있다. 상기 인스트럭션들은, 프로세서에 의해 실행될 때, 전자 장치가 캡쳐를 위한 제1 사용자 입력을 수신하고, 상기 제1 사용자 입력에 대응하는 제1 캡쳐 동작이 수행되는 동안, 캡쳐를 위한 제2 사용자 입력을 수신하는 것에 기반하여, 상기 제2 사용자 입력에 대한 정보를 저장 공간에 저장하고, 상기 제1 캡쳐 동작의 완료를 식별하는 것에 기반하여, 상기 제2 사용자 입력과 상기 제1 캡쳐 동작의 완료의 시간 차이가 임계값 이하인지 여부를 식별하고, 상기 시간 차이가 상기 임계값 이하인 경우, 상기 제2 사용자 입력에 대응하는 제2 캡쳐 동작을 수행하도록 야기할 수 있다.
도 1은 실시예들에 따른, 네트워크 환경 내의 전자 장치의 블록도이다.
도 2a는 실시예들에 따른 카메라 모듈을 예시하는 블록이다.
도 2b는 일 실시예에 따른, 전자 장치의 기능적 구성의 예를 도시한다.
도 3은 일 실시예에 따른, 캡쳐 동작(capture procedure)의 예를 도시한다.
도 4a 내지 도 4b는 일 실시예에 따른 연속적인 사용자 입력들에 대응하는 캡쳐 동작들의 예를 도시한다.
도 5는 일 실시예에 따른, PPP(post processing picture) 방식에 따른 캡쳐 동작들의 예를 도시한다.
도 6은 일 실시예에 따른, 연속적인 사용자 입력들에 대응하는 캡쳐 동작들을 위한 전자 장치의 동작 흐름을 도시한다.
도 7은 일 실시예에 따른, 캡쳐를 위한 사용자 입력을 저장하기 위한 전자 장치의 동작 흐름을 도시한다.
도 8은 일 실시예에 따른, 일 캡쳐 동작의 완료 후, 전자 장치의 동작 흐름을 도시한다.
본 개시에서 사용되는 용어들은 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 다른 실시예의 범위를 한정하려는 의도가 아닐 수 있다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함할 수 있다. 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 용어들은 본 개시에 기재된 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가질 수 있다. 본 개시에 사용된 용어들 중 일반적인 사전에 정의된 용어들은, 관련 기술의 문맥상 가지는 의미와 동일 또는 유사한 의미로 해석될 수 있으며, 본 개시에서 명백하게 정의되지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다. 경우에 따라서, 본 개시에서 정의된 용어일지라도 본 개시의 실시예들을 배제하도록 해석될 수 없다.
이하에서 설명되는 본 개시의 다양한 실시예들에서는 하드웨어적인 접근 방법을 예시로서 설명한다. 하지만, 본 개시의 다양한 실시예들에서는 하드웨어와 소프트웨어를 모두 사용하는 기술을 포함하고 있으므로, 본 개시의 다양한 실시예들이 소프트웨어 기반의 접근 방법을 제외하는 것은 아니다.
이하 설명에서 사용되는 저장부를 지칭하는 용어(예: 저장 공간, 메모리, 버퍼, 큐(queue), 리스트, 컨테이너(container)), 사용자 입력을 지칭하는 용어(예: 셔터, 버튼 입력, 누름 입력, 캡쳐 이벤트, 또는 셔터 이벤트), 시스템 내부 동작을 지칭하기 위한 용어(예: 트리거, 절차, 이벤트, 또는 동작), 또는 장치의 구성 요소를 지칭하는 용어 등은 설명의 편의를 위해 예시된 것이다. 따라서, 본 개시가 후술되는 용어들에 한정되는 것은 아니며, 동등한 기술적 의미를 가지는 다른 용어가 사용될 수 있다. 또한, 이하 사용되는 '...부', '...기', '...물', 또는'...체' 등의 용어는 적어도 하나의 형상 구조를 의미하거나 또는 기능을 처리하는 단위를 의미할 수 있다.
또한, 본 개시에서, 특정 조건의 만족(satisfied), 또는 충족(fulfilled) 여부를 판단하기 위해, 초과 또는 미만의 표현이 사용될 수 있으나, 이는 일 예를 표현하기 위한 기재일 뿐 이상 또는 이하의 기재를 배제하는 것이 아니다. '이상'으로 기재된 조건은 '초과', '이하'로 기재된 조건은 '미만', '이상 및 미만'으로 기재된 조건은 '초과 및 이하'로 대체될 수 있다. 또한, 이하, 'A' 내지 'B'는 A부터(A 포함) B까지의(B 포함) 요소들 중 적어도 하나를 의미한다. 이하, 'C' 및/또는 'D'는 'C' 또는 'D' 중 적어도 하나, 즉, {'C', 'D', 'C'와 'D'}를 포함하는 것을 의미한다.
도 1은 일 실시예에 따른, 네트워크 환경 내의 전자 장치의 블록도이다.
도 1을 참조하면, 네트워크 환경(100)에서 전자 장치(101)는 제1 네트워크(198)(예: 근거리 무선 통신 네트워크)를 통하여 전자 장치(102)와 통신하거나, 또는 제2 네트워크(199)(예: 원거리 무선 통신 네트워크)를 통하여 전자 장치(104) 또는 서버(108) 중 적어도 하나와 통신할 수 있다. 일 실시예에 따르면, 전자 장치(101)는 서버(108)를 통하여 전자 장치(104)와 통신할 수 있다. 일 실시예에 따르면, 전자 장치(101)는 프로세서(120), 메모리(130), 입력 모듈(150), 음향 출력 모듈(155), 디스플레이 모듈(160), 오디오 모듈(170), 센서 모듈(176), 인터페이스(177), 연결 단자(178), 햅틱 모듈(179), 카메라 모듈(180), 전력 관리 모듈(188), 배터리(189), 통신 모듈(190), 가입자 식별 모듈(196), 또는 안테나 모듈(197)을 포함할 수 있다. 일 실시예에서는, 전자 장치(101)에는, 이 구성요소들 중 적어도 하나(예: 연결 단자(178))가 생략되거나, 하나 이상의 다른 구성요소가 추가될 수 있다. 일 실시예에서는, 이 구성요소들 중 일부들(예: 센서 모듈(176), 카메라 모듈(180), 또는 안테나 모듈(197))은 하나의 구성요소(예: 디스플레이 모듈(160))로 통합될 수 있다.
프로세서(120)는, 예를 들면, 소프트웨어(예: 프로그램(140))를 실행하여 프로세서(120)에 연결된 전자 장치(101)의 적어도 하나의 다른 구성요소(예: 하드웨어 또는 소프트웨어 구성요소)를 제어할 수 있고, 다양한 데이터 처리 또는 연산을 수행할 수 있다. 일 실시예에 따르면, 데이터 처리 또는 연산의 적어도 일부로서, 프로세서(120)는 다른 구성요소(예: 센서 모듈(176) 또는 통신 모듈(190))로부터 수신된 명령 또는 데이터를 휘발성 메모리(132)에 저장하고, 휘발성 메모리(132)에 저장된 명령 또는 데이터를 처리하고, 결과 데이터를 비휘발성 메모리(134)에 저장할 수 있다. 일 실시예에 따르면, 프로세서(120)는 메인 프로세서(121)(예: 중앙 처리 장치 또는 어플리케이션 프로세서) 또는 이와는 독립적으로 또는 함께 운영 가능한 보조 프로세서(123)(예: 그래픽 처리 장치, 신경망 처리 장치(NPU: neural processing unit), 이미지 시그널 프로세서, 센서 허브 프로세서, 또는 커뮤니케이션 프로세서)를 포함할 수 있다. 예를 들어, 전자 장치(101)가 메인 프로세서(121) 및 보조 프로세서(123)를 포함하는 경우, 보조 프로세서(123)는 메인 프로세서(121)보다 저전력을 사용하거나, 지정된 기능에 특화되도록 설정될 수 있다. 보조 프로세서(123)는 메인 프로세서(121)와 별개로, 또는 그 일부로서 구현될 수 있다.
보조 프로세서(123)는, 예를 들면, 메인 프로세서(121)가 인액티브(예: 슬립) 상태에 있는 동안 메인 프로세서(121)를 대신하여, 또는 메인 프로세서(121)가 액티브(예: 어플리케이션 실행) 상태에 있는 동안 메인 프로세서(121)와 함께, 전자 장치(101)의 구성요소들 중 적어도 하나의 구성요소(예: 디스플레이 모듈(160), 센서 모듈(176), 또는 통신 모듈(190))와 관련된 기능 또는 상태들의 적어도 일부를 제어할 수 있다. 일 실시예에 따르면, 보조 프로세서(123)(예: 이미지 시그널 프로세서 또는 커뮤니케이션 프로세서)는 기능적으로 관련 있는 다른 구성요소(예: 카메라 모듈(180) 또는 통신 모듈(190))의 일부로서 구현될 수 있다. 일 실시예에 따르면, 보조 프로세서(123)(예: 신경망 처리 장치)는 인공지능 모델의 처리에 특화된 하드웨어 구조를 포함할 수 있다. 인공지능 모델은 기계 학습을 통해 생성될 수 있다. 이러한 학습은, 예를 들어, 인공지능 모델이 수행되는 전자 장치(101) 자체에서 수행될 수 있고, 별도의 서버(예: 서버(108))를 통해 수행될 수도 있다. 학습 알고리즘은, 예를 들어, 지도형 학습(supervised learning), 비지도형 학습(unsupervised learning), 준지도형 학습(semi-supervised learning) 또는 강화 학습(reinforcement learning)을 포함할 수 있으나, 전술한 예에 한정되지 않는다. 인공지능 모델은, 복수의 인공 신경망 레이어들을 포함할 수 있다. 인공 신경망은 심층 신경망(DNN: deep neural network), CNN(convolutional neural network), RNN(recurrent neural network), RBM(restricted boltzmann machine), DBN(deep belief network), BRDNN(bidirectional recurrent deep neural network), 심층 Q-네트워크(deep Q-networks) 또는 상기 중 둘 이상의 조합 중 하나일 수 있으나, 전술한 예에 한정되지 않는다. 인공지능 모델은 하드웨어 구조 이외에, 추가적으로 또는 대체적으로, 소프트웨어 구조를 포함할 수 있다.
메모리(130)는, 전자 장치(101)의 적어도 하나의 구성요소(예: 프로세서(120) 또는 센서 모듈(176))에 의해 사용되는 다양한 데이터를 저장할 수 있다. 데이터는, 예를 들어, 소프트웨어(예: 프로그램(140)) 및, 이와 관련된 명령에 대한 입력 데이터 또는 출력 데이터를 포함할 수 있다. 메모리(130)는, 휘발성 메모리(132) 또는 비휘발성 메모리(134)를 포함할 수 있다.
프로그램(140)은 메모리(130)에 소프트웨어로서 저장될 수 있으며, 예를 들면, 운영 체제(142), 미들 웨어(144) 또는 어플리케이션(146)을 포함할 수 있다.
입력 모듈(150)은, 전자 장치(101)의 구성요소(예: 프로세서(120))에 사용될 명령 또는 데이터를 전자 장치(101)의 외부(예: 사용자)로부터 수신할 수 있다. 입력 모듈(150)은, 예를 들면, 마이크, 마우스, 키보드, 키(예: 버튼), 또는 디지털 펜(예: 스타일러스 펜)을 포함할 수 있다.
음향 출력 모듈(155)은 음향 신호를 전자 장치(101)의 외부로 출력할 수 있다. 음향 출력 모듈(155)은, 예를 들면, 스피커 또는 리시버를 포함할 수 있다. 스피커는 멀티미디어 재생 또는 녹음 재생과 같이 일반적인 용도로 사용될 수 있다. 리시버는 착신 전화를 수신하기 위해 사용될 수 있다. 일 실시예에 따르면, 리시버는 스피커와 별개로, 또는 그 일부로서 구현될 수 있다.
디스플레이 모듈(160)은 전자 장치(101)의 외부(예: 사용자)로 정보를 시각적으로 제공할 수 있다. 디스플레이 모듈(160)은, 예를 들면, 디스플레이, 홀로그램 장치, 또는 프로젝터 및 해당 장치를 제어하기 위한 제어 회로를 포함할 수 있다. 일 실시예에 따르면, 디스플레이 모듈(160)은 터치를 감지하도록 설정된 터치 센서, 또는 상기 터치에 의해 발생되는 힘의 세기를 측정하도록 설정된 압력 센서를 포함할 수 있다.
오디오 모듈(170)은 소리를 전기 신호로 변환시키거나, 반대로 전기 신호를 소리로 변환시킬 수 있다. 일 실시예에 따르면, 오디오 모듈(170)은, 입력 모듈(150)을 통해 소리를 획득하거나, 음향 출력 모듈(155), 또는 전자 장치(101)와 직접 또는 무선으로 연결된 외부 전자 장치(예: 전자 장치(102))(예: 스피커 또는 헤드폰)를 통해 소리를 출력할 수 있다.
센서 모듈(176)은 전자 장치(101)의 작동 상태(예: 전력 또는 온도), 또는 외부의 환경 상태(예: 사용자 상태)를 감지하고, 감지된 상태에 대응하는 전기 신호 또는 데이터 값을 생성할 수 있다. 일 실시예에 따르면, 센서 모듈(176)은, 예를 들면, 제스처 센서, 자이로 센서, 기압 센서, 마그네틱 센서, 가속도 센서, 그립 센서, 근접 센서, 컬러 센서, IR(infrared) 센서, 생체 센서, 온도 센서, 습도 센서, 또는 조도 센서를 포함할 수 있다.
인터페이스(177)는 전자 장치(101)가 외부 전자 장치(예: 전자 장치(102))와 직접 또는 무선으로 연결되기 위해 사용될 수 있는 하나 이상의 지정된 프로토콜들을 지원할 수 있다. 일 실시예에 따르면, 인터페이스(177)는, 예를 들면, HDMI(high definition multimedia interface), USB(universal serial bus) 인터페이스, SD카드 인터페이스, 또는 오디오 인터페이스를 포함할 수 있다.
연결 단자(178)는, 그를 통해서 전자 장치(101)가 외부 전자 장치(예: 전자 장치(102))와 물리적으로 연결될 수 있는 커넥터를 포함할 수 있다. 일 실시예에 따르면, 연결 단자(178)는, 예를 들면, HDMI 커넥터, USB 커넥터, SD 카드 커넥터, 또는 오디오 커넥터(예: 헤드폰 커넥터)를 포함할 수 있다.
햅틱 모듈(179)은 전기적 신호를 사용자가 촉각 또는 운동 감각을 통해서 인지할 수 있는 기계적인 자극(예: 진동 또는 움직임) 또는 전기적인 자극으로 변환할 수 있다. 일 실시예에 따르면, 햅틱 모듈(179)은, 예를 들면, 모터, 압전 소자, 또는 전기 자극 장치를 포함할 수 있다.
카메라 모듈(180)은 정지 영상 및 동영상을 촬영할 수 있다. 일 실시예에 따르면, 카메라 모듈(180)은 하나 이상의 렌즈들, 이미지 센서들, 이미지 시그널 프로세서들, 또는 플래시들을 포함할 수 있다.
전력 관리 모듈(188)은 전자 장치(101)에 공급되는 전력을 관리할 수 있다. 일 실시예에 따르면, 전력 관리 모듈(188)은, 예를 들면, PMIC(power management integrated circuit)의 적어도 일부로서 구현될 수 있다.
배터리(189)는 전자 장치(101)의 적어도 하나의 구성요소에 전력을 공급할 수 있다. 일 실시예에 따르면, 배터리(189)는, 예를 들면, 재충전 불가능한 1차 전지, 재충전 가능한 2차 전지 또는 연료 전지를 포함할 수 있다.
통신 모듈(190)은 전자 장치(101)와 외부 전자 장치(예: 전자 장치(102), 전자 장치(104), 또는 서버(108)) 간의 직접(예: 유선) 통신 채널 또는 무선 통신 채널의 수립, 및 수립된 통신 채널을 통한 통신 수행을 지원할 수 있다. 통신 모듈(190)은 프로세서(120)(예: 어플리케이션 프로세서)와 독립적으로 운영되고, 직접(예: 유선) 통신 또는 무선 통신을 지원하는 하나 이상의 커뮤니케이션 프로세서를 포함할 수 있다. 일 실시예에 따르면, 통신 모듈(190)은 무선 통신 모듈(192)(예: 셀룰러 통신 모듈, 근거리 무선 통신 모듈, 또는 GNSS(global navigation satellite system) 통신 모듈) 또는 유선 통신 모듈(194)(예: LAN(local area network) 통신 모듈, 또는 전력선 통신 모듈)을 포함할 수 있다. 이들 통신 모듈 중 해당하는 통신 모듈은 제1 네트워크(198)(예: 블루투스, WiFi(wireless fidelity) direct 또는 IrDA(infrared data association)와 같은 근거리 통신 네트워크) 또는 제2 네트워크(199)(예: 레거시 셀룰러 네트워크, 5G 네트워크, 차세대 통신 네트워크, 인터넷, 또는 컴퓨터 네트워크(예: LAN 또는 WAN)와 같은 원거리 통신 네트워크)를 통하여 외부의 전자 장치(104)와 통신할 수 있다. 이런 여러 종류의 통신 모듈들은 하나의 구성요소(예: 단일 칩)로 통합되거나, 또는 서로 별도의 복수의 구성요소들(예: 복수 칩들)로 구현될 수 있다. 무선 통신 모듈(192)은 가입자 식별 모듈(196)에 저장된 가입자 정보(예: 국제 모바일 가입자 식별자(IMSI))를 이용하여 제1 네트워크(198) 또는 제2 네트워크(199)와 같은 통신 네트워크 내에서 전자 장치(101)를 확인 또는 인증할 수 있다.
무선 통신 모듈(192)은 4G 네트워크 이후의 5G 네트워크 및 차세대 통신 기술, 예를 들어, NR 접속 기술(new radio access technology)을 지원할 수 있다. NR 접속 기술은 고용량 데이터의 고속 송신(eMBB(enhanced mobile broadband)), 단말 전력 최소화와 다수 단말의 접속(mMTC(massive machine type communications)), 또는 고신뢰도와 저지연(URLLC(ultra-reliable and low-latency communications))을 지원할 수 있다. 무선 통신 모듈(192)은, 예를 들어, 높은 데이터 송신률 달성을 위해, 고주파 대역(예: mmWave 대역)을 지원할 수 있다. 무선 통신 모듈(192)은 고주파 대역에서의 성능 확보를 위한 다양한 기술들, 예를 들어, 빔포밍(beamforming), 거대 배열 다중 입출력(massive MIMO(multiple-input and multiple-output)), 전차원 다중입출력(FD-MIMO: full dimensional MIMO), 어레이 안테나(array antenna), 아날로그 빔형성(analog beam-forming), 또는 대규모 안테나(large scale antenna)와 같은 기술들을 지원할 수 있다. 무선 통신 모듈(192)은 전자 장치(101), 외부 전자 장치(예: 전자 장치(104)) 또는 네트워크 시스템(예: 제2 네트워크(199))에 규정되는 다양한 요구사항을 지원할 수 있다. 일 실시예에 따르면, 무선 통신 모듈(192)은 eMBB 실현을 위한 Peak data rate(예: 20Gbps 이상), mMTC 실현을 위한 손실 Coverage(예: 164dB 이하), 또는 URLLC 실현을 위한 U-plane latency(예: 다운링크(DL) 및 업링크(UL) 각각 0.5ms 이하, 또는 라운드 트립 1ms 이하)를 지원할 수 있다.
안테나 모듈(197)은 신호 또는 전력을 외부(예: 외부의 전자 장치)로 송신하거나 외부로부터 수신할 수 있다. 일 실시예에 따르면, 안테나 모듈(197)은 서브스트레이트(예: PCB) 위에 형성된 도전체 또는 도전성 패턴으로 이루어진 방사체를 포함하는 안테나를 포함할 수 있다. 일 실시예에 따르면, 안테나 모듈(197)은 복수의 안테나들(예: 어레이 안테나)을 포함할 수 있다. 이런 경우, 제1 네트워크(198) 또는 제2 네트워크(199)와 같은 통신 네트워크에서 사용되는 통신 방식에 적합한 적어도 하나의 안테나가, 예를 들면, 통신 모듈(190)에 의하여 상기 복수의 안테나들로부터 선택될 수 있다. 신호 또는 전력은 상기 선택된 적어도 하나의 안테나를 통하여 통신 모듈(190)과 외부의 전자 장치 간에 송신되거나 수신될 수 있다. 일 실시예에 따르면, 방사체 이외에 다른 부품(예: RFIC(radio frequency integrated circuit))이 추가로 안테나 모듈(197)의 일부로 형성될 수 있다.
일 실시예에 따르면, 안테나 모듈(197)은 mmWave 안테나 모듈을 형성할 수 있다. 일 실시예에 따르면, mmWave 안테나 모듈은 인쇄 회로 기판, 상기 인쇄 회로 기판의 제1 면(예: 아래 면)에 또는 그에 인접하여 배치되고 지정된 고주파 대역(예: mmWave 대역)을 지원할 수 있는 RFIC, 및 상기 인쇄 회로 기판의 제2 면(예: 윗 면 또는 측 면)에 또는 그에 인접하여 배치되고 상기 지정된 고주파 대역의 신호를 송신 또는 수신할 수 있는 복수의 안테나들(예: 어레이 안테나)을 포함할 수 있다.
상기 구성요소들 중 적어도 일부는 주변 기기들간 통신 방식(예: 버스, GPIO(general purpose input and output), SPI(serial peripheral interface), 또는 MIPI(mobile industry processor interface))을 통해 서로 연결되고 신호(예: 명령 또는 데이터)를 상호간에 교환할 수 있다.
일 실시예에 따르면, 명령 또는 데이터는 제2 네트워크(199)에 연결된 서버(108)를 통해서 전자 장치(101)와 외부의 전자 장치(104)간에 송신 또는 수신될 수 있다. 외부의 전자 장치(102, 또는 104) 각각은 전자 장치(101)와 동일한 또는 다른 종류의 장치일 수 있다. 일 실시예에 따르면, 전자 장치(101)에서 실행되는 동작들의 전부 또는 일부는 외부의 전자 장치들(102, 104, 또는 108) 중 하나 이상의 외부의 전자 장치들에서 실행될 수 있다. 예를 들면, 전자 장치(101)가 어떤 기능이나 서비스를 자동으로, 또는 사용자 또는 다른 장치로부터의 요청에 반응하여 수행해야 할 경우에, 전자 장치(101)는 기능 또는 서비스를 자체적으로 실행시키는 대신에 또는 추가적으로, 하나 이상의 외부의 전자 장치들에게 그 기능 또는 그 서비스의 적어도 일부를 수행하라고 요청할 수 있다. 상기 요청을 수신한 하나 이상의 외부의 전자 장치들은 요청된 기능 또는 서비스의 적어도 일부, 또는 상기 요청과 관련된 추가 기능 또는 서비스를 실행하고, 그 실행의 결과를 전자 장치(101)로 전달할 수 있다. 전자 장치(101)는 상기 결과를, 그대로 또는 추가적으로 처리하여, 상기 요청에 대한 응답의 적어도 일부로서 제공할 수 있다. 이를 위하여, 예를 들면, 클라우드 컴퓨팅, 분산 컴퓨팅, 모바일 에지 컴퓨팅(MEC: mobile edge computing), 또는 클라이언트-서버 컴퓨팅 기술이 이용될 수 있다. 전자 장치(101)는, 예를 들어, 분산 컴퓨팅 또는 모바일 에지 컴퓨팅을 이용하여 초저지연 서비스를 제공할 수 있다. 일 실시예에 있어서, 외부의 전자 장치(104)는 IoT(internet of things) 기기를 포함할 수 있다. 서버(108)는 기계 학습 및/또는 신경망을 이용한 지능형 서버일 수 있다. 일 실시예에 따르면, 외부의 전자 장치(104) 또는 서버(108)는 제2 네트워크(199) 내에 포함될 수 있다. 전자 장치(101)는 5G 통신 기술 및 IoT 관련 기술을 기반으로 지능형 서비스(예: 스마트 홈, 스마트 시티, 스마트 카, 또는 헬스 케어)에 적용될 수 있다.
도 2a는, 실시예들에 따른, 카메라 모듈(180)을 예시하는 블록도(200)이다.
도 2a를 참조하면, 카메라 모듈(180)은 렌즈 어셈블리(lens assembly)(210), 플래쉬(flash)(220), 이미지 센서(230), 이미지 스태빌라이저(stabilizer)(240), 메모리(250)(예: 버퍼 메모리), 또는 이미지 시그널 프로세서(260)를 포함할 수 있다. 렌즈 어셈블리(210)는 이미지 촬영의 대상인 피사체로부터 방출되는 빛을 수집할 수 있다. 렌즈 어셈블리(210)는 하나 또는 그 이상의 렌즈들을 포함할 수 있다. 일 실시예에 따르면, 카메라 모듈(180)은 복수의 렌즈 어셈블리(210)들을 포함할 수 있다. 이런 경우, 카메라 모듈(180)은, 예를 들면, 듀얼 카메라, 360도 카메라, 또는 구형 카메라(spherical camera)를 형성할 수 있다. 복수의 렌즈 어셈블리(210)들 중 일부는 동일한 렌즈 속성(예: 화각, 초점 거리, 자동 초점, f 넘버(f number), 또는 광학 줌)을 갖거나, 또는 적어도 하나의 렌즈 어셈블리는 다른 렌즈 어셈블리의 렌즈 속성들과 다른 하나 이상의 렌즈 속성들을 가질 수 있다. 렌즈 어셈블리(210)는, 예를 들면, 광각 렌즈 또는 망원 렌즈를 포함할 수 있다.
플래쉬(220)는 피사체로부터 방출 또는 반사되는 빛을 강화하기 위하여 사용되는 빛을 방출할 수 있다. 일 실시예에 따르면, 플래쉬(220)는 하나 이상의 발광 다이오드들(예: RGB(red-green-blue) LED, white LED, infrared LED, 또는 ultraviolet LED), 또는 xenon lamp를 포함할 수 있다. 이미지 센서(230)는 피사체로부터 방출 또는 반사되어 렌즈 어셈블리(210)를 통해 전달된 빛을 전기적인 신호로 변환함으로써, 상기 피사체에 대응하는 이미지를 획득할 수 있다. 일 실시예에 따르면, 이미지 센서(230)는, 예를 들면, RGB 센서, BW(black and white) 센서, IR 센서, 또는 UV 센서와 같이 속성이 다른 이미지 센서들 중 선택된 하나의 이미지 센서, 동일한 속성을 갖는 복수의 이미지 센서들, 또는 다른 속성을 갖는 복수의 이미지 센서들을 포함할 수 있다. 이미지 센서(230)에 포함된 각각의 이미지 센서는, 예를 들면, CCD(charged coupled device) 센서 또는 CMOS(complementary metal oxide semiconductor) 센서를 이용하여 구현될 수 있다.
이미지 스태빌라이저(240)는 카메라 모듈(180) 또는 이를 포함하는 전자 장치(101)의 움직임에 반응하여, 렌즈 어셈블리(210)에 포함된 적어도 하나의 렌즈 또는 이미지 센서(230)를 특정한 방향으로 움직이거나 이미지 센서(230)의 동작 특성을 제어(예: 리드 아웃(read-out) 타이밍을 조정 등)할 수 있다. 이는 촬영되는 이미지에 대한 상기 움직임에 의한 부정적인 영향의 적어도 일부를 보상하게 해 준다. 일 실시예에 따르면, 이미지 스태빌라이저(240)는, 일 실시예에 따르면, 이미지 스태빌라이저(240)는 카메라 모듈(180)의 내부 또는 외부에 배치된 자이로 센서(미도시) 또는 가속도 센서(미도시)를 이용하여 카메라 모듈(180) 또는 전자 장치(101)의 그런 움직임을 감지할 수 있다. 일 실시예에 따르면, 이미지 스태빌라이저(240)는, 예를 들면, 광학식 이미지 스태빌라이저로 구현될 수 있다.
메모리(250)는 이미지 센서(230)를 통하여 획득된 이미지의 적어도 일부를 다음 이미지 처리 작업을 위하여 적어도 일시 저장할 수 있다. 예를 들어, 셔터에 따른 이미지 획득이 지연되거나, 또는 복수의 이미지들이 고속으로 획득되는 경우, 획득된 원본 이미지(예: Bayer-patterned 이미지 또는 높은 해상도의 이미지)는 메모리(250)에 저장이 되고, 그에 대응하는 사본 이미지(예: 낮은 해상도의 이미지)는 표시 장치(예: 도 1의 디스플레이 모듈(160))를 통하여 프리뷰될 수 있다. 이후, 지정된 조건이 만족되면(예: 사용자 입력 또는 시스템 명령) 메모리(250)에 저장되었던 원본 이미지의 적어도 일부가, 예를 들면, 이미지 시그널 프로세서(260)에 의해 획득되어 처리될 수 있다. 일 실시예에 따르면, 메모리(250)는 메모리(130)의 적어도 일부로, 또는 이와는 독립적으로 운영되는 별도의 메모리로 구성될 수 있다.
이미지 시그널 프로세서(260)는 이미지 센서(230)를 통하여 획득된 이미지 또는 메모리(250)에 저장된 이미지에 대하여 하나 이상의 이미지 처리들을 수행할 수 있다. 상기 하나 이상의 이미지 처리들은, 예를 들면, 깊이 지도(depth map) 생성, 3차원 모델링, 파노라마 생성, 특징점 추출, 이미지 합성, 또는 이미지 보상(예: 노이즈 감소, 해상도 조정, 밝기 조정, 블러링(blurring), 샤프닝(sharpening), 또는 소프트닝(softening)을 포함할 수 있다. 추가적으로 또는 대체적으로, 이미지 시그널 프로세서(260)는 카메라 모듈(180)에 포함된 구성 요소들 중 적어도 하나(예: 이미지 센서(230))에 대한 제어(예: 노출 시간 제어, 또는 리드 아웃 타이밍 제어 등)를 수행할 수 있다. 이미지 시그널 프로세서(260)에 의해 처리된 이미지는 추가 처리를 위하여 메모리(250)에 다시 저장되거나 카메라 모듈(180)의 외부 구성 요소(예: 메모리(130), 디스플레이 모듈(160), 전자 장치(102), 전자 장치(104), 또는 서버(108))로 제공될 수 있다. 일 실시예에 따르면, 이미지 시그널 프로세서(260)는 프로세서(120)의 적어도 일부로 구성되거나, 프로세서(120)와 독립적으로 운영되는 별도의 프로세서로 구성될 수 있다. 이미지 시그널 프로세서(260)가 프로세서(120)와 별도의 프로세서로 구성된 경우, 이미지 시그널 프로세서(260)에 의해 처리된 적어도 하나의 이미지는 프로세서(120)에 의하여 그대로 또는 추가의 이미지 처리를 거친 후 디스플레이 모듈(160)를 통해 표시될 수 있다.
일 실시예에 따르면, 전자 장치(101)는 각각 다른 속성 또는 기능을 가진 복수의 카메라 모듈(180)들을 포함할 수 있다. 이런 경우, 예를 들면, 상기 복수의 카메라 모듈(180)들 중 적어도 하나는 광각 카메라이고, 적어도 다른 하나는 망원 카메라일 수 있다. 유사하게, 상기 복수의 카메라 모듈(180)들 중 적어도 하나는 전면 카메라이고, 적어도 다른 하나는 후면 카메라일 수 있다.
도 2b는 실시예들에 따른 전자 장치의 기능적 구성의 예를 도시한다.
도 2b를 참조하면, 전자 장치(예: 도 1의 전자 장치(101))는 프로세서), 카메라(예: 카메라 모듈(180)), 및 메모리(예: 메모리(130) 또는 메모리(250))를 포함할 수 있다.
전자 장치(101)는 프로세서(120)를 포함할 수 있다. 프로세서(120)는 하나 이상의 IC(integrated circuit) 칩들로 구현될 수 있고, 다양한 데이터 처리들을 실행할 수 있다. 예를 들면, 프로세서(120)는, SoC(system on chip)로 구현될 수 있다. 예를 들면, 프로세서(120)는, CPU(central processing unit), GPU(graphics processing unit), NPU(neural processing unit), ISP(image signal processor), 디스플레이 컨트롤러, 메모리 컨트롤러, 스토리지 컨트롤러, AP(application processor), CP(communication processor), 및/또는 센서 인터페이스를 포함하는 서브 구성요소들을 포함할 수 있다. 상기 서브 구성요소들은, 단지 예시적인 것이다. 예를 들면, 프로세서(120)는, 다른 서브 구성요소들을 더 포함할 수 있다. 예를 들면, 몇몇 서브 구성요소들은, 프로세서(120)로부터 생략될 수 있다. 일 실시예에 따라, 전자 장치(101)는 카메라(180)를 통해, 이미지를 획득하기 위해, 카메라(180)를 제어하기 위한 시스템에 캡쳐 이벤트를 전달하거나, AE(auto exposure), AF(auto focusing), 및/또는 AWB(auto white balance) 기능을 트리거할 수 있다. 일 실시예에 따라, 전자 장치(101)는 이미지 캡쳐를 위한 사용자 입력을 메모리(130)에 저장할 수 있다.
전자 장치(130)는 메모리(130)를 포함할 수 있다. 메모리(130)는 전자 장치(101)의 동작을 위한 기본 프로그램, 응용 프로그램, 또는 설정 정보와 같은 데이터를 저장할 수 있다. 메모리(130)는 저장부로 지칭될 수 있다. 메모리(130)는 휘발성 메모리(예: 휘발성 메모리(132)), 비휘발성 메모리(예: 비휘발성 메모리(134)) 또는 휘발성 메모리와 비휘발성 메모리의 조합으로 구현될 수 있다. 그리고, 메모리(130)는 프로세서(120)의 요청에 따라 저장된 데이터를 제공할 수 있다. 일 실시예에 따라, 메모리(130)는 캡쳐를 위한 사용자 입력을 저장하기 위한 저장 공간(280)을 포함할 수 있다. 예를 들면, 상기 저장 공간(280)은 셔터 큐(shutter queue), 셔터 리스트, 또는 셔터 어레이로 지칭될 수 있다. 일 실시예에 따라, 메모리(130)는 프로세서(120)에 의한 처리를 위해, 적어도 하나의 카메라(예: 카메라(180))에 의해 캡쳐된 이미지들을 저장할 수 있다. 도 2b에서는 저장 공간(280)이 별도의 메모리(130) 내에 도시되었으나, 본 개시의 실시예들에 이에 한정되지 않는다. 예를 들면, 캡쳐를 위한 사용자 입력을 저장하기 위한 저장 공간은, 카메라(180) 내부의 저장 공간(예: 메모리(250)))에 저장될 수도 있다. 즉, 도 2b의 도시가, 본 개시의 다른 실시예들을 제한하는 것으로 해석되지 않는다.
전자 장치(101)는 카메라(180)을 포함할 수 있다. 예를 들어, 카메라들은 광각(wide) 카메라, 초광각(ultra-wide) 카메라, 제1 망원 카메라, 또는 제2 망원 카메라 중 적어도 하나를 포함할 수 있다. 광각 카메라는, 상기 전자 장치(101)로부터 일정 거리(예: 약 28cm(centimeter)) 이상에 위치하는 객체의 이미지를 저배율(예: 약 3-배율 미만)로 획득하기 위해 이용될 수 있다. 초광각 카메라는, 상기 전자 장치(101)로부터 상기 일정 거리 미만에 위치하는 객체의 이미지를 저배율로 획득하기 위해 이용될 수 있다. 제1 망원 카메라는, 제1 배율 범위(예: 3-배율 이상 10-배율 미만)로 객체의 이미지를 획득하기 위해 이용될 수 있다. 제2 망원 카메라는, 제2 배율 범위(예: 10-배율 이상 15-배율 미만)로 객체의 이미지를 획득하기 위해 이용될 수 있다. 일 실시예에 따라, 전자 장치(101)는 카메라(180)를 통해, 이미지를 획득할 수 있다.
일 실시예에서, 사용자가 전자 장치(예: 전자 장치(101)의 셔터를 누르면, 전자 장치(101)는 이미지를 획득할 수 있다. 예를 들어, 사용자가 셔터를 누르자마자, 전자 장치(101)가 캡쳐를 개시함으로써, 전자 장치(101)는 원하는 타이밍에 원하는 장면을 획득할 수 있다. 첫 캡쳐 동작이 완료되기 전까지, 전자 장치(101)는 다음 캡쳐 동작을 개시할 수 없다. 따라서, 전자 장치(101)가 캡쳐 동작 중에 수신되는 셔터 입력은 무시되므로, 사용자는 캡쳐를 위해 다시 전자 장치(101)의 셔터를 누를 수 있다. 사용자가 캡쳐 동작이 완료된 후 다시 전자 장치(101)의 셔터를 눌러야 다음 캡쳐가 가능하기 때문에, 사용자는 샷-투-샷(shot-to-shot)의 체감 속도가 느리다고 느낄 수 있다. 또한, 사용자는 원하는 타이밍에 이미지를 획득하기 어려울 수 있다. 본 개시의 실시예들에 따른 전자 장치(101)는 사용자가 셔터 입력을 누르는 대로, 연속적인 캡쳐를 수행함으로써, 사용자가 원하는 타이밍에 원하는 장면을 놓치지 않고 획득할 수 있다. 뿐만 아니라, 사용자는 샷-투-샷(shot-to-shot)의 체감 속도가 향상될 수 있다. 이하, 전자 장치(101)의 연속적인 캡쳐 동작들을 설명하기 위하여, 캡쳐 동작의 세부 동작들이 도 3을 통해 서술된다.
도 3은 일 실시예에 따른, 캡쳐 동작(capture procedure)의 예를 도시한다. 캡쳐 동작은 전자 장치(예: 전자 장치(101))의 프로세서(예: 프로세서(120)) 및 카메라(예: 카메라 모듈(180))에 의해 수행될 수 있다.
도 3을 참고하면, 전자 장치(101)는 이미지 캡쳐를 위한 사용자 입력(340)을 수신할 수 있다. 상기 사용자 입력(340)은 이미지 캡쳐를 위한 객체(이하, 셔터 버튼)에 대한 입력을 포함할 수 있다. 예를 들어, 전자 장치(101)는 전자 장치(101)의 디스플레이(예: 디스플레이 모듈(160))를 통해 표시되는 UI(user interface)(310) 상에서, 이미지 캡쳐를 위한 객체(이하, 셔터 버튼)를 터치하는 사용자 입력(340)을 수신할 수 있다. 예를 들어, UI(310)는 카메라(180)를 위한 UI로서, 어플리케이션 계층(application layer)에 대응할 수 있다. 전자 장치(101)는 UI(310) 상에 표시되는 셔터 버튼을 터치하는 사용자 입력(340)을 수신할 수 있다. 한편, 다른 예를 들어, 도 3과 달리, 전자 장치(101)는, 외부 전자 장치(예: 스타일러스 펜)로부터 수신되는 제어 신호를 수신할 수 있다. 상기 제어 신호는 이미지 캡쳐를 위한 제어 명령을 포함할 수 있다.
동작(342)에서, 전자 장치(101)는 3A 인터페이스(330)에게 AE 기능 또는 AF 기능의 트리거를 요청할 수 있다. 예를 들면, 3A 인터페이스(330)는 AF(auto focusing)의 활성화, AE(auto exposure)의 활성화, 및 AWB(auto white balance)의 활성화를 제공할 수 있다. 전자 장치(101)는 각 기능에 대한 트리거 상태를 변경할 수 있다. 전자 장치(101)는 AF 트리거 상태를 변경할 수 있다. 예를 들어, AF 상태가 초점이 맞춰지지 않은 초기 상태, CAF(continuous auto focus)가 초점을 맞추기 위해 스캔 중인 상태이거나, CAF로 초점을 맞추기 위해 렌즈의 이동이 요구되는 상태에서, 전자 장치(101)는 AF 기능을 트리거할 수 있다. 전자 장치(101)는 AE 트리거 상태를 변경할 수 있다. 예를 들어, 전자 장치(101)는 플래시를 사용하기 위해, AE 기능을 트리거할 수 있다. 전자 장치(101)는 AWB(auto white balance) 트리거 상태를 변경할 수 있다.
동작(344)에서, 전자 장치(101)는 AE 트리거 상태 및 AF 트리거 상태의 변경이 완료됨을 식별할 수 있다. 예를 들어, 초점이 맞춰지고, 렌즈가 고정되며, 적절한 노출 값이 식별되면, 전자 장치(101)의 어플리케이션 계층은 3A 인터페이스(330)로부터 AE, AF 트리거 완료 이벤트를 획득할 수 있다.
동작(346)에서, 전자 장치(101)는 캡쳐 이벤트를 카메라 시스템(320)에게 전송할 수 있다. 예를 들면, 카메라 시스템(320)은 카메라(180)를 제어하기 위한 인터페이스를 의미할 수 있다. UI(310)에서의 사용자 입력에 대응하여, 이미지 획득을 위한 요청이 카메라 시스템(320)을 통해 카메라(180)에게 제공될 수 있다. 동작(348)에서, 전자 장치(101)는 캡쳐 이벤트에 대응하는 셔터 이벤트를 카메라 시스템(320)로부터 획득할 수 있다. 전자 장치(101)의 UI(310)에서, 셔터 이벤트가 수신됨에 따라, 상기 셔터 이벤트에 대응하는 효과음(예: 셔터 사운드) 또는 진동(예: 셔터 진동)이 출력될 수 있다.
동작(350)에서, 전자 장치(101)는 캡쳐가 완료될 대까지 대기하며, 캡쳐의 완료를 카메라 시스템(320)에게 요청할 수 있다. 동작(351)에서, 전자 장치(101)는 다음 캡쳐를 위하여, AF 잠금 취소를 요청하는 명령을 3A 인터페이스(330)에게 전송할 수 있다. 동작(352)에서, 전자 장치(101)는, 카메라 시스템(320)으로부터, 캡쳐된 이미지를 수신할 수 있다. 예를 들면, 상기 캡쳐된 이미지는, 카메라 시스템(320)에서 캡쳐 후, 처리가 완료된 이미지를 의미할 수 있다. 전자 장치(101)의 어플리케이션 계층에서 상기 캡쳐된 이미지를 획득하면, 사용자 입력(340)에 대응하는 캡쳐 동작이 완료됨을 식별할 수 있다.
일 실시예에 따르면, 사용자 입력(340)에 대응하는 캡쳐 동작은 동작(342) 내지 동작(352)을 포함할 수 있다. 동작(342) 내지 동작(352)에 대응하는 일련의 동작들이 진행되는 동안에 수신되는 사용자의 추가 캡쳐 요청, 예컨대, 셔터 입력이 무시되면, 사용자는 원하는 타이밍에 원하는 이미지를 획득하기 어려울 수 있다. 따라서, 실시예들에 따른 전자 장치(101)는 상기 셔터 입력을 무시하는 대신, 상기 셔터 입력을 별도의 저장 공간(예: 저장 공간(280))에 저장할 수 있다. 예를 들어, 상기 저장 공간은 셔터 큐(shutter queue)로 지칭될 수 있다. 일 실시예에 따라, 전자 장치(101)는 기존의 캡쳐 동작이 완료될 때까지, 상기 셔터 입력을 상기 셔터 큐에 저장할 수 있다. 사용자가 연속으로 셔터 입력들을 제공하는 경우, 전자 장치(101)는, 캡쳐 동작이 수행되는 구간(이하, 캡쳐링 구간)에서의 셔터 입력을 저장할 수 있다. 예를 들어, 전자 장치(101)는 캡쳐가 시작된 이후로부터 캡쳐 동작 완료 시점 내에 다음 셔터 입력이 들어오면, 상기 셔터 큐에 상기 셔터 입력을 저장할 수 있다. 일 실시예에서, 전자 장치(101)는, 캡쳐 동작이 완료된 후, 상기 셔터 큐에 저장된 셔터 입력이 유효한지 여부를 확인하고, 상기 셔터 입력이 유효하면, 바로 상기 셔터 입력에 대응하는 캡쳐 동작을 개시할 수 있다. 이하, 도 4a 내지 도 4b를 통해, 셔터 큐를 이용하는 연속 캡쳐 동작의 예가 서술된다.
도 4a 내지 도 4b는 일 실시예에 따른 연속적인 사용자 입력들에 대응하는 캡쳐 동작들의 예를 도시한다.
도 4a를 참고하면, 사용자는 전자 장치(101)에 4회의 사용자 입력들을 제공할 수 있다. 각 사용자 입력은, 캡쳐(capture)을 위한 입력일 수 있다. 상기 사용자 입력들은 예를 들면, 제1 셔터 입력(411), 제2 셔터 입력(412), 제3 셔터 입력(413), 및 제4 셔터 입력(414)을 포함할 수 있다. 전자 장치(101)는 제1 셔터 입력(411), 제2 셔터 입력(412), 제3 셔터 입력(413), 및 제4 셔터 입력(414)을 순차적으로 수신할 수 있다.
전자 장치(101)는 제1 셔터 입력(411)을 수신할 수 있다. 제1 셔터 입력(411)을 수신하는 것에 기반하여, 전자 장치(101)는 제1 셔터 입력(411)에 대응하는 제1 캡쳐 동작(431)를 수행할 수 있다. 예를 들어, 제1 캡쳐 동작(431)를 위한 일련의 동작들은 도 3의 동작(342) 내지 동작(352)을 포함할 수 있다. 전자 장치(101)는, 제1 캡쳐 동작(431)이 진행 중인 동안, 제2 셔터 입력(412)을 수신할 수 있다. 제2 셔터 입력(412)의 수신 시점은, 제1 캡쳐 동작(431)의 완료 시점(451)보다 앞설 수 있다. 만약, 전자 장치(101)가 제2 셔터 입력(412)을 무시한다면, 전자 장치(101)는 제2 셔터 입력(412)에 대응하는 제2 캡쳐 동작을 수행하지 않을 수 있다. 제1 캡쳐 동작(431)의 완료 후, 전자 장치(101)는 제3 셔터 입력(413)을 수신할 수 있다. 제3 셔터 입력(413)을 수신하는 것에 기반하여, 전자 장치(101)는 제3 셔터 입력(413)에 대응하는 제3 캡쳐 동작(433)를 수행할 수 있다. 캡쳐 동작이 진행중이지 않기 때문에, 제3 캡쳐 동작(433)는, 제3 셔터 입력(413)이 수신되자마자, 개시될 수 있다. 제3 캡쳐 동작(433)의 완료 후, 전자 장치(101)는 제4 셔터 입력(414)을 수신할 수 있다. 제4 셔터 입력(414)을 수신하는 것에 기반하여, 전자 장치(101)는 제4 셔터 입력(414)에 대응하는 제4 캡쳐 동작(434)를 수행할 수 있다. 제3 캡쳐 동작(433)의 완료 시점(453) 이후에, 제4 셔터 입력(414)이 수신되므로, 제4 캡쳐 동작(434)는, 제4 셔터 입력(414)이 수신되자마자, 개시될 수 있다.
4회의 사용자 입력들에도 불구하고, 총 3회의 캡쳐 동작들이 수행되기 때문에, 전자 장치(101)는 3개의 이미지들을 획득할 수 있다. 제1 캡쳐 동작(433)의 완료 시점(451)과 제3 셔터 입력(413)의 시작 시점 사이에 갭(444)이 존재할 수 있다. 갭(444)로 인해, 사용자는 연속적으로 획득되는 이미지들 간에 타이밍 불일치를 느낄 수 있다. 또한, 제2 캡쳐 동작에 대응하는 이미지가 획득되지 않으므로, 사용자는 샷-투-샷 속도가 느림을 느낄 수 있다.
도 4b를 참고하면, 일 실시예에 따른 전자 장치(101)는 캡쳐를 위한 사용자 입력을 전자 장치(101)의 내부 저장 공간(예: 저장 공간(280))에 저장할 수 있다. 예를 들어, 상기 내부 저장 공간은 셔터 큐를 포함할 수 있다. 동일한 참조 번호는, 동일한 설명을 위해 이용될 수 있다.
전자 장치(101)는 제1 셔터 입력(411), 제2 셔터 입력(412), 제3 셔터 입력(413), 및 제4 셔터 입력(414)을 순차적으로 수신할 수 있다. 제1 셔터 입력(411)을 수신하는 것에 기반하여, 전자 장치(101)는 제1 셔터 입력(411)에 대응하는 제1 캡쳐 동작(461)를 수행할 수 있다. 예를 들면, 제1 캡쳐 동작(461)를 위한 일련의 동작들은 도 3의 동작(342) 내지 동작(352)을 포함할 수 있다.
제1 캡쳐 동작(461)가 진행중인 동안, 제2 사용자 입력(412)이 수신될 수 있다. 일 실시예에 따라, 전자 장치(101)는 제2 사용자 입력(412)을 셔터 큐에 저장할 수 있다. 이후, 전자 장치(101)는 제1 캡쳐 동작(461)의 완료를 식별할 수 있다. 일 실시예에 따라, 전자 장치(101), 제1 캡쳐 동작(461)의 완료를 식별하는 것에 기반하여, 상기 셔터 큐에 저장된 사용자 입력이 있는지 여부를 식별할 수 있다. 전자 장치(101)는 상기 셔터 큐에 저장된 사용자 입력이 있는 경우, 상기 사용자 입력, 예컨대, 제2 사용자 입력(412)이 유효한지 여부를 식별할 수 있다. 제2 사용자 입력(412)의 유효 여부를 식별하기 위하여, 전자 장치(101)는, 제1 캡쳐 동작(461)가 완료되는 시점(482)과 제2 사용자 입력(412)이 수신되는 시점(492) 간의 시간 차이(472)를 획득할 수 있다. 전자 장치(101)는 상기 시간 차이(472)가 임계값(예: 약 100ms(milliseconds)) 이내라면, 전자 장치(101)는, 제1 캡쳐 동작(461)가 완료되자마자, 제2 사용자 입력(412)에 대응하는 제2 캡쳐 동작(462)를 개시할 수 있다. 또한, 전자 장치(101)는 셔터 큐에 저장된 제2 사용자 입력(412)을 제거할 수 있다. 일 실시예에서, 도 4b에는 개시되지 않았으나, 전자 장치(101)는 상기 시간 차이(472)가 상기 임계값 이상이라면, 제2 사용자 입력(412)을 무시할 수 있다. 예를 들면, 전자 장치(101)는 제2 캡쳐 동작(462)를 수행하지 않고, 셔터 큐에 저장된 제2 사용자 입력(412)을 제거할 수 있다.
일 실시예에서, 제2 캡쳐 동작(462)이 진행중인 동안, 제3사용자 입력(413)이 수신될 수 있다. 일 실시예에 따라, 전자 장치(101)는 제3 사용자 입력(413)을 셔터 큐에 저장할 수 있다.
일 실시예에서, 전자 장치(101)는, 제2 캡쳐 동작(462)가 완료되는 시점(483)과 제3 사용자 입력(413)이 수신되는 시점(493) 간의 시간 차이(473)를 획득할 수 있다. 예를 들어, 전자 장치(101)는 상기 시간 차이(473)가 임계값 이내라면, 전자 장치(101)는, 제2 캡쳐 동작(462)가 완료되자마자, 제3 사용자 입력(413)에 대응하는 제3 캡쳐 동작(463)를 개시할 수 있다. 예를 들어, 전자 장치(101)는 셔터 큐에 저장된 제3 사용자 입력(413)을 제거할 수 있다. 이후, 전자 장치(101)는 제4 셔터 입력(414)을 수신하는 것에 기반하여, 제4 셔터 입력(414)에 대응하는 제4 캡쳐 동작(464)를 수행할 수 있다. 제3 캡쳐 동작(463)의 완료 이후에, 제4 셔터 입력(414)이 수신되므로, 제4 캡쳐 동작(464)는, 제4 셔터 입력(414)이 수신되자마자, 개시될 수 있다.
일 실시예에서, 전자 장치(101)는 캡쳐 동작이 완료될 때마다, 셔터 큐에 사용자 입력이 저장되었는지 여부를 확인할 수 있다. 셔터 큐를 통해 4회의 사용자 입력들에 대응하는 4회의 캡쳐 동작들이 수행되기 때문에, 전자 장치(101)는 4개의 이미지들을 획득할 수 있다. 캡쳐 동작들 사이에 별도의 갭이 존재하지 않기 때문에, 사용자는 샷-투-샷 속도의 향상을 느낄 수 있다. 예컨대, 셔터 입력에 응답하여, 캡쳐 동작이 수행되기 때문에, 연속적인 이미지들의 획득이 요구되는 상황(예: 스포츠 장면 캡쳐, 또는 움직이는 피사체 캡쳐)에서, 사용자는 체감 지연 없이, 원하는 이미지를 획득할 수 있다. 예를 들어, 고해상도 캡쳐(예: 2억 화소)과 같은 높은 수준의 이미지 프로세싱이 요구되는 캡쳐 또는 RAW 캡쳐는, 이미지 크기가 크기 때문에, 캡쳐 동작의 구간(interval)이 길어질 수 있다. 이 때, 본 개시의 연속적인(subsequent) 셔터 입력을 통해 바로 추가 캡쳐가 수행될 수 있다.
일 실시예에 따른, 전자 장치(101)는 캡쳐 동작이 완료될 때마다, 셔터 큐에 저장된 사용자 입력이 유효한지 여부를 식별할 수 있다. 사용자 입력, 예를 들어, 셔터의 입력 시점으로부터 캡쳐 완료 시점까지 임계값(예: 100ms) 이상 남았다면, 무분별하게 저장되는 셔터 입력에 의해, 캡쳐 동작이 과도하게 늘어질 수 있다. 전자 장치(101)는, 완료 시점으로부터 이전 시간인, 임계 범위를 설정함으로써, 체감 성능을 높이고, 캡쳐 동작의 효율성을 높일 수 있다.
도 5는 일 실시예에 따른, PPP(post processing picture) 방식에 따른 캡쳐 동작들의 예를 도시한다. PPP 방식은, 하드웨어 인터페이스(예: HAL(hardware abstraction layer))에서 프레임들에 대한 수집이 완료되면, 백그라운드에서 이미지를 처리하는 동안, 다음 캡쳐 동작이 가능한 방식이다. 상기 PPP 방식을 통해 이미지 센서(예: 이미지 센서(230))로 이미지가 획득된 후, 이미지 프로세서(예: 이미지 프로세서(260))는 후속 이미지 프로세싱(예: 멀티프레임 이미지 합성, 노이즈 감소(noise reduction), 또는 보케 이미지 생성 등)을 수행할 수 있다.
도 5를 참고하면, 사용자는 전자 장치(101)에 4회 이상의 사용자 입력들을 제공할 수 있다. 각 사용자 입력은, 캡쳐(capture)를 위한 입력일 수 있다. 상기 사용자 입력들은 제1 셔터 입력(411), 제2 셔터 입력(412), 제3 셔터 입력(413), 및 제4 셔터 입력(414)을 포함할 수 있다. 전자 장치(101)는 제1 셔터 입력(411), 제2 셔터 입력(412), 제3 셔터 입력(413), 및 제4 셔터 입력(414)을 순차적으로 수신할 수 있다. 동일한 참조 번호는, 동일한 설명을 위해 이용될 수 있다.
셔터 큐 없이, 연속 PPP 캡쳐 동작(530)이 수행될 시, 하드웨어 인터페이스로부터 이미지를 전달받기까지 시간이 소요되므로, 캡쳐 완료가 지연될 수 있다. 캡쳐 완료가 지연되기 때문에, 셔터 입력이 무시되는 상황이 발생할 수 있다. 예컨대, 사용자가 연속으로 셔터를 입력한 만큼 캡쳐가 수행되지 못할 수 있다. 예를 들어, 4회의 사용자 입력들에도 불구하고, 전자 장치(101)는 제1 사용자 입력(411)에 대응하는 제1 PPP 캡쳐 동작(531) 및 제3 사용자 입력(413)에 대응하는 제3 PPP 캡쳐 동작(533)을 수행할 수 있다. 전자 장치(101)는 2개의 이미지들을 획득할 수 있다. 제2 사용자 입력(412)에 대응하는 캡쳐 동작과, 제4 사용자 입력(414)에 대응하는 캡쳐 동작이 발생하지 않는다.
본 개시의 실시예들에 따른 셔터 큐를 이용한 연속 캡쳐 동작은 상기 PPP 방식에도 적용될 수 있다. 전자 장치(101)는 셔터 큐를 이용한 연속 PPP 캡쳐 동작(550)을 수행할 수 있다. 셔터 큐를 통해 사용자에 의해 입력된 셔터 이벤트는, 이전 캡쳐 동작이 완료된 후, 처리될 수 있다. 제2 사용자 입력(412) 또는 제4 사용자 입력(413)이 셔터 큐에 저장되기 때문에, 전자 장치(101)는 누락 없이, 각 사용자 입력에 대응하는 PPP 캡쳐 동작을 수행할 수 있다. 셔터 큐를 통해, 연속된 캡쳐가 가능하므로, 전자 장치(101)는 제1 사용자 입력(411)에 대응하는 제1 PPP 캡쳐 동작(551), 제2 사용자 입력(412)에 대응하는 제2 PPP 캡쳐 동작(552), 제3 사용자 입력(413)에 대응하는 제3 PPP 캡쳐 동작(553), 및 제4 사용자 입력(414)에 대응하는 제4 PPP 캡쳐 동작(554) 모두를 수행할 수 있다.
제1 PPP 캡쳐 동작(551)이 완료된 후, 전자 장치(101)는 제1 PPP 캡쳐 동작(551)을 통해 획득된 이미지에 대한 후속 이미지 프로세싱을 백그라운드에서 수행할 수 있다. 일 실시예에서, 제1 PPP 캡쳐 동작(551) 중 제2 셔터 입력(412)이 수신되었다면, 전자 장치(101)는 제2 셔터 입력(412)를 셔터 큐에 저장할 수 있고, 제2 PPP 캡쳐 동작(552)은, 새로운 셔터 입력을 기다리지 않고 셔터 큐에 저장된 제2 셔터 입력(412)에 의해 개시될 수 있다. 전자 장치(101)가 제2 PPP 캡쳐 동작(552)을 수행하는 동안 상기 제1 PPP 캡쳐 동작(551)을 통해 획득된 이미지에 대한 후속 이미지 프로세싱이 수행되기 때문에, 제1 PPP 캡쳐 동작(551) 후 처리된 이미지를 얻기까지의 시간이 감소할 수 있다.
PPP 캡쳐 동작이 완료된 후, 다음 PPP 캡쳐 동작이 수행되기 까지의 시간 갭이 감소하면, 백그라운드에서의 후속 이미지 프로세싱들 간의 시간 갭이 감소할 수 있다. 예를 들어, 셔터 큐 없이 연속 PPP 캡쳐 동작(530)에서, 전자 장치(101)는 제1 PPP 캡쳐 동작(531)에 대한 후속 이미지 프로세싱 후, 제3 PPP 캡쳐 동작(533)에 대한 후속 이미지 프로세싱을 수행할 수 있다. 다음 후속 이미지 프로세싱은 제3 셔터 입력(413)에 따른 제3 PPP 캡쳐 동작(533) 후에 수행될 수 있다. 따라서, 제1 PPP 캡쳐 동작(531)에 대한 후속 이미지 프로세싱 이후, 후속 이미지 프로세싱이 수행되지 않는 시간이 발생할 수 있다. 그러나, 셔터 큐를 이용한 연속된 PPP 캡쳐 동작(550)에서, 전자 장치(101)는 제1 PPP 캡쳐 동작(551)에 대한 후속 프로세싱 이후 제2 PPP 캡쳐 동작(552)에 대한 후속 프로세싱을 수행할 수 있다. 제1 PPP 캡쳐 동작(551) 완료되는 것에 응답하여(in response to) 제2 PPP 캡쳐 동작(552)이 수행될 수 있다. 따라서, 후속 이미지 프로세싱이 수행되지 않는 시간이 셔터 큐 없이 연속 PPP 캡쳐 동작(530) 대비 상대적으로 감소할 수 있다.
PPP 방식에서 백그라운드에서 후속 이미지 프로세싱을 처리하는 동안, 다음 캡쳐 동작이 가능하므로, PPP 방식을 이용하는 연속된 캡쳐 동작들의 소요 시간은 감소할 수 있다. 또한, PPP 방식과 함께 셔터 큐를 이용함으로써, 이미지 캡쳐 동작 사이의 갭이 감소되어 보다 빠른 연속 갭쳐가 가능할 수 있다.
도 6은 일 실시예에 따른, 연속적인 사용자 입력들에 대응하는 캡쳐 동작들을 위한 전자 장치(예: 전자 장치(101))의 동작 흐름을 도시한다.
도 6을 참고하면, 동작(601)에서, 전자 장치(101)는 캡쳐를 위한 제1 사용자 입력을 수신할 수 있다. 예를 들어, 상기 제1 이미지 캡쳐를 위한 제1 사용자 입력은 카메라 UI 상에서의 셔터 버튼의 터치 입력을 포함할 수 있다. 다른 예를 들어, 상기 제1 이미지 캡쳐를 위한 제1 사용자 입력은 주변 기기(예: 스타일러스 펜)로부터 수신된 제어 신호를 포함할 수 있다. 상기 제어 신호는, 전자 장치(101)에서의 캡쳐를 가리킬 수 있다. 예를 들어, 상기 제어 신호의 전송은, 상기 주변 기기의 버튼 입력에 응답하여 트리거될 수 있다.
동작(603)에서, 전자 장치(101)는 제1 사용자 입력에 대응하는 제1 캡쳐 동작이 수행되는 동안, 캡쳐를 위한 제2 사용자 입력을 수신하는 것에 기반하여 제2 사용자 입력에 대한 정보를 저장할 수 있다. 전자 장치(101)는 제1 사용자 입력에 대응하는 제1 캡쳐 동작이 수행되는 동안, 이미지 캡쳐를 위한 제2 사용자 입력을 수신할 수 있다. 예를 들어, 전자 장치(101)는 제1 캡쳐 동작에 대응하는 이미지를 획득하기 전에, 상기 캡쳐를 위한 제2 사용자 입력을 수신할 수 있다. 전자 장치(101)는 상기 제2 사용자 입력이 상기 제1 캡쳐 동작의 완료 전에 수신된다면, 상기 제2 사용자 입력에 대한 정보를 저장할 수 있다. 일 실시예에 따라, 전자 장치(101)는 캡쳐를 위한 사용자 입력, 예컨대, 셔터 입력을 저장하는 별도의 저장 공간을 구비할 수 있다. 예를 들어, 전자 장치(101)는 메모리(예: 메모리(130), 또는 메모리(250)) 내에 셔터 큐를 설정할 수 있다. 전자 장치(101)는 상기 제2 사용자 입력에 대한 정보를 상기 셔터 큐에 저장할 수 있다. 전자 장치(101)는 어플리케이션 계층(예: UI(310))에서 획득되는 제2 사용자 입력을 메모리에 저장할 수 있다. 예를 들어, 전자 장치(101)는 시스템 계층(예: 카메라 시스템(320))에서의 프레임을 저장하는 큐를 이용하는 것이 아니라, 애플리케이션 계층에서의 제2 사용자 입력에 대한 정보를 저장하는 저장 공간을 이용할 수 있다.
동작(605)에서, 전자 장치(101)는 제1 캡쳐 동작의 완료를 식별할 수 있다. 전자 장치(101)는 제1 사용자 입력에 응답하여 처리된 이미지를 획득함으로써, 상기 제1 캡쳐 동작의 완료를 식별할 수 있다. 예를 들어, 전자 장치(101)는 카메라 시스템(예: 카메라 시스템(320))으로부터 캡쳐 완료 이벤트를 획득함으로써, 상기 제1 캡쳐 동작의 완료를 식별할 수 있다. 상기 제1 캡쳐 동작의 완료 시, 전자 장치(101)는 어플리케이션 계층에서, 상기 처리된 이미지를 획득할 수 있다.
동작(607)에서, 전자 장치(101)는 제2 사용자 입력과 상기 제1 캡쳐 동작의 완료의 시간 차이가 임계값 이하임을 식별할 수 있다. 전자 장치(101)는 제2 사용자 입력의 수신 시점을 식별할 수 있다. 전자 장치(101)는 상기 제1 캡쳐 동작의 완료 시점을 식별할 수 있다. 전자 장치(101)는 상기 제1 캡쳐 동작의 완료 시점으로부터 일정 구간 이전에, 상기 제2 사용자 입력이 수신되었는지 여부를 식별할 수 있다. 예컨대, 전자 장치(101)는 상기 제1 캡쳐 동작의 완료 시점과 상기 제2 사용자 입력이 수신 시점 간의 차이를 계산할 수 있다. 전자 장치(101)는 상기 제1 캡쳐 동작의 완료 시점과 상기 제2 사용자 입력이 수신 시점 간의 차이가 임계값 이하인지 여부를 식별할 수 있다. 상기 임계값은, 저장된 사용자 입력이 유효한지 여부를 식별할 수 있다.
만약, 제2 사용자 입력이 저장된 뒤, 일정 시간이 흐른 뒤, 제1 캡쳐 동작이 완료된다면, 연속 캡쳐 동작이 전체적으로 지연될 뿐만 아니라, 사용자는 샷-투-샷 성능의 저하를 느낄 수 있다. 제2 사용자 입력을 통해 원하는 시점과 실제 캡쳐가 시작되는 시점(예: 제1 캡쳐 동작의 완료 시점 직후) 간 차이로 인해, 사용자는 단절을 느낄 수 있다.
일 실시예에 따라, 전자 장치(101)는 캡쳐 동작의 완료 시점을 기준으로 하는 임계값(혹은 임계 범위)을 설정할 수 있다. 예를 들어, 상기 임계값은 다양한 방식들에 의해 결정될 수 있다. 일 실시예에 따라, 상기 임계값은 고정된 값(예: 약 100ms)으로 결정될 수 있다. 일 예로, 상기 고정된 값은, 사용자 설정(setting)에 의해 결정될 수 있다. 일 실시예에 따라, 상기 임계값은 캡쳐에 이용되는 카메라의 종류, 및/또는 이미지 처리 성능에 기반하여 결정될 수 있다. 예를 들어, 카메라를 통해 획득되는 이미지가 고화질일수록, 처리 시간이 길어질 수 있다. 일 실시예에서, 한 회의 캡쳐에 대응하는 이미지 처리 시간이 길수록, 상기 임계값이 길게 설정될 수 있다. 일 실시예에 따라, 상기 임계값은, 프리뷰 상태에 기반하여 결정될 수 있다. 프리뷰 상태란, 캡쳐 전 프리뷰 단계에서 식별되는 객체 정보 및 배경 정보를 의미할 수 있다. 전자 장치(101)는, 캡쳐 전에 획득되는 프레임들을 통해, 캡쳐하고자 하는 이미지 내의 객체 정보나 배경 정보를 획득할 수 있다. 전자 장치(101)는 상기 프리뷰 상태에 기반하여, 이미지 처리 시간에 대응하는 임계값을 계산할 수 있다. 상기 임계값은, 상기 프리뷰 상태에서 인지되는 객체 및 배경에 의존적일 수 있다.
동작(609)에서, 전자 장치(101)는 전자 장치(101)는 제1 캡쳐 동작의 완료 시점과 제2 사용자 입력이 수신 시점 간의 차이가 임계값 이하인 경우, 제2 사용자 입력에 대응하는 제2 캡쳐 동작을 수행할 수 있다.
도 6에서는 2회의 캡쳐 동작들이 서술되었으나, 본 개시의 실시예들은 이에 한정되지 않는다. 도 4b에 서술된 바와 같이, 2회보다 많은 횟수(예: 4회)의 캡쳐 동작들에서도, 본 개시의 실시예들에 따른, 셔터 입력에 대한 저장 공간을 활용하는, 연속 캡쳐 동작이 이용될 수 있다.
도 7은 일 실시예에 따른, 캡쳐를 위한 사용자 입력을 저장하기 위한 전자 장치(예: 전자 장치(101))의 동작 흐름을 도시한다.
도 7을 참고하면, 동작(701)에서, 전자 장치(101)는 캡쳐를 위한 사용자 입력을 수신할 수 있다. 예를 들어, 상기 캡쳐를 위한 사용자 입력은 카메라 UI 상에서의 셔터 버튼의 터치 입력을 포함할 수 있다. 다른 예를 들어, 상기 캡쳐를 위한 사용자 입력은 주변 기기(예: 스타일러스 펜)로부터 수신된 제어 신호를 포함할 수 있다. 상기 제어 신호는, 전자 장치(101)에서의 캡쳐를 가리킬 수 있다. 상기 제어 신호의 전송은, 상기 주변 기기의 버튼 입력에 응답하여 트리거될 수 있다.
동작(703)에서, 전자 장치(101)는 다른 캡쳐 동작이 진행 중인지 여부를 식별할 수 있다. 전자 장치(101)는 이전 사용자 입력에 대응하는 다른 캡쳐 동작이 진행 중인지 여부를 식별할 수 있다. 동작(701)에서 수신된 사용자 입력이 상기 다른 캡쳐 동작이 진행 중인 동안 수신된다면, 전자 장치(101)는 상기 사용자 입력을 놓치지(miss) 않을 것이 요구될 수 있다. 일 실시예에 따라, 전자 장치(101)는 상기 사용자 입력이 수신되었을 때, 상기 다른 캡쳐 동작이 진행 중이라면, 동작(705)을 수행할 수 있다. 전자 장치(101)는 상기 다른 캡쳐 동작이 진행 중이지 않다면, 별도의 저장을 수행하지 않을 수 있다.
동작(705)에서, 전자 장치(101)는 사용자 입력을 저장 공간에 저장할 수 있다. 일 실시예에 따라, 전자 장치(101)는 동작(701)에서 수신된 사용자 입력을 놓치지 않기 위하여, 상기 사용자 입력을 저장 공간에 저장할 수 있다. 일 실시예에 따라, 상기 저장 공간은 메모리(예: 메모리(130), 또는 메모리(250)) 내 셔터 입력을 위해 구성된 저장 영역을 의미할 수 있다. 일 예로, 상기 저장 공간은 큐, 리스트, 또는 어레이와 같은 컨테이너 형태의 저장 영역을 의미할 수 있다. 전자 장치(101)는 동작(703)의 다른 캡쳐 동작이 완료될 때까지, 상기 사용자 입력을 보관하기 위해, 상기 사용자 입력을 저장 공간에 저장할 수 있다.
도 7에는 도시되지 않았으나, 전자 장치(101)는 동작(703)에서, 상기 다른 캡쳐 동작이 진행 중이지 않는다면, 별도의 저장 동작 없이, 수신된 사용자 입력에 대응하는 캡쳐 동작을 바로 개시할 수 있다.
도 8은 일 실시예에 따른, 일 캡쳐 동작의 완료 후, 전자 장치(예: 전자 장치(101))의 동작 흐름을 도시한다.
도 8을 참고하면, 동작(801)에서, 전자 장치(101)는 캡쳐 동작의 완료를 식별할 수 있다. 캡쳐 동작을 위한 일련의 동작들을 위해, 도 3의 동작(342) 내지 동작(352)이 참조될 수 있다. 예를 들어, 전자 장치(101)는 카메라 시스템으로부터, 캡쳐 완료 이벤트에 대응하는, 처리된 이미지를 획득함으로써, 상기 캡쳐 동작의 완료를 식별할 수 있다.
동작(803)에서, 전자 장치(101)는 저장 공간이 비었는지 여부를 식별할 수 있다. 상기 저장 공간은, 캡쳐 동작이 완료될 때까지, 캡쳐를 위한 사용자 입력(예: 셔터 입력)을 저장하기 위한 셔터 큐를 위한 영역을 의미할 수 있다. 전자 장치(101)는 캡쳐 동작이 완료되면, 다른 사용자 입력에 의한 캡쳐 동작이 대기 중인지 여부를 식별하기 위해 상기 저장 공간을 모니터링할 수 있다. 전자 장치(101)는 저장 공간이 비었음을 식별한 경우, 캡쳐 동작을 종료할 수 있다. 도 8에는 도시되지 않았으나, 전자 장치(101)는 캡쳐 동작의 완료 후, 캡쳐를 위한 사용자 입력이 수신되면, 상기 사용자 입력에 대응하는 캡쳐 동작을 수행할 수 있다. 전자 장치(101)는 저장 공간이 비지 않았음을 식별한 경우, 동작(805)을 수행할 수 있다.
동작(805)에서, 전자 장치(101)는 사용자 입력이 캡쳐 동작의 완료로부터 임계 범위 이내에 수신되었는지 여부를 식별할 수 있다. 전자 장치(101)는 사용자 입력을 식별할 수 있다. 상기 사용자 입력은, 상기 동작(801)의 캡쳐 동작의 사용자 입력에 후속하는(subsequent to) 사용자 입력일 수 있다. 일 실시예에 따라, 전자 장치(101)는 캡쳐 입력(혹은 셔터 입력)을 위한 저장 공간에 저장된 사용자 입력을 식별할 수 있다. 일 실시예에 따라, 전자 장치(101)는 사용자 입력이 수신된 시점을 식별할 수 있다. 일 실시예에 따라, 전자 장치(101)는 캡쳐 동작이 완료 시점을 식별할 수 있다. 일 실시예에 따라, 전자 장치(101)는 캡쳐 동작의 완료 시점으로부터 앞서는, 임계 범위 이내에, 상기 사용자 입력이 수신되었는지 여부를 식별할 수 있다.
일 실시예에 따라, 전자 장치(101)는 상기 저장된 사용자 입력이 유효한지 여부를 식별할 수 있다. 전자 장치(101)는 상기 사용자 입력의 수신 시점이 상기 임계 범위 이내라면, 예를 들어, 상기 사용자 입력의 수신 시점과 상기 캡쳐 동작의 완료 시점 간의 차이가, 임계값(예, 상기 임계 범위의 길이)보다 작다면, 전자 장치(101)는 사용자 입력이 유효함(valid)을 식별할 수 있다. 그러나, 전자 장치(101)는 상기 사용자 입력의 수신 시점이 상기 임계 범위 이내가 아니라면, 전자 장치(101)는 사용자 입력이 유효하지 않음(invalid)을 식별할 수 있다. 전자 장치(101)는 사용자 입력이 캡쳐 동작의 완료로부터 임계 범위 이내에 수신된 경우, 동작(807)을 수행할 수 있다. 예를 들어, 사용자 입력이 유효하다면, 전자 장치(101)는 동작(807)을 수행할 수 있다. 그러나, 전자 장치(101)는 사용자 입력이 캡쳐 동작의 완료로부터 임계 범위 이내에 수신되지 않은 경우, 추가 캡쳐 동작 없이, 동작을 종료할 수 있다. 예를 들어, 사용자 입력이 유효하지 않다면, 전자 장치(101)는 동작을 종료할 수 있다. 도 8에는 도시되지 않았으나, 전자 장치(101)는 유효하지 않은 사용자 입력을 무시하고, 저장 공간에서 제거할 수 있다.
동작(807)에서, 전자 장치(101)는 사용자 입력에 대응하는 캡쳐 동작을 수행할 수 있다. 전자 장치(101)는 이전 사용자 입력에 대응하는 동작(801)의 캡쳐 동작이 완료되면(upon), 전자 장치(101)는 후속하는 사용자 입력에 대응하는 캡쳐 동작을 수행할 수 있다. 상기 사용자 입력에 대응하는 캡쳐 동작의 일련의 동작들을 위해, 도 3의 동작(342) 내지 동작(352)이 참조될 수 있다.
일 실시예에 따르면, 전자 장치(101)는 셔터 큐와 같은 저장 공간(280)에 캡쳐를 위한 사용자 입력을 저장하고, 이전 캡쳐 동작이 완료된 후, 상기 저장된 사용자 입력에 대응하는 캡쳐 동작을 개시함으로써, 순간 타이밍에 대한 캡쳐를 놓치지 않을 수 있다. 예를 들어, 사용자가 체감적으로 지연을 느끼지 않도록, 전자 장치(101)는 이전 캡쳐 동작의 완료시점으로부터, 임계 범위 이내에서 앞서는 사용자 입력만을 선택할 수 있다. 전자 장치(101)는 상기 선택된 사용자 입력에 대응하는 캡쳐 동작을 개시할 수 있다. 이를 통해, 파노라마 캡쳐나 나이트 캡쳐 시에 연속적인 캡쳐가 가능하며, 전자 장치(101)는 고화질/AF의 연속적인 캡쳐들을 통해 버스트 샷보다 높은 품질의 이미지를 획득할 수 있다. 또한, 전자 장치(101)의 셔터 큐를 이용한 캡쳐 동작은, 제로 셔터 랙(zero shutter lag)과 함께, 높은 샷-투-샷 성능을 제공할 수 있다.
고화소(예: 약 2억 화소)에서는 이미지의 저장에 많은 메모리의 용량을 요구한다. 연속적이 이미지들을 저장하고 것은, 메모리에 부담을 야기할 수 있다. 예를 들어, 유효한 사용자 입력이 저장 공간에 저장된 경우, 캡쳐 동작의 완료에 응답하여, 전자 장치(101)는 상기 유효한 사용자 입력에 대응하는 다음 캡쳐 동작을 수행할 수 있다. 그러나, 가용 메모리에 대한 식별 동작 없이, 다음 캡쳐 동작이 수행된다면, 메모리가 부족해질 수 있다. 가용 메모리는, 상기 셔터 큐를 이용한 연속 캡쳐 동작을 위해 사용 가능한 메모리를 의미한다. 메모리로 인한 문제를 줄이기 위해, 전자 장치(101)는 단순히 유효한 사용자 입력이 저장 공간(예: 셔터 큐)에 저장되었는지 여부에 대한 조건(예: 도 8의 동작(803), 동작(805)) 뿐만 아니라, 가용 메모리에 대한 조건을 추가적으로 판단할 수 있다.
일 실시예에 따라, 전자 장치(101)는, 셔터 큐를 이용한 연속 캡쳐 동작을 위하여, 가용 메모리를 확인하는 동작을 더 포함할 수 있다. 예를 들어, 상기 가용 메모리의 크기가 임계값 이상인 경우, 전자 장치(101)는 상기 셔터 큐를 이용한 연속 캡쳐 동작을 위한 메모리(즉, 가용 메모리)가 확보됨을 식별할 수 있다. 또한, 예를 들어, 전자 장치(101)가 충분한 크기의 가용 메모리를 제공할 수 있는 RAM(예: 12GB의 RAM)을 구비하는 경우, 전자 장치(101)는 상기 셔터 큐를 이용한 연속 캡쳐 동작을 위한 메모리가 확보됨을 식별할 수 있다. 상기 가용 메모리가 확보되고, 상기 셔터 큐에 유효한 사용자 입력이 저장되어 있다면, 전자 장치(101)는 상기 사용자 입력에 대한 캡쳐 동작, 즉, 다음 캡쳐 동작을 수행할 수 있다.
일 실시예에 따라, 전자 장치(101)는 가용 메모리가 식별된 후, 상기 저장 공간(예: 셔터 큐)이 비었는지 여부(예: 동작(803))를 식별할 수 있다. 그러나, 상기 가용 메모리를 식별하는 동작과, 상기 저장 공간(예: 셔터 큐)이 비었는지 여부를 식별하는 동작의 순서는 이에 제한되지 않는다. 상기 가용 메모리를 식별하는 동작은, 상기 저장 공간(예: 셔터 큐)이 비었는지 여부를 식별하는 동작과 중첩적으로 혹은 나중에 수행될 수도 있다. 일 실시예에 따라, 전자 장치(101)는, 상기 저장 공간(예: 셔터 큐)이 비었는지 여부(예: 동작(803))를 식별한 후, 전자 장치(101)에 가용 메모리가 있는지 여부를 식별할 수 있다. 또한, 일 실시예에 따라, 전자 장치(101)는 상기 저장 공간(예: 셔터 큐)에 유효한 사용자 입력이 저장되어 있는지 여부(예: 동작(805))를 식별한 후, 전자 장치(101)에 가용 메모리가 있는지 여부를 식별할 수 있다.
실시예들에 있어서, 전자 장치(101)는, 카메라(180), 적어도 하나의 프로세서(120), 및 저장 공간(280)을 갖는 메모리(130, 250)를 포함할 수 있다. 상기 적어도 하나의 프로세서(120)는, 캡쳐를 위한 제1 사용자 입력을 수신하도록 구성될 수 있다. 상기 적어도 하나의 프로세서(120)는, 상기 카메라(180)를 통해, 상기 제1 사용자 입력에 대응하는 제1 캡쳐 동작이 수행되는 동안, 캡쳐를 위한 제2 사용자 입력을 수신하는 것에 기반하여, 상기 제2 사용자 입력에 대한 정보를 상기 저장 공간(280)에 저장할 수 있다. 상기 적어도 하나의 프로세서(120)는, 상기 제1 캡쳐 동작의 완료를 식별하는 것에 기반하여, 상기 제2 사용자 입력과 상기 제1 캡쳐 동작의 완료의 시간 차이가 임계값 이하인지 여부를 식별하도록 구성될 수 있다. 상기 적어도 하나의 프로세서(120)는, 상기 시간 차이가 상기 임계값 이하인 경우, 상기 제2 사용자 입력에 대응하는 제2 캡쳐 동작을 수행하도록 구성될 수 있다.
일 실시예에 따라, 상기 제1 캡쳐 동작의 완료는, 시스템 계층으로부터 상기 제1 사용자 입력에 따라, 처리된 이미지를 획득하는 것에 기반하여, 식별될 수 있다.
일 실시예에 따라, 상기 제1 캡쳐 동작은 AE(auto exposure) 및 AF(auto focusing)를 트리거하는 이벤트, 캡쳐를 요청하는 이벤트, 셔터 콜백(shutter callback) 이벤트, AF 잠금 이벤트, 및 상기 처리된 이미지를 획득하는 이벤트를 포함할 수 있다.
일 실시예에 따라, 상기 적어도 하나의 프로세서(120)는, 상기 제1 캡쳐 동작의 완료를 식별하는 것에 기반하여, 상기 저장 공간(280)이 비었는지 여부를 식별하도록 구성될 수 있다. 상기 적어도 하나의 프로세서(120)는, 상기 저장 공간(280)이 비지 않은 경우, 상기 제2 사용자 입력에 대응하는 상기 제2 캡쳐 동작과 함께, 상기 저장 공간(280) 내의 상기 제2 사용자 입력에 대한 정보를 제거하도록 구성될 수 있다.
일 실시예에 따라, 상기 적어도 하나의 프로세서(120)는, 상기 제2 사용자 입력과 상기 제1 캡쳐 동작의 완료 사이의 시간 구간이 상기 임계값보다 큰 경우, 상기 제2 사용자 입력에 대응하는 상기 제2 캡쳐 동작 없이, 상기 저장 공간(280) 내의 상기 제2 사용자 입력에 대한 정보를 제거하도록 추가적으로 구성될 수 있다.
일 실시예에 따라, 상기 제1 캡쳐 동작은 PPP(post processing picture) 방식으로 처리된 이미지를 획득하기 위해, 이용될 수 있다. 상기 제2 캡쳐 동작은 PPP 방식으로 처리된 이미지를 획득하기 위해, 이용될 수 있다.
일 실시예에 따라, 상기 적어도 하나의 프로세서(120)는, 상기 제2 캡쳐 동작을 수행하기 위하여, 상기 시간 차이가 상기 임계값 이하임을 식별하도록 구성될 수 있다. 상기 적어도 하나의 프로세서(120)는, 상기 제2 캡쳐 동작을 수행하기 위하여, 상기 제2 사용자 입력에 대응하는 캡쳐 이벤트를 상기 카메라(180)를 위한 시스템 계층에게 제공하도록 구성될 수 있다.
일 실시예에 따라, 상기 제2 캡쳐 동작은 상기 제2 사용자 입력에 대응하는 셔터 음을 재생하는 동작을 포함할 수 있다. 상기 셔터 음은, 상기 제1 캡쳐 동작의 완료의 시점 이후에, 재생될 수 있다.
일 실시예에 따라, 상기 적어도 하나의 프로세서(120)는, 이미지 캡쳐를 위한 제3 사용자 입력을 수신하도록 구성될 수 있다. 상기 적어도 하나의 프로세서(120)는, 이상기 제3 사용자 입력이 상기 제2 캡쳐 동작이 수행되는 동안 수신되는 경우, 상기 제3 사용자 입력에 대한 정보를 상기 저장 공간(280)에 저장하도록 구성될 수 있다. 상기 적어도 하나의 프로세서(120)는, 이상기 제3 사용자 입력이 상기 제2 캡쳐 동작이 수행되지 않는 동안 수신되는 경우, 상기 제3 사용자 입력에 대응하는 제3 캡쳐 동작을 수행하도록 구성될 수 있다.
일 실시예에 따라, 상기 저장 공간(280)은 캡쳐를 위한 사용자 입력에 대한 정보를 저장하기 위한 큐(queue), 어레이, 또는 리스트를 포함할 수 있다.
실시예들에 있어서, 전자 장치(101)에 의해 수행되는 방법은, 캡쳐를 위한 제1 사용자 입력을 수신하는 동작을 포함할 수 있다. 상기 방법은 상기 제1 사용자 입력에 대응하는 제1 캡쳐 동작이 수행되는 동안, 캡쳐를 위한 제2 사용자 입력을 수신하는 것에 기반하여, 상기 제2 사용자 입력에 대한 정보를 저장 공간(280)에 저장하는 동작을 포함할 수 있다. 상기 동작은 상기 제1 캡쳐 동작의 완료를 식별하는 것에 기반하여, 상기 제2 사용자 입력과 상기 제1 캡쳐 동작의 완료의 시간 차이가 임계값 이하인지 여부를 식별하는 동작을 포함할 수 있다. 상기 동작은 상기 시간 차이가 상기 임계값 이하인 경우, 상기 제2 사용자 입력에 대응하는 제2 캡쳐 동작을 수행하는 동작을 포함할 수 있다.
일 실시예에 따라, 상기 제1 캡쳐 동작의 완료는, 시스템 계층으로부터 상기 제1 사용자 입력에 따라, 처리된 이미지를 획득하는 것에 기반하여, 식별될 수 있다.
일 실시예에 따라, 상기 제1 캡쳐 동작은 AE(auto exposure) 및 AF(auto focusing)를 트리거하는 이벤트, 캡쳐를 요청하는 이벤트, 셔터 콜백(shutter callback) 이벤트, AF 잠금 이벤트, 및 상기 처리된 이미지를 획득하는 이벤트를 포함할 수 있다.
일 실시예에 따라, 상기 방법은 상기 제1 캡쳐 동작의 완료를 식별하는 것에 기반하여, 상기 저장 공간(280)이 비었는지 여부를 식별하는 동작을 포함할 수 있다. 상기 방법은 상기 저장 공간(280)이 비지 않은 경우, 상기 제2 사용자 입력에 대응하는 상기 제2 캡쳐 동작과 함께, 상기 저장 공간(280) 내의 상기 제2 사용자 입력에 대한 정보를 제거하는 동작을 포함할 수 있다.
일 실시예에 따라, 상기 방법은 상기 제2 사용자 입력과 상기 제1 캡쳐 동작의 완료 사이의 시간 구간이 상기 임계값보다 큰 경우, 상기 제2 사용자 입력에 대응하는 상기 제2 캡쳐 동작 없이, 상기 저장 공간(280) 내의 상기 제2 사용자 입력에 대한 정보를 제거하는 동작을 포함할 수 있다.
일 실시예에 따라, 상기 제1 캡쳐 동작은 PPP(post processing picture) 방식으로 처리된 이미지를 획득하기 위해, 이용될 수 있다. 상기 제2 캡쳐 동작은 PPP 방식으로 처리된 이미지를 획득하기 위해, 이용될 수 있다.
일 실시예에 따라, 상기 제2 캡쳐 동작을 수행하는 동작은, 상기 시간 차이가 상기 임계값 이하임을 식별하는 동작을 포함할 수 있다. 상기 제2 캡쳐 동작을 수행하는 동작은, 상기 제2 사용자 입력에 대응하는 캡쳐 이벤트를 카메라(180)를 위한 시스템 계층에게 제공하는 동작을 포함할 수 있다.
일 실시예에 따라, 상기 제2 캡쳐 동작은 상기 제2 사용자 입력에 대응하는 셔터 음을 재생하는 동작을 포함할 수 있다. 상기 셔터 음은, 상기 제1 캡쳐 동작의 완료의 시점 이후에, 재생될 수 있다.
일 실시예에 따라, 상기 방법은 이미지 캡쳐를 위한 제3 사용자 입력을 수신하는 동작을 포함할 수 있다. 상기 방법은 상기 제3 사용자 입력이 상기 제2 캡쳐 동작이 수행되는 동안 수신되는 경우, 상기 제3 사용자 입력에 대한 정보를 상기 저장 공간(280)에 저장하는 동작을 포함할 수 있다. 상기 방법은 상기 제3 사용자 입력이 상기 제2 캡쳐 동작이 수행되지 않는 동안 수신되는 경우, 상기 제3 사용자 입력에 대응하는 제3 캡쳐 동작을 수행하는 동작을 포함할 수 있다.
일 실시예에 따라, 상기 저장 공간(280)은 캡쳐를 위한 사용자 입력에 대한 정보를 저장하기 위한 큐(queue), 어레이, 또는 리스트를 포함할 수 있다.
실시예들에 있어서 비-일시적 컴퓨터 판독 가능 매체는 인스트럭션들을 저장하도록 구성되는 메모리를 포함할 수 있다. 상기 인스트럭션들은, 프로세서에 의해 실행될 때, 전자 장치가 캡쳐를 위한 제1 사용자 입력을 수신하고, 상기 제1 사용자 입력에 대응하는 제1 캡쳐 동작이 수행되는 동안, 캡쳐를 위한 제2 사용자 입력을 수신하는 것에 기반하여, 상기 제2 사용자 입력에 대한 정보를 저장 공간(280)에 저장하고, 상기 제1 캡쳐 동작의 완료를 식별하는 것에 기반하여, 상기 제2 사용자 입력과 상기 제1 캡쳐 동작의 완료의 시간 차이가 임계값 이하인지 여부를 식별하고, 상기 시간 차이가 상기 임계값 이하인 경우, 상기 제2 사용자 입력에 대응하는 제2 캡쳐 동작을 수행하도록 야기할 수 있다.
본 문서에 개시된 다양한 실시예들에 따른 전자 장치는 다양한 형태의 장치가 될 수 있다. 전자 장치는, 예를 들면, 휴대용 통신 장치(예: 스마트폰), 컴퓨터 장치, 휴대용 멀티미디어 장치, 휴대용 의료 기기, 카메라, 전자 장치, 또는 가전 장치를 포함할 수 있다. 본 문서의 실시예에 따른 전자 장치는 전술한 기기들에 한정되지 않는다.
본 문서의 다양한 실시예들 및 이에 사용된 용어들은 본 문서에 기재된 기술적 특징들을 특정한 실시예들로 한정하려는 것이 아니며, 해당 실시예의 다양한 변경, 균등물, 또는 대체물을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 또는 관련된 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다. 아이템에 대응하는 명사의 단수 형은 관련된 문맥상 명백하게 다르게 지시하지 않는 한, 상기 아이템 한 개 또는 복수 개를 포함할 수 있다. 본 문서에서, "A 또는 B", "A 및 B 중 적어도 하나", "A 또는 B 중 적어도 하나", "A, B 또는 C", "A, B 및 C 중 적어도 하나", 및 "A, B, 또는 C 중 적어도 하나"와 같은 문구들 각각은 그 문구들 중 해당하는 문구에 함께 나열된 항목들 중 어느 하나, 또는 그들의 모든 가능한 조합을 포함할 수 있다. "제1", "제2", 또는 "첫째" 또는 "둘째"와 같은 용어들은 단순히 해당 구성요소를 다른 해당 구성요소와 구분하기 위해 사용될 수 있으며, 해당 구성요소들을 다른 측면(예: 중요성 또는 순서)에서 한정하지 않는다. 어떤(예: 제1) 구성요소가 다른(예: 제2) 구성요소에, "기능적으로" 또는 "통신적으로"라는 용어와 함께 또는 이런 용어 없이, "커플드" 또는 "커넥티드"라고 언급된 경우, 그것은 상기 어떤 구성요소가 상기 다른 구성요소에 직접적으로(예: 유선으로), 무선으로, 또는 제3 구성요소를 통하여 연결될 수 있다는 것을 의미한다.
본 문서의 다양한 실시예들에서 사용된 용어 "모듈"은 하드웨어, 소프트웨어 또는 펌웨어로 구현된 유닛을 포함할 수 있으며, 예를 들면, 로직, 논리 블록, 부품, 또는 회로와 같은 용어와 상호 호환적으로 사용될 수 있다. 모듈은, 일체로 구성된 부품 또는 하나 또는 그 이상의 기능을 수행하는, 상기 부품의 최소 단위 또는 그 일부가 될 수 있다. 예를 들면, 일실시예에 따르면, 모듈은 ASIC(application-specific integrated circuit)의 형태로 구현될 수 있다.
본 문서의 다양한 실시예들은 기기(machine)(예: 전자 장치(101)) 의해 읽을 수 있는 저장 매체(storage medium)(예: 내장 메모리(136) 또는 외장 메모리(138))에 저장된 하나 이상의 명령어들을 포함하는 소프트웨어(예: 프로그램(140))로서 구현될 수 있다. 예를 들면, 기기(예: 전자 장치(101))의 프로세서(예: 프로세서(120))는, 저장 매체로부터 저장된 하나 이상의 명령어들 중 적어도 하나의 명령을 호출하고, 그것을 실행할 수 있다. 이것은 기기가 상기 호출된 적어도 하나의 명령어에 따라 적어도 하나의 기능을 수행하도록 운영되는 것을 가능하게 한다. 상기 하나 이상의 명령어들은 컴파일러에 의해 생성된 코드 또는 인터프리터에 의해 실행될 수 있는 코드를 포함할 수 있다. 기기로 읽을 수 있는 저장 매체는, 비일시적(non-transitory) 저장 매체의 형태로 제공될 수 있다. 여기서, '비일시적'은 저장 매체가 실재(tangible)하는 장치이고, 신호(signal)(예: 전자기파)를 포함하지 않는다는 것을 의미할 뿐이며, 이 용어는 데이터가 저장 매체에 반영구적으로 저장되는 경우와 임시적으로 저장되는 경우를 구분하지 않는다.
일 실시예에 따르면, 본 문서에 개시된 다양한 실시예들에 따른 방법은 컴퓨터 프로그램 제품(computer program product)에 포함되어 제공될 수 있다. 컴퓨터 프로그램 제품은 상품으로서 판매자 및 구매자 간에 거래될 수 있다. 컴퓨터 프로그램 제품은 기기로 읽을 수 있는 저장 매체(예: compact disc read only memory(CD-ROM))의 형태로 배포되거나, 또는 어플리케이션 스토어(예: 플레이 스토어™)를 통해 또는 두 개의 사용자 장치들(예: 스마트 폰들) 간에 직접, 온라인으로 배포(예: 다운로드 또는 업로드)될 수 있다. 온라인 배포의 경우에, 컴퓨터 프로그램 제품의 적어도 일부는 제조사의 서버, 어플리케이션 스토어의 서버, 또는 중계 서버의 메모리와 같은 기기로 읽을 수 있는 저장 매체에 적어도 일시 저장되거나, 임시적으로 생성될 수 있다.
다양한 실시예들에 따르면, 상기 기술한 구성요소들의 각각의 구성요소(예: 모듈 또는 프로그램)는 단수 또는 복수의 개체를 포함할 수 있으며, 복수의 개체 중 일부는 다른 구성요소에 분리 배치될 수도 있다. 다양한 실시예들에 따르면, 전술한 해당 구성요소들 중 하나 이상의 구성요소들 또는 동작들이 생략되거나, 또는 하나 이상의 다른 구성요소들 또는 동작들이 추가될 수 있다. 대체적으로 또는 추가적으로, 복수의 구성요소들(예: 모듈 또는 프로그램)은 하나의 구성요소로 통합될 수 있다. 이런 경우, 통합된 구성요소는 상기 복수의 구성요소들 각각의 구성요소의 하나 이상의 기능들을 상기 통합 이전에 상기 복수의 구성요소들 중 해당 구성요소에 의해 수행되는 것과 동일 또는 유사하게 수행할 수 있다. 다양한 실시예들에 따르면, 모듈, 프로그램 또는 다른 구성요소에 의해 수행되는 동작들은 순차적으로, 병렬적으로, 반복적으로, 또는 휴리스틱하게 실행되거나, 상기 동작들 중 하나 이상이 다른 순서로 실행되거나, 생략되거나, 또는 하나 이상의 다른 동작들이 추가될 수 있다.

Claims (15)

  1. 전자 장치(101)에 있어서,
    카메라(180);
    적어도 하나의 프로세서(120); 및
    저장 공간(280)을 갖는 메모리(130, 250)를 포함하고,
    상기 적어도 하나의 프로세서(120)는,
    이미지를 캡쳐하기 위한 제1 사용자 입력을 수신하고,
    상기 카메라(180)를 통해, 상기 제1 사용자 입력에 대응하는 제1 캡쳐 동작이 수행되는 동안, 이미지를 캡쳐하기 위한 제2 사용자 입력을 수신하는 것에 기반하여, 상기 제2 사용자 입력에 대한 정보를 상기 저장 공간(280)에 저장하고,
    상기 제1 캡쳐 동작의 완료를 식별하는 것에 기반하여, 상기 제2 사용자 입력과 상기 제1 캡쳐 동작의 완료의 시간 차이가 임계값 이하인지 여부를 식별하고,
    상기 시간 차이가 상기 임계값 이하인 경우, 상기 제2 사용자 입력에 대응하는 제2 캡쳐 동작을 수행하도록 구성되는,
    전자 장치(101).
  2. 청구항 1에 있어서,
    상기 제1 캡쳐 동작의 완료는, 시스템 계층으로부터 상기 제1 사용자 입력에 따라, 처리된 이미지를 획득하는 것에 기반하여, 식별되는,
    전자 장치(101).
  3. 청구항 1 내지 2에 있어서,
    상기 제1 캡쳐 동작은 AE(auto exposure) 및 AF(auto focusing)를 트리거하는 이벤트, 캡쳐를 요청하는 이벤트, 셔터 콜백(shutter callback) 이벤트, AF 잠금 이벤트, 및 상기 처리된 이미지를 획득하는 이벤트를 포함하는,
    전자 장치(101).
  4. 청구항 1 내지 3에 있어서, 상기 적어도 하나의 프로세서(120)는,
    상기 제1 캡쳐 동작의 완료를 식별하는 것에 기반하여, 상기 저장 공간(280)이 비었는지 여부를 식별하고,
    상기 저장 공간(280)이 비지 않은 경우, 상기 제2 사용자 입력에 대응하는 상기 제2 캡쳐 동작과 함께, 상기 저장 공간(280) 내의 상기 제2 사용자 입력에 대한 정보를 제거하도록 추가적으로 구성되는,
    전자 장치(101).
  5. 청구항 1 내지 4에 있어서, 상기 적어도 하나의 프로세서(120)는,
    상기 제2 사용자 입력과 상기 제1 캡쳐 동작의 완료 사이의 시간 구간이 상기 임계값보다 큰 경우, 상기 제2 사용자 입력에 대응하는 상기 제2 캡쳐 동작 없이, 상기 저장 공간(280) 내의 상기 제2 사용자 입력에 대한 정보를 제거하도록 추가적으로 구성되는,
    전자 장치(101).
  6. 청구항 1 내지 5에 있어서,
    상기 제1 캡쳐 동작은 PPP(post processing picture) 방식으로 처리된 이미지를 획득하기 위해, 이용되고,
    상기 제2 캡쳐 동작은 PPP 방식으로 처리된 이미지를 획득하기 위해, 이용되는,
    전자 장치(101).
  7. 청구항 1 내지 6에 있어서,
    상기 적어도 하나의 프로세서(120)는, 상기 제2 캡쳐 동작을 수행하기 위하여,
    상기 시간 차이가 상기 임계값 이하임을 식별하고,
    상기 제2 사용자 입력에 대응하는 캡쳐 이벤트를 상기 카메라(180)를 위한 시스템 계층에게 제공하도록 구성되는,
    전자 장치(101).
  8. 청구항 1 내지 7에 있어서,
    상기 제2 캡쳐 동작은 상기 제2 사용자 입력에 대응하는 셔터 음을 재생하는 동작을 포함하고,
    상기 셔터 음은, 상기 제1 캡쳐 동작의 완료의 시점 이후에, 재생되는,
    전자 장치(101).
  9. 청구항 1 내지 8에 있어서, 상기 적어도 하나의 프로세서(120)는,
    이미지 캡쳐를 위한 제3 사용자 입력을 수신하고,
    상기 제3 사용자 입력이 상기 제2 캡쳐 동작이 수행되는 동안 수신되는 경우, 상기 제3 사용자 입력에 대한 정보를 상기 저장 공간(280)에 저장하고,
    상기 제3 사용자 입력이 상기 제2 캡쳐 동작이 수행되지 않는 동안 수신되는 경우, 상기 제3 사용자 입력에 대응하는 제3 캡쳐 동작을 수행하도록 추가적으로 구성되는,
    전자 장치(101).
  10. 청구항 1 내지 9에 있어서,
    상기 저장 공간(280)은 캡쳐를 위한 사용자 입력에 대한 정보를 저장하기 위한 큐(queue), 어레이, 또는 리스트를 포함하는,
    전자 장치(101).
  11. 전자 장치(101)에 의해 수행되는 방법에 있어서,
    캡쳐를 위한 제1 사용자 입력을 수신하는 동작과,
    상기 제1 사용자 입력에 대응하는 제1 캡쳐 동작이 수행되는 동안, 캡쳐를 위한 제2 사용자 입력을 수신하는 것에 기반하여, 상기 제2 사용자 입력에 대한 정보를 저장 공간(280)에 저장하는 동작과,
    상기 제1 캡쳐 동작의 완료를 식별하는 것에 기반하여, 상기 제2 사용자 입력과 상기 제1 캡쳐 동작의 완료의 시간 차이가 임계값 이하인지 여부를 식별하는 동작과,
    상기 시간 차이가 상기 임계값 이하인 경우, 상기 제2 사용자 입력에 대응하는 제2 캡쳐 동작을 수행하는 동작을 포함하는,
    방법.
  12. 청구항 11에 있어서,
    상기 제1 캡쳐 동작의 완료는, 시스템 계층으로부터 상기 제1 사용자 입력에 따라, 처리된 이미지를 획득하는 것에 기반하여, 식별되는,
    방법.
  13. 청구항 11 내지 12에 있어서,
    상기 제1 캡쳐 동작은 AE(auto exposure) 및 AF(auto focusing)를 트리거하는 이벤트, 캡쳐를 요청하는 이벤트, 셔터 콜백(shutter callback) 이벤트, AF 잠금 이벤트, 및 상기 처리된 이미지를 획득하는 이벤트를 포함하는,
    방법.
  14. 청구항 11 내지 13에 있어서,
    상기 제1 캡쳐 동작의 완료를 식별하는 것에 기반하여, 상기 저장 공간(280)이 비었는지 여부를 식별하는 동작과,
    상기 저장 공간(280)이 비지 않은 경우, 상기 제2 사용자 입력에 대응하는 상기 제2 캡쳐 동작과 함께, 상기 저장 공간(280) 내의 상기 제2 사용자 입력에 대한 정보를 제거하는 동작을 더 포함하는,
    방법.
  15. 청구항 11 내지 14에 있어서,
    상기 제2 사용자 입력과 상기 제1 캡쳐 동작의 완료 사이의 시간 구간이 상기 임계값보다 큰 경우, 상기 제2 사용자 입력에 대응하는 상기 제2 캡쳐 동작 없이, 상기 저장 공간(280) 내의 상기 제2 사용자 입력에 대한 정보를 제거하는 동작을 더 포함하는,
    방법.
PCT/KR2023/015275 2022-10-21 2023-10-04 이미지를 획득하기 위한 전자 장치 및 방법 WO2024085506A1 (ko)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
KR10-2022-0136886 2022-10-21
KR20220136886 2022-10-21
KR1020220159804A KR20240056370A (ko) 2022-10-21 2022-11-24 이미지를 획득하기 위한 전자 장치 및 방법
KR10-2022-0159804 2022-11-24

Publications (1)

Publication Number Publication Date
WO2024085506A1 true WO2024085506A1 (ko) 2024-04-25

Family

ID=90737913

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2023/015275 WO2024085506A1 (ko) 2022-10-21 2023-10-04 이미지를 획득하기 위한 전자 장치 및 방법

Country Status (1)

Country Link
WO (1) WO2024085506A1 (ko)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007208922A (ja) * 2006-02-06 2007-08-16 Fujifilm Corp 撮像装置
KR20110056090A (ko) * 2009-11-20 2011-05-26 삼성전자주식회사 디지털 촬영 장치 및 그 제어 방법
KR20130018330A (ko) * 2010-05-14 2013-02-20 가부시키가이샤 리코 촬상 장치, 화상 처리 방법 및 프로그램을 기록하기 위한 기록 매체
WO2013125319A1 (ja) * 2012-02-21 2013-08-29 株式会社ザクティ 撮像装置
JP2015088990A (ja) * 2013-10-31 2015-05-07 キヤノン株式会社 撮像装置、その制御方法、および制御プログラム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007208922A (ja) * 2006-02-06 2007-08-16 Fujifilm Corp 撮像装置
KR20110056090A (ko) * 2009-11-20 2011-05-26 삼성전자주식회사 디지털 촬영 장치 및 그 제어 방법
KR20130018330A (ko) * 2010-05-14 2013-02-20 가부시키가이샤 리코 촬상 장치, 화상 처리 방법 및 프로그램을 기록하기 위한 기록 매체
WO2013125319A1 (ja) * 2012-02-21 2013-08-29 株式会社ザクティ 撮像装置
JP2015088990A (ja) * 2013-10-31 2015-05-07 キヤノン株式会社 撮像装置、その制御方法、および制御プログラム

Similar Documents

Publication Publication Date Title
WO2020080845A1 (en) Electronic device and method for obtaining images
WO2022092706A1 (ko) 복수의 카메라를 이용한 사진 촬영 방법 및 그 장치
WO2022196993A1 (ko) 카메라 모듈의 화각을 이용하여 이미지를 촬영하는 전자 장치 및 방법
WO2022235043A1 (ko) 복수의 카메라를 포함하는 전자 장치 및 그 동작 방법
WO2022235075A1 (ko) 전자 장치 및 전자 장치의 동작 방법
WO2022244970A1 (ko) 전자 장치의 촬영 방법 및 그 전자 장치
WO2022149812A1 (ko) 카메라 모듈을 포함하는 전자 장치 및 그 전자 장치의 동작 방법
WO2021235747A1 (ko) 카메라 및 마이크를 포함하는 전자 장치 및 그 운용 방법
WO2024085506A1 (ko) 이미지를 획득하기 위한 전자 장치 및 방법
WO2024085487A1 (ko) 카메라의 설정을 변경하기 위한 전자 장치, 방법, 및 비일시적 컴퓨터 판독가능 저장 매체
WO2024106746A1 (ko) 디지털 보케 이미지의 해상도를 높이기 위한 전자 장치 및 방법
WO2023033396A1 (ko) 연속된 촬영 입력을 처리하는 전자 장치 및 그의 동작 방법
WO2022245148A1 (ko) 이미지 처리 방법 및 그 전자 장치
WO2022250344A1 (ko) 이미지 센서 및 동적 비전 센서를 포함하는 전자 장치 및 그 동작 방법
WO2022240186A1 (ko) 이미지 왜곡을 보정하는 방법 및 그 전자 장치
WO2022031050A1 (ko) 이미지를 생성하는 전자 장치 및 방법
WO2022240183A1 (ko) 이미지 데이터와 모션 데이터를 포함하는 파일을 생성하는 방법 및 그 전자 장치
WO2021230567A1 (ko) 복수의 카메라를 이용한 이미지 촬영 방법 및 그 전자 장치
WO2024085673A1 (ko) 다중 노출 영상을 획득하는 전자 장치 및 그 동작 방법
WO2024080767A1 (ko) 카메라를 이용하여 영상을 획득하는 전자 장치 및 그 동작 방법
WO2022225248A1 (ko) 촬영 시 흔들림을 보정하는 방법 및 그 전자 장치
WO2022203355A1 (ko) 복수의 카메라들을 포함하는 전자 장치
WO2024071639A1 (ko) 플리커링 보정 방법 및 그 전자 장치
WO2024025123A1 (ko) 카메라를 포함하는 전자 장치 및 방법
WO2023080495A1 (ko) 하이 다이나믹 레인지 이미지들을 촬영하는 전자 장치와 이의 동작 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 23880085

Country of ref document: EP

Kind code of ref document: A1