WO2023120060A1 - 電子機器、制御方法及びプログラム - Google Patents

電子機器、制御方法及びプログラム Download PDF

Info

Publication number
WO2023120060A1
WO2023120060A1 PCT/JP2022/043926 JP2022043926W WO2023120060A1 WO 2023120060 A1 WO2023120060 A1 WO 2023120060A1 JP 2022043926 W JP2022043926 W JP 2022043926W WO 2023120060 A1 WO2023120060 A1 WO 2023120060A1
Authority
WO
WIPO (PCT)
Prior art keywords
imaging
mode
payment
electronic device
predetermined object
Prior art date
Application number
PCT/JP2022/043926
Other languages
English (en)
French (fr)
Inventor
宏 河野邉
剛 渡辺
悠史 西牧
Original Assignee
ソニーセミコンダクタソリューションズ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニーセミコンダクタソリューションズ株式会社 filed Critical ソニーセミコンダクタソリューションズ株式会社
Priority to JP2023569216A priority Critical patent/JPWO2023120060A1/ja
Publication of WO2023120060A1 publication Critical patent/WO2023120060A1/ja

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/65—Control of camera operation in relation to power supply

Definitions

  • the present disclosure relates to electronic equipment, control methods, and programs.
  • One of the purposes of the present disclosure is to provide an electronic device, a control method, and a program that are appropriately controlled to reduce power consumption, for example.
  • the present disclosure for example, Having an imaging device that performs imaging in a first mode or in a second mode that consumes less power than the first mode,
  • the imaging device is an electronic device that captures an image of a predetermined object in the first mode when the predetermined object is detected in response to imaging in the second mode.
  • the imaging device performs imaging in a first operation mode or in a second mode that consumes less power than the first mode
  • the imaging device is a control method for imaging a predetermined object in the first mode when the predetermined object is detected in response to imaging in the second mode.
  • the imaging device performs imaging in a first operation mode or in a second mode that consumes less power than the first mode
  • the imaging device is a program that causes a computer to execute a control method for imaging a predetermined object in the first mode when the predetermined object is detected in response to imaging in the second mode.
  • FIG. 2 is a diagram referenced when issues to be considered in the present disclosure are described;
  • FIG. 2 is a diagram referenced when issues to be considered in the present disclosure are described;
  • It is a figure showing an example of appearance of a smart phone concerning one embodiment.
  • It is a figure which shows the internal structural example of the smart phone which concerns on one Embodiment.
  • It is a figure which shows the structural example of the image pick-up element which concerns on one Embodiment.
  • 4 is a flowchart for explaining an operation example of a smart phone according to one embodiment; It is a figure referred when explaining an example of an effect obtained by one embodiment.
  • It is a figure for demonstrating a modification.
  • It is a figure for demonstrating a modification.
  • It is a figure for demonstrating a modification.
  • It is a figure for demonstrating a modification.
  • It is a figure for demonstrating a modification.
  • FIG. 1 is a flow chart showing the flow of operations performed in a payment system and processes performed in a mobile terminal accompanying the operations.
  • a smart phone is used as an example of a portable terminal for explanation.
  • step ST1 the smartphone user determines the payment method. For example, the user decides to use the smartphone settlement method as the payment method. Then, the process proceeds to step ST2.
  • step ST2 the smartphone is unlocked by performing an operation such as inputting a password by the user. Then, the process proceeds to step ST3.
  • step ST3 the user performs an operation to activate the payment application corresponding to the payment method determined in step ST1.
  • the smartphone performs processing for activating a predetermined payment application. Then, the process proceeds to step ST4.
  • step ST4 the user orally communicates the payment method to the store clerk.
  • the store clerk performs an operation to display the two-dimensional bar code for settlement on the store terminal. Then, the process proceeds to step ST5.
  • step ST5 the user activates the scanning function of the payment application activated in step ST3. For example, a user taps an icon that appears on the smartphone display to perform a scan function. This activates the scanning function of the payment application (for example, a frame indicating the imaging range for the two-dimensional barcode). Then, the process proceeds to step ST6.
  • the scanning function of the payment application for example, a frame indicating the imaging range for the two-dimensional barcode.
  • step ST6 the user holds the smartphone over the two-dimensional barcode for payment so that the two-dimensional barcode for payment fits within the frame displayed on the display. As a result, the two-dimensional bar code for payment displayed on the store terminal is scanned. Then, the process proceeds to step ST7.
  • step ST7 the user enters the payment amount into the smartphone. Then, the process proceeds to step ST8.
  • step ST8 the user presents the smartphone to the clerk and asks the clerk to confirm the payment amount entered in step ST7.
  • confirmation of the payment amount is completed, the process proceeds to step ST9.
  • step ST9 the user executes the payment by tapping the icon for executing the payment displayed on the display.
  • the smartphone executes processing for payment by communicating with the payment server.
  • the process proceeds to step ST10.
  • step ST10 the user receives the product from the clerk.
  • FIG. 2 is a flow chart showing the flow of processing in such a method.
  • step ST11 the sensor (specifically, the imaging device) of the smartphone takes an image.
  • Image data obtained by imaging is supplied to an application processor connected after the imaging device. Then, the process proceeds to step ST12.
  • the application processor performs predetermined image processing on the image data supplied from the imaging device. Specifically, image processing or the like is performed to detect whether or not the image data includes a two-dimensional bar code for payment. Then, the process proceeds to step ST13.
  • step ST13 it is determined whether or not the two-dimensional barcode for payment is detected as a result of the image processing at step ST12. If the settlement two-dimensional bar code is not detected, the process returns to step ST11. If the two-dimensional code for payment is detected, the process proceeds to step ST14.
  • step ST14 the application processor recognizes the two-dimensional barcode for payment.
  • the application processor that recognizes the two-dimensional bar code for payment performs processing for activating the application for payment.
  • the user can automatically start the payment application without performing any special operations, improving convenience.
  • the smartphone is in a locked state or the like, it is always necessary to perform image pickup by the image sensor and detection processing of the two-dimensional barcode for settlement by the application processor, resulting in increased power consumption. For this reason, a situation may arise in which the remaining capacity of the battery of the smartphone drops significantly without the user being aware of it. Therefore, it is not realistic to continuously perform imaging by the imaging element and image processing by the application processor as they are.
  • a smartphone will be described as an example of an electronic device.
  • portable terminals such as a smart watch
  • FIG. 3 is a diagram showing an example of the appearance of the smartphone (smartphone 100) according to this embodiment.
  • Smartphone 100 has housing 11 .
  • a display 12 is provided on one main surface of the housing 11 .
  • a front camera 13 ⁇ /b>A that captures an image of the user of the smartphone 100 is provided, for example, on the upper side of the display 12 .
  • a rear camera 13B is provided on the main surface opposite to the main surface on which the display 12 is provided.
  • a predetermined object can be imaged by the rear camera 13B.
  • a predetermined object in this embodiment is a two-dimensional barcode for payment.
  • a button 14 for turning on/off the power is provided on the side surface of the housing 11 .
  • FIG. 4 is a block diagram showing an internal configuration example of the smartphone 100 according to this embodiment.
  • the smartphone 100 includes a control unit 101, a microphone 102, an audio signal processing unit 103 connected to the microphone 102, an imaging unit 104, a network unit 105, a network signal processing unit 106 connected to the network unit 105, It has a speaker 107 , an audio reproduction unit 108 connected to the speaker 107 , the display 12 described above, and a screen display unit 109 connected to the display 12 .
  • the audio signal processing unit 103 , imaging unit 104 , network signal processing unit 106 , audio reproduction unit 108 and screen display unit 109 are each connected to the control unit 101 .
  • the control unit 101 is composed of a CPU (Central Processing Unit) and the like.
  • the control unit 101 has a ROM (Read Only Memory) in which the program is stored, a RAM (Random Access Memory) used as a work area when the program is executed, and the like (not shown). there is.).
  • the control unit 101 comprehensively controls the smartphone 100 .
  • the control unit 101 has an application processor 101A as a functional block.
  • the application processor 101A activates a payment application and executes processing corresponding to the payment application.
  • the application processor 101A displays a UI (User Interface) corresponding to a payment application, controls the network unit 105 and network signal processing section 106, and performs processing for connecting to a payment server.
  • smartphone 100 may store a plurality of payment applications.
  • the application processor 101A performs processing for selecting a predetermined payment application from a plurality of payment applications.
  • the microphone 102 picks up the user's speech and the like.
  • the audio signal processing unit 103 performs known audio signal processing on audio data of sounds picked up via the microphone 102 .
  • the imaging unit 104 includes, for example, an optical system 104A such as a lens and an imaging element 104B.
  • a CMOS (Complementary Metal Oxide Semiconductor) sensor or a CCD (Charge Coupled Device) sensor can be applied as the imaging element 104B.
  • the image sensor 104B has a signal processing circuit 104C.
  • it is configured as a one-chip sensor in which the imaging device 104B and the signal processing circuit 104C are stacked.
  • the network unit 105 includes an antenna and the like.
  • a network signal processing unit 106 performs modulation/demodulation processing, error correction processing, and the like on data transmitted and received via the network unit 105 .
  • the audio reproduction unit 108 performs processing for reproducing sound from the speaker 107 .
  • the audio reproduction unit 108 performs known audio signal processing such as amplification processing and D/A conversion processing, for example.
  • the screen display unit 109 performs known processing for displaying various information on the display 12 .
  • the screen display unit 109 performs processing for displaying a UI corresponding to the payment application on the display 12 under the control of the application processor 101A.
  • the display 12 may be configured as a touch panel. In this case, the screen display unit 109 also performs detection processing of the operation position associated with the touch operation.
  • the imaging element 104B has a pixel array section 121 in which light receiving elements such as photodiodes are arranged two-dimensionally.
  • the pixel array section 121 includes a horizontal scanning circuit, a vertical scanning circuit, an A/D (Analog to Digital) circuit, etc., which are connected to the light receiving elements (not shown).
  • the image sensor 104B includes, as a signal processing circuit 104C, a system controller 131, a power control unit 132, a clock generation circuit 133, a ring oscillator 134 connected to the clock generation circuit 133, a PLL (Phase Locked Loop) 135, a BIAS 136, a timing It has a generator 137 , a sensor I/F (Interface) 138 , a detection section 139 , a camera signal processing section 140 and an output I/F 141 .
  • the system controller 131 , power control section 132 , timing generator 137 , detection section 139 , camera signal processing section 140 and output I/F 141 are connected to each other via a bus 151 .
  • the system controller 131 has, for example, a microprocessor, and centrally controls the operation of each unit in the imaging device 104B.
  • the system controller 131 has an output I/F 131A. Commands are transmitted and received between the system controller 131 and the control unit 101 (for example, the application processor 101A) via the output I/F 131A. Commands are transmitted and received via a serial interface such as I2C .
  • the power control unit 132 controls power supplied to each unit. Although the details will be described later, the power control unit 132 controls power supplied to each unit according to the operation mode of the imaging element 104B.
  • the clock generation circuit 133 generates clock signals based on the outputs of the ring oscillator 134 and the PLL 135 .
  • a clock signal generated by the clock generating circuit 133 is supplied to each part of the imaging element 104B, and operations are performed based on the clock signal.
  • the BIAS 136 generates and supplies a stable reference voltage and reference current to each circuit that controls the pixel array section 121 and processes output signals.
  • the timing generator 137 generates various timing signals. Various timing signals generated by the timing generator are supplied to the pixel drive circuit of the pixel array section 121 and the sensor I/F 138 .
  • the sensor I/F 138 is an interface for outputting image data (for example, digitized image data) output from the pixel array unit 121 to a subsequent stage.
  • the sensor I/F 138 operates based on timing signals supplied from the timing generator 137 .
  • a detection unit 139 and a camera signal processing unit 140 are connected to the rear stage of the sensor I/F 138 .
  • the detection unit 139 Based on the image data supplied from the sensor I/F 138, the detection unit 139 detects whether or not the image data includes a predetermined object (in this embodiment, a two-dimensional barcode for payment). The detection unit 139 notifies the detection result to the system controller 131 via the bus 151 .
  • a predetermined object in this embodiment, a two-dimensional barcode for payment
  • the camera signal processing unit 140 performs known image processing on image data supplied from the sensor I/F 138 .
  • Known image processing includes interpolation processing, color correction, defect correction, and the like.
  • Image data subjected to camera signal processing by the camera signal processing unit 140 is supplied to the control unit 101 via the output I/F 141 .
  • An image based on the image data is displayed on the display 12 by operating the screen display unit 109 based on the control of the control unit 101 .
  • MIPI Mobile Industry Processor Interface
  • the process of detecting the two-dimensional barcode for settlement is always performed while the power is on. For example, even in a state where the power is turned on and there is no operation input for a certain period of time (hereinafter referred to as a sleep state as appropriate), processing for detecting the two-dimensional barcode for payment is performed. will be In the sleep state, for example, display on the display 12 is turned off.
  • the image sensor 104B is operated with low power consumption to detect the payment two-dimensional barcode.
  • the power consumption of the imaging device 104B is lower than in the normal mode, and the two-dimensional bar for payment is used.
  • the imaging device 104B is made operable in a detection mode (an example of a second mode) for detecting codes.
  • the power consumption in the detection mode is made smaller than the power consumption in the normal mode.
  • the parameters related to imaging include parameters related to the amount of image data obtained by imaging and parameters related to driving when performing imaging.
  • Specific examples of the former include the resolution, gradation, color, and imaging region (ROI (Region of Interest)) of image data.
  • ROI imaging region
  • the latter include settings related to the number of drive clocks for the imaging device 104B, the frame rate, the operating state/idle state (non-operating state or operating state with low power) of each functional block, and the like.
  • the driving clock and frame rate during imaging in the detection mode are set lower than those during imaging in the normal mode, and the number of functional blocks in the operating state is reduced as much as possible to reduce the power consumption during imaging in the detection mode. can be made smaller than the power consumption in shooting in the normal mode.
  • control of each functional block for each mode is as follows, for example. ⁇ Blocks that are supplied with power and operate as usual regardless of the mode: system controller 131, BIAS 136 Blocks that do not operate due to no power supply in normal mode (blocks that operate only in detection mode): power control section 132, detection section 139, ring oscillator 134 ⁇ Blocks that do not operate because power is not supplied in detection mode (blocks that operate only in normal mode): PLL 135, camera signal processing unit 140, output I/F 141 ⁇ Blocks in which power consumption is optimized by setting parameters to the extent that two-dimensional barcodes for payments can be detected in detection mode: pixel array unit 121, clock generation circuit 133, timing generator 137 , Sensor I/F138
  • the application processor 101A of the control unit 101 is also in a non-operating state (idle state). Thereby, not only the power consumption of the image sensor 104B but also the power consumption of the control unit 101 can be reduced.
  • step ST21 control is performed to set the operation mode of the smartphone 100 to the detection mode. For example, when there is no operation input to the smartphone 100 for a certain period of time and the display 12 is turned off, or when normal operation input (except for emergency operation input) to the smartphone 100 is no longer accepted, the lock state is reached.
  • imaging in detection mode is started. For example, when the above-described trigger occurs, the control unit 101 notifies the system controller 131 of the imaging device 104B of that fact. Then, the process proceeds to step ST22.
  • step ST22 the system controller 131, having received the notification from the control unit 101, puts the functional blocks necessary for imaging in the detection mode into an operating state, and puts the functional blocks unnecessary for imaging in the detection mode into a resting state.
  • the system controller 131 controls the power control section 132, the ring oscillator 134, and the detection section 139 to operate.
  • the system controller 131 also controls the PLL 135, the camera signal processing unit 140, and the output I/F 141 to be in a rest state.
  • the system controller 131 controls the driving circuit of the pixel array unit 121, the clock generation circuit 133, the timing generator 137, the sensor I, and the like, using imaging parameters (for example, resolution, gradation, driving clock, frame rate, etc.) corresponding to the detection mode.
  • imaging parameters for example, resolution, gradation, driving clock, frame rate, etc.
  • /F138 sets the imaging parameters for each unit.
  • the parameter corresponding to the detection mode is, for example, a parameter set in advance to such an extent that at least the presence or absence of the payment two-dimensional barcode can be detected. Power consumption in functional blocks operating with parameters corresponding to the detection mode may be less than power consumption during operation in the normal mode. Control for reducing the power supply is performed by the power control section 132 . Then, the process proceeds to step ST23.
  • step ST23 the imaging element 104B performs imaging with lower power consumption than in the detection mode, that is, in the normal mode.
  • imaging is performed at a lower resolution (lower resolution) and a lower frame rate than in the normal mode.
  • Image data is read from the pixel array unit 121 by such imaging, and is supplied to the detection unit 139 via the sensor I/F 138 . Then, the process proceeds to step ST24.
  • the detection unit 139 determines whether or not the image data output from the sensor I/F 138 includes a two-dimensional barcode for payment.
  • a known process can be applied as the detection process by the detection unit 139 .
  • the detection unit 139 detects that the two-dimensional barcode for payment is included in the image data when a defined pattern is detected according to the standard for the two-dimensional barcode for payment; It is determined that the data does not include the two-dimensional bar code for payment. If the two-dimensional bar code for payment is not detected, the process returns to step ST23, and the imaging in the detection mode is repeated.
  • the detection unit 139 notifies the system controller 131 that the two-dimensional barcode for payment has been detected.
  • the system controller 131 that has received such notification transmits an interrupt to the control unit 101 .
  • the control unit 101 changes the application processor 101A from the sleep state to the operation state. Then, the process proceeds to step ST25.
  • the system controller 131 performs control to transition the operation mode of the smartphone 100 (more specifically, the operation mode of the imaging device 104B) from the detection mode to the normal mode.
  • the system controller 131 brings the camera signal processing unit 140 and the output I/F 141 from the idle state to the operating state, and also brings the ring oscillator 134 and the detection unit 139 from the operating state to the idle state.
  • it controls the drive circuit of the pixel array unit 121, the clock generation circuit 133, the timing generator 137, etc. so that the imaging parameters correspond to the normal mode.
  • the power control unit 132 controls the driving circuit of the pixel array unit 121, the clock generation circuit 133, and the timing generator 137 so that the operation can be performed with the imaging parameters corresponding to the normal mode according to the control of the system controller 131. Control power supply.
  • the power control unit 132 enters a hibernation state after performing such power supply control, but may continue the operating state even after transitioning to the normal mode. Then, the process proceeds to step ST26.
  • the imaging device 104B performs imaging in normal mode.
  • the imaging element 104B performs imaging in the normal mode so that the resolution is higher than that in the detection mode.
  • Camera signal processing is performed on the obtained image data by the camera signal processing unit 140 , and the image data subjected to the camera signal processing is supplied to the application processor 101 A of the control unit 101 via the output I/F 141 . Then, the process proceeds to step ST27.
  • step ST27 the application processor 101A performs recognition processing on the image data (high-quality image data) of the two-dimensional bar code for payment supplied from the imaging device 104B.
  • the application processor 101A recognizes the payment two-dimensional barcode and activates a predetermined payment application.
  • the application processor 101A causes the display 12 to display a UI corresponding to the activated payment application by controlling the screen display unit 109 and the like. Thereafter, payment is made using the payment application.
  • step ST31 the user carrying smartphone 100 determines the payment method. Specifically, the user determines the payment method using the two-dimensional bar code for settlement as the payment method. Then, the process proceeds to step ST32.
  • step ST32 the user informs the salesclerk of the payment method determined at step ST31.
  • the store clerk displays the two-dimensional bar code for settlement on the store terminal.
  • a two-dimensional barcode for payment may be automatically displayed at a self-checkout or the like. Then, the process proceeds to step ST33.
  • the user takes out the smartphone 100 from the bag or pocket.
  • the smartphone 100 is often in a locked state or a sleep state.
  • the imaging element 104B performs imaging in the detection mode even in the locked state or the sleep state, for example.
  • the user holds the smartphone 100 over the two-dimensional barcode.
  • the user aims the rear camera 13B of the smartphone 100, which is capturing images in the detection mode, toward the two-dimensional barcode for payment displayed on the terminal of the store. Then, the process proceeds to step ST34.
  • the two-dimensional barcode for payment is imaged by imaging in the detection mode, and the detection unit 139 detects the two-dimensional barcode for payment.
  • the two-dimensional barcode for payment is imaged in the normal mode, and the application processor 101A transitions from the sleep state to the operating state.
  • the settlement application automatically starts. For example, the lock state of the smart phone 100 is automatically released under the control of the control unit 101 according to the execution of the settlement application. Also, a UI for inputting the payment amount is displayed on the display 12 under the control of the application processor 101A. Then, the process proceeds to step ST35.
  • step ST35 the user inputs the payment amount into the smartphone.
  • step ST36 the user presents the smartphone to the salesclerk, and asks the salesclerk to confirm the payment amount entered in step ST35.
  • step ST37 the user executes payment by tapping an icon for executing payment displayed on the display. After the payment is completed, the user receives the product from the salesclerk in step ST38.
  • the payment application can be automatically activated simply by holding the smartphone 100 over the two-dimensional barcode for payment. can be done. Specifically, the operation of unlocking the smartphone 100, activating the payment application, and then executing the scan function of the payment application is not required. As a result, it is possible to simplify the operations that the user should perform when making a payment using the two-dimensional barcode for payment. In addition, since customers can make payments smoothly for stores, there is an advantage that it is possible to prevent customers waiting for payments from staying. In addition, since the payment operation can be simplified, the use of payment using the two-dimensional bar code for payment will be further promoted, which is also advantageous for payment business operators.
  • imaging in detection mode is performed with low power consumption. Therefore, even if the image capturing in the detection mode is performed for a relatively long time, it is possible to suppress the decrease in the remaining battery capacity of the smart phone 100 .
  • Exposure control in imaging in the detection mode may be performed according to the detection result of the amount of light in the imaging environment. For example, when the exposure is underexposure as shown in FIG. 8A, exposure control may be performed so as to achieve proper exposure as shown in FIG. 8B.
  • the amount of light in the imaging environment may be measured by a sensor attached to the smartphone 100, or may be measured based on image data obtained by imaging in the detection mode.
  • control to increase the exposure time control to decrease it when overexposure
  • Exposure control is preferably performed by processing within the image sensor 104B, specifically by the system controller 131.
  • the detection mode may have a plurality of modes with different imaging parameters. Then, one of the plurality of modes is selected according to at least one of the sensing result of the external sensor of the smartphone 100 and the detection result of the image data obtained by imaging in the detection mode, and the selected mode corresponds to the selected mode. Imaging may be performed using the imaging parameters that are used.
  • the detection modes include a mode in which the imaging area is VGA (vertical 640 pixels x horizontal 480 pixels) and a mode in which the imaging area is QVGA (vertical 320 pixels x horizontal 240 pixels).
  • VGA vertical 640 pixels x horizontal 480 pixels
  • QVGA vertical 320 pixels x horizontal 240 pixels
  • the distance to the two-dimensional barcode for payment is measured.
  • the distance to the two-dimensional barcode for payment is measured by a distance sensor provided in the smartphone 100, for example.
  • a distance sensor provided in the smartphone 100, for example.
  • the distance to the two-dimensional bar code for payment is about 20 cm
  • imaging is performed in a mode in which the imaging area is VGA (640 pixels in height ⁇ 480 pixels in width).
  • deterioration in the detection performance of the two-dimensional bar code for payment can be suppressed.
  • a plurality of modes with different resolutions and gradations may be prepared in the detection mode in addition to the imaging area, and each mode may be adaptively switched according to the sensing result of the external sensor. Mode switching may be performed autonomously by the system controller 131 of the image sensor 104B, or may be performed in response to a command from the control unit 101.
  • a plurality of modes with different detection performances for the two-dimensional bar code for payment are prepared as detection modes. These modes differ in detection performance, but are modes in which imaging is performed with lower power consumption than power consumption in imaging in the normal mode.
  • the imaging parameters are set so that the detection performance is high. For example, the resolution and gradation are set to large values.
  • the low detection performance mode imaging parameters are set so that the detection performance is low. For example, the resolution and gradation are set to small values.
  • control is performed to transition from a mode with low detection performance to a mode with high detection performance in response to a predetermined trigger, and imaging is performed in the mode after the transition. , the two-dimensional bar code for payment is detected.
  • a predetermined trigger is, for example, a user's operation. The above control is performed, for example, by the system controller 131 of the imaging device 104B.
  • the smartphone 100 that is capturing images in the detection mode is held over the two-dimensional barcode for payment.
  • the imaging parameters are set to the extent that the two-dimensional barcode for payment can be detected, and the application for payment is automatically activated in the state shown in FIG. 10A.
  • the smartphone 100 may not respond.
  • the user performs a predetermined operation (an operation of shaking the smartphone 100 in the example of FIG. 10B).
  • a predetermined operation an operation of shaking the smartphone 100 in the example of FIG. 10B.
  • Such an operation is detected by the control unit 101 and the detection result is notified to the system controller 131 .
  • the system controller 131 performs control to transition the operation mode to a mode with higher detection performance than the current detection performance, and sets imaging parameters corresponding to the post-transition mode to each unit. This improves the detection performance of the two-dimensional barcode for payment, so that the two-dimensional barcode for payment can be detected as shown in FIG. 10C. Since the two-dimensional barcode for payment has been detected, the application for payment can be automatically activated as in the first embodiment.
  • imaging is performed using the mode with the lowest detection performance, which is superior in terms of power consumption, as the detection mode. If the two-dimensional bar code for settlement cannot be detected by such imaging, imaging is performed with a mode having higher detection performance as the detection mode according to the user's operation. As a result, it is possible to effectively suppress power consumption in imaging in the detection mode, while avoiding a situation where the two-dimensional barcode for payment cannot be detected and the application for payment is not activated.
  • the predetermined operation may be an operation other than shaking smartphone 100 , or may be voice input to smartphone 100 .
  • the two-dimensional bar code for settlement may include a corporate logo.
  • the company's logo is shown as "AA”
  • the company's logo is shown as "BB”.
  • information such as company logos included in the payment two-dimensional barcode may be detected.
  • the detection of such a company logo or the like is performed by the application processor 101A, for example. That is, after the two-dimensional barcode for payment is detected in the detection mode, the two-dimensional barcode for payment is imaged in the normal mode.
  • the application processor 101A recognizes the company's logo based on the image data obtained by this imaging.
  • the application processor 101A activates the payment application corresponding to the recognized company. According to this modification, even if a plurality of payment applications are installed on the smartphone 100, the payment application corresponding to the company included in the payment two-dimensional barcode can be selected without the user's selection. can be started automatically.
  • the two-dimensional bar code for payment has been described as an example of the predetermined object, but the object is not limited to this.
  • a given object may be a company logo that does not include a two-dimensional barcode. Then, when the company's logo is detected as a result of imaging in the detection mode, information related to the company (for example, information related to coupons and new products) may be displayed on the display 12 .
  • the locked state is released in the above-described embodiment. It doesn't have to be.
  • the payment application may be automatically activated after the user inputs a password for unlocking. The user may be allowed to set whether or not to release the locked state when the payment application is automatically activated.
  • the timing of imaging in detection mode can be changed as appropriate. For example, by learning the history of the user's use of the payment application, the period and location for imaging in the detection mode may be automatically set. In addition, the user may set the timing, time, and place for imaging in the detection mode. This can prevent unnecessary imaging in the detection mode. In addition, it is significant from the viewpoint of privacy that the user has control over the service that performs imaging in the detection mode.
  • the present disclosure can also be configured as follows. (1) Having an imaging device that performs imaging in a first mode or in a second mode that consumes less power than the first mode, The electronic device, wherein the imaging device captures an image of the predetermined object in the first mode when the predetermined object is detected according to the imaging in the second mode. (2) The electronic device according to (1), further comprising an application processor that executes an application corresponding to the predetermined object based on image data obtained by imaging in the first mode. (3) (2) The electronic device according to (2), wherein the application processor is in a hibernation state while imaging is performed in the second mode.
  • the second mode includes a plurality of modes with different detection performance for the predetermined object due to different imaging parameters related to imaging,
  • the electronic device according to any one of (1) to (8), wherein control is performed to transition from a mode with low detection performance to a mode with high detection performance in accordance with a predetermined trigger.
  • the predetermined object is a two-dimensional barcode, The electronic device according to any one of (2) to (5), wherein the application is an application for settlement.
  • the predetermined object is a company logo; The electronic device according to any one of (2) to (5), wherein the application is an application related to the company.
  • the imaging device performs imaging in a first operation mode or in a second mode that consumes less power than the first mode, A control method in which the imaging element performs imaging of the predetermined object in the first mode when the predetermined object is detected according to the imaging in the second mode.
  • the imaging device performs imaging in a first operation mode or in a second mode that consumes less power than the first mode, causing a computer to execute a control method for imaging the predetermined object in the first mode when the predetermined object is detected in response to the imaging in the second mode. program.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)

Abstract

例えば、電力消費を抑制しつつ、所定のオブジェクトを検出できるようにする。　第１の動作モード又は当該第１のモードよりも消費電力が小さい第２のモードで撮像を行う撮像素子を有し、撮像素子は、第２のモードでの撮像に応じて所定のオブジェクトが検出された場合に、所定のオブジェクトに対して第１のモードでの撮像を行う電子機器である。

Description

電子機器、制御方法及びプログラム
　本開示は、電子機器、制御方法及びプログラムに関する。
　電子機器で消費される電力は極力小さいことが好ましいことから、電子機器の低消費電力を実現するための種々の技術が提案されている（例えば、下記特許文献１を参照のこと）。
特開２００３－１１６０５９号公報
　この分野では、撮像機能を有する電子機器において、消費電力を抑制する適切な制御が行われることが望まれる。
　本開示は、例えば消費電力を抑制する適切な制御が行われる電子機器、制御方法及びプログラムを提供することを目的の一つとする。
　本開示は、例えば、
　第１のモード又は当該第１のモードよりも消費電力が小さい第２のモードで撮像を行う撮像素子を有し、
　撮像素子は、第２のモードでの撮像に応じて所定のオブジェクトが検出された場合に、所定のオブジェクトに対して第１のモードでの撮像を行う
　電子機器である。
　本開示は、例えば、
　撮像素子が、第１の動作モード又は当該第１のモードよりも消費電力が小さい第２のモードで撮像を行い、
　撮像素子は、第２のモードでの撮像に応じて所定のオブジェクトが検出された場合に、所定のオブジェクトに対して第１のモードでの撮像を行う
　制御方法である。
　本開示は、例えば、
　撮像素子が、第１の動作モード又は当該第１のモードよりも消費電力が小さい第２のモードで撮像を行い、
　撮像素子は、第２のモードでの撮像に応じて所定のオブジェクトが検出された場合に、所定のオブジェクトに対して第１のモードでの撮像を行う
　制御方法をコンピュータに実行させるプログラムである。
本開示で考慮すべき問題についての説明がなされる際に参照される図である。 本開示で考慮すべき問題についての説明がなされる際に参照される図である。 一実施形態に係るスマートフォンの外観例を示す図である。 一実施形態に係るスマートフォンの内部構成例を示す図である。 一実施形態に係る撮像素子の構成例を示す図である。 一実施形態に係るスマートフォンの動作例を説明するためのフローチャートである。 一実施形態で得られる効果の一例を説明する際に参照される図である。 変形例を説明するための図である。 変形例を説明するための図である。 変形例を説明するための図である。 変形例を説明するための図である。
　以下、本開示の実施形態等について図面を参照しながら説明する。なお、説明は以下の順序で行う。
＜本開示で考慮すべき問題＞
＜一実施形態＞
＜変形例＞
　なお、以下に説明する実施形態等は本開示の好適な具体例であり、本開示の内容がこれらの実施形態等に限定されるものではない。また、同一又は同質の構成については同一の参照符号を付し、重複した説明を適宜、省略する。
＜本開示で考慮すべき問題＞
　始めに、本開示の理解を容易とするために、図１及び図２を参照しつつ本開示で考慮すべき問題について説明する。
　近年、スマートフォンやスマートウォッチ（時計型の携帯端末）等の携帯端末を用いて決済操作を行うシステム（以下、決済システムと適宜、称する）が普及してきている。図１は、決済システムで行われる操作や、当該操作に伴い携帯端末で行われる処理のフローを示すフローチャートである。なお、ここでは携帯端末としてスマートフォンを例にして説明する。
　ステップＳＴ１では、スマートフォンのユーザーが支払い方法を決定する。例えば、ユーザーは、支払い方法としてスマートフォンを用いた決済方法を利用することを決定する。そして、処理がステップＳＴ２に進む。
　決済にスマートフォンを使用することから、ユーザーはスマートフォンを手に取る。一般に、一定時間スマートフォンに対する操作がなされないと、スマートフォンは、ディスプレイの電源がオフとなり、さらに、所定のパスワードを入力しないとスマートフォンを利用できないロック状態になる。従って、ステップＳＴ２では、ユーザーがパスワードを入力する等の操作を行うことにより、スマートフォンのロック状態を解除する。そして、処理がステップＳＴ３に進む。
　ステップＳＴ３では、ユーザーが、ステップＳＴ１で決定した支払い方法に対応する決済用アプリケーションを起動させる操作を行う。当該操作に応じて、スマートフォンで所定の決済用アプリケーションを起動させる処理が行われる。そして、処理がステップＳＴ４に進む。
　ステップＳＴ４では、ユーザーが店員への決済方法を口頭で伝達する。店員は、店舗の端末に決済用２次元バーコードを表示させる操作を行う。そして、処理がステップＳＴ５に進む。
　ステップＳＴ５では、ユーザーが、ステップＳＴ３で起動した決済用アプリケーションのスキャン機能を起動する。例えば、ユーザーが、スマートフォンのディスプレイに表示されたスキャン機能を実行するアイコンをタップする。これにより、決済用アプリケーションのスキャン機能（例えば、２次元バーコードに対する撮像範囲を示す枠）が起動する。そして、処理がステップＳＴ６に進む。
　ステップＳＴ６では、ユーザーが、ディスプレイに表示された枠内に決済用２次元バーコードが収まるようにスマートフォンを決済用２次元バーコードにかざす。これにより、店舗の端末に表示された決済用２次元バーコードがスキャンされる。そして、処理がステップＳＴ７に進む。
　ステップＳＴ７では、ユーザーが、スマートフォンに支払金額を入力する。そして、処理がステップＳＴ８に進む。
　ステップＳＴ８では、ユーザーがスマートフォンを店員に提示し、ステップＳＴ７で入力した支払金額を店員に確認してもらう。支払金額の確認が終了すると、処理がステップＳＴ９に進む。
　ステップＳＴ９では、ユーザーが、ディスプレイに表示された決済を実行するためのアイコンをタップ等することにより決済を実行する。スマートフォンでは、決済用のサーバーと通信が行われることで決済を行うための処理が実行される。決済が完了すると、処理がステップＳＴ１０に進む。
　ステップＳＴ１０では、ユーザーが店員から商品を受け取る。
　以上が、汎用的に用いられている決済システムの概要である。このように、決済システムを利用する際は、ユーザーは、スマートフォンのロックを解除する操作や、スマートフォンの決済用アプリケーションを起動させる操作等を行う必要があり、決済を実行するために多くの手順を必要としていた。また、これらの手順を踏むための時間も必要となるデメリットがあった。
　係る問題を解決する一つの方法として、常時、決済用２次元バーコードのスキャンを行い、決済用２次元バーコードが検出された場合に、自動で決済用アプリケーションを起動させる手法が考えられる。図２は、係る手法における処理のフローを示すフローチャートである。
　ステップＳＴ１１では、スマートフォンのセンサ（具体的には、撮像素子）が撮像を行う。撮像により得られた画像データが、撮像素子の後段に接続されるアプリケーションプロセッサに供給される。そして、処理がステップＳＴ１２に進む。
　ステップＳＴ１２では、アプリケーションプロセッサが、撮像素子から供給された画像データに対して所定の画像処理を行う。具体的には、画像データに決済用２次元バーコードが含まれるか否かを検出するための画像処理等が行われる。そして、処理がステップＳＴ１３に進む。
　ステップＳＴ１３では、ステップＳＴ１２における画像処理の結果、決済用２次元バーコードが検出されたか否かが判断される。決済用２次元バーコードが検出されない場合は、処理がステップＳＴ１１に戻る。決済用２次元コードが検出された場合は、処理がステップＳＴ１４に進む。
　ステップＳＴ１４では、アプリケーションプロセッサが決済用２次元バーコードを認識する。決済用２次元バーコードを認識したアプリケーションプロセッサは、決済用アプリケーションを起動する処理を行う。
　以上説明した処理により、ユーザーは、特段の操作を行うことなく決済用アプリケーションを自動的に起動させることができ、利便性を向上させることができる。しかしながら、スマートフォンがロック状態等の場合であっても、常に、撮像素子による撮像と、アプリケーションプロセッサによる決済用２次元バーコードの検出処理とを行う必要があり、消費電力が大きくなってしまう。このため、ユーザーが気づかないうちにスマートフォンの電池の残容量が大きく低下しまう事態も生じ得る。従って、撮像素子による撮像及びアプリケーションプロセッサに画像処理等を、そのまま常時行うことは現実的ではない。以上の点を踏まえつつ、一実施形態について以下、詳細に説明する。
＜一実施形態＞
［スマートフォンの外観］
　本実施形態では、電子機器の一例としてスマートフォンを例にして説明する。勿論、電子機器として、スマートウォッチ等の他の携帯端末を用いることも可能である。
　図３は、本実施形態に係るスマートフォン（スマートフォン１００）の外観例を示す図である。スマートフォン１００は、筐体１１を有する。筐体１１の一方の主面には、ディスプレイ１２が設けられている。また、ディスプレイ１２の例えば上側に、スマートフォン１００のユーザー自身を撮像するフロントカメラ１３Ａが設けられている。また、ディスプレイ１２が設けられる主面とは反対側の主面には、リアカメラ１３Ｂが設けられている。リアカメラ１３Ｂにより所定のオブジェクトが撮像され得る。本実施形態における所定のオブジェクトは、決済用２次元バーコードである。筐体１１の側面には、電源をオン／オフする等のボタン１４が設けられている。
［スマートフォンの内部構成例］
　図４は、本実施形態に係るスマートフォン１００の内部構成例を示すブロック図である。スマートフォン１００は、制御部１０１と、マイクロフォン１０２と、マイクロフォン１０２に接続される音声信号処理部１０３と、撮像ユニット１０４と、ネットワークユニット１０５と、ネットワークユニット１０５に接続されるネットワーク信号処理部１０６と、スピーカ１０７と、スピーカ１０７に接続される音声再生部１０８と、上述したディスプレイ１２と、ディスプレイ１２に接続される画面表示部１０９とを有している。音声信号処理部１０３、撮像ユニット１０４、ネットワーク信号処理部１０６、音声再生部１０８、及び、画面表示部１０９のそれぞれは、制御部１０１に対して接続されている。
　制御部１０１は、ＣＰＵ（Central Processing Unit）等により構成されている。制御部１０１は、プログラムが格納されるＲＯＭ(Read Only Memory)や、プログラムが実行される際のワークエリアとして用いられるＲＡＭ（Random Access Memory）等を有している（これらの図示は省略されている。）。制御部１０１は、スマートフォン１００を統括的に制御する。
　制御部１０１は、機能ブロックとしてアプリケーションプロセッサ１０１Ａを有している。アプリケーションプロセッサ１０１Ａは、決済用アプリケーションを起動して、当該決済用アプリケーションに対応する処理を実行する。例えば、アプリケーションプロセッサ１０１Ａは、決済用アプリケーションに対応するＵＩ(User Interface)を表示したり、ネットワークユニット１０５やネットワーク信号処理部１０６を制御して、決済用のサーバーに接続する処理等を行う。なお、スマートフォン１００には、複数の決済用アプリケーションが記憶されていてもよい。この場合、アプリケーションプロセッサ１０１Ａは、複数の決済用アプリケーションから所定の決済用アプリケーションを選択する処理を行う。
　マイクロフォン１０２は、ユーザーの発話等を収音する。音声信号処理部１０３は、マイクロフォン１０２を介して収音された音の音声データに対して、公知の音声信号処理を行う。
　撮像ユニット１０４は、例えば、レンズ等の光学系１０４Ａ及び撮像素子１０４Ｂを含む。撮像素子１０４Ｂとしては、ＣＭＯＳ(Complementary Metal Oxide Semiconductor)センサやＣＣＤ(Charge Coupled Device)センサが適用され得る。本実施形態では、撮像素子１０４Ｂが信号処理回路１０４Ｃを有する。例えば、撮像素子１０４Ｂ及び信号処理回路１０４Ｃが積層された１チップのセンサとして構成されている。
　ネットワークユニット１０５は、アンテナ等を含む。ネットワーク信号処理部１０６は、ネットワークユニット１０５を介して送受信されるデータに対して、変復調処理やエラー訂正処理等を行う。
　音声再生部１０８は、スピーカ１０７から音を再生するための処理を行う。音声再生部１０８は、例えば、増幅処理やＤ／Ａ変換処理等の公知の音声信号処理を行う。
　ディスプレイ１２としては、ＬＣＤ(Liquid Crystal Display)や有機ＥＬ（Electro Luminescence）ディスプレイが適用され得る。画面表示部１０９は、ディスプレイ１２に各種の情報を表示するための公知の処理を行う。例えば、画面表示部１０９は、アプリケーションプロセッサ１０１Ａの制御に応じて、ディスプレイ１２に決済用アプリケーションに対応するＵＩを表示するための処理を行う。なお、ディスプレイ１２はタッチパネルとして構成されていても良い。この場合には、画面表示部１０９は、タッチ操作に伴う操作位置を検出処理等も行う。
［撮像素子の構成例］
　図５を参照しながら、本実施形態に係る撮像素子１０４Ｂの構成例について説明する。撮像素子１０４Ｂは、フォトダイオード等の受光素子が２次元的に配列された画素アレイ部１２１を有する。画素アレイ部１２１は、受光素子に接続される、水平走査回路、垂直走査回路、Ａ／Ｄ(Analog to Digital)回路等を含む（これらの図示は省略している。）。
　また、撮像素子１０４Ｂは、信号処理回路１０４Ｃとして、システムコントローラ１３１、パワー制御部１３２、クロック生成回路１３３、クロック生成回路１３３と接続されるリングオシレータ１３４、ＰＬＬ(Phase Locked Loop)１３５、ＢＩＡＳ１３６、タイミングジェネレータ１３７、センサＩ／Ｆ(Interface)１３８、検出部１３９、カメラ信号処理部１４０、及び、出力Ｉ／Ｆ１４１を有する。システムコントローラ１３１、パワー制御部１３２、タイミングジェネレータ１３７、検出部１３９、カメラ信号処理部１４０、及び、出力Ｉ／Ｆ１４１が、バス１５１を介して互いに接続されている。
　システムコントローラ１３１は、例えばマイクロプロセッサを有し、撮像素子１０４Ｂにおける各部の動作を統括的に制御する。システムコントローラ１３１は、出力Ｉ／Ｆ１３１Ａを有する。出力Ｉ／Ｆ１３１Ａを介して、システムコントローラ１３１と制御部１０１（例えば、アプリケーションプロセッサ１０１Ａ）との間でコマンドの送受信が行われる。コマンドの送受信は、例えばＩ２Ｃ等のシリアルインターフェースを介して行われる。
　パワー制御部１３２は、各部に供給される電力を制御する。詳細は後述するが、パワー制御部１３２は、撮像素子１０４Ｂの動作モードに応じて、各部に供給される電力を制御する。
　クロック生成回路１３３は、リングオシレータ１３４及びＰＬＬ１３５の出力に基づいて、クロック信号を生成する。クロック生成回路１３３により生成されたクロック信号が撮像素子１０４Ｂの各部に供給され、クロック信号に基づく動作が行われる。
　ＢＩＡＳ１３６は、画素アレイ部１２１の制御や出力信号の処理を行う各回路に対し、安定的な基準電圧と基準電流を生成し供給する。
　タイミングジェネレータ１３７は、各種のタイミング信号を生成する。タイミングジェネレータによって生成された各種のタイミング信号は、画素アレイ部１２１の画素駆動回路やセンサＩ／Ｆ１３８に供給される。
　センサＩ／Ｆ１３８は、画素アレイ部１２１から出力される画像データ（例えば、デジタル化された画像データ）を後段に出力するためのインターフェースである。センサＩ／Ｆ１３８は、タイミングジェネレータ１３７から供給されるタイミング信号に基づいて動作する。センサＩ／Ｆ１３８の後段に、検出部１３９及びカメラ信号処理部１４０が接続されている。
　検出部１３９は、センサＩ／Ｆ１３８から供給される画像データに基づいて、当該画像データに所定のオブジェクト（本実施形態では、決済用２次元バーコード）が含まれるか否かを検出する。検出部１３９は、バス１５１を介してシステムコントローラ１３１に対して検出結果を通知する。
　カメラ信号処理部１４０は、センサＩ／Ｆ１３８から供給される画像データに対して公知の画像処理を行う。公知の画像処理としては、補間処理や色補正、欠陥補正等の処理が挙げられる。カメラ信号処理部１４０によるカメラ信号処理が施された画像データが、出力Ｉ／Ｆ１４１を介して制御部１０１に供給される。そして、制御部１０１の制御に基づいて画面表示部１０９が動作することで、ディスプレイ１２に画像データに基づく画像が表示される。出力Ｉ／Ｆ１４１しては、例えばＭＩＰＩ(Mobile Industry Processor Interface)を適用することができる。
［スマートフォンの動作例］
　次に、本実施形態に係るスマートフォンの動作例について説明する。スマートフォン１００では、電源がオンされている間に常時、決済用２次元バーコードを検出する処理が行われる。例えば、電源がオンした状態であり、且つ、一定期間の操作入力がない場合に遷移する状態（以下、スリープ状態と適宜、称する）であっても決済用２次元バーコードを検出する処理が行われる。スリープ状態では、例えばディスプレイ１２の表示がオフされる。
　上述したように、常時、決済用２次元バーコードを検出する処理を行うことは、消費電力の観点から好ましくない。そこで、本実施形態では、撮像素子１０４Ｂを低消費電力で動作させて決済用２次元バーコードを検出する処理を行う。具体的には、被写体を撮像する等の通常の撮像を行う通常モード（第１のモードの一例）の他に、通常モードよりも撮像素子１０４Ｂにおける消費電力が小さく、且つ、決済用２次元バーコードを検出するための検出モード（第２のモードの一例）で撮像素子１０４Ｂを動作可能とする。
　例えば、通常モードにおける撮像に関するパラメータを小さくすることにより、検出モードにおける消費電力が通常モードにおける消費電力よりも小さくされる。撮像に関するパラメータには、撮像により得られる画像データのデータ量に関係するパラメータ及び撮像を行う際の駆動に関係するパラメータが含まれる。前者の具体例としては、画像データの解像度や階調、色、撮像領域（ＲＯＩ(Region of Interest)）等を挙げることができる。検出モードの撮像により得られる画像データの解像度等を通常モードの撮像により得られる画像データの解像度等よりも小さくすることで、検出モードでの撮影における消費電力を通常モードでの撮影における消費電力よりも小さくすることができる。後者の具体例としては、撮像素子１０４Ｂの駆動クロック数やフレームレート、各機能ブロックの動作状態／休止状態（非動作状態若しくは低電力での動作状態）に関する設定等を挙げることができる。検出モードの撮像時における駆動クロックやフレームレートを通常モードの撮像時における駆動クロックやフレームレートよりも小さくし、また、動作状態の機能ブロックを極力少なくすることで、検出モードでの撮影における消費電力を通常モードでの撮影における消費電力よりも小さくすることができる。
　撮像素子１０４Ｂが図５に示す構成の場合は、各機能ブロックに対するモード毎の制御は、例えば以下のようになる。
・モードに関係なく、通常通りの電力が供給され動作するブロック・・・システムコントローラ１３１、ＢＩＡＳ１３６
・通常モード時に電力が供給されずに、動作しないブロック（検出モード時のみに動作するブロック）・・・パワー制御部１３２、検出部１３９、リングオシレータ１３４
・検出モード時に電力が供給されずに、動作しないブロック（通常モード時のみに動作するブロック）・・・ＰＬＬ１３５、カメラ信号処理部１４０、出力Ｉ／Ｆ１４１
・検出モード時に、決済用の２次元バーコードを検出できる程度のパラメータが設定されることで、消費電力の最適化が行われるブロック・・・画素アレイ部１２１、クロック生成回路１３３、タイミングジェネレータ１３７、センサＩ／Ｆ１３８
　なお、スマートフォン１００の動作モードが検出モードであるときは、制御部１０１のアプリケーションプロセッサ１０１Ａも動作していない状態（休止状態）となる。これにより、撮像素子１０４Ｂだけでなく、制御部１０１における消費電力も低減できる。
　図６のフローチャートを参照しつつ、スマートフォン１００の具体的な動作例について説明する。
　ステップＳＴ２１では、スマートフォン１００の動作モードを検出モードにする制御が行われる。例えば、スマートフォン１００への操作入力が一定期間なく、ディスプレイ１２がオフした場合や、スマートフォン１００への通常の操作入力（緊急用の操作入力を除く）が受け付けられなくなったロック状態となったことをトリガーとして、検出モードによる撮像が開始される。例えば、制御部１０１は、上述したトリガーが発生した場合に、その旨を撮像素子１０４Ｂのシステムコントローラ１３１に通知する。そして、処理がステップＳＴ２２に進む。
　ステップＳＴ２２では、制御部１０１からの通知を受けたシステムコントローラ１３１が、検出モードによる撮像に必要な機能ブロックを動作状態にし、検出モードによる撮像に不要な機能ブロックを休止状態にする。具体的には、システムコントローラ１３１は、パワー制御部１３２、リングオシレータ１３４、及び、検出部１３９を動作状態にする制御を行う。また、システムコントローラ１３１は、ＰＬＬ１３５、カメラ信号処理部１４０、出力Ｉ／Ｆ１４１を休止状態にする制御を行う。そして、システムコントローラ１３１は、検出モードに対応する撮像パラメータ（例えば、解像度や階調、駆動クロック、フレームレート等）で、画素アレイ部１２１の駆動回路やクロック生成回路１３３、タイミングジェネレータ１３７、センサＩ／Ｆ１３８が動作するように、各部に対して撮像パラメータを設定する。なお、検出モードに対応するパラメータは、例えば、少なくとも決済用２次元バーコードの有無を検出できる程度に予め設定されたパラメータである。検出モードに対応するパラメータで動作する機能ブロックにおける消費電力は、通常モードでの動作時における消費電力よりも小さくてよい。電力供給を小さくする制御は、パワー制御部１３２によって行われる。そして、処理がステップＳＴ２３に進む。
　ステップＳＴ２３では、撮像素子１０４Ｂが検出モード、すなわち、通常モードよりも低消費電力での撮像を行う。本例では、通常モードよりも解像度を小さく（低解像度）、且つ、低フレームレートでの撮像が行われる。係る撮像により画像データが画素アレイ部１２１から読み出され、センサＩ／Ｆ１３８を介して検出部１３９に供給される。そして、処理がステップＳＴ２４に進む。
　ステップＳＴ２４では、検出部１３９が、センサＩ／Ｆ１３８から出力される画像データに、決済用２次元バーコードが含まれているか否かを判断する。検出部１３９による検出処理としては、公知の処理を適用することができる。例えば、検出部１３９は、決済用２次元バーコードの規格上、定義されたパターンが検出された場合には画像データに決済用２次元バーコードが含まれ、当該パターンが検出されない場合には画像データに決済用２次元バーコードが含まれないと判断する。決済用２次元バーコードが検出されない場合は、処理がステップＳＴ２３に戻り、検出モードでの撮像が繰り返される。決済用２次元バーコードが検出された場合は、検出部１３９は、決済用２次元バーコードが検出されたことをシステムコントローラ１３１に通知する。係る通知を受けたシステムコントローラ１３１は、制御部１０１に対して割り込みを送信する。割り込みを受けた制御部１０１は、アプリケーションプロセッサ１０１Ａを休止状態から動作状態にする。そして、処理がステップＳＴ２５に進む。
　ステップＳＴ２５では、スマートフォン１００の動作モード（より詳しくは撮像素子１０４Ｂの動作モード）を検出モードから通常モードに遷移させる制御がシステムコントローラ１３１によって行われる。例えば、システムコントローラ１３１は、カメラ信号処理部１４０及び出力Ｉ／Ｆ１４１を休止状態から動作状態にするとともに、リングオシレータ１３４及び検出部１３９を動作状態から休止状態にする。また、通常モードに対応する撮像パラメータとなるように画素アレイ部１２１の駆動回路やクロック生成回路１３３、タイミングジェネレータ１３７等を制御する。パワー制御部１３２は、システムコントローラ１３１の制御に応じて、通常モードに対応する撮像パラメータでの動作が可能となるように、画素アレイ部１２１の駆動回路やクロック生成回路１３３、タイミングジェネレータ１３７への供給電力を制御する。パワー制御部１３２は、係る電力供給制御を行った後に休止状態となるが、通常モードに遷移後も動作状態を継続していてもよい。そして、処理がステップＳＴ２６に進む。
　ステップＳＴ２６では、撮像素子１０４Ｂが通常モードでの撮像を行う。例えば、撮像素子１０４Ｂは、検出モードの解像度よりも高解像度となるように、通常モードでの撮像を行う。例えば、画素アレイ部１２１に対する読み出し画素を間引かないようにすることで、検出モードで得られる画像データよりも高解像度の画像データを得ることができる。得られた画像データに対してカメラ信号処理部１４０によるカメラ信号処理が行われ、カメラ信号処理が施された画像データが出力Ｉ／Ｆ１４１を介して制御部１０１のアプリケーションプロセッサ１０１Ａに供給される。そして、処理がステップＳＴ２７に進む。
　ステップＳＴ２７では、アプリケーションプロセッサ１０１Ａが、撮像素子１０４Ｂから供給された決済用２次元バーコードの画像データ（高画質の画像データ）に対する認識処理を行う。アプリケーションプロセッサ１０１Ａは、決済用２次元バーコードを認識して所定の決済用アプリケーションを起動する。そして、アプリケーションプロセッサ１０１Ａは、画面表示部１０９等を制御することにより、起動した決済用アプリケーションに対応するＵＩをディスプレイ１２に表示させる。以降、決済用アプリケーションを利用した決済が行われる。
［本実施形態により得られる効果］
　次に、図７のフローチャートを参照しつつ、本実施形態により得られる効果の一例について説明する。ステップＳＴ３１では、スマートフォン１００を携帯するユーザーが、支払い方法を決定する。具体的には、ユーザーは、支払い方法として決済用２次元バーコードを用いた支払い方法を決定する。そして、処理がステップＳＴ３２に進む。
　ステップＳＴ３２では、ユーザーが、ステップＳＴ３１で決定した支払い方法を店員に伝達する。店員は、店舗の端末に決済用２次元バーコードを表示させる。セルフレジなどで決済用２次元バーコードが自動で表示されてもよい。そして、処理がステップＳＴ３３に進む。
　ステップＳＴ３３では、ユーザーがスマートフォン１００を鞄やポケットから取り出す。このとき、スマートフォン１００は、ロック状態やスリープ状態となっていることが多い。本実施形態に係るスマートフォン１００は、例えばロック状態やスリープ状態であっても撮像素子１０４Ｂが検出モードでの撮像を行っている。ユーザーは、スマートフォン１００を２次元バーコードに向けてかざす。例えば、ユーザーは、検出モードで撮像しているスマートフォン１００のリアカメラ１３Ｂを、店舗の端末に表示されている決済用２次元バーコードに向ける。そして、処理がステップＳＴ３４に進む。
　ステップＳＴ３３の操作が行われることで、検出モードの撮像により決済用２次元バーコードが撮像され、決済用２次元バーコードが検出部１３９により検出される。上述したように、決済用２次元バーコードが検出されことに応じて、通常モードでの決済用２次元バーコードの撮像が行われると共に、アプリケーションプロセッサ１０１Ａが休止状態から動作状態に遷移する。アプリケーションプロセッサ１０１Ａが動作をすることで、決済用アプリケーションが自動で起動する。例えば、決済用アプリケーションの実行に応じて制御部１０１の制御によりスマートフォン１００のロック状態が自動で解除される。また、アプリケーションプロセッサ１０１Ａの制御によって、支払金額を入力するＵＩがディスプレイ１２に表示される。そして、処理がステップＳＴ３５に進む。
　ステップＳＴ３５からステップＳＴ３８までの処理は、図１で説明したステップＳＴ８からステップＳＴ１０までの処理と同様である。ステップＳＴ３５では、ユーザーが、スマートフォンに支払金額を入力する。ステップＳＴ３６では、ユーザーがスマートフォンを店員に提示し、ステップＳＴ３５で入力した支払金額を店員に確認してもらう。ステップＳＴ３７では、ユーザーが、ディスプレイに表示された決済を実行するためのアイコンをタップ等することにより、決済を実行する。決済が完了した後、ステップＳＴ３８でユーザーが店員から商品を受け取る。
　このように、従来の２次元バーコードを使用した決済のフロー（図１参照）に比べて、ユーザーがスマートフォン１００を決済用２次元バーコードにかざすだけで、決済用アプリケーションを自動で起動させることができる。具体的には、スマートフォン１００のロックを解除した上で決済用アプリケーションを起動させ、その後に決済用アプリケーションのスキャン機能を実行する操作が不要となる。これにより、決済用２次元バーコードを用いた決済を行う上でユーザーが行うべき操作を簡略化することができる。また、店舗にとっても顧客がスムーズに決済を行うことができるため、決済を待つ顧客が滞留してしまうことを防止できるメリットがある。また、決済操作が簡略化できるため決済用２次元バーコードを用いた決済の利用が一層促進されることになり、決済事業者にとってもメリットがある。
　上述したように、検出モードでの撮像は、低消費電力で行われる。従って、検出モードでの撮像を比較的、長時間にわたって行ったとしても、スマートフォン１００の電池残容量の低下を抑制できる。
＜変形例＞
　以上、本開示の実施形態について具体的に説明したが、本開示の内容は上述した実施形態に限定されるものではなく、本開示の技術的思想に基づく各種の変形が可能である。なお、一実施形態と同一または同質の構成については同一の参照符号を付し、重複した説明を適宜、省略する。
［変形例１］
　例えば、撮像環境の光量の検出結果に応じて、検出モードでの撮像における露出制御（露出補正）が行われてもよい。例えば、図８Ａに示すように露出がアンダーの場合は、図８Ｂに示す適正露出となるように露出制御が行われてもよい。撮像環境の光量は、スマートフォン１００に取り付けられたセンサで測定されてもよいし、検出モードでの撮像により得られた画像データに基づいて測定されてもよい。露出制御の一例としては、露光時間を大きくする制御（露出オーバーの時は小さくする制御）が行われる。これにより、決済用２次元バーコードの検出性能の悪化を抑制できる。露出制御は、好ましくは、撮像素子１０４Ｂ内での処理、具体的には、システムコントローラ１３１によって行われる。
［変形例２］
　上述した一実施形態では、検出モードが一つのモードであったが、検出モードに、撮像に関するパラメータが異なる複数のモードがあってもよい。そして、スマートフォン１００が有する外部センサによるセンシング結果及び検出モードでの撮像により得られる画像データに対する検波結果の少なくとも一方に応じて、複数のモードのうちの何れかが選択され、選択されたモードに対応する撮像パラメータによる撮像が行われるようにしてもよい。
　例えば、検出モードに、撮像領域がＶＧＡ（縦６４０ピクセル×横４８０ピクセル）であるモードと、撮像領域がＱＶＧＡ（縦３２０ピクセル×横２４０ピクセル）であるモードとがあるとする。ここで、図９Ａに示す決済用２次元バーコードまでの距離が２０ｃｍと仮定する。図９Ｂに示すように撮像領域がＶＧＡの場合は２０ｃｍ先の決済用２次元バーコードを認識できる画像データが得られるものの、図９Ｃに示すように撮像領域がＱＶＧＡの場合は、撮像領域がＶＧＡの場合に比べて低消費電力であるものの、２０ｃｍ先の決済用２次元バーコードを認識できる画像データが得られない虞があるとする。
　このような場合に、決済用２次元バーコードまでの距離が測定される。決済用２次元バーコードまでの距離は、例えば、スマートフォン１００に設けられた距離センサで測定される。測定の結果、決済用２次元バーコードまでの距離が２０ｃｍ程度の場合は、撮像領域がＶＧＡ（縦６４０ピクセル×横４８０ピクセル）であるモードでの撮像が行われる。これにより、決済用２次元バーコードの検出性能の悪化を抑制できる。勿論、撮像領域だけでなく、検出モードに、解像度や階調が異なる複数のモードを用意して、各モードを外部センサのセンシング結果等に応じて適応的に切り替えるようにしてもよい。モードの切り替えは、撮像素子１０４Ｂのシステムコントローラ１３１により自律的に行われるようにしてもよいし、制御部１０１からのコマンドに応じて行われるようにしてもよい。
［変形例３］
　本変形例では、検出モードとして決済用２次元バーコードの検出性能が異なる複数のモードを用意する。これらの複数のモードは、検出性能は異なるものの、通常モードの撮像での消費電力に比べて低消費電力での撮像を行うモードである。検出性能が高いモードでは、検出性能が高くなるように撮像パラメータが設定される。例えば、解像度や階調が大きい値に設定される。検出性能が低いモードでは、検出性能が低くなるように撮像に関するパラメータが設定される。例えば、解像度や階調が小さい値に設定される。本変形例では、検出モードでの撮像が行われている際に、所定のトリガーに応じて、検出性能が低いモードから検出性能の高いモードへ遷移させる制御が行われ、遷移後のモードによる撮像により、決済用２次元バーコードの検出が行われる。所定のトリガーは、例えば、ユーザーによる操作である。以上の制御は、例えば、撮像素子１０４Ｂのシステムコントローラ１３１により行われる。
　例えば、図１０Ａに示すように、検出モードで撮像を行っているスマートフォン１００を決済用２次元バーコードにかざす。検出モードの撮像であっても、決済用２次元バーコードを検出できる程度に撮像に関するパラメータが設定されており、本来であれば、図１０Ａの状態で決済用アプリケーションが自動で起動される。しかしながら、周囲の光量不足やスマートフォン１００を向ける方向が不適切である等の理由によって、決済用２次元バーコードを検出できない場合があり、スマートフォン１００が反応しない虞がある。
　このような場合、ユーザーが所定の操作（図１０Ｂの例では、スマートフォン１００を振る操作）を行う。係る操作が制御部１０１により検出され、検出結果がシステムコントローラ１３１に通知される。システムコントローラ１３１は、例えば、動作モードを現在の検出性能より検出性能が高いモードに遷移させる制御を行い、遷移後のモードに対応する撮像パラメータを各部に設定する。これにより、決済用２次元バーコードの検出性能が向上することから、図１０Ｃに示すように決済用２次元バーコードを検出することができる。決済用２次元バーコードが検出できたことから、一実施形態と同様に、決済用アプリケーションを自動で起動することができる。
　例えば、始めは消費電力の点で優位である検出性能が最も低いモードを検出モードとした撮像が行われる。係る撮像で決済用２次元バーコードを検出できない場合は、ユーザーの操作に応じて検出性能がより高いモードを検出モードとした撮像が行われる。これにより、検出モードの撮像における消費電力を効果的に抑制しつつ、決済用２次元バーコードが検出できずに決済用アプリケーションが起動しない事態を回避することができる。なお、所定の操作は、スマートフォン１００を振る以外の操作であってもよいし、スマートフォン１００に対する音声入力であってもよい。
［変形例４］
　近年、図１１Ａ及び図１１Ｂに示すように、決済用２次元バーコードには、企業のロゴが含まれる場合がある。図１１Ａでは係る企業のロゴが「ＡＡ」として示され、図１１Ｂでは係る企業のロゴが「ＢＢ」として示されている。このように、決済用２次元バーコードに含まれる企業のロゴ等の情報が検出されてもよい。係る企業のロゴ等の検出は、例えば、アプリケーションプロセッサ１０１Ａにより行われる。すなわち、検出モードで決済用２次元バーコードが検出された後に、通常モードで決済用２次元バーコードが撮像される。この撮像により得られる画像データに基づいてアプリケーションプロセッサ１０１Ａが企業のロゴを認識する。そして、アプリケーションプロセッサ１０１Ａは、複数の決済用アプリケーションがスマートフォン１００内に格納されている場合に、認識した企業に対応する決済用アプリケーションを起動させる。本変形例によれば、スマートフォン１００に複数の決済用アプリケーションがインストールされている場合であっても、ユーザーが選択することなく、決済用２次元バーコードに含まれる企業に対応する決済用アプリケーションを自動で起動することができる。
［その他の変形例］
　一実施形態では、所定のオブジェクトとして決済用２次元バーコードを例にして説明したが、これに限定されることはない。例えば、所定のオブジェクトが２次元バーコードを含まない企業のロゴであってもよい。そして、検出モードによる撮像の結果、企業のロゴが検出された場合には、当該企業に関連する情報（例えば、クーポンや新製品に関する情報）がディスプレイ１２に表示されるようにしてもよい。
　検出モードの撮像により決済用２次元バーコードが検出され、決済用アプリケーションが自動で起動される際に、上述した一実施形態では、ロック状態が解除されるようにしたが、ロック状態が解除されなくてもよい。この場合は、ユーザーがロック状態を解除するパスワードを入力した後に決済用アプリケーションが自動で起動されるようにしてもよい。決済用アプリケーションが自動で起動される際に、ロック状態を解除するか否かをユーザーが設定できるようにしてもよい。
　検出モードによる撮像を行うタイミングは、適宜、変更可能である。例えば、ユーザーが決済アプリケーションを利用した履歴を学習することにより、検出モードによる撮像を行う期間や場所が自動で設定されてもよい。また、検出モードによる撮像を行うタイミングや時間、場所をユーザーが設定できるようにしてもよい。これにより、検出モードによる撮像が不必要に行われることを防止できる。また、検出モードによる撮像を行うサービスに対する制御権をユーザーが持つことは、プライバシーの観点からも有意である。
　なお、本明細書に記載された効果はあくまで例示であって、限定されるものではなく、また、他の効果があってもよい。
　なお、本開示は以下のような構成もとることができる。
（１）
　第１のモード又は当該第１のモードよりも消費電力が小さい第２のモードで撮像を行う撮像素子を有し、
　前記撮像素子は、前記第２のモードでの撮像に応じて所定のオブジェクトが検出された場合に、前記所定のオブジェクトに対して前記第１のモードでの撮像を行う
　電子機器。
（２）
　前記第１のモードでの撮像により得られる画像データに基づいて、前記所定のオブジェクトに対応するアプリケーションを実行するアプリケーションプロセッサを有する
　（１）に記載の電子機器。
（３）
　前記アプリケーションプロセッサは、前記第２のモードでの撮像が行われる間は休止状態とされる
　（２）に記載の電子機器。
（４）
　前記所定のオブジェクトが検出された場合に、前記アプリケーションプロセッサを前記休止状態から動作状態へと遷移させる割り込みが、前記撮像素子から前記アプリケーションプロセッサに対して出力される
　（３）に記載の電子機器。
（５）
　前記アプリケーションの実行に応じて、操作入力を受け付けないロック状態が解除される
　（２）から（４）までの何れかに記載の電子機器。
（６）
　ディスプレイを有し、
　少なくとも前記ディスプレイがオフされるスリープ状態で、前記撮像素子による前記第２のモードでの撮像が行われる
　（１）から（５）までの何れかに記載の電子機器。
（７）
　前記第２のモードの撮像に関する撮像パラメータを、前記第１のモードの撮像に関する撮像パラメータよりも小さくすることにより、前記第２のモードの消費電力が前記第１のモードの消費電力よりも小さくなる
　（１）から（６）までの何れかに記載の電子機器。
（８）
　前記撮像パラメータには、解像度、色の階調、撮像領域、フレームレートの少なくとも一つが含まれる
　（７）に記載の電子機器。
（９）
　撮像環境の光量の検出結果に応じて、前記第２のモードでの撮像における露出制御が行われる
　（１）から（８）までの何れかに記載の電子機器。
（１０）
　前記第２のモードには、撮像に関する撮像パラメータが異なる複数のモードが含まれ、
　外部センサによるセンシング結果及び前記第２のモードでの撮像により得られる画像データに対する検波結果の少なくとも一方に応じて前記複数のモードのうちの何れかが選択され、前記選択されたモードに対応する撮像パラメータによる撮像が行われる
　（１）から（８）までの何れかに記載の電子機器。
（１１）
　前記第２のモードは、撮像に関する撮像パラメータが異なることで、前記所定のオブジェクトに対する検出性能が異なる複数のモードを含み、
　所定のトリガーに応じて、前記検出性能が低いモードから前記検出性能が高いモードへ遷移させる制御がなされる
　（１）から（８）までの何れかに記載の電子機器。
（１２）
　前記所定のオブジェクトは、２次元バーコードであり、
　前記アプリケーションは、決済を行うアプリケーションである
　（２）から（５）までの何れかに記載の電子機器。
（１３）
　前記所定のオブジェクトは、企業のロゴであり、
　前記アプリケーションは、前記企業に関連するアプリケーションである
　（２）から（５）までの何れかに記載の電子機器。
（１４）
　撮像素子が、第１の動作モード又は当該第１のモードよりも消費電力が小さい第２のモードで撮像を行い、
　前記撮像素子は、前記第２のモードでの撮像に応じて所定のオブジェクトが検出された場合に、前記所定のオブジェクトに対して前記第１のモードでの撮像を行う
　制御方法。
（１５）
　撮像素子が、第１の動作モード又は当該第１のモードよりも消費電力が小さい第２のモードで撮像を行い、
　前記撮像素子は、前記第２のモードでの撮像に応じて所定のオブジェクトが検出された場合に、前記所定のオブジェクトに対して前記第１のモードでの撮像を行う
　制御方法をコンピュータに実行させるプログラム。
１２・・・ディスプレイ
１００・・・スマートフォン
１０１・・・制御部
１０１Ａ・・・アプリケーションプロセッサ
１０４Ｂ・・・撮像素子
１０４Ｃ・・・信号処理回路
１３９・・・検出部

Claims (15)

  1. 　第１のモード又は当該第１のモードよりも消費電力が小さい第２のモードで撮像を行う撮像素子を有し、
    　前記撮像素子は、前記第２のモードでの撮像に応じて所定のオブジェクトが検出された場合に、前記所定のオブジェクトに対して前記第１のモードでの撮像を行う
    　電子機器。
  2. 　前記第１のモードでの撮像により得られる画像データに基づいて、前記所定のオブジェクトに対応するアプリケーションを実行するアプリケーションプロセッサを有する
    　請求項１に記載の電子機器。
  3. 　前記アプリケーションプロセッサは、前記第２のモードでの撮像が行われる間は休止状態とされる
    　請求項２に記載の電子機器。
  4. 　前記所定のオブジェクトが検出された場合に、前記アプリケーションプロセッサを前記休止状態から動作状態へと遷移させる割り込みが、前記撮像素子から前記アプリケーションプロセッサに対して出力される
    　請求項３に記載の電子機器。
  5. 　前記アプリケーションの実行に応じて、操作入力を受け付けないロック状態が解除される
    　請求項２に記載の電子機器。
  6. 　ディスプレイを有し、
    　少なくとも前記ディスプレイがオフされるスリープ状態で、前記撮像素子による前記第２のモードでの撮像が行われる
    　請求項１に記載の電子機器。
  7. 　前記第２のモードの撮像に関する撮像パラメータを、前記第１のモードの撮像に関する撮像パラメータよりも小さくすることにより、前記第２のモードの消費電力が前記第１のモードの消費電力よりも小さくなる
    　請求項１に記載の電子機器。
  8. 　前記撮像パラメータには、解像度、色の階調、撮像領域、フレームレートの少なくとも一つが含まれる
    　請求項７に記載の電子機器。
  9. 　撮像環境の光量の検出結果に応じて、前記第２のモードでの撮像における露出制御が行われる
    　請求項１に記載の電子機器。
  10. 　前記第２のモードには、撮像に関する撮像パラメータが異なる複数のモードが含まれ、
    　外部センサによるセンシング結果及び前記第２のモードでの撮像により得られる画像データに対する検波結果の少なくとも一方に応じて前記複数のモードのうちの何れかが選択され、前記選択されたモードに対応する撮像パラメータによる撮像が行われる
    　請求項１に記載の電子機器。
  11. 　前記第２のモードは、撮像に関する撮像パラメータが異なることで、前記所定のオブジェクトに対する検出性能が異なる複数のモードを含み、
    　所定のトリガーに応じて、前記検出性能が低いモードから前記検出性能が高いモードへ遷移させる制御がなされる
    　請求項１に記載の電子機器。
  12. 　前記所定のオブジェクトは、２次元バーコードであり、
    　前記アプリケーションは、決済を行うアプリケーションである
    　請求項２に記載の電子機器。
  13. 　前記所定のオブジェクトは、企業のロゴであり、
    　前記アプリケーションは、前記企業に関連するアプリケーションである
    　請求項２に記載の電子機器。
  14. 　撮像素子が、第１の動作モード又は当該第１のモードよりも消費電力が小さい第２のモードで撮像を行い、
    　前記撮像素子は、前記第２のモードでの撮像に応じて所定のオブジェクトが検出された場合に、前記所定のオブジェクトに対して前記第１のモードでの撮像を行う
    　制御方法。
  15. 　撮像素子が、第１の動作モード又は当該第１のモードよりも消費電力が小さい第２のモードで撮像を行い、
    　前記撮像素子は、前記第２のモードでの撮像に応じて所定のオブジェクトが検出された場合に、前記所定のオブジェクトに対して前記第１のモードでの撮像を行う
    　制御方法をコンピュータに実行させるプログラム。
PCT/JP2022/043926 2021-12-23 2022-11-29 電子機器、制御方法及びプログラム WO2023120060A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2023569216A JPWO2023120060A1 (ja) 2021-12-23 2022-11-29

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2021209288 2021-12-23
JP2021-209288 2021-12-23

Publications (1)

Publication Number Publication Date
WO2023120060A1 true WO2023120060A1 (ja) 2023-06-29

Family

ID=86902310

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2022/043926 WO2023120060A1 (ja) 2021-12-23 2022-11-29 電子機器、制御方法及びプログラム

Country Status (2)

Country Link
JP (1) JPWO2023120060A1 (ja)
WO (1) WO2023120060A1 (ja)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021057721A (ja) * 2019-09-30 2021-04-08 レノボ・シンガポール・プライベート・リミテッド 情報処理装置、及び制御方法
JP2021524203A (ja) * 2018-05-22 2021-09-09 維沃移動通信有限公司Ｖｉｖｏ Ｍｏｂｉｌｅ Ｃｏｍｍｕｎｉｃａｔｉｏｎ Ｃｏ．， Ｌｔｄ． 対象物認識方法及び移動端末

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021524203A (ja) * 2018-05-22 2021-09-09 維沃移動通信有限公司Ｖｉｖｏ Ｍｏｂｉｌｅ Ｃｏｍｍｕｎｉｃａｔｉｏｎ Ｃｏ．， Ｌｔｄ． 対象物認識方法及び移動端末
JP2021057721A (ja) * 2019-09-30 2021-04-08 レノボ・シンガポール・プライベート・リミテッド 情報処理装置、及び制御方法

Also Published As

Publication number Publication date
JPWO2023120060A1 (ja) 2023-06-29

Similar Documents

Publication Publication Date Title
US11330194B2 (en) Photographing using night shot mode processing and user interface
US10416748B2 (en) Method and apparatus for controlling an operation mode of a mobile terminal
KR101818573B1 (ko) 얼굴 인식을 이용한 보기모드 표시 방법 및 장치
US11606501B2 (en) Electronic device and image control method of the electronic device
KR102497515B1 (ko) 디스플레이 패널을 통해 표시되는 콘텐트의 저장을 제어하기 위한 전자 장치 및 방법
CN106210532B (zh) 一种拍照处理方法及终端设备
CN109829864A (zh) 图像处理方法、装置、设备及存储介质
US8570431B2 (en) Mobile electronic device having camera
US20100283582A1 (en) Wireless Communication Apparatus
WO2011132757A1 (ja) 撮影装置及び撮影方法及びプログラム
EP4096218A1 (en) Video recording method using plurality of cameras, and device therefor
US12106004B2 (en) Screen display method and apparatus, electronic device, and computer storage medium
EP3816768A1 (en) Object recognition method and mobile terminal
US20100207886A1 (en) Apparatus and method for reducing battery power consumption in a portable terminal
WO2023120060A1 (ja) 電子機器、制御方法及びプログラム
KR20130093962A (ko) 휴대 단말기등의 디스플레이부에서 사용자 편의성을 고려하여 안면 인식을 이용한 소비 전력 저감 방법 및 장치
JP2008060815A (ja) 携帯型電子機器、画像データ出力装置、および、プログラム
US20200412863A1 (en) Immediate-mode camera for portable personal electronic devices
CN112437284A (zh) 一种投影画面校正方法、终端设备及显示设备
WO2023142959A1 (zh) 多机位拍摄系统的拍摄方法、设备、存储介质和程序产品
CN116700477B (zh) 一种显示方法和电子设备
JP2002062957A (ja) 情報処理装置、及び制御方法
CN115798418A (zh) 图像显示方法、装置、终端及存储介质
CN110175836B (zh) 支付界面的显示控制方法和移动终端
WO2024152741A1 (zh) 屏幕控制的方法和电子设备

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 22910778

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2023569216

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE