JP2021028760A

JP2021028760A - 電子機器およびその制御方法

Info

Publication number: JP2021028760A
Application number: JP2019147447A
Authority: JP
Inventors: 知宏太田; Tomohiro Ota
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 2019-08-09
Filing date: 2019-08-09
Publication date: 2021-02-25
Also published as: US11138402B2; US20210042485A1

Abstract

【課題】読取装置が二次元コードを読み取る際の、読取装置を遠ざけたり近づけたりする操作を減らすことができる。【解決手段】スマートフォン１００において、第１の撮像手段と、第１の撮像手段とは焦点距離の異なる第２の撮像手段と、撮像された画像に含まれる光学コード画像から情報を読み取る読取手段と、第１の撮像手段で撮像された画像から読取手段によって光学コード画像に基づく情報を読み取ることができた場合は、読み取った情報に応じた処理を実行し、第１の撮像手段で撮像された画像から読取手段によって光学コード画像に基づく情報を読み取ることができなかった場合は、第２の撮像手段で撮像された画像から読取手段によって光学コード画像に基づく情報を読み取り、読み取った情報に応じた処理を実行するように制御する制御手段と、を有する。【選択図】図２

Description

本発明は、複数の撮像手段によって、二次元コードのような光学コード情報を認識することが可能な電子機器および電子機器の制御方法に関するものである。

従来、広告や取扱説明書、工場での生産管理などに光学コード情報である二次元コードが印刷、表示され、ユーザーが二次元コードを読み取ることで、Ｗｅｂページや詳細情報へのアクセスができるようなものが知られている。また近年では、スマートフォンを用いた決済方法の一つとして、二次元コードを用いた電子決済が広く知られるようになった。特許文献１には、バーコード（一次元コード）を読み取る際に、読取装置で撮影されているバーコードの大きさに応じてレンズを駆動し、光学ズームの倍率を切り替えることが開示されている。

特開平１０−１３４１３３

しかし特許文献１では、レンズ駆動による光学ズームを行うことで適正な大きさでバーコードを撮影できる距離までは、バーコードと読取装置との距離をユーザーが調節する必要がある。また、読取装置に光学的なレンズ駆動を行うことができる機構を搭載しようとするとある程度の大きさの読取装置が必要になり、小型の読取装置に搭載することは難しい。そのため、従来の読取装置でバーコードを読み取る際に、読取装置とバーコードが近すぎたり遠すぎたりする場合に、読取装置がバーコードを読み取ることができる位置まで、ユーザーが読取装置を遠ざけたり近づけたりしなければならないことがあった。

そこで本発明は、読取装置が光学コード画像を読み取る際に、ユーザーが読取装置を遠ざけたり近づけたりする操作を減らすことを目的とする。

上記目的を達成するために、本発明は、
第１の撮像手段と、
前記第１の撮像手段とは焦点距離の異なる第２の撮像手段と、
撮像された画像に含まれる光学コード画像から情報を読み取る読取手段と、
前記第１の撮像手段で撮像された画像から前記読取手段によって前記光学コード画像に基づく情報を読み取ることができた場合は、読み取った情報に応じた処理を実行し、
前記第１の撮像手段で撮像された画像から前記読取手段によって前記光学コード画像に基づく情報を読み取ることができなかった場合は、
前記第２の撮像手段で撮像された画像から前記読取手段によって前記光学コード画像に基づく情報を読み取り、読み取った情報に応じた処理を実行するように制御する制御手段とを有することを特徴とする。

本発明によれば、読取装置が光学コード画像を読み取る際に、ユーザーが読取装置を遠ざけたり近づけたりする操作を減らすことができる。

本発明の実施形態である、スマートフォンの外観図である。本発明の実施形態である、スマートフォンの構成を示すブロック図である。本発明の実施形態における、スマートフォンのディスプレイに表示される表示例である。本発明の第１の実施形態における、二次元コード読み取りの制御処理フローチャートである。本発明の第２の実施形態における、二次元コード読み取りの制御処理フローチャートである。二次元コードの１つである、ＱＲコード（登録商標）の表示例である。

以下、図面を参照して本発明の好適な実施形態を説明する。

図１（ａ）（ｂ）に本発明を適用可能な装置（電子機器）の一例としてのスマートフォン１００の外観図を示す。図１（ａ）はスマートフォン１００の前面図であり、図１（ｂ）はスマートフォン１００の背面図である。図１において、ディスプレイ１０５は画像や各種情報を表示する、スマートフォン前面に設けられた表示部である。タッチパネル１０６ａはタッチ操作部材であり、ディスプレイ１０５の表示面（操作面）に対するタッチ操作を検出することができる。スマートフォン１００は、アウトカメラ１１４、もしくは、インカメラ１１５で撮影したライブビュー画像（ＬＶ画像）をディスプレイ１０５に表示することが可能である。アウトカメラ１１４は後述する、望遠カメラ１１４ａ、標準カメラ１１４ｂ、超広角カメラ１１４ｃを含む。電源ボタン１０６ｂは操作部１０６に含まれる操作部材であり、ディスプレイ１０５の点灯／消灯を切り替えることができる。ある程度の時間、例えば３秒間、電源ボタン１０６ｂの押下を継続（長押し）するとスマートフォン１００の電源のＯＮ／ＯＦＦを切り替えることができる。音量プラスボタン１０６ｃ、音量マイナスボタン１０６ｄは音声出力部１１２から出力する音量のボリュームをコントロールする音量ボタンである。音量プラスボタン１０６ｃを押下すると音量が大きくなり、音量マイナスボタン１０６ｄを押下すると音量が小さくなる。また、カメラ使用時の撮影待機状態においては、音量プラスボタン１０６ｃや音量マイナスボタン１０６ｄを押下することで撮影を指示するシャッターボタンとしても機能する。電源ボタン１０６ｂと音量マイナスボタン１０６ｄを同時に押下したり、音量マイナスボタン１０６ｄを素早く数回押下したりした場合に、特定の機能を実行するように、ユーザーが任意に設定することもできる。ホームボタン１０６ｅはディスプレイ１０５にスマートフォン１００の起動画面であるホーム画面を表示させるための操作ボタンである。スマートフォン１００において様々なアプリケーションを起動し、使用していた場合に、ホームボタン１０６ｅを押下することで、起動している様々なアプリケーションを一時的に閉じて、ホーム画面を表示することができる。なお、ホームボタン１０６ｅは物理的に押下可能なボタンを想定しているが、物理ボタンではなくディスプレイ１０５に表示された同様に機能を持った、タッチ可能なボタンでもよい。音声出力端子１１２ａはイヤホンジャックであり、イヤホンや外部スピーカーなどに音声を出力する端子である。スピーカー１１２ｂは音声を出す本体内蔵のスピーカーである。音声出力端子１１２ａに音声を出力する端子、例えばイヤホンコードを装着していない場合に、スマートフォン１００において音声が出力されるような場合には、スピーカー１１２ｂから音声が出力される。

図２は、本実施形態によるスマートフォン１００の構成例を示すブロック図である。内部バス１５０に対してＣＰＵ１０１、メモリ１０２、不揮発性メモリ１０３、アウトカメラ画像処理部１０４、ディスプレイ１０５、操作部１０６、記憶媒体Ｉ／Ｆ１０７、外部Ｉ／Ｆ１０９、及び、通信Ｉ／Ｆ１１０が接続されている。また、内部バス１５０に対して音声出力部１１２、姿勢検出部１１３、アウトカメラ１１４、インカメラ１１５、インカメラ画像処理部１１６も接続されている。内部バス１５０に接続される各部は、内部バス１５０を介して互いにデータのやりとりを行うことができるようにされている。

ＣＰＵ１０１は、スマートフォン１００の全体を制御する制御部であり、少なくとも１つのプロセッサーまたは回路からなる。メモリ１０２は、例えばＲＡＭ（半導体素子を利用した揮発性のメモリなど）からなる。ＣＰＵ１０１は、例えば不揮発性メモリ１０３に格納されるプログラムに従い、メモリ１０２をワークメモリとして用いて、スマートフォン１００の各部を制御する。不揮発性メモリ１０３には、画像データや音声データ、その他のデータ、ＣＰＵ１０１が動作するための各種プログラムなどが格納される。不揮発性メモリ１０３は例えばフラッシュメモリやＲＯＭなどで構成される。

アウトカメラ画像処理部１０４は、ＣＰＵ１０１の制御に基づいて、アウトカメラ１１４で撮影した画像に対して各種画像処理や被写体認識処理を施す。望遠カメラ１１４ａ、標準カメラ１１４ｂ、超広角カメラ１１４ｃのそれぞれに望遠カメラ画像処理部１０４ａ、標準カメラ画像処理部１０４ｂ、超広角カメラ画像処理部１０４ｃがある。それぞれの画像処理部が、それぞれのカメラが撮影した画像に対して処理を施す。なお、本実施形態では３つのアウトカメラの１つ１つが画像処理部を持つような構成にしたが、必ずしも全てが個別である必要はなく、いずれか２つのカメラが１つの画像処理部を共有してもよいし、３つのカメラが画像処理部を共有してもよい。同様に、インカメラ画像処理部１１６はインカメラ１１５で撮影した画像の処理を担う。各画像処理部は、不揮発性メモリ１０３や記憶媒体１０８に格納された画像や、外部Ｉ／Ｆ１０９を介して取得した映像信号、通信Ｉ／Ｆ１１０を介して取得した画像などに対して各種画像処理を施すこともできる。各画像処理部が行う画像処理には、Ａ／Ｄ変換処理、Ｄ／Ａ変換処理、画像データの符号化処理、圧縮処理、デコード処理、拡大／縮小処理（リサイズ）、ノイズ低減処理、色変換処理などが含まれる。各画像処理部は、特定の画像処理を施すための専用の回路ブロックで構成してもよい。また、アウトカメラ画像処理部１０４は、後述する二次元コードの特徴を検出し、その所在を判定し、二次元コードが保有する情報を読み取る、という一連の処理であるデコード処理を行うことも可能である。デコード処理については、ＱＲコードの説明の部分で後述する。アウトカメラ画像処理部１０４は、１つの処理ブロックに統合され、それぞれのカメラによる画像を並列処理や時分割処理によって一手に担う構成であってもよい。また、画像処理の種別によっては各画像処理部を用いずにＣＰＵ１０１がプログラムに従って画像処理を施すことも可能である。

ディスプレイ１０５は、ＣＰＵ１０１の制御に基づいて、画像やＧＵＩ（ＧｒａｐｈｉｃａｌＵｓｅｒＩｎｔｅｒｆａｃｅ）を構成するＧＵＩ画面などを表示する。ＣＰＵ１０１は、プログラムに従い表示制御信号を生成し、ディスプレイ１０５に表示するための映像信号を生成してディスプレイ１０５に出力するようにスマートフォン１００の各部を制御する。ディスプレイ１０５は出力された映像信号に基づいて映像を表示する。なお、スマートフォン１００自体が備える構成としてはディスプレイ１０５に表示させるための映像信号を出力するためのインターフェースまでとし、ディスプレイ１０５は外付けのモニタ（テレビなど）で構成してもよい。

操作部１０６は、キーボードなどの文字情報入力デバイスや、マウスやタッチパネルといったポインティングデバイス、ボタン、ダイヤル、ジョイスティック、タッチセンサ、タッチパッドなどを含む、ユーザー操作を受け付けるための入力デバイスである。なお、タッチパネルは、ディスプレイ１０５に重ね合わせて平面的に構成され、接触された位置に応じた座標情報が出力されるようにした入力デバイスである。操作部１０６には、上述した、タッチパネル１０６ａ、電源ボタン１０６ｂ、音量プラスボタン１０６ｃ、音量マイナスボタン１０６ｄ、ホームボタン１０６ｅが含まれる。

記憶媒体Ｉ／Ｆ１０７は、メモリーカードやＣＤ、ＤＶＤといった記憶媒体１０８が装着可能とされ、ＣＰＵ１０１の制御に基づき、装着された記憶媒体１０８からのデータの読み出しや、当該記憶媒体１０８に対するデータの書き込みを行う。記憶媒体１０８は、スマートフォン１００内に組み込まれた内蔵ストレージでもよい。外部Ｉ／Ｆ１０９は、外部機器と有線ケーブルや無線によって接続し、映像信号や音声信号の入出力を行うためのインターフェースである。通信Ｉ／Ｆ１１０は、外部機器やインターネット１１１などと通信して、ファイルやコマンドなどの各種データの送受信を行うためのインターフェースである。

音声出力部１１２は、動画や音楽データの音声や、操作音、着信音、各種通知音などを出力する。音声出力部１１２には、イヤホンなどを接続する音声出力端子１１２ａ、スピーカー１１２ｂが含まれるものとするが、無線通信などで音声出力を行ってもよい。

姿勢検出部１１３は、重力方向に対するスマートフォン１００の姿勢や、ヨー、ロール、ピッチの各軸に対する姿勢の傾きを検知する。姿勢検出部１１３で検知された姿勢に基づいて、スマートフォン１００が横に保持されているか、縦に保持されているか、上に向けられたか、下に向けられたか、斜めの姿勢になったかなどを判別可能である。姿勢検出部１１３としては、加速度センサー、ジャイロセンサー、地磁気センサー、方位センサー、高度センサーなどのうち少なくとも１つを用いることができ、複数を組み合わせて用いることも可能である。

アウトカメラ１１４はスマートフォン１００の筐体において、ディスプレイ１０５とは反対の側に配置されたカメラである。望遠カメラ１１４ａの焦点距離は標準カメラ１１４ｂの焦点距離よりも長く、標準カメラ１１４ｂよりも、より望遠側を撮影することができる。超広角カメラ１１４ｃの焦点距離は、標準カメラ１１４ｂの焦点距離よりも短く、標準カメラ１１４ｂよりも、より広角に撮影できる。すなわち、望遠カメラ１１４ａ、標準カメラ１１４ｂ、超広角カメラ１１４ｃの順に焦点距離が短くなり、それに伴い画角も狭くなる。本実施形態では、望遠カメラ１１４ａはあらかじめ決められた倍率に光学的に等倍される機構のレンズを想定しているが、ユーザーによって倍率を可変できるような機構としてもよい。インカメラ１１５は、スマートフォン１００の筐体においてディスプレイ１０５と同じ面に配置されたカメラである。望遠カメラ１１４ａ、標準カメラ１１４ｂ、超広角カメラ１１４ｃは３つ同時に撮影動作を行うことができる。なお、３つのアウトカメラを同時に撮影動作行えることを上述したが、必ずしも３つすべてのカメラが同時に動作する必要はなく、３つのうちいずれか２つのカメラを動作するようにしてもよいし、１つのカメラが単独で動作することもできる。アウトカメラ１１４およびインカメラ１１５で撮影したライブビュー映像は、いずれもディスプレイ１０５上に表示することができる。タッチパネル１０６ａの操作によって、どのカメラで撮影した映像をディスプレイ１０５上で表示するかを選択することができる。すなわち、望遠カメラ１１４ａを選択すれば、標準カメラ１１４ｂよりもより拡大された画像をディスプレイ１０５に表示することができる。標準カメラ１１４ｂを選択すれば、望遠カメラ１１４ａよりも広角で、超広角カメラ１１４ｃよりも拡大された画像を表示することができる。超広角カメラ１１４ｃを選択すれば、望遠カメラ１１４ａと標準カメラ１１４ｂの両方よりも広角の画像を表示することができる。もしくは、アウトカメラ１１４とインカメラ１１５のどちらを利用するかによって、眼前の光景を撮影するか、撮影者自身を自分撮り撮影するかを選択することができる。

なお操作部１０６には、タッチパネル１０６ａが含まれる。ＣＰＵ１０１はタッチパネル１０６ａへの以下の操作、あるいは状態を検出できる。
・タッチパネル１０６ａにタッチしていなかった指やペンが新たにタッチパネル１０６ａにタッチしたこと、すなわち、タッチの開始（以下、タッチダウン（Ｔｏｕｃｈ−Ｄｏｗｎ）と称する。）
・タッチパネル１０６ａを指やペンがタッチしている状態であること（以下、タッチオン（Ｔｏｕｃｈ−Ｏｎ）と称する）
・指やペンがタッチパネル１０６ａをタッチしたまま移動していること（以下、タッチムーブ（Ｔｏｕｃｈ−Ｍｏｖｅ）と称する）
・タッチパネル１０６ａへタッチしていた指やペンがタッチパネル１０６ａから離れたこと、すなわち、タッチの終了（以下、タッチアップ（Ｔｏｕｃｈ−Ｕｐ）と称する）
・タッチパネル１０６ａに何もタッチしていない状態（以下、タッチオフ（Ｔｏｕｃｈ−Ｏｆｆ）と称する）

タッチダウンが検出されると、同時にタッチオンも検出される。タッチダウンの後、タッチアップが検出されない限りは、通常はタッチオンが検出され続ける。タッチムーブが検出された場合も、同時にタッチオンが検出される。タッチオンが検出されていても、タッチ位置が移動していなければタッチムーブは検出されない。タッチしていた全ての指やペンがタッチアップしたことが検出されると、タッチオフが検出される。

これらの操作・状態や、タッチパネル１０６ａ上に指やペンがタッチしている位置座標は内部バスを通じてＣＰＵ１０１に通知される。ＣＰＵ１０１は通知された情報に基づいてタッチパネル１０６ａ上にどのような操作（タッチ操作）が行なわれたかを判定する。タッチムーブについてはタッチパネル１０６ａ上で移動する指やペンの移動方向についても、位置座標の変化に基づいて、タッチパネル１０６ａ上の垂直成分・水平成分毎に判定できる。所定距離以上をタッチムーブしたことが検出された場合はスライド操作が行なわれたと判定するものとする。タッチパネル１０６ａ上に指をタッチしたままある程度の距離だけ素早く動かして、そのまま離すといった操作をフリックと呼ぶ。フリックは、言い換えればタッチパネル１０６ａ上を指ではじくように素早くなぞる操作である。所定距離以上を、所定速度以上でタッチムーブしたことが検出され、そのままタッチアップが検出されるとフリックが行なわれたと判定できる（スライド操作に続いてフリックがあったものと判定できる）。更に、複数箇所（例えば２点）を同時にタッチして、互いのタッチ位置を近づけるタッチ操作をピンチイン、互いのタッチ位置を遠ざけるタッチ操作をピンチアウトと称する。ピンチアウトとピンチインを総称してピンチ操作（あるいは単にピンチ）と称する。タッチパネル１０６ａは、抵抗膜方式や静電容量方式、表面弾性波方式、赤外線方式、電磁誘導方式、画像認識方式、光センサー方式等、様々な方式のタッチパネルのうちいずれの方式のものを用いてもよい。タッチパネルに対する接触があったことでタッチがあったと検出する方式や、タッチパネルに対する指やペンの接近があったことでタッチがあったと検出する方式があるが、いずれの方式でもよい。

二次元コードとは、横方向にしか情報を持たない一次元コード、例えばバーコード、に対し、水平方向と垂直方向に情報を持つ表示方式のコードのことを指す。主な二次元コードとして、マトリックス式とスタック式があり、マトリックス式ではＱＲコード（登録商標）、スタック式ではＰＤＦ４１７が代表的なものとしてあげられる。二次元コードは、一次元コードに対して多くの情報を持つことができ、特にＱＲコードは数字だけでなく、英字や漢字などの多言語のデータを格納することができる。また、ＱＲコードはイメージセンサで読み取りが可能であるため、他の二次元コードのように専用の読み取り装置が必ずしも必要ではなく、携帯電話やスマートフォンなどが有する撮像手段であるカメラで容易に読み取ることができる。

ＱＲコードは上述したようにマトリックス式の二次元コードであり、図６に示すように、小さな正方形であるセル６０２を上下左右に配列することによって形成されるパターン画像である。数字や英字、漢字などの様々な記号に対してエンコード処理を行い、セル６０２とその配列の組み合わせでＱＲコードを作成する。正方形の３隅に切り出しシンボルと呼ばれる、シンボル６０１のようなパターンを配置しており、この切り出しシンボルによりＱＲコードであることを認識する。具体的には、撮影した画像から、シンボル６０１の切り出しシンボルを検出し、検出されたシンボル６０１に基づいてＱＲコードのサイズを検出する。検出したＱＲコードのサイズ内の、セル６０２が形成するセルの分布パターンを検出し、この分布パターンを解読することで、ＱＲコードが保有する情報の読み取りを行う。画像からシンボル６０１の切り出しシンボルを探し、セルの分布パターンを検出し、情報を読み取るまでの一連の処理を、デコード処理と呼ぶ。

切り出しシンボルであるシンボル６０１に基づいて、ＣＰＵ１０１は、ＱＲコードの認識やサイズ検出のみならず、ＱＲコードの傾きや歪みも検出する。後述する本実施形態において、ＱＲコードが撮影範囲にあるか否かの認識は、シンボル６０１を認識することで判定する。ただし、ＱＲコードの持っている情報を正しく読み取るためには、上述したように、ＱＲコードのセル６０２によって作られる分布パターンを正確に読み取る必要がある。例えばスマートフォンを用いてＱＲコードを読み取ろうとしている場合に、スマートフォンのカメラとＱＲコードが遠すぎたり、撮影場所が暗いなどの理由で、セル６０２が作る分布パターンを正確に認識することができないと、ＱＲコードから情報を読み取れない。すなわち、デコード処理が行えない。そのため、ＱＲコードが保有している情報を読み取る、デコード処理を実行するためには、セル６０２の作る分布パターンを正確に読み取ることが必要となる。なお、現在では縦のセル数×横のセル数が２１×２１セルから４セル刻みで１７７×１７７セルまでのＱＲコードが存在する。図６に示すＱＲコードは２１×２１セルであり、セルの数が多くなればなるほど、多くの情報量を保有することができる。

近年ではＱＲコードを広告や取扱説明書などに印刷や表示をすることで、ＱＲコードを読み取ったユーザーが目的のＷｅｂページに容易にアクセスすることができるなど、様々な情報を容易に得ることができるようになった。また、ＱＲコードはデータの一部が読み取れなかったり、誤って読み込んでしまったりした場合にも、その誤りを訂正するための冗長コードが付加されている。これにより、他のコードと比較して汚れや歪みに強いコードであることから、工場などの生産現場においても、生産ラインの管理として広く用いられている。さらには、現金などの紙幣ではなくクレジットカードを用いた電子決済が多用される中、電子決済の１つとして、スマートフォンでＱＲコードを読み取るＱＲコード決済が広く知られ始めている。このようなＱＲコード決済が広く浸透した場合に、決済時にユーザーがＱＲコードの読み取りに時間をかけることなく、スムーズに決済をできるようにすることが望まれる。

本実施形態では、スマートフォン１００における二次元コード読み取り時のカメラを制御する制御処理について説明する。

（第１の実施形態）
第１の実施形態では、望遠カメラ１１４ａ、標準カメラ１１４ｂ、超広角カメラ１１４ｃの３つのアウトカメラ１１４を同時に駆動させ、アウトカメラ１１４のうち最適なカメラで光学コード情報である二次元コードを読み取る例を説明する。図４は、アウトカメラ１１４との画像処理部１０４を駆動させて、二次元コードの読み取り、すなわち二次元コードのデコード処理を行う制御処理フローチャートである。この制御処理はスマートフォン１００において、ＣＰＵ１０１が不揮発性メモリ１０３に格納されたプログラムを実行することにより実現される。図４のフローチャートは、スマートフォン１００においてカメラアプリケーションを起動し、撮影待機状態であるときに開始される。上述したカメラアプリケーションに限らず、二次元コードをデコード処理するためのアプリケーションの二次元コード読み取り機能を起動した際の、撮影待機状態でもよい。図３（ａ）〜（ｄ）はディスプレイ１０５に表示される、二次元コードを読み取る際の表示例である。

Ｓ４０１では、ＣＰＵ１０１は、望遠カメラ１１４ａ、標準カメラ１１４ｂ、超広角カメラ１１４ｃの３つのアウトカメラ１１４で撮影を開始し、３つのアウトカメラ画像処理部１０４ａ〜１０４ｃの駆動を開始する。

Ｓ４０２では、ＣＰＵ１０１は、Ｓ４０１で駆動した３つのアウトカメラ１１４のうち、標準カメラ１１４ｂで撮影したＬＶ画像をディスプレイ１０５に表示する。この時の表示例を図３（ａ）に示す。第１の実施形態では、ＬＶ画像に含まれるコード３０４の読み取りをどのアウトカメラ１１４で実行しているかに関わらず、ディスプレイ１０５には標準カメラ１１４ｂで撮影したＬＶ画像を表示する。ディスプレイ１０５に表示したＬＶ画像に重畳して、望遠カメラ１１４ａの撮影可能範囲（撮像可能範囲）を示すインジケーターとして枠３０１ａと指標３０２を表示する。指標３０２は、望遠カメラ１１４ａで撮影できる画像の中心位置及び超広角カメラ１１４ｃで撮影できる画像の中心位置を示すアイテムである。望遠カメラ１１４ａの撮影可能範囲として表示する枠は、ユーザーが範囲を視認できる表示形態であればよく、図３（ａ）の枠３０１ａに示すように実線での枠でもよいし、点線での枠でもよい。また、図３（ｂ）の枠３０１ｂに示すように、撮影可能範囲外に半透過のマスクをかけるような表示形態としてもよい。図３（ａ）に示す指標３０２は、望遠カメラ１１４ａで撮影できる画像の中心であることをユーザーが視認できる指標であればよく、指標３０２のような十字型の指標でもよいし、点などの指標でもよい。ＬＶ画像に重畳して表示するものでなくてもよい。ディスプレイ１０５に表示するＬＶ画像に重畳して枠３０１ａや指標３０２を示すことで、コード３０４を読み取る際に、どの位置にコード３０４をフレーミングすればスマートフォン１００が読み取ることができるのか、ユーザーが視認しやすい。また、いずれのカメラで認識を行っているか否かに関わらず、標準カメラ１１４ｂで撮影したＬＶ画像をディスプレイ１０５に表示することにより、ユーザーは望遠カメラ１１４ａで撮影されたＬＶ画像を見るよりも、より広範囲を視認することができる。これにより、ユーザーはコード３０４を撮影する際にフレーミングがしやすくなる。標準カメラ１１４ｂのＬＶ画像に重畳して、望遠カメラ１１４ａの撮影可能範囲である枠３０１ａを示すことにより、コード３０４を枠３０１ａ内に写りこませていれば、望遠カメラ１１４ａで認識する際にコード３０４が画角外になる可能性が低くなる。つまり、枠３０１ａのインジケーター内にコード３０４を映り込ませていれば、どのアウトカメラ１１４で認識をしていても、コード３０４を認識できる可能性が高まる。また枠や指標に加えて、ディスプレイ１０５上に図３（ａ）のガイド３０３のようなメッセージ表示を行うことで、よりユーザーにコード３０４を枠３０１ａのインジケーター内に撮影してもらいやすくなり、コード３０４を認識できる可能性がより高くなる。

Ｓ４０３では、ＣＰＵ１０１は、標準カメラ１１４ｂで撮影した画像から標準カメラ画像処理部１０４ｂを用いて、光学コード画像、すなわち、二次元コードらしき被写体があったか否かを判定する。あった場合はＳ４０４へ進み、なかった場合はＳ４０６へ進む。前述したように、シンボル６０１があるか否かを判定することができれば、撮影している被写体が二次元コードであるか否かを判定することができる。例えば、二次元コードが情報を読み取るには小さすぎるほど標準カメラ１１４ｂから遠い場合でも、シンボル６０１はセル６０２により大きいため、遠くからでも検出がしやすい。また、３か所のシンボル６０１全てが撮影されなくても、２つないし１つのシンボル６０１が撮影されていれば、二次元コードである可能性が高まる。つまりＳ４０３においては、標準カメラ１１４ｂで撮影した画像内に、シンボル６０１があるか否かを判定する。

Ｓ４０４では、ＣＰＵ１０１は、標準カメラ１１４ｂで撮影した画像から、標準カメラ画像処理部１０４ｂで二次元コードが読み取り可能か否かを判定する。読み取り可能であれば、Ｓ４１１へ進み、そうでない場合はＳ４０５へ進む。前述したように、二次元コードが読み取り可能ということは、二次元コードを形成するセル６０２の分布パターンを検出できるということであり、すなわち、二次元コードのデコード処理が実行できるということである。二次元コードのデコード処理が実行可能であることは、セル６０２の分布パターンを検出できるほど正確に二次元コードを撮影できていることを示す。Ｓ４０３においてシンボル６０１が検出でき、二次元コードを認識できていたとしても、標準カメラ１１４ｂと二次元コードとがあまりに離れすぎていると、分布パターンを正確に検出することができない。また標準カメラ１１４ｂと二次元コードとが近すぎて３か所のシンボル６０１全てが検出できない場合には、デコード処理のうち、二次元コードのサイズを把握することができないため、近すぎる場合にもデコード処理は行えない。

Ｓ４０５では、ＣＰＵ１０１は、望遠カメラ１１４ａで撮影した画像から望遠カメラ画像処理部１０４ａを用いて、二次元コードらしき被写体があったか否か、すなわち、シンボル６０１があったか否かを判定する。あった場合は、Ｓ４０６へ進み、なかった場合はＳ４０７へ進む。

Ｓ４０６では、ＣＰＵ１０１は、望遠カメラ１１４ａで撮影した画像から、望遠カメラ画像処理部１０４ａで二次元コードが読み取り可能か否か、すなわち、二次元コードらしき被写体のセル６０２の分布パターンが検出可能か否かを判定する。検出可能であれば、Ｓ４１１へ進み、そうでない場合は、Ｓ４０７へ進む。

Ｓ４０７では、ＣＰＵ１０１は、Ｓ４０３において標準カメラ１１４ｂで撮影した画像内に、シンボル６０１が３つあったか否かを判定する。シンボル６０１が３つあった場合は、Ｓ４０８へ進み、ない場合はＳ４０９へ進む。

Ｓ４０８では、ＣＰＵ１０１は、Ｓ４０３で判定した二次元コードらしき被写体に対して、図３（ａ）の枠３０５に示すような二次元コードインジケーターを表示し、Ｓ４０４へ戻る。Ｓ４０７Ｙｅｓより、標準カメラ１１４ｂで撮影した画像内にシンボル６０１が３つあることから、標準カメラ１１４ｂで二次元コード全体が撮影できているということになる。ただし、標準カメラ１１４ｂでセル６０２の分布パターンを検出するには、二次元コードが小さすぎてデコード処理が行えなかった（標準カメラ１１４ｂと二次元コードとの距離が遠かった）、と考えられる。Ｓ４０７でのＹｅｓ判定に加えて、Ｓ４０５とＳ４０６でのＮｏ判定より、二次元コードらしき被写体が図３（ａ）に示すように、望遠カメラ１１４ａの撮影可能範囲内である枠３０１ａ内にないことが考えられる。このような状態で望遠カメラ１１４ａを用いて認識を試みたとしても、コード３０４は望遠カメラ１１４ａの撮影可能範囲外にあるため、コード３０４全体を撮影できない。したがって、コード３０４が十分に大きくても情報を読み取ることはできない。そのため、枠３０５のような二次元コードインジケーターで二次元コードらしき被写体であるコード３０４を強調することで、ユーザーにコード３０４を視認しやすくする。また、ガイド３０３のようなメッセージ表示をする。これらコード３０４とガイド３０３によって、コード３０４を望遠カメラ１１４ａの撮影可能範囲内に移動するようにユーザーに促す。ユーザーがコード３０４を望遠カメラ１１４ａの撮影可能範囲内にフレーミングすれば、標準カメラ画像処理部１０４ｂと望遠カメラ画像処理部１０４ａの両方でコード３０４をより認識しやすくなる。さらに、ＬＶ画像の中心を示す指標３０２を、ディスプレイ１０５上に表示すれば、ユーザーが直感的に二次元コードを指標３０２に合うように撮影しようとし、コード３０４を認識できる可能性がさらに高まる。なお、ガイド３０３はディスプレイ１０５へＬＶ画像の表示を開始し始めたときから表示していてもいいし、Ｓ４０８での枠３０５と同じタイミングで表示を開始してもよい。

Ｓ４０９では、ＣＰＵ１０１は、超広角カメラ１１４ｃで撮影した画像から超広角カメラ画像処理部１０４ｃを用いて、二次元コードらしき被写体があったか否か、すなわち、シンボル６０１があったか否かを判定する。あった場合は、Ｓ４１０へ進み、なかった場合は、Ｓ４０３へ戻る。Ｓ４０７Ｎｏより、標準カメラ１１４ｂで撮影した画像内にシンボル６０１が３つなかったことがわかる。このことから、図３（ｃ）のように、コード３０４が大きく撮影されすぎてコード３０４の一部しか撮影できていないこと（標準カメラ１１４ｂとコード３０４の距離が近すぎる）が考えられる。そのため、広角カメラ１１４ｃを用いて、より広い範囲の撮影を試みる。このような場合でも、Ｓ４０８で述べたように、指標３０２のおかげで超広角カメラ１１４ｃの撮影範囲の中央にコード３０４を収めるようにフレーミングされることが促され、超広角カメラ１１４ｃでコード３０４が認識されやすくなる。

Ｓ４１０では、ＣＰＵ１０１は、超広角カメラ１１４ｃで撮影した画像から、超広角カメラ画像処理部１０４ｃで二次元コードが読み取り可能か否か、すなわち、二次元コードらしき被写体のセル６０２の分布パターンが検出可能か否かを判定する。検出可能であれば、Ｓ４１１へ進み、そうでない場合は、Ｓ４０３へ戻る。

Ｓ４１１では、ＣＰＵ１０１は、Ｓ４０７において表示した二次元コードインジケーターの表示があるか否かを判定する。表示がある場合は、Ｓ４１２へ進み、ない場合はＳ４１３へ進む。

Ｓ４１２では、ＣＰＵ１０１は、Ｓ４０７において表示した二次元コードインジケーターである枠３０５の表示形態を変化させる。Ｓ４０７ではコード３０４は明確に二次元コードであるとは認識されておらず、二次元コードらしき被写体と判定された。つまり、Ｓ４０７で表示した枠３０５は、ユーザーに二次元コードらしき被写体であることを知らせるための二次元コードインジケーターに過ぎず、二次元コードを読み取れていることを示すためのものではない。したがって、Ｓ４０４、Ｓ４０８、Ｓ４１０において二次元コードを読み取れた場合には、それをユーザーに知らせるために、例えば枠３０５の色を白色から黄色にしたり、四隅のみの枠ではなく、二次元コード全体を囲うような枠を表示したりしてもよい。このような表示形態の変化によりユーザーは、画像処理部１０４が二次元コードを読み取ることができたことを理解することができる。

Ｓ４１３では、ＣＰＵ１０１は、Ｓ４０４、Ｓ４０６、Ｓ４１０でコード３０４のセル６０２による分布パターンを読み取れたことから、デコード処理を行う。デコード処理によって得られた結果をディスプレイ１０５へ表示する。具体的には、二次元コードが保有する情報をディスプレイ１０５に表示する。例えば、コード３０４が保有する情報が、Ｗｅｂページのアクセス先を示すＵＲＬであった場合には、図３（ｄ）のダイアログボックス３０８のようにアクセス情報であるＵＲＬを表示し、Ｗｅｂページへのアクセスを行うか否かの確認画面を表示する。ガイド３０６へタッチされた場合は、Ｗｅｂページにアクセスを行う。ガイド３０７がタッチされた場合は、ユーザーが、Ｗｅｂページへアクセスしたくない、もしくは、再度二次元コードの読み取りを行いたいと考えていると想定し、図３（ａ）のような撮影待機状態へ戻る。本実施形態ではＷｅｂページにアクセスする際には図３（ｄ）のようなダイアログボックス３０８を表示し、確認画面を出すような表示形態としているが、確認画面を出さなくてもよい。確認画面を出すことなく二次元コードが保有する情報であるＵＲＬへアクセスを行い、二次元コードを読み取ったらすぐにＷｅｂページを開くようにしてもよい。また、確認画面を出すか直接Ｗｅｂページを開くか、ユーザーが任意に設定できるようにしてもよい。テキスト情報などを保有した二次元コードの場合は、ダイアログボックス３０８のＵＲＬを表示している部分にテキスト情報などを表示する。本実施形態では、様々な二次元コードを読み取ることのできるアプリケーションを用いて、様々な情報を読み取る形態を説明しているが、特定の情報を持った二次元コードのみを読み取るアプリケーションを用いて読み取りを行う場合も想定される。このような場合には、上記特定のアプリケーションでのみ読み取ることのできる、特定の情報以外を持った二次元コードを読み取った場合は、ダイアログボックス３０８のような形態で警告表示を行ってもよいし、警告表示も行わず撮影待機状態を継続してもよい。

Ｓ４１４では、ＣＰＵ１０１は、撮影待機状態が終了したか否かを判定する。終了した場合は本制御フローを終了し、終了していない場合はＳ４０３へ戻る。撮影待機状態が終了しているということは、ユーザーがカメラアプリケーションを終了した場合、もしくは、Ｓ４１３でデコード処理を行った結果、撮影待機画面ではない別の画面へ遷移したことが考えられる。どちらの場合でも、ユーザーが二次元コードの読み取りを終了したと想定し、本制御フローを終了する。撮影待機画面が継続している場合は、引き続き二次元コードの読み取りを行うと想定する。

図３と図４の制御フローから、望遠カメラ１１４ａ、標準カメラ１１４ｂ、超広角カメラ１１４ｃの３つのアウトカメラ１１４及び画像処理部１０４を同時に駆動させて、二次元コードを読み取る。３つのアウトカメラ１１４を同時に駆動させることで、ユーザーがアウトカメラ１１４の切替操作をしなくとも、二次元コードを読み取ることができたカメラで情報に素早く容易にアクセスすることができる。また、どのカメラで二次元コードを読み取っていても、表示するＬＶ画像は標準カメラ１１４ｂで撮影したものにすることで、望遠カメラ１１４ａで撮影したものよりも広い範囲を視認することができ、二次元コードをフレーミングしやすい。第１の実施形態では、３つのアウトカメラ１１４を同時に駆動させるため、カメラの切り替え動作がないため、いずれかのアウトカメラ１１４で二次元コードを読み取ることができれば、デコード処理を行うことができる。図３（ｃ）のようにアウトカメラ１１４とコード３０４とが近すぎる場合は、広角カメラ１１４ｃで二次元コードの認識、読み取りを行う。このような場合、枠３０１ａや指標３０２に合わせてユーザーが二次元コードをフレーミングすれば、３つのアウトカメラ１１４のうち、どのカメラにおいても二次元コードを認識しやすくなる。そのため、表示するＬＶ画像は、標準カメラ１１４ｂで撮影したものにする。これにより３つのアウトカメラ１１４を用いて、より広い焦点距離の範囲で二次元コードを読み取ることができるため、ユーザーは、読取装置を遠ざけたり近づけたりする操作を減らすことができる。

（第２の実施形態）
第２の実施形態では、３つあるアウトカメラ１１４を１つずつ切り替えて個別に駆動させ、最適なカメラで光学コード情報である二次元コードの認識を行うことができるように制御する例を説明する。図５は、スマートフォン１００のアウトカメラ１１４を１つずつ個別に駆動させて、二次元コードの読み取りを行う制御処理フローチャートである。この制御処理はスマートフォン１００において、ＣＰＵ１０１が不揮発性メモリ１０３に格納されたプログラムを実行することにより実現される。図５のフローチャートは、スマートフォン１００においてカメラアプリケーションを起動し、撮影待機状態であるときに開始される。上述したカメラアプリケーションに限らず、二次元コードを認識するための二次元コード読み取り可能アプリケーションの二次元コード読み取り機能を起動した際の、撮影待機状態でもよい。図３（ａ）〜（ｄ）はディスプレイ１０５に表示される、二次元コードを読み取る際の表示例である。

Ｓ５０１では、ＣＰＵ１０１は、標準カメラ１１４ｂ、標準カメラ画像処理部１０４ｂを駆動させ、標準カメラ１１４ｂでの撮影を開始する。第１の実施形態のＳ４０１では、望遠カメラ１１４ａ、標準カメラ１１４ｂ、広角カメラ１１４ｃ、望遠カメラ画像処理部１０４ａ、標準カメラ画像処理部１０４ｂ、広角カメラ画像処理部１０４ｃの駆動を開始した。これに対してＳ５０１では、標準カメラ１１４ｂ、標準カメラ画像処理部１０４ｂのみを駆動し、望遠カメラ１１４ａ、望遠カメラ画像処理部１０４ａ、広角カメラ１１４ｃ、広角カメラ画像処理部１０４ｃの駆動はこのタイミングでは行わない。標準カメラ１１４ｂにて撮影したＬＶ画像をディスプレイ１０５に表示を開始する。Ｓ４０２と同様に、この時の表示例を図３（ａ）に示す。なお、第２の実施形態においては、枠３０１ａは表示しなくてもよい。

Ｓ５０２では、Ｓ４０３と同様に、ＣＰＵ１０１は、標準カメラ１１４ｂで撮影した画像から標準カメラ画像処理部１０４ｂを用いて、光学コード画像、すなわち、二次元コードらしき被写体があったか否かを判定する。あった場合はＳ５０３へ進み、なかった場合はＳ５０４へ進む。

Ｓ５０３では、Ｓ４０４と同様に、ＣＰＵ１０１は、標準カメラ１１４ｂで撮影した画像から、標準カメラ画像処理部１０４ｂで二次元コードが読み取り可能か否かを判定する。読み取り可能であれば、Ｓ５１３へ進み、そうでない場合はＳ５０５へ進む。

Ｓ５０４では、ＣＰＵ１０１は、Ｓ５０１において標準カメラ１１４ｂが駆動を開始してから、所定時間が経過したか否かを判定する。所定時間経過した場合は、Ｓ５０６へ進み、そうでない場合はＳ５０２へ戻る。Ｓ５０２において標準カメラ１１４ｂで撮影した画像内に二次元コードらしき被写体がないと判定された場合は、ユーザーがカメラアプリケーションを起動したばかりで、撮影可能範囲内に二次元コードをフレームインできていない可能性が考えられる。そのため、標準カメラ１１４ｂの駆動を開始してからの時間を計測し、所定時間の経過があった場合は、標準カメラ１１４ｂの撮影可能範囲内に二次元コードがない、もしくは、二次元コードが小さすぎると想定し、Ｓ５０６へと進む。ここでの所定時間とは、例えば５秒程度の時間を想定しているが、５秒よりも短い時間でも長い時間でも良いし、ユーザーが任意に設定できるようにしてもよい。なお、計測した時間は、標準カメラ１１４ｂの駆動の停止、もしくは、二次元コードの読み取り実行に応じて、リセットする。

Ｓ５０５では、ＣＰＵ１０１は、標準カメラ１１４ｂ及び標準カメラ画像処理部１０４ｂの駆動を停止し、望遠カメラ１１４ａ及び望遠カメラ画像処理部１０４ａの駆動を開始する。Ｓ５０２、Ｓ５０３において標準カメラ１１４ｂで二次元コードらしき被写体が認識できたにもかかわらず二次元コードが読み取れなかったことから、二次元コードが情報を読み取れるほど十分に大きくないと想定できる。二次元コードが十分に大きくないため、シンボル６０１からコード３０４が二次元コードであることは認識できるが、セル６０２による形状を正確に認識できず、情報が読み取れない。そのため、標準カメラ１１４ｂから望遠カメラ１１４ａへと切り替えることで、二次元コードを拡大して読み取る。また、標準カメラ１１４ｂの駆動を停止したことから、望遠カメラ１１４ｂで撮影したＬＶ画像を、ディスプレイ１０５に表示する。引き続きＬＶ画像に重畳して、ＬＶ画像の中心を示す指標３０２を表示する。

Ｓ５０６では、Ｓ４０５と同様に、ＣＰＵ１０１は、望遠カメラ１１４ａで撮影した画像から望遠カメラ画像処理部１０４ａを用いて、二次元コードらしき被写体があったか否かを判定する。あった場合は、Ｓ５０７へ進み、なかった場合はＳ５０８へ進む。

Ｓ５０７では、Ｓ４０６と同様に、ＣＰＵ１０１は、望遠カメラ１１４ａで撮影した画像から、望遠カメラ画像処理部１０４ａで二次元コードが読み取り可能か否かを判定する。読み取り可能であれば、Ｓ５１３へ進み、そうでない場合は、Ｓ５１０へ進む。

Ｓ５０８では、ＣＰＵ１０１は、Ｓ５０５において望遠カメラ１１４ａが駆動を開始してから、所定時間が経過したか否かを判定する。所定時間経過した場合は、Ｓ５０９へ進み、そうでない場合はＳ５０６へ戻る。Ｓ５０５において望遠カメラ１１４ａの駆動を開始してからの時間の計測を行う。Ｓ５０４で述べたように、ここでの所定時間とは、例えば５秒程度の時間を想定しているが、５秒よりも短い時間でも長い時間でも良いし、ユーザーが任意に設定できるようにしてもよい。Ｓ５０４での所定時間とは異なる時間でもよい。なお、計測した時間は、望遠カメラ１１４ａの駆動の停止、もしくは、二次元コードのデコード処理の実行に応じて、リセットする。

Ｓ５０９では、Ｓ４０７と同様に、ＣＰＵ１０１は、Ｓ５０５において望遠カメラ１１４ａで撮影した画像内に、シンボル６０１が３つあったか否かを判定する。シンボル６０１が３つあった場合は、Ｓ５１０へ進み、ない場合はＳ５１１へ進む。

Ｓ５１０では、Ｓ４０８と同様に、ＣＰＵ１０１は、Ｓ５０６で判定した二次元コードらしき被写体に対して、図３（ａ）の枠３０５に示すような二次元コードインジケーターを表示し、Ｓ５０３へ戻る。

Ｓ５１１では、ＣＰＵ１０１は、望遠カメラ１１４ａ及び望遠カメラ画像処理部１０４ａの駆動を停止し、超広角カメラ１１４ｃ及び超広角カメラ画像処理部１０４ｃの駆動を開始する。Ｓ５０２、Ｓ５０３、Ｓ５０６、Ｓ５０７から、図３（ｃ）に示すように、二次元コードとアウトカメラ１１４との距離が近すぎるために、二次元コード全体を撮影できていない可能性がある。この場合、Ｓ５０３において標準カメラ１１４ｂを用いても全体を撮影できなかったことから、望遠カメラ１１４ａから超広角カメラ１１４ｃへと切り替えることで撮影可能な範囲をより広くし、二次元コード全体の撮影を行う。また、望遠カメラ１１４ｂの駆動を停止したことから、超広角カメラ１１４ｃで撮影したＬＶ画像を、ディスプレイ１０５に表示する。引き続きＬＶ画像に重畳して、ＬＶ画像の中心を示す指標３０２を表示する。

Ｓ５１２では、Ｓ４０９と同様に、ＣＰＵ１０１は、超広角カメラ１１４ｃで撮影した画像から超広角カメラ画像処理部１０４ｃを用いて、二次元コードらしき被写体があったか否かを判定する。あった場合は、Ｓ５１３へ進み、なかった場合は、Ｓ５０１へ戻る。

Ｓ５１３では、Ｓ４１０と同様に、ＣＰＵ１０１は、超広角カメラ１１４ｃで撮影した画像から、超広角カメラ画像処理部１０４ｃで二次元コードが読み取り可能か否かを判定する。読み取り可能であれば、Ｓ５１４へ進み、そうでない場合は、Ｓ５０１へ戻る。

Ｓ５１４では、Ｓ４１１と同様に、ＣＰＵ１０１は、Ｓ５１０において表示した二次元コードインジケーターの表示があるか否かを判定する。表示がある場合は、Ｓ５１５へ進み、ない場合はＳ５１６へ進む。

Ｓ５１５では、Ｓ４１２と同様に、ＣＰＵ１０１は、Ｓ５１０において表示した二次元コードインジケーターである枠３０５の表示形態を変化させる。

Ｓ５１６では、Ｓ４１３と同様に、ＣＰＵ１０１は、Ｓ５０３、Ｓ５０７、Ｓ５１３で読み取った二次元コードをデコードし、デコードした結果をディスプレイ１０５へ表示する。

Ｓ５１７では、Ｓ４１４と同様に、ＣＰＵ１０１は、撮影待機状態が終了したか否かを判定する。終了した場合は本制御フローを終了し、終了していない場合はＳ５０１へ戻る。

図３と図５の制御フローから、望遠カメラ１１４ａ、標準カメラ１１４ｂ、超広角カメラ１１４ｃの３つのアウトカメラ１１４をそれぞれ個別に駆動させて、二次元コードの読み取りを行う。３つのアウトカメラ１１４は、アウトカメラ１１４と二次元コードの位置関係から自動で切り替わるため、ユーザーがアウトカメラ１１４の切り替えを行わずとも、最適なカメラで読み取りを行うことができる。アウトカメラ１１４が切り替わる条件として、以下のような２つがある。一つ目として、いずれかのアウトカメラ１１４で撮影した画像内に、二次元コードらしき形状（シンボル６０１）があるが、二次元コードから情報を読み取ることはできない場合。二つ目として、いずれかのアウトカメラ１１４で撮影した画像内に、二次元コードらしき被写体が見当たらない、かつ、所定時間経過した場合。上記２つの条件の少なくとも一方を満たした場合に、アウトカメラ１１４のうち例えば標準カメラ１１４ｂが駆動していた場合は、標準カメラ１１４ｂの駆動を停止し、望遠カメラ１１４ａの駆動を開始するようにする。また、アウトカメラ１１４が切り替わるのにともなってＬＶ画像も切り替わるため、ユーザーが現在どのカメラで二次元コードが撮影されているのかを理解することができる。また、指標３０２に合わせて、ユーザーが二次元コードをフレーミングすることで、３つのアウトカメラ１１４のうち、どのカメラが駆動しているかユーザーが明確に理解していなくても、二次元コードを認識しやすくなる。３つのアウトカメラ１１４が個別に駆動するため、３つ全てが駆動するときに比べて、電力の消費を抑えることができる。これにより３つのアウトカメラ１１４を用いて、より広い焦点距離の範囲で二次元コードを読み取ることができるため、ユーザーは、読取装置を遠ざけたり近づけたりする操作を減らすことができる。

また、３つのアウトカメラ１１４の中心を示す指標３０２をＬＶ画像に表示することにより、ユーザーが指標３０２を目安にしてコード３０４をフレーミングすれば、カメラが自動で切り替わったとしても、撮影範囲にコード３０４が収まっている可能性が高い。コード３０４が撮影範囲に収まっていれば、認識が速く行われる可能性も上げることができる。

なお、本実施形態では、３つのアウトカメラ１１４で同時もしくは個別に、印刷もしくは表示された光学コード情報である二次元コードを読み取りやすくする例を説明したが、これに限るものではない。光学コード情報であればよく、例えば、二次元コードではなく一次元コードを読み取ってもよい。次元によらず、情報を有することができる、様々なパターンによって作成されたパターン画像でもよい。また、本実施形態での認識する対象として二次元コードではなく、人物や動物などの被写体に対しても本実施形態を適用することができる。具体的には、人物や動物などの被写体を認識できるカメラを備えたスマートフォン１００において、３つのアウトカメラ１１４を同時もしくは個別に駆動し、撮影を開始する。標準カメラ１１４ｂで被写体が明確に認識できなくとも、動いているものや被写体らしきものを認識できれば、標準カメラ１１４ｂから望遠カメラ１１４ａに切り替え、望遠カメラ１１４ａで被写体を認識しようとする。望遠カメラ１１４ａで被写体を認識することができれば、望遠カメラ１１４ａで認識することができた被写体を被写体として認識し、撮影を行う。望遠カメラ１１４ａを使用しても被写体を認識できなかった場合には、超広角カメラ１１４ｃに切り替え、超広角カメラ１１４ｃで被写体を認識する。上述したような、二次元コードではなく人物や動物などの被写体に本実施形態を適用したとしても、同様の効果が得られる。つまり、カメラと被写体との位置関係によらず、被写体を最適な大きさで撮影をすることができ、かつ、被写体をフレーミングしやすい。

上述した本実施形態において、カメラと二次元コードとの位置関係をユーザーが気にすることなく、二次元コードを認識できるように制御する。これにより、ユーザーはカメラと二次元コードの位置関係を気にすることなく、最適なカメラが二次元コードを読み取ってくれるため、ユーザーはより多様な状況下においても二次元コードを容易に読み取らせることができる。さらには、二次元コードを撮影する間はディスプレイ１０５にＬＶ画像を表示するため、ＬＶ画像上に二次元コードが撮影されるようにすれば、スマートフォン１００が二次元コードを好適なカメラで認識することができる。第１の実施形態においては、同時に駆動している３つのうち、どのカメラで二次元コードを読み取る場合でも、ディスプレイ１０５に表示するＬＶ画像は標準カメラ１１４ｂで撮影したものとする。そのため、望遠カメラ１１４ａで撮影した場合よりも、広い範囲を視認しながら二次元コードをフレーミングすることができる。第２の実施形態では、駆動しているカメラによるＬＶ画像を表示するため、どのカメラが駆動しているかユーザーが認識しながら二次元コードを撮影することができる。

なお、ＣＰＵ１０１が行うものとして説明した上述の各種制御は１つのハードウェアが行ってもよいし、複数のハードウェア（例えば、複数のプロセッサーや回路）が処理を分担することで、装置全体の制御を行ってもよい。

また、本発明をその好適な実施形態に基づいて詳述してきたが、本発明はこれら特定の実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。上述の実施形態の一部を適宜組み合わせてもよい。本発明をスマートフォンに適用した場合を例にして説明したが、これはこの例に限定されず撮影手段を有し、撮影された画像から光学コード情報を読み取ることのできる電子機器であれば適用可能である。すなわち、本発明はパーソナルコンピュータやＰＤＡ、デジタルカメラや携帯型の画像ビューワ、ディスプレイを備えるプリンタ装置、デジタルフォトフレーム、音楽プレーヤー、ゲーム機、電子ブックリーダーなどに適用可能である。

（他の実施形態）
本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）をネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（又はＣＰＵやＭＰＵ等）がプログラムコードを読み出して実行する処理である。この場合、そのプログラム、及び該プログラムを記憶した記憶媒体は本発明を構成することになる。

Claims

第１の撮像手段と、
前記第１の撮像手段とは焦点距離の異なる第２の撮像手段と、
撮像された画像に含まれる光学コード画像から情報を読み取る読取手段と、
前記第１の撮像手段で撮像された画像から前記読取手段によって前記光学コード画像に基づく情報を読み取ることができた場合は、読み取った情報に応じた処理を実行し、
前記第１の撮像手段で撮像された画像から前記読取手段によって前記光学コード画像に基づく情報を読み取ることができなかった場合は、
前記第２の撮像手段で撮像された画像から前記読取手段によって前記光学コード画像に基づく情報を読み取り、読み取った情報に応じた処理を実行するように制御する制御手段とを有することを特徴とする電子機器。
前記制御手段は、
少なくとも前記第１の撮像手段と前記第２の撮像手段による撮像が、同時に行われるように制御することを特徴とする請求項１に記載の電子機器。
前記制御手段は、
前記第１の撮像手段と前記第２の撮像手段による撮像が同時に行われている状態において、
前記第２の撮像手段で撮像したライブビュー画像を表示手段に表示することなく、前記第１の撮像手段で撮像したライブビュー画像を前記表示手段に表示するように制御することを特徴とする請求項２に記載の電子機器。
前記第１の撮像手段は前記第２の撮像手段よりも焦点距離が短く、
前記制御手段は、
前記第１の撮像手段で撮像したライブビュー画像のうち、前記第２の撮像手段の撮像可能範囲を示す第１のインジケーターを表示することを特徴とする請求項１乃至３のいずれか１項に記載の電子機器。
前記制御手段は、
少なくとも前記第１の撮像手段と前記第２の撮像手段のうち、いずれか１つの撮像手段による撮像が行われている状態で、
前記光学コード画像が特定の条件を満たしたことに応じて、
撮像を行っている前記第１の撮像手段に替わって、前記第２の撮像手段による撮像を開始するように制御することを特徴とする請求項１に記載の電子機器。
前記特定の条件とは、
前記光学コード画像の特徴を示す特定の形状を認識している、かつ、前記読取手段によって前記光学コード画像に基づく情報を読み取ることができなかったこと、
もしくは、
前記特定の形状を認識していない、かつ、所定時間が経過したこと、
の少なくとも一方であることを特徴とする請求項５に記載の電子機器。
前記制御手段は、
前記第１の撮像手段での撮像から前記第２の撮像手段での撮像への切り替えは、
ユーザーによる切替操作なしに行うように制御することを特徴とする請求項５または６に記載の電子機器。
前記制御手段は、
前記第１の撮像手段で撮像したライブビュー画像の上に、前記第２の撮像手段で撮像される画像の中心を示す第２のインジケーターを表示するように制御することを特徴とする請求項１乃至７のいずれか１項に記載の電子機器。
第３の撮像手段を更に有し、
前記制御手段は、
前記第１の撮像手段で撮像された画像、及び、前記第２の撮像手段で撮像された画像から前記読取手段によって前記光学コード画像に基づく情報を読み取ることができなかった場合は、
前記第３の撮像手段で撮像された画像から前記読取手段によって前記光学コード画像に基づく情報を読み取り、読み取った情報に応じた処理を実行するように制御することを特徴とする請求項１乃至８のいずれか１項に記載の電子機器。
前記第３の撮像手段は、前記第１の撮像手段よりも焦点距離が短いことを特徴とする請求項９に記載の電子機器。
前記読み取った情報に応じた処理とは、
当該情報を表示する処理であることを特徴とする請求項１乃至１０のいずれか１項に記載の電子機器。
前記読み取った情報に応じた処理とは、
前記読み取った情報が特定のアクセス先へのアクセス情報だった場合に、前記特定のアクセス先にアクセスする処理であることを特徴とする請求項１乃至１１のいずれか１項に記載の電子機器。
前記制御手段は、
前記光学コード画像を前記第１のインジケーター内に移動させるよう促すメッセージ表示を行うことを特徴とする請求項１乃至１２のいずれか１項に記載の電子機器。
前記制御手段は、
前記読取手段によって読み取った前記光学コード画像に対して第３のインジケーターを表示するように制御することを特徴とする請求項１乃至１３のいずれか１項に記載の電子機器。
前記光学コード画像は、印刷もしくは表示されたパターン画像であることを特徴とする請求項１乃至１４のいずれか１項に記載の電子機器。
前記光学コード画像は、バーコードもしくはＱＲコードであることを特徴とする請求項１５に記載の電子機器。
第１の撮像手段と、
前記第１の撮像手段とは焦点距離の異なる第２の撮像手段と、を有する電子機器の制御方法であって、
撮像された画像に含まれる光学コード画像から情報を読み取る読取ステップと、
前記第１の撮像手段で撮像された画像から前記読取ステップによって前記光学コード画像に基づく情報を読み取ることができた場合は、読み取った情報に応じた処理を実行し、
前記第１の撮像手段で撮像された画像から前記読取ステップによって前記光学コード画像に基づく情報を読み取ることができなかった場合は、
前記第２の撮像手段で撮像された画像から前記読取ステップによって前記光学コード画像に基づく情報を読み取り、読み取った情報に応じた処理を実行するように制御する制御ステップとを有することを特徴とする電子機器の制御方法。
コンピュータを、請求項１乃至１６のいずれか１項に記載された電子機器の各手段として機能させるためのプログラム。
コンピュータを、請求項１乃至１６のいずれか１項に記載された電子機器の各手段として機能させるためのプログラムを格納したコンピュータが読み取り可能な記憶媒体。