JP2021068447A - 視覚的にコーディングされたパターン認識方法および装置 - Google Patents

Abstract

【課題】 本開示は、ユーザ端末が実行するパターン認識方法に関する。【解決手段】 パターン認識方法は、第１パターンおよび第２パターンを含むイメージを受信する段階、第１パターンのパターン類型を判定する段階、第２パターンのパターン類型を判定する段階、第１パターンのパターン類型と第２パターンのパターン類型の優先順位を比較する段階、および第１パターンのパターン類型が第２パターンのパターン類型よりも高い優先順位であると判定される場合、第１パターンの処理を自動で実行する段階を含む。【選択図】図１

Description

本開示は、視覚的にコーディングされたパターンを認識する方法および装置に関し、より詳細には、視覚的にコーディングされた複数のパターンを認識して自動で実行したり、視覚的にコーディングされた複数のパターンのプレビューを表示する方法および装置に関する。

カメラが内蔵されているスマートフォンやタブレット、ＰＣ、ラップトップ（ｌａｐｔｏｐ）ＰＣ、デスクトップＰＣなどのような端末機が広く普及している。このような環境において、端末機に内蔵されたカメラを活用する事例が増加している。代表的な例として、端末機に内蔵されたカメラで撮影したバーコードを活用するサービスが多く提供されている。

このとき、端末機に内蔵されたカメラで撮影したイメージ内に複数のバーコードが含まれている場合には、バーコードが認識されなかったり、ユーザが望まないバーコードが認識されたりすることが発生する。このような場合、ユーザが希望するサービスを受けるためには、認識させたいバーコードをもう一度撮影しなければならないという不便が生じる。これにより、ユーザが希望するサービスを受けるまでに時間がかかるようになり、円滑なユーザ経験を提供することが困難となる。

本開示は、上述したような問題点を解決するためのパターン認識方法、装置、および記録媒体に記録されたコンピュータプログラムを提供する。

ユーザ端末で複数の視覚的にコーディングされたパターンを含むイメージを受信し、受信したイメージから検出されたパターンのパターン類型を判定することによってパターン類型の優先順位を比較し、これに基づいて高い優先順位のパターンの処理を自動で実行する方法、装置、および記録媒体に記録されたコンピュータプログラムを提供する。

ユーザ端末で複数の視覚的にコーディングされたパターンを含むイメージを受信し、受信したイメージから検出されたパターン（１つ以上のパターン）のプレビューを生成してユーザ端末のディスプレイ上のプレビュー領域に表示する方法、装置、および記録媒体に記録されたコンピュータプログラムを提供する。

本開示は、方法、装置、またはコンピュータ読み取り可能な記録媒体に記録されたコンピュータプログラムを含む多様な方式によって実現可能である。

本開示の一実施形態に係るユーザ端末が実行するパターン認識方法は、視覚的にコーディングされた第１パターンおよび視覚的にコーディングされた第２パターンを含むイメージを受信する段階、視覚的にコーディングされた第１パターンのパターン類型を判定する段階、視覚的にコーディングされた第２パターンのパターン類型を判定する段階、視覚的にコーディングされた第１パターンのパターン類型と視覚的にコーディングされた第２パターンのパターン類型の優先順位を比較する段階、および視覚的にコーディングされた第１パターンのパターン類型が視覚的にコーディングされた第２パターンのパターン類型よりも高い優先順位であると判定される場合、視覚的にコーディングされた第１パターンの処理を自動で実行する段階を含む。

一実施形態によると、視覚的にコーディングされた第１パターンのパターン類型を判定する段階は、視覚的にコーディングされた第１パターンが特定のサービスと関連するパターンであるか判定する段階、および視覚的にコーディングされた第１パターンが特定のサービスと関連するパターンであると判定される場合、視覚的にコーディングされた第１パターンのパターン類型を第１パターン類型として判定する段階を含む。

一実施形態によると、視覚的にコーディングされた第１パターンのパターン類型を判定する段階は、視覚的にコーディングされた第１パターンが特定の会社のサービスと関連するパターンであるか判定する段階、および視覚的にコーディングされた第１パターンが特定の会社のサービスと関連するパターンであると判定される場合、視覚的にコーディングされた第１パターンのパターン類型を第２パターン類型として判定する段階をさらに含む。

一実施形態によると、視覚的にコーディングされた第１パターンのパターン類型を判定する段階は、視覚的にコーディングされた第１パターンが特定の会社のサービスとは関連しないパターンであると判定される場合に、視覚的にコーディングされた第１パターンが２次元パターンである場合、視覚的にコーディングされた第１パターンのパターン類型を第３パターン類型として判定する段階、および視覚的にコーディングされた第１パターンが１次元パターンである場合、視覚的にコーディングされた第１パターンのパターン類型を第４パターン類型として認識する段階をさらに含む。

一実施形態によると、第１パターン類型、第２パターン類型、第３パターン類型、第４パターン類型の順に高い優先順位である。

一実施形態によると、視覚的にコーディングされた第１パターンのパターン類型が視覚的にコーディングされた第２パターンのパターン類型と同じ優先順位であると判定される場合、受信したイメージ内の視覚的にコーディングされた第１パターンの位置または大きさのうちの少なくとも１つに基づいて視覚的にコーディングされた第１パターンの信頼度点数を算出する段階、受信したイメージ内の視覚的にコーディングされた第２パターンの位置または大きさのうちの少なくとも１つに基づいて視覚的にコーディングされた第２パターンの信頼度点数を算出する段階、および視覚的にコーディングされた第１パターンの信頼度点数が視覚的にコーディングされた第２パターンの信頼度点数よりも高いと判定される場合、視覚的にコーディングされた第１パターンのプレビューをユーザ端末のディスプレイ上に表示する段階をさらに含む。

一実施形態によると、受信したイメージ内の視覚的にコーディングされた第１パターンの位置または大きさのうちの少なくとも１つに基づいて視覚的にコーディングされた第１パターンの信頼度点数を算出する段階は、受信したイメージの中心点と視覚的にコーディングされた第１パターンの中心点との距離を算出する段階を含む。

一実施形態によると、受信したイメージ内の視覚的にコーディングされた第１パターンの位置または大きさのうちの少なくとも１つに基づいて視覚的にコーディングされた第１パターンの信頼度点数を算出する段階は、視覚的にコーディングされた第１パターンに対応する領域が受信したイメージにおいて占める面積の割合を算出する段階を含む。

一実施形態によると、視覚的にコーディングされた第１パターンのパターン類型が視覚的にコーディングされた第２パターンのパターン類型と同じ優先順位であると判定される場合、受信したイメージ内の視覚的にコーディングされた第１パターンの位置または大きさのうちの少なくとも１つに基づいて視覚的にコーディングされた第１パターンの信頼度点数を算出する段階、受信したイメージ内の視覚的にコーディングされた第２パターンの位置または大きさのうちの少なくとも１つに基づいて視覚的にコーディングされた第２パターンの信頼度点数を算出する段階、および視覚的にコーディングされた第１パターンの信頼度点数が視覚的にコーディングされた第２パターンの信頼度点数よりも高いと判定される場合、視覚的にコーディングされた第１パターンの処理を自動で実行する段階をさらに含む。

一実施形態によると、視覚的にコーディングされた第１パターンに対応する第１領域上に指示子を表示することで、視覚的にコーディングされた第１パターンの処理を自動で実行することをユーザに予告する段階をさらに含む。

一実施形態によると、視覚的にコーディングされた第１パターンが含まれた第１領域を検出する段階、視覚的にコーディングされた第２パターンが含まれた第２領域を検出する段階、および第１領域と第２領域を互いに異なる色でハイライト表示する段階をさらに含む。

一実施形態によると、イメージ撮影モードで複数のイメージを順に受信する段階、および視覚的にコーディングされた第１パターンおよび視覚的にコーディングされた第２パターンを含むイメージを受信する場合、パターンスキャンモードに入るかを確認するための通知をユーザ端末のディスプレイ上に表示する段階をさらに含む。

本開示の一実施形態に記載されたパターン認識方法をコンピュータで実行するためにコンピュータ読み取り可能な記録媒体に記録された、コンピュータプログラムを提供する。

本開示の一実施形態に係るパターン認識装置は、視覚的にコーディングされた第１パターンおよび視覚的にコーディングされた第２パターンを含むイメージを受信するように構成されたイメージセンサ、視覚的にコーディングされた第１パターンのパターン類型および視覚的にコーディングされた第２パターンのパターン類型を判定するように構成されたパターン類型判定部、および視覚的にコーディングされた第１パターンのパターン類型と視覚的にコーディングされた第２パターンのパターン類型の優先順位を比較するように構成されたパターン処理部を備え、パターン処理部は、視覚的にコーディングされた第１パターンのパターン類型が視覚的にコーディングされた第２パターンのパターン類型よりも高い優先順位であると判定する場合、視覚的にコーディングされた第１パターンの処理を自動で実行するようにさらに構成される。

本開示の一実施形態に係るユーザ端末が実行するパターン認識方法は、視覚的にコーディングされた第１パターンおよび視覚的にコーディングされた第２パターンを含むイメージ受信する段階、視覚的にコーディングされた第１パターンのプレビューを生成する段階、視覚的にコーディングされた第２パターンのプレビューを生成する段階、第１パターンのプレビューと第２パターンのプレビューをユーザ端末のディスプレイ上のプレビュー領域に表示する段階、ユーザから第１パターンのプレビューに対する選択を受信する段階、および選択に応答して視覚的にコーディングされた第１パターンに対する処理を実行する段階を含む。

一実施形態によると、第１パターンのプレビューと第２パターンのプレビューをユーザ端末のディスプレイ上のプレビュー領域に表示する段階は、受信したイメージ内の視覚的にコーディングされた第１パターンの位置または大きさのうちの少なくとも１つに基づいて視覚的にコーディングされた第１パターンの信頼度点数を算出する段階、受信したイメージ内の視覚的にコーディングされた第２パターンの位置または大きさのうちの少なくとも１つに基づいて視覚的にコーディングされた第２パターンの信頼度点数を算出する段階、および視覚的にコーディングされた第１パターンの信頼度点数が視覚的にコーディングされた第２パターンの信頼度点数よりも高いと判定される場合、視覚的にコーディングされた第１パターンのプレビューをユーザ端末のディスプレイ上のプレビュー領域の上端に表示する段階を含む。

一実施形態によると、視覚的にコーディングされた第１パターンが含まれた第１領域を検出する段階、視覚的にコーディングされた第２パターンが含まれた第２領域を検出する段階、および第１領域と第２領域を互いに異なる色でハイライト表示する段階をさらに含む。

一実施形態によると、視覚的にコーディングされた第１パターンのプレビューを生成する段階は、視覚的にコーディングされた第１パターンがＵＲＬ（Ｕｎｉｆｏｒｍ Ｒｅｓｏｕｒｃｅ Ｌｏｃａｔｏｒ）のエンコードに該当する場合、視覚的にコーディングされた第１パターンによってコーディングされたＵＲＬ情報を外部装置に送信する段階、外部装置からＵＲＬ情報と関連するサムネイル、タイトル、または説明文のうちの少なくとも１つを受信する段階、および受信したサムネイル、タイトル、または説明文のうちの少なくとも１つをディスプレイ上のプレビュー領域に表示する段階をさらに含む。

本開示の一実施形態に記載されたパターン認識方法をコンピュータで実行するためにコンピュータ読み取り可能な記録媒体に記録された、コンピュータプログラムを提供する。

本開示の一実施形態に係るパターン認識装置は、ユーザから入力を受信するように構成された入力インタフェース、視覚的にコーディングされた第１パターンおよび視覚的にコーディングされた第２パターンを含むイメージを受信するように構成されたイメージセンサ、視覚的にコーディングされた第１パターンのプレビューおよび視覚的にコーディングされた第２パターンのプレビューを生成するように構成されたパターンプレビュー生成部、生成された視覚的にコーディングされた第１パターンおよび第２パターンのプレビューをプレビュー領域に出力するように構成されたディスプレイ、および入力インタフェースを通じて第１パターンのプレビューに対する選択を受信することに応答し、視覚的にコーディングされた第１パターンに対する処理を実行するように構成されたパターン処理部を備える。

本開示の実施形態によると、複数の視覚的にコーディングされたパターンに対し、パターン類型の優先順位および／またはパターンの信頼度点数に基づいてパターンの処理を自動で実行することにより、パターン認識の正確度を高め、ユーザが希望するサービスを容易に提供できるようにすることで、円滑なユーザ経験を提供することができる。

本開示の実施形態によると、複数のパターンのプレビューをユーザ端末のディスプレイ上のプレビュー領域に表示することにより、ユーザが希望するサービスと関連するパターンを選択できるようにすることができる。

本開示の効果が上述したものに制限されてはならず、言及されていない他の効果は、当業者であれば、以下の記載から明確に理解することができるであろう。

本開示の実施形態については、添付の図面を参照しながら説明する。なお、類似する参照番号は類似する要素を示すようにしたが、これに限定されることはない。

本開示の一実施形態における、ユーザ端末が実行するパターン認識方法の例を示した図である。 本開示の一実施形態における、パターン認識を実行するために、複数のユーザ端末がサーバと通信可能に接続された構成を示した図である。 本発明の一実施形態における、ユーザ端末の構成を示したブロック図である。 本発明の一実施形態における、パターン類型ごとに優先順位を定義するルックアップテーブルを示した図である。 本発明の一実施形態における、ユーザ入力なく、パターンの処理を自動で実行する例を示した図である。 本開示の一実施形態における、視覚的にコーディングされたパターン認識方法を示したフローチャートである。 本開示の一実施形態における、優先順位が同じであるパターンのうちの１つに処理を実行する方法を示したフローチャートである。 本開示の一実施形態における、優先順位が同じであるパターンのうちの１つに処理を実行する方法を示したフローチャートである。 本開示の一実施形態における、視覚的にコーディングされたパターンのパターン類型を判定する方法を示したフローチャートである。 本開示の一実施形態における、ユーザ端末が複数の視覚的にコーディングされたパターンを受信する場合、パターンスキャンモードに入るかを確認するための通知を表示する例を示した図である。 本開示の一実施形態における、ユーザによって選択されたパターンのプレビューをディスプレイ上に表示する例を示した図である。 本開示の一実施形態における、イメージ内に含まれた複数のパターンそれぞれのプレビューをディスプレイ上に表示する例を示した図である。 本開示の一実施形態における、ユーザによって選択されたパターンのプレビューをディスプレイ上に表示する例を示した図である。 本開示の一実施形態における、視覚的にコーディングされたパターン認識方法を示したフローチャートである。 本開示の一実施形態における、視覚的にコーディングされたパターン認識方法を示したフローチャートである。

以下、本開示を実施するための具体的な内容について、添付の図面を参照しながら詳しく説明する。ただし、以下の説明において、本開示の要旨を不必要に不明瞭にする恐れがある場合には、周知の機能や構成についての具体的な説明は略する。

添付の図面において、同一あるいは対応する構成要素には同じ参照符号を付与する。また、以下の実施形態の説明において、同一あるいは対応する構成要素の重複する記述は省略することもある。しかし、構成要素の記述が省略されたとしても、この構成要素が一実施形態に含まれないように意図するものではない。

開示される実施形態の利点および特徴、またはこれらを達成する方法は、添付の図面とともに以下で説明する実施形態を参照すれば明確になるであろう。しかし、本開示は、以下で開示される実施形態に限定されてはならず、互いに異なる多様な形態で実現可能である。本実施形態は、本開示が完全に理解されるようにし、本開示が属する技術分野において通常の知識を有する者に発明の範疇を完全に知らせるために提供されるものに過ぎない。

先ず、本明細書で使用する用語について簡単に説明してから、開示する実施形態について具体的に説明する。

本明細書で使用する用語は、本開示の機能を考慮しながら、可能である現在広く使用されている一般的な用語を選択したが、これは関連分野の当業者の意図または判例、新たな技術の出現などによって異なることがある。また、特定の場合には出願人が任意で選定した用語も含まれているが、この場合には該当する発明の説明部分でその意味について詳しく記載する。したがって、本開示で使用する用語は、単なる用語の名称ではなく、その用語が含む意味と本開示の全般にわたる内容に基づいて定義されなければならない。

本明細書で使用する単数の表現は、文脈上において明らかに単数であると特定しない限り、複数の表現を含む。また、複数の表現は、文脈上において明らかに複数であると特定しない限り、単数の表現を含む。

明細書の全般にわたり、ある部分がある構成要素を「含む」とするときには、この反対となる記載がない限り、他の構成要素を除外するのではなく、他の構成要素をさらに含むことを意味する。

また、明細書で使用する「モジュール」または「部」という用語は、ソフトウェアまたはハードウェア構成要素を意味し、「モジュール」または「部」は、何らかの役割を実行する。しかし、「モジュール」または「部」がソフトウェアまたはハードウェアに限定されてはならない。「モジュール」または「部」は、アドレッシング可能な記録媒体に存在するように構成されても、それ以上のプロセッサを再生させるように構成されてもよい。したがって、一例として、「モジュール」または「部」は、ソフトウェア構成要素、オブジェクト志向ソフトウェア構成要素、クラス構成要素およびタスク構成要素のような構成要素、プロセス、関数、属性、プロシージャ、サブルーチン、プログラムコードのセグメント、ドライバー、ファームウェア、マイクロコード、回路、データ、データベース、データ構造、テーブル、アレイ、または変数のうちの少なくとも１つを含んでよい。構成要素と「モジュール」または「部」の内部で提供される機能は、さらに少ない数の構成要素および「モジュール」または「部」に結合されても、追加される構成要素と「モジュール」または「部」にさらに分離されてもよい。

本開示の一実施形態によると、「モジュール」または「部」は、プロセッサおよびメモリで実現されてよい。「プロセッサ」は、汎用プロセッサ、中央処理装置（ＣＰＵ）、マイクロプロセッサ、デジタル信号プロセッサ（ＤＳＰ）、制御器、マイクロ制御器、状態マシンなどを含むように広く解釈されなければならない。ある環境において、「プロセッサ」は、特定用途向け集積回路（ＡＳＩＣ）、プログラマブルロジックデバイス（ＰＬＤ）、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）などを意味してもよい。「プロセッサ」は、例えば、ＤＳＰとマイクロプロセッサの組み合わせ、複数のマイクロプロセッサの組み合わせ、ＤＳＰコアと結合する１つ以上のマイクロプロセッサの組み合わせ、または任意の他のこのような構成の組み合わせのような処理デバイスの組み合わせを意味してもよい。また、「メモリ」は、電子情報の記録が可能な任意の電子コンポーネントを含むように広く解釈されなければならない。「メモリ」は、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＮＶＲＡＭ（Ｎｏｎｖｏｌａｔｉｌｅ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、ＰＲＯＭ（Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ Ｏｎｌｙ ｍｅｍｏｒｙ）、ＥＰＲＯＭ（Ｅｒａｓａｂｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ Ｏｎｌｙ ｍｅｍｏｒｙ）、ＥＥＰＲＯＭ（Ｅｌｅｃｔｒｉｃａｌｌｙ Ｅｒａｓａｂｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ Ｏｎｌｙ ｍｅｍｏｒｙ）、フラッシュメモリ、磁気または光データ記録装置、レジスタなどのようなプロセッサ読み取り可能な媒体の多様な類型を意味してもよい。プロセッサがメモリから情報を読み取ったりメモリに情報を記録することができれば、メモリとプロセッサは電子通信状態であると言える。プロセッサに集積されたメモリは、プロセッサと電子通信状態にある。

本開示において、「イメージ」は、ユーザ端末に内蔵されたイメージセンサによって撮像されたイメージ、ユーザ端末と通信可能に構成されたイメージセンサによって撮像されたイメージを含んでよい。また、イメージは、撮像されたビデオ映像から抽出された一部イメージを含んでよい。

本開示において、「視覚的にコーディングされたパターン」とは、データまたは情報を機械読み取り可能な視覚的形態で表示したコードを意味する。パターンリーダーまたはスマートフォンなどのようにカメラが内蔵された装置の応用プログラムを利用して、視覚的にコーディングされたパターンをスキャン／読み取る。視覚的にコーディングされたパターンは、視覚的にコーディングされた１次元パターンと視覚的にコーディングされた２次元パターンを含む。視覚的にコーディングされた１次元パターンは、それぞれ異なる幅と間隔の平行線で構成され、ＵＰＣ（Ｕｎｉｖｅｒｓａｌ Ｐｒｏｄｕｃｔ Ｃｏｄｅ）などを含む。視覚的にコーディングされた２次元パターンは、四角形、点、六角形などの幾何学的パターンで構成され、Ｄａｔａ Ｍａｔｒｉｘ、Ｍａｘｉ Ｃｏｄｅ、ＱＲ（Ｑｕｉｃｋ Ｒｅｓｐｏｎｓｅ）コードなどを含む。本明細書において、「視覚的にコーディングされたパターン」は、「パターン」と記載することもある。

図１は、本開示の一実施形態における、ユーザ端末１２０が実行するパターン認識方法の例を示した図である。図１に示すように、ユーザ１１０は、オブジェクト１３０に含まれた第１パターン１３２、第２パターン１３４、および第３パターン１３６のうちの１つをスキャンするために、ユーザ端末１２０のイメージセンサがオブジェクト１３０に向かうようにユーザ端末１２０を把持してよい。例えば、オブジェクト１３０は、複数の視覚的にコーディングされたパターンが印刷された文書であってよい。図に示すように、第１パターン１３２と第２パターン１３４は２次元パターンであり、第３パターン１３６は１次元パターンであってよい。

ユーザ端末１２０が第１パターン１３２、第２パターン１３４、および第３パターン１３６が含まれたイメージを受信する場合、ユーザ端末１２０は、イメージから視覚的にコーディングされたパターン１３２、１３４、１３６が含まれた領域を検出して各パターンのパターン類型を判定してよい。ユーザ端末１２０は、各パターンのパターン類型の優先順位を比較し、最も高い優先順位のパターンの処理を自動で実行してよい。例えば、ユーザ端末１２０が、第１パターン１３２の優先順位が第２パターン１３４および第３パターン１３６の優先順位よりも高いと判定する場合、ユーザ端末１２０は、ユーザ入力がなくても、第１パターン１３２の処理を自動で実行してよい。

このために、ユーザ端末１２０は、予め定義されたパターン類型ごとに優先順位を記録しておいてよい。一実施形態において、ユーザ端末１２０は、特定の会社の金融サービス（例えば、ＬＩＮＥ Ｐａｙサービス）関連のパターンは第１パターン類型として判定し、特定の会社の非金融サービス（例えば、ＬＩＮＥメッセンジャーサービス）関連のパターンは第２パターン類型として判定し、その他の会社のサービス関連の２次元パターンは第３パターン類型として判定し、その他の１次元パターンは第４パターン類型として判定してよい。この場合、ユーザ端末１２０は、第１パターン類型、第２パターン類型、第３パターン類型、第４パターン類型の順に高い優先順位であるとして予め定義しておいてよい。

１つのイメージ内で同じパターン類型のパターンが複数存在し、該当のパターンよりも高い優先順位のパターンは存在しない場合、ユーザ端末１２０は、ユーザに該当のパターンのプレビューを提供して、実行（または、スキャン）したい１つのパターンをユーザが選択できるようにしてよい。代案的に、ユーザ端末は、該当のパターンの信頼度点数を算出し、最も高い信頼度点数のパターンの処理を自動で実行してよい。この場合、各パターンの信頼度点数は、イメージ内のパターンの位置または大きさのうちの少なくとも１つに基づいて算出されてよい。

他の実施形態において、ユーザ端末１２０は、イメージ内の複数のパターンのうちの１つに対して処理を自動で実行するのではなく、イメージに含まれた複数のパターン１３２、１３４、１３６のうちから１つのパターンをユーザ１１０が選択できるようにしてよい。この場合、ユーザ端末１２０は、イメージから検出されたパターン１３２、１３４、１４６を選択可能なオプションとしてディスプレイ上に表示してよい。追加的または代案的に、ユーザ端末１２０は、イメージから検出されたパターン１３２、１３４、１４６のプレビューを生成してディスプレイ上に表示してよい。この場合、ユーザ１１０は、ディスプレイ上に表示されたパターンのプレビューを確認した後、１つのパターンを選択し、該当のパターンに対する処理を実行してよい。

図２は、本開示の一実施形態における、パターン認識を実行するために、複数のユーザ端末２１０、２２０、２３０がサーバ２５０と通信可能に接続された構成を示した図である。図２では、携帯電話端末機２１０、タブレット端末機２２０、およびノート型ＰＣ２３０がユーザ端末の例として示されているが、これに限定されてはならず、ユーザ端末は、有線および／または無線通信が可能であり、イメージセンサ（例えば、カメラ）が内蔵されているかイメージセンサとの通信が可能であり、視覚的にコーディングされたパターンをスキャンすることのできる応用プログラムがインストールされて実行可能な任意のコンピュータ装置であってよい。例えば、ユーザ端末は、スマートフォン（ｓｍａｒｔ ｐｈｏｎｅ）、携帯電話、ナビゲーション、ＰＣ、ノート型ＰＣ、デジタル放送用端末、ＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔｓ）、ＰＭＰ（Ｐｏｒｔａｂｌｅ Ｍｕｌｔｉｍｅｄｉａ Ｐｌａｙｅｒ）、タブレット、ゲームコンソール（ｇａｍｅ ｃｏｎｓｏｌｅ）、ウェアラブルデバイス（ｗｅａｒａｂｌｅ ｄｅｖｉｃｅ）、ＩｏＴ（ｉｎｔｅｒｎｅｔ ｏｆ ｔｈｉｎｇｓ）デバイス、ＶＲ（ｖｉｒｔｕａｌ ｒｅａｌｉｔｙ）デバイス、ＡＲ（ａｕｇｍｅｎｔｅｄ ｒｅａｌｉｔｙ）デバイスなどを含んでよい。

また、図２には、３つのユーザ端末２１０、２２０、２３０がネットワーク２４０を介してサーバ２５０と通信するように示されているが、これに限定されることはなく、他の数のユーザ端末がネットワーク２４０を介してサーバ２５０と通信するように構成されてもよい。ネットワーク２４０を介した通信方式に制限はなく、移動通信網、有線インターネット、無線インターネット、放送網、衛星網、ユーザ端末間の近距離無線通信などが含まれてよい。例えば、ネットワーク２４０は、ＰＡＮ（ｐｅｒｓｏｎａｌ ａｒｅａ ｎｅｔｗｏｒｋ）、ＬＡＮ（ｌｏｃａｌ ａｒｅａ ｎｅｔｗｏｒｋ）、ＣＡＮ（ｃａｍｐｕｓ ａｒｅａ ｎｅｔｗｏｒｋ）、ＭＡＮ（ｍｅｔｒｏｐｏｌｉｔａｎ ａｒｅａ ｎｅｔｗｏｒｋ）、ＷＡＮ（ｗｉｄｅ ａｒｅａ ｎｅｔｗｏｒｋ）、ＢＢＮ（ｂｒｏａｄｂａｎｄ ｎｅｔｗｏｒｋ）、インターネットなどのようなネットワークのうちの１つ以上の任意のネットワークを含んでよい。また、ネットワーク２４０は、バスネットワーク、スターネットワーク、リングネットワーク、メッシュネットワーク、スター−バスネットワーク、ツリーまたは階層的（ｈｉｅｒａｒｃｈｉｃａｌ）ネットワークなどを含むネットワークトポロジのうちの任意の１つ以上を含んでよいが、これに制限されることはない。

一実施形態によると、サーバ２５０は、コンピュータ実行可能なプログラムおよびデータを記録、提供、および実行することのできる１つ以上のサーバ装置および／またはデータベース、またはクラウドコンピューティングサービス基盤の１つ以上の分散コンピューティング装置および／または分散データベースを含んでよい。一実施形態において、サーバ２５０は、ＵＲＬ（Ｕｎｉｆｏｒｍ Ｒｅｓｏｕｒｃｅ Ｌｏｃａｔｏｒ）のサムネイル、タイトル、または説明文のうちの少なくとも１つを記録するように構成されたウェブサーバであってよい。

一実施形態において、パターンがＵＲＬ（Ｕｎｉｆｏｒｍ Ｒｅｓｏｕｒｃｅ Ｌｏｃａｔｏｒ）のエンコードに該当する場合、ユーザ端末２１０、２２０、２３０は、該当のパターンのプレビューを生成するために、該当のパターンをサーバ２５０に送信するか、パターンによってコーディングされたＵＲＬ情報をサーバ２５０に送信してよい。この場合、サーバ２５０は、該当のＵＲＬと関連するサムネイル、タイトル、または説明文のうちの少なくとも１つをユーザ端末２１０、２２０、２３０に提供してよい。ユーザ端末２１０、２２０、２３０は、受信したサムネイル、タイトル、または説明文のうちの少なくとも１つを、該当のパターンのプレビューとしてディスプレイに表示してよい。

図３は、本発明の一実施形態における、ユーザ端末３００の構成を示したブロック図である。ユーザ端末３００は、キャプチャおよびイメージ処理能力を予め備えた任意の装置であってよい。図に示すように、ユーザ端末３００は、イメージセンサ３１０、ディスプレイ３２０、入力インタフェース３３０、通信モジュール３４０、プロセッサ３５０、および格納部３６０を備えてよい。

イメージセンサ３１０は、１つまたは複数のイメージを受信するように構成されてよい。例えば、イメージセンサ３１０は、カメラモジュールであってよい。イメージセンサ３１０によって受信されるイメージは、ユーザ端末３００の格納部３６０に、電子ファイルの形態で一時的または永続的に格納されてよい。一実施形態において、イメージセンサ３１０によって受信されたイメージは、該当のイメージが視覚的にコーディングされたパターンを含むかを判定するためにプロセッサ３５０に提供されてよい。他の実施形態において、イメージセンサ３１０は、入力インタフェース３３０を通じてユーザから入力コマンドを受信することに応答し、イメージを格納部３６０に格納するかプロセッサ３５０に提供するように構成されてよい。

ディスプレイ３２０は、ユーザ端末３００が生成する情報および／またはデータを出力するように構成されてよい。一実施形態によると、イメージセンサ３１０によって受信されるイメージは、ディスプレイ３２０上に表示されてよい。ディスプレイ３２０の他に、スピーカ、触覚フィードバックデバイスなどのような装置が、ディスプレイ３２０とともに出力装置として提供されてよい。

入力インタフェース３３０は、ユーザがユーザ端末３００に情報および／またはデータを入力するように構成されてよい。例えば、入力インタフェース３３０は、タッチスクリーン、ボタン、キーパッド、タッチパッド、キーボード、マイクロフォン、マウスなどの装置を含んでよい。図３では、ディスプレイ３２０と入力インタフェース３３０が別の構成要素として示されているが、これに限定されることはなく、ディスプレイ３２０と入力インタフェース３３０とを統合して入力／出力装置として提供されてもよい。

図３に示すように、ユーザ端末３００は、通信モジュール３４０を利用してネットワーク３７０を介して他の装置と情報および／またはデータを通信するように構成されてよい。一例として、ユーザ端末３００のプロセッサ３５０が、格納部３６０に記録されたプログラムコードによって生成した要求は、通信モジュール３４０の制御にしたがってネットワーク３７０を介して他の装置（例えば、サーバ）に伝達されてよい。これとは逆に、他の装置が提供する制御信号や命令、コンテンツ、ファイルなどは、通信モジュール３４０を通じてユーザ端末３００に受信されてよい。例えば、通信モジュール３４０を通じて受信された他の装置の制御信号や命令、コンテンツ、ファイルなどは、プロセッサ３５０や格納部３６０に伝達されてよい。

プロセッサ３５０は、基本的な算術、ロジック、および入出力演算を実行することにより、コンピュータプログラムの命令を処理するように構成されてよい。命令は、格納部３６０または通信モジュール３４０によってプロセッサ３５０に提供されてよい。例えば、プロセッサ３５０は、格納部３６０に記録されたプログラムコードにしたがって受信される命令を実行するように構成されてよい。一実施形態において、プロセッサ３５０は、パターン領域検出部３５２、パターン類型判定部３５４、パターンプレビュー生成部３５６、およびパターン処理部３５８を備えてよい。

格納部３６０は、任意のコンピュータ読み取り可能な記録媒体を含んでよい。一実施形態によると、格納部３６０は、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ディスクドライブ、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）、フラッシュメモリ（ｆｌａｓｈ ｍｅｍｏｒｙ）などのような記録装置を含んでよい。格納部３６０には、オペレーティングシステムや応用プログラムなどのような少なくとも１つのプログラムコードが記録されてよい。

一実施形態において、イメージセンサ３１０は、複数のパターンを含むイメージを受信してよい。この場合、イメージセンサ３１０が受信したイメージは、ディスプレイ３２０上に出力され、プロセッサ３５０に提供されてよい。プロセッサ３５０は、受信したイメージをパターン領域検出部３５２に提供し、パターン領域検出部３５２は、イメージ内から視覚的にコーディングされたパターンが含まれる領域を検出し、イメージ内に視覚的にコーディングされたパターンが含まれているか判定してよい。

パターン領域検出部３５２が、受信したイメージ内に視覚的にコーディングされたパターンは含まれていないと判定する場合、プロセッサ３５０は、イメージセンサ３１０が後続するイメージを受信するようにしてよい。パターン領域検出部３５２が、受信したイメージ内に視覚的にコーディングされたパターンが１つ含まれると判定する場合、パターン領域検出部３５２は、該当のパターンをパターン処理部３５８に提供し、パターン処理部３５８が該当のパターンの処理を実行するようにしてよい。また、パターン領域検出部３５２が、受信したイメージ内に複数のパターンが含まれると判定する場合、パターン領域検出部３５２は、検出された複数のパターン（または、パターンが検出された領域のイメージ）をパターン類型判定部３５４に提供してよい。

パターン類型判定部３５４は、受信した複数のパターンそれぞれのパターン類型を判定してよい。例えば、特定の会社の金融サービス（例えば、ＬＩＮＥ Ｐａｙサービス）と関連するパターンは第１パターン類型として判定し、特定の会社の非金融サービス（例えば、ＬＩＮＥメッセンジャーサービス）と関連するパターンは第２パターン類型として判定し、その他の会社のサービスと関連する２次元パターンは第３パターン類型として判定し、１次元パターンは第４パターン類型として判定してよい。一実施形態において、パターン類型判定部３５４は、各パターンが特定の会社の金融サービス（例えば、ＬＩＮＥ Ｐａｙサービス）と関連するパターンであるかを判定するために、該当のパターンまたは該当のパターンによってコーディングされた情報を別のモジュール（例えば、ＬＩＮＥ Ｐａｙアプリケーション）に送信してよい。他の実施形態において、パターン類型判定部３５４は、各パターンが特定の会社の金融サービス（例えば、ＬＩＮＥ Ｐａｙサービス）と関連するパターンであるかを判定するためのモジュール（例えば、ＬＩＮＥ Ｐａｙアプリケーション）を含んでよい。

パターン処理部３５８は、パターン類型判定部３５４から複数のパターンそれぞれのパターン類型を受信し、格納部３６０に予め記録されたパターン類型ごとの優先順位に基づいてパターンの優先順位を比較してよい。例えば、格納部３６０には、第１パターン類型、第２パターン類型、第３パターン類型、第４パターン類型の順に高い優先順位であるとして事前に定義しておいてよい。最も高い優先順位のパターンが１つであると判定される場合、パターン処理部３５８は、該当のパターンの処理を、ユーザ入力なく、自動で実行してよい。

この反面、最も高い優先順位のパターンが２つ以上あると判定される場合、パターン処理部３５８は、各パターンの信頼度点数を算出してよい。一実施形態において、視覚的にコーディングされたパターンの信頼度点数は、該当のパターンの位置または大きさのうちの少なくとも１つに基づいて算出されてよい。例えば、視覚的にコーディングされたパターンの信頼度点数は、イメージの中心点と該当のパターンの中心点との距離に基づいて算出されるか、該当のパターンがイメージにおいて占める面積の割合に基づいて算出されてよい。この後、パターン処理部３５８は、最も高い信頼度点数のパターンの処理を、ユーザ入力なく、自動で実行してよい。

他の実施形態において、最も高い優先順位のパターンが２つ以上あると判定される場合、パターン処理部３５８は、最も高い優先順位のパターンをパターンプレビュー生成部３５６に提供してよい。この場合、パターンプレビュー生成部３５６は、各パターンのプレビューを生成してディスプレイ３２０上に表示し、ユーザが１つのパターンを選択できるようにしてよい。このとき、パターンプレビュー生成部３５６は、各パターンの信頼度点数を算出し、より高い信頼度点数のパターンのプレビューをディスプレイ３２０上のプレビュー領域の上端に表示してよい。ユーザが入力インタフェース３３０を利用してディスプレイ３２０に表示されたプレビューのうちから１つを選択する場合、パターン処理部３５８は、ユーザが選択したプレビューと関連するパターンの処理を実行してよい。代案的に、プレビュー生成部３５６は、最も高い信頼度点数のパターンのプレビューだけをディスプレイ３２０上のプレビュー領域に表示してもよい。

また他の実施形態において、パターン領域検出部３５２が、受信したイメージ内から複数のパターンを検出する場合、検出された複数のパターンが、パターン類型判定部３５４ではなくパターンプレビュー生成部３５６に提供されるように構成されてよい。この場合、パターンプレビュー生成部３５６は、各パターンのプレビューを生成してディスプレイ３２０上に表示してよい。例えば、各パターンのプレビューは、ディスプレイ３２０上のプレビュー領域に表示されてよい。このとき、パターンプレビュー生成部３５６は、パターンの優先順位および／またはパターンの信頼度点数に基づいてパターンのプレビューの表示順を決定してよい。ユーザがディスプレイ３２０上に表示された複数のプレビューのうちから１つを選択する場合、パターン処理部３５８は、ユーザによって選択されたプレビューと関連するパターンの処理を実行してよい。

例示的に、視覚的にコーディングされたパターンがＵＲＬ（Ｕｎｉｆｏｒｍ Ｒｅｓｏｕｒｃｅ Ｌｏｃａｔｏｒ）のエンコードに該当する場合、パターンプレビュー生成部３５６は、該当のパターンまたは該当のパターンによってコーディングされたＵＲＬ情報を、通信モジュール３４０を通じて外部装置（例えば、ウェブサーバ）に送信してよい。この場合、ユーザ端末３００は、外部装置から該当のＵＲＬと関連するサムネイル、タイトル、または説明文のうちの少なくとも１つを受信してよい。パターンプレビュー生成部３５６は、外部装置から受信したサムネイル、タイトル、または説明文のうちの少なくとも１つに基づいて該当のパターンのプレビューを生成してよい。

他の例として、視覚的にコーディングされたパターンがテキスト情報のエンコードに該当する場合、パターンプレビュー生成部３５６は、該当のテキスト情報に基づいて視覚的にコーディングされたパターンプレビューを生成してよい。視覚的にコーディングされたパターンが特定の会社の金融サービスまたは特定の会社の非金融サービスと関連する情報（例えば、ＵＲＬ情報）のエンコードに該当する場合、パターンプレビュー生成部３５６は、該当のパターンによってコーディングされた特定の会社の金融サービスまたは非金融サービスを実行することのできるユーザインタフェースをプレビューとして生成してよい。

ユーザ端末３００は、図３に示した構成要素よりも多くの構成要素を含んでよい。一実施形態によると、ユーザ端末３００は、トランシーバ（ｔｒａｎｓｃｅｉｖｅｒ）、ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）モジュール、各種センサ、データベースなどのような他の構成要素をさらに含んでよい。例えば、ユーザ端末３００がスマートフォンである場合、一般的にスマートフォンが備えている構成要素を含んでよく、例えば、加速度センサやジャイロセンサ、物理的な各種ボタン、タッチパネルを利用したボタン、入力／出力ポート、振動のための振動器などのような多様な構成要素がユーザ端末３００にさらに含まれるように実現されてよい。この場合、ユーザ端末３００は、受信したイメージからパターンが検出される場合、ユーザにフィードバック（例えば、触覚フィードバック）を提供するように構成されてよい。

図４は、本発明の一実施形態における、パターン類型ごとに優先順位を定義するルックアップテーブル４００を示した図である。一実施形態において、視覚的にコーディングされたパターンは、特定の会社の金融サービス（例えば、ＬＩＮＥ Ｐａｙサービス）関連のパターン、特定の会社の非金融サービス（例えば、ＬＩＮＥメッセンジャーサービス）関連のパターン、その他の会社のサービス関連の２次元パターン、および１次元パターンに分類されてよい。ルックアップテーブル４００によると、特定の会社の金融サービス関連のパターン、特定の会社の非金融サービス関連のパターン、その他の会社のサービス関連の２次元パターン、１次元パターンの順に高い優先順位となる。

例えば、特定の会社の金融サービス関連のパターンは、費用を支払うためのパターン（例えば、店に配備される店用ＱＲコード、ユーザが店で費用を支払うために使用するＱＲコードなど）、割り勘（ｓｐｌｉｔ ｂｉｌｌ）用パターン（例えば、複数人のユーザが費用を分割して支払うためのＱＲコード）、費用送金のためのパターンなどを含んでよい。特定の会社の非金融サービス関連のパターンは、友達追加用パターン（例えば、特定のユーザを友達として追加するためのＱＲコード）、チャットルーム招待パターン、オープンチャット招待パターン、ログインを実行するためのパターン（例えば、ＱＲコードログイン）などを含んでよい。その他の会社のサービス関連の２次元パターンは、ＵＲＬをエンコードする２次元パターン、テキスト情報をエンコードする２次元パターンなどを含んでよい。

図５は、本発明の一実施形態における、ユーザ入力なく、パターンの処理を自動で実行する例を示した図である。図５には、ユーザ端末の第１動作段階５１０および第２動作段階５２０が示されている。第１動作段階５１０は、ユーザ端末のイメージセンサによって受信されるイメージに含まれた複数のパターン５１２、５１４のうち、第１パターン５１２が、ユーザ入力なく、自動で選択されることを示している。第１パターン５１２は、特定の会社の金融サービスと関連する２次元パターンであってよく、第２パターン５１４は、特定の会社の非金融サービスと関連する２次元パターンであってよい。この場合、第１パターン５１２が、第２パターン５１４よりも高い優先順位であると判定されてよい。

第１動作段階５１０で、ユーザ端末は、第１パターン５１２が含まれる領域と第２パターン５１４が含まれる領域を、ディスプレイ上で互いに異なる色でハイライト表示してよい。図５では、検出された第１パターン５１２および第２パターン５１４が互いに異なる色でハイライト表示されることを示しているが、これに限定されることはなく、ユーザがディスプレイ上で各パターン領域を容易に確認することができるように、第１パターン５１２および第２パターン５１４がシェーディング表示などのような多様な方式で表示されてよい。また、ユーザ端末は、より高い優先順位の第１パターン５１２の処理が自動で実行されることをユーザに予告するために、第１パターン５１２上に指示子５１６を表示してよい。

第２動作段階５２０は、第１パターン５１２の処理が、ユーザ入力なく、自動で実行された画面例を示している。第１パターン５１２は特定の会社の金融サービス関連のパターンであるため、該当のパターンと関連する特定の会社の金融サービス提供画面がユーザ端末のディスプレイ上に表示されてよい。この場合、ユーザは、ディスプレイに表示された決済ボタン５２２を選択することにより、費用の支払いを進めてよい。

図６は、本開示の一実施形態における、視覚的にコーディングされたパターン認識方法６００を示したフローチャートである。段階６１０で、ユーザ端末が第１パターンおよび第２パターンを含むイメージを受信することにより、方法６００が始まってよい。例えば、ユーザ端末が、視覚的にコーディングされたパターンを認識するためのパターンスキャンモードの起動中に、複数のパターンが含まれたイメージが受信されたとする。このとき、ユーザ端末は、イメージから視覚的にコーディングされたパターン（第１パターンおよび第２パターン）が含まれた領域を検出し、各パターンのパターン類型を判定してよい（段階６２０）。一実施形態において、ユーザ端末は、特定の会社の金融サービス（例えば、ＬＩＮＥ Ｐａｙサービス）関連のパターンは第１パターン類型として判定し、特定の会社の非金融サービス（例えば、ＬＩＮＥメッセンジャーサービス）関連のパターンは第２パターン類型として判定し、その他の会社のサービス関連の２次元パターンは第３パターン類型として判定し、１次元パターンは第４パターン類型として判定してよい。

段階６３０で、ユーザ端末は、第１パターンのパターン類型と第２パターンのパターン類型の優先順位を比較してよい。例えば、ユーザ端末は、第１パターン類型、第２パターン類型、第３パターン類型、第４パターン類型の順に高い優先順位であるとして予め定義しておいてよい。段階６３０での判定結果に基づき、ユーザ端末は、第１パターンのパターン類型と第２パターンのパターン類型の優先順位が同じであるかを判定してよい（段階６４０）。

段階６４０で、第１パターンのパターン類型と第２パターンのパターン類型の優先順位が同じでないと判定される場合（すなわち、段階６４０でＮＯ）、ユーザ端末は、ユーザの入力なく、より高い優先順位であると判定されたパターンの処理を自動で実行してよい（段階６５０）。このような構成により、ユーザがカメラ撮影ボタンを押したり複数のパターンのうちから１つを選択したりしなくても、最も高い優先順位のパターンの処理が自動で実行されるため、円滑なユーザ経験を提供することができる。この反面、段階６４０で、第１パターンのパターン類型と第２パターンのパターン類型の優先順位が同じであると判定された場合（すなわち、段階６４０でＹＥＳ）、方法６００は、図７の方法７００または図８の方法８００に進んでよい。

図７は、本開示の一実施形態における、優先順位が同じであるパターンのうちの１つを処理する方法７００を示したフローチャートである。図６の段階６４０で、第１パターンのパターン類型と第２パターンのパターン類型の優先順位が同じであると判定された場合（すなわち、段階６４０でＹＥＳ）、ユーザ端末は、第１パターンの信頼度点数を算出してよい（段階７１０）。例えば、第１パターンの中心点と受信したイメージの中心点との距離を算出した結果に基づいて第１パターンの信頼度点数を算出してよい。この場合、第１パターンの信頼度点数は、第１パターンの中心点と受信したイメージの中心点との距離に反比例してよい。すなわち、視覚的にコーディングされたパターンの中心点が受信したイメージの中心点に近いほど、パターンの信頼度点数が高く算出されてよい。これは、ユーザは、より関心のあるパターンがイメージの中心点の近くに配置されるようにユーザ端末を把持する可能性が高いためである。

代案的に、第１パターンに対応する領域が受信したイメージにおいて占める面積の割合に基づいて第１パターンの信頼度点数を算出してよい。この場合、パターンに対応する領域が受信したイメージにおいて占める面積の割合が大きいほど、パターンの信頼度点数が高く算出されてよい。これは、ユーザは、より関心のあるパターンをイメージ内で高い面積の割合を占めるようにユーザ端末を把持する可能性が高いためである。

段階７２０で、ユーザ端末は、第２パターンの信頼度点数を算出してよい。第２パターンの信頼度点数は、第１パターンの信頼度点数を算出するときと同じ方式によって算出されてよい。すなわち、第２パターンの中心点と受信したイメージの中心点との距離を算出した結果、または第２パターンに対応する領域が受信したイメージにおいて占める面積の割合に基づき、第２パターンの信頼度点数が算出されてよい。図７では、第１パターンの信頼度点数を算出する段階７１０が第２パターンの信頼度点数を算出する段階７２０よりも先に行われるように示されているが、これに限定されることはなく、任意のパターンの信頼度点数を先に算出しても、信頼度点数を同時に算出してもよい。

次に、ユーザ端末は、算出された第１パターンの信頼度点数と第２パターンの信頼度点数とを比較し、より高い信頼度点数のパターンのプレビューをディスプレイに表示してよい（段階７３０）。例えば、第１パターンと第２パターンが同じ優先順位であり、第１パターンが第２パターンよりもイメージの中央から近くに位置する場合、ユーザ端末は、第１パターンの信頼度点数が第２パターンの信頼度点数よりも高いと判定し、第１パターンのプレビューをディスプレイ上に表示してよい。

一実施形態において、特定の会社の金融サービスまたは特定の会社の非金融サービスと関連するパターンの場合、ユーザ端末は、該当のサービス（特定の会社の金融サービスまたは特定の会社の非金融サービス）を実行することのできるユーザインタフェースをプレビューとしてディスプレイに表示してよい。パターンがその他の会社のサービスと関連するＵＲＬタイプのパターンである場合、ユーザ端末は、該当のパターンによってコーディングされたＵＲＬのサムネイル、タイトル、または説明文のうちの少なくとも１つを外部サーバから受信し、プレビューとしてディスプレイに表示してよい。テキスト情報をコーディングしたパターンの場合、ユーザ端末は、該当のテキスト情報に基づいてプレビューを生成してディスプレイに表示してよい。

段階７４０で、ユーザ端末は、プレビューとして表示されたパターンに対するユーザの選択を受信してよい。例えば、ユーザの選択は、ディスプレイに表示されたプレビューと関連するパターンの処理を実行するための入力であってよい。この場合、ユーザ端末は、ユーザが選択したパターンの処理を実行してよい（段階７５０）。図７では、より高い信頼度点数のパターンのプレビューをディスプレイに表示するように示されているが、これに限定されることはなく、同じ優先順位のパターンのプレビューすべてをディスプレイに表示してもよい。この場合、より高い信頼度点数のパターンのプレビューが、ディスプレイ上のプレビュー領域の上端に表示されてよい。

図８は、本開示の一実施形態における、優先順位が同じであるパターンのうちの１つを処理する方法８００を示したフローチャートである。図６の段階６４０で、第１パターンのパターン類型と第２パターンのパターン類型の優先順位が同じであると判定された場合（すなわち、段階６４０でＹＥＳ）、ユーザ端末は、第１パターンの信頼度点数を算出してよい（段階８１０）。例えば、第１パターンの中心点と受信したイメージの中心点との距離を算出した結果に基づいて第１パターンの信頼度点数を算出してよい。この場合、第１パターンの信頼度点数は、第１パターンの中心点と受信したイメージの中心点との距離に反比例してよい。すなわち、視覚的にコーディングされたパターンの中心点が受信したイメージの中心点に近いほど、パターンの信頼度点数が高く算出されてよい。これば、ユーザは、より関心のあるパターンがイメージの中心点の近くに配置されるようにユーザ端末を把持する可能性が高いためである。

代案的に、第１パターンに対応する領域が受信したイメージにおいて占める面積の割合に基づいて第１パターンの信頼度点数を算出してよい。この場合、パターンに対応する領域が受信したイメージにおいて占める面積の割合が大きいほど、パターンの信頼度点数が高く算出されてよい。これは、ユーザは、より関心のあるパターンをイメージ内で高い面積の割合を占めるようにユーザ端末を把持する可能性が高いためである。

段階８２０で、ユーザ端末は、第２パターンの信頼度点数を算出してよい。第２パターンの信頼度点数は、第１パターンの信頼度点数を算出するときと同じ方式によって算出されてよい。すなわち、第２パターンの中心点と受信したイメージの中心点との距離を算出した結果、または第２パターンに対応する領域が受信したイメージにおいて占める面積の割合に基づき、第２パターンの信頼度点数が算出されてよい。図８では、第１パターンの信頼度点数を算出する段階８１０が第２パターンの信頼度点数を算出する段階８２０よりも先に行われるように示されているが、ここに限定されることはなく、任意のパターンの信頼度点数を先に算出しても、信頼度点数を同時に算出してもよい。

次に、ユーザ端末は、算出された第１パターンの信頼度点数と第２パターンの信頼度点数とを比較し、より高い信頼度点数のパターンの処理を、ユーザ入力なく、自動で実行してよい（段階８３０）。例えば、第１パターンと第２パターンが同じ優先順位であり、第１パターンが第２パターンよりもイメージの中央から近くに位置する場合、ユーザ端末は、第１パターンの信頼度点数が第２パターンの信頼度点数よりも高いと判定し、ユーザ入力なく、第１パターンの処理を自動で実行してよい。このような構成により、ユーザがカメラ撮影ボタンを押したり複数のパターンのうちから１つを選択したりしなくても、最も高い優先順位および最も高い信頼度点数のパターンの処理が自動で実行されるため、円滑なユーザ経験を提供することができる。

図９は、本開示の一実施形態における、視覚的にコーディングされたパターンのパターン類型を判定する方法９００を示したフローチャートである。ユーザ端末は、例えば、パターンスキャンモードの起動中にイメージ内から複数のパターンが検出される場合、各パターンに対するパターン類型の判定を開始してよい（段階９１０）。ユーザ端末は、１つのパターンに対し、先ずは、特定の会社の金融サービス（例えば、ＬＩＮＥ Ｐａｙサービス）と関連するパターンであるか判定してよい（段階９２０）。

該当のパターンが特定の会社の金融サービスと関連するパターンであると判定される場合、ユーザ端末は、該当のパターンは第１パターン類型であると判定してよい（段階９３０）。この反面、該当のパターンが特定の会社の金融サービスと関連しないパターンであると判定される場合、ユーザ端末は段階９４０に進み、該当のパターンが特定の会社の非金融サービス（例えば、ＬＩＮＥメッセンジャーサービス）と関連するパターンであるか判定してよい。ここで、該当のパターンが特定の会社の非金融サービスと関連するパターンであると判定される場合、ユーザ端末は、該当のパターンは第２パターン類型であると判定してよい（段階９５０）。この反面、該当のパターンが特定の会社の非金融サービスとも関連しないパターンであると判定される場合、ユーザ端末は段階９６０に進み、該当のパターンが２次元パターンであるか判定してよい。

該当のパターンが２次元パターンであると判定される場合、ユーザ端末は、該当のパターンは第３パターン類型であると判定してよい（段階９７０）。この反面、該当のパターンが２次元パターンでもないと判定される場合（例えば、１次元パターン）、ユーザ端末は、該当のパターンは第４パターン類型であると判定してよい（段階９８０）。

図１０は、本開示の一実施形態における、ユーザ端末が複数の視覚的にコーディングされたパターンを受信する場合、パターンスキャンモードに入るかを確認するための通知を表示する例を示した図である。ユーザ端末は、イメージ撮影モードでは、イメージセンサによって複数のイメージを順に受信している途中に、ユーザがイメージ撮影ボタン１０１６をタッチ入力などによって選択することによって写真をキャプチャするように構成されてよい。また、ユーザ端末は、パターンスキャンモードでは、イメージセンサによって複数のイメージを順に受信している途中に、受信したイメージ内からパターンが検出されれば、ユーザの入力なく、検出されたパターンを自動で実行したり、検出されたパターンのプレビューをディスプレイ上に表示したりするように構成されてよい。追加的に、ユーザ端末は、イメージ撮影モードで、受信したイメージ内からパターンが検出される場合、パターンスキャンモードに入るかをユーザに確認してよい。

第１動作段階１０１０は、ユーザ端末が、イメージ撮影モードで、イメージセンサによって複数のパターン１０１２、１０１４が含まれたイメージを受信することを示している。この場合、ユーザ端末は、受信したイメージ内から複数のパターン１０１２、１０１４を検出してよい。第２動作段階１０２０は、ユーザ端末が、イメージ撮影モードで、受信したイメージ内から複数のパターン１０１２、１０１４を検出し、パターンスキャンモードに入るかを確認するための通知１０２２をユーザ端末のディスプレイ上に表示することを示している。ユーザが通知１０２２をタッチ入力などによって選択する場合、ユーザ端末は、パターンスキャンモードに入り、複数のパターン１０１２、１０１４を処理してよい。

図１１は、本開示の一実施形態における、ユーザによって選択されたパターンのプレビューをディスプレイ上に表示する例を示した図である。図１１には、ユーザ端末の第１動作段階１１１０、第２動作段階１１２０、および第３動作段階１１３０が示されている。第１動作段階１１１０は、ユーザ端末が、パターンスキャンモードを起動中の状態で、イメージセンサによって視覚的にコーディングされた第１パターン１１１２および第２パターン１１１４を含むイメージを受信する場合、第１パターン１１１２および第２パターン１１１４を検出し、検出したパターン１１１２、１１１４を選択可能なオプションとしてディスプレイ上に表示することを示している。この場合、第１パターン１１１２が含まれた領域と第２パターン１１１４が含まれた領域は、ディスプレイ上で互いに異なる色でハイライト表示されてよい。

第２動作段階１１２０は、ユーザ端末が、ユーザから第１パターン１１１２に対するユーザの選択を受信し、第１パターン１１１２のプレビュー１１２４をディスプレイ上のプレビュー領域に表示することを示している。ユーザが第１パターン１１１２をタッチ入力などによって選択する場合、ユーザ端末は、第１パターン１１１２が選択されたことを知らせる指示子１１２２を第１パターン１１１２上に表示し、これに対するプレビュー１１２４をディスプレイのプレビュー領域に表示してよい。図に示すように、第１パターン１１１２は、特定の会社の非金融サービス（すなわち、ＬＩＮＥメッセンジャーサービス）で「Ｊａｍｅｓ」を友達として追加するためのパターンであってよい。

第１パターンのプレビュー１１２４は、ＬＩＮＥメッセンジャーのロゴ、友達として追加されるユーザの情報（例えば、「Ｊａｍｅｓ」）、友達追加ボタン１１２６、および共有ボタン１１２８を含んでよい。ユーザが友達追加ボタン１１２６をタッチ入力などによって選択する場合、ユーザ端末は、ＬＩＮＥメッセンジャーで友達追加機能を実行してよい。ユーザが共有ボタン１１２８をタッチ入力などによって選択する場合、ユーザ端末は、ユーザが、第１パターン１１１２または第１パターン１１１２によってコーディングされた情報を他のユーザと共有することができるようにする。第２動作段階１１２０において、第１パターンのプレビュー１１２４は、ＬＩＮＥメッセンジャーのロゴ、友達として追加されるユーザの情報（「Ｊａｍｅｓ」）、友達追加ボタン１１２６、および共有ボタン１１２８を含むように示されているが、これに限定されることはなく、他の情報をさらに含んでもよい。

第３動作段階１１３０は、ユーザ端末が、ユーザから第２パターン１１１４に対するユーザの選択を受信し、第２パターンのプレビュー１１３４をディスプレイ上のプレビュー領域に表示することを示している。ユーザが第２パターン１１１４をタッチ入力などによって選択する場合、ユーザ端末は、第２パターン１１１４が選択されたことを知らせる指示子１１３２を第２パターン１１１４上に表示し、これに対するプレビュー１１３４をディスプレイのプレビュー領域に表示してよい。図に示すように、第２パターン１１１４は、特定の会社以外の他の会社のサービスと関連するＵＲＬ情報をコーディングするパターンであってよい。

ユーザ端末は、ＵＲＬ情報をコーディングする第２パターン１１１４のプレビューを生成するために、該当のパターンを外部装置（例えば、ウェブサーバ）に送信するか、該当のパターンによってコーディングされたＵＲＬ情報を外部装置に送信してよい。この場合、ユーザ端末は、該当のＵＲＬと関連するサムネイル、タイトル、または説明文のうちの少なくとも１つを外部装置から受信してよい。第２パターンのプレビュー１１３４は、外部装置から受信したサムネイル、タイトル、説明文、および共有ボタン１１３６を含んでよい。

ユーザが第２パターンのプレビュー１１３４をタッチ入力などによって選択する場合、ユーザ端末は、ウェブブラウザアプリケーションなどで、第２パターン１１１４によってコーディングされたＵＲＬ情報の処理を実行してよい。ユーザが共有ボタン１１３６をタッチ入力などによって選択する場合、ユーザ端末は、ユーザが、第２パターン１１１４または第２パターン１１１４によってコーディングされたＵＲＬ情報を他のユーザと共有することができるようにする。第３動作段階１１３０において、第２パターンのプレビュー１１３４は、サムネイル、タイトル、説明文、および共有ボタン１１３６を含むように示されているが、これに限定されることはなく、他の情報をさらに含んでもよい。

図１１では、第１パターン１１１２および第２パターン１１１４がディスプレイに表示されることを示しているが、これに限定されることはなく、受信したイメージ内に３つ以上のパターンが含まれる場合には、３つ以上のパターンがディスプレイ上に選択可能なオプションとして表示されてよい。また、図１１では、ユーザがディスプレイ上に表示された選択可能なオプション（パターン）のうちの１つを選択すれば、該当のパターンのプレビューを表示するように示されているが、これに限定さることはなく、代案的に、イメージ内のパターンの優先順位に基づき、優先順位が高いパターンのプレビューを、ユーザの入力なく、自動で表示してもよい。この場合、イメージ内のパターンの優先順位が同じである場合は、各パターンの信頼度点数を算出し、信頼度点数が高いパターンのプレビューを、ユーザの入力なく、自動で表示してよい。

図１２は、本開示の一実施形態における、イメージ内に含まれた複数のパターンのプレビューをディスプレイ上に表示する例を示した図である。図１２には、ユーザ端末の第１動作段階１２１０および第２動作段階１２２０が示されている。第１動作段階１２１０は、ユーザ端末がパターンスキャンモードを起動中の状態で、イメージセンサによって視覚的にコーディングされた第１パターン１２１２および第２パターン１２１４を含むイメージを受信する場合、第１パターン１２１２および第２パターン１２１４を検出し、検出された第１パターン１１１２が含まれた領域と第２パターン１１１４が含まれた領域がディスプレイ上に互いに異なる色でハイライト表示されることを示している。

第２動作段階１２２０は、ユーザ端末が受信したイメージ内から第１パターン１２１２および第２パターン１２１４を検出することに応答し、第１パターンのプレビュー１２２２および第２パターンのプレビュー１２２８をディスプレイ上のプレビュー領域に自動で表示することを示している。図１２に示すように、第１パターン１２１２は、特定の会社の非金融サービス（すなわち、ＬＩＮＥメッセンジャーサービス）で「Ｊａｍｅｓ」を友達として追加するための２次元パターンであり、第２パターン１２１４は、テキストがコーディングされた２次元パターンであってよい。第１パターンのプレビュー１２２２は、ＬＩＮＥメッセンジャーのロゴ、友達として追加されるユーザの情報（「Ｊａｍｅｓ」）、友達追加ボタン１２２４、および共有ボタン１２２６を含んでよい。ユーザが第１パターンのプレビュー１２２２内の友達追加ボタン１２４６をタッチ入力などによって選択する場合、ユーザ端末は、ＬＩＮＥメッセンジャーで友達追加機能を実行してよい。ユーザが第１パターンのプレビュー１２２２内の共有ボタン１２２４をタッチ入力などによって選択する場合、ユーザ端末は、ユーザが、第１パターン１２１２または第１パターン１２１２によってコーディングされた情報を他のユーザと共有することができるようにする。

第２パターンのプレビュー１２２８は、パターンによってコーディングされたテキスト情報、テキストコピーボタン１２３０、および共有ボタン１２３２を含んでよい。ユーザがテキストコピーボタン１２３０をタッチ入力などによって選択する場合、パターンによってコーディングされたテキスト情報がユーザ端末のメモリ領域にコピーされてよい。ユーザが共有ボタン１２３２をタッチ入力などによって選択する場合、ユーザ端末は、ユーザが、第２パターン１２１４または第２パターン１２１４によってコーディングされたテキスト情報を他のユーザと共有することができるようにする。

図１２では、第１パターンのプレビュー１２２２および第２パターンのプレビュー１２２８がディスプレイに表示されるように示されているが、これに限定されることはなく、受信したイメージ内に３つ以上のパターンが含まれる場合には、３つ以上のパターンそれぞれに対するプレビューがディスプレイ上に表示されてもよい。また、図１２では、イメージ内のパターンの順にプレビューが表示されるように示されているが、これに限定されることはなく、代案的に、イメージ内のパターンの優先順位に基づき、優先順位が高いパターンのプレビューをプレビュー領域の上端に表示してもよい。この場合、イメージ内のパターンの優先順位が同じである場合は、各パターンの信頼度点数を算出し、信頼度点数が高いパターンのプレビューをプレビュー領域の上端に表示してよい。

図１３は、本開示の一実施形態における、ユーザによって選択されたパターンのプレビューをディスプレイ上に表示する例を示した図である。図１３には、ユーザ端末の第１動作段階１３１０、第２動作段階１３２０、および第３動作段階１３３０が示されている。第１動作段階１３１０は、ユーザ端末がパターンスキャンモードを起動中の状態で、イメージセンサによって視覚的にコーディングされた第１パターン１３１２および第２パターン１３１４を含むイメージを受信する場合、第１パターン１３１２および第２パターン１３１４を検出することを示している。この場合、第１パターン１３１２が含まれた領域と第２パターン１３１４が含まれた領域は、ディスプレイ上に互いに異なる色でハイライト表示されてよい。

第２動作段階１３２０は、ユーザ端末が、検出されたパターン１３１２、１３１４を選択可能なオプション１３２４、１３２６としてディスプレイ上のオプション領域１３２２に表示することを示している。例えば、選択可能なオプション１３２４、１３２６は、検出されたパターン１３１２、１３１４をリサイジングして生成されたアイコンであってよい。オプション領域１３２２には、検出された複数のパターンがすべて表示されてよい。

ユーザが第１オプション１３２４をタッチ入力などによって選択する場合、第１オプション１３２４と関連する第１パターン１３１２のプレビュー１３２８がディスプレイのプレビュー領域に表示されてよい。図に示すように、第１パターン１３１２は、特定の会社の非金融サービス（すなわち、ＬＩＮＥメッセンジャーサービス）で「Ｊａｍｅｓ」を友達として追加するための２次元パターンであってよい。この場合、第１オプション１３２４が選択されたことを知らせるために、選択されたオプション（すなわち、第２オプション１３２６）がシェーディング処理されてよい。ユーザが第１オプション１３２４と関連する第１パターン１３１２のプレビュー１３２８内の友達追加ボタンをタッチ入力などによって選択する場合、ユーザ端末は、ＬＩＮＥメッセンジャーで友達追加機能を実行してよい。

第３動作段階１３３０は、ユーザが第２オプション１３２６をタッチ入力などによって選択し、第２オプション１３２６と関連する第２パターン１３１４のプレビュー１３３２がディスプレイのプレビュー領域に表示されることを示している。図に示すように、第２パターン１３１４は、その他の会社のサービスと関連するＵＲＬ情報をコーディングする２次元パターンであってよい。この場合、ユーザ端末は、該当のＵＲＬと関連するサムネイル、タイトル、または説明文のうちの少なくとも１つを外部装置から受信し、外部装置から受信したサムネイル、タイトル、または説明文のうちの少なくとも１つを第２パターン１３１４のプレビュー１３３２としてディスプレイ上のプレビュー領域に表示してよい。ユーザが第２パターン１３１４のプレビュー１３３２を選択する場合、ユーザ端末は、ウェブブラウザアプリケーションなどで、第２パターン１３１４によってコーディングされたＵＲＬ情報の処理を実行してよい。

図１４は、本開示の一実施形態における、視覚的にコーディングされたパターン認識方法１４００を示したフローチャートである。段階１４１０で、ユーザ端末が第１パターンおよび第２パターンを含むイメージを受信することにより、段階１４００が始まってよい。例えば、ユーザ端末が、視覚的にコーディングされたパターンを認識するためのパターンスキャンモードを起動中に、複数のパターンが含まれたイメージが受信されてよい。

この後、ユーザ端末は、イメージから視覚的にコーディングされたパターン（第１パターンおよび第２パターン）が含まれた領域を検出し、第１パターンおよび第２パターンを選択可能なオプションとしてディスプレイ上に表示してよい（段階１４２０）。一実施形態において、第１パターンが含まれた領域と第２パターンが含まれた領域は、ディスプレイ上に互いに異なる色でハイライト表示され、選択可能なオプションとして使用されてよい。他の実施形態において、検出されたパターンをリサイジングして生成されたアイコンが、選択可能なオプションとしてディスプレイ上のオプション領域に表示されてよい。

段階１４３０で、ユーザ端末は、ユーザから第１パターンに対する選択を受信してよい。この場合、選択された第１パターンのプレビューがディスプレイ上のプレビュー領域に表示されてよい（段階１４４０）。段階１４５０で、ユーザから第１パターンのプレビューに対する選択を受信すれば、ユーザ端末は、第１パターンの処理を実行してよい（段階１４６０）。

図１４では、第１パターンおよび第２パターンを選択可能なオプションとしてディスプレイ上のオプション領域に表示するように示されているが、これに限定さることはなく、受信したイメージ内に３つ以上のパターンが含まれる場合には、３つ以上のパターンが選択可能なオプションとしてディスプレイ上のオプション領域に表示されてよい。

図１５は、本開示の一実施形態における、視覚的にコーディングされたパターン認識方法１５００を示したフローチャートである。段階１５１０で、ユーザ端末が第１パターンおよび第２パターンを含むイメージを受信することにより、段階１５００が始まってよい。例えば、ユーザ端末が、視覚的にコーディングされたパターンを認識するためのパターンスキャンモードを起動中に、複数のパターンが含まれたイメージが受信されてよい。

この後、ユーザ端末は、受信したイメージから第１パターンおよび第２パターンを検出し、第１パターンのプレビューおよび第２パターンのプレビューをディスプレイ上のプレビュー領域に表示してよい（段階１５２０）。一実施形態において、第１パターンおよび第２パターンのプレビューの配置は、第１パターンのパターン類型と第２パターンのパターン類型の優先順位の比較によって決定されてよい。代案的または追加的に、第１パターンおよび第２パターンのプレビューの配置は、第１パターンの信頼度点数と第２パターンの信頼度点数との比較によって決定されてよい。

ユーザ端末は、ユーザから、ディスプレイ上に表示された第１パターンのプレビューに対する選択を受信してよい（段階１５３０）。この場合、ユーザ端末は、選択された第１パターンの処理を実行してよい（段階１５４０）。図１５では、第１パターンおよび第２パターンのプレビューがディスプレイ上のプレビュー領域に表示されるように示されているが、これに限定されることはなく、受信したイメージ内に３つ以上のパターンが含まれる場合には、３つ以上のパターンのプレビューがディスプレイ上のプレビュー領域に表示されてよい。

上述した、視覚的にコーディングされたパターン認識方法は、コンピュータ読み取り可能な記録媒体にコンピュータ読み取り可能なコード（例えば、コンピュータプログラム）で実現されてもよい。コンピュータ読み取り可能な記録媒体は、コンピュータシステムによって読み取り可能なデータが記録されるすべての種類の記録装置を含む。コンピュータ読み取り可能な記録媒体の例としては、ＲＯＭ、ＲＡＭ、ＣＤ−ＲＯＭ、磁気テープ、フロッピ（登録商標）ディスク、光データ記録装置などがある。また、コンピュータ読み取り可能な記録媒体は、ネットワークによって接続されたコンピュータシステムに分散され、分散された状態でコンピュータ読み取り可能なコードが記録されて実行されてよい。また、上述した実施形態を実現するための機能的な（ｆｕｎｃｔｉｏｎａｌ）プログラム、コード、およびコードセグメントは、本発明が属する技術分野のプログラマーであれば、容易に推論することができるであろう。

本開示の方法、動作、または技法は、多様な手段によって実現されてよい。例えば、このような技法は、ハードウェア、ファームウェア、ソフトウェア、またはこれらの組み合わせによって実現されてもよい。本願の開示と連係して説明された多様な例示的な論理的ブロック、モジュール、回路、およびアルゴリズム段階は、電子ハードウェア、コンピュータソフトウェア、またはこれらの組み合わせによっても実現可能であることは、当業者であれば理解することができるであろう。ハードウェアおよびソフトウェアのこのような相互代替を明らかに説明するために、多様な例示的な構成要素、ブロック、モジュール、回路、および段階が、これらの機能的観点において一般的に説明された。このような機能がハードウェアとして実現されるかソフトウェアとして実現されるかについては、特定のアプリケーションおよび全体システムに割り当てられる設計要求事項によって異なる。当業者であれば、それぞれの特定のアプリケーションのために多様な方式によって説明された機能を実現することも可能であるが、このような実現が本開示の範囲から逸脱するものと解釈されてはならない。

ハードウェアの実現において、技法を実行するために利用されるプロセッシングユニットは、１つ以上のＡＳＩＣ、ＤＳＰ、デジタル信号プロセッシングデバイス（ｄｉｇｉｔａｌ ｓｉｇｎａｌ ｐｒｏｃｅｓｓｉｎｇ ｄｅｖｉｃｅｓ：ＤＳＰＤ）、プログラマブルロジックデバイス（ｐｒｏｇｒａｍｍａｂｌｅ ｌｏｇｉｃ ｄｅｖｉｃｅｓ：ＰＬＤ）、フィールドプログラマブルゲートアレイ（ｆｉｅｌｄ ｐｒｏｇｒａｍｍａｂｌｅ ｇａｔｅ ａｒｒａｙｓ：ＦＰＧＡ）、プロセッサ、制御器、マイクロ制御器、マイクロプロセッサ、電子デバイス、本開示で説明した機能を実行するように設計された他の電子ユニット、コンピュータ、またはこれらの組み合わせの範囲内で実現されてもよい。

したがって、本開示と連係して説明された多様な例示的な論理ブロック、モジュール、および回路は、汎用プロセッサ、ＤＳＰ、ＡＳＩＣ、ＦＰＧＡや、他のプログラマブルロジックデバイス、離散ゲートやトランジスタロジック、離散ハードウェアコンポーネント、または本願で説明した機能を実行するように設計されたものなどの任意の組み合わせによって実現あるいは実行されてよい。汎用プロセッサはマイクロプロセッサであってもよいが、代案として、プロセッサは、任意の既存のプロセッサ、制御器、マイクロ制御器、または状態マシンであってもよい。また、プロセッサは、コンピュータデバイスの組み合わせ、例えば、ＤＳＰとマイクロプロセッサ、複数のマイクロプロセッサ、ＤＳＰコアと連係する１つ以上のマイクロプロセッサ、または任意の他の構成の組み合わせによって実現されてもよい。

ファームウェアおよび／またはソフトウェアの実現において、技法は、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）ＮＶＲＡＭ（Ｎｏｎ Ｖｏｌａｔｉｌｅ Ｒａｎｄｏｍ ＡｃｃｅｓｓＭｅｍｏｒｙ）、ＰＲＯＭ（Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＥＰＲＯＭ（Ｅｒａｓａｂｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＥＥＰＲＯＭ（Ｅｌｅｃｔｒｉｃａｌｌｙ Ｅｒａｓａｂｌｅ ＰＲＯＭ）、フラッシュメモリ、ＣＤ（ｃｏｍｐａｃｔ ｄｉｓｃ）、磁気または光データストレージデバイスなどのようなコンピュータ読み取り可能な媒体上に記録された命令（例えば、コンピュータプログラム）として実現されてもよい。命令は、１つ以上のプロセッサによって実行可能であってもよく、プロセッサ（１つ以上のプロセッサ）が本開示で説明した機能の特定の態様を実行するようにしてもよい。

ソフトウェアで実現される場合、上述した技法は、１つ以上の命令またはコードとしてコンピュータ読み取り可能な媒体上に記録されても、またはコンピュータ読み取り可能な媒体によって送信されてもよい。コンピュータ読み取り可能な媒体は、ある場所から他の場所にコンピュータプログラムの送信を容易に行う任意の媒体を含み、コンピュータ記録媒体および通信媒体をすべて含む。記録媒体は、コンピュータによってアクセス可能な任意の利用可能な媒体であってもよい。非制限的な例として、このようなコンピュータ読み取り可能な媒体は、ＲＡＭ、ＲＯＭ、ＥＥＰＲＯＭ、ＣＤ−ＲＯＭ、または他の光ディスクストレージ、磁気ディスクストレージ、または他の磁気ストレージデバイス、または所望するプログラムコードを命令またはデータ構造の形態で移送または記録するために使用されてよく、コンピュータによってアクセス可能な任意の他の媒体を含んでよい。また、任意の接続が、コンピュータ読み取り可能な媒体として適切に称される。

例えば、ソフトウェアが、同軸ケーブル、光ファイバケーブル、ツイストペア線、デジタル加入者回線（ＤＳＬ）、または赤外線、無線、およびマイクロ波のような無線技術を利用してウェブサイト、サーバ、または他の遠隔ソースから送信されれば、同軸ケーブル、光ファイバケーブル、ツイストペア線、デジタル加入者回線、または赤外線、無線、およびマイクロ波のような技術は、媒体の定義内に含まれる。本願で使用されるディスク（ｄｉｓｋ）とディスク（ｄｉｓｃ）は、ＣＤ、レーザディスク、光ディスク、ＤＶＤ（ｄｉｇｉｔａｌ ｖｅｒｓａｔｉｌｅ ｄｉｓｃ）、フロッピ、およびブルーレイディスクを含むが、このとき、ディスク（ｄｉｓｋｓ）は、通常は磁気的にデータを再生するものであり、ディスク（ｄｉｓｃｓ）は、レーザを利用して光学的にデータを再生するものである。このような組み合わせも、コンピュータ読み取り可能な媒体の範囲内に含まれなければならない。

ソフトウェアモジュールは、ＲＡＭメモリ、フラッシュメモリ、ＲＯＭメモリ、ＥＰＲＯＭメモリ、ＥＥＰＲＯＭメモリ、レジスタ、ハードディスク、移動式ディスク、ＣＤ−ＲＯＭ、または公知の任意の他の形態の記録媒体内に常在してもよい。例示的な記録媒体は、プロセッサが記録媒体から情報を読み取ったり記録媒体に情報を記録したりするようにプロセッサに接続されてよい。代案として、記録媒体は、プロセッサに統合されてもよい。プロセッサと記録媒体はＡＳＩＣ内に存在してもよい。ＡＳＩＣはユーザ端末内に存在してもよい。代案として、プロセッサと記録媒体は、ユーザ端末で個別の構成要素として存在してもよい。

以上で説明した実施形態は、１つ以上の独立型コンピュータシステムで現在開示された主題の態様を活用するものと記述したが、本開示がこれに限定されてはならず、ネットワークや分散コンピューティング環境のような任意のコンピューティング環境と連係して実現されてもよい。さらに、本開示における主題の態様は、複数のプロセッシングチップや装置で実現されてもよく、ストレージは、複数の装置にわたり同じように影響を受けるようになることもある。このような装置は、ＰＣ、ネットワークサーバ、およびモバイルデバイスを含んでもよい。

本明細書では、本開示を一部の実施形態と関連させて説明しているが、本開示の発明が属する技術分野において当業者であれば容易に理解することのできる、本発明の範囲から逸脱しない範囲内で、多様な変形および変更が可能である。また、このような変形および変更は、本明細書に添付された特許請求の範囲内に属するものと解釈されなければならない。

１１０：ユーザ
１２０：ユーザ端末
１３０：オブジェクト
１３２、１３４、１３６：視覚的にコーディングされたパターン
２１０、２２０、２３０：ユーザ端末
２４０：ネットワーク
２５０：サーバ
３００：ユーザ端末
３１０：イメージセンサ
３２０：ディスプレイ
３３０：入力インタフェース
３４０：通信モジュール
３５０：プロセッサ
３５２：パターン領域検出部
３５４：パターン類型判定部
３５６：パターンプレビュー生成部
３５８：パターン処理部
３６０：格納部

Claims (18)

1. コンピュータに、
   視覚的にコーディングされた第１パターンおよび視覚的にコーディングされた第２パターンを含むイメージを受信する段階、
   前記視覚的にコーディングされた第１パターンのパターン類型を判定する段階、
   前記視覚的にコーディングされた第２パターンのパターン類型を判定する段階、
   前記視覚的にコーディングされた第１パターンのパターン類型と前記視覚的にコーディングされた第２パターンのパターン類型の優先順位を比較する段階、および
   前記視覚的にコーディングされた第１パターンのパターン類型が前記視覚的にコーディングされた第２パターンのパターン類型よりも高い優先順位であると判定される場合、前記視覚的にコーディングされた第１パターンの処理を自動で実行する段階
   を実行させるプログラム。
2. 前記視覚的にコーディングされた第１パターンのパターン類型を判定する段階は、
   前記視覚的にコーディングされた第１パターンが特定のサービスと関連するパターンであるか判定する段階、および
   前記視覚的にコーディングされた第１パターンが特定のサービスと関連するパターンであると判定される場合、前記視覚的にコーディングされた第１パターンのパターン類型を第１パターン類型として判定する段階
   を含む、請求項１に記載のプログラム。
3. 前記視覚的にコーディングされた第１パターンのパターン類型を判定する段階は、
   前記視覚的にコーディングされた第１パターンが特定の会社のサービスと関連するパターンであるか判定する段階、および
   前記視覚的にコーディングされた第１パターンが特定の会社のサービスと関連するパターンであると判定される場合、前記視覚的にコーディングされた第１パターンのパターン類型を第２パターン類型として判定する段階
   をさらに含む、請求項２に記載のプログラム。
4. 前記視覚的にコーディングされた第１パターンのパターン類型を判定する段階は、
   前記視覚的にコーディングされた第１パターンが特定の会社のサービスと関連しないと判定される場合に、
   前記視覚的にコーディングされた第１パターンが２次元パターンである場合、前記視覚的にコーディングされた第１パターンのパターン類型を第３パターン類型として判定する段階、および
   前記視覚的にコーディングされた第１パターンが１次元パターンである場合、前記視覚的にコーディングされた第１パターンのパターン類型を第４パターン類型として認識する段階
   をさらに含む、請求項３に記載のプログラム。
5. 前記第１パターン類型、前記第２パターン類型、前記第３パターン類型、および前記第４パターン類型の順に高い優先順位である、
   請求項４に記載のプログラム。
6. 前記コンピュータに、
   前記視覚的にコーディングされた第１パターンのパターン類型が前記視覚的にコーディングされた第２パターンのパターン類型と同じ優先順位であると判定される場合、
   前記受信したイメージ内の前記視覚的にコーディングされた第１パターンの位置または大きさのうちの少なくとも１つに基づいて前記視覚的にコーディングされた第１パターンの信頼度点数を算出する段階、
   前記受信したイメージ内の前記視覚的にコーディングされた第２パターンの位置または大きさのうちの少なくとも１つに基づいて前記視覚的にコーディングされた第２パターンの信頼度点数を算出する段階、および
   前記視覚的にコーディングされた第１パターンの信頼度点数が前記視覚的にコーディングされた第２パターンの信頼度点数よりも高いと判定される場合、前記視覚的にコーディングされた第１パターンのプレビューを前記コンピュータのディスプレイ上に表示する段階
   をさらに実行させる、請求項１〜５のうちのいずれか一項に記載のプログラム。
7. 前記受信したイメージ内の前記視覚的にコーディングされた第１パターンの位置または大きさのうちの少なくとも１つに基づいて前記視覚的にコーディングされた第１パターンの信頼度点数を算出する段階は、
   前記受信したイメージの中心点と前記視覚的にコーディングされた第１パターンの中心点との距離を算出する段階を含む、
   請求項６に記載のプログラム。
8. 前記受信したイメージ内の前記視覚的にコーディングされた第１パターンの位置または大きさのうちの少なくとも１つに基づいて前記視覚的にコーディングされた第１パターンの信頼度点数を算出する段階は、
   前記視覚的にコーディングされた第１パターンに対応する領域が前記受信したイメージにおいて占める面積の割合を算出する段階を含む、
   請求項６に記載のプログラム。
9. 前記コンピュータに、
   前記視覚的にコーディングされた第１パターンのパターン類型が前記視覚的にコーディングされた第２パターンのパターン類型と同じ優先順位であると判定される場合、
   前記受信したイメージ内の前記視覚的にコーディングされた第１パターンの位置または大きさのうちの少なくとも１つに基づいて前記視覚的にコーディングされた第１パターンの信頼度点数を算出する段階、
   前記受信したイメージ内の前記視覚的にコーディングされた第２パターンの位置または大きさのうちの少なくとも１つに基づいて前記視覚的にコーディングされた第２パターンの信頼度点数を算出する段階、および
   前記視覚的にコーディングされた第１パターンの信頼度点数が前記視覚的にコーディングされた第２パターンの信頼度点数よりも高いと判定される場合、前記視覚的にコーディングされた第１パターンの処理を自動で実行する段階
   をさらに実行させる、請求項１〜５のうちのいずれか一項に記載のプログラム。
10. 前記コンピュータに、
    前記視覚的にコーディングされた第１パターンに対応する第１領域上に指示子を表示することで、前記視覚的にコーディングされた第１パターンの処理を自動で実行することをユーザに予告する段階
    をさらに実行させる、請求項１〜９のうちのいずれか一項に記載のプログラム。
11. 前記コンピュータに、
    前記視覚的にコーディングされた第１パターンが含まれた第１領域を検出する段階、
    前記視覚的にコーディングされた第２パターンが含まれた第２領域を検出する段階、および
    前記第１領域と前記第２領域を互いに異なる色でハイライト表示する段階
    をさらに実行させる、請求項１〜１０のうちのいずれか一項に記載のプログラム。
12. 前記コンピュータに、
    イメージ撮影モードで複数のイメージを順に受信する段階、および
    前記視覚的にコーディングされた第１パターンおよび前記視覚的にコーディングされた第２パターンを含む前記イメージを受信する場合、パターンスキャンモードに入るかを確認するための通知を前記コンピュータのディスプレイ上に表示する段階
    をさらに実行させる、請求項１〜１１のうちのいずれか一項に記載のプログラム。
13. パターン認識装置であって、
    視覚的にコーディングされた第１パターンおよび視覚的にコーディングされた第２パターンを含むイメージを受信するように構成されたイメージセンサ、
    前記視覚的にコーディングされた第１パターンのパターン類型および前記視覚的にコーディングされた第２パターンのパターン類型を判定するように構成されたパターン類型判定部、および
    前記視覚的にコーディングされた第１パターンのパターン類型と前記視覚的にコーディングされた第２パターンのパターン類型の優先順位を比較するように構成されたパターン処理部
    を備え、
    前記パターン処理部は、前記視覚的にコーディングされた第１パターンのパターン類型が前記視覚的にコーディングされた第２パターンのパターン類型よりも高い優先順位であると判定する場合、前記視覚的にコーディングされた第１パターンの処理を自動で実行するようにさらに構成された、
    パターン認識装置。
14. コンピュータに、
    視覚的にコーディングされた第１パターンおよび視覚的にコーディングされた第２パターンを含むイメージを受信する段階、
    前記視覚的にコーディングされた第１パターンのプレビューを生成する段階、
    前記視覚的にコーディングされた第２パターンのプレビューを生成する段階、
    前記第１パターンのプレビューと前記第２パターンのプレビューを前記コンピュータのディスプレイ上のプレビュー領域に表示する段階、
    ユーザから前記第１パターンのプレビューに対する選択を受信する段階、および
    前記選択に応答し、前記視覚的にコーディングされた第１パターンに対する処理を実行する段階
    を実行させるプログラム。
15. 前記第１パターンのプレビューと前記第２パターンのプレビューを前記コンピュータのディスプレイ上のプレビュー領域に表示する段階は、
    前記受信したイメージ内の前記視覚的にコーディングされた第１パターンの位置または大きさのうちの少なくとも１つに基づいて前記視覚的にコーディングされた第１パターンの信頼度点数を算出する段階、
    前記受信したイメージ内の前記視覚的にコーディングされた第２パターンの位置または大きさのうちの少なくとも１つに基づいて前記視覚的にコーディングされた第２パターンの信頼度点数を算出する段階、および
    前記視覚的にコーディングされた第１パターンの信頼度点数が前記視覚的にコーディングされた第２パターンの信頼度点数よりも高いと判定される場合、前記視覚的にコーディングされた第１パターンのプレビューを前記コンピュータのディスプレイ上のプレビュー領域の上端に表示する段階
    を含む、請求項１４に記載のプログラム。
16. 前記コンピュータに、
    前記視覚的にコーディングされた第１パターンが含まれた第１領域を検出する段階、
    前記視覚的にコーディングされた第２パターンが含まれた第２領域を検出する段階、および
    前記第１領域と前記第２領域を互いに異なる色でハイライト表示する段階
    をさらに実行させる、請求項１４または１５に記載のプログラム。
17. 前記視覚的にコーディングされた第１パターンのプレビューを生成する段階は、
    前記視覚的にコーディングされた第１パターンがＵＲＬのエンコードに該当する場合、前記視覚的にコーディングされた第１パターンによってコーディングされたＵＲＬ情報を外部装置に送信する段階、
    前記外部装置から前記ＵＲＬ情報と関連するサムネイル、タイトル、または説明文のうちの少なくとも１つを受信する段階、および
    前記受信したサムネイル、タイトル、または説明文のうちの少なくとも１つを前記ディスプレイ上のプレビュー領域に表示する段階
    をさらに含む、請求項１４〜１６のうちのいずれか一項に記載のプログラム。
18. パターン認識装置であって、
    ユーザから入力を受信するように構成された入力インタフェース、
    視覚的にコーディングされた第１パターンおよび視覚的にコーディングされた第２パターンを含むイメージを受信するように構成されたイメージセンサ、
    前記視覚的にコーディングされた第１パターンのプレビューおよび前記視覚的にコーディングされた第２パターンのプレビューを生成するように構成されたパターンプレビュー生成部、
    前記生成された、視覚的にコーディングされた第１パターンおよび第２パターンのプレビューをプレビュー領域に出力するように構成されたディスプレイ、および
    前記入力インタフェースを通じて前記第１パターンのプレビューに対する選択を受信することに応答し、前記視覚的にコーディングされた第１パターンに対する処理を実行するように構成されたパターン処理部
    を備える、パターン認識装置。

Images