JP2016524423A5 - - Google Patents

Claims (26)

1. ユーザ選択関心領域についての画像品質を向上させる方法であって、
   デバイスのカメラモジュールを使って、シーンの複数の画像をキャプチャするステップと、
   前記デバイスにおいて、前記複数の画像のうちのある画像における関心領域を特定するユーザ入力を受信するステップであって、前記関心領域が、前記画像の全エリアに満たない、前記シーンの前記画像の一部分を特定し、前記シーンの前記複数の画像のうちの少なくとも1つの画像が、前記関心領域を特定する前記ユーザ入力の受信の後で前記カメラモジュールによってキャプチャされる、ステップと、
   前記シーンの前記複数の画像を使って、前記関心領域のより高解像度の画像を作成するステップであって、
   前記関心領域の前記より高解像度の画像に関連付けられた高解像度グリッドを作成すること、
   前記シーンの前記画像に関連付けられた1つまたは複数の低解像度グリッドを特定することであって、各低解像度グリッドが1つの画像に関連付けられ、各低解像度グリッドの各ポイントが、前記カメラモジュールによってキャプチャした情報を含むこと、
   前記高解像度グリッドと前記1つまたは複数の低解像度グリッドの各々との間の位置調整を判断すること、
   前記位置調整に基づいて前記複数の画像の各々における前記関心領域の位置を判断すること、および
   各画像の前記関心領域のそれぞれの内部に前記1つまたは複数の低解像度グリッドからの対応する位置調整したピクセルからの情報を前記高解像度グリッドのポイントに追加することによって
   作成するステップとを含む、方法。
2. 前記シーンの前記複数の画像のうちの少なくとも1つの画像が、前記関心領域を特定する前記ユーザ入力の受信に先立ってキャプチャされ、
   前記シーンがディスプレイ出力上に表示されるとき、前記関心領域を特定する前記ユーザ入力が、前記複数の画像の前記一部分を特定する前記ディスプレイ出力上でのタッチスクリーン入力である、請求項1に記載の方法。
3. 前記デバイスにおいて、前記シーンの前記複数の画像の前記キャプチャに先立って、前記関心領域の前記より高解像度の画像を作成する際に使用するためのキャプチャするべき画像の数を選択するユーザ入力を受信するステップをさらに含み、
   前記複数の画像をキャプチャするステップが、前記シーンの、前記数の画像を自動的にキャプチャするステップを含み、
   前記関心領域の前記より高解像度の画像を作成するステップが、いくつかの前記画像の各画像中の前記関心領域を特定し、いくつかの前記画像の各画像中の前記関心領域のぞれぞれを使って、前記関心領域の前記より高解像度の画像を作成するステップを含む、請求項1に記載の方法。
4. 前記デバイス上の少なくとも1つのセンサーについてのセンサーデータをキャプチャするステップと、
   前記センサーデータを前記複数の画像に関連付けるステップとをさらに含み、
   前記センサーデータが、前記関心領域の前記より高解像度の画像を作成するのに使われる、請求項1に記載の方法。
5. 前記複数の画像のうちの2つ以上の画像間の1つまたは複数のピクセルの動きを判断するステップと、
   前記動きに基づいて前記関心領域の前記より高解像度の画像を作成するステップとをさらに含む、請求項1に記載の方法。
6. 前記関心領域の前記より高解像度の画像をプレビュー画像として表示するステップと、
   前記関心領域の前記より高解像度の画像の解像度のさらなる増大を要求する前記プレビュー画像の前記表示に応答して、ユーザ入力を受信するステップと、
   前記シーンの前記複数の画像を使って、前記関心領域の第2のより高解像度の画像を作成するステップであって、
   前記関心領域の前記第2のより高解像度の画像に関連付けられた第2のより高解像度のグリッドを作成すること、
   1つまたは複数の高解像度グリッドを特定すること、
   前記第2のより高解像度のグリッドと前記1つまたは複数の高解像度グリッドの各々との間の位置調整を判断すること、および
   前記1つまたは複数の高解像度グリッドからの前記対応する位置調整したピクセルからの情報を、前記第2のより高解像度のグリッドの各ポイントに追加することによって作成するステップとをさらに含む、請求項1に記載の方法。
7. 前記関心領域の選択の受信中、フリーコンピュータ処理ユニットサイクルの間に前記複数の画像のうちの2つ以上の画像を位置調整するための変換を推定するステップをさらに含む、請求項1に記載の方法。
8. 前記複数の画像の各々における前記関心領域の前記位置を判断するステップは、前記複数の画像におけるホモグラフィまたは個々のピクセルの計算された動きを使用する、前記高解像度グリッドと前記1つまたは複数の低解像度グリッドの各々との間の前記位置調整に基づく、請求項1に記載の方法。
9. 前記関心領域の前記より高解像度の画像を前記デバイスのディスプレイ出力上に表示するステップをさらに含む、請求項1に記載の方法。
10. 前記関心領域の外にある複数の画像の少なくとも一部分の第2のより高解像度の画像を作成するステップをさらに含む、請求項9に記載の方法。
11. メモリと、
    ユーザ入力モジュールと、
    センサーを備えるカメラモジュールと、
    前記メモリおよび前記カメラモジュールに結合されたプロセッサとを備えるデバイスであって、前記プロセッサが、
    前記デバイスの前記カメラモジュールを使って、シーンの複数の画像をキャプチャし、
    前記ユーザ入力モジュールにおいて、前記複数の画像のうちのある画像における関心領域を特定するユーザ入力を受信し、前記関心領域が、前記複数の画像の全エリアに満たない、前記シーンの前記複数の画像の一部分を特定し、前記シーンの前記複数の画像のうちの少なくとも1つの画像が、前記関心領域を特定する前記ユーザ入力の受信の後で前記カメラモジュールによってキャプチャされ、
    前記シーンの前記複数の画像を使って、前記関心領域のより高解像度の画像を作成するようにであって、
    前記関心領域の前記より高解像度の画像に関連付けられた高解像度グリッドを作成すること、
    前記シーンの前記画像に関連付けられた1つまたは複数の低解像度グリッドを特定することであって、各低解像度グリッドが1つの画像に関連付けられ、各低解像度グリッドの各ポイントが、前記カメラモジュールによってキャプチャした情報を含むこと、
    前記高解像度グリッドと前記1つまたは複数の低解像度グリッドの各々との間の位置調整を判断すること、
    前記位置調整に基づいて前記複数の画像の各々における前記関心領域の位置を判断すること、および
    各画像の前記関心領域のそれぞれの内部に前記1つまたは複数の低解像度グリッドからの対応する位置調整したピクセルからの情報を前記高解像度グリッドのポイントに追加することによって
    作成するように構成される、デバイス。
12. 前記プロセッサは、前記デバイスにおいて、前記シーンの前記複数の画像の前記キャプチャに先立って、前記関心領域の前記より高解像度の画像を作成時に使用するためにキャプチャするいくつかの画像を選択するユーザ入力を受信するようにさらに構成される、請求項11に記載のデバイス。
13. 前記複数の画像のうちの2つ以上の画像間の1つまたは複数のピクセルの動きを判断し、
    前記動きに基づいて前記関心領域の前記より高解像度の画像を作成するようにさらに構成される、請求項11に記載のデバイス。
14. ディスプレイ出力をさらに備え、
    前記シーンの前記複数の画像のうちの少なくとも1つが、前記関心領域を特定する前記ユーザ入力の受信に先立ってキャプチャされ、
    前記ユーザ入力モジュールが、前記ディスプレイ出力のタッチスクリーン入力を受信する、請求項11に記載のデバイス。
15. 前記プロセッサが、
    前記関心領域の前記より高解像度の画像を前記デバイスの前記ディスプレイ出力上に表示するようにさらに構成される、請求項14に記載のデバイス。
16. 前記プロセッサが、
    前記関心領域の前記より高解像度の画像が前記デバイスの前記ディスプレイ出力上に表示される間、前記プロセッサ上で利用可能なフリーコンピュータ処理ユニットサイクルを特定し、
    前記関心領域の前記より高解像度の画像が前記ディスプレイ出力上に表示される間、前記シーンの前記複数の画像を使って、前記関心領域の外にある前記複数の画像の少なくとも一部分の第2のより高解像度の画像を作成するようにさらに構成される、請求項15に記載のデバイス。
17. コンピュータ可読記憶媒体に結合されたプロセッサによって実行されると、デバイスに、ユーザ選択関心領域についての画像品質を向上させる命令のセットを含むコンピュータ可読記憶媒体であって、前記命令が、
    前記デバイスにおいてカメラモジュールによって、シーンの複数の画像をキャプチャすること、
    前記デバイスにおいて、前記複数の画像のうちのある画像における関心領域を特定するユーザ入力を受信することであって、前記関心領域が、前記複数の画像の全エリアに満たない、前記シーンの前記複数の画像の一部分を特定し、前記シーンの前記複数の画像のうちの少なくとも1つの画像が、前記関心領域を特定する前記ユーザ入力の受信の後で前記カメラモジュールによってキャプチャされる、受信すること、ならびに
    前記シーンの前記複数の画像を使って、前記関心領域のより高解像度の画像を作成することであって、
    前記関心領域の前記より高解像度の画像に関連付けられた高解像度グリッドを作成すること、
    前記シーンの前記画像に関連付けられた1つまたは複数の低解像度グリッドを特定することであって、各低解像度グリッドが1つの画像に関連付けられ、各低解像度グリッドの各ポイントが、カメラモジュールによってキャプチャした情報を含むこと、
    前記高解像度グリッドと前記1つまたは複数の低解像度グリッドの各々との間の位置調整を判断すること、
    前記位置調整に基づいて前記複数の画像の各々における前記関心領域の位置を判断すること、および
    各画像の前記関心領域のそれぞれの内部に前記1つまたは複数の低解像度グリッドからの対応する位置調整したピクセルからの情報を前記高解像度グリッドのポイントに追加することによって
    作成することを前記プロセッサにさせるように構成される、コンピュータ可読記憶媒体。
18. 前記命令が、
    前記関心領域の前記より高解像度の画像が前記デバイスのディスプレイ出力上で表示される間、前記デバイス上で利用可能なフリーコンピュータ処理ユニットサイクルを特定すること、
    前記関心領域の前記より高解像度の画像が前記ディスプレイ出力上に表示される間、前記関心領域の外にある前記複数の画像の少なくとも一部分の第2のより高解像度の画像を作成することを前記プロセッサにさせるようにさらに構成される、請求項17に記載のコンピュータ可読記憶媒体。
19. 前記命令が、
    前記関心領域の前記より高解像度の画像をプレビュー画像として表示すること、
    前記関心領域の前記より高解像度の画像の解像度のさらなる増大を要求する前記プレビュー画像の前記表示に応答して、ユーザ入力を受信すること、ならびに
    前記シーンの前記複数の画像を使って、前記関心領域の追加のより高解像度の画像を作成することであって、
    前記関心領域の前記追加のより高解像度の画像に関連付けられた追加のより高解像度のグリッドを作成すること、
    前記高解像度グリッドを含む1つまたは複数の高解像度グリッドを特定すること、
    前記追加のより高解像度のグリッドと前記1つまたは複数の高解像度グリッドの各々との間の位置調整を判断すること、および
    前記1つまたは複数の高解像度グリッドからの前記対応する位置調整したピクセルからの情報を、前記追加のより高解像度のグリッドの各ポイントに追加することによって
    作成することを前記プロセッサにさせるようにさらに構成される、請求項17に記載のコンピュータ可読記憶媒体。
20. 前記命令が、
    前記関心領域の前記より高解像度の画像を受諾または拒否するためのユーザインターフェースを用いて、前記関心領域の前記より高解像度の画像をプレビュー画像として表示することを前記プロセッサにさせるようにさらに構成される、請求項17に記載のコンピュータ可読記憶媒体。
21. ユーザ選択関心領域についての画像品質を向上させるためのデバイスであって、
    シーンの複数の画像をキャプチャするための手段と、
    前記複数の画像のうちのある画像における関心領域を特定するユーザ入力を受信するための手段であって、前記関心領域が、前記複数の画像の全エリアに満たない、前記シーンの前記複数の画像の一部分を特定し、前記シーンの前記複数の画像のうちの少なくとも1つの画像が、前記関心領域を特定する前記ユーザ入力の受信の後でカメラモジュールによってキャプチャされる、手段と、
    前記関心領域のより高解像度の画像に関連付けられた高解像度グリッドを作成するための手段と、
    前記シーンの前記画像に関連付けられた1つまたは複数の低解像度グリッドを特定するための手段であって、各低解像度グリッドが1つの画像に関連付けられ、各低解像度グリッドの各ポイントが、前記シーンの前記複数の画像をキャプチャするための前記手段によってキャプチャした情報を含む、手段と、
    前記高解像度グリッドと前記1つまたは複数の低解像度グリッドの各々との間の位置調整を判断するための手段と、
    前記位置調整に基づいて前記複数の画像の各々における前記関心領域の位置を判断するための手段と、
    各画像の前記関心領域のそれぞれの内部に前記1つまたは複数の低解像度グリッドからの対応する位置調整したピクセルからの情報を前記高解像度グリッドのポイントに追加して、前記関心領域の超解像画像を作成するための手段とを備える、デバイス。
22. 前記シーンの前記複数の画像を表示するため、および前記関心領域の前記超解像画像を表示するための手段をさらに備える、請求項21に記載のデバイス。
23. 前記シーンの前記複数の画像をキャプチャするための前記手段がカメラを含む、請求項21に記載のデバイス。
24. ユーザ入力に応答して前記関心領域の前記超解像画像を更新するための手段をさらに備える、請求項21に記載のデバイス。
25. 前記関心領域の前記超解像画像を受諾または拒否するためのユーザインターフェースを表示するための手段と、
    前記関心領域の前記超解像画像を受諾するユーザ入力に応答して、前記関心領域の前記超解像画像を記憶するための手段とをさらに備える、請求項21に記載のデバイス。
26. ユーザ選択関心領域についての画像品質を向上させる方法であって、
    デバイスのカメラモジュールを使って、シーンの1つまたは複数の画像をキャプチャするステップと、
    前記デバイスにおいて、前記1つまたは複数の画像のうちのある画像における関心領域を特定するユーザ入力を受信するステップであって、前記関心領域が、前記画像の全エリアに満たない、前記画像の一部分を特定する、ステップと、
    前記ユーザ入力に基づいて、前記シーンの前記1つまたは複数の画像を使って、前記関心領域の連続したより高解像度の画像を繰り返し作成するステップであって、
    前記関心領域の次のより高解像度の画像に関連付けられた高解像度グリッドを作成すること、
    前記シーンの前記画像または前記関心領域の前のより高解像度の画像に関連付けられた1つまたは複数の低解像度グリッドを特定すること、
    前記高解像度グリッドと前記1つまたは複数の低解像度グリッドの各々との間の位置調整を判断すること、
    前記位置調整に基づいて前記複数の画像の各々における前記関心領域の位置を判断すること、および
    各画像の前記関心領域のそれぞれの内部に前記1つまたは複数の低解像度グリッドからの対応する位置調整したピクセルからの情報を前記高解像度グリッドのポイントに追加することによって
    作成するステップとを含む、方法。