JP2013501993A - 表示用の画像を供給する方法及び装置 - Google Patents

表示用の画像を供給する方法及び装置 Download PDF

Info

Publication number
JP2013501993A
JP2013501993A JP2012524324A JP2012524324A JP2013501993A JP 2013501993 A JP2013501993 A JP 2013501993A JP 2012524324 A JP2012524324 A JP 2012524324A JP 2012524324 A JP2012524324 A JP 2012524324A JP 2013501993 A JP2013501993 A JP 2013501993A
Authority
JP
Japan
Prior art keywords
image
interest
region
size
cropped
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2012524324A
Other languages
English (en)
Inventor
フォンセカ,ペドロ
アンドレ ペテルス,マルク
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips NV
Koninklijke Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips NV, Koninklijke Philips Electronics NV filed Critical Koninklijke Philips NV
Publication of JP2013501993A publication Critical patent/JP2013501993A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformation in the plane of the image
    • G06T3/40Scaling the whole image or part thereof

Abstract

画像において少なくとも1つの関心のある領域がステップ201で決定される。画像のサイズは、ステップ207で目標とする画像のサイズに変更される。少なくとも1つの関心のある領域が決定された場合、画像は、ステップ205で少なくとも1つの関心のある領域のそれぞれに切り取られ、切り取られた少なくとも1つの関心のある領域のサイズは、目標とする画像のサイズに変更される。サイズが変更された画像と、サイズが変更された切り取られた少なくとも1つの関心のある領域は、ステップ209で表示のために記憶される。

Description

本発明は、表示用の画像を供給する方法及び装置に関する。より詳細には、本発明は、ある画像のサイズを表示用の目標とする画像のサイズに変更することに関する。
近年、毎日のデジタル画像のユーザの捕捉の量における急増を見ている。
従来、ユーザは、特定のイベントの間にのみ画像を捕捉し、これらの画像を現像することは費用がかかるために画像の合成に関して慎重であったが、デジタルフォトカメラ及び増加する記憶容量は、行動における劇的な変化を導いている。ユーザは同じ被写体の複数の画像を捕捉することは一般的であり、数百又は更に数千の画像を捕捉して休日から家に戻ることはまれである。
これらの画像の解像度、及び従って記憶装置に占める物理的なサイズは、十分に増加しているが、これらの画像(例えばデジタルフォトフレーム)を表示するために使用される優先度の高い装置の記憶空間は制限される。さらに、ユーザは特定の写真をユーザの家族及び友人と共有するために帯域幅が制限された手段を使用するか、又はシンプルにインターネットのブログ又はソーシャルウェブサイトにそれらを掲示することがある。従って、記憶装置を占めているこれらの画像の物理的なサイズを低減することが望まれる。
これは、それらの内部メモリにアップロードされる画像のサイズを自動的に変更することで部分的に克服される。このサイズの変更処理は、例えばフォトフレームの表示サイズといった、目標とする画像のサイズに従う画像のサイズを最適化することと、装置で少ない記憶容量を利用することで、より多くの画像が記憶されるのを可能にする利点を有する。このサイズの変更ステップは、それぞれの画像を表示する直前に行われ、すなわち画像はその完全な解像度で記憶され、レンダリングされる直前に目標とする画像のサイズに適合するようにサイズ変更されるが、これは、より少ない画像が装置に記憶され、表示されるそれぞれの画像について同じプロセスを繰り返す更なる計算上のリソースを利用する結果となる。
この自動的なサイズ変更ステップは、これら2つの側面について有利であるが、ユーザが例えば顔といった画像の関心のあるエレメントで「ズームイン」するのを望む場合、それらの領域の品質は、画像が前にダウンサイズされているために非常に低い。代わりに「ズームイン」が原画像に行われる場合、品質は一般に非常に優れている。顔はユーザにより捕捉された写真において最も重要なエレメントであることがあるので、それらの品質は、表示されたときに最大可能なまでに保持されることが基本である。
さらに、表示サイズは比較的小さく、これらのフレームはテーブル又はクローゼットの上に典型的に位置されるか、又は壁にシンプルに掛かっているので、ユーザの視界からかなり離れている。さらに、例えば家族、友人又は最愛の人の顔といった、大部分の画像の所定の部分のみが表示するために関心がある。離れて表示されたとき、これらの関心のある領域は、余りに小さく、これらの装置に表示されたときに評価することができない。顔検出は、顔を含む画像における領域を決定するための公知の技術である。従って、顔検出は、係る画像の最も関心のある部分のサイズを変更して、できるだけ多くの表示サイズを占めることができるように、顔を含んでいる画像における領域を自動的に判定するために使用される。
顔検出は、ある顔の主要な特徴を含む画像における領域について良好な結果を与える。これは、目、鼻及び口により決定された領域である。髪のような部分は、人間の間に余りに異なるので特徴のあるものではない。
1つの公知の技術は、顔検出器の結果を使用して、検出器によりリターンされる領域に画像をシンプルにトリミングすることである。これにより、顔の主要な特徴を含む画像の部分を正確に供給することになる。しかし、これは、心地よい見た体験を与えるために必要とされる、顔を取り巻く環境の必要な要素と同様に全体の顔を表示することができないので、殆ど魅力的なものではない。
WO 2008/025969は、画像の関心のある領域がトリミングされ、顔のような関心のある領域のサイズが変更されるように、例えば画像をトリミングしてサイズ変更する様々な技術を開示している。しかし、この技術は、原画像のアスペクト比を維持するものではなく、従って顔の歪が生じ、これは顔にとって特に望まれない。さらに、ユーザには、原画像を表示するか又は関心のあるエレメントを表示するオプションが与えられない。
本発明の目的は、記憶の要件を最小化しつつ、最大の品質が保証される表示用の画像(又は画像の一部)を供給することにある。
上記課題は、本発明の1態様によれば、表示用の画像を供給する方法により解決されるものであり、本方法は、ある画像における少なくとも1つの関心のある画像を決定するステップ、前記画像のサイズを目標とするサイズに変更するステップ、関心のある領域が決定された場合、画像を少なくとも1つの関心のある領域のそれぞれにトリミングするステップ、トリミングされた少なくとも1つの関心のある領域のサイズを目標とする画像のサイズに変更するステップ、サイズが変更された画像及びサイズが変更されたトリミングされた少なくとも1つの関心のある領域を表示のために記憶するステップを含む。
また、上記課題は、本発明の第二の態様によれば、表示用の画像を供給する装置により達成されるものであり、本装置は、ある画像における少なくとも1つの関心のある領域を決定する決定手段、前記画像のサイズを目標とする画像のサイズに変更し、少なくとも1つの関心のある領域が決定された場合、前記画像を少なくとも1つの関心のある領域のそれぞれにトリミングし、トリミングされた少なくとも1つの領域のサイズを目標とする画像のサイズに変更するプロセッサ、サイズが変更された画像及びサイズが変更されたトリミングされた少なくとも1つの関心のある領域を表示のために記憶する記憶手段を備える。
このように、サイズが変更された画像及びサイズが変更された関心のある領域の両者が表示のために記憶される。関心のある領域のサイズは原画像のサイズから変更されるので、記憶の要件を低減すると共に、サイズが変更された画像又はサイズが変更された関心のある領域のいずれかが表示されるのを可能にしつつ、画像の品質は維持される。これら2つの画像を互いにリンクすることで、ユーザは、2つの記憶された画像のうちの1つを容易に選択することができる。
実施の形態では、画像のサイズを目標とする画像のサイズに変更するステップは、目標とする画像のサイズ及びアスペクト比を決定するステップ、画像のサイズ及びアスペクト比を決定するステップ、目標とする画像の決定されたサイズ及び画像の決定されたサイズからスケーリングファクタを決定するステップ、及び決定されたスケーリングファクタに従って画像のサイズを変更するステップを含む。さらに、トリミングされた少なくとも1つの関心のある領域のサイズを目標とする画像のサイズに変更するステップは、トリミングされた少なくとも1つの関心のある画像のサイズ及びアスペクト比を決定するステップと、目標とする画像の決定されたサイズ及びトリミングされた少なくとも1つの関心のある領域の決定されたサイズとからスケーリングファクタを決定するステップ、トリミングされた少なくとも1つの関心のある領域の決定されたアスペクト比を維持しつつ、決定されたスケーリングファクタに従ってトリミングされた少なくとも1つの関心のある領域のサイズを変更するステップを含む。さらに、決定されたアスペクト比を維持しつつ、決定されたスケーリングファクタに従ってトリミングされた少なくとも1つの関心のある領域のサイズを変更するステップは、拡大された少なくとも1つの関心のある領域が画像の決定されたアスペクト比に対応するアスペクト比を有するように、トリミングされた少なくとも1つの関心のある領域を拡大して、トリミングされた少なくとも1つの関心のある領域の外側に少なくとも画像の一部を含ませるステップ、画像を拡大された少なくとも1つの関心のある領域にトリミングするステップ、トリミングされた拡大された少なくとも1つの関心のある領域のサイズを目標とする画像のサイズに変更するステップを含む。
このように、画像及び少なくとも1つの関心のある領域の両方のアスペクト比は、サイズ変更するときに保持され、画像の歪が除かれる。
実施の形態では、ある画像における少なくとも1つの関心のある画像を決定するステップは、ある画像における少なくとも1つの関心のある領域を自動的に検出するステップ、画像を少なくとも1つの関心のある領域のそれぞれにトリミングするステップは、検出された少なくとも1つの関心のある領域を拡大して、検出された少なくとも1つの関心のある領域の外側に画像の一部を含ませるステップ、画像を拡大された少なくとも1つの関心のある領域にトリミングするステップを含む。代替的に、ある画像における少なくとも1つの関心のある領域は、ある画像における少なくとも1つの関心のある領域を手動的に定義することで決定される。
少なくとも1つの関心のある領域が例えば顔検出器により自動的に検出される場合、少なくとも1つの関心のある領域は、顔を取り囲んでいる環境のエレメントと同様に全体の顔を含むように拡大することができ、見る体験を改善する。
これは、画像を(例えばフォトフレームといった)装置にアップロードする間、それらの画像においてどれが関心のあるエレメントであるか、従ってユーザが「クローズアップ」して見ることを望む可能性が高いエレメントであるかを検出することで達成される。これらのエレメントが検出された場合、写真の2つのコピーが記憶され、a)ディスプレイのサイズに適合するようにサイズが変更され、b)原画像が関心のある領域の位置にトリミングされた場合、ディスプレイのサイズに適合するようにダウンサイジングされる。代替的な実施の形態として、原画像の関心のある領域の選択は、ユーザにより手動的に選択することができる。
画像を表示する間、ユーザが全体の画像を見ることを望む場合、第一の画像(a)が表示のために選択され、代わりにユーザが関心のあるエレメントのみを見ることを好む場合、第二の画像(b)が表示のために選択される。
本発明の更に完全な理解のため、添付図面と共に行われる以下の説明が参照される。
本発明の実施の形態に係る表示用の画像を供給する装置の簡略化された概念図である。 本発明の実施の形態に係る表示用の画像を供給する方法のフローチャートである。 図1の装置の記憶手段の簡略化された概念図である。
図1を参照して、実施の形態の装置100は、決定手段103の入力に接続される入力端子101を有する。決定手段103の出力は、プロセッサ105の入力に接続される。また、入力端子101は、プロセッサ105の入力に接続される。プロセッサ105の出力は、記憶手段107に接続される。記憶手段107は、装置100の出力端子109に接続される。
記憶手段107は装置100の内部にあるものとして本実施の形態では例示されているが、代替的な実施の形態では、記憶手段107は、装置の外部にある場合がある。記憶手段107は、ROM/RAMドライブ、CD、カメラのメモリ装置、デジタルフォトフレーム、又は装置100又はリモートサーバに接続される装置のような、コンピュータシステムのメモリ装置である。この記憶手段は、有線又は無線接続を介してアクセスされ、及び/又はインターネットのような広域ネットワークを介してアクセスされる場合がある。記憶手段107は、複数の画像を表示のために記憶する。例えばリモートサーバに記憶される画像は、装置100の記憶手段107にアップロードされ、一時的に記憶される。
出力端子は、記憶手段107の画像をレンダリングするディスプレイに接続される。ディスプレイは、装置100の統合された部分(ここでは図示せず)である場合がある。
図1の装置の動作は、図2を参照して記載される。
外部の記憶手段(ここでは図示せず)から画像が検索され、入力端子101を介して決定手段103に入力される。ステップ207で、画像のサイズは目標とする画像のサイズに変更され、例えば画像のサイズは、プロセッサ105によりディスプレイに適合するように変更される。常に画像はダウンサイジングされる。これは、画像の解像度は、フォトフレームのディスプレイの解像度よりも一般的に非常に高いためである。サイズが変更された画像は、従来のフォトフレーム装置で現在行われているように、ステップ209で記憶手段に記憶される。
並行して、ステップ201で、決定手段103により、画像の少なくとも1つの関心のある領域が決定される。決定手段103は、例えば既存の最新の顔検出アルゴリズムを使用して1以上の顔の位置を自動的に検出する検出器を含むか、代替的に、ユーザは、関心のある画像の領域を手動で指定することができる。ステップ203で、原画像は、その領域にトリミングされ、結果として得られる画像のサイズは、ステップ205で、(例えば)プロセッサ105によりフォトフレームのディスプレイに適合するように、目標とする画像のサイズに変更される。
このサイズ変更ステップ205は、任意であり、ステップ203のトリミングの結果に依存する場合があり、結果として得られるトリミングされた画像がフォトフレームの寸法に正確に適合する場合、サイズ変更は必要されない。さもなければ、トリミングされた画像がフォトフレームのディスプレイの解像度よりも小さい場合、画像はアップサイジングされ、トリミングされた画像がフォトフレームディスプレイの解像度よりもなお大きい場合、画像はダウンサイジングされる。
このステップの後、ステップ209で、トリミング/サイズ変更された画像の関心のある領域は記憶手段107に記憶される。
画像を表示するとき、どの画像を採用すべきかに関する選択は、ディスプレイのオプションに依存する。図3を参照して、ユーザが全体の画像を見るのを望む場合、ダウンサイジングされた画像が使用される。これは、記憶手段301(図1の記憶手段107)の第一の出力端子303に接続し、全体の画像を選択して(ステップ211)ディスプレイ309に全体の画像を表示する(ステップ213)セレクタ307により達成される。代替的に、ユーザが関心のある領域のみを見ることを望む場合、トリミング/サイズ変更された画像が代わりに使用される。これは、記憶手段301の第二の出力端子305に接続し、画像の関心のある領域のトリミング/サイズ変更された領域を選択して(ステップ211)ディスプレイ309に関心のある領域を表示する(ステップ213)セレクタ307により達成される。
上述される方法はデジタルフォトフレームで適用されるが、同じ方法はインターネットフォトシェアリングサービス、写真が添付される電子メールサービス等で適用することができることを理解することができる。関心のある領域の自動的に検出すること、従って適切なトリミング領域を決定することにおいて、幾つかの項目が重要となる。
考慮される第一の項目は、最小のサイズである。目標とする応用の解像度に基づいて顔をトリミングした後、顔は、寸法に実際に適合するようにダウンスケールすることができる。従って、顔の最小のサイズが課され、その顔がフォトフレームで表示されたときにクリアであるように十分に大きいことが保証されるか、又は顔がフォトフレームで表示されたときにクリアとなるようにダウンスケーリングすることが保証される。例えば、フレームの小さい辺の少なくとも4分の1である顔を考える。顔が800×600の解像度を有する場合、顔の幅/高さは少なくとも150となる。
考慮される第二の項目は、領域の拡大である。顔の特徴が目、鼻及び口を含む場合、全体の顔に少しのその周囲の環境を加えたものが含まれることを保証するために、領域が有意に拡大される。例えば顔を囲んでいる4つの全ての辺を延ばすことができる。例えば顔の特徴が300×300の領域をカバーする場合、関心のある領域は900×900となり、4つの辺のそれぞれを300画素だけ延ばすことで作成される。しかし、例えば顔が画像のエッジに位置される場合、拡大が画像の外側で行われないように、顔の他の側で拡大が行われる。
考慮される第三の項目は、目標となるディスプレイの解像度である。例えば目標とするディスプレイがデジタルフォトフレームである場合、フォトフレームの解像度が決定される。関心のある領域は、フォトフレームの解像度の比率に整合するように拡大されるべきである。関心のある領域が900×900であり、フォトフレームが800×600である前の例を続ける。フォトフレームの割合は800/600=4/3である。従って、関心のある領域は、割合が同じであるように1200×900に拡大される。原画像をこの1200×900画素の領域にトリミングした後、この領域は、フォトフレームの解像度に整合するようにダウンスケーリングすることができる。
考慮される第四の項目は、目標とするディスプレイの向きである。フォトフレームは、ランドスケープ又はポートレートスタイルの何れかで表示することができるので、この両者を考慮し、応用により使用することができる2つの領域を用意することが進められる。
また、顔の位置も考慮される。しましば、顔は画像の中央に置かれるが、ユーザが中央から外れて顔を有するように選択する多くの場合がある。顔の領域の最終的な拡大の決定において、これを考慮することができ、これのことは、顔が中央から僅かに外れて、左/右又は上/下の方向で位置されることを意味する。簡単な選択は、左及び右の方向に150画素だけ延ばすことである。しかし、顔がセンタリングされない場合、一方の辺は300画素だけ延ばされ、他方の辺はそのままにされる。
画像が複数の顔を含み、領域がそれぞれの顔について計算される場合、関心のある領域は、別の顔とのオーバラップを回避するために移動される。可能であれば、関心のある領域のエッジにある別の顔の一部が回避される。しかし、これは常に可能なことではない。先の例におけるように、900×900の領域は1200×900に拡大される必要がある。関心のある領域は、この種のオーバラップを回避するために、僅かに左及び右にシフトすることができる。しかし、別の顔がオリジナルの900×900領域に部分的に位置される場合、これは、例えば髪の領域の一部を切り取る危険を冒すことなしに回避することができない。
画像が複数の顔を含む場合、画像はトリミングされ、それぞれの顔を個別にトリミングするのではなく、全ての顔を互いに含む領域にサイズが変更される。ここで、顔を含む領域は、全ての顔を含む領域を包み込んでいる矩形となる。これは、それぞれの顔の拡大を個別に決定し、次いでそれらの拡大の最大を採用することで拡大される。これは、それぞれの顔が十分に大きな拡大を有することを保証する。フォトフレームの解像度及び向きを使用して、関心のある領域が決定され、顔について個別に行われたのと同様のやり方でトリミング/サイズの変更が行われる。
ステップ207で、画像のサイズは、目標とする画像のサイズ及びアスペクト比を決定し、画像のサイズ及びアスペクト比を決定することで、目標とする画像のサイズに変更される。次いで、スケーリングファクタは、以下のように決定される。
Figure 2013501993
ここでSはスケーリングファクタである、Iは画像の決定されたサイズであり、Tは目標とする画像の決定されたサイズである。次いで、画像のサイズは、Sに従って変更される。
実施の形態では、目標とする画像のサイズに適合するために関心のある領域の変更の詳細は、以下に記載される。
目標とする画像のサイズ及びアスペクト比、並びにトリミングされる関心のある領域が決定される。これらは、以下のスケーリングファクタを決定するために比較される。
Figure 2013501993
ここでSはスケーリングファクタであり、Rは関心のある領域の決定されたサイズであり、Tは目標とする画像の決定されたサイズである。
決定されたアスペクト比について、幅のスケーリングファクタSw及び高さのスケーリングファクタShは、以下のように決定される。
Figure 2013501993
ここでRw及びRhはそれぞれ関心のある領域の幅及び高さであり、Tw及びThはそれぞれ目標とする画像の幅及び高さである。
関心のある領域のアスペクト比及び目標とする画像のサイズが異なる場合、Sw及びShは異なる。そうなった場合、Sw又はShの使用により、サイズが変更された関心のある領域の歪みとなる。これは、Sw及びShを同じにするためにRw又はRhの何れかを延ばし、スケーリングファクタを使用して関心のある領域のサイズを変更することで克服される。
これは、関心のある領域を所望のRw及びRhに延ばすことで達成される場合がある。
本発明の実施の形態は添付図面で示され、上述の詳細な説明で記載されたが、本発明は開示された実施の形態に制限されるものではなく、以下の特許請求の範囲で述べられる本発明の範囲から逸脱することなしに様々な変更が可能であることを理解されたい。
当業者にとって明らかであるように「手段」は、(個別の回路又は集積回路、或いは電子的なエレメントのような)ハードウェア、単独で又は他の機能と共に、単独で又は他のエレメントと協働して、特定の機能を動作的に再生するか又は特定の機能を再生するように設計される(プログラム又はプログラムの一部のような)ソフトウェアを含むことが意図される。本発明は、幾つかの個別のエレメントを有するハードウェアにより実現され、適切にプログラムされたコンピュータにより実現される。幾つかの手段を列挙する装置の請求項では、これらの手段の幾つかは、同一アイテムのハードウェアにより実施することができる。「コンピュータプログラムプロダクト」は、フロプティカルディスクのようなコンピュータ読み取り可能な媒体い記憶されるか、インターネットのようなネットワークを介してダウンロード可能であるか、又は他の方式で取得されるソフトウェアプロダクトを意味することが理解される。
近年、毎日のデジタル画像のユーザの捕捉の量における急増を見ている。
従来、ユーザは、特定のイベントの間にのみ画像を捕捉し、これらの画像を現像することは費用がかかるために画像の合成に関して慎重であったが、デジタルフォトカメラ及び増加する記憶容量は、行動における劇的な変化を導いている。ユーザは同じ被写体の複数の画像を捕捉することは一般的であり、数百又は更に数千の画像を捕捉して休日から家に戻ることはまれである。
US20060139371号は、可変サイズの表示装置での表示のための画像のトリミングを記載している。この文献では、トリミングは、画像を表示するために利用可能な領域を超えて延びる画像の一部を切断することを含む。この文献は、例えば原画像とディスプレイスクリーンとのサイズ及びアスペクト比の差が大きいときといった、重要な領域が切断される場合に、トリミングの処理は望まれない結果を生成する可能性があることを述べている。この文献は、画像における関心のある領域を定義し、関心のある領域を含むようなやり方でトリミングにより保持される領域の選択を制約することで、この問題を解決している。
WO 2008/025969は、画像の関心のある領域がトリミングされ、顔のような関心のある領域のサイズが変更されるように、例えば画像をトリミングしてサイズ変更する様々な技術を開示している。しかし、この技術は、原画像のアスペクト比を維持するものではなく、従って顔の歪が生じ、これは顔にとって特に望まれない。さらに、ユーザには、原画像を表示するか又は関心のあるエレメントを表示するオプションが与えられない。
EP1215626及びGB2422739号は、自動トリミング方法を記載している。
上記課題は、画像から導出され、目標とする画像のサイズで表示するために変換される記憶された画像情報を供給する方法により達成されるものであり、画像のサイズを目標とする画像のサイズに変更するステップ、画像において関心のある領域を決定するステップ、前記画像を関心のある領域にトリミングするステップ、トリミングの結果が目標とする画像のサイズに適合しないときに、トリミングされた関心のある画像のサイズを目標とする画像のサイズに変更するステップ、サイズが変更された画像と、トリミングされ、必要に応じてサイズが変更された関心のある領域の両者をユーザによる選択に応じて表示するために記憶するステップを含む
また、上記課題は、目標とする画像のサイズで表示するために記憶手段に記憶される画像情報を供給する装置により達成されるものであり、記憶される画像情報は画像から導出され、当該装置は、記憶手段へのコネクションと、画像において関心のある領域を決定する決定手段と、画像のサイズを目標とする画像のサイズに変更し、画像を関心のある領域にトリミングし、トリミングの結果が目標とする画像のサイズに適合しないときに、トリミングされた少なくとも1つの関心のある領域のサイズを目標とする画像のサイズに変更し、サイズが変更された画像と、トリミングされ、必要に応じてサイズが変更された関心のある領域の両者をユーザによる選択に応じて表示するために記憶手段に記憶するプロセッサを備える

Claims (13)

  1. 表示用の画像を供給する方法であって、
    当該方法は、
    画像において少なくとも1つの関心のある領域を決定するステップと、
    前記画像のサイズを目標とする画像のサイズに変更するステップと、
    前記少なくとも1つの関心のある領域が決定された場合、前記画像を前記少なくとも1つの関心のある領域のそれぞれに切り取るステップと、
    切り取られた少なくとも1つの関心のある領域を前記目標とする画像のサイズに変更するステップと、
    サイズが変更された画像と、サイズが変更された前記切り取られた少なくとも1つの関心のある領域を表示のために記憶するステップと、
    を含むことを特徴とする方法。
  2. 前記画像のサイズを目標とする画像のサイズに変更する前記ステップは、
    前記目標とする画像のサイズ及びアスペクト比を決定するステップと、
    前記画像のサイズ及びアスペクト比を決定するステップと、
    前記目標とする画像の決定されたサイズと前記画像の決定されたサイズとから、スケーリングファクタを決定するステップと、
    決定されたスケーリングファクタに従って前記画像のサイズを変更するステップと、
    を含む請求項1記載の方法。
  3. 前記切り取られた少なくとも1つの関心のある領域のサイズを前記目標とする画像のサイズに変更するステップは、
    前記切り取られた少なくとも1つの関心のある領域のサイズ及びアスペクト比を決定するステップと、
    前記目標とする画像の決定されたサイズと前記切り取られた少なくとも1つの関心のある領域の決定されたサイズとから、スケーリングファクタを決定するステップと、
    前記切り取られた少なくとも1つの関心のある領域の決定されたアスペクト比を維持すると共に、前記決定されたスケーリングファクタに従って前記切り取られた少なくとも1つの関心のある領域のサイズを変更するステップと、
    を含む請求項2記載の方法。
  4. 前記決定されたアスペクト比を維持すると共に、前記決定されたスケーリングファクタに従って前記切り取られた少なくとも1つの関心のある領域のサイズを変更する前記ステップは、
    前記切り取られた少なくとも1つの関心のある領域の外側にある前記画像の少なくとも1部を含むように、前記切り取られた少なくとも1つの関心のある領域を拡大するステップと、拡大された少なくとも1つの関心のある領域は、前記画像の前記決定されたアスペクト比に対応するアスペクト比を有し、
    前記画像を拡大された少なくとも1つの関心のある領域に切り取るステップと、
    切り取られた拡大された少なくとも1つの関心のある領域のサイズを前記目標とする画像のサイズに変更するステップと、
    を含む請求項3記載の方法。
  5. 記憶されたサイズが変更された画像、又は、記憶されたサイズが変更された切り取られた少なくとも1つの関心のある領域を選択するステップを更に含む、
    請求項1記載の方法。
  6. 選択された、記憶された画像を表示するステップを更に含む、
    請求項5記載の方法。
  7. 画像において少なくとも1つの関心のある領域を決定する前記ステップは、画像において少なくとも1つの関心のある領域を自動的に検出するステップを含む、
    請求項1記載の方法。
  8. 前記画像を前記少なくとも1つの関心のある領域のそれぞれに切り取るステップは、
    前記検出された少なくとも1つの関心のある領域の外側にある前記画像の一部を含むように、前記検出された少なくとも1つの関心のある領域を拡大するステップと、
    拡大された少なくとも1つの関心のある領域に前記画像を切り取るステップと、
    を含む請求項7記載の方法。
  9. 画像において少なくとも1つの関心のある領域を決定するステップは、
    画像における少なくとも1つの関心のある領域を手動で定義するステップを含む、
    請求項1記載の方法。
  10. 請求項1乃至9の何れか記載の方法を実行する複数のプログラムコードを含むコンピュータプログラム。
  11. 表示用の画像を供給する装置であって、
    当該装置は、
    画像において少なくとも1つの関心のある領域を決定する決定手段と、
    前記画像のサイズを目標とする画像のサイズに変更し、少なくとも1つの関心のある領域が決定された場合、前記画像を前記少なくとも1つの関心のある領域に切り取り、切り取られた少なくとも1つの関心のある画像のサイズを前記目標とする画像のサイズに変更するプロセッサと、
    サイズが変更された画像と、サイズが変更された切り取られた少なくとも1つの関心のある領域とを表示のために記憶する記憶手段と、
    を備えることを特徴とする装置。
  12. 記憶された画像を表示するディスプレイを更に備える、
    請求項11記載の装置。
  13. 前記決定手段は、画像において少なくとも1つの関心のある領域を自動的に検出する検出器を含む、
    請求項11記載の装置。
JP2012524324A 2009-08-11 2010-08-11 表示用の画像を供給する方法及び装置 Pending JP2013501993A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP09167596.7 2009-08-11
EP09167596 2009-08-11
PCT/IB2010/053625 WO2011018759A1 (en) 2009-08-11 2010-08-11 Method and apparatus for providing an image for display

Publications (1)

Publication Number Publication Date
JP2013501993A true JP2013501993A (ja) 2013-01-17

Family

ID=42953821

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012524324A Pending JP2013501993A (ja) 2009-08-11 2010-08-11 表示用の画像を供給する方法及び装置

Country Status (7)

Country Link
US (1) US20120134595A1 (ja)
EP (1) EP2465093A1 (ja)
JP (1) JP2013501993A (ja)
KR (1) KR20120055632A (ja)
CN (1) CN102498499A (ja)
RU (1) RU2012108572A (ja)
WO (1) WO2011018759A1 (ja)

Families Citing this family (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8854397B2 (en) * 2011-12-13 2014-10-07 Facebook, Inc. Photo selection for mobile devices
US8832570B1 (en) * 2011-12-22 2014-09-09 Google Inc. Representing a group identity in a social network
CN103517072B (zh) * 2012-06-18 2017-11-03 联想(北京)有限公司 视频通信方法和设备
US8825664B2 (en) * 2012-08-17 2014-09-02 Splunk Inc. Indexing preview
CN103051859B (zh) * 2012-12-05 2015-12-02 安科智慧城市技术(中国)有限公司 一种显示脸部影像的系统和方法
US20140193056A1 (en) * 2013-01-10 2014-07-10 Siemens Medical Solutions Usa, Inc. Systems and Methods for Patient Anatomical Image Volume Data Visualization Using A Portable Processing Device
CN103164119B (zh) * 2013-02-25 2016-06-08 东莞宇龙通信科技有限公司 通信终端及图像的自适应显示方法
US9607235B2 (en) * 2013-03-14 2017-03-28 Facebook, Inc. Image cropping according to points of interest
US9990693B2 (en) * 2014-04-29 2018-06-05 Sony Corporation Method and device for rendering multimedia content
CN104461300B (zh) * 2014-12-15 2017-12-12 宇龙计算机通信科技(深圳)有限公司 图片预览方法及系统
US9972111B2 (en) * 2016-02-24 2018-05-15 Adobe Systems Incorporated Optimizing image cropping
WO2018176000A1 (en) 2017-03-23 2018-09-27 DeepScale, Inc. Data synthesis for autonomous control systems
US11893393B2 (en) 2017-07-24 2024-02-06 Tesla, Inc. Computational array microprocessor system with hardware arbiter managing memory requests
US11157441B2 (en) 2017-07-24 2021-10-26 Tesla, Inc. Computational array microprocessor system using non-consecutive data formatting
US10671349B2 (en) 2017-07-24 2020-06-02 Tesla, Inc. Accelerated mathematical engine
US11409692B2 (en) 2017-07-24 2022-08-09 Tesla, Inc. Vector computational unit
CN107527069A (zh) * 2017-08-22 2017-12-29 京东方科技集团股份有限公司 图像处理方法、装置、电子设备及计算机可读介质
US10607314B2 (en) * 2018-01-09 2020-03-31 Universal City Studios Llc Image auto resizing
US11561791B2 (en) 2018-02-01 2023-01-24 Tesla, Inc. Vector computational unit receiving data elements in parallel from a last row of a computational array
US11215999B2 (en) 2018-06-20 2022-01-04 Tesla, Inc. Data pipeline and deep learning system for autonomous driving
US11361457B2 (en) 2018-07-20 2022-06-14 Tesla, Inc. Annotation cross-labeling for autonomous control systems
US11636333B2 (en) 2018-07-26 2023-04-25 Tesla, Inc. Optimizing neural network structures for embedded systems
US11562231B2 (en) 2018-09-03 2023-01-24 Tesla, Inc. Neural networks for embedded devices
CN115512173A (zh) 2018-10-11 2022-12-23 特斯拉公司 用于使用增广数据训练机器模型的系统和方法
US11196678B2 (en) 2018-10-25 2021-12-07 Tesla, Inc. QOS manager for system on a chip communications
US11816585B2 (en) 2018-12-03 2023-11-14 Tesla, Inc. Machine learning models operating at different frequencies for autonomous vehicles
US11537811B2 (en) 2018-12-04 2022-12-27 Tesla, Inc. Enhanced object detection for autonomous vehicles based on field view
US11610117B2 (en) 2018-12-27 2023-03-21 Tesla, Inc. System and method for adapting a neural network model on a hardware platform
US10997461B2 (en) 2019-02-01 2021-05-04 Tesla, Inc. Generating ground truth for machine learning from time series elements
US11567514B2 (en) 2019-02-11 2023-01-31 Tesla, Inc. Autonomous and user controlled vehicle summon to a target
US10956755B2 (en) 2019-02-19 2021-03-23 Tesla, Inc. Estimating object properties using visual image data
EP3756340A4 (en) * 2019-05-14 2020-12-30 SZ DJI Technology Co., Ltd. PHOTOGRAPHY PROCESS AND APPARATUS
CN110162286B (zh) * 2019-05-17 2023-04-07 维沃移动通信有限公司 一种图片显示方法及终端
CN110298380A (zh) * 2019-05-22 2019-10-01 北京达佳互联信息技术有限公司 图像处理方法、装置及电子设备
KR20220107537A (ko) * 2021-01-25 2022-08-02 주식회사 와이즈오토모티브 중장비용 전방 영상 생성 장치

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006109119A (ja) * 2004-10-06 2006-04-20 Omron Corp 動画記録装置および動画再生装置
JP2006191167A (ja) * 2004-12-28 2006-07-20 Casio Comput Co Ltd 撮像装置及び画像データの保存方法並びに再生方法
JP2007104360A (ja) * 2005-10-05 2007-04-19 Fujifilm Corp 画像レイアウト装置および方法並びにプログラム

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5978519A (en) * 1996-08-06 1999-11-02 Xerox Corporation Automatic image cropping
US6674439B1 (en) * 1999-05-13 2004-01-06 Matsushita Electric Industrial Co., Ltd. Information terminal device
US7206804B1 (en) * 2000-11-10 2007-04-17 Sharp Laboratories Of America, Inc. Methods and systems for transmitting digital images
US6654507B2 (en) * 2000-12-14 2003-11-25 Eastman Kodak Company Automatically producing an image of a portion of a photographic image
US6912326B2 (en) * 2002-05-21 2005-06-28 Inventec Appliances Corp. Method for displaying an electronic document on a digital handheld device
EP1377023A1 (en) * 2002-06-28 2004-01-02 Océ-Technologies B.V. Image scanning and processing system, method of scanning and processing image and method of selecting one of a plurality of master files comprising data encoding a scanned image
JP3938775B2 (ja) * 2003-12-17 2007-06-27 株式会社エヌ・ティ・ティ・ドコモ 移動通信端末、サーバ、及びそのデータ処理方法
CN100373399C (zh) * 2004-08-18 2008-03-05 富士通株式会社 建立劣化字典的方法和装置
JP4574469B2 (ja) * 2004-08-23 2010-11-04 キヤノン株式会社 画像処理装置及びその制御方法及びプログラム
EP1638015A1 (en) * 2004-09-15 2006-03-22 Arizan Corporation Method for requesting and viewing a zoomed area of detail from an image attachment on a mobile communication device
US9329827B2 (en) 2004-12-29 2016-05-03 Funmobility, Inc. Cropping of images for display on variably sized display devices
GB2422739B (en) * 2005-01-31 2010-07-14 Hewlett Packard Development Co Image processing method and apparatus
US7733405B2 (en) * 2005-02-10 2010-06-08 Seiko Epson Corporation Apparatus and method for resizing an image
US7773831B2 (en) * 2005-05-10 2010-08-10 Agfa-Gevaert N.V. Method for visual inspection of size-reduced digital image
US7574069B2 (en) * 2005-08-01 2009-08-11 Mitsubishi Electric Research Laboratories, Inc. Retargeting images for small displays
US7876978B2 (en) * 2005-10-13 2011-01-25 Penthera Technologies, Inc. Regions of interest in video frames
EP1895466A1 (en) 2006-08-30 2008-03-05 BRITISH TELECOMMUNICATIONS public limited company Providing an image for display
US8218895B1 (en) * 2006-09-27 2012-07-10 Wisconsin Alumni Research Foundation Systems and methods for generating and displaying a warped image using fish eye warping
WO2008119187A1 (en) * 2007-04-02 2008-10-09 Esight Corp. An apparatus and method for augmenting sight
US9240056B2 (en) * 2008-04-02 2016-01-19 Microsoft Technology Licensing, Llc Video retargeting
CA2727569C (en) * 2008-06-09 2017-09-26 Vidyo, Inc. Improved view layout management in scalable video and audio communication systems
US8400473B2 (en) * 2009-06-24 2013-03-19 Ariel Shamir Multi-operator media retargeting
US8405681B2 (en) * 2009-06-24 2013-03-26 Ariel Shamir Image comparison by asymmetric dynamic warping
WO2011060525A1 (en) * 2009-11-19 2011-05-26 Esight Corporation Image magnification on a head mounted display

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006109119A (ja) * 2004-10-06 2006-04-20 Omron Corp 動画記録装置および動画再生装置
JP2006191167A (ja) * 2004-12-28 2006-07-20 Casio Comput Co Ltd 撮像装置及び画像データの保存方法並びに再生方法
JP2007104360A (ja) * 2005-10-05 2007-04-19 Fujifilm Corp 画像レイアウト装置および方法並びにプログラム

Also Published As

Publication number Publication date
CN102498499A (zh) 2012-06-13
EP2465093A1 (en) 2012-06-20
WO2011018759A1 (en) 2011-02-17
KR20120055632A (ko) 2012-05-31
US20120134595A1 (en) 2012-05-31
RU2012108572A (ru) 2013-09-20

Similar Documents

Publication Publication Date Title
JP2013501993A (ja) 表示用の画像を供給する方法及び装置
KR101605983B1 (ko) 얼굴 검출을 이용한 이미지 재구성
KR100898096B1 (ko) 이미지 보기 및 개선을 위한 방법 및 시스템
US8724919B2 (en) Adjusting the sharpness of a digital image
US20140085507A1 (en) Controlling the sharpness of a digital image
US20070171282A1 (en) Camera apparatus and imaging method
US20160232696A1 (en) Method and appartus for generating a text color for a group of images
CN112367459B (zh) 图像处理方法、电子装置及非易失性计算机可读存储介质
US20060158462A1 (en) High dynamic range image viewing on low dynamic range displays
CN114223192A (zh) 使用四色滤波阵列传感器进行内容增强的系统和方法
JP2006012154A (ja) 画像処理
US20160231889A1 (en) Method and apparatus for caption parallax over image while scrolling
JP2006260029A (ja) 画像処理装置及びプログラム
US7876368B2 (en) Slimming effect for digital photographs
CN112001940B (zh) 图像处理方法及装置、终端及可读存储介质
KR102374022B1 (ko) 영상 처리 장치 및 방법
US11595584B2 (en) Imaging apparatus, method of controlling imaging apparatus and computer-readable medium
US7466321B2 (en) Method and apparatus for the creation of cartoon effect videos
KR100604011B1 (ko) 영상 처리 장치 및 그 방법
JP2005283694A (ja) 画像変倍処理方法、画像処理装置、プログラム及び記録媒体
JP6779138B2 (ja) 画像処理装置、画像処理方法
JP5453820B2 (ja) デジタルカメラ
JP6347943B2 (ja) 画像出力装置、画像出力方法、およびプログラム
JP2005109814A (ja) 画像撮影装置およびプログラム
JP2007124447A (ja) デジタルカメラ

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130808

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20140514

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140520

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20141021