JP2009200784A - Image processing apparatus and program - Google Patents
Image processing apparatus and program Download PDFInfo
- Publication number
- JP2009200784A JP2009200784A JP2008039946A JP2008039946A JP2009200784A JP 2009200784 A JP2009200784 A JP 2009200784A JP 2008039946 A JP2008039946 A JP 2008039946A JP 2008039946 A JP2008039946 A JP 2008039946A JP 2009200784 A JP2009200784 A JP 2009200784A
- Authority
- JP
- Japan
- Prior art keywords
- image
- advertisement
- image processing
- information
- processing apparatus
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
Description
本発明は、撮影画像の適切な位置へ広告画像の埋め込みを行う画像処理技術に関する。 The present invention relates to an image processing technique for embedding an advertisement image at an appropriate position of a photographed image.
高機能なカメラを安価に提供するため、撮影画像に広告を埋め込むカメラが知られている(特許文献1)。このようなカメラでは、カメラの販売代金の一部を広告主からの広告料によって賄うことで、カメラの販売価格を下げることができる。 In order to provide a high-performance camera at low cost, a camera that embeds an advertisement in a captured image is known (Patent Document 1). In such a camera, the sales price of the camera can be lowered by covering a part of the sales price of the camera with an advertising fee from the advertiser.
従来のカメラでは、撮影画像への広告の埋め込みを、撮影画像の内容を考慮せずに行っていた。そのため、撮影画像内のユーザにとって重要な領域が、広告によって隠されてしまうという問題があった。 In a conventional camera, an advertisement is embedded in a captured image without considering the content of the captured image. Therefore, there is a problem that an area important for the user in the captured image is hidden by the advertisement.
請求項1に係る発明は、被写体を撮像し、被写体像を表す第1画像信号を出力する撮像手段と、被写体を撮像するための光学系を格納したカメラの撮影状況に関連した撮影情報と、被写体像に関する画像解析情報の両方またはいずれか一方に基づいて、第1画像信号と所定の広告画像信号とを合成した第2画像信号を出力する広告合成手段とを備えた画像処理装置である。
請求項2に係る発明は、請求項1に記載の画像処理装置において、撮影情報として、カメラのフォーカスエリア位置情報および/または日付写し込み位置情報を用いる。
請求項3に係る発明は、請求項1または2に記載の画像処理装置において、第1画像信号を用いて、被写体中の人物の顔を検出する顔検出手段をさらに備え、画像解析情報として、顔検出手段により検出された顔の位置情報を用いる。
請求項4に係る発明は、請求項1〜3のいずれか一項に記載の画像処理装置において、第1画像信号を用いて、被写体中の文字を検出する文字検出手段をさらに備え、画像解析情報として、文字検出手段により検出された文字の位置情報を用いる。
請求項5に係る発明は、請求項1〜4のいずれか一項に記載の画像処理装置において、第1画像信号を用いて、被写体の輪郭を検出する輪郭検出手段をさらに備え、画像解析情報として、輪郭検出手段により検出された輪郭の位置情報を用いる。
請求項6に係る発明は、請求項1〜5のいずれか一項に記載の画像処理装置において、カメラの傾き情報を出力する傾き検出手段をさらに備え、撮影情報として、傾き情報を用いる。
請求項7に係る発明は、請求項1〜5のいずれか一項に記載の画像処理装置において、撮影情報として、撮像時における撮影アシスト枠の表示位置を用いる。
請求項8に係る発明は、請求項2〜7のいずれか一項に記載の画像処理装置において、フォーカスエリア位置、日付写し込み位置、顔の位置、文字の位置、輪郭の位置およびアシスト枠の表示位置を避けて、広告画像を合成する。
請求項9に係る発明は、請求項1〜8のいずれか一項に記載の画像処理装置において、パノラマ撮影モード時には、隣接する画像との接合領域を避けて広告画像を合成する。
請求項10に係る発明は、被写体を撮像し、被写体像を表す第1画像信号を入力する入力処理と、被写体を撮像するための光学系を格納したカメラの撮影状況に関連した撮影情報と、被写体像に関する画像解析情報とに基づいて、第1画像信号と所定の広告画像信号とを合成した第2画像信号を出力する広告合成処理とをコンピュータで実施させることを特徴とするプログラムである。
According to a first aspect of the present invention, there is provided imaging means for imaging a subject and outputting a first image signal representing the subject image, photographing information related to a photographing situation of a camera storing an optical system for photographing the subject, An image processing apparatus is provided with an advertisement synthesizing unit that outputs a second image signal obtained by synthesizing a first image signal and a predetermined advertisement image signal based on both or either of the image analysis information regarding the subject image.
According to a second aspect of the present invention, in the image processing apparatus according to the first aspect, focus area position information and / or date imprint position information of the camera is used as shooting information.
According to a third aspect of the present invention, in the image processing device according to the first or second aspect of the present invention, the image processing apparatus further includes a face detection unit that detects the face of a person in the subject using the first image signal. The position information of the face detected by the face detection means is used.
According to a fourth aspect of the present invention, in the image processing device according to any one of the first to third aspects, the image processing apparatus further includes character detection means for detecting a character in the subject using the first image signal, and image analysis is performed. As the information, character position information detected by the character detection means is used.
According to a fifth aspect of the present invention, in the image processing apparatus according to any one of the first to fourth aspects, the image processing apparatus further includes contour detection means for detecting the contour of the subject using the first image signal, and image analysis information is provided. The position information of the contour detected by the contour detection means is used.
According to a sixth aspect of the present invention, in the image processing apparatus according to any one of the first to fifth aspects of the present invention, the image processing apparatus further includes tilt detection means for outputting tilt information of the camera, and the tilt information is used as photographing information.
According to a seventh aspect of the present invention, in the image processing apparatus according to any one of the first to fifth aspects, the display position of the photographing assist frame at the time of photographing is used as photographing information.
The invention according to
According to a ninth aspect of the present invention, in the image processing device according to any one of the first to eighth aspects, in the panoramic photographing mode, the advertising image is synthesized while avoiding a joint area with an adjacent image.
The invention according to
本発明によれば、撮影画像への広告の埋め込みは、被写体および/またはカメラに関連した情報に基づいて行われる。これにより、撮影を行うユーザにとって重要な領域が、広告で隠されることがなくなる。 According to the present invention, the advertisement is embedded in the captured image based on information related to the subject and / or the camera. Thereby, an area important for a user who performs shooting is not hidden by an advertisement.
――第1の実施の形態――
図面を用いて、本発明の一実施の形態によるデジタルカメラについて説明する。この実施の形態のデジタルカメラでは、撮影画像内における広告の配置領域を検出し、広告画像がその配置領域に含まれるように広告の埋め込みを行う。
-First embodiment-
A digital camera according to an embodiment of the present invention will be described with reference to the drawings. In the digital camera of this embodiment, the advertisement placement area in the captured image is detected, and the advertisement is embedded so that the advertisement image is included in the placement area.
図1(a)に示すように、カメラ本体1には撮影レンズ2が取り付けられている。カメラ本体1の上面にはレリーズボタン3、電源スイッチ4、撮影モードの設定操作を行なうモードダイヤル5が設けられている。図1(b)に示すように、カメラ本体1の背面には液晶モニタ14が設けられている。
As shown in FIG. 1A, a
図2は本実施の形態によるデジタルカメラの回路構成を示すブロック図である。デジタルカメラは、撮像素子6、制御回路7、DRAM8、フラッシュメモリ9、焦点調節装置10、メモリカードインタフェース(I/F)11、液晶モニタ14、タイマー15、傾き検知装置16、および外部機器インタフェース(I/F)17を備える。
FIG. 2 is a block diagram showing a circuit configuration of the digital camera according to the present embodiment. The digital camera includes an
撮像素子6は、画素に対応する複数の光電変換素子を備えたCCDやCMOSイメージセンサによって構成される。撮像素子6は、撮像面上に結像されている被写体像を撮像し、被写体像の明るさに応じた光電変換信号(画像信号)を出力する。撮像素子6の撮像面には、それぞれR(赤)、G(緑)およびB(青)のカラーフィルタが画素位置に対応するように設けられている。撮像素子6がカラーフィルタを通して被写体像を撮像するため、各撮像素子から出力される画像信号は、それぞれRGB表色系の色情報を有する。
The
撮像素子6から出力された画像信号は制御回路7に入力される。制御回路7は、画像信号に対して種々の画像処理ならびに広告の埋め込み処理(後に詳述する)を行い、画像データを生成する。そして、制御回路7は生成された画像データに対してJPEGなどの所定の方式により圧縮処理を行い、EXIFなどの形式で記録媒体12へ記録する。
The image signal output from the
制御回路7は、たとえばRISCなどで構成され、図2に示す各回路を制御する。また、制御回路7は顔検出部71、文字検出部72および広告配置部73を機能的に備えている。顔検出部71は、撮像素子6から出力された画像信号に基づいて、撮影画面内における人物の顔を検出する。すなわち、顔検出部71は、画像信号に基づいて、撮影画面内の肌色の領域を抽出し、さらに、肌色領域内において、一対の目および鼻などの人物の顔を特徴付ける情報を抽出する。肌色領域内に顔特徴情報が抽出されると、その領域を顔領域として検出する。文字検出部72は、撮像素子6から出力された画像信号に基づいて、撮影画面内における文字を検出する。広告配置部73は、後述する処理を実行し、広告画像の撮影画像への埋め込みを行う。
The control circuit 7 is composed of, for example, a RISC and controls each circuit shown in FIG. The control circuit 7 functionally includes a
焦点調節装置10は、撮像素子6から出力される撮像信号に基づいて周知の焦点評価値演算を行い、演算結果を制御回路7へ出力する。制御回路7は、上記演算結果に基づいて、焦点評価値が最大となる位置へ撮影レンズ2を移動する。なお、顔検出部71により顔検出が行なわれた場合は、制御回路7は撮影画面上で検出された顔に対応する画像信号に基づいて焦点調節を行う。
The
DRAM8は、画像処理、画像圧縮処理および表示用画像データ作成処理の途中や処理後のデータを一時的に格納するために使用される。表示用画像データは、制御回路7が撮像素子6からの出力に基づいて生成した画像データ、もしくは記録媒体12に記録されている画像データに基づいて、制御回路7により生成される。生成された表示用画像データは、制御回路7によりDRAM8に格納される。フラッシュメモリ9は、たとえば制御回路7が演算を行なうための各種の処理プログラムが記憶された不揮発性メモリである。
The
LCD駆動回路13は制御回路7の命令に基づいて液晶モニタ14を駆動し、液晶モニタ14は画像を表示する。液晶モニタ14に表示される画像において、前述した顔検出部71により被写体の顔が検出されている場合は、その顔の周囲に顔検出が行われたことを示す矩形枠が表示される。また、液晶モニタ14は、デジタルカメラの各種設定メニュー画面の表示を行なう。
The
タイマー15は制御回路7へ現在の日時を提供する。タイマー15は、カメラ1の電源がオフとなっていても、図示しない電源によって駆動され続け、日時の計数を行う。制御回路7は、日付の写し込み機能が有効になっている場合、撮影画像の所定の位置へ撮影時の日付を描画する。傾き検知装置16は、カメラ1の左右方向への傾きを検出し、制御回路7へ傾き情報を提供する。制御回路7は、傾き情報を用いることで、撮影画像における鉛直方向を認識することができる。
The timer 15 provides the current date and time to the control circuit 7. The timer 15 continues to be driven by a power source (not shown) and counts the date and time even when the
制御回路7は、外部機器インタフェース17を通じて、外部機器18と情報の送受信を行うことができる。情報の送受信の例としては、記録媒体12に記録されている撮影画像を外部機器18へ送信することや、外部機器18から送信された撮影画像を液晶モニタ14に表示することなどが挙げられる。
The control circuit 7 can transmit / receive information to / from the
次に、本カメラの撮影動作について説明する。ユーザが電源スイッチ4を操作することにより電源がオンとなり、かつモードダイヤル5により撮影モードに切換えられると、制御回路7は撮影モードを設定する。制御回路7は、撮像素子6およびLCD駆動回路13を制御することにより、たとえば1/30秒の周期で液晶モニタ14に表示される画像を更新する。すなわち、液晶モニタ14には、被写体の動画像がスルー画として表示される。広告配置部73は、スルー画には広告画像を配置しない。
Next, the photographing operation of this camera will be described. When the user turns on the power by operating the
スルー画表示中にユーザがレリーズボタン3を半押しして半押しスイッチ3aがオンすると、撮影準備が指示される。顔認識機能が有効になっている場合、撮影準備指示に応じて、顔検出部71は、撮像素子6から入力した画像信号を用いて顔検出処理を実行し、人物の顔を検出する。人物の顔が検出されると、顔検出部71は検出した人物の顔の中心位置を特定し、制御回路7はその位置を中心とする矩形枠を液晶モニタ14に表示する。その結果、液晶モニタ14には、検出された人物の顔が枠で囲われて表示される。複数の顔が検出されると、検出された各顔に矩形枠が重ねて表示される。他方、顔認識機能が無効になっている場合、液晶モニタ14には、制御回路7が焦点調節装置10を制御するために用いた領域に、フォーカス枠が表示される。
When the user half-presses the
スルー画表示中にユーザがレリーズボタン3を全押しして全押しスイッチ3bがオンすると、撮影が指示される。撮影指示に応じて、制御回路7は、撮像素子6から入力した画像信号に所定の画像処理を行う。その後、広告配置部73によって、撮影画像に広告画像の埋め込みが行われる。最後に、撮影画像が記録媒体12に記録される。このとき、広告配置部73によって広告画像の埋め込みが行われた撮影画像は、液晶モニタ14には表示されない。なお、所定の秒数(例えば、2秒間)だけ、液晶モニタ14上に広告付き画像を表示することも勿論可能である。
When the user fully presses the
次に、カメラ1の広告埋め込み機能について、例を挙げて説明する。図3は、広告が埋め込まれた撮影画像の例である。図3(a)には、広告を埋め込む前の撮影画像20Aが示されている。撮影画像20Aに対して、広告の埋め込みを行った例が、図3(b)および図3(c)である。図3(b)の撮影画像20Bには、画像の最上部に矩形の広告21Bが埋め込まれている。また図3(c)の撮影画像20Cには、画像の上方右側に、楕円形の広告画像21Cが埋め込まれている。このように、広告画像はどのような形状であってもよい。
Next, the advertisement embedding function of the
カメラ1を左右に傾けて撮像を行った場合、傾き検知装置16によってカメラ1の傾きが検出され、広告画像はカメラ1の傾きに基づいた形状で埋め込まれる。図4は、カメラ1を傾けて撮像を行い、広告画像を撮影画像の上部に埋め込んだときの撮影画像の例である。図4(a)には、カメラ1を傾けずに撮像を行ったときの広告埋め込み済み撮影画像22Aが示されている。広告画像23Aの横幅は撮影画像22Aの長辺の長さと同一となっている。一方、図4(b)には、カメラ1を左に90度傾けて撮像を行ったときの広告埋め込み済み撮影画像22Bが示されている。このとき、広告画像23Bの横幅は撮影画像22Bの短辺の長さと同一となっている。また、図4(c)のように、カメラ1を左に60度傾けて撮像を行った場合、広告画像23Cの形状は三角形となり、撮影画像22Cの上部に埋め込まれる。
When imaging is performed by tilting the
カメラ1は、撮影画像内の、ユーザにとって重要であると考えられる領域を避けて広告の埋め込みを行う。以下、カメラが広告埋め込みの際に避ける領域について、図を用いて説明する。図5は、カメラが広告の埋め込みを避ける領域を説明するための図である。
The
前述の通り、顔検出部73は撮影画像から顔を検出し、図5(a)のように、液晶モニタ14において、検出した顔の周囲に顔認識枠を表示する。広告の埋め込みを行う際には、顔認識枠24および25の領域を覆わないように広告画像を配置する。広告画像は、広告の配置領域で、撮影画像の中央からもっとも遠い位置に配置する。広告の配置領域に広告画像を配置できる空間が存在しない場合は、広告の配置領域を無視して、既定の位置へ(例えば、画面の左上または右下)広告画像を配置する。
As described above, the
顔認識機能が有効ではない場合、顔認識枠は液晶モニタ14に表示されない。代わりに、液晶モニタ14には、焦点を合わせた対象に重ねてフォーカス枠を表示する。フォーカス枠を表示した液晶モニタ14の例が図5(b)である。このとき、広告の埋め込みは、フォーカス枠26を避けるようにして行われる。広告画像は、広告の配置領域で、撮影画像の中央からもっとも遠い位置に配置する。広告の配置領域に広告画像を配置できる空間が存在しない場合は、広告の配置領域を無視して、既定の位置へ(例えば、画面の左上または右下)広告画像を配置する。
When the face recognition function is not effective, the face recognition frame is not displayed on the
カメラ1は、撮影画像に撮影日時を埋め込む機能を具備している。日付の写し込み機能が有効になっている場合、図5(c)で示す日付28の位置に、撮像を行ったときの日付が埋め込まれる。このとき、広告の埋め込みは、日付28を避けるようにして行われる。広告画像は、広告の配置領域で、撮影画像の中央からもっとも遠い位置に配置する。広告の配置領域に広告画像を配置できる空間が存在しない場合は、広告の配置領域を無視して、既定の位置へ(例えば、画面の左上または右下)広告画像を配置する。
The
カメラ1を用いて撮像を行う際、撮影アシスト機能を用いることができる。撮影アシスト機能を有効にすると、図5(d)のように液晶モニタ14へアシスト枠29が表示される。ユーザは選択したモードならびにアシスト枠29を基に、撮影を行う。このとき、広告の埋め込みは、アシスト枠29が表示されていた位置を避けるようにして行われる。広告画像は、広告の配置領域で、撮影画像の中央からもっとも遠い位置に配置する。広告の配置領域に広告画像を配置できる空間が存在しない場合は、広告の配置領域を無視して、既定の位置へ(例えば、画面の左上または右下)広告画像を配置する。
When taking an image using the
次に、パノラマモードでの撮像時における広告埋め込みを説明する。図6は、パノラマモードにおける広告埋め込みの例を示した図である。図6(a)のように、3回の撮影で1つのパノラマ画像を作成する場合、撮影画像(30,31,32)同士を互いに少しずつ重ね合わせて合成し、1つのパノラマ画像を得る。パノラマモード有効時には、各々の撮影画像の左右両端の一定幅を、広告埋め込みを行わない領域とする。例えば撮影画像31の場合、図6(b)に示すように、左右の領域33,34には広告画像を埋め込まない。なお、パノラマモードで撮像を行う場合、広告画像はそれぞれの撮影画像(30,31,32)に1つずつ埋め込んでもよいし、最終的に得られるパノラマ画像に対して1つだけ埋め込んでもよい。広告画像は、広告の配置領域で、撮影画像の中央からもっとも遠い位置に配置する。広告の配置領域に広告画像を配置できる空間が存在しない場合は、広告の配置領域を無視して、既定の位置へ(例えば、画面の左上または右下)広告画像を配置する。
Next, advertisement embedding at the time of imaging in the panorama mode will be described. FIG. 6 is a diagram showing an example of advertisement embedding in the panorama mode. As shown in FIG. 6A, when one panoramic image is created by three shootings, the shot images (30, 31, 32) are slightly overlapped with each other and synthesized to obtain one panoramic image. When the panorama mode is valid, a fixed width at the left and right ends of each captured image is set as a region where no advertisement is embedded. For example, in the case of the photographed
撮影画像に文字が含まれていることを文字検出部72検出した場合、文字を避ける広告画像の配置を試みる。図7は、文字が含まれた撮影画像の例である。図7に示された撮影画像35には、文字列36が含まれている。文字検出部72が文字列36を認識すると、広告配置部73による広告画像の埋め込みの際、文字列36を隠さないように広告画像が配置される。広告画像は、広告の配置領域で、撮影画像の中央からもっとも遠い位置に配置する。広告の配置領域に広告画像を配置できる空間が存在しない場合は、広告の配置領域を無視して、既定の位置へ(例えば、画面の左上または右下)広告画像を配置する。
When the
上述した撮影画像への広告埋め込み処理について、フローチャートを基に説明する。図8は、撮影画像への広告埋め込み処理を説明するためのフローチャートである。まずステップS1では、広告の配置領域を撮影画像の全面に設定する。この段階では、広告画像は撮影画像のどこにでも配置されうる。ステップS2では、傾き検知装置16によりカメラ1の傾きが検出され、傾きに応じた分だけ広告画像を回転する。ステップS3では、顔認識機能が有効になっているか否かを判定する。ステップS3により肯定判定がなされた場合、ステップS5に進み、広告の配置領域から顔認識枠の領域を除外する。他方、ステップS3において否定判定がなされた場合は、ステップS4に進み、広告の配置領域からフォーカス枠の領域を除外する。
The above-described advertisement embedding process in a photographed image will be described based on a flowchart. FIG. 8 is a flowchart for explaining an advertisement embedding process in a photographed image. First, in step S1, the advertisement placement area is set on the entire surface of the photographed image. At this stage, the advertisement image can be placed anywhere in the captured image. In step S2, the
ステップS6では、日付の写し込みが有効になっているか否かを判定する。日付の写し込みを行う設定になっていた場合、ステップS6により肯定判定がなされ、ステップS7に進む。ステップS7では、広告の配置領域から日付の写し込みを行う領域を除外して、ステップS8に進む。他方、ステップS6において否定判定がなされた場合は、ステップS8に進む。ステップS8では、撮影アシスト機能が有効になっているか否かを判定する。ステップS8により肯定判定がなされた場合、ステップS9へ進む。ステップS9では、広告の配置領域から撮影アシスト枠の領域を除外してステップS10へ進む。他方、ステップS8において否定判定がなされた場合は、ステップS10へ進む。ステップS10では、パノラマモードが有効になっているか否かを判定する。ステップS10により肯定判定がなされた場合、ステップS11へ進み、広告の配置領域から撮影画像の左右一定幅を除外してステップS12へ進む。他方、ステップS10において否定判定がなされた場合は、ステップS12へ進む。 In step S6, it is determined whether date imprinting is enabled. If the date is set to be imprinted, an affirmative determination is made in step S6, and the process proceeds to step S7. In step S7, the area where the date is imprinted is excluded from the advertisement arrangement area, and the process proceeds to step S8. On the other hand, if a negative determination is made in step S6, the process proceeds to step S8. In step S8, it is determined whether or not the photographing assist function is enabled. When an affirmative determination is made in step S8, the process proceeds to step S9. In step S9, the area of the shooting assist frame is excluded from the advertisement arrangement area, and the process proceeds to step S10. On the other hand, if a negative determination is made in step S8, the process proceeds to step S10. In step S10, it is determined whether or not the panorama mode is enabled. When an affirmative determination is made in step S10, the process proceeds to step S11, and the left and right fixed width of the photographed image is excluded from the advertisement arrangement area, and the process proceeds to step S12. On the other hand, if a negative determination is made in step S10, the process proceeds to step S12.
ステップS12では、これまでのステップで設定された広告の配置領域に基づいて、広告画像を配置する。広告画像は、広告の配置領域で、撮影画像の中央からもっとも遠い位置に配置する。広告の配置領域に広告画像を配置できる空間が存在しない場合は、広告の配置領域を無視して、既定の位置へ(例えば、画面の左上または右下)広告画像を配置する。 In step S12, an advertisement image is arranged based on the advertisement arrangement area set in the previous steps. The advertisement image is arranged at a position farthest from the center of the photographed image in the advertisement arrangement area. When there is no space in which the advertisement image can be placed in the advertisement placement area, the advertisement placement area is ignored and the advertisement image is placed at a predetermined position (for example, the upper left or lower right of the screen).
以下、広告画像を配置する手順を、図を用いて説明する。図9は、広告の配置領域へ広告画像を配置する処理を説明するための図である。図9(a)に、広告埋め込み前の撮影画像37を、図9(b)に、広告画像38を示す。ステップS12までの処理で除外された領域を、図9(c)に示す。ここで、領域39および40は、顔認識枠に基づいて除外された領域であり、領域41は、日付の写し込みを行う領域に基づいて除外された領域である。始めに、図9(d)の矢印42のように、広告画像を撮影画像の左上隅から右上隅まで少しずつ位置を変えながら、配置が可能な位置を探していく。右上隅に到達したら、図9(e)に示すように、縦位置を所定の1単位だけ下方向へずらし、矢印43のように左隅から右隅まで配置が可能な位置を探索する。以上の手続を、図9(f)のように、広告の配置領域の最下部に到達するまで繰り返す。最後に、広告画像の配置が可能な位置のうち、撮影画像の中心からもっとも遠い位置に、広告画像が埋め込まれる。結果として、図9(g)の撮影画像45が得られる。
Hereinafter, the procedure for arranging advertisement images will be described with reference to the drawings. FIG. 9 is a diagram for explaining the process of arranging the advertisement image in the advertisement arrangement area. FIG. 9A shows a photographed
上述した第1の実施の形態によるカメラによれば、次の作用効果が得られる。
(1)撮影画像への広告の埋め込みが、顔認識枠などを可能な限り避けて行われる。これにより、被写体が広告画像によって覆われることを回避することができる。
(2)広告画像の形状は、カメラの傾きに応じて変化する。これにより、撮影画像の上下が広告と一致し、広告の可読性が向上する。
(3)広告画像は、撮影画像の中心からもっとも遠い位置に配置される。これにより、広告が撮影画像の中央部分を占有することを避けることができる。
According to the camera according to the first embodiment described above, the following operational effects can be obtained.
(1) An advertisement is embedded in a captured image while avoiding a face recognition frame or the like as much as possible. Thereby, it can avoid that a to-be-photographed object is covered with an advertisement image.
(2) The shape of the advertisement image changes according to the tilt of the camera. Thereby, the upper and lower sides of the captured image coincide with the advertisement, and the readability of the advertisement is improved.
(3) The advertisement image is arranged at a position farthest from the center of the captured image. Thereby, it can avoid that an advertisement occupies the center part of a picked-up image.
第1の実施の形態では、広告画像は、撮影画像の中心からもっとも遠い位置に配置される。広告画像の配置を、撮影画像の情報を基に、より効果的な方法で行ってもよい。このような例を第2の実施の形態として説明する。 In the first embodiment, the advertisement image is arranged at a position farthest from the center of the captured image. You may arrange | position advertisement image by a more effective method based on the information of a picked-up image. Such an example will be described as a second embodiment.
――第2の実施の形態――
本実施形態におけるカメラは、第1の実施の形態に加えて、撮影画像の輪郭検出を行う。広告の配置領域に対して輪郭検出を行い、広告の配置に適した大きさの輪郭が検出された場合は、広告画像をその輪郭に合致するような形状に変形し、輪郭の内部に広告画像を配置する。上記の輪郭検出処理は、公知の検出技術に基づいて制御回路7の輪郭検出部(図示せず)が行う。
-Second embodiment-
In addition to the first embodiment, the camera according to the present embodiment performs contour detection of a captured image. If an outline is detected for the advertisement placement area and an outline with a size suitable for the advertisement placement is detected, the advertisement image is transformed into a shape that matches the outline, and the advertisement image is placed inside the outline. Place. The contour detection process is performed by a contour detector (not shown) of the control circuit 7 based on a known detection technique.
本実施形態における広告の配置について、具体的な例を挙げて説明する。図10は、第2の実施の形態における広告の配置例である。図10(a)には、広告を埋め込む前の撮影画像46が示されている。輪郭検出を行うと、領域47の輪郭が検出されるので、広告画像は領域47に配置される。図10(a)の例において、領域47の輪郭は矩形となっているが、例えば円形や多角形など、矩形以外の形状である輪郭も検出される。
The placement of advertisements in this embodiment will be described with a specific example. FIG. 10 is an example of an advertisement arrangement in the second embodiment. FIG. 10A shows a captured
図10(b)は、領域47に実際に広告画像を配置した撮影画像48である。広告画像49が、輪郭に合致する形状に変形されて、撮影画像に埋め込まれている。なお、輪郭内広告を埋め込む際に、広告画像を変形することなく本来の形のまま埋め込むことができることは勿論である。
FIG. 10B is a captured
なお、輪郭検出ならびに広告の変形は、以上で述べたように、広告の配置領域を確定した後で行ってもよいし、それ以前の任意の段階で行ってもよい。 Note that, as described above, contour detection and advertisement modification may be performed after the advertisement placement area is determined, or may be performed at an arbitrary stage before that.
上述した第2の実施の形態によるカメラによれば、第1の実施の形態によるカメラで得られる作用効果に加えて、次の作用効果が得られる。広告画像を、撮影画像中の輪郭に合わせ変形して埋め込むことができる。これにより、撮影画像により自然な形で広告が埋め込まれ、より高い広告効果を得ることができる。 According to the camera according to the second embodiment described above, the following functions and effects can be obtained in addition to the functions and effects obtained by the camera according to the first embodiment. It is possible to embed the advertisement image by deforming it according to the contour in the photographed image. Thereby, the advertisement is embedded in the captured image in a natural manner, and a higher advertising effect can be obtained.
次のような変形も本発明の範囲内である。
(1)液晶モニタ14に表示されるスルー画に対して、広告画像の埋め込み処理を行ってもよい。また、スルー画に広告画像そのものを表示するのではなく、広告画像の埋め込み位置を示すための枠のみを表示してもよい。
(2)広告画像の埋め込みは、カメラ自身が行うのではなく、別途ソフトウェアによって行われるようにしてもよい。この場合、記録媒体に格納された撮影画像を情報端末等に取り込んだ際に、取り込み先の情報端末によって駆動されるソフトウェアが、上述した広告埋め込み処理を実行する。
(3)上述の処理によって決定された広告画像の埋め込み位置をユーザに提示して、ユーザに広告画像の埋め込み位置を変更する操作を許してもよい。この場合、カメラ1は操作ボタンもしくはタッチパネルを備え、ユーザはそれらの入力装置を用いて新しい広告画像の埋め込み位置を決定する。
The following modifications are also within the scope of the present invention.
(1) An advertisement image embedding process may be performed on the through image displayed on the
(2) The advertisement image may be embedded not by the camera itself but separately by software. In this case, when the captured image stored in the recording medium is captured by the information terminal or the like, the software driven by the information terminal of the capture destination executes the advertisement embedding process described above.
(3) The advertisement image embedding position determined by the above-described process may be presented to the user to allow the user to change the embedding position of the advertisement image. In this case, the
本発明の特徴を損なわない限り、本発明は上記実施の形態に限定されるものではなく、本発明の技術的思想の範囲内で考えられるその他の形態についても、本発明の範囲内に含まれる。 As long as the characteristics of the present invention are not impaired, the present invention is not limited to the above-described embodiments, and other forms conceivable within the scope of the technical idea of the present invention are also included in the scope of the present invention. .
なお、以上説明した実施の形態におけるカメラの各構成要素と特許請求の範囲の各構成要素との対応関係は以下の通りである。本発明の撮像手段は撮像素子6に対応し、広告合成手段は広告配置部73に対応する。
Note that the correspondence between each component of the camera in the embodiment described above and each component of the claims is as follows. The image pickup means of the present invention corresponds to the
なお、以上の対応関係の説明は一例であり、権利解釈に際して何ら拘束されるものではない。 Note that the above description of the correspondence relationship is merely an example, and is not constrained when interpreting rights.
1 カメラ
7 制御回路
14 液晶モニタ
15 タイマー
16 傾き検知装置
71 顔検出部
72 文字検出部
73 広告配置部
DESCRIPTION OF
Claims (10)
前記被写体を撮像するための光学系を格納したカメラの撮影状況に関連した撮影情報と、前記被写体像に関する画像解析情報の両方またはいずれか一方に基づいて、前記第1画像信号と所定の広告画像信号とを合成した第2画像信号を出力する広告合成手段と、
を備えた画像処理装置。 Imaging means for imaging a subject and outputting a first image signal representing the subject image;
The first image signal and a predetermined advertisement image based on shooting information related to shooting conditions of a camera storing an optical system for shooting the subject and / or image analysis information related to the subject image. Advertisement synthesizing means for outputting a second image signal obtained by synthesizing the signal;
An image processing apparatus.
前記撮影情報として、前記カメラのフォーカスエリア位置情報および/または日付写し込み位置情報を用いることを特徴とする画像処理装置。 The image processing apparatus according to claim 1.
An image processing apparatus using focus area position information and / or date imprint position information of the camera as the photographing information.
前記第1画像信号を用いて、前記被写体中の人物の顔を検出する顔検出手段をさらに備え、
前記画像解析情報として、前記顔検出手段により検出された顔の位置情報を用いることを特徴とする画像処理装置。 The image processing apparatus according to claim 1 or 2,
Further comprising face detection means for detecting the face of the person in the subject using the first image signal;
An image processing apparatus using the position information of the face detected by the face detection means as the image analysis information.
前記第1画像信号を用いて、前記被写体中の文字を検出する文字検出手段をさらに備え、
前記画像解析情報として、前記文字検出手段により検出された文字の位置情報を用いることを特徴とする画像処理装置。 In the image processing device according to any one of claims 1 to 3,
Character detection means for detecting characters in the subject using the first image signal;
An image processing apparatus characterized in that position information of a character detected by the character detection means is used as the image analysis information.
前記第1画像信号を用いて、前記被写体の輪郭を検出する輪郭検出手段をさらに備え、
前記画像解析情報として、前記輪郭検出手段により検出された輪郭の位置情報を用いることを特徴とする画像処理装置。 In the image processing device according to any one of claims 1 to 4,
A contour detecting means for detecting a contour of the subject using the first image signal;
An image processing apparatus using position information of a contour detected by the contour detection means as the image analysis information.
前記カメラの傾き情報を出力する傾き検出手段をさらに備え、
前記撮影情報として、前記傾き情報を用いることを特徴とする画像処理装置。 In the image processing device according to any one of claims 1 to 5,
Further comprising tilt detection means for outputting tilt information of the camera;
An image processing apparatus using the tilt information as the photographing information.
前記撮影情報として、撮像時における撮影アシスト枠の表示位置を用いることを特徴とする画像処理装置。 In the image processing device according to any one of claims 1 to 5,
An image processing apparatus using a display position of a shooting assist frame at the time of shooting as the shooting information.
前記フォーカスエリア位置、前記日付写し込み位置、前記顔の位置、前記文字の位置、前記輪郭の位置および前記アシスト枠の表示位置を避けて、広告画像を合成することを特徴とする画像処理装置。 In the image processing device according to any one of claims 2 to 7,
An image processing apparatus that synthesizes an advertisement image while avoiding the focus area position, the date imprinting position, the face position, the character position, the contour position, and the display position of the assist frame.
パノラマ撮影モード時には、隣接する画像との接合領域を避けて広告画像を合成することを特徴とする画像処理装置。 In the image processing device according to any one of claims 1 to 8,
An image processing apparatus characterized in that, in the panorama shooting mode, an advertisement image is synthesized while avoiding a joint area with an adjacent image.
前記被写体を撮像するための光学系を格納したカメラの撮影状況に関連した撮影情報と、前記被写体像に関する画像解析情報とに基づいて、前記第1画像信号と所定の広告画像信号とを合成した第2画像信号を出力する広告合成処理と、
をコンピュータで実施させることを特徴とするプログラム。 An input process for imaging a subject and inputting a first image signal representing the subject image;
The first image signal and a predetermined advertisement image signal are synthesized based on shooting information related to a shooting situation of a camera storing an optical system for imaging the subject and image analysis information on the subject image. Advertising composition processing for outputting the second image signal;
A program characterized by having a computer implement the program.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008039946A JP2009200784A (en) | 2008-02-21 | 2008-02-21 | Image processing apparatus and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008039946A JP2009200784A (en) | 2008-02-21 | 2008-02-21 | Image processing apparatus and program |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2009200784A true JP2009200784A (en) | 2009-09-03 |
Family
ID=41143817
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008039946A Pending JP2009200784A (en) | 2008-02-21 | 2008-02-21 | Image processing apparatus and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2009200784A (en) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013017125A (en) * | 2011-07-06 | 2013-01-24 | Ricoh Co Ltd | Imaging apparatus and display method for monitoring image of the same |
JPWO2011058857A1 (en) * | 2009-11-10 | 2013-03-28 | 日本電気株式会社 | Remote control system, remote control device and remote control method |
JP2015162048A (en) * | 2014-02-27 | 2015-09-07 | カシオ計算機株式会社 | Information display device, information display method, and program |
US9418436B2 (en) | 2012-01-27 | 2016-08-16 | Panasonic Intellectual Property Management Co., Ltd. | Image processing apparatus, imaging apparatus, and image processing method |
JP2020107240A (en) * | 2018-12-28 | 2020-07-09 | 富士ゼロックス株式会社 | Control apparatus, and control program |
-
2008
- 2008-02-21 JP JP2008039946A patent/JP2009200784A/en active Pending
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPWO2011058857A1 (en) * | 2009-11-10 | 2013-03-28 | 日本電気株式会社 | Remote control system, remote control device and remote control method |
JP5996869B2 (en) * | 2009-11-10 | 2016-09-21 | レノボ・イノベーションズ・リミテッド(香港) | Remote control system, remote control device and remote control method |
JP2013017125A (en) * | 2011-07-06 | 2013-01-24 | Ricoh Co Ltd | Imaging apparatus and display method for monitoring image of the same |
US9418436B2 (en) | 2012-01-27 | 2016-08-16 | Panasonic Intellectual Property Management Co., Ltd. | Image processing apparatus, imaging apparatus, and image processing method |
JP2015162048A (en) * | 2014-02-27 | 2015-09-07 | カシオ計算機株式会社 | Information display device, information display method, and program |
JP2020107240A (en) * | 2018-12-28 | 2020-07-09 | 富士ゼロックス株式会社 | Control apparatus, and control program |
JP7247583B2 (en) | 2018-12-28 | 2023-03-29 | 富士フイルムビジネスイノベーション株式会社 | Control device and control program |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4904243B2 (en) | Imaging apparatus and imaging control method | |
JP4889538B2 (en) | Image processing device | |
JP4818987B2 (en) | Imaging apparatus, display method, and program | |
JP5036612B2 (en) | Imaging device | |
JP5281446B2 (en) | Imaging apparatus, control method thereof, and program | |
JP5467992B2 (en) | Imaging device | |
JP2007174548A (en) | Photographing device and program | |
US8502883B2 (en) | Photographing apparatus and photographing control method | |
JP5604285B2 (en) | Imaging device | |
JP3971240B2 (en) | Camera with advice function | |
JP2008172342A (en) | Three-dimensional image recorder and three-dimensional image recording method | |
JP2009200784A (en) | Image processing apparatus and program | |
JP5131367B2 (en) | Imaging apparatus and program | |
JP2008228053A (en) | Camera | |
KR20050109190A (en) | Wide image generating apparatus and method using a dual camera | |
JP2008245093A (en) | Digital camera, and control method and control program of digital camera | |
JP5423186B2 (en) | Imaging apparatus, area detection method, and program | |
JP2011239267A (en) | Imaging apparatus and image processing apparatus | |
JP2012185231A (en) | Image display device and image display method | |
JP2009253925A (en) | Imaging apparatus and imaging method, and imaging control program | |
JP2008079149A (en) | Image display device and program | |
JP2012124614A (en) | Imaging apparatus and imaging apparatus control method | |
JP2011066828A (en) | Imaging device, imaging method and program | |
JP2007235869A (en) | Imaging apparatus and program | |
JP2011197999A (en) | Image processing apparatus and image processing method |