JP2014203326A - 画像処理プログラム、画像処理装置、画像処理システム、および、画像処理方法 - Google Patents
画像処理プログラム、画像処理装置、画像処理システム、および、画像処理方法 Download PDFInfo
- Publication number
- JP2014203326A JP2014203326A JP2013080265A JP2013080265A JP2014203326A JP 2014203326 A JP2014203326 A JP 2014203326A JP 2013080265 A JP2013080265 A JP 2013080265A JP 2013080265 A JP2013080265 A JP 2013080265A JP 2014203326 A JP2014203326 A JP 2014203326A
- Authority
- JP
- Japan
- Prior art keywords
- image
- noise
- real
- image processing
- processing unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims description 6
- 238000003384 imaging method Methods 0.000 claims abstract description 13
- 238000009826 distribution Methods 0.000 claims description 36
- 230000006870 function Effects 0.000 claims description 4
- 230000015572 biosynthetic process Effects 0.000 claims description 3
- 238000003786 synthesis reaction Methods 0.000 claims description 3
- 238000000034 method Methods 0.000 abstract description 68
- 239000002131 composite material Substances 0.000 abstract description 16
- 238000010586 diagram Methods 0.000 description 16
- 241001326510 Phacelia sericea Species 0.000 description 14
- 239000003550 marker Substances 0.000 description 10
- 238000005070 sampling Methods 0.000 description 7
- 230000004075 alteration Effects 0.000 description 5
- 239000000203 mixture Substances 0.000 description 5
- 238000006243 chemical reaction Methods 0.000 description 3
- 239000003086 colorant Substances 0.000 description 2
- 230000002194 synthesizing effect Effects 0.000 description 2
- 238000009827 uniform distribution Methods 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000006866 deterioration Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
Images
Landscapes
- Processing Or Creating Images (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
以下、本発明の一実施形態に係る画像処理装置について説明する。図1は、本実施形態の画像処理装置1の機能構成を示すブロック図である。
図2は、画像処理装置1において行われる処理の概要を示す図である。図2に示すように、仮想カメラで仮想オブジェクトを撮像すると、ノイズの無いCG画像が生成される。このCG画像にノイズ処理が行われることによってノイズが付加されてノイズ有りのCG画像が生成される。一方、実カメラ16によって撮像された実画像にはノイズが含まれている。ノイズ有りのCG画像と実画像とを重ね合わせて合成画像が生成される。このようにして生成された合成画像は、実空間には存在しない仮想オブジェクトがあたかも存在するかのような自然な画像となる。
以下、ノイズ処理部12によって行われるノイズ処理について説明する。図3は、ショットノイズを擬似的に再現したショットノイズ処理の概要を示す図である。
次に、現実のイメージセンサで発生するショットノイズに基づく偽色をCG画像において擬似的に再現する方法について説明する。
(R,G,B)=(a’,(b’+c’)/2,d’) (1)
(R’,G’,B’)=(r0,(r1+r2)/2,r3)+(R,G,B) (2)
次に、ノイズ処理部12において行われる、熱ノイズを擬似的に再現する熱ノイズ処理について説明する。図9は、熱ノイズを擬似的に再現する熱ノイズ処理の概要を示す図である。
(R’,G’,B’)=k(s0,s1,s2)+(R,G,B) (3)
ここで、kは定数であり、s0,s1,s2は、乱数を用いた抽選により決定された値(0〜1までの値)である。
実際のイメージセンサにおいて発生するノイズによる現象としてパープルフリンジがある。以下では、このパープルフリンジを擬似的に再現する方法について説明する。
次に、図11及び図12を参照して、本実施形態に係る画像処理の詳細について説明する。図11は、本実施形態に係る画像処理の詳細を示すメインフローチャートである。図11に示す処理は、画像処理装置1のCPUが所定の画像処理プログラムを実行することによって行われる。
10 制御部
11 CG画像取得部
12 ノイズ処理部
13 実画像取得部
14 画像合成部
15 表示制御部
16 実カメラ
17 表示装置
Claims (19)
- 画像処理装置のコンピュータにおいて実行される画像処理プログラムであって、前記コンピュータを、
実カメラにより実空間を撮像した実画像を取得する実画像取得手段と、
コンピュータグラフィクスからなるCG画像を取得するCG画像取得手段と、
前記CG画像に、実カメラにより生成される画像において発生し得るノイズを付加するノイズ処理手段と、
前記取得した実画像と前記ノイズ処理手段によりノイズが付加されたCG画像とを合成する合成手段として機能させる、画像処理プログラム。 - 前記ノイズ処理手段は、前記CG画像における明るさの度合いに基づいて、ノイズを付加する、請求項1に記載の画像処理プログラム。
- 前記ノイズ処理手段は、所定の分布に従って前記CG画像における明るさの度合いを変化させることにより、ノイズを付加する、請求項1又は2に記載の画像処理プログラム。
- 前記ノイズ処理手段は、前記CG画像の所定の単位毎にノイズを付加する、請求項1から3の何れかに記載の画像処理プログラム。
- 前記ノイズ処理手段は、前記単位毎の明るさの度合いに基づいて、当該単位の明るさの度合いを変化させることにより、ノイズを付加する、請求項4に記載の画像処理プログラム。
- 前記ノイズ処理手段は、前記CG画像に対してランダムにノイズを付加する、請求項1から5の何れかに記載の画像処理プログラム。
- 前記ノイズ処理手段は、前記CG画像の画素の色成分毎に明るさの度合いを変化させることにより、色成分毎にノイズを付加する、請求項1から6の何れかに記載の画像処理プログラム。
- 前記ノイズ処理手段は、前記色成分毎に所定の分布に従って明るさの度合いを変化させることにより、色成分毎にノイズを付加する、請求項7に記載の画像処理プログラム。
- 前記ノイズ処理手段は、ある色成分のノイズよりも別の色成分のノイズの方が重みが大きくなるようにして、各色成分にノイズを付加する、請求項7又は8に記載の画像処理プログラム。
- 前記ノイズ処理手段は、実カメラのイメージセンサのカラーフィルタにおける各色の比率に応じて、前記重みを設定する、請求項9に記載の画像処理プログラム。
- 前記CG画像取得手段は、前記実画像よりも高い解像度の前記CG画像を取得し、
前記ノイズ処理手段は、前記CG画像取得手段によって取得されたCG画像の各画素に対してノイズを付加して合成することにより、ノイズが付加されたCG画像を生成する、請求項10に記載の画像処理プログラム。 - 前記ノイズ処理手段は、前記CG画像の高輝度部分と低輝度部分との境界領域において所定の色成分の明るさの度合いを増加させる、請求項1から11の何れかに記載の画像処理プログラム。
- 前記ノイズ処理手段は、前記境界領域における画素の赤成分及び青成分の明るさの度合いを増加させる、請求項12に記載の画像処理プログラム。
- 前記ノイズ処理手段は、前記CG画像における明るさの度合いが所定値以下の部分において、明るさの度合いが当該所定値よりも高い光点を発生させる、請求項1から13の何れかに記載の画像処理プログラム。
- 前記ノイズ処理手段は、前記CG画像において偽色を発生させる、請求項1から14の何れかに記載の画像処理プログラム。
- 前記実画像に基づいて、当該実画像の色及び/又は明るさに関する実画像情報を取得する実画像情報取得手段として、前記コンピュータをさらに機能させ、
前記CG画像取得手段は、前記実画像情報に応じたCG画像を取得し、
前記ノイズ処理手段は、前記実画像情報に応じたCG画像にノイズを加える、請求項1から15の何れかに記載の画像処理プログラム。 - 実カメラにより実空間を撮像した実画像を取得する実画像取得手段と、
コンピュータグラフィクスからなるCG画像を取得するCG画像取得手段と、
前記CG画像に、実カメラにより生成される画像において発生し得るノイズを付加するノイズ処理手段と、
前記取得した実画像と前記ノイズ処理手段によりノイズが付加されたCG画像とを合成する合成手段とを備える、画像処理装置。 - 実カメラにより実空間を撮像した実画像を取得する実画像取得手段と、
コンピュータグラフィクスからなるCG画像を取得するCG画像取得手段と、
前記CG画像に、実カメラにより生成される画像において発生し得るノイズを付加するノイズ処理手段と、
前記取得した実画像と前記ノイズ処理手段によりノイズが付加されたCG画像とを合成する合成手段とを備える、画像処理システム。 - 画像処理システムにおいて実行される画像処理方法であって、
実カメラにより実空間を撮像した実画像を取得する実画像取得ステップと、
コンピュータグラフィクスからなるCG画像を取得するCG画像取得ステップと、
前記CG画像に、実カメラにより生成される画像において発生し得るノイズを付加するノイズ処理ステップと、
前記取得した実画像と前記ノイズ処理手段によりノイズが付加されたCG画像とを合成する合成ステップとを含む、画像処理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013080265A JP6082642B2 (ja) | 2013-04-08 | 2013-04-08 | 画像処理プログラム、画像処理装置、画像処理システム、および、画像処理方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013080265A JP6082642B2 (ja) | 2013-04-08 | 2013-04-08 | 画像処理プログラム、画像処理装置、画像処理システム、および、画像処理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014203326A true JP2014203326A (ja) | 2014-10-27 |
JP6082642B2 JP6082642B2 (ja) | 2017-02-15 |
Family
ID=52353697
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013080265A Active JP6082642B2 (ja) | 2013-04-08 | 2013-04-08 | 画像処理プログラム、画像処理装置、画像処理システム、および、画像処理方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6082642B2 (ja) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016136332A1 (ja) * | 2015-02-27 | 2016-09-01 | ソニー株式会社 | 画像処理装置、画像処理方法、及びプログラム |
JP2019114135A (ja) * | 2017-12-25 | 2019-07-11 | 凸版印刷株式会社 | 拡張現実(ar)映像の現実感を向上するar情報表示方法及びプログラム |
JP2019144774A (ja) * | 2018-02-19 | 2019-08-29 | 株式会社あかつき | 3dモデル表示装置、3dモデル表示方法及び3dモデル表示プログラム |
GB2614945A (en) * | 2021-12-16 | 2023-07-26 | Canon Kk | Information processing apparatus, control method of information processing apparatus, and program |
US11941729B2 (en) | 2020-12-11 | 2024-03-26 | Canon Kabushiki Kaisha | Image processing apparatus, method for controlling image processing apparatus, and storage medium |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002010060A (ja) * | 2000-06-20 | 2002-01-11 | Mitsubishi Electric Corp | 画像融合装置及び画像融合方法 |
JP2012142747A (ja) * | 2010-12-28 | 2012-07-26 | Sony Corp | 信号処理装置、信号処理方法、およびプログラム |
JP2012174116A (ja) * | 2011-02-23 | 2012-09-10 | Ntt Docomo Inc | オブジェクト表示装置、オブジェクト表示方法及びオブジェクト表示プログラム |
JP2013025669A (ja) * | 2011-07-25 | 2013-02-04 | Casio Comput Co Ltd | 画像表示システム、画像表示方法、並びにプログラム |
-
2013
- 2013-04-08 JP JP2013080265A patent/JP6082642B2/ja active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002010060A (ja) * | 2000-06-20 | 2002-01-11 | Mitsubishi Electric Corp | 画像融合装置及び画像融合方法 |
JP2012142747A (ja) * | 2010-12-28 | 2012-07-26 | Sony Corp | 信号処理装置、信号処理方法、およびプログラム |
JP2012174116A (ja) * | 2011-02-23 | 2012-09-10 | Ntt Docomo Inc | オブジェクト表示装置、オブジェクト表示方法及びオブジェクト表示プログラム |
JP2013025669A (ja) * | 2011-07-25 | 2013-02-04 | Casio Comput Co Ltd | 画像表示システム、画像表示方法、並びにプログラム |
Non-Patent Citations (1)
Title |
---|
深田 和也: "「らしさ」評価指標のノイズ付加画像に対する有効性の検証", 電子情報通信学会技術研究報告 VOL.111 NO.318, vol. IMQ2011-18, JPN6016043269, 18 November 2011 (2011-11-18), JP, pages 16 - 20, ISSN: 0003477099 * |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016136332A1 (ja) * | 2015-02-27 | 2016-09-01 | ソニー株式会社 | 画像処理装置、画像処理方法、及びプログラム |
JP2016162142A (ja) * | 2015-02-27 | 2016-09-05 | ソニー株式会社 | 画像処理装置 |
US10275938B2 (en) | 2015-02-27 | 2019-04-30 | Sony Corporation | Image processing apparatus and image processing method |
JP2019114135A (ja) * | 2017-12-25 | 2019-07-11 | 凸版印刷株式会社 | 拡張現実(ar)映像の現実感を向上するar情報表示方法及びプログラム |
JP7172034B2 (ja) | 2017-12-25 | 2022-11-16 | 凸版印刷株式会社 | 拡張現実(ar)映像の現実感を向上するar情報表示方法及びプログラム |
JP2019144774A (ja) * | 2018-02-19 | 2019-08-29 | 株式会社あかつき | 3dモデル表示装置、3dモデル表示方法及び3dモデル表示プログラム |
JP7125847B2 (ja) | 2018-02-19 | 2022-08-25 | 株式会社あかつき | 3dモデル表示装置、3dモデル表示方法及び3dモデル表示プログラム |
US11941729B2 (en) | 2020-12-11 | 2024-03-26 | Canon Kabushiki Kaisha | Image processing apparatus, method for controlling image processing apparatus, and storage medium |
GB2614945A (en) * | 2021-12-16 | 2023-07-26 | Canon Kk | Information processing apparatus, control method of information processing apparatus, and program |
GB2614945B (en) * | 2021-12-16 | 2024-05-29 | Canon Kk | Information processing apparatus, control method of information processing apparatus, and program |
Also Published As
Publication number | Publication date |
---|---|
JP6082642B2 (ja) | 2017-02-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11257285B2 (en) | Direct light compensation technique for augmented reality system | |
CN107045715B (zh) | 一种单幅低动态范围图像生成高动态范围图像的方法 | |
JP6082642B2 (ja) | 画像処理プログラム、画像処理装置、画像処理システム、および、画像処理方法 | |
CN105659583B (zh) | 图像处理装置、图像处理方法、电子设备及计算机可读存储介质 | |
US9749601B2 (en) | Imaging device, image display method, and storage medium for displaying reconstruction image | |
CN107407554B (zh) | 对多相机成像系统进行仿真 | |
US8237730B1 (en) | Tone mapping for motion pictures | |
WO2017217296A1 (ja) | 画像処理装置 | |
JP7387434B2 (ja) | 画像生成方法および画像生成装置 | |
TW201944773A (zh) | 圖像去馬賽克裝置及方法 | |
JP5370606B2 (ja) | 撮像装置、画像表示方法、及びプログラム | |
JP6087612B2 (ja) | 画像処理装置および画像処理方法 | |
CN111970432A (zh) | 一种图像处理方法及图像处理装置 | |
US9161012B2 (en) | Video compression using virtual skeleton | |
CN113632134A (zh) | 使用预组合去噪的高动态范围图像生成 | |
US10229530B2 (en) | Image processing device and method therefor | |
CN106709888B (zh) | 一种基于人眼视觉模型的高动态范围图像产生方法 | |
JP2004229093A (ja) | 立体画像生成方法及び立体画像生成装置、ならびに立体画像生成プログラム及び記録媒体 | |
KR20150028474A (ko) | 3차원 영상의 색상 보정방법 | |
CN112532872B (zh) | 调整摄像头参数的方法、装置、存储介质及电子设备 | |
JP6666296B2 (ja) | 映像生成装置、その方法、およびプログラム | |
WO2023026543A1 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
JP5752011B2 (ja) | 画像処理装置及び画像処理方法、プログラム、並びに記憶媒体 | |
JP2005274887A (ja) | 画像表示システム及び画像表示プログラム並びに画像表示方法 | |
JP2004207869A (ja) | 画像合成装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160212 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20161102 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20161109 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170106 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170113 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170123 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6082642 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |