JP6597518B2 - 情報処理装置及びプログラム - Google Patents
情報処理装置及びプログラム Download PDFInfo
- Publication number
- JP6597518B2 JP6597518B2 JP2016159255A JP2016159255A JP6597518B2 JP 6597518 B2 JP6597518 B2 JP 6597518B2 JP 2016159255 A JP2016159255 A JP 2016159255A JP 2016159255 A JP2016159255 A JP 2016159255A JP 6597518 B2 JP6597518 B2 JP 6597518B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- display
- images
- information processing
- boundary
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 30
- 239000002131 composite material Substances 0.000 claims description 36
- 238000003384 imaging method Methods 0.000 claims description 6
- 230000006870 function Effects 0.000 description 18
- 238000000034 method Methods 0.000 description 17
- 239000000470 constituent Substances 0.000 description 9
- 239000003086 colorant Substances 0.000 description 4
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 238000000926 separation method Methods 0.000 description 2
- 230000003247 decreasing effect Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
- B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
- B60R1/26—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the rear of the vehicle
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
- B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
- B60R1/27—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view providing all-round vision, e.g. using omnidirectional cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/001—Texturing; Colouring; Generation of texture or colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
- H04N7/185—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source from a mobile camera, e.g. for remote control
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
- B60R2300/303—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using joined images, e.g. multiple camera images
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Mechanical Engineering (AREA)
- Signal Processing (AREA)
- Image Processing (AREA)
- Closed-Circuit Television Systems (AREA)
- Controls And Circuits For Display Device (AREA)
Description
画像取得部は、少なくとも1つの撮影装置(11a〜11d)により撮影された撮影画像を取得するように構成されている。画像処理部は、上記画像取得部により取得された1つ以上の上記撮影画像に基づく画像である少なくとも2つの表示画像(102、103、142、143、144)と、少なくとも上記少なくとも2つの表示画像の間の領域において表示される境界画像(104、121、132、145、146)と、を含む合成画像(101、131、141)を生成するように構成されている。出力部は、上記画像処理部により生成された上記合成画像を外部に出力するように構成されている。
このような構成によれば、合成画像に含まれる複数の表示画像の境界を示す境界画像の表示態様が、表示画像に基づいて設定される。よって、表示画像を視認しやすい境界画像とすることで、ユーザによる表示画像の視認しやすさを向上させることができる。
画像取得機能は、少なくとも1つの撮影装置(11a〜11d)により撮影された撮影画像を取得する。画像処理機能は、上記画像取得機能により取得された1つ以上の上記撮影画像に基づく画像である少なくとも2つの表示画像(102、103、142、143、144)と、少なくとも上記少なくとも2つの表示画像の間の領域において表示される境界画像(104、121、132、145、146)と、を含む合成画像(101、131、141)を生成する。出力機能は、上記画像処理機能により生成された上記合成画像を外部に出力する。また画像処理機能は、上記合成画像に含まれる上記少なくとも2つの表示画像の有する所定の特徴量に応じて、上記境界画像の表示態様を設定する。
なお、この欄及び特許請求の範囲に記載した括弧内の符号は、一つの態様として後述する実施形態に記載の具体的手段との対応関係を示すものであって、本発明の技術的範囲を限定するものではない。
[1.実施形態]
[1−1.構成]
図1に示す表示システム1は、車両に搭載して用いられるシステムであって、前カメラ11a,後カメラ11b,左カメラ11c,右カメラ11dの4つのカメラと、情報処理装置13と、ディスプレイ15と、を備える。以下、上述した各カメラ全てを指す場合に、単にカメラ11と記載する場合がある。
画像処理部23により生成される合成画像について説明する。
<合成画像の概要>
図3に示される合成画像101は、第1表示画像102と、第2表示画像103と、境界画像104と、を含む画像である。
境界画像104は、上述した第1表示画像102及び第2表示画像103の間の領域において表示される画像であって、これら2つの表示画像の境界を明確にする画像である。
<特徴量>
本実施形態における特徴量とは、表示画像が有する、言い換えると表示画像により示される画像の具体的な内容によって定まるパラメータであって、例えば、「明るさ」と「色彩」が該当する。以下では「明るさ」と「色彩」を特徴量として説明するが、これら以外のパラメータを特徴量として用いてもよい。
ところで、表示画像全体又は表示画像の一部から特徴量を取得する場合において、対象領域の画素それぞれについて特徴量を算出し、その平均値を算出することで特徴量を取得することが考えられる。また、対象領域の全ての画素について特徴量を算出せず、標本として設定された一部の画素の特徴量を取得してもよい。
境界画像は、算出された特徴量に応じてその形状や表示色を設定することができる。
境界画像の形状の例としては、例えば、図6に示される境界画像121のように、色が相違する複数の層を有する線や、境界画像の幅が異なる線、直線形状ではない形状の線、例えば波型にしたりすることができる。
・境界画像が3層である場合、即ち2つの表示画像の間に3色存在する場合は、外側の層は明るさ・色ともに表示画像と近い明るさ・色として、内側の1層を逆の明るさ・色とすることで内側の1層を目立たせる。
・2つの表示画像の間で明るさの差が大きいときは、境界画像が目立たなくても別の画像であることを容易に認識できるので、特別なことはしない。ただし、2つの表示画像における境界画像を介して隣り合う領域の中に、相手側の表示画像と明るさや色の差が小さい部分があれば、差が小さい部分を優先して判定する。
・境界画像の表示色を徐々に変化させる場合は、表示画像と境界画像との隣接する部分の色相が反対になるように設定する。
・境界画像の表示色と明るさ、及び形態は組み合わせて変化させてもよい。
・表示画像の色は色相で、明るさは輝度で判定する。
[1−2.処理]
次に、情報処理装置13のCPU17が実行する合成画像出力処理について、図8のフローチャートを用いて説明する。
S20では、CPU17は、S10にて取得された画像を、最終的に出力される合成画像に含まれる画像の視点に変換する。このとき、各画像の輝度や色などを調整してもよい。このS20にて生成される画像が、表示画像となる。
S40では、CPU17は、S30にて抽出された特徴量に応じて、図3〜図7を用いて既に説明した手法を用いて、境界画像の表示形態を決定する。
S60では、CPU17は、S50にて生成された合成画像をディスプレイ15に出力する。これにより、搭乗者はディスプレイ15を見ることにより車両の周辺を容易に確認することができる。
[1−3.効果]
以上詳述した第1実施形態によれば、以下の効果が得られる。
以上、本開示の実施形態について説明したが、本開示は上述の実施形態に限定されることなく、種々変形して実施することができる。
図10に示される合成画像141は、車両の後方を向く視点の画像である表示画像142と、車両の左側の後方を向く視点の画像である表示画像143と、車両の右側の後方を向く視点の画像である表示画像144と、を含む画像であり、表示画像142と表示画像143との間に境界画像145が表示され、表示画像142と表示画像144との間に境界画像146が表示される。
Claims (7)
- 少なくとも1つの撮影装置(11a〜11d)により撮影された撮影画像を取得するように構成された画像取得部(21)と、
前記画像取得部により取得された1つ以上の前記撮影画像に基づく画像である少なくとも2つの表示画像(102、103、142、143、144)と、少なくとも前記少なくとも2つの表示画像の間の領域において表示される境界画像(104、121、132、145、146)と、を含む合成画像を生成するように構成された画像処理部(23)と、
前記画像処理部により生成された前記合成画像を外部に出力するように構成された出力部(25)と、を備え、
前記画像処理部は、前記合成画像に含まれる前記少なくとも2つの表示画像それぞれの有する所定の特徴量の組み合わせに応じて、前記境界画像の表示態様を設定するように構成されており、
前記特徴量は、少なくとも、明るさを示すパラメータ、及び、色彩を示すパラメータ、のうちのいずれか一方を含む、情報処理装置(13)。 - 請求項1に記載の情報処理装置であって、
前記画像処理部は、前記少なくとも2つの表示画像のうちの少なくともいずれか一方において、前記特徴量を前記表示画像における前記境界画像に隣接する一部の領域から取得する、情報処理装置。 - 請求項1又は請求項2に記載の情報処理装置であって、
前記画像処理部は、前記少なくとも2つの表示画像のうちの少なくともいずれか一方において、前記表示画像を分割した複数の領域ごとに前記特徴量を算出し、該算出された前記複数の領域ごとの特徴量を、前記複数の領域ごとに設定された重み付けを考慮して合算して当該表示画像の前記特徴量を算出する、情報処理装置。 - 請求項1から請求項3のいずれかに記載の情報処理装置であって、
前記画像処理部は、前記特徴量に応じて、前記境界画像の形状及び表示色の少なくともいずれか一方の表示態様を設定する、情報処理装置。 - 請求項1から請求項4のいずれかに記載の情報処理装置であって、
前記特徴量は、少なくとも、明るさを示すパラメータを含み、
前記画像処理部は、前記少なくとも2つの表示画像それぞれの明るさの組み合わせに応じて、前記境界画像の形状の表示態様を設定する、情報処理装置。 - 請求項1から請求項5のいずれかに記載の情報処理装置であって、
前記撮影装置は、車両の周辺を撮影するものであり、
当該情報処理装置は、車両に搭載して用いられる、情報処理装置。 - コンピュータに、
少なくとも1つの撮影装置(11a〜11d)により撮影された撮影画像を取得するように構成された画像取得機能(21)と、
前記画像取得機能により取得された1つ以上の前記撮影画像に基づく画像である少なくとも2つの表示画像(102、103、142、143、144)と、少なくとも前記少なくとも2つの表示画像の間の領域において表示される境界画像(104、121、132、145、146)と、を含む合成画像を生成するように構成された画像処理機能(23)と、
前記画像処理機能により生成された前記合成画像を外部に出力するように構成された出力機能(25)と、を実現させ、
前記画像処理機能は、前記合成画像に含まれる前記少なくとも2つの表示画像それぞれの有する所定の特徴量の組み合わせに応じて、前記境界画像の表示態様を設定し、
前記特徴量は、少なくとも、明るさを示すパラメータ、及び、色彩を示すパラメータ、のうちのいずれか一方を含む、プログラム。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016159255A JP6597518B2 (ja) | 2016-08-15 | 2016-08-15 | 情報処理装置及びプログラム |
DE112017004093.0T DE112017004093T5 (de) | 2016-08-15 | 2017-08-15 | Informationsverarbeitungsvorrichtung und -programm |
US16/325,031 US11410274B2 (en) | 2016-08-15 | 2017-08-15 | Information processing device and program |
PCT/JP2017/029381 WO2018034287A1 (ja) | 2016-08-15 | 2017-08-15 | 情報処理装置及びプログラム |
CN201780049878.6A CN109565575A (zh) | 2016-08-15 | 2017-08-15 | 信息处理装置以及程序 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016159255A JP6597518B2 (ja) | 2016-08-15 | 2016-08-15 | 情報処理装置及びプログラム |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2018029229A JP2018029229A (ja) | 2018-02-22 |
JP2018029229A5 JP2018029229A5 (ja) | 2018-11-08 |
JP6597518B2 true JP6597518B2 (ja) | 2019-10-30 |
Family
ID=61197327
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016159255A Active JP6597518B2 (ja) | 2016-08-15 | 2016-08-15 | 情報処理装置及びプログラム |
Country Status (5)
Country | Link |
---|---|
US (1) | US11410274B2 (ja) |
JP (1) | JP6597518B2 (ja) |
CN (1) | CN109565575A (ja) |
DE (1) | DE112017004093T5 (ja) |
WO (1) | WO2018034287A1 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021005135A1 (en) * | 2019-07-09 | 2021-01-14 | Pricer Ab | Stitch images |
Family Cites Families (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1159270A (ja) * | 1997-08-12 | 1999-03-02 | Mitsubishi Electric Corp | 監視用表示装置 |
DE60122040T8 (de) | 2000-03-02 | 2007-08-23 | AutoNetworks Technologies, Ltd., Nagoya | Überwachungseinrichtung für schwer einsehbare Zonen um Kraftfahrzeuge |
JP3764317B2 (ja) | 2000-03-02 | 2006-04-05 | 株式会社オートネットワーク技術研究所 | 車載用周辺視認装置 |
JP2002199257A (ja) * | 2000-12-25 | 2002-07-12 | Sharp Corp | 撮像装置 |
US6985679B2 (en) * | 2002-02-06 | 2006-01-10 | Canon Kabushiki Kaisha | Image forming apparatus with cleaning operation for special sheets |
JP4068119B2 (ja) * | 2006-07-25 | 2008-03-26 | シャープ株式会社 | 映像表示装置、映像表示方法、映像表示プログラム、および記録媒体 |
JP5178361B2 (ja) * | 2008-07-09 | 2013-04-10 | 本田技研工業株式会社 | 運転支援装置 |
JP4914458B2 (ja) * | 2009-02-12 | 2012-04-11 | 株式会社日本自動車部品総合研究所 | 車両周辺表示装置 |
JP5108840B2 (ja) * | 2009-07-29 | 2012-12-26 | クラリオン株式会社 | 車両用周辺監視装置および車両用周辺画像表示方法 |
JP5251947B2 (ja) * | 2010-09-17 | 2013-07-31 | 日産自動車株式会社 | 車両用画像表示装置 |
JP5452566B2 (ja) * | 2011-10-31 | 2014-03-26 | 本田技研工業株式会社 | 車両用入力装置 |
JP6056612B2 (ja) * | 2013-03-29 | 2017-01-11 | アイシン精機株式会社 | 画像表示制御装置および画像表示システム |
EP2866165B1 (en) * | 2013-10-28 | 2018-12-05 | LG Electronics Inc. -1- | Mobile terminal and controlling method thereof |
JP6225134B2 (ja) | 2015-03-03 | 2017-11-01 | トクラス株式会社 | 浄水カートリッジ、及び、水栓 |
DE102015002923B4 (de) * | 2015-03-06 | 2023-01-12 | Mekra Lang Gmbh & Co. Kg | Anzeigeeinrichtung für ein Fahrzeug insbesondere Nutzfahrzeug |
-
2016
- 2016-08-15 JP JP2016159255A patent/JP6597518B2/ja active Active
-
2017
- 2017-08-15 CN CN201780049878.6A patent/CN109565575A/zh not_active Withdrawn
- 2017-08-15 DE DE112017004093.0T patent/DE112017004093T5/de active Pending
- 2017-08-15 US US16/325,031 patent/US11410274B2/en active Active
- 2017-08-15 WO PCT/JP2017/029381 patent/WO2018034287A1/ja active Application Filing
Also Published As
Publication number | Publication date |
---|---|
US20210287335A1 (en) | 2021-09-16 |
US11410274B2 (en) | 2022-08-09 |
CN109565575A (zh) | 2019-04-02 |
DE112017004093T5 (de) | 2019-05-09 |
WO2018034287A1 (ja) | 2018-02-22 |
JP2018029229A (ja) | 2018-02-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101247647B1 (ko) | 화상 합성 장치, 화상 합성 방법, 및 기록 매체 | |
JP5120880B2 (ja) | 画像処理装置及び画像処理方法 | |
JP5769768B2 (ja) | 撮像装置、撮像方法およびプログラム | |
JP5888117B2 (ja) | 物体検出装置 | |
JP5968073B2 (ja) | 画像処理装置、撮像装置、画像処理方法、および画像処理プログラム | |
JP6172935B2 (ja) | 画像処理装置、画像処理方法及び画像処理プログラム | |
WO2015196896A1 (zh) | 对焦状态的提示方法和拍摄装置 | |
CN109639959B (zh) | 图像处理装置、图像处理方法以及记录介质 | |
JP4742733B2 (ja) | 画像つなぎ目処理装置および画像つなぎ目処理方法 | |
JP2011250376A (ja) | 車両周辺映像表示装置 | |
JP2010166363A (ja) | 擬似濃淡画像生成装置及びプログラム | |
JP6597518B2 (ja) | 情報処理装置及びプログラム | |
JP4633023B2 (ja) | ユーザインタフェース装置 | |
JP6740991B2 (ja) | 表示処理装置 | |
JP5218634B2 (ja) | 擬似濃淡画像生成装置及びプログラム | |
JP5103984B2 (ja) | 画像処理装置、撮像装置、および画像処理プログラム | |
JP7203205B2 (ja) | 車両周辺画像生成装置、車両周辺表示システム、及び車両周辺表示方法 | |
CN107734246B (zh) | 一种图像处理方法、装置及相关电路 | |
JP2011041094A (ja) | 画像処理装置、撮像装置および画像処理方法 | |
JP2021082069A (ja) | 画像処理装置、撮像装置、画像処理方法、及びプログラム | |
JP2016123021A (ja) | 画像処理システム及び画像処理装置 | |
WO2017216933A1 (ja) | 画像処理装置、画像処理方法及び画像処理プログラム | |
JP6025555B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP7080688B2 (ja) | 画像処理装置、撮像装置、画像処理方法、プログラム | |
JP2008219716A (ja) | 表示制御装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180928 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20181002 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190903 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190916 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6597518 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |