JP2022132278A - 映像制御装置 - Google Patents
映像制御装置 Download PDFInfo
- Publication number
- JP2022132278A JP2022132278A JP2022093618A JP2022093618A JP2022132278A JP 2022132278 A JP2022132278 A JP 2022132278A JP 2022093618 A JP2022093618 A JP 2022093618A JP 2022093618 A JP2022093618 A JP 2022093618A JP 2022132278 A JP2022132278 A JP 2022132278A
- Authority
- JP
- Japan
- Prior art keywords
- image
- video
- vehicle
- unit
- control device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000002194 synthesizing effect Effects 0.000 claims abstract description 52
- 238000000605 extraction Methods 0.000 claims abstract description 46
- 239000000284 extract Substances 0.000 claims abstract description 27
- 230000008859 change Effects 0.000 claims abstract description 5
- 230000002093 peripheral effect Effects 0.000 claims abstract description 5
- 230000001815 facial effect Effects 0.000 claims description 41
- 239000002131 composite material Substances 0.000 claims description 40
- 230000015572 biosynthetic process Effects 0.000 claims description 20
- 238000003786 synthesis reaction Methods 0.000 claims description 20
- 238000003384 imaging method Methods 0.000 description 47
- 238000012545 processing Methods 0.000 description 41
- 238000010586 diagram Methods 0.000 description 20
- 238000000034 method Methods 0.000 description 17
- 238000009795 derivation Methods 0.000 description 12
- 230000008569 process Effects 0.000 description 12
- 238000006243 chemical reaction Methods 0.000 description 8
- 230000005856 abnormality Effects 0.000 description 4
- 230000008451 emotion Effects 0.000 description 4
- 230000002265 prevention Effects 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 210000000887 face Anatomy 0.000 description 2
- 241000282472 Canis lupus familiaris Species 0.000 description 1
- 241000282326 Felis catus Species 0.000 description 1
- 241001465754 Metazoa Species 0.000 description 1
- 208000003443 Unconsciousness Diseases 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000005401 electroluminescence Methods 0.000 description 1
- 230000002996 emotional effect Effects 0.000 description 1
- 210000000744 eyelid Anatomy 0.000 description 1
- 230000008921 facial expression Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000029058 respiratory gaseous exchange Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Abstract
Description
図1は、第一実施形態に係る映像制御装置を有する車両用撮影装置の構成例を示すブロック図である。図2は、第一実施形態に係る映像制御装置で生成した合成映像の一例を説明する概略図である。車両用撮影装置1は、車内の状況に応じて、より詳しくは、乗員の状況に応じて、乗員の顔映像100を車両の外部の車両外部映像110に合成した合成映像120を生成して、出力する。
による合成映像120の出力とを制御する。より詳しくは、映像制御部57は、乗員情報取得部52が取得した乗員情報に基づいて、映像合成部55によって合成映像120を生成し、出力制御部56によって合成映像120を出力する。本実施形態では、映像制御部57は、乗員情報取得部52が映像データから乗員の音声を検出すると、映像合成部55によって合成映像120を生成させ、表示制御部561によって合成映像120を表示部30に出力させ、記憶制御部562によって合成映像120を記憶部40に記憶させる。
図4ないし図6を参照しながら、本実施形態に係る車両用撮影装置1Aについて説明する。図4は、第二実施形態に係る映像制御装置を有する車両用撮影装置の構成例を示すブロック図である。図5は、第二実施形態に係る映像制御装置で生成した合成映像の一例を説明する概略図である。図6は、第二実施形態に係る映像制御装置における処理の流れを示すフローチャートである。車両用撮影装置1Aは、基本的な構成は第一実施形態の車両用撮影装置1と同様である。以下の説明においては、車両用撮影装置1と同様の構成要素には、同一の符号または対応する符号を付し、その詳細な説明は省略する。車両用撮影装置1Aは、映像制御装置50Aが声量導出部521Aを備える点と、映像合成部55Aと映像制御部57Aとにおける処理が第一実施形態と異なる。
図7、図8を参照しながら、本実施形態に係る車両用撮影装置1Bについて説明する。図7は、第三実施形態に係る映像制御装置を有する車両用撮影装置の構成例を示すブロック図である。図8は、第三実施形態に係る映像制御装置における処理の流れを示すフローチャートである。車両用撮影装置1Bは、基本的な構成は第一実施形態の車両用撮影装置1と同様である。車両用撮影装置1Bは、映像制御装置50Bが音声判定部522Bを備える点と、映像合成部55Bと映像制御部57Bとにおける処理が第一実施形態と異なる。
とができる。
図9ないし図11を参照しながら、本実施形態に係る車両用撮影装置1Cについて説明する。図9は、第四実施形態に係る映像制御装置を有する車両用撮影装置の構成例を示すブロック図である。図10は、第四実施形態に係る映像制御装置で生成した合成映像の一例を説明する概略図である。図11は、第四実施形態に係る映像制御装置における処理の流れを示すフローチャートである。車両用撮影装置1Cは、基本的な構成は第一実施形態の車両用撮影装置1と同様である。車両用撮影装置1Cは、映像制御装置50Cが顔方向判定部531Cを備える点と、映像合成部55Cと映像制御部57Cとにおける処理が第一実施形態と異なる。
図12ない図14を参照しながら、本実施形態に係る車両用撮影装置1Dについて説明する。図12は、第五実施形態に係る映像制御装置を有する車両用撮影装置の構成例を示すブロック図である。図13は、第五実施形態に係る映像制御装置が撮影した映像データの一例を説明する概略図である。図14は、第五実施形態に係る映像制御装置における処理の流れを示すフローチャートである。車両用撮影装置1Dは、基本的な構成は第一実施形態の車両用撮影装置1と同様である。車両用撮影装置1Dは、映像制御装置50Dが映像領域抽出部541Dを備える点と、映像合成部55Dと映像制御部57Dとにおける処
理が第一実施形態と異なる。
図15を参照しながら、本実施形態に係る車両用撮影装置1Bについて説明する。図15は、第六実施形態に係る映像制御装置における処理の流れを示すフローチャートである。車両用撮影装置1Bは、基本的な構成は第三実施形態の車両用撮影装置1Bと同様である。車両用撮影装置1Bは、音声判定部522Bと映像制御部57Bとにおける処理が第三実施形態と異なる。
図16、図17を参照しながら、本実施形態に係る車両用撮影装置1Eについて説明する。図16は、第七実施形態に係る映像制御装置を有する車両用撮影装置の構成例を示すブロック図である。図17は、第七実施形態に係る映像制御装置における処理の流れを示すフローチャートである。車両用撮影装置1Eは、基本的な構成は第一実施形態と同様である。車両用撮影装置1Eは、表示部30Eの構成と、映像制御装置50Eが車両情報取得部58Eを備える点と、出力制御部56Eの表示制御部561Eの処理が第一実施形態と異なる。
20 カメラ
30 表示部
40 記憶部
50 映像制御装置
51 映像データ取得部
52 乗員情報取得部
53 顔映像抽出部
54 外部映像抽出部
55 映像合成部
56 出力制御部
561 表示制御部
562 記憶制御部
57 映像制御部
Claims (1)
- 車両の周囲と車両内とを含む車両周辺映像の映像データを取得する映像データ取得部と、
前記映像データ取得部が取得した前記映像データから、車両の乗員の顔部の顔映像を抽出する顔映像抽出部と、
前記映像データ取得部が取得した前記映像データから、前記車両の周囲の車両外部映像を抽出する外部映像抽出部と、
前記顔映像抽出部が抽出した前記顔映像を、前記外部映像抽出部が抽出した前記車両外部映像に合成して合成映像を生成する映像合成部と、
前記外部映像抽出部が抽出した前記車両外部映像に基づいて、画像中の水平方向および垂直方向において輝度の変化量が所定値以下である映像領域を抽出する映像領域抽出部と、
前記映像領域抽出部が抽出した前記映像領域に、前記顔映像を合成した前記合成映像を生成するよう、前記映像合成部を制御する映像制御部と、
前記映像合成部が合成した前記合成映像の出力を制御する出力制御部と、
を備えることを特徴とする映像制御装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022093618A JP7472936B2 (ja) | 2018-04-12 | 2022-06-09 | 映像制御装置 |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018076897A JP7091796B2 (ja) | 2018-04-12 | 2018-04-12 | 映像制御装置、車両用撮影装置、映像制御方法およびプログラム |
JP2022093618A JP7472936B2 (ja) | 2018-04-12 | 2022-06-09 | 映像制御装置 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018076897A Division JP7091796B2 (ja) | 2018-04-12 | 2018-04-12 | 映像制御装置、車両用撮影装置、映像制御方法およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022132278A true JP2022132278A (ja) | 2022-09-08 |
JP7472936B2 JP7472936B2 (ja) | 2024-04-23 |
Family
ID=68341963
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018076897A Active JP7091796B2 (ja) | 2018-04-12 | 2018-04-12 | 映像制御装置、車両用撮影装置、映像制御方法およびプログラム |
JP2022093618A Active JP7472936B2 (ja) | 2018-04-12 | 2022-06-09 | 映像制御装置 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018076897A Active JP7091796B2 (ja) | 2018-04-12 | 2018-04-12 | 映像制御装置、車両用撮影装置、映像制御方法およびプログラム |
Country Status (1)
Country | Link |
---|---|
JP (2) | JP7091796B2 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114040091A (zh) * | 2021-09-28 | 2022-02-11 | 北京瞰瞰智能科技有限公司 | 图像处理方法、摄像系统以及车辆 |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004147046A (ja) * | 2002-10-24 | 2004-05-20 | Matsushita Electric Ind Co Ltd | ディジタルカメラおよびディジタルカメラ付き携帯電話装置 |
JP2005338934A (ja) * | 2004-05-24 | 2005-12-08 | Nissan Motor Co Ltd | 車両内コミュニケーション装置 |
JP2010111367A (ja) * | 2008-11-10 | 2010-05-20 | Panasonic Electric Works Co Ltd | 乗員監視装置 |
JP2013125191A (ja) * | 2011-12-15 | 2013-06-24 | Canon Inc | 映像表示装置、映像表示方法及びプログラム |
JP2013216241A (ja) * | 2012-04-10 | 2013-10-24 | Denso Corp | 感情モニタリングシステム |
JP2014167438A (ja) * | 2013-02-28 | 2014-09-11 | Denso Corp | 情報通知装置 |
JP2015128915A (ja) * | 2014-01-06 | 2015-07-16 | 株式会社デンソーアイティーラボラトリ | 後席乗員モニタシステム及び後席乗員モニタ方法 |
US20170054949A1 (en) * | 2015-08-19 | 2017-02-23 | Faraday&Future Inc. | In-vehicle camera system |
JP2017194950A (ja) * | 2016-02-29 | 2017-10-26 | トヨタ モーター エンジニアリング アンド マニュファクチャリング ノース アメリカ,インコーポレイティド | マルチメディアキャプチャ用のシステム及び方法 |
US20170334357A1 (en) * | 2016-05-18 | 2017-11-23 | GM Global Technology Operations LLC | Vehicle occupant viewing systems and methods |
JP2018052215A (ja) * | 2016-09-27 | 2018-04-05 | 株式会社東海理化電機製作所 | 車両用視認装置及び車両用視認画像表示方法 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1441528A4 (en) * | 2001-10-10 | 2005-01-12 | Matsushita Electric Ind Co Ltd | IMAGE PROCESSOR |
-
2018
- 2018-04-12 JP JP2018076897A patent/JP7091796B2/ja active Active
-
2022
- 2022-06-09 JP JP2022093618A patent/JP7472936B2/ja active Active
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004147046A (ja) * | 2002-10-24 | 2004-05-20 | Matsushita Electric Ind Co Ltd | ディジタルカメラおよびディジタルカメラ付き携帯電話装置 |
JP2005338934A (ja) * | 2004-05-24 | 2005-12-08 | Nissan Motor Co Ltd | 車両内コミュニケーション装置 |
JP2010111367A (ja) * | 2008-11-10 | 2010-05-20 | Panasonic Electric Works Co Ltd | 乗員監視装置 |
JP2013125191A (ja) * | 2011-12-15 | 2013-06-24 | Canon Inc | 映像表示装置、映像表示方法及びプログラム |
JP2013216241A (ja) * | 2012-04-10 | 2013-10-24 | Denso Corp | 感情モニタリングシステム |
JP2014167438A (ja) * | 2013-02-28 | 2014-09-11 | Denso Corp | 情報通知装置 |
JP2015128915A (ja) * | 2014-01-06 | 2015-07-16 | 株式会社デンソーアイティーラボラトリ | 後席乗員モニタシステム及び後席乗員モニタ方法 |
US20170054949A1 (en) * | 2015-08-19 | 2017-02-23 | Faraday&Future Inc. | In-vehicle camera system |
JP2017194950A (ja) * | 2016-02-29 | 2017-10-26 | トヨタ モーター エンジニアリング アンド マニュファクチャリング ノース アメリカ,インコーポレイティド | マルチメディアキャプチャ用のシステム及び方法 |
US20170334357A1 (en) * | 2016-05-18 | 2017-11-23 | GM Global Technology Operations LLC | Vehicle occupant viewing systems and methods |
JP2018052215A (ja) * | 2016-09-27 | 2018-04-05 | 株式会社東海理化電機製作所 | 車両用視認装置及び車両用視認画像表示方法 |
Also Published As
Publication number | Publication date |
---|---|
JP7091796B2 (ja) | 2022-06-28 |
JP2019186790A (ja) | 2019-10-24 |
JP7472936B2 (ja) | 2024-04-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10906555B2 (en) | Alert control apparatus and alert control method | |
US7983475B2 (en) | Vehicular actuation system | |
US20190102634A1 (en) | Parking position display processing apparatus, parking position display method, and program | |
JP6607164B2 (ja) | 車両の安全走行システム | |
KR20160142167A (ko) | 차량용 디스플레이 장치 및 이를 구비한 차량 | |
CN111699680B (zh) | 行车记录仪、显示控制方法以及存储介质 | |
CN110633615B (zh) | 乘车人数监视系统 | |
JP2008261749A (ja) | 乗員検出装置、作動装置制御システム、シートベルトシステム、車両 | |
US20200086788A1 (en) | Method and system for alerting drivers with direction specific audio system | |
WO2021079975A1 (ja) | 表示システム、表示装置、表示方法、及び、移動装置 | |
JP2014096632A (ja) | 撮像システム | |
JP2010111275A (ja) | 車載用警告装置、警告方法および警告プログラム | |
JP7472936B2 (ja) | 映像制御装置 | |
JP2005212709A (ja) | 車両運転支援システム | |
JP6115278B2 (ja) | 車両用表示装置 | |
JP4779673B2 (ja) | 情報提供装置 | |
JP2008083184A (ja) | 運転評価システム | |
JP2012121387A (ja) | 車室内監視装置 | |
KR20180094717A (ko) | Avm을 이용한 운전 지원 장치 및 시스템 | |
JP2021060676A (ja) | システムおよびプログラム等 | |
JP7393739B2 (ja) | ドライバ状態推定装置 | |
WO2021131789A1 (ja) | 車両 | |
JP2019098780A (ja) | 運転アドバイス装置及び運転アドバイス方法 | |
JP6332072B2 (ja) | 対話装置 | |
CN110281857B (zh) | 显示控制装置以及显示控制方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220609 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230519 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230523 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230719 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20231017 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240116 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20240129 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240312 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240325 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7472936 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |