JP2022141664A - 調節可能な垂直視野 - Google Patents
調節可能な垂直視野 Download PDFInfo
- Publication number
- JP2022141664A JP2022141664A JP2022102505A JP2022102505A JP2022141664A JP 2022141664 A JP2022141664 A JP 2022141664A JP 2022102505 A JP2022102505 A JP 2022102505A JP 2022102505 A JP2022102505 A JP 2022102505A JP 2022141664 A JP2022141664 A JP 2022141664A
- Authority
- JP
- Japan
- Prior art keywords
- rows
- view
- vehicle
- enabled
- sensor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000003287 optical effect Effects 0.000 claims abstract description 43
- 238000005070 sampling Methods 0.000 claims abstract description 41
- 238000012545 processing Methods 0.000 claims abstract description 35
- 238000000034 method Methods 0.000 claims description 28
- 238000005096 rolling process Methods 0.000 claims description 16
- 238000005259 measurement Methods 0.000 claims description 8
- 238000003384 imaging method Methods 0.000 abstract description 6
- 238000004891 communication Methods 0.000 description 35
- 230000007613 environmental effect Effects 0.000 description 29
- 230000006870 function Effects 0.000 description 18
- 238000010586 diagram Methods 0.000 description 11
- 230000006835 compression Effects 0.000 description 10
- 238000007906 compression Methods 0.000 description 10
- 238000013500 data storage Methods 0.000 description 10
- 230000004044 response Effects 0.000 description 10
- 238000001514 detection method Methods 0.000 description 9
- 230000033001 locomotion Effects 0.000 description 9
- 230000009471 action Effects 0.000 description 8
- 230000008859 change Effects 0.000 description 7
- 238000003860 storage Methods 0.000 description 7
- 230000002093 peripheral effect Effects 0.000 description 6
- 230000002829 reductive effect Effects 0.000 description 5
- 230000006399 behavior Effects 0.000 description 4
- 238000004590 computer program Methods 0.000 description 4
- 230000004927 fusion Effects 0.000 description 4
- 230000000670 limiting effect Effects 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 3
- 238000010276 construction Methods 0.000 description 3
- 230000005670 electromagnetic radiation Effects 0.000 description 3
- 239000000446 fuel Substances 0.000 description 3
- 230000003993 interaction Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- LFQSCWFLJHTTHZ-UHFFFAOYSA-N Ethanol Chemical compound CCO LFQSCWFLJHTTHZ-UHFFFAOYSA-N 0.000 description 2
- ATUOYWHBWRKTHZ-UHFFFAOYSA-N Propane Chemical compound CCC ATUOYWHBWRKTHZ-UHFFFAOYSA-N 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 2
- 230000010267 cellular communication Effects 0.000 description 2
- 230000001427 coherent effect Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 239000003502 gasoline Substances 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 230000008092 positive effect Effects 0.000 description 2
- 230000003252 repetitive effect Effects 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- HBBGRARXTFLTSG-UHFFFAOYSA-N Lithium ion Chemical compound [Li+] HBBGRARXTFLTSG-UHFFFAOYSA-N 0.000 description 1
- 241000269400 Sirenidae Species 0.000 description 1
- 239000002253 acid Substances 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- -1 batteries Substances 0.000 description 1
- 239000003990 capacitor Substances 0.000 description 1
- 238000002485 combustion reaction Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 239000002828 fuel tank Substances 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 229910001416 lithium ion Inorganic materials 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 239000002184 metal Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 239000010705 motor oil Substances 0.000 description 1
- 239000003208 petroleum Substances 0.000 description 1
- 230000003334 potential effect Effects 0.000 description 1
- 239000001294 propane Substances 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 230000000153 supplemental effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
- H04N25/44—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
- H04N25/44—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array
- H04N25/441—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array by reading contiguous pixels from selected rows or columns of the array, e.g. interlaced scanning
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/02—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/50—Control of the SSIS exposure
- H04N25/53—Control of the integration time
- H04N25/531—Control of the integration time by controlling rolling shutters in CMOS SSIS
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/701—Line sensors
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
- B60W2420/40—Photo or light sensitive means, e.g. infrared sensors
- B60W2420/403—Image sensing, e.g. optical camera
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Mathematical Physics (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Traffic Control Systems (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
- Studio Devices (AREA)
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
Abstract
【解決手段】 記載された例は、光センサを含む、車両によって使用される画像センサに関連し得る。光センサは、複数の水平行および複数の垂直列に整列された複数のセルを含む。装置は、光センサに装置の外部環境の視野を提供するように構成された光学システムをさらに含む。加えて、システムは、光センサの複数の水平行を1つ以上の有効にされた行と1つ以上の無効にされた行とに分割し、1つ以上の有効にされた行の1つ以上のセルをサンプリングすることによって、光センサから画像データを取得し、受信した画像データをメモリに格納するように構成された、処理ユニットを含む。
【選択図】図3C
Description
本出願は、2017年12月26日に提出された米国仮特許出願第62/610,339号の優先権を主張する2018年12月10日に提出された米国特許出願第16/214,572号の優先権を主張し、その内容全体は、参照によりその全体が本明細書に組み込まれる。
Claims (20)
- 光センサであって、前記光センサが、複数の水平行および複数の垂直列に整列された複数のセルを含む、光センサと、
前記光センサに装置の外部環境の全体的な垂直視野および全体的な水平視野を提供するように構成された光学システムであって、各水平行が、前記全体的な垂直視野の対応する部分を提供し、かつ各垂直列が、前記全体的な水平視野の対応する部分を提供する、光学システムと、
処理ユニットであって、
前記光センサの前記複数の水平行を1つ以上の有効にされた行と1つ以上の無効にされた行とに分割することと、
前記1つ以上の無効にされた行の前記セルをサンプリングせずに、前記1つ以上の有効にされた行の1つ以上のセルをサンプリングすることによって、前記光センサから画像データを取得することであって、前記画像データが、前記全体的な垂直視野の一部を画像化し、かつ前記垂直視野の前記画像化された部分が、前記1つ以上の有効にされた行によって提供される前記垂直視野の前記1つ以上の部分に対応する、画像データを取得することと、を行うように構成された、処理ユニットと、を備える、装置。 - 前記サンプリングされた1つ以上のセルが、ローリングシャッターによるサンプリングに利用可能とされた1つ以上の列にある、請求項1に記載の装置。
- 前記プロセッサが、前記装置のメモリに格納された地図データに基づいて、前記1つ以上の有効にされた行および/または前記1つ以上の無効にされた行を選択するように構成されている、請求項1に記載の装置。
- 慣性測定ユニット(IMU)をさらに備え、前記プロセッサが、前記IMUからのデータに基づいて、前記1つ以上の有効にされた行および/または前記1つ以上の無効にされた行を選択するように構成されている、請求項1に記載の装置。
- 前記プロセッサが、前記外部環境において検出された物体または潜在的な物体に基づいて、前記1つ以上の有効にされた行および/または前記1つ以上の無効にされた行を選択するようにさらに構成されている、請求項1に記載の装置。
- 前記1つ以上の有効にされた行の数が、前記光センサの行の総数の半分以下である、請求項1に記載の装置。
- 光学システムを介して光センサで受光することであって、前記光センサが、複数の水平行および複数の垂直列に整列された複数のセルを含み、かつ前記光学システムが、前記光センサに前記装置の外部環境の全体的な垂直視野および全体的な水平視野を提供し、各水平行が、前記全体的な垂直視野の対応する部分を提供し、かつ各垂直列が、前記全体的な水平視野の対応する部分を提供する、受光することと、
前記1つ以上の無効にされた行の前記セルをサンプリングせずに、前記1つ以上の有効にされた行の1つ以上のセルをサンプリングすることによって、前記光センサから画像データを取得することであって、前記画像データが、前記全体的な垂直視野の一部を画像化し、かつ前記垂直視野の前記画像化された部分が、前記1つ以上の有効にされた行によって提供される前記垂直視野の1つ以上の部分に対応し、プロセッサが、1つ以上の有効にされた行および1つ以上の無効にされた行を判定する、画像データを取得することと、を含む、方法。 - 前記サンプリングされた1つ以上のセルが、ローリングシャッターによるサンプリングに利用可能とされた1つ以上の列にある、請求項7に記載の方法。
- 前記複数の水平行を分割することが、前記装置の前記メモリに格納された地図データに基づいている、請求項7に記載の方法。
- 前記複数の水平行を分割することが、慣性測定ユニットからのデータに基づいている、請求項7に記載の方法。
- 前記複数の水平行を分割することが、前記画像データにおいて検出された物体に基づいている、請求項7に記載の方法。
- 前記複数の水平行を分割することが、有効にされた行の数を増やすことを含む、請求項7に記載の方法。
- 有効にされた行の数が、前記光センサの行の総数の半分以下である、請求項7に記載の方法。
- 前記サンプリングが、前記センサの前記複数の垂直列にわたって反復的に行われる、請求項7に記載の方法。
- 光センサであって、前記光センサが、複数の行および複数の列に整列された複数のセルを含む、光センサと、
前記光センサに前記装置の外部環境の全体的な視野を提供するように構成された光学システムであって、各行が、垂直視野の対応する部分を提供し、かつ各列が、前記全体的な水平視野の対応する部分を提供する、光学システムと、
処理ユニットであって、
前記光センサの前記複数の行のサブセットを、1つ以上の有効にされた行にすることを可能にすることと、
前記1つ以上の有効にされた行の1つ以上のセルをサンプリングすることによって、前記光センサから画像データを取得することであって、前記画像データが、前記垂直視野の一部を画像化し、かつ前記垂直視野の前記画像化された部分が、前記1つ以上の有効にされた行によって提供される前記垂直視野の前記1つ以上の部分に対応する、画像データを取得することと、を行うように構成された、処理ユニットと、を備える、システム。 - 慣性測定ユニット(IMU)をさらに備え、前記プロセッサが、前記IMUからのデータに基づいて、前記1つ以上の有効にされた行および/または前記1つ以上の無効にされた行を選択するように構成されている、請求項15に記載のシステム。
- 地図データを格納するように構成されたメモリをさらに備え、前記複数の行を分割することが、前記地図データに基づいている、請求項15に記載のシステム。
- 車両をさらに備える、請求項15に記載のシステム。
- 行の数が列の数より多い、請求項15に記載のシステム。
- 前記プロセッサが、前記外部環境において検出された物体または潜在的な物体に基づいて、前記1つ以上の有効にされた行および/または前記1つ以上の無効にされた行を選択するようにさらに構成されている、請求項15に記載のシステム。
Applications Claiming Priority (6)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201762610339P | 2017-12-26 | 2017-12-26 | |
US62/610,339 | 2017-12-26 | ||
US16/214,572 | 2018-12-10 | ||
US16/214,572 US10999539B2 (en) | 2017-12-26 | 2018-12-10 | Adjustable vertical field of view |
JP2020524749A JP7097439B2 (ja) | 2017-12-26 | 2018-12-12 | 調節可能な垂直視野 |
PCT/US2018/065119 WO2019133254A1 (en) | 2017-12-26 | 2018-12-12 | Adjustable vertical field of view |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020524749A Division JP7097439B2 (ja) | 2017-12-26 | 2018-12-12 | 調節可能な垂直視野 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022141664A true JP2022141664A (ja) | 2022-09-29 |
JP7486547B2 JP7486547B2 (ja) | 2024-05-17 |
Family
ID=
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006322797A (ja) * | 2005-05-18 | 2006-11-30 | Olympus Corp | 画像処理装置、画像処理方法および画像処理プログラム |
JP2007288444A (ja) * | 2006-04-14 | 2007-11-01 | Toyota Motor Corp | 車載カメラ制御装置および車載カメラ制御方法。 |
JP2011517632A (ja) * | 2008-02-20 | 2011-06-16 | コンチネンタル・テーヴエス・アクチエンゲゼルシヤフト・ウント・コンパニー・オツフエネハンデルスゲゼルシヤフト | 車両の周辺にある物体を検出する方法及び援助システム |
JP2013026882A (ja) * | 2011-07-22 | 2013-02-04 | Nikon Corp | 画像表示装置 |
JP2013175873A (ja) * | 2012-02-24 | 2013-09-05 | Nikon Corp | 撮像装置 |
WO2015083228A1 (ja) * | 2013-12-03 | 2015-06-11 | 富士通株式会社 | 表示制御装置、表示制御方法、及びプログラム |
JP2016048885A (ja) * | 2014-08-28 | 2016-04-07 | 株式会社ニコン | 撮像装置および自動車 |
JP2021507552A (ja) * | 2017-12-26 | 2021-02-22 | ウェイモ エルエルシー | 調節可能な垂直視野 |
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006322797A (ja) * | 2005-05-18 | 2006-11-30 | Olympus Corp | 画像処理装置、画像処理方法および画像処理プログラム |
JP2007288444A (ja) * | 2006-04-14 | 2007-11-01 | Toyota Motor Corp | 車載カメラ制御装置および車載カメラ制御方法。 |
JP2011517632A (ja) * | 2008-02-20 | 2011-06-16 | コンチネンタル・テーヴエス・アクチエンゲゼルシヤフト・ウント・コンパニー・オツフエネハンデルスゲゼルシヤフト | 車両の周辺にある物体を検出する方法及び援助システム |
JP2013026882A (ja) * | 2011-07-22 | 2013-02-04 | Nikon Corp | 画像表示装置 |
JP2013175873A (ja) * | 2012-02-24 | 2013-09-05 | Nikon Corp | 撮像装置 |
WO2015083228A1 (ja) * | 2013-12-03 | 2015-06-11 | 富士通株式会社 | 表示制御装置、表示制御方法、及びプログラム |
JP2016048885A (ja) * | 2014-08-28 | 2016-04-07 | 株式会社ニコン | 撮像装置および自動車 |
JP2021507552A (ja) * | 2017-12-26 | 2021-02-22 | ウェイモ エルエルシー | 調節可能な垂直視野 |
Also Published As
Publication number | Publication date |
---|---|
JP2021507552A (ja) | 2021-02-22 |
KR102365469B1 (ko) | 2022-02-23 |
US20220150423A1 (en) | 2022-05-12 |
CA3085319A1 (en) | 2019-07-04 |
SG11202004004WA (en) | 2020-07-29 |
US11653108B2 (en) | 2023-05-16 |
AU2018393935A1 (en) | 2020-05-28 |
KR20200091947A (ko) | 2020-07-31 |
AU2018393935B2 (en) | 2021-05-27 |
US20190199946A1 (en) | 2019-06-27 |
CN111492647A (zh) | 2020-08-04 |
WO2019133254A1 (en) | 2019-07-04 |
JP7097439B2 (ja) | 2022-07-07 |
IL275541A (en) | 2020-08-31 |
CA3085319C (en) | 2023-09-26 |
US10999539B2 (en) | 2021-05-04 |
US20210250527A1 (en) | 2021-08-12 |
CA3175332A1 (en) | 2019-07-04 |
EP3692711A1 (en) | 2020-08-12 |
EP3692711A4 (en) | 2021-06-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102454748B1 (ko) | 태양-인식 차량 라우팅을 위한 방법들 및 시스템들 | |
AU2021282441B2 (en) | High-speed image readout and processing | |
JP7097439B2 (ja) | 調節可能な垂直視野 | |
JP7069318B2 (ja) | 自動運転車両の画像捕捉デバイスが遭遇する光の範囲を制御するための方法およびシステム | |
US11945467B2 (en) | Identification of proxy calibration targets for a fleet of vehicles | |
US11776163B1 (en) | Systems, methods, and apparatus for correcting desaturation of images with transformed color values by appling a matrix | |
US11875516B2 (en) | Systems, apparatus, and methods for retrieving image data of image frames | |
JP7486547B2 (ja) | 調節可能な垂直視野 | |
US20240106987A1 (en) | Multi-Sensor Assembly with Improved Backward View of a Vehicle |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220713 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220713 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230731 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230802 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231005 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231215 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240311 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240419 |