JP7250493B2 - 画像処理装置、三次元形状データの生成方法およびプログラム - Google Patents

画像処理装置、三次元形状データの生成方法およびプログラム Download PDF

Info

Publication number
JP7250493B2
JP7250493B2 JP2018226607A JP2018226607A JP7250493B2 JP 7250493 B2 JP7250493 B2 JP 7250493B2 JP 2018226607 A JP2018226607 A JP 2018226607A JP 2018226607 A JP2018226607 A JP 2018226607A JP 7250493 B2 JP7250493 B2 JP 7250493B2
Authority
JP
Japan
Prior art keywords
image
processing
foreground
generating
dimensional shape
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018226607A
Other languages
English (en)
Japanese (ja)
Other versions
JP2020091534A (ja
JP2020091534A5 (https=
Inventor
圭輔 森澤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2018226607A priority Critical patent/JP7250493B2/ja
Priority to US16/680,849 priority patent/US11200690B2/en
Publication of JP2020091534A publication Critical patent/JP2020091534A/ja
Publication of JP2020091534A5 publication Critical patent/JP2020091534A5/ja
Application granted granted Critical
Publication of JP7250493B2 publication Critical patent/JP7250493B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/243—Image signal generators using stereoscopic image cameras using three or more two-dimensional [2D] image sensors
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/50—Depth or shape recovery
    • G06T7/55—Depth or shape recovery from multiple images
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00—Three-dimensional [3D] modelling for computer graphics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
    • H04N13/117—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation the virtual viewpoint locations being selected by the viewers or determined by viewer tracking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/25—Image signal generators using stereoscopic image cameras using two or more image sensors with different characteristics other than in their location or field of view, e.g. having different resolutions or colour pickup characteristics; using image signals from one sensor to control the characteristics of another sensor
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence
    • G06T2207/10021—Stereoscopic video; Stereoscopic image sequence

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Graphics (AREA)
  • Geometry (AREA)
  • Software Systems (AREA)
  • Image Analysis (AREA)
  • Processing Or Creating Images (AREA)
JP2018226607A 2018-12-03 2018-12-03 画像処理装置、三次元形状データの生成方法およびプログラム Active JP7250493B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2018226607A JP7250493B2 (ja) 2018-12-03 2018-12-03 画像処理装置、三次元形状データの生成方法およびプログラム
US16/680,849 US11200690B2 (en) 2018-12-03 2019-11-12 Image processing apparatus, three-dimensional shape data generation method, and non-transitory computer readable storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018226607A JP7250493B2 (ja) 2018-12-03 2018-12-03 画像処理装置、三次元形状データの生成方法およびプログラム

Publications (3)

Publication Number Publication Date
JP2020091534A JP2020091534A (ja) 2020-06-11
JP2020091534A5 JP2020091534A5 (https=) 2022-01-04
JP7250493B2 true JP7250493B2 (ja) 2023-04-03

Family

ID=70849749

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018226607A Active JP7250493B2 (ja) 2018-12-03 2018-12-03 画像処理装置、三次元形状データの生成方法およびプログラム

Country Status (2)

Country Link
US (1) US11200690B2 (https=)
JP (1) JP7250493B2 (https=)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019161462A (ja) * 2018-03-13 2019-09-19 キヤノン株式会社 制御装置、画像処理システム、制御方法、及びプログラム
JP7328942B2 (ja) * 2020-08-05 2023-08-17 Kddi株式会社 ３ｄモデル生成装置ならびに仮想視点映像生成装置、方法およびプログラム
JP7393092B2 (ja) * 2020-08-26 2023-12-06 Kddi株式会社 仮想視点映像生成装置、方法およびプログラム
CN112819880B (zh) * 2021-01-07 2024-07-23 北京百度网讯科技有限公司 三维物体检测方法、装置、设备及存储介质
JP7465227B2 (ja) * 2021-02-16 2024-04-10 Kddi株式会社 ３ｄモデル生成装置、方法及びプログラム
US12020363B2 (en) * 2021-03-29 2024-06-25 Tetavi Ltd. Surface texturing from multiple cameras
JP7797160B2 (ja) * 2021-10-20 2026-01-13 キヤノン株式会社 画像処理装置、画像処理方法、及びプログラム
JP7814905B2 (ja) * 2021-12-08 2026-02-17 キヤノン株式会社 画像処理装置、画像処理方法、およびプログラム
CN114546125B (zh) * 2022-04-27 2022-08-09 北京影创信息科技有限公司 键盘跟踪方法及跟踪系统
JP2024130296A (ja) * 2023-03-14 2024-09-30 キヤノン株式会社 情報処理装置、情報処理方法、及びプログラム
JP2026066071A (ja) * 2024-10-04 2026-04-16 キヤノン株式会社 情報処理装置、制御方法、およびプログラム

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008288908A (ja) 2007-05-17 2008-11-27 Sharp Corp 画像表示装置及び画像表示方法
JP2009104366A (ja) 2007-10-23 2009-05-14 Suzuki Motor Corp ステレオ画像処理方法
JP2010114760A (ja) 2008-11-07 2010-05-20 Fujifilm Corp 撮影装置、指がかり通知方法およびプログラム
JP2016173248A (ja) 2015-03-16 2016-09-29 株式会社リコー 視差値演算装置、物体認識装置、移動体機器制御システム及び視差演算用プログラム
JP2017211827A (ja) 2016-05-25 2017-11-30 キヤノン株式会社 情報処理装置、制御方法、及び、プログラム

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6556704B1 (en) * 1999-08-25 2003-04-29 Eastman Kodak Company Method for forming a depth image from digital image data
DE602006017977D1 (de) * 2005-03-17 2010-12-16 British Telecomm Verfolgen von objekten in einer videosequenz
US7564476B1 (en) * 2005-05-13 2009-07-21 Avaya Inc. Prevent video calls based on appearance
US20080077953A1 (en) * 2006-09-22 2008-03-27 Objectvideo, Inc. Video background replacement system
TWI390465B (zh) * 2009-06-19 2013-03-21 Primax Electronics Ltd 用於背景去除之影像處理方法
US9160938B2 (en) * 2010-04-12 2015-10-13 Wsi Corporation System and method for generating three dimensional presentations
US9299000B2 (en) * 2010-06-23 2016-03-29 Nec Corporation Object region extraction system, method and program
EP2596475B1 (en) * 2010-07-19 2019-01-16 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Filling disocclusions in a virtual view
KR101798408B1 (ko) * 2011-01-03 2017-11-20 삼성전자주식회사 3ｄ 디스플레이를 위한 고품질 멀티-뷰 영상의 생성 방법 및 장치
EP2709070A4 (en) * 2011-05-12 2014-12-17 Panasonic Corp PICTURE GENERATING DEVICE AND PICTURE PRODUCTION METHOD
US9401041B2 (en) * 2011-10-26 2016-07-26 The Regents Of The University Of California Multi view synthesis method and display devices with spatial and inter-view consistency
HUP1300328A3 (en) * 2013-05-23 2017-03-28 Mta Szamitastechnika Es Automatizalasi Ki Method and system for integrated three dimensional modelling
US10275935B2 (en) * 2014-10-31 2019-04-30 Fyusion, Inc. System and method for infinite synthetic image generation from multi-directional structured image array
US10044944B2 (en) * 2015-09-28 2018-08-07 Gopro, Inc. Automatic composition of video with dynamic background and composite frames selected based on foreground object criteria
US20170372449A1 (en) * 2016-06-24 2017-12-28 Intel Corporation Smart capturing of whiteboard contents for remote conferencing
US10097793B2 (en) * 2016-07-14 2018-10-09 Intel Corporation Method and system of depth data filling of shadows for image processing
DE112017005318T5 (de) * 2016-10-19 2019-08-01 Sony Corporation Bildverarbeitungsvorrichtung und Bildverarbeitungsverfahren
JP6857032B2 (ja) * 2017-01-05 2021-04-14 キヤノン株式会社 制御装置、システム、制御装置の制御方法
JP6878014B2 (ja) * 2017-01-13 2021-05-26 キヤノン株式会社 画像処理装置及びその方法、プログラム、画像処理システム
US10237532B2 (en) * 2017-03-07 2019-03-19 Trimble Ab Scan colorization with an uncalibrated camera
US10217195B1 (en) * 2017-04-17 2019-02-26 Amazon Technologies, Inc. Generation of semantic depth of field effect
JP6871801B2 (ja) * 2017-05-11 2021-05-12 キヤノン株式会社 画像処理装置、画像処理方法、情報処理装置、撮像装置および画像処理システム
CN107274438B (zh) * 2017-06-28 2020-01-17 山东大学 支持移动虚拟现实应用的单Kinect多人跟踪系统及方法
US10474988B2 (en) * 2017-08-07 2019-11-12 Standard Cognition, Corp. Predicting inventory events using foreground/background processing
EP3675060A4 (en) * 2017-08-22 2020-08-26 Sony Corporation IMAGE PROCESSING DEVICE AND IMAGE PROCESSING METHOD
JP7387434B2 (ja) * 2017-09-11 2023-11-28 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 画像生成方法および画像生成装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008288908A (ja) 2007-05-17 2008-11-27 Sharp Corp 画像表示装置及び画像表示方法
JP2009104366A (ja) 2007-10-23 2009-05-14 Suzuki Motor Corp ステレオ画像処理方法
JP2010114760A (ja) 2008-11-07 2010-05-20 Fujifilm Corp 撮影装置、指がかり通知方法およびプログラム
JP2016173248A (ja) 2015-03-16 2016-09-29 株式会社リコー 視差値演算装置、物体認識装置、移動体機器制御システム及び視差演算用プログラム
JP2017211827A (ja) 2016-05-25 2017-11-30 キヤノン株式会社 情報処理装置、制御方法、及び、プログラム

Also Published As

Publication number Publication date
US11200690B2 (en) 2021-12-14
JP2020091534A (ja) 2020-06-11
US20200175702A1 (en) 2020-06-04

Similar Documents

Publication Publication Date Title
JP7250493B2 (ja) 画像処理装置、三次元形状データの生成方法およびプログラム
CN109561296B (zh) 图像处理装置、图像处理方法、图像处理系统和存储介质
JP7003994B2 (ja) 画像処理装置および方法
US11151787B2 (en) Generation device, generation method and storage medium for three-dimensional model from object images and structure images
KR102280587B1 (ko) 가상 시점 화상을 생성하는 시스템, 방법, 및 비일시적 컴퓨터 판독가능 기억 매체
US11798233B2 (en) Generation device, generation method and storage medium for three-dimensional model that remove a portion of the three-dimensional model
CN107798704B (zh) 一种用于增强现实的实时图像叠加方法及装置
CN107798702B (zh) 一种用于增强现实的实时图像叠加方法以及装置
CN108205797A (zh) 一种全景视频融合方法及装置
JP6403862B1 (ja) ３次元モデルの生成装置、生成方法及びプログラム
KR20120065063A (ko) 고속 스테레오 카메라를 이용한 구형 물체의 비행 정보 측정 시스템 및 방법
JP2020046960A (ja) 画像処理装置、画像処理装置の制御方法、およびプログラム
CN116342831A (zh) 三维场景重建方法、装置、计算机设备及存储介质
WO2020209108A1 (ja) 画像処理装置、３ｄモデル生成方法、およびプログラム
JP2018194985A (ja) 画像処理装置、画像処理方法及び画像処理プログラム
JP7814905B2 (ja) 画像処理装置、画像処理方法、およびプログラム
KR20190055632A (ko) 모션 정보를 이용한 객체 복원 장치 및 이를 이용한 객체 복원 방법
JP7520539B2 (ja) 画像処理装置、画像処理方法、及びプログラム
JP2024519361A (ja) マルチドローン群によって取り込まれたシーンの画像からの無関係なコンテンツの除去
JP7353527B2 (ja) 情報処理装置、情報処理装置の制御方法およびプログラム
JP2019106170A (ja) ３次元モデルの生成装置、生成方法及びプログラム
JP7500333B2 (ja) 生成装置、生成方法、およびプログラム
JP2020067815A (ja) 画像処理装置、画像処理方法およびプログラム
JP7265825B2 (ja) 生成装置、生成方法およびプログラム
JP7271115B2 (ja) 画像処理装置、背景画像の生成方法およびプログラム

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211118

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20211118

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20221111

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20221213

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230202

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230221

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230322

R151 Written notification of patent or utility model registration

Ref document number: 7250493

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151