WO2018107679A1 - Procédé et dispositif d'acquisition d'image tridimensionnelle dynamique - Google Patents

Procédé et dispositif d'acquisition d'image tridimensionnelle dynamique Download PDF

Info

Publication number
WO2018107679A1
WO2018107679A1 PCT/CN2017/088162 CN2017088162W WO2018107679A1 WO 2018107679 A1 WO2018107679 A1 WO 2018107679A1 CN 2017088162 W CN2017088162 W CN 2017088162W WO 2018107679 A1 WO2018107679 A1 WO 2018107679A1
Authority
WO
WIPO (PCT)
Prior art keywords
terminal device
image
depth
matching
dynamic
Prior art date
Application number
PCT/CN2017/088162
Other languages
English (en)
Chinese (zh)
Inventor
邵明明
钟小飞
王金波
王林
Original Assignee
华为技术有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 华为技术有限公司 filed Critical 华为技术有限公司
Priority to CN201780076051.4A priority Critical patent/CN110169056B/zh
Publication of WO2018107679A1 publication Critical patent/WO2018107679A1/fr

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/207—Image signal generators using stereoscopic image cameras using a single 2D image sensor
    • H04N13/221—Image signal generators using stereoscopic image cameras using a single 2D image sensor using the relative movement between cameras and objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/50—Depth or shape recovery
    • G06T7/55—Depth or shape recovery from multiple images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/33—Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/254—Image signal generators using stereoscopic image cameras in combination with electromagnetic radiation sources for illuminating objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/271—Image signal generators wherein the generated image signals comprise depth maps or disparity maps
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/296—Synchronisation thereof; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/32—Indexing scheme for image data processing or generation, in general involving image mosaicing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10004—Still image; Photographic image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10024—Color image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10028—Range image; Depth image; 3D point clouds
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20024—Filtering details
    • G06T2207/20028—Bilateral filtering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074—Stereoscopic image analysis
    • H04N2013/0092—Image segmentation from stereoscopic image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2213/00—Details of stereoscopic systems
    • H04N2213/003—Aspects relating to the "2D+depth" image format

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Electromagnetism (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

L'invention concerne un procédé d'acquisition d'une image tridimensionnelle dynamique. Le procédé d'acquisition d'une image tridimensionnelle dynamique consiste à : acquérir une posture de mouvement d'un dispositif terminal ; collecter respectivement une image de profondeur et une image couleur au moyen d'un appareil photo de profondeur et d'un appareil photo couleur ; en fonction de la posture de mouvement du dispositif terminal et de l'image de profondeur, effectuer une segmentation et un appariement rapides ; en fonction de l'image couleur, effectuer un appariement exact sur un résultat de la segmentation et de l'appariement rapides ; et s'il existe un chevauchement entre l'image actuelle acquise et une image photographiée, réaliser une fusion sur la zone de chevauchement par l'intermédiaire d'un algorithme de fusion, de façon à générer une image tridimensionnelle dynamique. La présente invention permet de réaliser, par rapport aux défauts apparaissant actuellement dans une photographie panoramique et une photographie d'ambiance, et au moyen de l'ajout d'un appareil photo de profondeur à un dispositif et de la combinaison des données d'un capteur de posture de téléphone mobile et d'un capteur d'image couleur, un procédé capable d'enregistrer en une fois une apparence de scène à partir de diverses directions, de façon à acquérir une image tridimensionnelle dynamique et un affichage de stockage de support.
PCT/CN2017/088162 2016-12-12 2017-06-13 Procédé et dispositif d'acquisition d'image tridimensionnelle dynamique WO2018107679A1 (fr)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201780076051.4A CN110169056B (zh) 2016-12-12 2017-06-13 一种动态三维图像获取的方法和设备

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201611142062 2016-12-12
CN201611142062.1 2016-12-12

Publications (1)

Publication Number Publication Date
WO2018107679A1 true WO2018107679A1 (fr) 2018-06-21

Family

ID=62557853

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2017/088162 WO2018107679A1 (fr) 2016-12-12 2017-06-13 Procédé et dispositif d'acquisition d'image tridimensionnelle dynamique

Country Status (2)

Country Link
CN (2) CN110169056B (fr)
WO (1) WO2018107679A1 (fr)

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109118581A (zh) * 2018-08-22 2019-01-01 Oppo广东移动通信有限公司 图像处理方法和装置、电子设备、计算机可读存储介质
CN109272576A (zh) * 2018-09-30 2019-01-25 Oppo广东移动通信有限公司 一种数据处理方法、mec服务器、终端设备及装置
CN109583411A (zh) * 2018-12-09 2019-04-05 大连海事大学 基于tof摄像头的游客类别在线审核方法
CN109685042A (zh) * 2019-02-03 2019-04-26 同方威视技术股份有限公司 一种三维图像识别装置及其识别方法
CN111145100A (zh) * 2018-11-02 2020-05-12 深圳富泰宏精密工业有限公司 动态影像生成方法及系统、计算机装置、及可读存储介质
CN111695459A (zh) * 2020-05-28 2020-09-22 腾讯科技（深圳）有限公司 状态信息提示方法及相关设备
CN111739146A (zh) * 2019-03-25 2020-10-02 华为技术有限公司 物体三维模型重建方法及装置
CN112382374A (zh) * 2020-11-25 2021-02-19 华南理工大学 一种肿瘤分割装置和分割方法
CN112710250A (zh) * 2020-11-23 2021-04-27 武汉光谷卓越科技股份有限公司 基于线结构光的三维测量方法以及传感器
CN112766066A (zh) * 2020-12-31 2021-05-07 北京小白世纪网络科技有限公司 一种动态视频流和静态图像处理显示方法、系统
CN113490054A (zh) * 2021-07-01 2021-10-08 网易（杭州）网络有限公司 虚拟角色控制方法、装置、设备及存储介质
CN113743237A (zh) * 2021-08-11 2021-12-03 北京奇艺世纪科技有限公司 跟随动作的准确度判定方法、装置、电子设备及存储介质
CN114302214A (zh) * 2021-01-18 2022-04-08 海信视像科技股份有限公司 一种虚拟现实设备及防抖动录屏方法
CN114763994A (zh) * 2021-05-06 2022-07-19 苏州精源创智能科技有限公司 一种应用于扫地机器人的惯性姿态导航系统

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110169056B (zh) * 2016-12-12 2020-09-04 华为技术有限公司 一种动态三维图像获取的方法和设备
CN110933275B (zh) * 2019-12-09 2021-07-23 Oppo广东移动通信有限公司 拍照方法及相关设备
CN111045518B (zh) * 2019-12-09 2023-06-30 上海瑾盛通信科技有限公司 获取姿态数据的方法及相关装置
CN111175248B (zh) * 2020-01-22 2021-03-30 中国农业科学院农产品加工研究所 智能化肉品质在线检测方法和检测系统
CN111583317B (zh) * 2020-04-29 2024-02-09 深圳市优必选科技股份有限公司 图像对齐方法、装置及终端设备
CN112261303B (zh) * 2020-11-19 2021-08-20 贝壳技术有限公司 三维彩色全景模型生成装置、方法、存储介质和处理器
CN113658229B (zh) * 2021-08-13 2024-02-02 杭州华橙软件技术有限公司 异常对象的确定方法及装置、存储介质、电子装置
CN114283195B (zh) * 2022-03-03 2022-07-26 荣耀终端有限公司 生成动态图像的方法、电子设备及可读存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101341512A (zh) * 2005-11-22 2009-01-07 索尼爱立信移动通讯股份有限公司 用于获取增强的摄影的方法及其设备
CN101577795A (zh) * 2009-06-17 2009-11-11 深圳华为通信技术有限公司 一种实现全景图像的实时预览的方法和装置
CN104519340A (zh) * 2014-12-30 2015-04-15 余俊池 基于多深度图像变换矩阵的全景视频拼接方法
US20150281678A1 (en) * 2014-03-25 2015-10-01 Samsung Electronics Co., Ltd. Image generating device, 3d image display system having the same and control methods thereof

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102420985B (zh) * 2011-11-29 2014-01-22 宁波大学 一种多视点视频对象提取方法
CN102761765B (zh) * 2012-07-16 2014-08-20 清华大学 一种用于三维立体视频的深度快速插帧方法
US20140104394A1 (en) * 2012-10-15 2014-04-17 Intel Corporation System and method for combining data from multiple depth cameras
CN103400409B (zh) * 2013-08-27 2016-08-10 华中师范大学 一种基于摄像头姿态快速估计的覆盖范围3d可视化方法
CN103559737A (zh) * 2013-11-12 2014-02-05 中国科学院自动化研究所 一种对象全景建模方法
CN103796001B (zh) * 2014-01-10 2015-07-29 深圳奥比中光科技有限公司 一种同步获取深度及色彩信息的方法及装置
CN105282375B (zh) * 2014-07-24 2019-12-31 钰立微电子股份有限公司 附着式立体扫描模块
CN104517289B (zh) * 2014-12-12 2017-08-08 浙江大学 一种基于混合摄像机的室内场景定位方法
CN104794722A (zh) * 2015-04-30 2015-07-22 浙江大学 利用单个Kinect计算着装人体三维净体模型的方法
JP6570327B2 (ja) * 2015-06-05 2019-09-04 キヤノン株式会社 制御装置、撮像装置、制御方法、プログラム、および、記憶媒体
CN105225269B (zh) * 2015-09-22 2018-08-17 浙江大学 基于运动机构的三维物体建模系统
CN106203390B (zh) * 2016-07-22 2019-09-24 杭州视氪科技有限公司 一种智能盲人辅助系统
CN110169056B (zh) * 2016-12-12 2020-09-04 华为技术有限公司 一种动态三维图像获取的方法和设备

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101341512A (zh) * 2005-11-22 2009-01-07 索尼爱立信移动通讯股份有限公司 用于获取增强的摄影的方法及其设备
CN101577795A (zh) * 2009-06-17 2009-11-11 深圳华为通信技术有限公司 一种实现全景图像的实时预览的方法和装置
US20150281678A1 (en) * 2014-03-25 2015-10-01 Samsung Electronics Co., Ltd. Image generating device, 3d image display system having the same and control methods thereof
CN104519340A (zh) * 2014-12-30 2015-04-15 余俊池 基于多深度图像变换矩阵的全景视频拼接方法

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109118581A (zh) * 2018-08-22 2019-01-01 Oppo广东移动通信有限公司 图像处理方法和装置、电子设备、计算机可读存储介质
CN109118581B (zh) * 2018-08-22 2023-04-11 Oppo广东移动通信有限公司 图像处理方法和装置、电子设备、计算机可读存储介质
CN109272576A (zh) * 2018-09-30 2019-01-25 Oppo广东移动通信有限公司 一种数据处理方法、mec服务器、终端设备及装置
CN109272576B (zh) * 2018-09-30 2023-03-24 Oppo广东移动通信有限公司 一种数据处理方法、mec服务器、终端设备及装置
CN111145100A (zh) * 2018-11-02 2020-05-12 深圳富泰宏精密工业有限公司 动态影像生成方法及系统、计算机装置、及可读存储介质
CN111145100B (zh) * 2018-11-02 2023-01-20 深圳富泰宏精密工业有限公司 动态影像生成方法及系统、计算机装置、及可读存储介质
CN109583411B (zh) * 2018-12-09 2022-10-21 大连海事大学 基于tof摄像头的游客类别在线审核方法
CN109583411A (zh) * 2018-12-09 2019-04-05 大连海事大学 基于tof摄像头的游客类别在线审核方法
CN109685042A (zh) * 2019-02-03 2019-04-26 同方威视技术股份有限公司 一种三维图像识别装置及其识别方法
CN111739146A (zh) * 2019-03-25 2020-10-02 华为技术有限公司 物体三维模型重建方法及装置
CN111695459A (zh) * 2020-05-28 2020-09-22 腾讯科技（深圳）有限公司 状态信息提示方法及相关设备
CN111695459B (zh) * 2020-05-28 2023-04-18 腾讯科技（深圳）有限公司 状态信息提示方法及相关设备
CN112710250A (zh) * 2020-11-23 2021-04-27 武汉光谷卓越科技股份有限公司 基于线结构光的三维测量方法以及传感器
CN112382374A (zh) * 2020-11-25 2021-02-19 华南理工大学 一种肿瘤分割装置和分割方法
CN112382374B (zh) * 2020-11-25 2024-04-12 华南理工大学 一种肿瘤分割装置和分割方法
CN112766066A (zh) * 2020-12-31 2021-05-07 北京小白世纪网络科技有限公司 一种动态视频流和静态图像处理显示方法、系统
CN114302214A (zh) * 2021-01-18 2022-04-08 海信视像科技股份有限公司 一种虚拟现实设备及防抖动录屏方法
CN114763994A (zh) * 2021-05-06 2022-07-19 苏州精源创智能科技有限公司 一种应用于扫地机器人的惯性姿态导航系统
CN114763994B (zh) * 2021-05-06 2024-01-30 苏州精源创智能科技有限公司 一种应用于扫地机器人的惯性姿态导航系统
CN113490054A (zh) * 2021-07-01 2021-10-08 网易（杭州）网络有限公司 虚拟角色控制方法、装置、设备及存储介质
CN113743237A (zh) * 2021-08-11 2021-12-03 北京奇艺世纪科技有限公司 跟随动作的准确度判定方法、装置、电子设备及存储介质
CN113743237B (zh) * 2021-08-11 2023-06-02 北京奇艺世纪科技有限公司 跟随动作的准确度判定方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
CN110169056B (zh) 2020-09-04
CN110169056A (zh) 2019-08-23
CN112132881A (zh) 2020-12-25

Similar Documents

Publication Publication Date Title
WO2018107679A1 (fr) Procédé et dispositif d'acquisition d'image tridimensionnelle dynamique
US11158083B2 (en) Position and attitude determining method and apparatus, smart device, and storage medium
US11798190B2 (en) Position and pose determining method, apparatus, smart device, and storage medium
CN108682038B (zh) 位姿确定方法、装置及存储介质
CN110555883B (zh) 相机姿态追踪过程的重定位方法、装置及存储介质
WO2019223468A1 (fr) Procédé et appareil de suivi d'orientation de caméra, dispositif et système
US9417689B1 (en) Robust device motion detection
KR102114377B1 (ko) 전자 장치에 의해 촬영된 이미지들을 프리뷰하는 방법 및 이를 위한 전자 장치
CN109101120B (zh) 图像显示的方法和装置
CN110148178B (zh) 相机定位方法、装置、终端及存储介质
US20140253592A1 (en) Method for providing augmented reality, machine-readable storage medium, and portable terminal
WO2020192535A1 (fr) Procédé de mesure de distance et dispositif électronique
CN110986930B (zh) 设备定位方法、装置、电子设备及存储介质
JP2022511427A (ja) 画像特徴点の動き情報の決定方法、タスク実行方法およびデバイス
CN108776822B (zh) 目标区域检测方法、装置、终端及存储介质
CN111010512A (zh) 显示控制方法及电子设备
CN111768454A (zh) 位姿确定方法、装置、设备及存储介质
CN111724412A (zh) 确定运动轨迹的方法、装置及计算机存储介质
CN111862148B (zh) 实现视觉跟踪的方法、装置、电子设备及介质
CN113253908A (zh) 按键功能执行方法、装置、设备及存储介质
CN110633336B (zh) 激光数据搜索范围的确定方法、装置及存储介质
CN111928861B (zh) 地图构建方法及装置
CN108196701B (zh) 确定姿态的方法、装置及vr设备
WO2021218926A1 (fr) Procédé et appareil d'affichage d'image et dispositif informatique
KR102084161B1 (ko) 이미지를 보정하는 전자 장치 및 그 제어 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17881176

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 17881176

Country of ref document: EP

Kind code of ref document: A1