JP7350841B2 - 畳み込みニューラルネットワークを利用したコンピュータ実現方法、合成画像生成用の装置及びコンピュータプログラム - Google Patents

畳み込みニューラルネットワークを利用したコンピュータ実現方法、合成画像生成用の装置及びコンピュータプログラム Download PDF

Info

Publication number
JP7350841B2
JP7350841B2 JP2021511534A JP2021511534A JP7350841B2 JP 7350841 B2 JP7350841 B2 JP 7350841B2 JP 2021511534 A JP2021511534 A JP 2021511534A JP 2021511534 A JP2021511534 A JP 2021511534A JP 7350841 B2 JP7350841 B2 JP 7350841B2
Authority
JP
Japan
Prior art keywords
feature maps
tone
pooling
convolutional
layer
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021511534A
Other languages
English (en)
Japanese (ja)
Other versions
JP2022500734A5 (enExample
JP2022500734A (ja
Inventor
ダン ヂュー
ミケリーニ パブロ ナバレッテ
リージエ ジャン
ハンウェン リウ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BOE Technology Group Co Ltd
Original Assignee
BOE Technology Group Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BOE Technology Group Co Ltd filed Critical BOE Technology Group Co Ltd
Publication of JP2022500734A publication Critical patent/JP2022500734A/ja
Publication of JP2022500734A5 publication Critical patent/JP2022500734A5/ja
Application granted granted Critical
Publication of JP7350841B2 publication Critical patent/JP7350841B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/04—Context-preserving transformations, e.g. by using an importance map
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/08—Learning methods
    • G06N3/088—Non-supervised learning, e.g. competitive learning
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/04—Architecture, e.g. interconnection topology
    • G06N3/045—Combinations of networks
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/04—Architecture, e.g. interconnection topology
    • G06N3/0464—Convolutional networks [CNN, ConvNet]
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/08—Learning methods
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/08—Learning methods
    • G06N3/09—Supervised learning
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—Two-dimensional [2D] image generation
    • G06T11/10—Texturing; Colouring; Generation of textures or colours
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4046—Scaling of whole images or parts thereof, e.g. expanding or contracting using neural networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Computation (AREA)
  • Data Mining & Analysis (AREA)
  • Computational Linguistics (AREA)
  • Biophysics (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Molecular Biology (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Image Analysis (AREA)
JP2021511534A 2018-09-25 2019-05-17 畳み込みニューラルネットワークを利用したコンピュータ実現方法、合成画像生成用の装置及びコンピュータプログラム Active JP7350841B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201811118522.6A CN109285112A (zh) 2018-09-25 2018-09-25 基于神经网络的图像处理方法、图像处理装置
CN201811118522.6 2018-09-25
PCT/CN2019/087447 WO2020062894A1 (en) 2018-09-25 2019-05-17 Computer-implemented method using convolutional neural network, apparatus for generating composite image, and computer-program product

Publications (3)

Publication Number Publication Date
JP2022500734A JP2022500734A (ja) 2022-01-04
JP2022500734A5 JP2022500734A5 (enExample) 2022-05-18
JP7350841B2 true JP7350841B2 (ja) 2023-09-26

Family

ID=65181416

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021511534A Active JP7350841B2 (ja) 2018-09-25 2019-05-17 畳み込みニューラルネットワークを利用したコンピュータ実現方法、合成画像生成用の装置及びコンピュータプログラム

Country Status (5)

Country Link
US (1) US11227364B2 (enExample)
EP (1) EP3857501A4 (enExample)
JP (1) JP7350841B2 (enExample)
CN (1) CN109285112A (enExample)
WO (1) WO2020062894A1 (enExample)

Families Citing this family (46)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109285112A (zh) * 2018-09-25 2019-01-29 京东方科技集团股份有限公司 基于神经网络的图像处理方法、图像处理装置
CN109766895A (zh) * 2019-01-03 2019-05-17 京东方科技集团股份有限公司 用于图像风格迁移的卷积神经网络的训练方法和图像风格迁移方法
CN111583097B (zh) * 2019-02-18 2025-11-18 北京三星通信技术研究有限公司 图像处理方法、装置、电子设备及计算机可读存储介质
CN109816612A (zh) * 2019-02-18 2019-05-28 京东方科技集团股份有限公司 图像增强方法和装置、计算机可读存储介质
CN111583165B (zh) * 2019-02-19 2023-08-08 京东方科技集团股份有限公司 图像处理方法、装置、设备及存储介质
CN109948692B (zh) * 2019-03-16 2020-12-15 四川大学 基于多颜色空间卷积神经网络及随机森林的计算机生成图片检测方法
CN109920016B (zh) * 2019-03-18 2021-06-25 北京市商汤科技开发有限公司 图像生成方法及装置、电子设备和存储介质
CN109993122A (zh) * 2019-04-02 2019-07-09 中国石油大学(华东) 一种基于深度卷积神经网络的行人乘扶梯异常行为检测方法
CN111797855B (zh) * 2019-04-09 2024-08-13 腾讯科技（深圳）有限公司 图像处理、模型训练方法、装置、介质和设备
CN118781408A (zh) * 2019-07-30 2024-10-15 华为技术有限公司 图像分类方法及装置
CN110399856B (zh) * 2019-07-31 2021-09-14 上海商汤临港智能科技有限公司 特征提取网络训练方法、图像处理方法、装置及其设备
CN110473141B (zh) * 2019-08-02 2023-08-18 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质及电子设备
CN110544218B (zh) * 2019-09-03 2024-02-13 腾讯科技（深圳）有限公司 一种图像处理方法、装置及存储介质
CN110598781A (zh) * 2019-09-05 2019-12-20 Oppo广东移动通信有限公司 图像处理方法、装置、电子设备及存储介质
WO2021063119A1 (en) 2019-10-01 2021-04-08 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Method and apparatus for image processing, terminal
WO2021063118A1 (en) 2019-10-02 2021-04-08 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Method and apparatus for image processing
CN110852940B (zh) * 2019-11-01 2025-12-05 天津大学 一种图像处理方法及相关设备
EP3836090A1 (en) * 2019-12-12 2021-06-16 Koninklijke Philips N.V. A computer-implemented method of converting an input image into an output image based on a reference image
CN111127309B (zh) * 2019-12-12 2023-08-11 杭州格像科技有限公司 肖像风格迁移模型训练方法、肖像风格迁移方法以及装置
CN110929697B (zh) * 2019-12-17 2021-04-13 中国人民解放军海军航空大学 一种基于残差结构的神经网络目标识别方法及系统
CN111242949B (zh) * 2020-01-02 2021-06-18 浙江工业大学 基于全卷积神经网络多尺度特征的眼底图像血管分割方法
CN111265317B (zh) * 2020-02-10 2022-06-17 上海牙典医疗器械有限公司 一种牙齿正畸过程预测方法
CN111325252B (zh) * 2020-02-12 2022-08-26 腾讯科技（深圳）有限公司 图像处理方法、装置、设备、介质
CN115136146B (zh) * 2020-02-24 2026-04-10 华为技术有限公司 用于剪枝神经网络的方法及装置
CN111325664B (zh) * 2020-02-27 2023-08-29 Oppo广东移动通信有限公司 风格迁移方法、装置、存储介质及电子设备
CN111402181A (zh) * 2020-03-13 2020-07-10 北京奇艺世纪科技有限公司 图像融合方法、装置及计算机可读存储介质
CN111639206A (zh) * 2020-04-30 2020-09-08 南京理工大学 基于优化特征权重的有效精细图像分类方法
CN111915568B (zh) * 2020-07-08 2023-07-25 深圳大学 图像篡改定位模型的生成方法、图像篡改定位方法及设备
KR20220013231A (ko) * 2020-07-24 2022-02-04 삼성전자주식회사 영상 내에서 객체를 추론하는 전자 장치 및 추론 방법
KR102756360B1 (ko) * 2020-09-02 2025-01-17 삼성전자주식회사 영상 처리 방법 및 장치
CN112288621B (zh) * 2020-09-21 2022-09-16 山东师范大学 基于神经网络的图像风格迁移方法及系统
CN112396692B (zh) * 2020-11-25 2023-11-28 北京市商汤科技开发有限公司 一种人脸重建方法、装置、计算机设备及存储介质
JP7557874B2 (ja) * 2021-02-04 2024-09-30 国立研究開発法人産業技術総合研究所 フィードフォワードニューラルネットワークを複数段含む学習済みネットワーク、並びに当該学習済みネットワークの生成方法及び情報処理システム
CN113240599B (zh) * 2021-05-10 2024-09-24 Oppo广东移动通信有限公司 图像调色方法及装置、计算机可读存储介质、电子设备
CN115345918B (zh) * 2021-05-14 2026-03-06 北京大学 一种基于对比学习的任意风格迁移方法及系统
CN113553797A (zh) * 2021-08-04 2021-10-26 哈尔滨工业大学 一种端到端的风格一致的文字图像生成方法
CN114357168B (zh) * 2021-12-31 2022-08-02 成都信息工程大学 一种文本分类方法
US20230377324A1 (en) * 2022-05-19 2023-11-23 Nvidia Corporation Multi-domain generative adversarial networks for synthetic data generation
CN115500807B (zh) * 2022-09-20 2024-10-15 山东大学 基于小型卷积神经网络的心律失常分类检测方法及系统
CN115565079A (zh) * 2022-09-30 2023-01-03 南京理工大学 一种基于双边融合的遥感图像语义分割方法
CN115457294A (zh) * 2022-10-19 2022-12-09 电子科技大学中山学院 一种身份识别方法、装置、电子设备及存储介质
CN116050490B (zh) * 2022-11-17 2026-02-06 中国科学技术大学 一种卷积类神经网络计算结构及应用方法
JP2025542460A (ja) * 2023-01-03 2025-12-25 テレフオンアクチーボラゲット エルエム エリクソン（パブル） ビデオ符号化および復号の複雑さを低減すること
WO2025141421A1 (ja) * 2023-12-27 2025-07-03 株式会社半導体エネルギー研究所 表示装置
CN117671073B (zh) * 2024-01-31 2024-05-17 三亚学院 一种基于语言提示的影像风格成像系统
CN118468133B (zh) * 2024-05-07 2025-08-15 安徽大学 一种基于图卷积域自适应网络的齿轮箱故障诊断方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106709532A (zh) 2017-01-25 2017-05-24 京东方科技集团股份有限公司 图像处理方法和装置
CN107767328A (zh) 2017-10-13 2018-03-06 上海交通大学 基于少量样本生成的任意风格和内容的迁移方法和系统
CN108470320A (zh) 2018-02-24 2018-08-31 中山大学 一种基于cnn的图像风格化方法及系统

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8682667B2 (en) * 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US9524450B2 (en) * 2015-03-04 2016-12-20 Accenture Global Services Limited Digital image processing using convolutional neural networks
US10007863B1 (en) * 2015-06-05 2018-06-26 Gracenote, Inc. Logo recognition in images and videos
EP3335195A2 (en) * 2015-08-14 2018-06-20 Metail Limited Methods of generating personalized 3d head models or 3d body models
US9767381B2 (en) 2015-09-22 2017-09-19 Xerox Corporation Similarity-based detection of prominent objects using deep CNN pooling layers as features
US10446143B2 (en) * 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
WO2018042388A1 (en) * 2016-09-02 2018-03-08 Artomatix Ltd. Systems and methods for providing convolutional neural network based image synthesis using stable and controllable parametric models, a multiscale synthesis framework and novel network architectures
US10482639B2 (en) * 2017-02-21 2019-11-19 Adobe Inc. Deep high-resolution style synthesis
CN106960243A (zh) 2017-03-06 2017-07-18 中南大学 一种改进卷积神经网络结构的方法
US10664999B2 (en) * 2018-02-15 2020-05-26 Adobe Inc. Saliency prediction for a mobile user interface
US20190273510A1 (en) * 2018-03-01 2019-09-05 Crowdstrike, Inc. Classification of source data by neural network processing
US10706508B2 (en) * 2018-03-29 2020-07-07 Disney Enterprises, Inc. Adaptive sampling in Monte Carlo renderings using error-predicting neural networks
CN109285112A (zh) * 2018-09-25 2019-01-29 京东方科技集团股份有限公司 基于神经网络的图像处理方法、图像处理装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106709532A (zh) 2017-01-25 2017-05-24 京东方科技集团股份有限公司 图像处理方法和装置
CN107767328A (zh) 2017-10-13 2018-03-06 上海交通大学 基于少量样本生成的任意风格和内容的迁移方法和系统
CN108470320A (zh) 2018-02-24 2018-08-31 中山大学 一种基于cnn的图像风格化方法及系统

Also Published As

Publication number Publication date
CN109285112A (zh) 2019-01-29
EP3857501A4 (en) 2022-08-17
US20210358082A1 (en) 2021-11-18
JP2022500734A (ja) 2022-01-04
US11227364B2 (en) 2022-01-18
EP3857501A1 (en) 2021-08-04
WO2020062894A1 (en) 2020-04-02

Similar Documents

Publication Publication Date Title
JP2022500734A (ja) 畳み込みニューラルネットワークを利用したコンピュータ実現方法、合成画像生成用の装置及びコンピュータプログラム製品
CN110717851B (zh) 图像处理方法及装置、神经网络的训练方法、存储介质
CN111833246B (zh) 基于注意力级联网络的单帧图像超分辨方法
EP3678059B1 (en) Image processing method, image processing apparatus, and a neural network training method
CN109509152B (zh) 一种基于特征融合的生成对抗网络的图像超分辨率重建方法
CN110188776B (zh) 图像处理方法及装置、神经网络的训练方法、存储介质
JP7161320B2 (ja) ニューラルネットワークによる画風変換を用いたデータオーグメンテーション技術
CN109361934B (zh) 图像处理方法、装置、设备及存储介质
CN111767979A (zh) 神经网络的训练方法、图像处理方法、图像处理装置
JP2020533660A (ja) 画像スタイル変換方法および装置、機器、ならびに記憶媒体
CN112396645A (zh) 一种基于卷积残差学习的单目图像深度估计方法和系统
CN111294614B (zh) 用于数字图像、音频或视频数据处理的方法和设备
CN110211035A (zh) 融合互信息的深度神经网络的图像超分辨率方法
CN115018726B (zh) 一种基于U-Net的图像非均匀模糊核的估计方法
CN113205449A (zh) 表情迁移模型的训练方法及装置、表情迁移方法及装置
CN115272437B (zh) 一种基于全局与局部特征的图像深度估计方法及装置
CN114004847A (zh) 一种基于图可逆神经网络的医学图像分割方法
CN112270692A (zh) 一种基于超分辨的单目视频结构和运动预测的自监督方法
CN118505506A (zh) 一种低分辨率高光谱图像超分辨率重建方法、设备及介质
CN112950736A (zh) 一种基于无监督网络解色散模糊的高光谱成像方法
CN109447897B (zh) 一种真实场景图像合成方法及系统
CN115439512B (zh) 一种光流估计方法、装置以及存储介质
CN119228938A (zh) 一种基于感知损失的人脸素描合成方法及系统
CN113658091A (zh) 一种图像评价方法、存储介质及终端设备
CN119809930A (zh) 基于双分支动态协作网络的人脸超分辨率方法及系统

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220510

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220510

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230523

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230816

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230905

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230913

R150 Certificate of patent or registration of utility model

Ref document number: 7350841

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150