RU2622874C1 - Способ, устройство и сервер распознавания конфиденциальной фотографии - Google Patents

Способ, устройство и сервер распознавания конфиденциальной фотографии Download PDF

Info

Publication number
RU2622874C1
RU2622874C1 RU2016108022A RU2016108022A RU2622874C1 RU 2622874 C1 RU2622874 C1 RU 2622874C1 RU 2016108022 A RU2016108022 A RU 2016108022A RU 2016108022 A RU2016108022 A RU 2016108022A RU 2622874 C1 RU2622874 C1 RU 2622874C1
Authority
RU
Russia
Prior art keywords
confidential
photograph
class
photos
photo
Prior art date
Application number
RU2016108022A
Other languages
English (en)
Inventor
Тао Чжан
Фэй Лун
Чжицзюнь ЧЭНЬ
Original Assignee
Сяоми Инк.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Сяоми Инк. filed Critical Сяоми Инк.
Application granted granted Critical
Publication of RU2622874C1 publication Critical patent/RU2622874C1/ru

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • G06F18/241Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2413Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on distances to training or reference patterns
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00Machine learning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • G06F18/241Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60Protecting data
    • G06F21/64Protecting data integrity, e.g. using checksums, certificates or signatures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/40Scaling of whole images or parts thereof, e.g. expanding or contracting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/90Determination of colour characteristics
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/35Categorising the entire scene, e.g. birthday party or wedding scene
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10024Color image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20084Artificial neural networks [ANN]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • Mathematical Physics (AREA)
  • Computing Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Medical Informatics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Evolutionary Biology (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Computer Hardware Design (AREA)
  • Bioethics (AREA)
  • Multimedia (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Computational Linguistics (AREA)
  • Molecular Biology (AREA)
  • Image Analysis (AREA)
  • Processing Or Creating Images (AREA)

Abstract

Изобретение относится к области распознавания конфиденциальной фотографии. Технический результат – расширение арсенала технических средств для распознавания конфиденциальной фотографии. Способ распознавания конфиденциальной фотографии, содержащий этапы, на которых: получают библиотеку фотографий пользовательского терминала, причем библиотека фотографий содержит по меньшей мере одну фотографию, подлежащую обработке; получают набор обучающих выборок, причем набор обучающих выборок содержит первый класс обучающих фотографий и второй класс обучающих фотографий, при этом первый класс обучающих фотографий представляет собой конфиденциальные фотографии, содержащие приватные части, второй класс обучающих фотографий представляет собой не конфиденциальные фотографии, не содержащие приватных частей; вводят первый класс обучающих фотографий и второй класс обучающих фотографий в исходную модель распознавания конфиденциальной фотографии в произвольном порядке так, чтобы коэффициенты признаков между узлами скрытых слоев в каждом скрытом слое исходной модели распознавания конфиденциальной фотографии обучались для получения модели распознавания конфиденциальной фотографии; получают набор контрольных выборок, причем набор контрольных выборок содержит первый класс контрольных фотографий и второй класс контрольных фотографий, при этом первый класс контрольных фотографий представляет собой конфиденциальные фотографии, содержащие приватные части, а второй класс контрольных фотографий представляет собой не конфиденциальные фотографии, не содержащие приватные части; выполняют распознавание первого класса контрольных фотографий и второго класса контрольных фотографий в наборе контрольных выборок соответственно, посредством применения модели распознавания конфиденциальной фотографии, для получения результатов классификации, соответствующих каждой из контрольных фотографий; и определяют степень точности классификации модели распознавания конфиденциальной фотографии на основании результатов классификации, соответствующих каждой из контрольных фотографий; выполняют распознавание фотографии, подлежащей обработке, посредством применения модели распознавания конфиденциальной фотографии для определения, является ли фотография, подлежащая обработке, конфиденциальной фотографией; и сохраняют фотографию, подлежащую обработке, в приватном фотоальбоме в случае, когда фотография, подлежащая обработке, является конфиденциальной фотографией. 3 н. и 14 з.п. ф-лы, 13 ил.

Description

Область техники, к которой относится изобретение
Настоящее раскрытие, в общем, относится к области технологии связи и, в частности, к способу, устройству и серверу распознавания конфиденциальной фотографии.
Уровень техники
В настоящее время с ростом популярности смартфонов использование телефона для съемки фотографий становится все более распространенным. Более конкретно, некоторым пользователям телефона нравится снимать автопортреты, и некоторые из этих автопортретов являются эротическими фотографиями. В результате, в библиотеке фотографий телефона может находиться много конфиденциальных фотографий.
В предшествующем уровне техники для того, чтобы обеспечить конфиденциальность и избежать нежелательного доступа к конфиденциальным фотографиям, пользователи телефонов обычно должны вручную перемещать эти конфиденциальные фотографии в приватные фотоальбомы, которые являются скрытыми и зашифрованными.
Раскрытие изобретения
В раскрытии выполнены способ, устройство и сервер распознавания конфиденциальной фотографии. Иллюстрированные варианты осуществления поясняются ниже.
Согласно первому аспекту настоящего раскрытия обеспечивается способ распознавания конфиденциальной фотографии, включающий в себя этапы, на которых: получают библиотеки фотографий пользовательского терминала, причем библиотека фотографий содержит по меньшей мере одну фотографию, подлежащую обработке; выполняют распознавания фотографии, подлежащей обработке, посредством применения модели распознавания конфиденциальной фотографии для определения, является ли фотография, подлежащая обработке, конфиденциальной фотографией; и сохраняют фотографию, подлежащую обработке, в приватном фотоальбоме в случае, когда фотография, подлежащая обработке, является конфиденциальной фотографией.
Варианты осуществления изобретения позволяют обеспечить следующие положительные эффекты. При использовании этапов применения модели распознавания конфиденциальной фотографии для выполнения распознавания фотографии, подлежащей обработке, чтобы определить, является ли фотография, подлежащая обработке, конфиденциальной фотографией, и сохранения фотографии, подлежащей обработке, в приватном фотоальбоме в случае, когда фотография, подлежащая обработке, является конфиденциальной фотографией, можно автоматически распознать и обработать фотографию, подлежащую обработке, в библиотеке фотографий. Соответственно, пользователю нет необходимости вручную выбирать конфиденциальную фотографию и перемещать конфиденциальную фотографию в приватный фотоальбом. В результате, одновременно экономится время и труд; можно повысить эффективность распознавания конфиденциальной фотографии; можно повысить защиту конфиденциальности; и можно избежать утечки конфиденциальной фотографии.
Альтернативно или дополнительно, перед распознаванием способ может дополнительно включать в себя этапы, на которых: получают набор обучающих выборок, причем набор обучающих выборок содержит первый класс обучающих фотографий и второй класс обучающих фотографий, при этом первый класс обучающих фотографий представляет собой конфиденциальные фотографии, которые включают в себя приватные части, второй класс обучающих фотографий представляет собой не конфиденциальные фотографии, которые не включают в себя приватные части; и осуществляют ввод первого класса обучающих фотографий и второго класса обучающих фотографий в исходную модель распознавания конфиденциальной фотографии в произвольном порядке так, что коэффициенты признаков между узлами скрытых слоев в каждом скрытом слое исходной модели распознавания конфиденциальной фотографии обучались для получения модели распознавания конфиденциальной фотографии.
Варианты осуществления изобретения позволяют обеспечить следующие положительные эффекты. При использовании этапов получения набора обучающих выборок, причем набор обучающих выборок содержит первый класс обучающих фотографий и второй класс обучающих фотографий, при этом первый класс обучающих фотографий представляет собой конфиденциальные фотографии, которые включают в себя приватные части, второй класс обучающих фотографий представляет собой не конфиденциальные фотографии, которые не включают в себя приватные части; и ввод первого класса обучающих фотографий и второго класса обучающих фотографий в исходную модель распознавания конфиденциальной фотографии в произвольном порядке так, что коэффициенты признаков между узлами скрытых слоев в каждом скрытом слое исходной модели распознавания конфиденциальной фотографии обучались для получения модели распознавания конфиденциальной фотографии, при этом модель распознавания конфиденциальной фотографии может иметь лучшую возможность корректной идентификации фотографии, подлежащей обработке.
Альтернативно или дополнительно, способ может дополнительно включать в себя этапы, на которых: получают набор контрольных выборок, причем набор контрольных выборок содержит первый класс контрольных фотографий и второй класс контрольных фотографий, при этом первый класс контрольных фотографий представляет собой конфиденциальные фотографии, которые включают в себя приватные части, а второй класс контрольных фотографий представляет собой не конфиденциальные фотографии, которые не включают в себя приватные части; выполняют распознавание первого класса контрольных фотографий и второго класса контрольных фотографий в наборе контрольных выборок, соответственно, путем применения модели распознавания конфиденциальной фотографии, чтобы получить результаты классификации, соответствующие каждой из контрольных фотографий; и определяют степень точности классификации модели распознавания конфиденциальной фотографии на основании результатов классификации, соответствующих каждой из контрольных фотографий.
Альтернативно или дополнительно, способ может дополнительно включать в себя этапы, на которых: после определения, периодически выполняют следующие операций, когда степень точности классификации меньше заданного порогового значения до тех пор, пока не будет достигнуто максимальное число итераций, или степень точности классификации не станет больше заданного порогового значения: обновляют набор обучающих выборок; обучают коэффициенты признаков между узлами скрытых слоев в каждом скрытом слое модели распознавания конфиденциальной фотографии, соответствующей последней итерации, в соответствии с обновленным набором обучающих выборок, для получения обновленной модели распознавания конфиденциальной фотографии, соответствующей текущей итерации; и выполняют тестирования степени точности классификации для обновленной модели распознавания конфиденциальной фотографии, соответствующей текущей итерации, на основании обновленного набора контрольных выборок для определения соответствующей степени точности классификации.
Альтернативно или дополнительно, способ может дополнительно включать в себя этапы, на которых: определяют максимальную степень точности классификации из степеней точности классификации, соответствующих каждой из итераций; и определяют обновленную модель распознавания конфиденциальной фотографии, соответствующую максимальной степени точности классификации, в качестве целевой модели распознавания конфиденциальной фотографии.
Варианты осуществления изобретения позволяют обеспечить следующие положительные эффекты. При использовании этапов получения набора контрольных выборок, причем набор контрольных выборок содержит первый класс контрольных фотографий и второй класс контрольных фотографий, при этом первый класс контрольных фотографий представляет собой конфиденциальные фотографии, которые включают в себя приватные части, а второй класс контрольных фотографий представляет собой не конфиденциальные фотографии, которые не включают в себя приватные части; выполняют распознавание первого класса контрольных фотографий и второго класса контрольных фотографий в наборе контрольных выборок, соответственно, путем применения модели распознавания конфиденциальной фотографии для получения степени точности классификации модели распознавания конфиденциальной фотографии; причем в случае, когда степень точности классификации меньше заданного порогового значения, обучают коэффициенты признаков между узлами скрытых слоев в каждом скрытом слое модели распознавания конфиденциальной фотографии, соответствующей последней итерации, в соответствии с обновленным набором обучающих выборок до тех пор, пока не будет достигнуто максимальное число итераций, или степень точности классификации не станет больше заданного порогового значения; определяют максимальную степень точности классификации из степеней точности классификации, соответствующих каждой из итераций; и определения обновленной модели распознавания конфиденциальной фотографии, соответствующей максимальной степени точности классификации, в качестве целевой модели распознавания конфиденциальной фотографии, можно повысить степень точности классификации модели распознавания конфиденциальной фотографии, и, таким образом, модель распознавания конфиденциальной фотографии может иметь лучшую возможность корректной идентификации фотографии, подлежащей обработке.
Альтернативно или дополнительно, перед распознаванием способ, может дополнительно включать в себя этапы, на которых: нормализуют фотографию, подлежащую обработке, по заданному размеру для получения фотографии заданного размера, соответствующей фотографии, подлежащей обработке. Соответственно, распознавание включает в себя этапы, на которых: выполняют распознавание фотографии заданного размера посредством применения модели распознавания конфиденциальной фотографии для определения, является ли фотография, подлежащая обработке, конфиденциальной фотографией.
Варианты осуществления изобретения позволяют обеспечить следующие положительные эффекты. При использовании этапов нормализации фотографии, подлежащей обработке, по заданному размеру для получения фотографии заданного размера, соответствующей фотографии, подлежащей обработке, применяют модель распознавания конфиденциальной фотографии для выполнения распознавания фотографии заданного размера для определения, является ли фотография, подлежащая обработке, конфиденциальной фотографией, и сохраняют фотографию, подлежащую обработке, в приватном фотоальбоме в случае, когда фотография, подлежащая обработке, является конфиденциальной фотографией, при этом можно автоматически распознать и обработать фотографию, подлежащую обработке, в библиотеке фотографий. Соответственно, пользователю нет необходимости вручную выбирать конфиденциальную фотографию и перемещать конфиденциальную фотографию в приватный фотоальбом, и, таким образом, одновременно экономится время и труд. Более того, скорость распознавания модели распознавания конфиденциальной фотографии для фотографии, подлежащей обработке, можно повысить с помощью операции нормализации для фотографии, подлежащей обработке. Следовательно, можно повысить эффективность конфиденциального распознавания фотографии; можно повысить защиту конфиденциальности; и можно избежать утечки конфиденциальной фотографии.
Альтернативно или дополнительно, перед этапом нормализации способ может дополнительно включать в себя этапы, на которых: получают область цвета кожи на фотографии, подлежащей обработке; и извлекают область цвета кожи, которая содержится на фотографии, подлежащей обработке, для получения изображения области цвета кожи, соответствующей фотографии, подлежащей обработке. Соответственно, этап нормализации может включать в себя подэтап, на котором: нормализируют изображение области цвета кожи по заданному размеру для получения фотографии заданного размера, соответствующей изображению области цвета кожи.
Варианты осуществления изобретения позволяют обеспечить следующие положительные эффекты. При использовании этапов получения области цвета кожи на фотографии, подлежащей обработке, извлечения областей цвета кожи, которые содержатся на фотографии, подлежащей обработке, для получения изображения области цвета кожи, соответствующей фотографии, подлежащей обработке, выполнения нормализации и распознавания изображения области цвета кожи, соответствующей фотографии, подлежащей обработке, для определения, является ли фотография, подлежащая обработке, конфиденциальной фотографией, и сохранения фотографии, подлежащей обработке, в приватном фотоальбоме в случае, когда фотография, подлежащая обработке, является конфиденциальной фотографией, другие области за исключением области цвета кожи оказывают меньшее влияние на распознавание фотографии, подлежащей обработке. Соответственно, можно повысить эффективность распознавания конфиденциальности фотографии; можно повысить защиту конфиденциальности; и можно избежать утечки конфиденциальной фотографии.
Альтернативно или дополнительно, в данном случае этап получения может включать в себя этапы, на которых: выполняют распознавание фотографии, подлежащей обработке, посредством применения модели цвета кожи для принятия решения относительно того, содержит ли фотография, подлежащая обработке, область цвета кожи, причем отношение канала R к каналу G для области цвета кожи больше, чем заданное отношение; определяют, в случае фотографии, подлежащей обработке и содержащей область цвета кожи, содержит ли фотография, подлежащая обработке, присоединяемые области цвета кожи, на основании положений областей цвета кожи; и выполняют обработку связности для соединяемых областей цвета кожи на фотографии, подлежащей обработке в случае, когда фотография, подлежащая обработке, содержит присоединяемые области цвета кожи, для получения области цвета кожи.
Варианты осуществления изобретения позволяют обеспечить следующие положительные эффекты. При использовании этапов применения модели цвета кожи для выполнения распознавание фотографии, подлежащей обработке, чтобы принять решение относительно того, содержит ли фотография, подлежащая обработке, область цвета кожи, причем отношение канала R к каналу G для области цвета кожи больше, чем заданное отношение; выполнения обработки связности для присоединяемых областей цвета кожи на фотографии, подлежащей обработке, и извлечения присоединенной области цвета кожи фотографии, подлежащей обработке, для получения изображения области цвета кожи, соответствующей фотографии, подлежащей обработке; выполнения нормализации и распознавания изображения области цвета кожи, соответствующей фотографии, подлежащей обработке, для определения, является ли фотография, подлежащая обработке, конфиденциальной фотографией; и сохранения фотографии, подлежащей обработке, в приватном фотоальбоме в случае, когда фотография, подлежащая обработке, является конфиденциальной фотографией, можно уменьшить количество изображений областей цвета кожи, которые необходимо идентифицировать, и, таким образом, можно повысить эффективность распознавания конфиденциальности фотографии.
Альтернативно или дополнительно, перед вводом способ может дополнительно включать в себя этапы, на которых: соответственно, нормализуют первый класс обучающих фотографий и второй класс обучающих фотографий по заданному размеру для получения фотографий заданного размера, соответствующих первому классу обучающих фотографий и второму классу обучающих фотографий. Соответственно, этап ввода может включать в себя подэтапы, на которых: вводят фотографии заданного размера, соответствующие первому классу обучающих фотографий и второму классу обучающих фотографий, в исходную модель распознавания конфиденциальной фотографии в произвольном порядке так, чтобы коэффициенты признаков между узлами скрытых слоев в каждом скрытом слое исходной модели распознавания конфиденциальной фотографии обучались для получения модели распознавания конфиденциальной фотографии.
Варианты осуществления изобретения позволяют обеспечить следующие положительные эффекты. При использовании этапов, соответственно, нормализации первого класса обучающих фотографий и второго класса обучающих фотографий по заданному размеру для получения фотографий заданного размера, соответствующих первому классу обучающих фотографий и второму классу обучающих фотографий, и ввода фотографий заданного размера, соответствующих первому классу обучающих фотографий и второму классу обучающих фотографий, в исходную модель распознавания конфиденциальной фотографии в произвольном порядке так, чтобы обучить коэффициенты признаков между узлами скрытых слоев в каждом скрытом слое исходной модели распознавания конфиденциальной фотографии, можно повысить скорость обработки исходной модели распознавания конфиденциальной фотографии для введенных обучающих фотографий, и, таким образом, можно повысить скорость обучения исходной модели распознавания конфиденциальной фотографии.
Альтернативно или дополнительно, перед этапом нормализацией способ может дополнительно включать в себя этапы, на которых: получают приватные области первого класса обучающих фотографий в наборе обучающих выборок; и обрезают первый класс обучающих фотографий в соответствии с приватными областями для получения изображения приватных областей, соответствующих первому классу обучающих фотографий. Соответственно, этап нормализации может включать в себя подэтап, на котором: нормализуют изображения приватных областей, соответствующих первому классу обучающих фотографий и второму классу обучающих фотографий, по заданному размеру для получения фотографий заданного размера, соответствующих изображениям приватных областей и второму классу обучающих фотографий, соответственно.
Варианты осуществления изобретения позволяют обеспечить следующие положительные эффекты. При использовании этапов получения приватных областей первого класса обучающих фотографий в наборе обучающих выборок, обрезки первого класса обучающих фотографий в соответствии с приватными областями для получения изображения приватных областей, соответствующих первому классу обучающих фотографий, нормализации изображений приватных областей, соответствующих первому классу обучающих фотографий, и затем ввода нормализованных изображений в исходную модель распознавания конфиденциальной фотографии и обучения коэффициентов признаков между узлами скрытых слоев в каждом скрытом слое модели распознавания конфиденциальной фотографии, соответствующей последней итерации, можно избежать помех по отношению к исходной модели распознавания конфиденциальной фотографии, которые вызваны другими областями, за исключением приватных областей в первом классе обучающих фотографий. Соответственно, можно повысить скорость обучения модели распознавания конфиденциальной фотографии, и, таким образом, можно повысить эффективность обучения модели распознавания конфиденциальной фотографии.
Согласно второму аспекту настоящего раскрытия выполнено устройство распознавания конфиденциальной фотографии, включающее в себя: первый модуль получения, выполненный с возможностью получения библиотеки фотографий пользовательского терминала, причем библиотека фотографий содержит по меньшей мере одну фотографию, подлежащую обработке; первый модуль распознавания, выполненный с возможностью распознавания фотографии, подлежащей обработке, посредством применения модели распознавания конфиденциальной фотографии определения, является ли фотография, подлежащая обработке, конфиденциальной фотографией; и модуль хранения, выполненный с возможностью хранения фотографии, подлежащей обработке, в приватном фотоальбоме в случае, когда фотография, подлежащая обработке, является конфиденциальной фотографией.
Варианты осуществления изобретения позволяют обеспечить следующие положительные эффекты. При использовании этапов применения модели распознавания конфиденциальной фотографии для выполнения распознавания фотографии, подлежащей обработке, чтобы определить, является ли фотография, подлежащая обработке, конфиденциальной фотографией, и сохранения фотографии, подлежащей обработке, в приватном фотоальбоме в случае, когда фотография, подлежащая обработке, является конфиденциальной фотографией, можно автоматически распознать и обработать фотографию, подлежащую обработке, в библиотеке фотографий. Соответственно, пользователю нет необходимости вручную выбирать конфиденциальную фотографию и перемещать конфиденциальную фотографию в приватный фотоальбом. В результате, одновременно экономится время и труд; можно повысить эффективность распознавания конфиденциальности фотографии; можно повысить защиту конфиденциальности; и можно избежать утечки конфиденциальной фотографии.
Альтернативно или дополнительно, устройство может дополнительно включать в себя: второй модуль получения, выполненный с возможностью получения набора обучающих выборок, причем набор обучающих выборок содержит первый класс обучающих фотографий и второй класс обучающих фотографий, при этом первый класс обучающих фотографий представляет собой конфиденциальные фотографии, которые включают в себя приватные части, а второй класс обучающих фотографий представляет собой не конфиденциальные фотографии, которые не включают в себя приватные части; и модуль ввода, выполненный с возможностью ввода первого класса обучающих фотографий и второго класса обучающих фотографий в исходную модель распознавания конфиденциальной фотографии в произвольном порядке так, чтобы коэффициенты признаков между узлами скрытых слоев в каждом скрытом слое исходной модели распознавания конфиденциальной фотографии обучались для получения модели распознавания конфиденциальной фотографии.
Варианты осуществления изобретения позволяют обеспечить следующие положительные эффекты. При использовании этапов получения набора обучающих выборок, причем набор обучающих выборок содержит первый класс обучающих фотографий и второй класс обучающих фотографий, при этом первый класс обучающих фотографий представляет собой конфиденциальные фотографии, которые включают в себя приватные части, второй класс обучающих фотографий представляет собой не конфиденциальные фотографии, которые не включают в себя приватные части; и ввода первого класса обучающих фотографий и второго класса обучающих фотографий в исходную модель распознавания конфиденциальной фотографии в произвольном порядке так, чтобы коэффициенты признаков между узлами скрытых слоев в каждом скрытом слое исходной модели распознавания конфиденциальной фотографии обучались для получения модели распознавания конфиденциальной фотографии, при этом модель распознавания конфиденциальной фотографии может иметь лучшую возможность корректной идентификации фотографии, подлежащей обработке.
Альтернативно или дополнительно, устройство может дополнительно включать в себя: третий модуль получения, выполненный с возможностью получения набора контрольных выборок, причем набор контрольных выборок содержит первый класс контрольных фотографий и второй класс контрольных фотографий, при этом первый класс контрольных фотографий представляет собой конфиденциальные фотографии, которые включают в себя приватные части, а второй класс контрольных фотографий представляет собой не конфиденциальные фотографии, которые не включают в себя приватные части; второй модуль распознавания, выполнен с возможностью распознавания первого класса контрольных фотографий и второго класса контрольных фотографий в наборе контрольных выборок, соответственно, путем применения модели распознавания конфиденциальной фотографии для получения результатов классификации, соответствующих каждой из контрольных фотографий; и первый модуль определения, выполненный с возможностью определения степени точности классификации модели распознавания конфиденциальной фотографии на основании результатов классификации, соответствующих каждой из контрольных фотографий.
Альтернативно или дополнительно, устройство может дополнительно включать в себя: модуль выполнения итераций, выполненный с возможностью периодического выполнения следующих операций, когда степень точности классификации меньше заданного порогового значения, до тех пор, пока не будет достигнуто максимальное число итераций, или степень точности классификации не станет больше заданного порогового значения: обновления набора обучающих выборок; обучения коэффициентов признаков между узлами скрытых слоев в каждом скрытом слое модели распознавания конфиденциальной фотографии, соответствующей последней итерации, в соответствии с обновленным набором обучающих выборок, для получения обновленной модели распознавания конфиденциальной фотографии, соответствующей текущей итерации; и выполнения тестирования степени точности классификации для обновленной модели распознавания конфиденциальной фотографии, соответствующей текущей итерации, на основании обновленного набора контрольных выборок для определения соответствующей степени точности классификации.
Альтернативно или дополнительно, устройство может дополнительно включать в себя: второй модуль определения, выполненный с возможностью определения максимальной степени точности классификации из степеней точности классификации, соответствующих каждой из итераций; и третий модуль определения, выполненный с возможностью определения обновленной модели распознавания конфиденциальной фотографии, соответствующей максимальной степени точности классификации, в качестве целевой модели распознавания конфиденциальной фотографии.
Варианты осуществления изобретения позволяют обеспечить следующие положительные эффекты. При использовании этапов получения набора контрольных выборок, причем набор контрольных выборок содержит первый класс контрольных фотографий и второй класс контрольных фотографий, при этом первый класс контрольных фотографий представляет собой конфиденциальные фотографии, которые включают в себя приватные части, а второй класс контрольных фотографий представляет собой не конфиденциальные фотографии, которые не включают в себя приватные части; выполнения распознавания первого класса контрольных фотографий и второго класса контрольных фотографий в наборе контрольных выборок, соответственно, путем применения модели распознавания конфиденциальной фотографии для получения степени точности классификации модели распознавания конфиденциальной фотографии; в случае, когда степень точности классификации меньше заданного порогового значения, обучения коэффициентов признаков между узлами скрытых слоев в каждом скрытом слое модели распознавания конфиденциальной фотографии, соответствующей последней итерации в соответствии с обновленным набором обучающих выборок до тех пор, пока не будет достигнуто максимальное число итераций, или степень точности классификации не станет больше заданного порогового значения; определения максимальной степени точности классификации среди степеней точности классификации, соответствующих каждой из итераций; и определения обновленной модели распознавания конфиденциальной фотографии, соответствующей максимальной степени точности классификации, в качестве целевой модели распознавания конфиденциальной фотографии, можно повысить степень точности классификации модели распознавания конфиденциальной фотографии, и, таким образом, модель распознавания конфиденциальной фотографии может иметь лучшую возможность корректной идентификации фотографии, подлежащей обработке.
Альтернативно или дополнительно, устройство может дополнительно включать в себя этап нормализации фотографии, подлежащей обработке, по заданному размеру для получения фотографии заданного размера, соответствующей фотографии, подлежащей обработке. Соответственно, первый модуль распознавания может включать в себя: первый блок распознавания, выполненный с возможностью распознавания фотографии заданного размера путем применения модели распознавания конфиденциальной фотографии для определения, является ли фотография, подлежащая обработке, конфиденциальной фотографией.
Варианты осуществления изобретения позволяют обеспечить следующие положительные эффекты. При использовании этапов нормализации фотографии, подлежащей обработке, по заданному размеру для получения фотографии заданного размера, соответствующей фотографии, подлежащей обработке, применения модели распознавания конфиденциальной фотографии для выполнения распознавания фотографии заданного размера для определения, является ли фотография, подлежащая обработке, конфиденциальной фотографией, и сохранения фотографии, подлежащей обработке, в приватном фотоальбоме в случае, когда фотография, подлежащая обработке, является конфиденциальной фотографией, можно автоматически распознать и обработать фотографию, подлежащую обработке, в библиотеке фотографий. Соответственно, пользователю нет необходимости вручную выбирать конфиденциальную фотографию и перемещать конфиденциальную фотографию в приватный фотоальбом, и, таким образом, одновременно экономится время и труд. Более того, скорость распознавания модели распознавания конфиденциальной фотографии для фотографии, подлежащей обработке, можно повысить с помощью операции нормализации для фотографии, подлежащей обработке. Следовательно, можно повысить эффективность конфиденциального распознавания фотографии; можно повысить защиту конфиденциальности; и можно избежать утечки конфиденциальной фотографии.
Альтернативно или дополнительно, устройство может дополнительно включать в себя: четвертый модуль получения, выполненный с возможностью получения области цвета кожи на фотографии, подлежащей обработке; и модуль извлечения, выполненный с возможностью извлечения области цвета кожи, которая содержится на фотографии, подлежащей обработке, для получения изображения области цвета кожи, соответствующей фотографии, подлежащей обработке. Соответственно, первый модуль обработки может включать в себя: первый блок обработки, выполненный с возможностью нормализации изображения области цвета кожи по заданному размеру для получения фотографии заданного размера, соответствующей изображению области цвета кожи.
Варианты осуществления изобретения позволяют обеспечить следующие положительные эффекты. При использовании этапов получения области цвета кожи на фотографии, подлежащей обработке, извлечения области цвета кожи, которая содержится на фотографии, подлежащей обработке, для получения изображения области цвета кожи, соответствующей фотографии, подлежащей обработке, выполнения нормализации и распознавания изображения области цвета кожи, соответствующей фотографии, подлежащей обработке, чтобы определить, является или нет фотография, подлежащая обработке, конфиденциальной фотографией, и сохранения фотографии, подлежащей обработке, в приватном фотоальбоме в случае, когда фотография, подлежащая обработке, является конфиденциальной фотографией, другие области за исключением области цвета кожи оказывают меньшее влияние на распознавание фотографии, подлежащей обработке. Соответственно, можно повысить эффективность конфиденциального распознавания фотографии; можно повысить защиту конфиденциальности; и можно избежать утечки конфиденциальной фотографии.
Альтернативно или дополнительно, в данном случае четвертый модуль получения может включать в себя: второй блок распознавания, выполненный с возможностью распознавания фотографии, подлежащей обработке, путем применения модели цвета кожи для принятия решения относительно того, содержит ли фотография, подлежащая обработке, область цвета кожи, причем отношение канала R к каналу G для области цвета кожи больше, чем заданное отношение; блок определения, выполненный с возможностью определения в случае, когда фотография, подлежащая обработке и содержащая область цвета кожи, относительно того, содержит ли фотография, подлежащая обработке, присоединяемые области цвета кожи, на основании положений областей цвета кожи; и блок соединения, выполненный с возможностью обработки связности для присоединяемых областей цвета кожи на фотографии, подлежащей обработке в случае, когда фотография, подлежащая обработке, содержит присоединяемые области цвета кожи, для получения области цвета кожи.
Варианты осуществления изобретения позволяют обеспечить следующие положительные эффекты. При использовании этапов применения модели цвета кожи для выполнения распознавание фотографии, подлежащей обработке, чтобы принять решение относительно того, содержит ли фотография, подлежащая обработке, область цвета кожи, причем отношение канала R к каналу G для области цвета кожи больше, чем заданное отношение; выполнения обработки связности для присоединяемых областей цвета кожи на фотографии, подлежащей обработке, и извлечение присоединенной области цвета кожи фотографии, подлежащей обработке, для получения изображения области цвета кожи, соответствующей фотографии, подлежащей обработке; выполнения нормализации и распознавания изображения области цвета кожи, соответствующей фотографии, подлежащей обработке, чтобы определить, является ли фотография, подлежащая обработке, конфиденциальной фотографией; и сохранения фотографии, подлежащей обработке, в приватном фотоальбоме в случае, когда фотография, подлежащая обработке, является конфиденциальной фотографией, можно уменьшить количество изображений областей цвета кожи, которые необходимо идентифицировать, и, таким образом, можно повысить эффективность конфиденциального распознавания фотографии.
Альтернативно или дополнительно, устройство может дополнительно включать в себя: второй модуль обработки, выполненный с возможностью, соответственно, нормализации первого класса обучающих фотографий и второго класса обучающих фотографий по заданному размеру для получения фотографии заданного размера, соответствующие первому классу обучающих фотографий и второму классу обучающих фотографий. Соответственно, модуль ввода может включать в себя: блок ввода, выполненный с возможностью ввода фотографий заданного размера, соответствующих первому классу обучающих фотографий и второму классу обучающих фотографий, в исходную модель распознавания конфиденциальной фотографии в произвольном порядке таким образом, чтобы коэффициенты признаков между узлами скрытых слоев в каждом скрытом слое исходной модели распознавания конфиденциальной фотографии обучались для получения модели распознавания конфиденциальной фотографии.
Варианты осуществления изобретения позволяют обеспечить следующие положительные эффекты. При использовании этапов, соответственно, нормализации первого класса обучающих фотографий и второго класса обучающих фотографий по заданному размеру для получения фотографий заданного размера, соответствующих первому классу обучающих фотографий и второму классу обучающих фотографий, и ввода фотографий заданного размера, соответствующих первому классу обучающих фотографий и второму классу обучающих фотографий, в исходную модель распознавания конфиденциальной фотографии в произвольном порядке таким образом, чтобы можно было обучить коэффициенты признаков между узлами скрытых слоев в каждом скрытом слое исходной модели распознавания конфиденциальной фотографии, можно повысить скорость обработки исходной модели распознавания конфиденциальной фотографии для введенных обучающих фотографий, и, таким образом, можно повысить скорость обучения исходной модели распознавания конфиденциальной фотографии.
Альтернативно или дополнительно, устройство может дополнительно включать в себя: пятый модуль получения, выполненный с возможностью получения приватных областей первого класса обучающих фотографий в наборе обучающих выборок; и модуль обрезки, выполненный с возможностью обрезки первого класса обучающих фотографий в соответствии с приватными областями для того, чтобы иметь изображения приватных областей, соответствующих первому классу обучающих фотографий. Соответственно, второй модуль обработки может включать в себя: второй блок обработки, выполненный с возможностью нормализации изображений приватных областей, соответствующих первому классу обучающих фотографий и второму классу обучающих фотографий по заданному размеру для того, чтобы иметь фотографии заданного размера, соответствующие изображениям приватных областей и второму классу обучающих фотографий, соответственно.
Варианты осуществления изобретения позволяют обеспечить следующие положительные эффекты. При использовании этапов получения приватных областей первого класса обучающих фотографий в наборе обучающих выборок, обрезания первого класса обучающих фотографий в соответствии с приватными областями для получения изображения приватных областей, соответствующих первому классу обучающих фотографий, нормализации изображений приватных областей, соответствующих первому классу обучающих фотографий, и затем ввода нормализованных изображений в исходную модель распознавания конфиденциальной фотографии и обучения коэффициентов признаков между узлами скрытых слоев в каждом скрытом слое модели распознавания конфиденциальной фотографии, соответствующей последней итерации, можно избежать помех по отношению к исходной модели распознавания конфиденциальной фотографии, которые вызваны другими областями, за исключением приватных областей в первом классе обучающих фотографий. Соответственно, можно повысить скорость обучения модели распознавания конфиденциальной фотографии, и, таким образом, можно повысить эффективность обучения модели распознавания конфиденциальной фотографии.
Согласно третьему аспекту настоящего раскрытия выполнен сервер распознавания конфиденциальной фотографии, включающий в себя компонент обработки; и память для хранения исполняемых инструкций компонента обработки, где компонент обработки выполнен с возможностью: получения библиотеки фотографий пользовательского терминала, причем библиотека фотографий содержит по меньшей мере одну фотографию, подлежащую обработке; выполнения распознавания фотографии, подлежащей обработке, посредством применения модели распознавания конфиденциальной фотографии для определения, является ли фотография, подлежащая обработке, конфиденциальной фотографией; и сохранения фотографии, подлежащей обработке, в приватном фотоальбоме в случае, когда фотография, подлежащая обработке, является конфиденциальной фотографией.
Варианты осуществления изобретения позволяют обеспечить следующие положительные эффекты. При использовании этапов применения модели распознавания конфиденциальной фотографии для выполнения распознавания фотографии, подлежащей обработке, чтобы определить, является ли фотография, подлежащая обработке, конфиденциальной фотографией, и сохранения фотографии, подлежащей обработке, в приватном фотоальбоме в случае, когда фотография, подлежащая обработке, является конфиденциальной фотографией, можно автоматически распознать и обработать фотографию, подлежащую обработке, в библиотеке фотографий. Соответственно, пользователю нет необходимости вручную выбирать конфиденциальную фотографию и перемещать конфиденциальную фотографию в приватный фотоальбом. В результате, одновременно экономится время и труд; можно повысить эффективность распознавания конфиденциальности фотографии; можно повысить защиту конфиденциальности; и можно избежать утечки конфиденциальной фотографии.
Следует понимать, что как предшествующее общее описание, так и последующее подробное описание являются только примерными и не ограничивают настоящее раскрытие.
Краткое описание чертежей
Сопроводительные чертежи, которые включены в описание и образуют части описания, иллюстрируют варианты осуществления в соответствии с раскрытием и совместно с описанием служат для объяснения принципов раскрытия.
На фиг. 1 показана блок-схема последовательности операций, иллюстрирующая способ распознавания конфиденциальной фотографии согласно примерному варианту осуществления;
на фиг. 2 показана структура сети примерной сверточной нейронной сети;
на фиг. 3 показана блок-схема последовательности операций, иллюстрирующая способ распознавания конфиденциальной фотографии согласно другому примерному варианту осуществления;
на фиг. 4 показана блок-схема последовательности операций, иллюстрирующая способ распознавания конфиденциальной фотографии согласно другому примерному варианту осуществления;
на фиг. 5 показана блок-схема последовательности операций, иллюстрирующая способ распознавания конфиденциальной фотографии согласно другому примерному варианту осуществления;
на фиг. 6 показана блок-схема последовательности операций, иллюстрирующая способ распознавания конфиденциальной фотографии согласно другому примерному варианту осуществления;
на фиг. 7 показана блок-схема, иллюстрирующая устройство распознавания конфиденциальной фотографии согласно примерному варианту осуществления;
на фиг. 8 показана блок-схема, иллюстрирующая устройство распознавания конфиденциальной фотографии согласно другому примерному варианту осуществления;
на фиг. 9 показана блок-схема, иллюстрирующая устройство распознавания конфиденциальной фотографии согласно другому примерному варианту осуществления;
на фиг. 10 показана блок-схема, иллюстрирующая устройство распознавания конфиденциальной фотографии согласно другому примерному варианту осуществления;
на фиг. 11 показана блок-схема, иллюстрирующая устройство распознавания конфиденциальной фотографии согласно другому примерному варианту осуществления;
на фиг. 12 показана блок-схема, иллюстрирующая устройство распознавания конфиденциальной фотографии согласно другому примерному варианту осуществления; и
на фиг. 13 показана блок-схема, иллюстрирующая сервер согласно примерному варианту осуществления.
На вышеупомянутых фигурах проиллюстрированы конкретные варианты осуществления изобретения, которые более подробно будут рассмотрены ниже. Эти фигуры и литературное описание не предназначены для ограничения каким-либо образом объема раскрытия, а вместо этого просто описывают концепцию раскрытия для специалистов в данной области техники со ссылками на конкретные варианты осуществления.
Осуществление изобретения
Теперь будет сделана ссылка на подробное описание примерных вариантов осуществления, примеры которых иллюстрированы на сопроводительных чертежах. Последующее описание относится к сопроводительным чертежам, на которых одинаковые ссылочные позиции на различных чертежах представляют собой одинаковые или аналогичные элементы, если не указано иное. Реализации, изложенные в последующем описании примерных вариантов осуществления, не представляют собой все реализации, предусмотренные раскрытием. Напротив, реализации являются только примерами устройств и способов, согласно аспектам, которые относятся к раскрытию, как изложено в прилагаемой формуле изобретения.
На фиг. 1 показана блок-схема последовательности операций, иллюстрирующая способ распознавания конфиденциальной фотографии согласно примерному варианту осуществления, который можно выполнить с помощью устройства распознавания конфиденциальной фотографии. Устройство распознавания конфиденциальной фотографии может быть, например, сервером, соответствующим интеллектуальным терминалам, таким как телефонный терминал, PAD и т.д., или программным обеспечением, установленным на сервере. Устройство распознавания конфиденциальной фотографии может быть также интеллектуальным терминалом, таким как телефонный терминал, PAD и т.д. или прикладной программой (арр), установленной на интеллектуальном терминале. Способ распознавания конфиденциальной фотографии, иллюстрированный в виде примерного варианта осуществления, может включать в себя несколько следующих этапов.
На этапе 101 получают библиотеку фотографий пользовательского терминала, причем библиотека фотографий содержит по меньшей мере одну фотографию, подлежащую обработке.
В данном варианте осуществления прежде, чем сервер получит библиотеку фотографий пользовательского терминала, пользовательский терминал позволяет вручную или автоматически обновить или загрузить фотографии в библиотеку фотографий на облачном сервере.
На этапе 102 применяют модель распознавания конфиденциальной фотографии для выполнения распознавания фотографии, подлежащей обработке, чтобы определить, является ли фотография, подлежащая обработке, конфиденциальной фотографией.
В этом примерном варианте осуществления сверточная нейронная сеть используется для создания модели распознавания конфиденциальной фотографии. Сверточная нейронная сеть, в качестве одной разновидности из многочисленных искусственных нейронных сетей, стала особенно актуальной в области анализа голоса и распознавания изображения. Совместно используемые весовые коэффициенты в структуре сверточной нейронной сети повышают вероятность ее использования в качестве биологической нейронной сети, уменьшают сложность модели сети и уменьшают количество весовых коэффициентов. Данное преимущество будет наиболее заметным в случае, когда входным сигналом сети является многомерное изображение. Выбирая изображение в качестве прямого ввода сети, можно избежать сложных процессов извлечения признаков и восстановления данных, как это имеет место в традиционных алгоритмах распознавания.
Структура сети сверточной нейронной сети показана на фиг. 2. Сверточная нейронная сеть является многослойной нейронной сетью, в которой каждый слой состоит из многочисленных двухмерных плоскостей, и каждая плоскость состоит из многочисленных независимых нейронов. В примерной реализации предполагается, что сверточная нейронная сеть, основанная на модели распознавания конфиденциальной фотографии, может иметь N-слойную структуру, в которой весовые коэффициенты соединений между узлами скрытых слоев в каждых двух соседних слоях определяются с помощью набора обучающих выборок. В настоящем раскрытии весовые коэффициенты соединений между узлами скрытых слоев для простоты иллюстрации называются "коэффициентами признаков". То есть модель распознавания конфиденциальной фотографии имеет коэффициенты признаков N слоев.
В данном варианте осуществления входные данные модели распознавания конфиденциальной фотографии представляют собой фотографию, подлежащую обработке, а ее выходные данные могут представлять собой результат классификации атрибутов фотографии, подлежащей обработке. Атрибут фотографии, подлежащей обработке, может включать в себя: конфиденциальный и не конфиденциальный. Путем ввода фотографии, подлежащей обработке, в модель распознавания конфиденциальной фотографии на основании результата классификации атрибутов, выведенного для фотографии, подлежащей обработке, можно определить то, является ли фотография, подлежащая обработке, конфиденциальной фотографией.
На этапе 103 в случае, когда фотография, подлежащая обработке, является конфиденциальной фотографией, фотография, подлежащая обработке, сохраняется в приватном фотоальбоме.
Более конкретно, приватный фотоальбом представляет собой фотоальбом, используемый, в частности, для хранения конфиденциальных фотографий. Этот фотоальбом может быть зашифрован или иметь конфигурацию скрытого статуса для предотвращения доступа со стороны других пользователей и во избежание любой утечки конфиденциальности пользователя.
В данном варианте осуществления фотография, подлежащая обработке, не ограничена фотографией, которая содержится в библиотеке фотографий пользовательского терминала, и фотографии можно также получить с помощью других методов или из других источников. Методы, с помощью которых можно получать фотографии, не ограничиваются в данном документе, и методы можно сконфигурировать так, как это требуется.
В данном варианте осуществления путем применения модели распознавания конфиденциальной фотографии для выполнения распознавания фотографии, подлежащей обработке, чтобы определить, является или нет фотография, подлежащая обработке, конфиденциальной фотографией, и сохранения фотографии, подлежащей обработке, в приватном фотоальбоме в случае, когда фотография, подлежащая обработке, является конфиденциальной фотографией, можно автоматически распознать и обработать фотографию, подлежащую обработке, в библиотеке фотографий. Соответственно, пользователю нет необходимости вручную выбирать конфиденциальную фотографию и перемещать конфиденциальную фотографию в приватный фотоальбом. В результате, одновременно экономится время и труд; можно повысить эффективность распознавания конфиденциальности фотографии; можно повысить защиту конфиденциальности; и можно избежать утечки конфиденциальной фотографии.
На фиг. 3 показана блок-схема последовательности операций, иллюстрирующая способ распознавания конфиденциальной фотографии согласно другому примерному варианту осуществления. Как показано на фиг. 3, за исключением этапов, описанных на фиг. 1, перед этапом 102, способ может дополнительно включать в себя следующие этапы.
На этапе 104 получается набор обучающих выборок, причем набор обучающих выборок содержит первый класс обучающих фотографий и второй класс обучающих фотографий, при этом первый класс обучающих фотографий представляет собой конфиденциальные фотографии, которые включают в себя приватные части, и второй класс обучающих фотографий представляет собой не конфиденциальные фотографии, которые не включают в себя приватные части.
В примерной реализации сбор первого класса обучающих фотографий и второго класса обучающих фотографий может осуществляться сервером. С целью обеспечения определенных эффектов обучения, одновременно число первого класса обучающих фотографий и число второго класса обучающих фотографий в наборе обучающих выборок могут быть больше первого заданного числа. Например, число первого класса обучающих фотографий может быть больше или равно 200000, и число второго класса обучающих фотографий может быть больше или равно 300000.
На этапе 105 первый класс обучающих фотографий и второй класс обучающих фотографий в произвольном порядке вводятся в исходную модель распознавания конфиденциальной фотографии так, чтобы коэффициенты признаков между узлами скрытых слоев в каждом скрытом слое исходной модели распознавания конфиденциальной фотографии обучались для получения модели распознавания конфиденциальной фотографии.
В возможной реализации сервер может в произвольном порядке вводить каждую обучающую фотографию в исходную модель распознавания конфиденциальной фотографии и сравнивать результат классификации атрибутов, выведенный с помощью исходной модели распознавания конфиденциальной фотографии, с атрибутом введенной обучающей фотографии для того, чтобы определить, требуется ли регулировать какой-либо коэффициент признака между узлами скрытых слоев в каждом скрытом слое текущей исходной модели распознавания конфиденциальной фотографии. Однако этот вид способа обучения может иметь такую проблему: сразу после прямой регулировки коэффициентов признаков между узлами скрытых слоев в каждом скрытом слое исходной модели распознавания конфиденциальной фотографии согласно предыдущей обучающей фотографии, можно отрегулировать в обратном порядке коэффициенты признаков между узлами скрытых слоев в каждом скрытом слое исходной модели распознавания конфиденциальной фотографии согласно последующей обучающей фотографии. Следовательно, коэффициенты признаков между узлами скрытых слоев в каждом скрытом слое исходной модели распознавания конфиденциальной фотографии можно часто и периодически регулировать.
С учетом этого в альтернативном варианте осуществления, сервер может вводить пакет обучающих фотографий в исходную модель распознавания конфиденциальной фотографии в правильной последовательности и затем определить, требуется ли для дальнейшей настройки какой-либо коэффициент признака между узлами скрытых слоев в каждом скрытом слое текущей исходной модели распознавания конфиденциальной фотографии на основании результатов классификации атрибутов этого пакета обучающих фотографий, выведенных с помощью исходной модели распознавания конфиденциальной фотографии. После этого следующий пакет обучающих фотографий будет вводиться в правильной последовательности в исходную модель распознавания конфиденциальной фотографии.
В данном примерном варианте осуществления при использовании этапов получения набора обучающих выборок, причем набор обучающих выборок содержит первый класс обучающих фотографий и второй класс обучающих фотографий, при этом первый класс обучающих фотографий представляет собой конфиденциальные фотографии, которые включают в себя приватные части, второй класс обучающих фотографий представляет собой не конфиденциальные фотографии, которые не включают в себя приватные части; и ввод первого класса обучающих фотографий и второго класса обучающих фотографий в исходную модель распознавания конфиденциальной фотографии в произвольном порядке таким образом, чтобы коэффициенты признаков между узлами скрытых слоев в каждом скрытом слое исходной модели распознавания конфиденциальной фотографии обучались для получения модели распознавания конфиденциальной фотографии, при этом модель распознавания конфиденциальной фотографии может иметь лучшую возможность корректной идентификации фотографии, подлежащей обработке.
После обучения, описанного в приведенных выше вариантах осуществления, полученная модель распознавания конфиденциальной фотографии может не иметь степени точности классификации, которая удовлетворяет заданному пороговому значению. Таким образом, для того чтобы степень точности классификации модели распознавания конфиденциальной фотографии удовлетворяла заданному пороговому значению, после этапа 105 сервер может также выполнить следующие этапы (как показано на фиг. 4):
На этапе 106 требуется набор контрольных выборок, причем набор контрольных выборок содержит первый класс контрольных фотографий и второй класс контрольных фотографий, при этом первый класс контрольных фотографий представляет собой конфиденциальные фотографии, которые включают в себя приватные части, а второй класс контрольных фотографий представляет собой не конфиденциальные фотографии, которые не включают в себя приватные части.
В примерной реализации для того, чтобы улучшить эффекты тестирования, число первых классов контрольных фотографий и число вторых классов контрольных фотографий, которые содержатся в наборе контрольных выборок, могут быть больше второго заданного числа. Например, число первого класса контрольных фотографий может быть больше или равно 20000, и число второго класса контрольных фотографий может быть больше или равно 30000.
На этапе 107 модель распознавания конфиденциальной фотографии применяется для выполнения распознавания первого класса контрольных фотографий и второго класса контрольных фотографий в наборе контрольных выборок, соответственно, для получения результатов классификаций, соответствующих каждой из контрольных фотографий.
На этапе 108 определяется степень точности классификации модели распознавания конфиденциальной фотографии на основании результатов классификации, соответствующих каждой из контрольных фотографий.
В другой примерной реализации, если результат классификации контрольной фотографии соответствует атрибуту контрольной фотографии, классификация является правильной; в противном случае классификация является неправильной. Степень точности классификации модели распознавания конфиденциальной фотографии определяется как отношение числа контрольных фотографий, имеющих правильный результат классификации, к общему числу контрольных фотографий.
На этапе 109 в случае, когда степень точности классификации меньше заданного порогового значения, периодически будут выполняться следующие операции до тех пор, пока не будет достигнуто максимальное число итераций, или степень точности классификации не станет больше заданного порогового значения. Периодически выполняемые операции включают в себя: обновление набора обучающих выборок; обучение коэффициентов признаков между узлами скрытых слоев в каждом скрытом слое модели распознавания конфиденциальной фотографии, соответствующей последней итерации, в соответствии с обновленным набором обучающих выборок, для получения обновленной модели распознавания конфиденциальной фотографии, соответствующей текущей итерации; и выполнение тестирования степени точности классификации для обновленной модели распознавания конфиденциальной фотографии, соответствующей текущей итерации, на основании обновленного набора контрольных выборок для того, чтобы определить соответствующую степень точности классификации.
На этапе 110 максимальная степень точности классификации определяется среди степеней точности классификации, соответствующих каждой из итераций.
На этапе 111 обновленная модель распознавания конфиденциальной фотографии, соответствующая максимальной степени точности классификации, определяется в качестве целевой модели распознавания конфиденциальной фотографии.
Следует отметить, что, первое заданное число и второе заданное число, как описано здесь, можно получить в ходе большого экспериментального анализа, который не будет описываться в данном документе.
В настоящем примерном варианте осуществления при использовании этапов получения набора контрольных выборок, причем набор контрольных выборок содержит первый класс контрольных фотографий и второй класс контрольных фотографий, при этом первый класс контрольных фотографий представляет собой конфиденциальные фотографии, которые включают в себя приватные части, а второй класс контрольных фотографий представляет собой не конфиденциальные фотографии, которые не включают в себя приватные части; выполнения распознавания первого класса контрольных фотографий и второго класса контрольных фотографий в наборе контрольных выборок, соответственно, путем применения модели распознавания конфиденциальной фотографии для получения степени точности классификации модели распознавания конфиденциальной фотографии; в случае, когда степень точности классификации меньше заданного порогового значения, обучения коэффициенты признаков между узлами скрытых слоев в каждом скрытом слое модели распознавания конфиденциальной фотографии, соответствующей последней итерации, в соответствии с обновленным набором обучающих выборок до тех пор, пока не будет достигнуто максимальное число итераций, или степень точности классификации не станет больше заданного порогового значения; определения максимальной степени точности классификации среди степеней точности классификации, соответствующих каждой из итераций; и определения обновленной модели распознавания конфиденциальной фотографии, соответствующей максимальной степени точности классификации, в качестве целевой модели распознавания конфиденциальной фотографии, можно повысить степень точности классификации модели распознавания конфиденциальной фотографии, и, таким образом, модель распознавания конфиденциальной фотографии может иметь лучшую возможность корректной идентификации фотографии, подлежащей обработке.
На фиг. 5 показана блок-схема последовательности операций, иллюстрирующая способ распознавания конфиденциальной фотографии согласно другому примерному варианту осуществления. Как показано на фиг. 5, кроме этапов, описанных на фиг. 3, размер фотографий, введенный в модель распознавания конфиденциальной фотографии, можно определить в качестве заданного размера для того, чтобы ускорить скорость обработки модели распознавания конфиденциальной фотографии для введенных фотографий. Соответственно, перед этапом 105, способ может дополнительно включать в себя следующие этапы.
На этапе 112 первый класс обучающих фотографий и второй класс обучающих фотографий нормализуются по заданному размеру для получения фотографий заданного размера, соответствующие первому классу обучающих фотографий и второму классу обучающих фотографий, соответственно
В примерной реализации сервер при необходимости может определить, например, заданный размер. Например, заданный размер может представлять собой 224 пикселя на 224 пикселя.
Следует отметить, что перед этапом 107, соответственно, размеры первого класса контрольных фотографий и второго класса контрольных фотографий можно аналогичным образом обработать согласно вышеописанному способу.
Далее этап 105 может включать в себя этап 1051: ввод фотографий заданного размера, соответствующих первому классу обучающих фотографий и второму классу обучающих фотографий, в исходную модель распознавания конфиденциальной фотографии в произвольном порядке таким образом, чтобы коэффициенты признаков между узлами скрытых слоев в каждом скрытом слое исходной модели распознавания конфиденциальной фотографии обучались для получения модели распознавания конфиденциальной фотографии.
Соответственно, перед этапом 102 способ может дополнительно включать в себя: на этапе 113 фотография, подлежащая обработке, нормализуется по заданному размеру для того, чтобы иметь фотографию заданного размера, соответствующую фотографии, подлежащей обработке.
Соответственно, этап 102 может включать в себя этап 1021: выполнения распознавания фотографии заданного размера путем применения модели распознавания конфиденциальной фотографии для того, чтобы определить, является или нет фотография, подлежащая обработке, конфиденциальной фотографией.
Варианты осуществления изобретения позволяют обеспечить следующие положительные эффекты. При использовании этапов нормализации фотографии, подлежащей обработке, по заданному размеру для получения фотографии заданного размера, соответствующей фотографии, подлежащей обработке, применения модели распознавания конфиденциальной фотографии для выполнения распознавания фотографии заданного размера для определения, является ли фотография, подлежащая обработке, конфиденциальной фотографией, и сохранения фотографии, подлежащей обработке, в приватном фотоальбоме в случае, когда фотография, подлежащая обработке, является конфиденциальной фотографией, можно автоматически распознать и обработать фотографию, подлежащую обработке, в библиотеке фотографий. Соответственно, пользователю нет необходимости вручную выбирать конфиденциальную фотографию и перемещать конфиденциальную фотографию в приватный фотоальбом, и, таким образом, одновременно экономится время и труд. Более того, скорость распознавания модели распознавания конфиденциальной фотографии для фотографии, подлежащей обработке, можно повысить с помощью операции нормализации для фотографии, подлежащей обработке. Кроме того, при использовании этапов соответствующей нормализации первого класса обучающих фотографий и второго класса обучающих фотографий по заданному размеру для получения фотографий заданного размера, соответствующих первому классу обучающих фотографий и второму классу обучающих фотографий, и ввода фотографий заданного размера, соответствующих первому классу обучающих фотографий и второму классу обучающих фотографий, в исходную модель распознавания конфиденциальной фотографии в произвольном порядке таким образом, чтобы можно было обучить коэффициенты признаков между узлами скрытых слоев в каждом скрытом слое исходной модели распознавания конфиденциальной фотографии, можно повысить скорость обработки исходной модели распознавания конфиденциальной фотографии для введенных обучающих фотографий, и, таким образом, можно повысить скорость обучения исходной модели распознавания конфиденциальной фотографии.
На фиг. 6 показана блок-схема последовательности операций, иллюстрирующая способ распознавания конфиденциальной фотографии согласно другому примерному варианту осуществления. Как показано на фиг. 6, кроме этапов, описанных в примерном варианте осуществления, показанном на фиг. 5, перед этапом 112 способ может дополнительно включать в себя следующие этапы.
На этапе 114 запрашиваются приватные области первого класса обучающих фотографий в наборе обучающих выборок.
На этапе 115, в соответствии с приватными областями, обрезается первый класс обучающих фотографий для получения изображения приватных областей, соответствующих первому классу обучающих фотографий.
Соответственно, этап 112 может включать в себя этап 1121: нормализации изображений приватных областей, соответствующих первому классу обучающих фотографий и второму классу обучающих фотографий, по заданному размеру для получения фотографий заданного размера, соответствующих изображениям приватных областей и второму классу обучающих фотографий, соответственно.
Следует отметить, что перед этапом 107, соответственно, размеры первого класса контрольных фотографий и второго класса контрольных фотографий можно аналогичным образом обрезать согласно вышеописанному способу.
Далее способ может дополнительно включать в себя: перед этапом 113 получение области цвета кожи на фотографии, подлежащей обработке на этапе 116.
В примерной реализации процесс получения области цвета кожи на фотографии, подлежащей обработке, может включать в себя: выполнение распознавания фотографии, подлежащей обработке, путем применения модели цвета кожи для того, чтобы принять решение относительно того, содержит ли фотография, подлежащая обработке, область цвета кожи, причем отношение канала R к каналу G для области цвета кожи больше, чем заданное отношение; определение, в случае фотографии, подлежащей обработке и содержащей область цвета кожи, содержит ли фотография, подлежащая обработке, присоединяемые области цвета кожи, на основании положений областей цвета кожи; и выполнение обработки связности для присоединяемых областей цвета кожи на фотографии, подлежащей обработке для получения области цвета кожи в случае, когда фотография, подлежащая обработке, содержит присоединяемые области цвета кожи, для получения области цвета кожи фотографии, подлежащей обработке.
Из-за всех видов факторов, оказывающих влияние, таких как кровь человека и т.п., отношение канала R к каналу G для кожи человека обычно больше, чем заданное отношение. Соответственно, в примерной реализации область, в которой отношение канала R к каналу G больше, чем заданное отношение, можно определить в качестве области цвета кожи на фотографии, подлежащей обработке. Более конкретно, модель цвета кожи может представлять собой модель, которая обеспечивает распознавание области цвета кожи, такую как гауссова модель цвета лица и т.д. Данный вариант осуществления не будет ограничиваться этим аспектом, и сервер может выбрать при необходимости любую соответствующую модель цвета кожи распознавания области цвета кожи.
В другой примерной реализации присоединяемая область цвета кожи относится к области цвета кожи, состоящей из пикселей, имеющих смежные положения и одинаковое значение (область, пятно) на фотографии. Содержит ли фотография, подлежащая обработке, какую-либо присоединяемую область цвета кожи, можно определить с помощью положений областей цвета кожи и пиксельного анализа каждого пикселя в областях цвета кожи. Алгоритмы для анализа связности областей могут представлять собой, например, двухпроходный метод или метод "налива зерна".
В данном варианте осуществления процесс связности может относиться к: соединению присоединяемых областей цвета кожи с другими областями на фотографии, которые размещаются между присоединяемыми областями цвета кожи для того, чтобы иметь присоединенную область цвета кожи.
В данном варианте осуществления при использовании этапов применения модели цвета кожи для выполнения распознавание фотографии, подлежащей обработке, чтобы принять решение относительно того, содержит ли фотография, подлежащая обработке, область цвета кожи, причем отношение канала R к каналу G для области цвета кожи больше, чем заданное отношение; выполнения обработки связности для присоединяемых областей цвета кожи на фотографии, подлежащей обработке, и извлечения присоединенной области цвета кожи фотографии, подлежащей обработке, для того, чтобы получить изображение области цвета кожи, соответствующей фотографии, подлежащей обработке; выполнения нормализации и распознавания изображения области цвета кожи, соответствующей фотографии, подлежащей обработке, чтобы определить, является или нет фотография, подлежащая обработке, конфиденциальной фотографией; и сохранения фотографии, подлежащей обработке, в приватном фотоальбоме в случае, когда фотография, подлежащая обработке, является конфиденциальной фотографией, можно уменьшить количество изображений областей цвета кожи, которые необходимо идентифицировать, и, таким образом, можно повысить эффективность конфиденциального распознавания фотографии.
На этапе 117 извлекается область цвета кожи, которая содержится на фотографии, подлежащей обработке, для получения изображения области цвета кожи, соответствующей фотографии, подлежащей обработке.
Соответственно, этап 113 может включать в себя этап 1131: нормализации изображения области цвета кожи, по заданному размеру для того, чтобы иметь фотографию заданного размера, соответствующую изображению области цвета кожи.
В приведенных выше вариантах осуществления при использовании этапов получения области цвета кожи на фотографии, подлежащей обработке, извлечения области цвета кожи, которая содержится на фотографии, подлежащей обработке, для получения изображения области цвета кожи, соответствующей фотографии, подлежащей обработке, выполнения нормализации и распознавания изображения области цвета кожи, соответствующей фотографии, подлежащей обработке, чтобы определить, является или нет фотография, подлежащая обработке, конфиденциальной фотографией, и сохранения фотографии, подлежащей обработке, в приватном фотоальбоме в случае, когда фотография, подлежащая обработке, является конфиденциальной фотографией, другие области за исключением области цвета кожи оказывают меньшее влияние на распознавание фотографии, подлежащей обработке. Соответственно, можно повысить эффективность конфиденциального распознавания фотографии; можно повысить защиту конфиденциальности; и можно избежать утечки конфиденциальной фотографии. Более того, путем обрезки первого класса обучающих фотографий в соответствии с приватными областями для того, чтобы иметь изображения приватных областей, соответствующих первому классу обучающих фотографий, нормализации изображений приватных областей, соответствующих первому классу обучающих фотографий, и затем ввода нормализованных изображений в исходную модель распознавания конфиденциальной фотографии, и обучения коэффициентов признаков между узлами скрытых слоев в каждом скрытом слое модели распознавания конфиденциальной фотографии, соответствующей последней итерации, можно избежать помех по отношению к исходной модели распознавания конфиденциальной фотографии, которые вызваны другими областями за исключением приватных областей в первом классе обучающих фотографий. Соответственно, можно повысить скорость обучения модели распознавания конфиденциальной фотографии, и, таким образом, можно повысить эффективность обучения модели распознавания конфиденциальной фотографии.
Следующие варианты осуществления представляют собой устройства, которые можно использовать для выполнения способов, раскрытых в приведенных выше вариантах осуществления раскрытия. Способы, приведенные выше, могут относиться к любым нераскрытым деталям устройств последующих вариантов осуществления.
На фиг. 7 показана блок-схема, иллюстрирующая устройство распознавания конфиденциальной фотографии согласно примерному варианту осуществления. Приведенные выше способы можно выполнить с помощью этого устройства посредством программного обеспечения, аппаратных средств или их комбинации. Это устройство может включать в себя: первый модуль 71 получения, выполненный с возможностью получения библиотеки фотографий пользовательского терминала, причем библиотека фотографий содержит по меньшей мере одну фотографию, подлежащую обработке; первый модуль 72 распознавания, выполненный с возможностью выполнения распознавания фотографии, подлежащей обработке путем применения модели распознавания конфиденциальной фотографии для того, чтобы определить, является или нет фотография, подлежащая обработке, конфиденциальной фотографией; и модуль 73 хранения, выполненный с возможностью хранения фотографии, подлежащей обработке, в приватном фотоальбоме в случае, когда фотография, подлежащая обработке, является конфиденциальной фотографией.
В данном примерном варианте осуществления сверточная нейронная сеть используется для создания модели распознавания конфиденциальной фотографии. Сверточная нейронная сеть, в качестве одной из разнообразных многочисленных искусственных нейронных сетей, стала особенно актуальной в области анализа голоса и распознавания изображения. Совместно используемые весовые коэффициенты в структуре сверточной нейронной сети делают ее более вероятной в качестве биологической нейронной сети, уменьшают сложность модели сети и имеют уменьшенное число весовых коэффициентов. Это преимущество будет наиболее заметным в случае, когда входные данные сети представляет собой многомерное изображение. Выбирая изображение в качестве непосредственно входных данных сети, можно избежать сложных процессов извлечения признаков и восстановления данных, как это имеет место в традиционных алгоритмах распознавания.
На фиг. 2 показана структура сети сверточной нейронной сети. Сверточная нейронная сеть является многослойной нейронной сетью, в которой каждый слой состоит из многочисленных двухмерных плоскостей, и каждая плоскость состоит из многочисленных независимых нейронов. В примерной реализации предполагается, что сверточная нейронная сеть, основанная на модели распознавания конфиденциальной фотографии, может иметь N-слойную структуру, в которой весовые коэффициенты соединений между узлами скрытых слоев в каждых двух соседних слоях определяются с помощью набора обучающих выборок. Для простоты иллюстрации весовые коэффициенты соединений между узлами скрытых слоев называются в настоящем раскрытии "коэффициентами признаков". То есть модель распознавания конфиденциальной фотографии имеет коэффициенты признаков N слоев.
В данном варианте осуществления путем применения модели распознавания конфиденциальной фотографии для выполнения распознавания фотографии, подлежащей обработке, чтобы определить, является ли фотография, подлежащая обработке, конфиденциальной фотографией, и сохранения фотографии, подлежащей обработке, в приватном фотоальбоме в случае, когда фотография, подлежащая обработке, является конфиденциальной фотографией, можно автоматически распознать и обработать фотографию, подлежащую обработке, в библиотеке фотографий. Соответственно, пользователю нет необходимости вручную выбирать конфиденциальную фотографию и перемещать конфиденциальную фотографию в приватный фотоальбом. В результате, одновременно экономится время и труд; можно повысить эффективность конфиденциального распознавания фотографии; можно повысить защиту конфиденциальности; и можно избежать утечки конфиденциальной фотографии.
Кроме того, как показано на фиг. 8, устройство может дополнительно включать в себя: второй модуль 74 получения, выполненный с возможностью получения набора обучающих выборок, причем набор обучающих выборок содержит первый класс обучающих фотографий и второй класс обучающих фотографий, при этом первый класс обучающих фотографий представляет собой конфиденциальные фотографии, которые включают в себя приватные части, второй класс обучающих фотографий представляет собой не конфиденциальные фотографии, которые не включают в себя приватные части; и модуль 75 ввода, выполненный с возможностью ввода первого класса обучающих фотографий и второго класса обучающих фотографий в исходную модель распознавания конфиденциальной фотографии в произвольном порядке таким образом, чтобы коэффициенты признаков между узлами скрытых слоев в каждом скрытом слое исходной модели распознавания конфиденциальной фотографии обучались для получения модели распознавания конфиденциальной фотографии.
В примерной реализации первый класс обучающих фотографий и второй класс обучающих фотографий могут быть собраны сервером. С целью обеспечения определенных эффектов обучения, одновременно число первого класса обучающих фотографий и число второго класса обучающих фотографий в наборе обучающих выборок могут быть больше первого заданного числа. Например, число первого класса обучающих фотографий может быть больше или равно 200000, и число второго класса обучающих фотографий может быть больше или равно 300000.
В возможной реализации сервер может в произвольном порядке вводить каждую обучающую фотографию в исходную модель распознавания конфиденциальной фотографии и сравнивать результат классификации атрибутов, выведенный с помощью исходной модели распознавания конфиденциальной фотографии, с атрибутом введенной обучающей фотографии для того, чтобы определить, требуется ли регулировать какой-либо коэффициент признака между узлами скрытых слоев в каждом скрытом слое текущей исходной модели распознавания конфиденциальной фотографии. Однако этот вид способа обучения может иметь следующую проблему: сразу после прямой регулировки коэффициентов признака между узлами скрытых слоев в каждом скрытом слое исходной модели распознавания конфиденциальной фотографии согласно бывшей обучающей фотографии, можно отрегулировать обратно пропорционально коэффициенты признаков между узлами скрытых слоев в каждом скрытом слое исходной модели распознавания конфиденциальной фотографии согласно последующей обучающей фотографии. Следовательно, коэффициенты признаков между узлами скрытых слоев в каждом скрытом слое исходной модели распознавания конфиденциальной фотографии можно часто и периодически регулировать.
С учетом этого в альтернативном варианте осуществления сервер может вводить пакет обучающих фотографий в исходную модель распознавания конфиденциальной фотографии в правильной последовательности и затем определять, требуется ли для дальнейшей настройки какой-либо коэффициент признака между узлами скрытых слоев в каждом скрытом слое текущей исходной модели распознавания конфиденциальной фотографии на основании результатов классификации атрибутов этого пакета обучающих фотографий, выведенных с помощью исходной модели распознавания конфиденциальной фотографии. После этого следующий пакет обучающих фотографий будет вводиться в правильной последовательности в исходную модель распознавания конфиденциальной фотографии.
В этом примерном варианте осуществления при использовании этапов получения набора обучающих выборок, причем набор обучающих выборок содержит первый класс обучающих фотографий и второй класс обучающих фотографий, при этом первый класс обучающих фотографий представляет собой конфиденциальные фотографии, которые включают в себя приватные части, второй класс обучающих фотографий представляет собой не конфиденциальные фотографии, которые не включают в себя приватные части; и ввод первого класса обучающих фотографий и второго класса обучающих фотографий в исходную модель распознавания конфиденциальной фотографии в произвольном порядке так, чтобы коэффициенты признаков между узлами скрытых слоев в каждом скрытом слое исходной модели распознавания конфиденциальной фотографии обучались для получения модели распознавания конфиденциальной фотографии, при этом модель распознавания конфиденциальной фотографии может иметь лучшую возможность корректной идентификации фотографии, подлежащей обработке.
Кроме того, как показано на фиг. 9, устройство может дополнительно включать в себя: третий модуль 76 получения, выполненный с возможностью получения набора контрольных выборок, причем набор контрольных выборок содержит первый класс контрольных фотографий и второй класс контрольных фотографий, при этом первый класс контрольных фотографий представляет собой конфиденциальные фотографии, которые включают в себя приватные части, а второй класс контрольных фотографий представляет собой не конфиденциальные фотографии, которые не включают в себя приватные части; второй модуль 77 распознавания, выполненный с возможностью выполнения распознавания первого класса контрольных фотографий и второго класса контрольных фотографий в наборе контрольных выборок, соответственно, путем применения модели распознавания конфиденциальной фотографии для получения результатов классификации, соответствующих каждой из контрольных фотографий; и первый модуль 78 определения, выполненный с возможностью определения степени точности классификации модели распознавания конфиденциальной фотографии на основании результатов классификации, соответствующих каждой из контрольных фотографий.
Устройство может также включать в себя модуль 79 выполнения итераций, выполненный с возможностью периодического выполнения следующих операций в случае, когда степень точности классификации меньше заданного порогового значения до тех пор, пока не будет достигнуто максимальное число итераций, или степень точности классификации не станет больше заданного порогового значения: обновление набора обучающих выборок; обучение коэффициентов признаков между узлами скрытых слоев в каждом скрытом слое модели распознавания конфиденциальной фотографии, соответствующей последней итерации, в соответствии с обновленным набором обучающих выборок, для получения обновленной модели распознавания конфиденциальной фотографии, соответствующей текущей итерации; и выполнение тестирования степени точности классификации для обновленной модели распознавания конфиденциальной фотографии, соответствующей текущей итерации, на основании обновленного набора контрольных выборок для того, чтобы определить соответствующую степень точности классификации.
Более того, устройство, показанное на фиг. 9, может также включать в себя: второй модуль 80 определения, выполненный с возможностью определения максимальной степени точности классификации среди степеней точности классификации, соответствующих каждой из итераций; и третий модуль 81 определения, выполненный с возможностью определения обновленной модели распознавания конфиденциальной фотографии, соответствующей максимальной степени точности классификации в качестве целевой модели распознавания конфиденциальной фотографии.
В примерной реализации для того, чтобы улучшить эффекты тестирования, число контрольных фотографий первого класса и число контрольных фотографий второго класса, которые содержатся в наборе контрольных выборок, могут быть больше второго заданного числа. Например, число контрольных фотографий первого класса может быть больше или равно 20000, и число контрольных фотографий второго класса может быть больше или равно 30000.
В настоящем примерном варианте осуществления при использовании этапов получения набора контрольных выборок, причем набор контрольных выборок содержит первый класс контрольных фотографий и второй класс контрольных фотографий, при этом первый класс контрольных фотографий представляет собой конфиденциальные фотографии, которые включают в себя приватные части, а второй класс контрольных фотографий представляет собой не конфиденциальные фотографии, которые не включают в себя приватные части; выполнения распознавания первого класса контрольных фотографий и второго класса контрольных фотографий в наборе контрольных выборок, соответственно, путем применения модели распознавания конфиденциальной фотографии для того, чтобы получить степень точности классификации модели распознавания конфиденциальной фотографии; в случае, когда степень точности классификации меньше заданного порогового значения, обучения коэффициентов признаков между узлами скрытых слоев в каждом скрытом слое модели распознавания конфиденциальной фотографии, соответствующей последней итерации в соответствии с обновленным набором обучающих выборок до тех пор, пока не будет достигнуто максимальное число итераций, или степень точности классификации не станет больше заданного порогового значения; определения максимальной степени точности классификации среди степеней точности классификации, соответствующих каждой из итераций; и определения обновленной модели распознавания конфиденциальной фотографии, соответствующей максимальной степени точности классификации, в качестве целевой модели распознавания конфиденциальной фотографии, можно повысить степень точности классификации модели распознавания конфиденциальной фотографии, и, таким образом, модель распознавания конфиденциальной фотографии может иметь лучшую возможность корректной идентификации фотографии, подлежащей обработке.
Кроме того, как показано на фиг. 10, кроме модулей, описанных в примерном варианте осуществления, показанном на фиг. 8, устройство может дополнительно включать в себя первый модуль 82 обработки, который выполнен с возможностью нормализации фотографии, подлежащей обработке, по заданному размеру для того, чтобы иметь фотографию заданного размера, соответствующую фотографии, подлежащей обработке.
Соответственно, первый модуль 72 распознавания может включать в себя первый блок 721 распознавания, который выполнен с возможностью распознавания фотографии заданного размера путем применения модели распознавания конфиденциальной фотографии для того, чтобы определить, является или нет фотография, подлежащая обработке, конфиденциальной фотографией.
Соответственно, устройство может также включать в себя второй модуль 83 обработки, который выполнен с возможностью нормализации первого класса обучающих фотографий и второго класса обучающих фотографий по заданному размеру для того, чтобы иметь фотографии заданного размера, соответствующие первому классу обучающих фотографий и второму классу обучающих фотографий, соответственно.
Соответственно, модуль 75 ввода может включать в себя блок 751 ввода, который выполнен с возможностью ввода фотографий заданного размера, соответствующих первому классу обучающих фотографий и второму классу обучающих фотографий, в исходную модель распознавания конфиденциальной фотографии в произвольном порядке таким образом, чтобы коэффициенты признаков между узлами скрытых слоев в каждом скрытом слое исходной модели распознавания конфиденциальной фотографии обучались для получения модели распознавания конфиденциальной фотографии.
Согласно настоящему примерному варианту осуществления при использовании этапов нормализации фотографии, подлежащей обработке, по заданному размеру для того, чтобы иметь фотографию заданного размера, соответствующую фотографии, подлежащей обработке, применения модели распознавания конфиденциальной фотографии для выполнения распознавания фотографии заданного размера для того, чтобы определить, является или нет фотография, подлежащая обработке, конфиденциальной фотографией, и сохранения фотографии, подлежащей обработке, в приватном фотоальбоме в случае, когда фотография, подлежащая обработке, является конфиденциальной фотографией, можно автоматически распознать и обработать фотографию, подлежащую обработке, в библиотеке фотографий. Соответственно, пользователю нет необходимости вручную выбирать конфиденциальную фотографию и перемещать конфиденциальную фотографию в приватный фотоальбом, и, таким образом, одновременно экономится время и труд. Более того, скорость распознавания модели распознавания конфиденциальной фотографии для фотографии, подлежащей обработке, можно повысить с помощью операции нормализации для фотографии, подлежащей обработке. Кроме того, при использовании этапов соответствующей нормализации первого класса обучающих фотографий и второго класса обучающих фотографий по заданному размеру для того, чтобы иметь фотографии заданного размера, соответствующие первому классу обучающих фотографий и второму классу обучающих фотографий, и ввода фотографий заданного размера, соответствующих первому классу обучающих фотографий и второму классу обучающих фотографий, в исходную модель распознавания конфиденциальной фотографии в произвольном порядке таким образом, чтобы можно было обучить коэффициенты признаков между узлами скрытых слоев в каждом скрытом слое исходной модели распознавания конфиденциальной фотографии, можно повысить скорость обработки исходной модели распознавания конфиденциальной фотографии для введенных обучающих фотографий, и, таким образом, можно повысить скорость обучения исходной модели распознавания конфиденциальной фотографии.
Кроме того, как показано на фиг. 11, кроме модулей, описанных в примерном варианте осуществления (фиг. 10), устройство может дополнительно включать в себя: четвертый модуль 84 получения, выполненный с возможностью получения области цвета кожи на фотографии, подлежащей обработке; и модуль извлечения 85, выполненный с возможностью извлечения области цвета кожи, которая содержится на фотографии, подлежащей обработке, чтобы получить изображение области цвета кожи, соответствующей фотографии, подлежащей обработке.
Соответственно, первый модуль 82 обработки может включать в себя первый блок 821 обработки, который выполнен с возможностью нормализации изображения области цвета кожи по заданному размеру для того, чтобы иметь фотографию заданного размера, соответствующую изображению области цвета кожи.
Соответственно, устройство может также включать в себя: пятый модуль 86 получения, выполненный с возможностью получения приватных областей первого класса обучающих фотографий в наборе обучающих выборок; и модуль 87 обрезки, выполненный с возможностью обрезки первого класса обучающих фотографий в соответствии с приватными областями для того, чтобы иметь изображения приватных областей, соответствующих первому классу обучающих фотографий.
Соответственно, второй модуль 83 обработки может включать в себя второй блок 831 обработки, который выполнен с возможностью нормализации изображений приватных областей, соответствующих первому классу обучающих фотографий и второму классу обучающих фотографий по заданному размеру для того, чтобы иметь фотографии заданного размера, соответствующие изображениям приватных областей и второму классу обучающих фотографий, соответственно.
В приведенных выше вариантах осуществления при использовании этапов получения области цвета кожи на фотографии, подлежащей обработке, извлечения области цвета кожи, которая содержится на фотографии, подлежащей обработке, для получения изображения области цвета кожи, соответствующей фотографии, подлежащей обработке, выполнения нормализации и распознавания изображения области цвета кожи, соответствующей фотографии, подлежащей обработке, чтобы определить, является или нет фотография, подлежащая обработке, конфиденциальной фотографией, и сохранения фотографии, подлежащей обработке, в приватном фотоальбоме в случае, когда фотография, подлежащая обработке, является конфиденциальной фотографией, другие области за исключением области цвета кожи оказывают меньшее влияние на распознавание фотографии, подлежащей обработке. Соответственно, можно повысить эффективность распознавания конфиденциальности фотографии; можно повысить защиту конфиденциальности; и можно избежать утечки конфиденциальной фотографии. Более того, путем обрезки первого класса обучающих фотографий в соответствии с приватными областями для того, чтобы иметь изображения приватных областей, соответствующих первому классу обучающих фотографий, нормализации изображений приватных областей, соответствующих первому классу обучающих фотографий, и затем ввода нормализованных изображений в исходную модель распознавания конфиденциальной фотографии, и обучения коэффициентов признаков между узлами скрытых слоев в каждом скрытом слое модели распознавания конфиденциальной фотографии, соответствующей последней итерации, можно избежать помех по отношению к исходной модели распознавания конфиденциальной фотографии, которые вызваны другими областями, за исключением приватных областей в первом классе обучающих фотографий. Соответственно, можно повысить скорость обучения модели распознавания конфиденциальной фотографии, и, таким образом, можно повысить эффективность обучения модели распознавания конфиденциальной фотографии.
Как показано на фиг. 12, кроме модулей, описанных в примерном варианте осуществления, показанном на фиг. 11, четвертый модуль 84 получения может включать в себя: второй блок 841 распознавания, который выполнен с возможностью распознавания фотографии, подлежащей обработке, путем применения модели цвета кожи для того, чтобы принять решение относительно того, содержит ли фотография, подлежащая обработке, область цвета кожи, причем отношение канала R к каналу G для области цвета кожи больше, чем заданное отношение; блок 842 определения, который выполнен с возможностью определения в случае, когда фотография, подлежащая обработке, содержит область цвета кожи, относительно того, содержит ли фотография, подлежащая обработке, присоединяемые области цвета кожи, на основании положений областей цвета кожи; и блок 843 соединения, который выполнен с возможностью обработки связности для присоединяемых областей цвета кожи на фотографии, подлежащей обработке, для получения области цвета кожи в случае, когда фотография, подлежащая обработке, содержит присоединяемые области цвета кожи.
Из-за всех видов факторов, оказывающих влияние, таких как кровь человека и т.п., отношение канала R к каналу G для кожи человека обычно больше, чем заданное отношение. Соответственно, в примерной реализации область, в которой отношение канала R к каналу G больше, чем заданное отношение, можно определить в качестве области цвета кожи на фотографии, подлежащей обработке.
Более конкретно, модель цвета кожи может представлять собой модель, которая обеспечивает распознавание области цвета кожи, такую как гауссова модель цвета лица и т.д. Данный вариант осуществления не будет ограничиваться этим аспектом, и сервер может выбрать при необходимости любую соответствующую модель цвета кожи распознавания области цвета кожи.
В данном варианте осуществления при использовании этапов применения модели цвета кожи для выполнения распознавание фотографии, подлежащей обработке, чтобы принять решение относительно того, содержит ли фотография, подлежащая обработке, область цвета кожи, причем отношение канала R к каналу G для области цвета кожи больше, чем заданное отношение; выполнения обработки связности для присоединяемых областей цвета кожи на фотографии, подлежащей обработке, и извлечение присоединенной области цвета кожи фотографии, подлежащей обработке, для того, чтобы получить изображение области цвета кожи, соответствующей фотографии, подлежащей обработке; выполнения нормализации и распознавания изображения области цвета кожи, соответствующей фотографии, подлежащей обработке, чтобы определить, является или нет фотография, подлежащая обработке, конфиденциальной фотографией; и сохранения фотографии, подлежащей обработке, в приватном фотоальбоме в случае, когда фотография, подлежащая обработке, является конфиденциальной фотографией, можно уменьшить количество изображений областей цвета кожи, которые необходимо идентифицировать, и, таким образом, можно повысить эффективность конфиденциального распознавания фотографии.
По отношению к устройствам в приведенных выше вариантах осуществления специфические способы выполнения операций для отдельных модулей, задействованных в них, были описаны подробно в вариантах осуществления, касающихся способов распознавания конфиденциальной фотографии, которые не будут описываться в данном документе.
На фиг. 13 показана блок-схема, иллюстрирующая сервер согласно примерному варианту осуществления. Как показано на фиг. 13, сервер 130 может включать в себя один или несколько из следующих компонентов: компонент 132 обработки, память 134, компонент 136 электропитания, интерфейс 138 ввода/вывода (I/O) и компонент 1310 связи.
Компонент 132 обработки обычно управляет всей работой сервера 130. В частности, компонент 132 обработки можно выполнить с возможностью: получения библиотеки фотографий пользовательского терминала, причем библиотека фотографий содержит по меньшей мере одну фотографию, подлежащую обработке; выполнения распознавания фотографии, подлежащей обработке, путем применения модели распознавания конфиденциальной фотографии для того, чтобы определить, является или нет фотография, подлежащая обработке, конфиденциальной фотографией; и сохранения фотографии, подлежащей обработке, в приватном фотоальбоме в случае, когда фотография, подлежащая обработке, является конфиденциальной фотографией.
Компонент 132 обработки может включать в себя один или более процессоров 1320, которые исполняют инструкций для выполнения всех или части этапов в вышеописанных способах. Более того, компонент 132 обработки может включать в себя один или более модулей, которые обеспечивают взаимодействие между компонентом 132 обработки и другими компонентами. Например, компонент 132 обработки может включать в себя модуль связи, который обеспечивает взаимодействие между компонентом 1310 связи и компонентом 132 обработки.
Память 134 выполнена с возможностью хранения различных типов данных и исполняемых инструкций компонента 132 обработки для поддержания работы сервера 130. Примеры таких данных включают в себя инструкции любых прикладных программ или способов, выполняемых на сервере 130, контактную информацию, данные телефонного справочника, сообщения, фотографии, видео и т.д. Память 134 можно реализовать с использованием любого типа энергозависимых или энергонезависимых устройств памяти или их комбинаций, таких как статическое оперативное запоминающее устройство (SRAM), электрически-стираемое программируемое постоянное запоминающее устройство (EEPROM), стираемое программируемое постоянное запоминающее устройство (EPROM), программируемое постоянное запоминающее устройство (PROM), постоянное запоминающее устройство (ROM), магнитная память, флэш-память, магнитный или оптический диск.
Компонент 136 электропитания обеспечивает подачу питания на различные компоненты сервера 130. Компонент 136 электропитания может включать в себя систему управления электропитанием, один или более источников электропитания и другие компоненты, связанные с выработкой, управлением и распределением электропитания для сервера 130.
Интерфейс 138 I/O обеспечивает сопряжение между компонентом 132 обработки и модулями периферийного интерфейса, такими как клавиатура, колесо управления, кнопки и т.п. Компонент 1310 связи выполнен с возможностью обеспечения проводной или беспроводной связи между сервером 130 и другими устройствами. Сервер 130 может иметь доступ к беспроводной сети на основании стандарта связи, такого как WiFi, 2G или 3G или их комбинации. В одном примерном варианте осуществления компонент 1310 связи принимает широковещательный сигнал или информацию, связанную с широковещательным сигналом, из внешней широковещательной системы управления через широковещательный канал. В одном примерном варианте осуществления компонент 1310 связи дополнительно включает в себя модуль связи малого радиуса действия (NFC) для обеспечения ближней связи. Например, модуль NFC можно реализовать на основании технологии радиочастотной идентификации (RFID), технологии Ассоциации по средствам передачи данных в инфракрасном диапазоне (IrDA), технологии беспроводной связи сверхширокого диапазона (UWB), технологии Bluetooth (ВТ) и других технологий.
В примерных вариантах осуществления сервер 130 можно реализовать с помощью одной или более специализированных интегральных микросхем (ASIC), процессоров цифровых сигналов (DSP), устройств цифровой обработки сигналов (DSPD), программируемых логических устройств (PLD), вентильных матриц с эксплуатационным программированием (FPGA), контроллеров, микроконтроллеров, микропроцессоров или других электронных компонентов для выполнения вышеописанных способов распознавания конфиденциальной фотографии.
В примерных вариантах осуществления выполнен энергонезависимый машиночитаемый носитель информации, включающий в себя инструкции, такие как включенные в память 134, исполняемые модулем процессора 1320 в сервере 130, для выполнения вышеописанных способов. Например, энергонезависимый машиночитаемый носитель информации может представлять собой постоянное запоминающее устройство (ROM), оперативное запоминающее устройство (RAM), CD-ROM, магнитную ленту, гибкий диск, оптическое устройство для хранения данных и т.п.
Энергонезависимый машиночитаемый носитель информации, имеющий хранящиеся на нем инструкции, которые при их исполнении процессором сервера 130, предписывают серверу 130 выполнять вышеописанные способы распознавания конфиденциальной фотографии.
Для специалистов в данной области техники другие варианты осуществления раскрытия будут очевидны после рассмотрения описания и применения на практике раскрытия, раскрытого здесь. Данная заявка предназначена для охвата любых вариаций, применений или адаптаций раскрытия, следующих его общим принципам и включающих в себя такие отклонения от настоящего раскрытия, которые находятся в рамках известной или обычной технической практики. Описание и варианты осуществления следует рассматривать только как иллюстративные, и объем, касающийся основных принципов раскрытия, и сущность раскрытия ограничиваются только прилагаемой формулой изобретения.
Следует иметь в виду, что идея изобретения не ограничивается точной конструкцией, которая была описана выше и проиллюстрирована на сопроводительных чертежах, и различные модификации и изменения могут быть сделаны без отклонения от его объема. Предполагается, что объем раскрытия будет ограничен только прилагаемой формулой изобретения.

Claims (90)

1. Способ распознавания конфиденциальной фотографии, содержащий этапы, на которых:
получают библиотеку фотографий пользовательского терминала, причем библиотека фотографий содержит по меньшей мере одну фотографию, подлежащую обработке;
получают набор обучающих выборок, причем набор обучающих выборок содержит первый класс обучающих фотографий и второй класс обучающих фотографий, при этом первый класс обучающих фотографий представляет собой конфиденциальные фотографии, содержащие приватные части, второй класс обучающих фотографий представляет собой не конфиденциальные фотографии, не содержащие приватных частей;
вводят первый класс обучающих фотографий и второй класс обучающих фотографий в исходную модель распознавания конфиденциальной фотографии в произвольном порядке так, чтобы коэффициенты признаков между узлами скрытых слоев в каждом скрытом слое исходной модели распознавания конфиденциальной фотографии обучались для получения модели распознавания конфиденциальной фотографии;
получают набор контрольных выборок, причем набор контрольных выборок содержит первый класс контрольных фотографий и второй класс контрольных фотографий, при этом первый класс контрольных фотографий представляет собой конфиденциальные фотографии, содержащие приватные части, а второй класс контрольных фотографий представляет собой не конфиденциальные фотографии, не содержащие приватные части;
выполняют распознавание первого класса контрольных фотографий и второго класса контрольных фотографий в наборе контрольных выборок соответственно, посредством применения модели распознавания конфиденциальной фотографии, для получения результатов классификации, соответствующих каждой из контрольных фотографий; и
определяют степень точности классификации модели распознавания конфиденциальной фотографии на основании результатов классификации, соответствующих каждой из контрольных фотографий;
выполняют распознавание фотографии, подлежащей обработке, посредством применения модели распознавания конфиденциальной фотографии для определения, является ли фотография, подлежащая обработке, конфиденциальной фотографией; и
сохраняют фотографию, подлежащую обработке, в приватном фотоальбоме в случае, когда фотография, подлежащая обработке, является конфиденциальной фотографией.
2. Способ по п. 1, дополнительно содержащий этапы, на которых:
после этапа определения, когда степень точности классификации меньше заданного порогового значения, пока не достигнуто максимальное число итераций или степень точности классификации не больше заданного порогового значения, осуществляют периодическое выполнение операций:
обновления набора обучающих выборок;
обучения коэффициентов признаков между узлами скрытых слоев в каждом скрытом слое модели распознавания конфиденциальной фотографии, соответствующей последней итерации, в соответствии с обновленным набором обучающих выборок для получения обновленной модели распознавания конфиденциальной фотографии, соответствующей текущей итерации; и
выполнения тестирования степени точности классификации для обновленной модели распознавания конфиденциальной фотографии, соответствующей текущей итерации, на основании обновленного набора контрольных выборок для определения соответствующей степени точности классификации.
3. Способ по п. 2, дополнительно содержащий этапы, на которых:
определяют максимальную степень точности классификации из степеней точности классификации, соответствующих каждой из итераций; и
определяют обновленную модель распознавания конфиденциальной фотографии, соответствующую максимальной степени точности классификации, в качестве целевой модели распознавания конфиденциальной фотографии.
4. Способ по п. 1, в котором перед этапом распознавания способ дополнительно содержит этапы, на которых:
нормализируют фотографию, подлежащую обработке, по заданному размеру для получения фотографии заданного размера, соответствующей фотографии, подлежащей обработке,
соответственно, этап распознавания содержит подэтап, на котором:
выполняют распознавание фотографии заданного размера посредством применения модели распознавания конфиденциальной фотографии для определения, является ли фотография, подлежащая обработке, конфиденциальной фотографией.
5. Способ по п. 4, в котором перед этапом нормализации способ дополнительно содержит этапы, на которых:
получают область цвета кожи на фотографии, подлежащей обработке; и
извлекают область цвета кожи, содержащуюся на фотографии, подлежащей обработке, для получения изображения области цвета кожи, соответствующей фотографии, подлежащей обработке,
соответственно, этап нормализации содержит подэтап, на котором:
осуществляют нормализацию изображения области цвета кожи, соответствующей фотографии, подлежащей обработке, по заданному размеру для получения фотографии заданного размера, соответствующей изображению области цвета кожи.
6. Способ по п. 5, в котором этап получения области цвета кожи на фотографии, подлежащей обработке, содержит подэтапы, на которых:
выполняют распознавание фотографии, подлежащей обработке, посредством применения модели цвета кожи для принятия решения относительно того, содержит ли фотография, подлежащая обработке, область цвета кожи, причем отношение канала R к каналу G для области цвета кожи больше, чем заданное отношение;
определяют, когда фотография, подлежащая обработке, содержит область цвета кожи, содержит ли фотография, подлежащая обработке, присоединяемые области цвета кожи, на основании положений областей цвета кожи; и
выполняют обработку связности для присоединяемых областей цвета кожи на фотографии, подлежащей обработке, когда фотография, подлежащая обработке, содержит присоединяемые области цвета кожи, для получения области цвета кожи фотографии, подлежащей обработке.
7. Способ по п. 1, в котором перед этапом ввода способ дополнительно содержит этапы, на которых:
осуществляют нормализацию первого класса обучающих фотографий и второго класса обучающих фотографий по заданному размеру для получения фотографий заданного размера, соответствующих первому классу обучающих фотографий и второму классу обучающих фотографий соответственно,
соответственно, этап ввода содержит подэтап, на котором:
вводят фотографии заданного размера, соответствующие первому классу обучающих фотографий и второму классу обучающих фотографий, в исходную модель распознавания конфиденциальной фотографии в произвольном порядке так, чтобы коэффициенты признаков между узлами скрытых слоев в каждом скрытом слое исходной модели распознавания конфиденциальной фотографии обучались для получения модели распознавания конфиденциальной фотографии.
8. Способ по п. 7, в котором перед этапом нормализации способ дополнительно содержит этапы, на которых:
получают приватные области первого класса обучающих фотографий из набора обучающих выборок; и
обрезают обучающие фотографии первого класса в соответствии с приватными областями, для получения изображений приватных областей, соответствующих первому классу обучающих фотографий,
соответственно, этап нормализации содержит подэтап, на котором:
осуществляют нормализацию изображений приватных областей, соответствующих первому классу обучающих фотографий и второму классу обучающих фотографий, по заданному размеру для получения фотографий заданного размера, соответствующих изображениям приватных областей и второму классу обучающих фотографий соответственно.
9. Устройство распознавания конфиденциальной фотографии, содержащее:
первый модуль получения, выполненный с возможностью получения библиотеки фотографий пользовательского терминала, причем библиотека фотографий содержит по меньшей мере одну фотографию, подлежащую обработке;
первый модуль распознавания, выполненный с возможностью распознавания фотографии, подлежащей обработке, посредством применения модели распознавания конфиденциальной фотографии для определения, является ли фотография, подлежащая обработке, конфиденциальной фотографией; и
модуль хранения, выполненный с возможностью сохранения фотографии, подлежащей обработке, в приватном фотоальбоме, когда фотография, подлежащая обработке, является конфиденциальной фотографией; при этом указанное устройство дополнительно содержит:
второй модуль получения, выполненный с возможностью получения набора обучающих выборок, причем набор обучающих выборок содержит первый класс обучающих фотографий и второй класс обучающих фотографий, при этом первый класс обучающих фотографий представляет собой конфиденциальные фотографии, содержащие приватные части, а второй класс обучающих фотографий представляет собой не конфиденциальные фотографии, не содержащие приватных частей; и
модуль ввода, выполненный с возможностью ввода первого класса обучающих фотографий и второго класса обучающих фотографий в исходную модель распознавания конфиденциальной фотографии в произвольном порядке так, чтобы коэффициенты признаков между узлами скрытых слоев в каждом скрытом слое исходной модели распознавания конфиденциальной фотографии обучались для получения модели распознавания конфиденциальной фотографии;
третий модуль получения, выполненный с возможностью получения набора контрольных выборок, причем набор контрольных выборок содержит первый класс контрольных фотографий и второй класс контрольных фотографий, при этом первый класс контрольных фотографий представляет собой конфиденциальные фотографии, содержащие приватные части, а второй класс контрольных фотографий представляет собой не конфиденциальные фотографии, не содержащие приватные части;
второй модуль распознавания, выполненный с возможностью, распознавания первого класса контрольных фотографий и второго класса контрольных фотографий в наборе контрольных выборок соответственно, посредством применения модели распознавания конфиденциальной фотографии для получения результатов классификации, соответствующих каждой из контрольных фотографий; и
первый модуль определения, выполненный с возможностью определения степени точности классификации модели распознавания конфиденциальной фотографии на основании результатов классификации, соответствующих каждой из контрольных фотографий.
10. Устройство по п. 9, дополнительно содержащее:
модуль выполнения итераций, выполненный с возможностью итерационного выполнения, когда степень точности классификации меньше заданного порогового значения, пока не достигнуто максимальное число итераций, или степень точности классификации не больше заданного порогового значения, следующих операций:
обновления набора обучающих выборок;
обучения коэффициентов признаков между узлами скрытых слоев в каждом скрытом слое модели распознавания конфиденциальной фотографии, соответствующей последней итерации, в соответствии с обновленным набором обучающих выборок для получения обновленной модели распознавания конфиденциальной фотографии, соответствующей текущей итерации; и
выполнения тестирования степени точности классификации для обновленной модели распознавания конфиденциальной фотографии, соответствующей текущей итерации, на основании обновленного набора контрольных выборок для определения соответствующей степени точности классификации.
11. Устройство по п. 10, дополнительно содержащее:
второй модуль определения, выполненный с возможностью определения максимальной степени точности классификации из степеней точности классификации, соответствующих каждой из итераций; и
третий модуль определения, выполненный с возможностью определения обновленной модели распознавания конфиденциальной фотографии, соответствующей максимальной степени точности классификации, в качестве целевой модели распознавания конфиденциальной фотографии.
12. Устройство по п. 9, дополнительно содержащее:
первый модуль обработки, выполненный с возможностью нормализации фотографии, подлежащей обработке, по заданному размеру для получения фотографии заданного размера, соответствующей фотографии, подлежащей обработке,
соответственно, первый модуль распознавания содержит:
первый блок распознавания, выполненный с возможностью распознавания фотографии заданного размера посредством применения модели распознавания конфиденциальной фотографии для определения, является ли фотография, подлежащая обработке, конфиденциальной фотографией.
13. Устройство по п. 12, дополнительно содержащее:
четвертый модуль получения, выполненный с возможностью получения области цвета кожи на фотографии, подлежащей обработке; и
модуль извлечения, выполненный с возможностью извлечения области цвета кожи, содержащейся на фотографии, подлежащей обработке, для получения изображения области цвета кожи, соответствующего фотографии, подлежащей обработке,
соответственно, первый модуль обработки содержит:
первый блок обработки, выполненный с возможностью нормализации изображения области цвета кожи, соответствующей фотографии, подлежащей обработке по заданному размеру, получения фотографии заданного размера, соответствующей изображению области цвета кожи.
14. Устройство по п. 13, в котором четвертый модуль получения содержит:
второй блок распознавания, выполненный с возможностью распознавания фотографии, подлежащей обработке, посредством применения модели цвета кожи, для принятия решения, содержит ли фотография, подлежащая обработке, область цвета кожи, причем отношение канала R к каналу G для области цвета кожи больше, чем заданное отношение;
блок определения, выполненный с возможностью определения, когда фотография, подлежащая обработке, содержит область цвета кожи, содержит ли фотография, подлежащая обработке, присоединяемые области цвета кожи, на основании положений областей цвета кожи; и
блок соединения, выполненный с возможностью выполнения обработки связности для присоединяемых областей цвета кожи на фотографии, подлежащей обработке, когда фотография, подлежащая обработке, содержит присоединяемые области цвета кожи, для получения области цвета кожи фотографии, подлежащей обработке.
15. Устройство по п. 9, дополнительно содержащее:
второй модуль обработки, выполненный с возможностью нормализации первого класса обучающих фотографий и второго класса обучающих фотографий по заданному размеру для получения фотографий заданного размера, соответствующих первому классу обучающих фотографий и второму классу обучающих фотографий соответственно,
соответственно, модуль ввода содержит:
блок ввода, выполненный с возможностью ввода фотографий заданного размера, соответствующих первому классу обучающих фотографий и второму классу обучающих фотографий, в исходную модель распознавания конфиденциальной фотографии в произвольном порядке так, чтобы коэффициенты признаков между узлами скрытых слоев в каждом скрытом слое исходной модели распознавания конфиденциальной фотографии обучались для получения модели распознавания конфиденциальной фотографии.
16. Устройство по п. 15, дополнительно содержащее:
пятый модуль получения, выполненный с возможностью получения приватных областей первого класса обучающих фотографий в наборе обучающих выборок; и
модуль обрезки, выполненный с возможностью обрезки обучающих фотографий первого класса в соответствии с приватными областями, для получения изображений приватных областей, соответствующих первому классу обучающих фотографий,
соответственно, второй модуль обработки содержит:
второй блок обработки, выполненный с возможностью нормализации изображений приватных областей, соответствующих первому классу обучающих фотографий и второму классу обучающих фотографий по заданному размеру для получения фотографий заданного размера, соответствующих изображениям приватных областей и второму классу обучающих фотографий соответственно.
17. Сервер, содержащий:
компонент обработки; и
память для хранения исполняемых инструкций компонента обработки, при этом
компонент обработки выполнен с возможностью:
получения библиотеки фотографий пользовательского терминала, причем библиотека фотографий содержит по меньшей мере одну фотографию, подлежащую обработке;
получают набор обучающих выборок, причем набор обучающих выборок содержит первый класс обучающих фотографий и второй класс обучающих фотографий, при этом первый класс обучающих фотографий представляет собой конфиденциальные фотографии, содержащие приватные части, второй класс обучающих фотографий представляет собой не конфиденциальные фотографии, не содержащие приватных частей;
вводят первый класс обучающих фотографий и второй класс обучающих фотографий в исходную модель распознавания конфиденциальной фотографии в произвольном порядке так, чтобы коэффициенты признаков между узлами скрытых слоев в каждом скрытом слое исходной модели распознавания конфиденциальной фотографии обучались для получения модели распознавания конфиденциальной фотографии;
получения набора контрольных выборок, причем набор контрольных выборок содержит первый класс контрольных фотографий и второй класс контрольных фотографий, при этом первый класс контрольных фотографий представляет собой конфиденциальные фотографии, содержащие приватные части, а второй класс контрольных фотографий представляет собой не конфиденциальные фотографии, не содержащие приватные части;
выполнения распознавания первого класса контрольных фотографий и второго класса контрольных фотографий в наборе контрольных выборок соответственно, посредством применения модели распознавания конфиденциальной фотографии, для получения результатов классификации, соответствующих каждой из контрольных фотографий; и
определения степени точности классификации модели распознавания конфиденциальной фотографии на основании результатов классификации, соответствующих каждой из контрольных фотографий;
выполнения распознавания фотографии, подлежащей обработке, посредством применения модели распознавания конфиденциальной фотографии для определения, является ли фотография, подлежащая обработке, конфиденциальной фотографией; и
сохранения фотографии, подлежащей обработке, в приватном фотоальбоме, когда фотография, подлежащая обработке, является конфиденциальной фотографией.
RU2016108022A 2015-07-31 2015-12-28 Способ, устройство и сервер распознавания конфиденциальной фотографии RU2622874C1 (ru)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201510463265.X 2015-07-31
CN201510463265.XA CN105095911B (zh) 2015-07-31 2015-07-31 敏感图片识别方法、装置以及服务器
PCT/CN2015/099292 WO2017020515A1 (zh) 2015-07-31 2015-12-28 敏感图片识别方法、装置以及服务器

Publications (1)

Publication Number Publication Date
RU2622874C1 true RU2622874C1 (ru) 2017-06-20

Family

ID=54576296

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2016108022A RU2622874C1 (ru) 2015-07-31 2015-12-28 Способ, устройство и сервер распознавания конфиденциальной фотографии

Country Status (8)

Country Link
US (1) US10235603B2 (ru)
EP (1) EP3125153A1 (ru)
JP (1) JP6461349B2 (ru)
KR (1) KR101795325B1 (ru)
CN (1) CN105095911B (ru)
MX (1) MX361445B (ru)
RU (1) RU2622874C1 (ru)
WO (1) WO2017020515A1 (ru)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2695490C2 (ru) * 2017-11-02 2019-07-23 Илья Геннадьевич Прокудин Способ мониторинга сельскохозяйственных угодий
RU2706960C1 (ru) * 2019-01-25 2019-11-22 Самсунг Электроникс Ко., Лтд. Вычислительно эффективное многоклассовое распознавание изображений с использованием последовательного анализа нейросетевых признаков
RU2710942C1 (ru) * 2018-12-06 2020-01-14 Самсунг Электроникс Ко., Лтд. Одновременное распознавание атрибутов лиц и идентификации личности при организации фотоальбомов
US11222233B2 (en) 2018-09-26 2022-01-11 Samsung Electronics Co., Ltd. Method and apparatus for multi-category image recognition
US11222196B2 (en) 2018-07-11 2022-01-11 Samsung Electronics Co., Ltd. Simultaneous recognition of facial attributes and identity in organizing photo albums

Families Citing this family (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105095911B (zh) * 2015-07-31 2019-02-12 小米科技有限责任公司 敏感图片识别方法、装置以及服务器
CN105631406B (zh) * 2015-12-18 2020-07-10 北京小米移动软件有限公司 图像识别处理方法和装置
CN106203152A (zh) * 2016-06-23 2016-12-07 北京小米移动软件有限公司 图片处理方法和装置
CN108268488B (zh) * 2016-12-30 2022-04-19 百度在线网络技术(北京)有限公司 网页主图识别方法和装置
CN107203765B (zh) * 2017-03-30 2023-08-25 腾讯科技(上海)有限公司 敏感图像检测方法和装置
CN107122806B (zh) * 2017-05-16 2019-12-31 北京京东尚科信息技术有限公司 一种敏感图像识别方法及装置
CN107220667B (zh) * 2017-05-24 2020-10-30 北京小米移动软件有限公司 图像分类方法、装置及计算机可读存储介质
CN108268896A (zh) * 2018-01-18 2018-07-10 天津市国瑞数码安全系统股份有限公司 基于hsv与surf特征相结合的敏感图像识别方法
CN108764374B (zh) * 2018-06-11 2022-07-19 杭州网易智企科技有限公司 图像分类方法、系统、介质和电子设备
CN108921792B (zh) * 2018-07-03 2023-06-27 北京字节跳动网络技术有限公司 用于处理图片的方法和装置
CN109344849B (zh) * 2018-07-27 2022-03-11 广东工业大学 一种基于结构平衡理论的复杂网络图像识别方法
KR102461033B1 (ko) * 2018-09-06 2022-11-02 주식회사 아이앤나 아기의 사생활 침해 방지 방법
CN110956190A (zh) * 2018-09-27 2020-04-03 深圳云天励飞技术有限公司 图像识别方法及装置、计算机装置和计算机可读存储介质
US10922584B2 (en) 2019-01-30 2021-02-16 Walmart Apollo, Llc Systems, methods, and techniques for training neural networks and utilizing the neural networks to detect non-compliant content
US10810726B2 (en) 2019-01-30 2020-10-20 Walmart Apollo, Llc Systems and methods for detecting content in images using neural network architectures
CN109885707A (zh) * 2019-02-01 2019-06-14 北京字节跳动网络技术有限公司 图库中图片的刷新方法、装置、终端设备和存储介质
CN110032887A (zh) * 2019-02-27 2019-07-19 努比亚技术有限公司 一种图片隐私保护方法、终端及计算机可读存储介质
CN110163250B (zh) * 2019-04-10 2023-10-24 创新先进技术有限公司 基于分布式调度的图像脱敏处理系统、方法以及装置
CN110335666A (zh) * 2019-05-22 2019-10-15 平安国际智慧城市科技股份有限公司 医学影像评估方法、装置、计算机设备及存储介质
CN110287720A (zh) * 2019-07-01 2019-09-27 国网内蒙古东部电力有限公司 一种基于图像识别和用户等级的访问控制方法
CN110427761A (zh) * 2019-07-08 2019-11-08 维沃移动通信有限公司 一种提示方法和终端设备
CN110414929A (zh) * 2019-07-10 2019-11-05 广州市巴图鲁信息科技有限公司 一种汽车配件图片智能审核方法
CN110838106B (zh) * 2019-10-31 2023-04-14 国网河北省电力有限公司电力科学研究院 一种对变电站二次设备图像识别软件的多维度评价方法
CN110909224B (zh) * 2019-11-22 2022-06-10 浙江大学 一种基于人工智能的敏感数据自动分类识别方法及系统
US11758069B2 (en) 2020-01-27 2023-09-12 Walmart Apollo, Llc Systems and methods for identifying non-compliant images using neural network architectures
CN111738290B (zh) * 2020-05-14 2024-04-09 北京沃东天骏信息技术有限公司 图像检测方法、模型构建和训练方法、装置、设备和介质
CN112508094B (zh) * 2020-07-24 2023-10-20 完美世界(北京)软件科技发展有限公司 垃圾图片的识别方法、装置及设备
CN112001282A (zh) * 2020-08-12 2020-11-27 腾讯音乐娱乐科技(深圳)有限公司 一种图像识别方法
CN113344198B (zh) * 2021-06-09 2022-08-26 北京三快在线科技有限公司 一种模型训练的方法及装置
TWI817702B (zh) * 2022-09-05 2023-10-01 宏碁股份有限公司 圖片篩選方法與圖片篩選裝置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100310158A1 (en) * 2008-09-26 2010-12-09 Tencent Technology (Shenzhen) Company Limited Method And Apparatus For Training Classifier, Method And Apparatus For Image Recognition
US8406482B1 (en) * 2008-08-28 2013-03-26 Adobe Systems Incorporated System and method for automatic skin tone detection in images
CN104021350A (zh) * 2014-05-13 2014-09-03 小米科技有限责任公司 隐私信息隐藏方法及装置

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09147119A (ja) * 1995-11-28 1997-06-06 Toshiba Corp 人物注目方向検出方式
US20030225763A1 (en) * 2002-04-15 2003-12-04 Microsoft Corporation Self-improving system and method for classifying pages on the world wide web
US7295700B2 (en) * 2003-10-24 2007-11-13 Adobe Systems Incorporated Object extraction based on color and visual texture
JP4348202B2 (ja) * 2004-01-21 2009-10-21 日本放送協会 顔画像認識装置及び顔画像認識プログラム
US20060020714A1 (en) 2004-07-22 2006-01-26 International Business Machines Corporation System, apparatus and method of displaying images based on image content
US7403654B2 (en) * 2004-10-04 2008-07-22 Arcsoft, Inc. Enhanced automatic red eye removal
WO2006134923A1 (ja) * 2005-06-14 2006-12-21 Nikon Corporation 画像処理装置、コンピュータプログラム製品および画像処理方法
US20080159627A1 (en) * 2006-12-27 2008-07-03 Yahoo! Inc. Part-based pornography detection
US8385632B2 (en) 2010-06-01 2013-02-26 Mitsubishi Electric Research Laboratories, Inc. System and method for adapting generic classifiers for object detection in particular scenes using incremental training
EP2402867B1 (en) 2010-07-02 2018-08-22 Accenture Global Services Limited A computer-implemented method, a computer program product and a computer system for image processing
CN103164687B (zh) * 2011-12-15 2017-03-01 阿里巴巴集团控股有限公司 一种色情图像侦测的方法和系统
JP2013191035A (ja) * 2012-03-14 2013-09-26 Fujifilm Corp 画像公開装置、画像公開方法、画像公開システム、および、プログラム
JP6101470B2 (ja) * 2012-07-23 2017-03-22 日本放送協会 顔表情解析装置および顔表情解析プログラム
US9305208B2 (en) * 2013-01-11 2016-04-05 Blue Coat Systems, Inc. System and method for recognizing offensive images
US20140279754A1 (en) * 2013-03-15 2014-09-18 The Cleveland Clinic Foundation Self-evolving predictive model
CN104281833B (zh) * 2013-07-08 2018-12-18 深圳市腾讯计算机系统有限公司 色情图像识别方法和装置
JP2015069580A (ja) * 2013-09-30 2015-04-13 大日本印刷株式会社 人物画像分類装置、人物画像分類方法、及び、プログラム
US10250538B2 (en) * 2014-06-14 2019-04-02 Trisha N. Prabhu Detecting messages with offensive content
US9536293B2 (en) * 2014-07-30 2017-01-03 Adobe Systems Incorporated Image assessment using deep convolutional neural networks
CN104182735A (zh) * 2014-08-18 2014-12-03 厦门美图之家科技有限公司 训练优化的基于卷积神经网络的色情图像或视频检测方法
CN104462900A (zh) * 2014-12-05 2015-03-25 来安县新元机电设备设计有限公司 一种移动终端隐私图片保护的方法和系统
CN104484683B (zh) * 2014-12-31 2019-08-02 小米科技有限责任公司 黄色图片检测方法及装置
CN105095911B (zh) * 2015-07-31 2019-02-12 小米科技有限责任公司 敏感图片识别方法、装置以及服务器

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8406482B1 (en) * 2008-08-28 2013-03-26 Adobe Systems Incorporated System and method for automatic skin tone detection in images
US20100310158A1 (en) * 2008-09-26 2010-12-09 Tencent Technology (Shenzhen) Company Limited Method And Apparatus For Training Classifier, Method And Apparatus For Image Recognition
CN104021350A (zh) * 2014-05-13 2014-09-03 小米科技有限责任公司 隐私信息隐藏方法及装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
SERGEJ ZERR ET AL. "PicAlert!: A System for Privacy-Aware Image Classification and Retrieval", опубл. 02.11.2012 на 3 листах, найдено в Интернет по адресу: URL:http://https://pdfs.semanticscholar.org/561e/667bd7ab303e28bdf3934fc00493e8b02983.pdf;. *

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2695490C2 (ru) * 2017-11-02 2019-07-23 Илья Геннадьевич Прокудин Способ мониторинга сельскохозяйственных угодий
US11222196B2 (en) 2018-07-11 2022-01-11 Samsung Electronics Co., Ltd. Simultaneous recognition of facial attributes and identity in organizing photo albums
US11222233B2 (en) 2018-09-26 2022-01-11 Samsung Electronics Co., Ltd. Method and apparatus for multi-category image recognition
RU2710942C1 (ru) * 2018-12-06 2020-01-14 Самсунг Электроникс Ко., Лтд. Одновременное распознавание атрибутов лиц и идентификации личности при организации фотоальбомов
RU2706960C1 (ru) * 2019-01-25 2019-11-22 Самсунг Электроникс Ко., Лтд. Вычислительно эффективное многоклассовое распознавание изображений с использованием последовательного анализа нейросетевых признаков

Also Published As

Publication number Publication date
WO2017020515A1 (zh) 2017-02-09
KR101795325B1 (ko) 2017-11-07
EP3125153A1 (en) 2017-02-01
CN105095911A (zh) 2015-11-25
US10235603B2 (en) 2019-03-19
JP6461349B2 (ja) 2019-01-30
CN105095911B (zh) 2019-02-12
MX361445B (es) 2018-12-06
JP2017530491A (ja) 2017-10-12
KR20170023762A (ko) 2017-03-06
US20170032224A1 (en) 2017-02-02
MX2016002947A (es) 2017-05-04

Similar Documents

Publication Publication Date Title
RU2622874C1 (ru) Способ, устройство и сервер распознавания конфиденциальной фотографии
KR101796401B1 (ko) 이미지 장면 판정 방법, 장치 및 서버
CN109379572B (zh) 图像转换方法、装置、电子设备及存储介质
WO2020093634A1 (zh) 基于人脸识别的照片添加方法、装置、终端及存储介质
WO2020062804A1 (zh) 自然场景中行驶证拍照影像的识别方法、装置及电子设备
EP3168756B1 (en) Techniques for distributed optical character recognition and distributed machine language translation
CN110489951A (zh) 风险识别的方法、装置、计算机设备和存储介质
US9189861B2 (en) Image processing device, image processing method, program, and recording medium
US10594930B2 (en) Image enhancement and repair using sample data from other images
US10223812B2 (en) Image validation
CN106228556B (zh) 图像质量分析方法和装置
CN105407261A (zh) 图像处理装置、方法以及电子设备
CN105512220B (zh) 图像页面输出方法及装置
CN109963072B (zh) 对焦方法、装置、存储介质及电子设备
US20140241592A1 (en) Systems and Methods for Automatic Image Editing
CN105701762B (zh) 一种图片处理方法和电子设备
US20170053388A1 (en) Techniques for automatically correcting groups of images
WO2021190625A1 (zh) 拍摄方法和设备
WO2015184903A1 (zh) 一种图片处理方法及装置
CN112926369A (zh) 一种人脸图像处理方法、装置、计算机设备及介质
WO2016205979A1 (en) Flaw detection and correction in digital images
CN110047115B (zh) 星辰图像拍摄方法、装置、计算机设备和存储介质
CN109460458B (zh) 查询改写意图的预测方法及装置
CN115696044A (zh) 成像控制方法、装置、计算机设备和存储介质
WO2022100665A1 (zh) 一种图像分享的方法、装置及终端设备