RU2578806C1 - Способ сравнения лица человека с помощью цифрового двумерного изображения лица либо с помощью изображения лица от одной или нескольких стереокамер с двумерным изображением лица из базы данных - Google Patents

Способ сравнения лица человека с помощью цифрового двумерного изображения лица либо с помощью изображения лица от одной или нескольких стереокамер с двумерным изображением лица из базы данных Download PDF

Info

Publication number
RU2578806C1
RU2578806C1 RU2014154163/08A RU2014154163A RU2578806C1 RU 2578806 C1 RU2578806 C1 RU 2578806C1 RU 2014154163/08 A RU2014154163/08 A RU 2014154163/08A RU 2014154163 A RU2014154163 A RU 2014154163A RU 2578806 C1 RU2578806 C1 RU 2578806C1
Authority
RU
Russia
Prior art keywords
image
person
face
database
dimensional image
Prior art date
Application number
RU2014154163/08A
Other languages
English (en)
Inventor
Иван Леонидович Журавлев
Алексей Андреевич Кадейшвили
Original Assignee
Общество с ограниченной ответственностью "Вокорд СофтЛаб" (ООО "Вокорд СофтЛаб")
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Общество с ограниченной ответственностью "Вокорд СофтЛаб" (ООО "Вокорд СофтЛаб") filed Critical Общество с ограниченной ответственностью "Вокорд СофтЛаб" (ООО "Вокорд СофтЛаб")
Priority to RU2014154163/08A priority Critical patent/RU2578806C1/ru
Application granted granted Critical
Publication of RU2578806C1 publication Critical patent/RU2578806C1/ru

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Image Analysis (AREA)
  • Collating Specific Patterns (AREA)

Abstract

Изобретение относится к области распознавания образов. Технический результат заключается в повышении точности определения сравниваемых изображений. Определяют двумерное исходное изображение лица человека, осуществляют сравнение двумерного изображения лица человека с двумерным изображением из основной базы данных; определяют степень схожести Q между исходным изображением и изображением в основной базе данных, выполняют сравнение исходного двумерного изображения лица человека с множеством двумерных изображений, хранящихся в дополнительной базе данных изображений, для каждого изображения лица из дополнительной базы данных изображений определяют степень схожести Q(i) с исходным двумерным изображением лица человека, где i - номер изображения из базы дополнительных изображений, для исходного изображения определяют пороговое значение Т на основании вычисленных значений степени схожести изображений Q(i); и на основании полученных значений степени схожести Q и порогового значения Т уведомляют о том, что лицо на исходном изображении и лицо на изображении из основной базы данных либо принадлежат, либо не принадлежат одному человеку. 3 н. и 16 з.п. ф-лы, 7 ил.

Description

ОБЛАСТЬ ТЕХНИКИ
Изобретение относится к области распознавания образов, а именно к способам сравнения лица человека с двумерным изображением лица из базы банных.
УРОВЕНЬ ТЕХНИКИ
Исходное изображение лица человека может быть получено известными различными способами, например с помощью фотоаппарата либо видеокамеры, либо посредством оцифровки фотографии на бумаге или фотопленке, либо из любых других источников, например из архива хранения двумерных изображений лиц или интернета.
Кроме указанных способов получения двумерного изображения лица с развитием компьютерных технологий и систем компьютерного зрения изображение лица человека может быть получено с помощью нескольких камер, образующих одну или несколько стереокамер. В этом случае первоначально получают трехмерное изображение лица человека, которое затем выравнивают к заданному ракурсу и получают проекцию трехмерного изображения на двумерную плоскость, которую затем сравнивают с изображением лица из базы данных. Такой способ получения двумерного изображения лица используется, например, в системе распознавания лиц Vocord FaceControl 3D, более подробно описанной на сайте компании (см. www.vocord.ru). Преимуществом такого способа получения изображения лица является то, что человек может быть повернут к камере под произвольным ракурсом в некотором допустимом диапазоне углов поворота головы, а изображение под требуемым ракурсом получают посредством обработки трехмерной модели. Известно, что на точность сравнения изображений лиц влияет ракурс изображений, поэтому такой способ позволяет с высокой эффективностью сравнивать и распознавать лица с лицами в базе данных, повернутыми к заданному ракурсу, в так называемом некооперативном режиме сравнения, т.е. в режиме, когда человек не обязательно смотрит в камеру под заданным ракурсом. Получаемое таким способом двумерное изображение лица будем называть в дальнейшем синтетическим двумерным изображением лица. Таким образом, в системе распознавания лиц сравнивают как обычные двумерные изображения лиц, так и синтетические изображения лиц, с некоторым изображением лица, хранящимся в базе данных.
После того как двумерное изображение лица (обычное либо синтетическое) получено, его сравнивают с изображением лица из базы данных с помощью автоматического алгоритма сравнения.
Известно, что в настоящее время существующие алгоритмы сравнений лиц не обладают 100% точностью сравнения. Последнее означает, что на множестве различных лиц сравнение автоматическим алгоритмом сравнения может дать как правильные результаты, так и ошибочные. В биометрическом сообществе проводят регулярно тесты и соревнования различных алгоритмов сравнения лиц, для различных условий (см., например, http://www.nist.gov/itl/iad/ig/face.cfm).
Эффективность алгоритмов сравнения принято характеризовать статистическими параметрами, среди которых используют ошибку ложноположительного сравнения (в англоязычной литературе FAR, т.е. «False Acceptance Rate») и ошибку ложноотрицательного сравнения (в англоязычной литературе FRR, т.е. "False Rejection Rate"). Данные величины вычисляются по следующим формулам:
FAR=FP/(FP+TN)
FRR=FN/(FN+TP)
В этих выражениях фигурируют следующие величины:
TN («True Negative», истинно отрицательные) - число сравнений, на которых изображены различные люди и которые были правильно распознаны как различные люди,
FN («False Negative», ложноотрицательные) - число сравнений, на которых изображены одинаковые люди, но которые были ошибочно распознаны как различные люди,
TP («True Positive», истинно положительные) - число сравнений, на которых изображены одинаковые люди и которые были правильно распознаны как одинаковые люди,
FP («False Positive», ложноположительные) - число сравнений, на которых изображены различные люди, но которые были ошибочно распознаны как одинаковые люди,
Работа алгоритма сравнения тем лучше, чем меньше значения FAR и FRR одновременно.
На практике, у существующих алгоритмов сравнения величина FRR растет с уменьшением FAR, и наоборот. Связано это с тем, что в алгоритме сравнения используют пороговую величину, называемую далее степенью схожести двух изображений. Степень схожести обычно возрастает для изображений одинаковых людей и уменьшается для изображений различных людей. Если степень схожести больше порога, то принимают, что на сравниваемых изображениях лица изображен один и тот же человек, и наоборот. Чем выше порог, тем меньше случаев, в которых разные лица будут приняты за одинаковые, но тем больше случаев, в которых одинаковые лица, снятые в разных условиях (например, с разным освещением, расхождением в возрасте или различными мимическими искажениями на лице), имеют степень схожести меньше порога. Таким образом, FAR уменьшается с ростом порога, a FRR - увеличивается.
Первым примером указанного способа сравнения лиц, в котором по двум изображениям лиц вычисляют степень схожести, которую потом сравнивают с порогом, является алгоритм сравнения, описанный в работе авторов С. Liu and Н. Wechsler, "A Gabor Feature Classifier for Face Recognition", Proceedings of the IEEE International Conference on Computer Vision, vol. 2, pp. 270-275, ICCV, Vancouver, Canada, July 9-12, 2001. В этой работе с помощью фильтров Габора вначале вычисляют векторы признаков для каждого из сравниваемых изображений лица и потом вычисляют степень различия между векторами признаков, за которую принимают либо норму L1 разности модулей компонент векторов признаков, либо норму L2 суммы квадратов разности компонент векторов, либо норму Махаланобиса, либо косинус угла между векторами. Степень схожести изображений в данном случае вычисляется через степень различия векторов признаков (чем меньше степень различия, тем больше степень схожести).
Вторым примером способа сравнения лиц, в котором по двум изображениям лиц вычисляют степень схожести, которую потом сравнивают с порогом, является алгоритм сравнения, основанный на методе локальных бинарных шаблонов для построения векторов признаков, описанный в работе авторов Di Huang,, Caifeng Shan, Mohsen Ardabilian, Yunhong Wang, Liming Chen «Local Binary Patterns and Its Application to Facial Image Analysis: A Survey» IEEE TRANSACTIONS ON SYSTEMS, MAN, AND CYBERNETICS-PART C: APPLICATIONS AND REVIEWS, VOL. 41, NO. 6, NOVEMBER 2011, p. 765. Локальные бинарные шаблоны для различных участков изображения лица формируют компоненты вектора признаков. Векторы признаков сравнивают, подсчитывая число совпадающих бит (0 или 1) в бинарных шаблонах, соответствующих различным участкам лица. Чем больше общее число совпадающих бит, тем более похожи изображения друг на друга и больше степень их схожести.
Третьим примером способа сравнения лиц, в котором по двум изображением лиц вычисляют степень схожести, которую потом сравнивают с порогом, является алгоритм сравнения, основанный на методе собственных векторов для изображений лиц (M. Turk, A. Pentland. "Eigenfaces for Recognition" Journal of Cognitive Neuroscience, Vol. 3, number 1, 1991< Massachusetts Institute of Technology). В этом методе изображение лица рассматривают как вектор, который раскладывают в линейную комбинацию собственных векторов ковариационной матрицы корреляций для тестового набора лиц. Коэффициенты разложения лица на собственные векторы принимают за вектор признаков лица, впоследствии векторы признаков сравнивают друг с другом с помощью заданной нормы сравнения, которую далее сравнивают с пороговым значением. В одной из вариаций способа (в так называемом методе главных компонент, в англоязычной литературе - РСА, «Principal Component Analysis») выбирают только те собственные векторы и их коэффициенты разложения, которые отвечают наибольшим собственным значениям векторов, что соответствует направлениям наибольших изменений в пространстве векторов лиц, собственные векторы с малыми собственными значениями отбрасывают.
Существует также способ сравнения лиц, в котором локальные признаки сравнения двух лиц, вычисляемые на локальных участках изображения лица, формируются в степень схожести с разными весами. Веса, входящие в конечную степень схожести, определяются с помощью алгоритма машинного обучения. Такой способ более эффективен для распознавания и уменьшает значения FAR и FRR, он реализован в виде алгоритма AdaBoost в популярной библиотеке компьютерного зрения OpenCV. Следует отметить, что в общем случае степень схожести на выходе алгоритма является действительным числом и может принимать также отрицательные значения. Тем не менее большим значениям степени схожести соответствуют одинаковые лица, а меньшим значениям - разные лица.
Указанные выше способы сравнения лиц, в которых по изображениям лиц вычисляют степень схожести, которую потом сравнивают с пороговым значением, являются прототипами заявленного изобретения.
В указанных способах сравнения, которые составляют прототип, степень схожести может зависеть от многих параметров, которые характеризуют исходное изображение лица. В этих способах в качестве исходных признаков, по которым вычисляется степень схожести, используется значения уровней сигнала в пикселах изображения, на значения которых влияют многие параметры. К ним относятся: шум на изображении, резкость, характер освещения лица, ракурс изображения, расстояние до лица, от которого зависит размер изображения лица в кадре, мимические искажения лица, элементы одежды и другие. Разные камеры имеют различающиеся шумовые характеристики, поэтому получаемые изображения приводят к различным значениям FAR, получаемые алгоритмы сравнения будут различны.
Недостатком прототипа является зависимость параметров FAR и FRR от качества исходного изображения, что сильно затрудняет процесс правильного определения схожих изображений и тем самым снижает точность результатов поиска аналогичных изображений.
РАСКРЫТИЕ ИЗОБРЕТЕНИЯ
Задачей заявленного изобретения является создание способа сравнения лица человека по базе данных двумерных изображений, при котором будет снижаться вероятность ошибки сравнения изображений.
Техническим результатом заявленного изобретения является повышение точности определения сравниваемых изображений за счет уменьшения количества ложных распознаваний.
Заявленный технический результат достигается за счет способа сравнения лица человека с помощью цифрового двумерного изображения лица либо с помощью изображения лица, полученного от одной или нескольких стереокамер, с двумерным изображением лица из базы данных, содержащего этапы, на которых:
- определяют двумерное исходное изображение лица человека, для которого необходимо провести сравнение;
- осуществляют сравнение упомянутого двумерного изображения лица человека с двумерным изображением из основной базы данных;
- определяют степень схожести Q между исходным изображением и изображением в основной базе данных;
- выполняют сравнение исходного двумерного изображения лица человека с множеством двумерных изображений, хранящихся в дополнительной базе данных изображений;
- для каждого изображения лица из дополнительной базы данных изображений определяют степень схожести Q(i) с указанным выше исходным двумерным изображением лица человека, где i - номер изображения из базы дополнительных изображений;
- для исходного изображения определяют пороговое значение Т на основании вычисленных значений степени схожести изображений Q(i);
- и на основании полученных значений степени схожести Q и порогового значения Т уведомляют о том, что лицо на исходном изображении и лицо на изображении из основной базы данных либо принадлежат, либо не принадлежат одному человеку.
В частном варианте осуществления изобретения цифровое двумерное изображение получают с помощью съемки фотоаппаратом, или видеокамерой, или посредством оцифровки фотографии на бумаге, или фотопленке, или из внешнего хранилища изображений.
В частном варианте осуществления изобретения внешнее хранилище данных представляет собой ресурс в сети Интернет.
В частном варианте осуществления изобретения дополнительно вычисляют гистограмму значений степени схожести Q(i) и по указанной гистограмме определяют пороговое значение Т.
В частном варианте осуществления изобретения дополнительно определяют ракурс области лица человека на исходном двумерном изображении.
В частном варианте осуществления изобретения дополнительно выполняют коррекцию ракурса области лица человека на изображении.
В частном варианте осуществления изобретения на этапе коррекции ракурса выполняют построение промежуточного трехмерного изображения лица человека по исходному изображению и осуществляют изменение ракурса трехмерного изображения в трехмерном пространстве для получения конечного трехмерного изображения лица человека.
В частном варианте осуществления изобретения строят синтетическое двумерное изображение по упомянутому конечному трехмерному изображению лица человека.
В частном варианте осуществления изобретения упомянутое синтетическое двумерное изображение используют для сравнения с изображениями в дополнительной базе данных.
В частном варианте осуществления изобретения упомянутое синтетическое изображение имеет ракурс, совпадающий с ракурсом двумерного изображения из базы данных, с которым требуется сравнить лицо человека.
В частном варианте осуществления изобретения скорректированный ракурс является фронтальным ракурсом.
В частном варианте осуществления изобретения этапы сравнения изображений по основной и дополнительной базе данных происходят параллельно.
В частном варианте осуществления изобретения дополнительно определяют значение FAR.
В частном варианте осуществления изобретения упомянутое значение FAR определяется из соотношения FAR=FP/N, где N - размер основной базы данных, FP - допустимое количество ложных положительных определений.
В частном варианте осуществления изобретения FP является константой.
В частном варианте осуществления изобретения значение FAR является константой.
В частном варианте осуществления изобретения дополнительно пороговое значение Т определяется в зависимости от значения FAR.
КРАТКОЕ ОПИСАНИЕ ЧЕРТЕЖЕЙ
На Фиг. 1 представлена гистограмма распределения попарных сравнений между изображениями тестовой базы лиц алгоритмом аналога, основанным на Adaboost + LBP, в зависимости от порога сравнения.
На Фиг. 2 представлено первое тестовое изображение, которое не содержится в базе данных.
На Фиг. 3 представлена гистограмма распределения сравнений между изображением лица на Фиг. 2 с изображениями из тестовой базы лиц алгоритмом аналога, основанным на Adaboost + LBP, в зависимости от порога сравнения.
На Фиг. 4 представлено второе тестовое изображение.
На Фиг. 5 представлена гистограмма распределения сравнений между изображением лица на Фиг. 2 и Фиг. 4 с изображениями из тестовой базы лиц алгоритмом аналога, основанным на Adaboost + LBP, в зависимости от порога сравнения.
На Фиг. 6 представлены основные этапы заявленного способа.
На Фиг. 7 представлен примерный вариант системы сравнения лиц в соответствии с заявленным способом.
ОСУЩЕСТВЛЕНИЕ ИЗОБРЕТЕНИЯ
На Фиг. 1 показана гистограмма распределения попарных сравнений между изображениями тестовой базы лиц алгоритмом аналога, основанным на Adaboost + LBP, накопленных в компании Вокорд, в зависимости от порога сравнения.
На Фиг. 2 представлено первое тестовое изображение, которое не содержится в базе данных.
На Фиг. 3 показана гистограмма распределения сравнений между первым изображением лица на Фиг. 2 с изображениями из тестовой базы лиц алгоритмом, основанным на Adaboost + LBP, в зависимости от порога сравнения.
Как следует из Фиг. 1 и Фиг. 3, гистограмма изображения на Фиг. 3 имеет разную дисперсию и разное среднее значение. Следовательно, если выбрать и зафиксировать порог для сравнения из гистограммы на Фиг. 1, задающий некоторое значение FAR, этот порог на гистограмме Фиг. 3 приведет к существенно отличающемуся FAR.
На Фиг. 4 показано второе тестовое изображение, а на Фиг. 5 - гистограмма распределения сравнений между первым и вторым изображением лиц с изображениями из тестовой базы лиц, тем же алгоритмом, что представлен на Фиг. 1 и Фиг. 3.
Сравнение Фиг. 1 и Фиг. 3 показывает, что гистограммы существенно отличаются, как минимум по среднему значению. Это означает, что для первого и второго изображений при равном пороге сравнения будут получены различающиеся значения FAR при сравнении с указанной тестовой базой изображений.
В качестве сценария использования, в котором существенен указанный недостаток прототипа, можно привести следующий пример.
Примером использования способа сравнения двумерных изображений лиц, в котором по изображением лиц вычисляют степень схожести, которую потом сравнивают с порогом, является так называемый «профайлинг» людей на транспортных узлах, например в метрополитене. В системе профайлинга устанавливают видеокамеру в местах прохода пассажиров (например, на входе в метро), получают изображения лиц, которые впоследствии сравнивают с изображениями лиц из базы данных. Задачей профайлинга является выявление подозрительных людей по оценке их движения внутри транспортной системы города. Для этого определяют факт пересечения зон контроля для заданного человека, сравнивают его изображение лица на разных узлах контроля, например на разных станциях метро. Оценивают также и время прохода человека. Указанная задача тестировалась с помощью системы распознавания лиц компании Vocord в метрополитене г. Москвы. Для решения указанной задачи группируют изображения лиц людей, зафиксированные в разных точках контроля в одну группу, считая, что все лица внутри группы принадлежат одному и тому же человеку. Для этого изображения лиц сравнивают между собой с достаточно высоким порогом. Тем не менее, поскольку алгоритм сравнения имеет малые, но конечные ошибки, существует отличная от нуля вероятность того, что в группу кроме одного человека попадет изображение другого человека. Если впоследствии изображение этого другого человека будет сравниваться с новыми изображениями лиц, поступающими от камер, установленных в точках контроля, то существует конечная вероятность, что это изображение привнесет в группу третье неправильное изображение и т.д., то есть при низком пороге сравнения при достаточно большом числе изображений в группе может оказаться несколько различных людей. Такая ситуация впоследствии значительно уменьшает эффективность профайлинга. Поэтому в указанной системе желательно заранее знать, с какой среднестатистической ошибкой FAR производится добавление изображений в одну группу.
Последнее обстоятельство крайне ограничивает эффективность профайлинга: если значения FAR при сравнении лиц меняются от точки контроля к точке контроля и неизвестно, то затрудняется оценка размера группы и порог, с которыми допустимо собирать группы, относящиеся к заданному человеку.
Как следует из приведенного примера использования и раскрытия прототипа, представляет интерес способ сравнения лиц, в котором можно получить относительно достоверную оценку для значений FAR, которые получают при сравнении лиц для существующих условий работы системы.
Для устранения указанного недостатка прототипа в предлагаемом способе предлагается использовать дополнительную базу данных изображений, с помощью которой задают порог сравнения для заданного изображения лица.
На Фиг. 6 и Фиг. 7 изображены этапы заявленного способа (100) сравнения лица человека с помощью цифрового двумерного изображения лица либо с помощью изображения лица от одной или нескольких стереокамер, с двумерным изображением лица из базы данных, а также система, включающая основные функциональные элементы для осуществления заявленного способа.
На этапе (110) определяют исходное двумерное изображение лица человека (300), для которого необходимо провести сравнение. Упомянутое изображение (300) может быть получено как с помощью устройств фиксации изображений (240), например фотокамера, видеокамера, стереокамера и т.п., так и быть уже заранее сформированным цифровым двумерным изображением (250).
Из существующего уровня техники широко известны способы получения цифровых данных, например оцифровка фотографии на бумаге, или фотопленке. Так же исходное цифровое изображение (250) лица человека может быть стандартным графическим файлом, полученным из внешнего хранилища данных, например, расположенного в сети Интернет (Интернет-ресурс) или в локальной сети.
На этапе (120) выполняют сравнение исходного двумерного изображения (300) с основной базой данных (260), в которой содержатся двумерные изображения лиц людей. Упомянутая основная база данных (260) может располагаться, например, на ЭВМ (устройство (200)), расположенном на стационарном пункте контроля, и содержать информацию о личностях, которым разрешен доступ в определенную зону. При сравнении на этапе (120) осуществляется выбор одного изображения из основной базы данных (260), с которым исходное двумерное изображение имеет большую степень схожести Q, которую определяют на этапе (130).
На этапе (140) упомянутое исходное изображение лица человека (300), для которого необходимо провести сравнение, дополнительно сравнивают с некоторым набором двумерных изображений, представляющих собой дополнительную базу изображений (270). В качестве дополнительной базы (270) данных может выступать практически любой набор изображений лиц, с известной априорной принадлежностью, т.е. заранее может быть известно, какие изображения принадлежат одному и тому же лицу, а какие - нет. Дополнительная база изображений (270) является внешней базой данных и может располагаться, например, в сети интернет, на внешнем машиночитаемом носителе, в локальной сети, в сети Интранет и т.п. Основная база данных (260) и дополнительная база изображений (270) могут являться динамическими базами данных.
В упомянутой дополнительной базе данных (270) может заранее содержаться изображение лица человека, для которого происходит сравнение или изображение упомянутого лица может отсутствовать.
Далее на этапе (150) для каждого изображения из дополнительной базы данных (270) с помощью алгоритма автоматического сравнения вычисляют степень схожести Q(i) с указанным выше исходным изображением лица человека (300). Затем на этапе (160) на основе полученного массива степеней схожести определяют пороговое значение Т сравнения исходного изображения лица (300). В качестве порога выбирается:
Figure 00000001
,
где N - размер дополнительной базы данных, far - желаемая ошибка FAR,
Figure 00000002
- размер множества.
При принятии решения на этапе (170), совпадает ли лицо на исходном изображении (300) и лицо из основной базы данных (260), в качестве критерия принимают сравнение с вычисленным порогом Т - если значение Q оказывается больше Т, то принимают лица одинаковыми, в противном случае - разными. Процесс сравнения исходного изображения (300) с изображениями из дополнительной (270) и основной (260) баз данных может проходить как последовательно, так и параллельно, т.к. при вычислении степени схожести сравнения изображений использование известного значения порога Т необязательно.
Желаемая ошибка FAR может быть как фиксированной, так и вычисляться исходя из желаемой абсолютной ошибки. Так если при работе системы допустимо абсолютное количество ложных положительных сравнений FP, то желаемая ошибка FAR вычисляется из формулы FAR=FP/N, где N - размер основной базы данных, a FP - допустимое количество ложных положительных определений. В частном случае значение FAR может являться константой.
В случае, если в дополнительной базе данных (270) находится лицо человека, изображение которого мы сравниваем, в формулу вносится незначительное изменение:
Figure 00000003
,
где N1 - количество изображений данного человека в дополнительной базе данных (270).
В частном варианте осуществления заявленного способа вместо степени схожести Q может использоваться степень различия Q′. В этом случае формулы расчета имеют следующий вид:
Figure 00000004
Figure 00000005
В этом случае решение о наличии схожих изображений лица человека принимается исходя из условия Q′<Т′, в противном случае изображения лиц считают разными.
В частном варианте осуществления заявленного изобретения на этапе определения порогового значения Т может выполняться построение гистограммы значений степени схожести Q(i), по которой будет определено пороговое значение Т. На основе построенной гистограммы может быть статистически предсказано распределение степеней схожести изображений разных лиц, из которого может быть определено пороговое значение Т.
В частном варианте осуществления на исходном изображении лица человека (300) выполняется определение ракурса лица человека. При необходимости ракурс лица человека на изображении (300) подвергается коррекции, для чего осуществляют построение промежуточной трехмерной модели лица человека по исходному изображению (300). Далее в трехмерном пространстве выполняют поворот полученной трехмерной модели лица человека до заданного ракурса, например фронтального, и затем осуществляют создание синтетического двумерного изображения по трехмерной модели с заданным ракурсом. Полученное таким образом синтетическое двумерное изображение сравнивают с дополнительной базой данных (270). Упомянутое синтетическое двумерное изображение используется совместно с исходным изображением лица человека (300) для определения наличия схожего изображения в основной базе изображений (260).
Система, представленная на Фиг. 7, реализующая заявленный способ (100), включает в себя устройство (200), содержащее процессорный блок (210), включающий в себя один или более процессоров, модули ввода/вывода (220) и память (230).
В качестве устройства (200) может использоваться, например, один или более стационарных и/или мобильных компьютеров, объединенных посредством сети передачи данных проводного и/или беспроводного типа, карманный компьютер (КПК), планшет, смартфон, фаблет, мейнфрейм и т.п. Память (230) в зависимости от типа устройства (200) может представлять собой, но не ограничиваться: оперативное запоминающее устройство (ОЗУ; RAM), постоянное запоминающее устройство (ПЗУ; ROM), кэш-память, флэш-память, жесткий диск, твердотельный накопитель или любой другой подходящий носитель памяти, содержащий инструкции, которые при их выполнении процессорным блоком (210) реализуют действия этапов (110)-(170) способа сравнения лица человека с помощью цифрового двумерного изображения лица либо с помощью изображения лица от одной или нескольких стереокамер, с двумерным изображением лица из базы данных.
Уведомление о наличии схожего изображения лица человека либо об отсутствии схожих изображений может выводиться на дисплей устройства (200). В частных вариантах реализации упомянутое уведомление может представлять собой, но не ограничиваться: звуковой сигнал, световой сигнал, вибрацию и т.п. Вариант уведомления полностью зависит от программно-аппаратных возможностей устройства (200) в зависимости от его воплощения. Уведомление также может посылаться на носимые внешние устройства, такие как: очки, например Google Glass, браслеты на основе операционной системы, например Android, iOS, WP, кольца с RFID или NFC модулями и т.п. В случае использования носимых устройств управляющий сигнал, содержащий сведения уведомления о результатах сравнения изображения лица человека, может поступать от устройства (200), связанного с упомянутыми носимыми устройствами с помощью беспроводной связи, например Bluetooth, WI-FI, IRDA, NFC и т.п.
Заявленное изобретение так же может быть воплощено на машиночитаемом носителе данных, который содержащий машиночитаемые инструкции для сравнения лица человека с помощью цифрового двумерного изображения лица, либо с помощью изображения лица от одной или нескольких стереокамер, с двумерным изображением лица из базы данных, которые при их обработке одним или более процессором выполняют вышеуказанные этапы (110)-(170) способа (100). Носитель данных может быть пригодным для применения в вышеупомянутом устройстве (200) и может представлять собой, но не ограничиваться: USB-флэш карту, SD -, Micro SD -, Mini SD -, XD -, MMC - карту памяти, CD-, DVD-, BlueRay - диск, HDD-, SSD - жесткий диск или любой другой пригодный носитель данных.
Изложенные в настоящих материалах заявки сведения об осуществлении заявленного изобретения не должны трактоваться как сведения, ограничивающие иные, частные варианты осуществления заявленного изобретения, не выходящие за пределы раскрытия информации заявки и которые должны являться очевидными для специалиста в данной области техники, имеющего обычную квалификацию, на которых рассчитано заявленное техническое решение.
Предложенный способ рекомендован к использованию в аэропортах, вокзалах, метрополитене для использования в системах идентификации личностей, статистического анализа, контроля попыток безбилетного прохождения турникетов, в правоохранительных органах для поиска правонарушителей в потоке людей, для идентификации пользователей компьютера, а также для идентификации личностей на предприятиях с пропускным режимом.

Claims (19)

1. Способ сравнения двумерного изображения лица человека с двумерным изображением лица из базы данных, содержащий этапы, на которых:
- определяют двумерное исходное изображение лица человека, для которого необходимо провести сравнение;
- осуществляют сравнение упомянутого двумерного изображения лица человека с двумерным изображением из основной базы данных;
- определяют степень схожести Q между исходным изображением и изображением в основной базе данных;
- выполняют сравнение исходного двумерного изображения лица человека с множеством двумерных изображений, хранящихся в дополнительной базе данных изображений;
- для каждого изображения лица из дополнительной базы данных изображений определяют степень схожести Q(i) с указанным выше исходным двумерным изображением лица человека, где i - номер изображения из базы дополнительных изображений;
- для исходного изображения определяют пороговое значение Т на основании вычисленных значений степени схожести изображений Q(i);
- и на основании полученных значений степени схожести Q и порогового значения Т уведомляют о том, что лицо на исходном изображении и лицо на изображении из основной базы данных либо принадлежат, либо не принадлежат одному человеку.
2. Способ по п. 1, отличающийся тем, что цифровое двумерное изображение получают с помощью съемки фотокамерой или видеокамерой, или посредством оцифровки фотографии на бумаге или фотопленке, или из внешнего хранилища изображений.
3. Способ по п. 2, отличающийся тем, что внешнее хранилище данных представляет собой ресурс в сети Интернет.
4. Способ по п. 1, отличающийся тем, что дополнительно вычисляют гистограмму значений степени схожести Q(i) и по указанной гистограмме определяют пороговое значение Т.
5. Способ по п. 1, отличающийся тем, что дополнительно определяют ракурс области лица человека на исходном двумерном изображении.
6. Способ по п. 5, отличающийся тем, что дополнительно выполняют коррекцию ракурса области лица человека на изображении.
7. Способ по п. 6, отличающийся тем, что на этапе коррекции ракурса выполняют построение промежуточного трехмерного изображения лица человека по исходному изображению и осуществляют изменение ракурса трехмерного изображения в трехмерном пространстве для получения конечного трехмерного изображения лица человека.
8. Способ по п. 7, отличающийся тем, что строят синтетическое двумерное изображение по упомянутому конечному трехмерному изображению лица человека.
9. Способ по п. 8, отличающийся тем, что упомянутое синтетическое двумерное изображение используют для сравнения с изображениями в дополнительной базе данных.
10. Способ по п. 8, отличающийся тем, что упомянутое синтетическое изображение имеет ракурс, совпадающий с ракурсом двумерного изображения из базы данных, с которым требуется сравнить лицо человека.
11. Способ по п. 10, отличающийся тем, что скорректированный ракурс является фронтальным ракурсом.
12. Способ по п. 1, отличающийся тем, что этапы сравнения изображений по основной и дополнительной базе данных происходят параллельно.
13. Способ по п. 1, отличающийся тем, что дополнительно определяют значение ошибки ложного положительного сравнения (FAR).
14. Способ по п. 13, отличающийся тем, что упомянутое значение FAR определяется из соотношения FAR=FP/N, где N - размер основной базы данных, FP - допустимое количество ложных положительных определений.
15. Способ по п. 14, отличающийся тем, что FP является константой.
16. Способ по п. 13, отличающийся тем, что значение FAR является константой.
17. Способ по п. 1, отличающийся тем, что дополнительно пороговое значение Т определяется в зависимости от значения FAR.
18. Устройство для сравнения двумерного изображения лица человека с двумерным изображением лица из базы данных, содержащее один или более процессоров, модули ввода/вывода и память, причем память содержит машиночитаемые инструкции, которые при их исполнении по меньшей мере одним процессором выполняют способ по любому из пп. 1-17.
19. Машиночитаемый носитель данных, содержащий машиночитаемые команды, которые при их выполнении одним или более процессором реализуют выполнение способа сравнения двумерного изображения лица человека с двумерным изображением лица из базы данных по любому из пп. 1-17.
RU2014154163/08A 2014-12-30 2014-12-30 Способ сравнения лица человека с помощью цифрового двумерного изображения лица либо с помощью изображения лица от одной или нескольких стереокамер с двумерным изображением лица из базы данных RU2578806C1 (ru)

Priority Applications (1)

Application Number Priority Date Filing Date Title
RU2014154163/08A RU2578806C1 (ru) 2014-12-30 2014-12-30 Способ сравнения лица человека с помощью цифрового двумерного изображения лица либо с помощью изображения лица от одной или нескольких стереокамер с двумерным изображением лица из базы данных

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
RU2014154163/08A RU2578806C1 (ru) 2014-12-30 2014-12-30 Способ сравнения лица человека с помощью цифрового двумерного изображения лица либо с помощью изображения лица от одной или нескольких стереокамер с двумерным изображением лица из базы данных

Publications (1)

Publication Number Publication Date
RU2578806C1 true RU2578806C1 (ru) 2016-03-27

Family

ID=55656862

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2014154163/08A RU2578806C1 (ru) 2014-12-30 2014-12-30 Способ сравнения лица человека с помощью цифрового двумерного изображения лица либо с помощью изображения лица от одной или нескольких стереокамер с двумерным изображением лица из базы данных

Country Status (1)

Country Link
RU (1) RU2578806C1 (ru)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2679730C1 (ru) * 2016-09-20 2019-02-12 Тосиба Инфрастракче Системз Энд Солюшнз Корпорейшн Система сопоставления изображений и способ сопоставления изображений

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7929733B1 (en) * 2006-02-17 2011-04-19 Verizon Patent And Licensing Inc. Biometric identification and analysis
RU2431191C2 (ru) * 2009-01-27 2011-10-10 Государственное образовательное учреждение высшего профессионального образования Академия Федеральной службы охраны Российской Федерации (Академия ФСО России) Способ идентификации личности человека по цифровому изображению лица
RU2490710C1 (ru) * 2012-07-23 2013-08-20 Федеральное государственное бюджетное образовательное учреждение высшего профессионального образования "Санкт-Петербургский государственный электротехнический университет "ЛЭТИ" им. В.И. Ульянова (Ленина)" Способ распознавания изображений лиц и система для его осуществления

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7929733B1 (en) * 2006-02-17 2011-04-19 Verizon Patent And Licensing Inc. Biometric identification and analysis
RU2431191C2 (ru) * 2009-01-27 2011-10-10 Государственное образовательное учреждение высшего профессионального образования Академия Федеральной службы охраны Российской Федерации (Академия ФСО России) Способ идентификации личности человека по цифровому изображению лица
RU2490710C1 (ru) * 2012-07-23 2013-08-20 Федеральное государственное бюджетное образовательное учреждение высшего профессионального образования "Санкт-Петербургский государственный электротехнический университет "ЛЭТИ" им. В.И. Ульянова (Ленина)" Способ распознавания изображений лиц и система для его осуществления

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2679730C1 (ru) * 2016-09-20 2019-02-12 Тосиба Инфрастракче Системз Энд Солюшнз Корпорейшн Система сопоставления изображений и способ сопоставления изображений
US10515457B2 (en) 2016-09-20 2019-12-24 Kabushiki Kaisha Toshiba Image collation system and image collation method

Similar Documents

Publication Publication Date Title
US10726244B2 (en) Method and apparatus detecting a target
US11908238B2 (en) Methods and systems for facial point-of-recognition (POR) provisioning
Chakraborty et al. An overview of face liveness detection
US20170262472A1 (en) Systems and methods for recognition of faces e.g. from mobile-device-generated images of faces
JP4241763B2 (ja) 人物認識装置及びその方法
Bekhouche et al. Facial age estimation and gender classification using multi level local phase quantization
US20210012094A1 (en) Two-stage person searching method combining face and appearance features
US20160026854A1 (en) Method and apparatus of identifying user using face recognition
US11710297B2 (en) System and method for detecting potential matches between a candidate biometric and a dataset of biometrics
US20190114470A1 (en) Method and System for Face Recognition Based on Online Learning
WO2020172870A1 (zh) 一种目标对象的移动轨迹确定方法和装置
Voronov et al. Faces 2D-recognition аnd identification using the HOG descriptors method
Ban et al. Tiny and blurred face alignment for long distance face recognition
Uhl et al. Combining face with face-part detectors under gaussian assumption
JP2010271861A (ja) オブジェクト識別装置及びオブジェクト識別方法
Tistarelli et al. Biometrics in forensic science: challenges, lessons and new technologies
Jafri et al. Face Recognition using Deep Neural Network with" LivenessNet"
JP2016167164A (ja) 画像認識装置、画像認識方法、及び画像認識プログラム
US20160239682A1 (en) Method and system of enforcing privacy policies for mobile sensory devices
US11087121B2 (en) High accuracy and volume facial recognition on mobile platforms
US10621419B2 (en) Method and system for increasing biometric acceptance rates and reducing false accept rates and false rates
RU2578806C1 (ru) Способ сравнения лица человека с помощью цифрового двумерного изображения лица либо с помощью изображения лица от одной или нескольких стереокамер с двумерным изображением лица из базы данных
JP2006293720A (ja) 顔検出装置、顔検出方法、及び顔検出プログラム
Narang et al. Learning deep features for hierarchical classification of mobile phone face datasets in heterogeneous environments
JP6714634B2 (ja) 照合装置及び照合方法

Legal Events

Date Code Title Description
QB4A Licence on use of patent

Free format text: LICENCE FORMERLY AGREED ON 20190813

Effective date: 20190813

PC41 Official registration of the transfer of exclusive right

Effective date: 20190814

PC41 Official registration of the transfer of exclusive right

Effective date: 20200605