RU2659746C2 - Способ и устройство обработки изображений - Google Patents
Способ и устройство обработки изображений Download PDFInfo
- Publication number
- RU2659746C2 RU2659746C2 RU2016136709A RU2016136709A RU2659746C2 RU 2659746 C2 RU2659746 C2 RU 2659746C2 RU 2016136709 A RU2016136709 A RU 2016136709A RU 2016136709 A RU2016136709 A RU 2016136709A RU 2659746 C2 RU2659746 C2 RU 2659746C2
- Authority
- RU
- Russia
- Prior art keywords
- person
- information
- image
- shooting
- recognized
- Prior art date
Links
- 238000012545 processing Methods 0.000 title claims abstract description 37
- 238000000034 method Methods 0.000 title claims description 48
- 238000003672 processing method Methods 0.000 claims description 15
- 230000015572 biosynthetic process Effects 0.000 claims 1
- 239000000126 substance Substances 0.000 abstract 1
- 238000010586 diagram Methods 0.000 description 26
- 238000013459 approach Methods 0.000 description 8
- 238000004891 communication Methods 0.000 description 8
- 238000013527 convolutional neural network Methods 0.000 description 6
- 239000011159 matrix material Substances 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 5
- 230000005236 sound signal Effects 0.000 description 4
- 238000000605 extraction Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000007493 shaping process Methods 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 2
- 238000000354 decomposition reaction Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000003058 natural language processing Methods 0.000 description 2
- 238000012549 training Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000006978 adaptation Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 239000012634 fragment Substances 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000010248 power generation Methods 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/30—Scenes; Scene-specific elements in albums, collections or shared content, e.g. social network photos or video
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
- G06F16/5838—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
- G06F16/5846—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using extracted text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/5866—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, manually generated location and time information
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/60—Editing figures and text; Combining figures or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
- G06V40/173—Classification, e.g. identification face re-identification, e.g. recognising unknown faces across different face tracks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/2362—Generation or processing of Service Information [SI]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
- H04N21/4345—Extraction or processing of SI, e.g. extracting service information from an MPEG stream
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
- G06T2207/30201—Face
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V2201/00—Indexing scheme relating to image or video recognition or understanding
- G06V2201/10—Recognition assisted with metadata
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/179—Human faces, e.g. facial parts, sketches or expressions metadata assisted face recognition
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- General Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Library & Information Science (AREA)
- Human Computer Interaction (AREA)
- Oral & Maxillofacial Surgery (AREA)
- General Health & Medical Sciences (AREA)
- Databases & Information Systems (AREA)
- Health & Medical Sciences (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Evolutionary Biology (AREA)
- Evolutionary Computation (AREA)
- Bioinformatics & Computational Biology (AREA)
- Artificial Intelligence (AREA)
- Life Sciences & Earth Sciences (AREA)
- Signal Processing (AREA)
- Processing Or Creating Images (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Collating Specific Patterns (AREA)
- Image Analysis (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Изобретение относится к устройству обработки изображений. Технический результат заключается в повышении точности формирования описания изображения. Такой результат достигается тем, что распознают лицо на изображении пользователя, получают информацию о личности, соответствующей распознанному лицу, содержащую по крайней мере однозначный идентификатор человека, соответствующего данному лицу, и отношения между человеком, соответствующим лицу, и пользователем, получают информацию о съемке изображения, где информация о съемке содержит по крайней мере один из аспектов: время съемки и место съемки изображения и формируют описание изображения в соответствии с информацией о личности и информацией о съемке. 3 н. и 12 з.п. ф-лы, 13 ил.
Description
Настоящая заявка основана на и испрашивает приоритет китайской патентной заявки №2015108131405, поданной 20 ноября 2015 г., все содержание которой включено в настоящий документ посредством ссылки.
ОБЛАСТЬ ТЕХНИКИ, К КОТОРОЙ ОТНОСИТСЯ ИЗОБРЕТЕНИЕ
[0001] Настоящее изобретение относится к области обработки изображений, в частности, к способу и устройству обработки изображений.
УРОВЕНЬ ТЕХНИКИ
[0002] В настоящее время по мере развития распознавания изображений проводится все больше исследований глубоких смыслов, выраженных изображениями. Однако существующие системы автоматического текстового описания изображений предоставляют только простые описания людей или объектов изображений, а, следовательно, пользователь не может получить информацию о взаимоотношениях между людьми в соответствии с такими описаниями.
СУЩНОСТЬ ИЗОБРЕТЕНИЯ
[0003] Варианты осуществления настоящего изобретения предлагают способ и устройство обработки изображений, как описано далее.
[0004] В соответствии с первым аспектом вариантов осуществления настоящего изобретения предлагается способ обработки изображений, содержащий следующие этапы:
распознают лицо на изображении пользователя;
получают информацию о личности, соответствующей распознанному лицу, содержащую по крайней мере однозначный идентификатор человека, соответствующего данному лицу, и отношения между человеком, соответствующим лицу, и пользователем;
получают информацию о съемке изображения, где информация о съемке содержит по крайней мере один из аспектов: время съемки и место съемки изображения; и
формируют описание изображения в соответствии с информацией о личности и информацией о съемке.
[0005] В некоторых случаях получение информации о личности, соответствующей распознанному лицу, содержит следующие этапы:
получают заданную базу личных данных, содержащую соответствующие связи между лицами и информацией о личности;
сравнивают распознанное лицо с лицами из заданной базы личных данных для поиска лица в заданной базе личных данных, соответствующего распознанному лицу; и
получают информацию о личности, соответствующей распознанному лицу из заданной базы личных данных, соответствующему распознанному лицу.
[0006] В некоторых случаях получение информации о личности, соответствующей распознанному лицу, содержит следующие этапы:
получают контактную информацию пользователя, содержащую головные портреты и информацию о личности контактных лиц;
сравнивают распознанное лицо с головными портретами контактных лиц для поиска головного портрета контактного лица, соответствующего распознанному лицу; и
получают информацию о личности, соответствующей головному портрету контактного лица, соответствующему распознанному лицу.
[0007] В некоторых случаях формирование описания изображения в соответствии с информацией о личности и информацией о съемке содержит следующие этапы:
распознают объект на изображении для определения наименования этого объекта; и
формируют описание изображения в соответствии с информацией о личности, информацией о съемке и наименованием объекта.
[0008] В некоторых случаях указанный способ дополнительно содержит следующие этапы:
группируют изображения пользователя; и
формируют описание каждой группы изображений в соответствии с описанием каждого изображения в группе.
[0009] В некоторых случаях группировка изображений пользователя содержит следующие этапы:
группируют изображения по крайней мере по одному из следующих признаков: время съемки, место съемки и лиц на изображениях.
[0010] В некоторых случаях указанный способ дополнительно содержит следующие этапы:
демонстрируют группы и описания каждой группы изображений при получении команды просмотра, направляемой пользователем.
[0011] В некоторых случаях демонстрация групп и описаний каждой группы изображений дополнительно содержит следующие этапы:
демонстрируют изображения в каждой группе и описания изображений в режиме показа слайдов.
[0012] В соответствии со вторым аспектом вариантов осуществления настоящего изобретения предлагается устройство обработки изображений, содержащее:
распознающий модуль, выполненный с возможностью распознавания лиц на изображении пользователя;
определяющий модуль, выполненный с возможностью определения информации о личности, соответствующей лицу, распознанному распознающим модулем; при этом информация о личности содержит по крайней мере однозначный идентификатор человека в соответствии с лицом и отношения между этим человеком и пользователем;
запрашивающий модуль, выполненный с возможностью получения информации о съемке, содержащей по крайней мере один из аспектов: время съемки и место съемки; и
первый формирующий модуль, выполненный с возможностью формирования описания изображения в соответствии с информацией о личности, определенной определяющим модулем, и информацией о съемке, полученной запрашивающим модулем.
[0013] В некоторых случаях определяющий модуль дополнительно содержит:
первый запрашивающий субмодуль, выполненный с возможностью получения заданной базы личных данных, содержащей соответствующие связи между лицами и информацией о личности;
первый сравнивающий субмодуль, выполненный с возможностью сравнения лица, распознанного распознающим модулем, с лицами в заданной базе личных данных, полученной первым запрашивающим субмодулем, для поиска лица в заданной базе личных данных, соответствующего распознанному лицу; и
второй запрашивающий субмодуль, выполненный с возможностью определения информации о личности, соответствующей лицу в заданной базе личных данных, соответствующему распознанному лицу.
[0014] В некоторых случаях определяющий модуль содержит:
третий запрашивающий субмодуль, выполненный с возможностью получения контактной информации пользователя, содержащей головные портреты и информацию о личности контактных лиц;
второй сравнивающий субмодуль, выполненный с возможностью сравнения лица, распознанного распознающим модулем, с головными портретами контактных лиц для поиска головного портрета контактного лица, соответствующего распознанному лицу; и
четвертый запрашивающий субмодуль, выполненный с возможностью получения информации о личности, соответствующей головному портрету контактного лица, соответствующему распознанному лицу.
[0015] В некоторых случаях первый формирующий модуль содержит:
распознающий субмодуль, выполненный с возможностью распознавания объекта на изображении для определения наименования такого объекта; и
формирующий субмодуль, выполненный с возможностью формирования описания изображения в соответствии с информацией о личности, определенной определяющим модулем, информацией о съемке, полученной запрашивающим модулем, и наименованием объекта, распознанного распознающим субмодулем.
[0016] В некоторых случаях устройство дополнительно содержит:
группирующий модуль, выполненный с возможностью группировки изображений пользователя; и
второй формирующий модуль, выполненный с возможностью формирования описания каждой группы изображений в соответствии с описанием каждого изображения в группе, сформированным первым формирующим модулем.
[0017] В некоторых случаях группирующий модуль выполнен с возможностью группировки изображений по крайней мере по одному из следующих признаков: время съемки и место съемки изображений, определенные запрашивающим модулем, и лица на изображениях, распознанные распознающим модулем.
[0018] В некоторых случаях устройство дополнительно содержит:
демонстрационный модуль, выполненный с возможностью демонстрации групп и описаний каждой группы изображений, сформированных вторым формирующим модулем, при получении команды просмотра, направляемой пользователем.
[0019] В некоторых случаях демонстрационный модуль выполнен с возможностью демонстрации изображений в каждой группе и описаний изображений, сформированных первым формирующим модулем, в режиме показа слайдов.
[0020] В соответствии с третьим аспектом вариантов осуществления настоящего изобретения предлагается устройство для обработки изображений, содержащее:
процессор; и
память, выполненную с возможностью хранения команд, исполняемых процессором,
при этом процессор выполнен с возможностью:
распознавания лица на изображении пользователя;
получения информации о личности, соответствующей распознанному лицу, содержащей по крайней мере однозначный идентификатор человека, соответствующего лицу, и отношения между человеком, соответствующим лицу, и пользователем;
получения информации о съемке изображения, где информация о съемке содержит по крайней мере один из аспектов: время съемки и место съемки изображения; и
формирования описания изображения в соответствии с информацией о личности и информацией о съемке.
[0021] В соответствии с техническими решениями в вариантах осуществления настоящего изобретения могут быть достигнуты следующие технические результаты.
[0022] В варианте осуществления изобретения распознают лицо на изображении и формируют описание изображения в соответствии с информацией о личности, соответствующей лицу, а также информацией о съемке изображения, таким образом, формируют более точное описание изображения, способность к автоматическому описанию изображения улучшается и приближается к способности описания изображения человеком, пользователь может оперативно получать точную информацию о каждом изображении, и пользовательский опыт улучшается.
[0023] В другом варианте осуществления из обретения могут точно получить информацию о личности на изображении, следовательно, могут сформировать более точное описание изображения, способность к автоматическому описанию изображения улучшается и приближается к способности описания изображения человеком, пользователь может оперативно получать точную информацию о каждом изображении, и пользовательский опыт улучшается.
[0024] Еще в одном варианте осуществления изобретения формируют описание изображения в сответствии с разными типами соответствующей информации об изображении, делая описание, таким образом, более точным, способность к автоматическому описанию изображения улучшается и приближается к способности описания изображения человеком, пользователь может оперативно получать точную информацию о каждом изображении, и пользовательский опыт улучшается.
[0025] Еще в одном варианте осуществления изобретения изображения описывают группой, демонстрируя сгруппированные изображения и их описание, таким образом, пользователь может оперативно получать точную информацию о каждой группе изображений, и пользовательский опыт улучшается.
[0026] Следует понимать, что как предшествующие общие описания, так и нижеследующие подробные описания являются лишь примерами, служат лишь для пояснения и не ограничивают настоящее изобретение.
КРАТКОЕ ОПИСАНИЕ ЧЕРТЕЖЕЙ
[0027] Сопровождающие чертежи, включенные в настоящий документ и составляющие его часть, иллюстрируют варианты осуществления изобретения, соответствующие настоящему раскрытию, и вместе с настоящим описанием служат для пояснения принципов настоящего изобретения.
[0028] Фиг. 1 представляет собой схему, иллюстрирующую способ обработки изображений в соответствии с примерным вариантом осуществления настоящего изобретения.
[0029] Фиг. 2 представляет собой схему, иллюстрирующую способ обработки изображений в соответствии с другим примерным вариантом осуществления настоящего изобретения.
[0030] Фиг. 3 представляет собой схему, иллюстрирующую способ обработки изображений в соответствии с другим примерным вариантом осуществления настоящего изобретения.
[0031] Фиг. 4 представляет собой схему, иллюстрирующую способ обработки изображений в соответствии с другим примерным вариантом осуществления настоящего изобретения.
[0032] Фиг. 5 представляет собой схему, иллюстрирующую способ обработки изображений в соответствии с другим примерным вариантом осуществления настоящего изобретения.
[0033] Фиг. 6 представляет собой блок-схему, иллюстрирующую устройство обработки изображений в соответствии с примерным вариантом осуществления настоящего изобретения.
[0034] Фиг. 7 представляет собой блок-схему, иллюстрирующую определяющий модуль в соответствии с примерным вариантом осуществления настоящего изобретения.
[0035] Фиг. 8 представляет собой блок-схему, иллюстрирующую определяющий модуль в соответствии с другим примерным вариантом осуществления настоящего изобретения.
[0036] Фиг. 9 представляет собой блок-схему, иллюстрирующую первый формирующий модуль в соответствии с примерным вариантом осуществления настоящего изобретения.
[0037] Фиг. 10 представляет собой блок-схему, иллюстрирующую устройство обработки изображений в соответствии с другим примерным вариантом осуществления настоящего изобретения.
[0038] Фиг. 11 представляет собой блок-схему, иллюстрирующую устройство обработки изображений в соответствии с другим примерным вариантом осуществления настоящего изобретения.
[0039] Фиг. 12 представляет собой блок-схему, иллюстрирующую устройство обработки изображений в соответствии с примерным вариантом осуществления настоящего изобретения.
[0040] Фиг. 13 представляет собой блок-схему, иллюстрирующую устройство обработки изображений в соответствии с примерным вариантом осуществления настоящего изобретения.
РАСКРЫТИЕ ИЗОБРЕТЕНИЯ
[0041] Далее будут подробно рассмотрены примерные варианты осуществления изобретения, иллюстрируемые сопровождающими чертежами. Дальнейшее описание ссылается на сопровождающие чертежи, в которых одинаковые номера на разных чертежах обозначают одинаковые или подобные элементы, если не указано иное. Варианты осуществления, рассмотренные в нижеследующем описании примерных вариантов осуществления изобретения, не представляют все варианты осуществления, соответствующие настоящему изобретению. Напротив, они представляют собой лишь примеры устройств и способов, соответствующих аспектам, относящимся к настоящему изобретению согласно прилагаемой формуле изобретения.
[0042] Варианты осуществления настоящего изобретения представляют техническое решение, относящееся к терминалу или серверу. В соответствии с данным решением распознают лицо на изображении, получают информацию о личности, соответствующей распознанному лицу, и формируют описание изображения в соответствии с информацией о личности.
[0043] Терминал может быть представлен любым устройством с функцией обработки изображений, таким как мобильный телефон, компьютер, цифровой передающий терминал, устройство рассылки сообщений, игровая консоль, планшетный компьютер, медицинское устройство, тренировочное оборудование, карманный персональный компьютер и т.д.
[0044] Фиг. 1 представляет собой схему, иллюстрирующую способ обработки изображений в соответствии с примерным вариантом осуществления настоящего изобретения. Как показано на Фиг. 1, способ обработки изображения, применяемый терминалом или сервером, содержит следующие этапы.
[0045] На этапе S11 распознают лицо на изображении.
[0046] Например, могут использовать способы, основанные на выделении геометрических признаков, матричные способы и способы, основанные на использовании модели. Среди них матричные способы можно классифицировать на способы, основанные на корреляционном распознавании, способы собственных лиц, способы линейного дискриминантного анализа, способы разложения по сингулярным числам матрицы, способы нейросетей, способы сопоставления динамических связей и т.п. Способы, основанные на использовании модели, включают в себя способы, основанные на скрытой Марковской модели, активной модели формы и активной наглядной модели и т.д.
[0047] На этапе S12 получают информацию о личности, соответствующей распознанному лицу. Информация о личности содержит по крайней мере однозначный идентификатор человека, соответствующего лицу, и отношения между человеком, соответствующим лицу, и пользователем.
[0048] Идентификатор человека может представлять собой идентификатор, определяющий личность человека, например, имя, сетевой аккаунт, ник, кодовое имя человека и т.д. Отношения между человеком и пользователем могут подразумевать семейные отношения, родство, отношения одноклассников, отношения коллег, отношения друзей и т.д.
[0049] На этапе S13 получают информацию о съемке изображения. Информация о съемке содержит по крайней мере один из аспектов: время съемки и место съемки изображения.
[0050] Информацию о съемке изображения могут получать из заменяемого файла образа (сокращенно - ЗФ О (exif)) изображения. ЗФ О содержит метаданные, специально сформированные для фотографий цифровой камеры и содержащие по крайней мере следующие типы информации о записи цифровых фотографий:
время съемки, фотооборудование (например, основной блок оборудования, линзы, фотовспышка и т.д.), параметры съемки (например, выдержка затвора, апертурное число объектива, скорость ISO, фокусное расстояние, режим измерения экспозиции и т.д.), параметры обработки изображения (например, резкость, контраст, цветовая насыщенность, баланс белого и т.д.), описание изображения и информация об авторском праве, место съемки (например, данные системы глобального позиционирования (GPS) и т.д.), уменьшенное изображение и т.д.
[0051] На этапе S14 формируют описание изображения в соответствии с информацией о личности и информацией о съемке.
[0052] Например, путем распознавания лица (лиц) на изображении могут определить, что лица на изображении являются лицами родителей пользователя, а полученная информация об изображении содержит время съемки - 1 октября 2015 г. - и место съемки - Тяньанымэнь. Таким образом, в процессе анализа изображения получают следующую информацию: "родители", "1 октября 2015 г.", "Тяньанымэнь" и т.д. Затем могут сформировать описание изображения (например, "с родителями на Тяньанымэнь 1 октября 2015 г.", "поездка в Пекин с родителями 1 октября 2015 г." и т.д.) с использованием абстрактной формирующей технологии из технологий обработки естественного языка (например, извлекающего алгоритма или абстрагирующего алгоритма).
[0053] В данном варианте осуществления распознают лицо(а) и формируют описание изображения в соответствии с информацией о личности, соответствующей лицу(ам) и информацией о съемке изображения, таким образом, формируют более точное описание изображения, способность к автоматическому описанию изображения улучшается и приближается к способности описания изображения человеком, пользователь может оперативно получать точную информацию о каждом изображении, и пользовательский опыт улучшается.
[0054] В другом варианте осуществления изобретения информацию о личности, соответствующей распознанному лицу, могут получать с использованием одного из следующих вариантов реализации.
[0055] I. Информацию о личности, соответствующей лицу, получают с использованием заданной базы личных данных
[0056] Фиг. 2 представляет собой схему, иллюстрирующую способ обработки изображений в соответствии с другим примерным вариантом осуществления настоящего изобретения. Как показано на Фиг. 2, получение информации о личности, соответствующей распознанному лицу, содержит следующие этапы.
[0057] На этапе S21 получают заданную базу личных данных, где заданная база личных данных со держит соответствующие св язи между лицами и информацией о личности.
[0058] На этапе S22 распознанное лицо сравнивают с лицами в заданной базе личных данных для поиска лица в заданной базе личных данных, соответствующего распознанному лицу.
[0059] На этапе S23 получают информацию о личности, соответствующей лицу из заданной базы личных данных, соответствующему распознанному лицу.
[0060] Пользователь может заранее установить заданную базу личных данных. Например, заданную базу личных данных формируют, получая фотографии лиц членов семьи и указывая идентификатор или семейные отношения, соответствующие фотографии лица каждого члена семьи. Дополнительно или вместо этого в заданную базу личных данных могут добавлять одноклассников, друзей, коллег и т.п.
[0061] II. Информацию о личности, соответствующей лицу, получают с использованием контактной информации пользователя
[0062] Фиг. 3 представляет собой схему, иллюстрирующую способ обработки изображений в соответствии с другим примерным вариантом осуществления настоящего изобретения. Как показано на Фиг. 3, получение информации о личности, соответствующей распознанному лицу, содержит следующие этапы.
[0063] На этапе S31 получают контактную информацию пользователя. Контактная информация содержит головные портреты и информацию о личности контактных лиц.
[0064] На этапе S32 распознанное лицо сравнивают с головными портретами контактных лиц для поиска головного портрета контактного лица, соответствующего распознанному лицу.
[0065] На этапе S33 получают информацию о личности, соответствующей головному портрету контактного лица, соответствующему распознанному лицу.
[0066] Таким образом, информацию о личности, соответствующей лицу на изображении, могут получить с использованием головных портретов контактных лиц из списка контактов.
[0067] В данном варианте осуществления эти два варианта реализации могут также объединять, то есть получают информацию о личности, соответствующей лицу на изображении, в соответствии как с заданной базой личных данных, так и с контактной информацией из списка контактов.
[0068] В данном варианте осуществления можно получить точную информацию о личности людей на изображении путем определения информации о личности, соответствующей лицу, с использованием одного из указанных выше вариантов реализации или их комбинации, таким образом, в соответствии с информацией о личности можно затем сформировать более точное описание изображения, способность к автоматическому описанию изображения улучшается и приближается к способности описания изображения человеком, пользователь может оперативно получать точную информацию о каждом изображении, и пользовательский опыт улучшается.
[0069] В другом варианте осуществления изобретения для формирования более точного описания изображения могут дополнительно получать другую информацию об изображении (например, информацию о съемке, информацию о других объектах, помимо лиц на изображении и т.д.).
[0070] Фиг. 4 представляет собой схему, иллюстрирующую способ обработки изображений в соответствии с другим примерным вариантом осуществления настоящего изобретения. Как показано на Фиг. 4, формирование описания изображения в соответствии с информацией о личности и информацией о съемке изображения дополнительно содержит следующие этапы.
[0071] На этапе S41 распознают объект на изображении для определения наименования этого объекта.
[0072] Для распознавания объекта(ов), присутствующего(их) на изображении, могут использовать такие алгоритмы как R-CNN и fast-CNN. Например, сначала выделяют возможные подходящие участки на изображении, а затем к объектам, изображенным на выделенных участках, применяют классификацию сверточной нейронной сети СНС (CNN).
[0073] На этапе S42 формируют описание изображения в соответствии с информацией о личности, информацией о съемке и наименованием объекта.
[0074] Например, если время съемки изображения - 1 октября 2015 г., место съемки - площадь Тяньанымэнь, лица на изображении - лица родителей пользователя, а распознанные объекты, представленные на изображении, включают цветы, национальный флаг и т.п., то сформированное описание может быть таким: "на церемонии поднятия флага с родителями на площади Тяньанымэнь 1 октября 2015 г."
[0075] Кроме того, помимо информации о личности, информации о съемке и наименования объекта, при автоматическом описании изображения могут принимать во внимание другую информацию (например, информацию о погоде в день, когда было сделано изображение, событие, происходящее во время и в месте съемки и т.д.)
[0076] В данном варианте осуществления описание формируют в соответствии с разными типами соответствующей информации об изображении, делая описание, таким образом, более точным, способность к автоматическому описанию изображения улучшается и приближается к способности описания изображения человеком, пользователь может оперативно получать точную информацию о каждом изображении, и пользовательский опыт улучшается.
[0077] В другом варианте осуществления изобретения изображения могут группировать и формировать общее описание для каждой группы изображений. Фиг. 5 представляет собой схему, иллюстрирующую способ обработки изображений в соответствии с данным примерным вариантом осуществления настоящего изобретения. Как показано на Фиг. 5, способ дополнительно содержит следующие этапы.
[0078] На этапе S51 группируют изображения пользователя.
[0079] На этапе S52 формируют описание каждой группы изображений в соответствии с описанием каждого изображения в группе изображений.
[0080] Например, могут выделять некоторые репрезентативные фрагменты текста из описаний отдельных изображений в каждой группе с использованием извлекающего алгоритма, а затем объединять их для формирования описания каждой группы изображений.
[0081] Изображения могут группировать по обстановке съемки. Группировка изображений пользователя содержит следующие этапы:
группировка изображений по крайней мере по одному из следующих факторов: время съемки и место съемки изображений и лица на изображениях.
[0082] Например, пользователь может сгруппировать фотографии, снятые 1 октября 2015 г., в одну группу, фотографии, снятые на площади Тяньанымэнь, в одну группу, все фотографии, на которых изображены лица родителей пользователя, в одну группу, фотографии, снятые на площади Тяньанымэнь 1 октября 2015 г., в одну группу, фотографии, на которых изображены лица родителей пользователя, снятые 1 октября 2015 г., одну группу, фотографии, на которых изображены лица родителей пользователя, снятые на площади Тяньанымэнь, в одну группу, или фотографии, на которых изображены лица родителей пользователя, снятые на площади Тяньанымэнь 1 октября 2015 г., в одну группу.
[0083] Фотографии, снятые в одной и той же обстановке, могут точно разделять, группируя эти фотографии на основании такой информации, как информация о съемке фотографий и лица на фотографиях, обеспечивая, таким образом, последующее точное автоматическое описание каждой группы фотографий.
[0084] Пользователь может просматривать изображения группами, и соответствующие группы и описание каждой группы изображений демонстрируются при получении команды просмотра, направляемой пользователем. Кроме того, изображения в каждой группе и описания изображений могут демонстрироваться в режиме показа слайдов.
[0085] В данном варианте осуществления изображения описывают группами, демонстрируя сгруппированные изображения и их описание, благодаря чему пользователь может оперативно получать точную информацию о каждой группе изображений, и пользовательский опыт улучшается.
[0086] Далее раскрываются ваарианты осуществления устройства, представленного в настоящем изобретении, которое могут применять для реализации вариантов осуществления способа, представленного в настоящем изобретении.
[0087] Фиг. 6 представляет собой блок-схему, иллюстрирующую устройство обработки изображений в соответствии с примерным вариантом осуществления настоящего изобретения. Данное устройство может быть реализовано как часть электронного устройства или как целое электронное устройство с использованием программного обеспечения, аппаратного обеспечения или и программного и аппаратного обеспечения. Как показано на Фиг. 6, устройство обработки изображений содержит:
распознающий модуль 61, выполненный с возможностью распознавания лица на изображении пользователя.
[0088] Например, распознающий модуль 61 может использовать способы, основанные на выделении геометрических признаков, матричные способы и способы, основанные на использовании модели. Среди них матричные способы можно классифицировать на способы, основанные на корреляционном распознавании, способы собственных лиц, способы линейного дискриминантного анализа, способы разложения по сингулярным числам матрицы, способы нейросетей, способы сопоставления динамических связей и т.п. Способы, основанные на использовании модели, включают в себя способы, основанные на скрытой Марковской модели, активной модели формы и активной наглядной модели и т.д.
[0089] Определяющий модуль 62 выполнен с возможностью определения информации о личности, соответствующей лицу, распознанному распознающим модулем 61; при этом информация о личности содержит по крайней мере однозначный идентификатор человека в соответствии с лицом и отношения между этим человеком и пользователем.
[0090] Идентификатор человека может представлять собой идентификатор, определяющий личность человека, например, имя, сетевой аккаунт, ник, кодовое имя человека и т.д. Отношения между человеком и пользователем могут подразумевать семейные отношения, родство, отношения одноклассников, отношения коллег, отношения друзей и т.д.
[0091] Запрашивающий модуль 63 выполнен с возможностью получения информации о съемке, содержащей по крайней мере один из аспектов: время съемки и место съемки.
[0092] Информацию о съемке изображения могут получать из заменяемого файла образа (сокращенно - ЗФО) изображения. ЗФО содержит метаданные, специально сформированные для фотографий цифровой камеры и содержащие по крайней мере следующие типы информации о записи цифровых фотографий:
время съемки, фотооборудование (например, основной блок оборудования, линзы, фотовспышка и т.д.), параметры съемки (например, выдержка затвора, апертурное число объектива, скорость ISO, фокусное расстояние, режим измерения экспозиции и т.д.), параметры обработки изображения (например, резкость, контраст, цветовая насыщенность, баланс белого и т.д.), описание изображения и информация об авторском праве, место съемки (например, данные системы глобального позиционирования (GPS) и т.д.), уменьшенное изображение и т.д.
[0093] Первый формирующий модуль 64 выполнен с возможностью формирования описания изображения в соответствии с информацией о личности, определенной определяющим модулем 62 и информацией о съемке, полученной запрашивающим модулем 63.
[0094] Например, распознающий модуль 61 распознает лицо(а) на изображении, определяющий модуль 62 определяет, что лица на изображении являются лицами родителей пользователя, а информация об изображении, полученная запрашивающим модулем 63, содержит время съемки - 1 октября 2015 г. - и место съемки - Тяньанымэнь. Тогда первый формирующий модуль 64 может использовать абстрактную формирующую технологию из технологий обработки естественного языка для формирования следующего описания изображения: "с родителями на Тяньанымэнь 1 октября 2015 г.", "поездка в Пекин с родителями 1 октября 2015 г." и т.д.
[0095] В данном варианте осуществления распознающий модуль 61 распознает лицо(а) на изображении, а первый формирующий модуль 64 формирует описание изображения в соответствии с информацией о личности, соответствующей лицу(ам), определенными определяющим модулем 62, и информацией о съемке изображения, полученной запрашивающим модулем 63, таким образом, формируют более точное описание изображения, способность к автоматическому описанию изображения улучшается и приближается к способности описания изображения человеком, пользователь может оперативно получать точную информацию о каждом изображении, и пользовательский опыт улучшается.
[0096] В другом варианте осуществления изобретения информацию о личности, соответствующей распознанному лицу, могут получать с использованием одного из следующих вариантов реализации.
[0097] I. Информацию о личности, соответствующей лицу, получают с использованием заданной базы личных данных
[0098] Фиг. 7 представляет собой блок-схему, иллюстрирующую определяющий модуль в соответствии с примерным вариантом осуществления настоящего изобретения. Как показано на Фиг. 7, определяющий модуль 62 содержит:
первый запрашивающий субмодуль 71, выполненный с возможностью получения заданной базы личных данных, содержащей данные о соответствующей связи между лицами и информацией о личности;
первый сравнивающий субмодуль 72, выполненный с возможностью сравнения лица, распознанного распознающим модулем 61, с лицами в заданной базе личных данных, полученной первым запрашивающим субмодулем 71, для поиска лица в заданной базе личных данных, соответствующего распознанному лицу;
второй запрашивающий субмодуль 73, выполненный с возможностью определения информации о личности, соответствующей лицу в заданной базе личных данных, соответствующему распознанному лицу.
[0099] Пользователь может заранее установить заданную базу личных данных. Например, заданную базу личных данных формируют, получая фотографии лиц членов семьи и указывая идентификатор или семейные отношения, соответствующие фотографии лица каждого члена семьи. Дополнительно или вместо этого в заданную базу личных данных могут добавлять одноклассников, друзей, коллег и т.п.
[00100] II. Информацию о личности, соответствующей лицу, получают с использованием контактной информации пользователя
[00101] Фиг. 8 представляет собой блок-схему, иллюстрирующую определяющий модуль в соответствии с другим примерным вариантом осуществления настоящего изобретения. Как показано на Фиг. 8, определяющий модуль 62 содержит:
третий запрашивающий субмодуль 81, выполненный с возможностью получения контактной информации пользователя, содержащей головные портреты и информацию о личности контактных лиц;
второй сравнивающий субмодуль 82, выполненный с возможностью сравнения лица, распознанного распознающим модулем, с головными портретами контактных лиц для поиска головного портрета контактного лица, соответствующего распознанному лицу;
четвертый запрашивающий субмодуль 83, выполненный с возможностью определения информации о личности, соответствующей головному портрету контактного лица, соответствующему распознанному лицу.
[00102] Таким образом, информацию о личности, соответствующей лицу на изображении, могут получать с использованием головных портретов контактных лиц из списка контактов.
[00103] В данном варианте осуществления эти два варианта реализации могут также объединять, то есть получают информацию о личности, соответствующей лицу на изображении, в соответствии как с заданной базой личных данных, так и с контактной информацией из списка контактов.
[00104] В данном варианте осуществления могут получать точную информацию о личности людей на изображении путем определения информации о личности, соответствующей лицу, с использованием одного из указанных выше вариантов реализации или их комбинации, таким образом, в соответствии с информацией о личности могут затем сформировать более точное описание изображения, способность к автоматическому описанию изображения улучшается и приближается к способности описания изображения человеком, пользователь может оперативно получать точную информацию о каждом изображении, и пользовательский опыт улучшается.
[00105] В другом варианте осуществления изобретения для формирования более точного описания изображения могут дополнительно получать другую информацию об изображении (например, информацию о съемке, информацию о других объектах, помимо лиц на изображении и т.д.).
[00106] Фиг. 9 представляет собой блок-схему, иллюстрирующую первый формирующий модуль в соответствии с примерным вариантом осуществления настоящего изобретения. Как показано на Фиг. 9, в некоторых случаях первый формирующий модуль 64 содержит:
распознающий субмодуль 91, выполненный с возможностью распознавания объекта на изображении для определения наименования такого объекта. Для распознавания объекта(ов), присутствующего(их) на изображении, могут использовать такие алгоритмы как R-CNN и fast-CNN. Например, сначала выделяют возможные подходящие участки на изображении, а затем к объектам, изображенным на выделенных участках, применяют классификацию СНС.
[00107] Формирующий субмодуль 92 выполнен с возможностью формирования описания изображения в соответствии с информацией о личности, определенной определяющим модулем 62, информацией о съемке, полученной запрашивающим модулем 63, и наименованием объекта, распознанного распознающим субмодулем 91.
[00108] Например, если время съемки изображения - 1 октября 2015 г., место съемки - площадь Тяньанымэнь, лица на изображении - лица родителей пользователя, а распознанные объекты, представленные на изображении, включают цветы, национальный флаг и т.п., то сформированное описание может быть таким: "на церемонии поднятия флага с родителями на площади Тяньанымэнь 1 октября 2015 г."
[00109] Кроме того, помимо информации о личности, информации о съемке и наименования объекта, при автоматическом описании изображения могут принимать во внимание другую информацию (например, информацию о погоде в день, когда было сделано изображение, событие, происходящее во время и в месте съемки и т.д.)
[00110] В данном варианте осуществления описание формируют в соответствии с разными типами соответствующей информации об изображении, делая описание, таким образом, более точным, способность к автоматическому описанию изображения улучшается и приближается к способности описания изображения человеком, пользователь может оперативно получать точную информацию о каждом изображении, и пользовательский опыт улучшается.
[00111] В другом варианте осуществления изобретения изображения могут группировать и формировать общее описание для каждой группы изображений. Фиг. 10 представляет собой блок-схему, иллюстрирующую устройство обработки изображений в соответствии с другим примерным вариантом осуществления настоящего изобретения. Как показано на Фиг. 10, устройство дополнительно содержит:
группирующий модуль 65, выполненный с возможностью группировки изображений пользователя;
второй формирующий модуль 66, выполненный с возможностью формирования описания каждой группы изображений в соответствии с описанием каждого изображения в группе, сформированным первым формирующим модулем 63.
[00112] В другом варианте осуществления изобретения группирующий модуль 65 выполнен с возможностью группировки изображений по крайней мере по одному из следующих признаков: время съемки и место съемки изображений, определенные запрашивающим модулем 63, и лица на изображениях, распознанные распознающим модулем 61.
[00113] Например, пользователь может сгруппировать фотографии, снятые 1 октября 2015 г., в одну группу, фотографии, снятые на площади Тяньанымэнь, в одну группу, все фотографии, на которых изображены лица родителей пользователя, в одну группу, фотографии, снятые на площади Тяньанымэнь 1 октября 2015 г., в одну группу, фотографии, на которых изображены лица родителей пользователя, снятые 1 октября 2015 г., одну группу, фотографии, на которых изображены лица родителей пользователя, снятые на площади Тяньанымэнь, в одну группу, или фотографии, на которых изображены лица родителей пользователя, снятые на площади Тяньанымэнь 1 октября 2015 г., в одну группу.
[00114] Фотографии, снятые в одной и той же обстановке, могут точно разделять, группируя эти фотографии на основании такой информации, как информация о съемке фотографий и лица на фотографиях, обеспечивая, таким образом, последующее точное автоматическое описание каждой группы фотографий.
[00115] Фиг. 11 представляет собой блок-схему, иллюстрирующую устройство обработки изображений в соответствии с другим примерным вариантом осуществления настоящего изобретения. Как показано на Фиг. 11, устройство дополнительно содержит:
демонстрационный модуль 67, выполненный с возможностью демонстрации групп и описаний каждой группы изображений, сформированных вторым формирующим модулем, при получении команды просмотра, направляемой пользователем.
[00116] В некоторых случаях демонстрационный модуль 67 выполнен с возможностью демонстрации изображений в каждой группе и описаний изображений, сформированных первым формирующим модулем, в режиме показа слайдов.
[00117] Пользователь может просматривать изображения группами, и соответствующие группы и описания каждой группы изображений демонстрируются при получении команды просмотра, направляемой пользователем. Кроме того, изображения в каждой группе и описания изображений могут демонстрироваться в режиме показа слайдов.
[00118] В данном варианте осуществления изображения описывают группами, демонстрируя сгруппированные изображения и их описание, благодаря чему пользователь может оперативно получать точную информацию о каждой группе изображений, и пользовательский опыт улучшается.
[00119] В данном раскрытии также предлагается устройство для обработки изображений, содержащее:
процессор;
память, выполненную с возможностью хранения команд, исполняемых процессором,
при этом процессор выполнен с возможностью:
распознавания лица на изображении пользователя;
получения информации о личности, соответствующей распознанному лицу, содержащей по крайней мере однозначный идентификатор человека, соответствующего лицу, и отношения между человеком, соответствующим лицу, и пользователем;
получения информации о съемке изображения, где информация о съемке содержит по крайней мере один из аспектов: время съемки и место съемки изображения; и
формирования описания изображения в соответствии с информацией о личности и информацией о съемке.
[00120] Фиг. 12 представляет собой блок-схему, иллюстрирующую устройство 1700 обработки изображений в соответствии с примерным вариантом осуществления настоящего изобретения, применимое к терминальному устройству. Например, устройством 1700 может быть камера, звукозаписывающее устройство, мобильный телефон, компьютер, цифровой передающий терминал, устройство рассылки сообщений, игровая консоль, планшетный компьютер, медицинское устройство, тренировочное оборудование, карманный персональный компьютер и т.п.
[00121] В соответствии с Фиг. 12 устройство 1700 может включать в себя один или несколько следующих компонентов: обрабатывающий компонент 1702, память 1704, питающий компонент 1706, мультимедийный компонент 1708, аудио компонент 1710, интерфейс 1712 ввода-вывода, сенсорный компонент 1714 и коммуникационный компонент 1716.
[00122] Обрабатывающий компонент 1702 обычно осуществляет общее управление всеми операциями устройства 1700, например, операциями, связанными с демонстрациям, телефонными вызовами, передачей данных, функционированием камеры, операциями записи. Обрабатывающий компонент 1702 может включать в себя один или несколько процессоров 1720 для исполнения команд для выполнения всех или некоторых этапов указанных способов. Кроме того, обрабатывающий компонент 1702 может включать в себя один или несколько модулей, способствующих взаимодействию между обрабатывающим компонентом 1702 и другими компонентами. Например, обрабатывающий компонент 1702 может включать в себя мультимедийный модуль, способствующий взаимодействию между мультимедийным компонентом 1708 и обрабатывающим компонентом 1702.
[00123] Память 1704 выполнена с возможностью хранения различных типов данных для поддержки операций устройства 1700. В число примеров таких данных входят команды любых прикладных программ или способов, выполняемых на устройстве 1700, контактные данные, данные телефонной книги, сообщения, изображения, видеоматериалы и т.д. Память 1704 может быть реализована с использованием любого типа энергозависимого или энергонезависимого запоминающего устройства или их сочетания, например, с использованием статического запоминающего устройства с произвольным доступом (Static Random Access Memory, SRAM), электрически стираемого программируемого постоянного запоминающего устройства (Electrically Erasable Programmable Read-Only Memory, EEPROM), стираемого программируемого постоянного запоминающего устройства (Erasable Programmable Read-Only Memory, EPROM), программируемого постоянного запоминающего устройства (Programmable Read-Only Memory, PROM), постоянного запоминающего устройства (Read-Only Memory, ROM), магнитной памяти, флэш-памяти, магнитного или оптического диска.
[00124] Питающий компонент 1706 обеспечивает питанием различные компоненты устройства 1700. Питающий компонент 1706 может содержать систему управления питанием, один или более источников питания и любые другие компоненты, имеющие отношение к генерированию питания, управлению питанием и распределению питания в устройстве 1700.
[00125] Мультимедийный компонент 1708 содержит экран, обеспечивающий выходной интерфейс между устройством 1700 и пользователем. В некоторых вариантах осуществления изобретения экран может содержать жидкокристаллический дисплей (ЖКД) и сенсорную панель (СП). Если экран содержит сенсорную панель, то данный экран может быть реализован как сенсорный экран, выполненный с возможностью приема сигналов ввода от пользователя. Сенсорная панель содержит один или более сенсорных датчиков, выполненных с возможностью восприятия прикосновений, передвижений и жестов на сенсорной панели. Сенсорные датчики могут воспринимать не только границу области прикосновения или передвижения, но также и длительность и давление, имеющие отношение к данному прикосновению или передвижению. В некоторых вариантах осуществления изобретения мультимедийный компонент 1708 содержит переднюю камеру и/или заднюю камеру. Передняя камера и/или задняя камера может принимать внешние мультимедийные данные, когда устройство 1700 находится в рабочем режиме, например, в режиме фото- или видеосъемки. И передняя камера, и задняя камера может быть системой с ненастраиваемым объективом или может иметь техническую возможность фокусировки и оптической трансфокации (зума).
[00126] Аудио компонент 1710 выполнен с возможностью приема и/или вывода аудиосигналов. Например, аудио компонент 1710 содержит микрофон, выполненный с возможностью приема внешнего аудиосигнала, когда устройство 1700 находится в рабочем режиме, например, в режиме разговора, режиме записи и режиме распознавания голоса. Принятый аудиосигнал может быть затем сохранен в памяти 1704 или передан через коммуникационный компонент 1716. В некоторых вариантах осуществления изобретения аудио компонент 1710 дополнительно содержит динамик, выполненный с возможностью выдачи аудиосигналов.
[00127] Интерфейс 1712 ввода/вывода обеспечивает интерфейс между обрабатывающим компонентом 1702 и периферийным интерфейсным модулем, например, клавиатурой, чувствительным к нажатию колесиком, кнопками и т.п. В число указанных кнопок могут входить кнопка возврата в исходное состояние, кнопка регулировки громкости, кнопка запуска и кнопка блокировки, но приведенный перечень не накладывает никаких ограничений.
[00128] Сенсорный компонент 1714 содержит один или более датчиков для получения информации о состоянии различных аспектов устройства 1700. Например, сенсорный компонент 1714 может обнаруживать открытое/закрытое состояние устройства 1700, относительное положение компонентов устройства 1700, к примеру, дисплея и клавиатуры, изменение положение устройства 1700 или компонента устройства 1700, присутствие или отсутствие контакта пользователя с устройством 1700, ориентацию или ускорение/замедление устройства 1700 и изменение температуры устройства 1700. Сенсорный компонент 1714 может содержать датчик приближения, выполненный с возможностью обнаружения присутствия близко расположенных объектов без какого-либо физического контакта. Сенсорный компонент 1714 также может содержать светочувствительный датчик, например, датчик изображения типа CMOS или CCD для использования в прикладных программах для получения изображений. В некоторых вариантах осуществления изобретения сенсорный компонент 1714 также может содержать датчик ускорения, гироскопический датчик, магнитный датчик, датчик давления или датчик температуры.
[00129] Коммуникационный компонент 1716 выполнен с возможностью осуществления проводной или беспроводной связи между устройством 1700 и другими устройствами. Устройство 1700 может осуществлять доступ к беспроводной сети с использованием какого-либо стандарта связи, например, WiFi, 2G, 3G или их сочетания. В примерном варианте осуществления связной компонент 1716 принимает широковещательный сигнал или соответствующую широковещательно передаваемую информацию из внешней системы управления передачей через широковещательный канал. В примерном варианте осуществления связной компонент 1716 дополнительно содержит модуль ближней связи (Near Field Communication, NFC) для осуществления связи на небольших расстояниях. Например, модуль NFC может быть реализован с использованием технологии радиочастотной идентификации (Radio Frequency Identification, RFID), инфракрасной передачи данных (Infrared Data Association, IrDA), сверхширокополосной технологии (Ultra Wideband, UWB), технологии Bluetooth (ВТ) и других технологий.
[00130] В примерных вариантах осуществления изобретения устройство 1700 для реализации вышеописанных способов может быть реализовано с использованием одной или нескольких специализированных интегральных схем (Application Specific Integrated Circuit, ASIC), цифровых сигнальный процессоров (Digital Signal Processor, DSP), цифровых устройств обработки сигнала (Digital Signal Processing Device, DSPD), программируемых логических устройств (Programmable Logic Devices, PLD), программируемых матриц логических элементов (Field Programmable Gate Array, FPGA), контроллеров, микроконтроллеров, микропроцессоров или других электронных компонентов.
[00131] В примерных вариантах осуществления изобретения также предусмотрен долговременный машиночитаемый носитель информации, содержащий команды, например, содержащиеся в памяти 1704, которые могут быть выполнены процессором 1720 устройства 1700 с целью реализации вышеописанных способов. Например, энергонезависимым машиночитаемым носителем информации может быть ROM, RAM, CD-ROM, магнитная лента, гибкий диск, оптическое запоминающее устройство и т.п.
[00132] Фиг. 13 представляет собой блок-схему, иллюстрирующую устройство обработки изображений в соответствии с примерным вариантом осуществления настоящего изобретения. Например, устройством 1900 может быть сервер. Устройство 1900 содержит обрабатывающий компонент 1922, который, в свою очередь, содержит один или более процессоров, и ресурсы памяти, представленные памятью 1932, для хранения команд (например, приложений), выполняемых обрабатывающим компонентом 1922. Приложения, сохраненные в памяти 1932, могут содержать один или более модулей, каждый из которых соответствует группе команд. Кроме того, обрабатывающий компонент 1922 выполнен с возможностью выполнения команд для реализации вышеописанных способов.
[00133] Устройство 1900 также может содержать питающий компонент 1926, выполненный с возможностью управления питанием устройства 1900; проводной или беспроводной сетевой интерфейс 1950, выполненный с возможностью подключения устройства 1900 к сети; и интерфейс 1958 ввода/вывода. Устройство 1900 может функционировать с использованием операционной системы, сохраненной в памяти 1932 (например, Windows Server™, Mac OS X™, Unix™, Linux™, FreeBSD™ и т.п).
[00134] Также предлагается энергонезависимый машиночитаемый накопитель, включая команды, которые, при их исполнении процессором устройства 1700 или 1900, обеспечивают реализацией устройством 1700 или 1900 вышеописанного способа обработки изображений. Данный способ содержит следующие этапы:
распознают лицо на изображении пользователя;
получают информацию о личности, соответствующей распознанному лицу, содержащую по крайней мере однозначный идентификатор человека, соответствующего данному лицу, и отношения между человеком, соответствующим лицу, и пользователем;
получают информацию о съемке изображения, где информация о съемке содержит по крайней мере один из аспектов: время съемки и место съемки изображения; и
формируют описание изображения в соответствии с информацией о личности и информацией о съемке.
[00135] В некоторых случаях получение информации о личности в соответствии с распознанным лицом содержит следующие этапы:
получают заданную базу личных данных, содержащую соответствующие связи между лицами и информацией о личности;
сравнивают распознанное лицо с лицами из заданной базы личных данных для поиска лица в заданной базе личных данных, соответствующего распознанному лицу; и
получают информацию о личности, соответствующей распознанному лицу из заданной базы личных данных, соответствующему распознанному лицу.
[00136] В некоторых случаях получение информации о личности, соответствующей распознанному лицу, содержит следующие этапы:
получают контактную информацию пользователя, содержащую головные портреты и информацию о личности контактных лиц;
сравнивают распознанное лицо с головными портретами контактных лиц для поиска головного портрета контактного лица, соответствующего распознанному лицу; и
получают информацию о личности, соответствующей головному портрету контактного лица, соответствующему распознанному лицу.
[00137] В некоторых случаях формирование описания изображения в соответствии с информацией о личности и информацией о съемке содержит следующие этапы:
распознают объект на изображении для определения наименования этого объекта; и
формируют описание изображения в соответствии с информацией о личности, информацией о съемке и наименованием объекта.
[00138] В некоторых случаях указанный способ дополнительно содержит следующие этапы:
группируют изображения пользователя; и
формируют описание каждой группы изображений в соответствии с описанием каждого изображения в группе.
[00139] В некоторых случаях группировка изображений пользователя содержит следующие этапы:
группируют изображения по крайней мере по одному из следующих признаков: время съемки, место съемки и лиц на изображениях.
[00140] В некоторых случаях указанный способ дополнительно содержит следующие этапы:
демонстрируют группы и описание каждой группы изображений при получении команды просмотра, направляемой пользователем.
[00141] В некоторых случаях демонстрация групп и описаний каждой группы изображений дополнительно содержит следующие этапы:
демонстрируют изображения в каждой группе в режиме показа слайдов.
[00142] Другие варианты осуществления настоящего изобретения должны быть очевидны специалисту в данной области техники из рассмотрения настоящего описания и практического использования раскрытого здесь изобретения. Настоящая заявка подразумевает охват всех разновидностей, использований или адаптаций настоящего изобретения, следующих из его общих принципов, и включает такие отклонения от настоящего изобретения, полагая их находящимися в известной или общепринятой практике в данной области техники. Настоящее описание и варианты осуществления изобретения следует рассматривать лишь в качестве примера, а фактический объем и сущность изобретения ограничиваются только прилагаемой формулой изобретения.
[00143] Следует понимать, что настоящее изобретение не ограничено точной структурой, описанной выше и показанной на чертежах, а без выхода за пределы своего объема может иметь разнообразные модификации и изменения. Объем изобретения ограничен только прилагаемой формулой изобретения.
Claims (51)
1. Способ обработки изображений, отличающийся тем, что способ включает этапы, на которых :
распознают лицо на изображении пользователя;
получают информацию о личности, соответствующей распознанному лицу, содержащую по крайней мере одно из идентификатора человека, соответствующего данному лицу, и отношения между человеком, соответствующим лицу, и пользователем;
получают информацию о съемке изображения, где информация о съемке содержит время съемки, место съемки изображения и событие, происходящее во время и в месте съемки; и
формируют описание изображения в соответствии с информацией о личности и информацией о съемке,
группируют изображения пользователя; и
формируют описание каждой группы изображений в соответствии с описанием каждого изображения в группе.
2. Способ по п. 1, отличающийся тем, что получение информации о личности, соответствующей распознанному лицу, содержит этапы, на которых:
получают заданную базу личных данных, содержащую соответствующие связи между лицами и информацией о личности;
сравнивают распознанное лицо с лицами из заданной базы личных данных для поиска лица в заданной базе личных данных, соответствующего распознанному лицу; и
получают информацию о личности, соответствующей распознанному лицу из заданной базы личных данных, соответствующему распознанному лицу.
3. Способ по п. 1, отличающийся тем, что получение информации о личности, соответствующей распознанному лицу, содержит этапы, на которых:
получают контактную информацию пользователя, содержащую головные портреты и информацию о личности контактных лиц;
сравнивают распознанное лицо с головными портретами контактных лиц для поиска головного портрета контактного лица, соответствующего распознанному лицу; и
получают информацию о личности, соответствующей головному портрету контактного лица, соответствующему распознанному лицу.
4. Способ по п. 1, причем формирование описания изображения в соответствии с информацией о личности и информацией о съемке содержит этапы, на которых:
распознают объект на изображении для определения наименования этого объекта; и
формируют описание изображения в соответствии с информацией о личности, информацией о съемке и наименованием объекта.
5. Способ по п. 1, причем группировка изображений пользователя содержит этап, на котором группируют изображения по крайней мере по одному из следующих признаков: время съемки, место съемки и лиц на изображениях.
6. Способ по п. 5, причем способ содержит этап, на котором демонстрируют группы и описание каждой группы изображений при получении команды просмотра, направляемой пользователем.
7. Способ по п. 6, причем демонстрация групп и описаний каждой группы изображений включает демонстрацию изображения в каждой группе и описания изображений в режиме показа слайдов.
8. Устройство обработки изображений, отличающееся тем, что устройство содержит:
распознающий модуль, выполненный с возможностью распознавания лиц на изображении пользователя;
определяющий модуль, выполненный с возможностью определения информации о личности, соответствующей лицу, распознанному распознающим модулем; при этом информация о личности содержит по крайней мере однозначный идентификатор человека в соответствии с лицом и отношения между этим человеком и пользователем;
запрашивающий модуль, выполненный с возможностью получения информации о съемке, содержащей время съемки и место съемки; и событии, происходящем во время и в месте съемки,
первый формирующий модуль, выполненный с возможностью формирования описания изображения в соответствии с информацией о личности, определенной определяющим модулем, и информацией о съемке, полученной запрашивающим модулем,
группирующий модуль, выполненный с возможностью группировки изображений пользователя; и
второй формирующий модуль, выполненный с возможностью формирования описания каждой группы изображений в соответствии с описанием каждого изображения в группе, сформированным первым формирующим модулем.
9. Устройство по п. 8, причем определяющий модуль содержит:
первый запрашивающий субмодуль, выполненный с возможностью получения заданной базы личных данных, содержащей соответствующие связи между лицами и информацией о личности;
первый сравнивающий субмодуль, выполненный с возможностью сравнения лица, распознанного распознающим модулем, с лицами в заданной базе личных данных, полученной первым запрашивающим субмодулем, для поиска лица в заданной базе личных данных, соответствующего распознанному лицу; и
второй запрашивающий субмодуль, выполненный с возможностью определения информации о личности, соответствующей лицу в заданной базе личных данных, соответствующему распознанному лицу.
10. Устройство по п. 8, причем определяющий модуль содержит:
третий запрашивающий субмодуль, выполненный с возможностью получения контактной информации пользователя, содержащей головные портреты и информацию о личности контактных лиц;
второй сравнивающий субмодуль, выполненный с возможностью сравнения лица, распознанного распознающим модулем, с головными портретами контактных лиц для поиска головного портрета контактного лица, соответствующего распознанному лицу; и
четвертый запрашивающий субмодуль, выполненный с возможностью получения информации о личности, соответствующей головному портрету контактного лица, соответствующему распознанному лицу.
11. Устройство по п. 8, причем первый формирующий модуль содержит:
распознающий субмодуль, выполненный с возможностью распознавания объекта на изображении для определения наименования такого объекта; и
формирующий субмодуль, выполненный с возможностью формирования описания изображения в соответствии с информацией о личности, определенной определяющим модулем, информацией о съемке, полученной запрашивающим модулем, и наименованием объекта, распознанного распознающим субмодулем.
12. Устройство по п. 8, причем группирующий модуль выполнен с возможностью группировки изображений по крайней мере по одному из следующих признаков: время съемки и место съемки изображений, определенные запрашивающим модулем, и лица на изображениях, распознанные распознающим модулем.
13. Устройство по п. 8, причем устройство дополнительно содержит:
демонстрационный модуль, выполненный с возможностью демонстрации групп и описаний каждой группы изображений, сформированных вторым формирующим модулем, при получении команды просмотра, направляемой пользователем.
14. Устройство по п. 13, причем демонстрационный модуль выполнен с возможностью демонстрации изображений в каждой группе и описаний изображений, сформированных первым формирующим модулем, в режиме показа слайдов.
15. Устройство обработки изображений, содержащее:
процессор; и
память, выполненную с возможностью хранения команд, исполняемых процессором, при этом процессор выполнен с возможностью: распознавания лица на изображении пользователя;
получения информации о личности, соответствующей распознанному лицу, содержащей по крайней мере однозначный идентификатор человека, соответствующего лицу, и отношения между человеком, соответствующим лицу, и пользователем;
получения информации о съемке изображения, где информация о съемке содержит время съемки и место съемки изображения; и событии, происходящем во время и в месте съемки,
формирования описания изображения в соответствии с информацией о личности и информацией о съемке,
группировки изображения пользователя; и
формирования описания каждой группы изображений в соответствии с описанием каждого изображения в группе.
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510813140.5 | 2015-11-20 | ||
| CN201510813140.5A CN105302315A (zh) | 2015-11-20 | 2015-11-20 | 图片处理方法及装置 |
| PCT/CN2015/099612 WO2017084182A1 (zh) | 2015-11-20 | 2015-12-29 | 图片处理方法及装置 |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| RU2016136709A RU2016136709A (ru) | 2018-03-16 |
| RU2016136709A3 RU2016136709A3 (ru) | 2018-03-16 |
| RU2659746C2 true RU2659746C2 (ru) | 2018-07-03 |
Family
ID=55199667
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| RU2016136709A RU2659746C2 (ru) | 2015-11-20 | 2015-12-29 | Способ и устройство обработки изображений |
Country Status (8)
| Country | Link |
|---|---|
| US (1) | US10013600B2 (ru) |
| EP (1) | EP3179408B1 (ru) |
| JP (1) | JP2018500611A (ru) |
| KR (1) | KR101910346B1 (ru) |
| CN (1) | CN105302315A (ru) |
| MX (1) | MX360936B (ru) |
| RU (1) | RU2659746C2 (ru) |
| WO (1) | WO2017084182A1 (ru) |
Families Citing this family (24)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5602878B2 (ja) * | 2009-12-31 | 2014-10-08 | アーベーベー・リサーチ・リミテッド | 発電プラントに対する負荷スケジューリングを最適化する方法及び制約解析モジュール |
| US10410096B2 (en) * | 2015-07-09 | 2019-09-10 | Qualcomm Incorporated | Context-based priors for object detection in images |
| CN105808668A (zh) * | 2016-02-29 | 2016-07-27 | 北京小米移动软件有限公司 | 信息的输出方法及装置 |
| CN105787982B (zh) * | 2016-02-29 | 2018-11-09 | 腾讯科技（北京）有限公司 | 一种制作电子书的方法和装置 |
| CN105549300A (zh) * | 2016-02-29 | 2016-05-04 | 北京小米移动软件有限公司 | 自动对焦方法及装置 |
| CN107239490B (zh) * | 2017-04-24 | 2021-01-15 | 北京小米移动软件有限公司 | 一种命名人脸图像的方法、装置及计算机可读存储介质 |
| CN107194179A (zh) * | 2017-05-26 | 2017-09-22 | 苏州微清医疗器械有限公司 | 眼底相机及眼底图像拍摄方法 |
| CN107451256A (zh) * | 2017-07-31 | 2017-12-08 | 东莞理工学院 | 图片美文的配置方法及系统 |
| CN109388765A (zh) * | 2017-08-03 | 2019-02-26 | Tcl集团股份有限公司 | 一种基于社交网络的图片标题生成方法、装置及设备 |
| CN108154091A (zh) * | 2017-12-11 | 2018-06-12 | 北京小米移动软件有限公司 | 图像展示方法、图像处理方法及装置 |
| CN108211359B (zh) * | 2017-12-28 | 2021-04-09 | 珠海豹好玩科技有限公司 | 一种信息提示方法、装置、终端和计算机可读存储介质 |
| CN108256099A (zh) * | 2018-01-30 | 2018-07-06 | 上海与德通讯技术有限公司 | 关系网的建立方法、基于关系网的提醒方法和智能设备 |
| CN108921840A (zh) * | 2018-07-02 | 2018-11-30 | 北京百度网讯科技有限公司 | 显示屏外围电路检测方法、装置、电子设备及存储介质 |
| CN109784240B (zh) * | 2018-12-30 | 2023-08-22 | 深圳市明日实业有限责任公司 | 一种人物识别方法、装置及存储装置 |
| CN109815936B (zh) * | 2019-02-21 | 2023-08-22 | 深圳市商汤科技有限公司 | 一种目标对象分析方法及装置、计算机设备和存储介质 |
| US11144750B2 (en) * | 2019-02-28 | 2021-10-12 | Family Concepts Ii, Llc | Association training related to human faces |
| JP7349124B2 (ja) * | 2019-03-28 | 2023-09-22 | 国立研究開発法人 海上・港湾・航空技術研究所 | 原動機の状態判断方法及び状態判断プログラム |
| US11748991B1 (en) * | 2019-07-24 | 2023-09-05 | Ambarella International Lp | IP security camera combining both infrared and visible light illumination plus sensor fusion to achieve color imaging in zero and low light situations |
| CN110765969A (zh) * | 2019-10-30 | 2020-02-07 | 珠海格力电器股份有限公司 | 一种拍照方法及系统 |
| CN111259019B (zh) * | 2020-01-09 | 2023-05-12 | 腾讯科技（深圳）有限公司 | 资源配置方法、装置、设备和存储介质 |
| CN111526287A (zh) * | 2020-04-27 | 2020-08-11 | 北京达佳互联信息技术有限公司 | 图像拍摄方法、装置、电子设备、服务器、系统及存储介质 |
| CN112040054A (zh) * | 2020-08-31 | 2020-12-04 | 维沃移动通信有限公司 | 图像生成方法、装置和电子设备 |
| KR102660613B1 (ko) * | 2021-02-26 | 2024-04-25 | 차형경 | 언어교육 보조 시스템용 사용자 기기 |
| CN113706401B (zh) * | 2021-07-05 | 2024-05-10 | 南京师范大学 | 一种基于手机摄像头的幻灯片自动拍摄及智能剪辑方法 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| RU2381553C1 (ru) * | 2008-06-24 | 2010-02-10 | Корпорация "САМСУНГ ЭЛЕКТРОНИКС Ко., Лтд." | Способ и система для распознавания лица с учетом списка людей, не подлежащих проверке |
| US20120294495A1 (en) * | 2011-05-18 | 2012-11-22 | Google Inc. | Retrieving contact information based on image recognition searches |
| US20140241594A1 (en) * | 2013-02-27 | 2014-08-28 | Canon Kabushiki Kaisha | Information processing apparatus and control method thereof |
| US20140280267A1 (en) * | 2013-03-14 | 2014-09-18 | Fotofad, Inc. | Creating real-time association interaction throughout digital media |
| US20150074206A1 (en) * | 2013-09-12 | 2015-03-12 | At&T Intellectual Property I, L.P. | Method and apparatus for providing participant based image and video sharing |
Family Cites Families (26)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4227370B2 (ja) * | 2002-07-26 | 2009-02-18 | キヤノン株式会社 | 情報検索装置、情報検索方法及びプログラム |
| US8553949B2 (en) * | 2004-01-22 | 2013-10-08 | DigitalOptics Corporation Europe Limited | Classification and organization of consumer digital images using workflow, and face detection and recognition |
| JP4444856B2 (ja) * | 2005-02-28 | 2010-03-31 | 富士フイルム株式会社 | 表題付与装置、表題付与方法、及びプログラム |
| KR100679049B1 (ko) * | 2005-09-21 | 2007-02-05 | 삼성전자주식회사 | 인물 및 장소정보를 제공하는 썸네일에 의한 사진탐색 방법및 그 장치 |
| JP2007183821A (ja) * | 2006-01-06 | 2007-07-19 | Seiko Epson Corp | 画像に関連した文の設定 |
| US20080215984A1 (en) | 2006-12-20 | 2008-09-04 | Joseph Anthony Manico | Storyshare automation |
| CN101568969B (zh) | 2006-12-20 | 2013-05-08 | 高智83基金会有限责任公司 | 故事共享自动化 |
| JP2009089046A (ja) * | 2007-09-28 | 2009-04-23 | Fujifilm Corp | 画像データ処理方法及び撮影装置 |
| US8385971B2 (en) * | 2008-08-19 | 2013-02-26 | Digimarc Corporation | Methods and systems for content processing |
| US9727312B1 (en) * | 2009-02-17 | 2017-08-08 | Ikorongo Technology, LLC | Providing subject information regarding upcoming images on a display |
| US9210313B1 (en) * | 2009-02-17 | 2015-12-08 | Ikorongo Technology, LLC | Display device content selection through viewer identification and affinity prediction |
| JP5023398B2 (ja) * | 2009-03-17 | 2012-09-12 | Ｎｅｃフィールディング株式会社 | 電子アルバム作成装置、方法、プログラム、システム、サーバー、情報処理装置、端末装置、及び撮像装置 |
| JP5517683B2 (ja) * | 2009-05-01 | 2014-06-11 | キヤノン株式会社 | 画像処理装置及びその制御方法 |
| CN102202173B (zh) * | 2010-03-23 | 2013-01-16 | 三星电子（中国）研发中心 | 照片自动命名方法及其装置 |
| JP2013012933A (ja) * | 2011-06-29 | 2013-01-17 | Sanyo Electric Co Ltd | 撮影メモ作成装置 |
| US9280545B2 (en) * | 2011-11-09 | 2016-03-08 | Microsoft Technology Licensing, Llc | Generating and updating event-based playback experiences |
| CN103259915A (zh) * | 2012-02-20 | 2013-08-21 | 宇龙计算机通信科技(深圳)有限公司 | 照片命名方法及移动终端 |
| CN104584529A (zh) * | 2012-08-17 | 2015-04-29 | 株式会社尼康 | 图像处理装置、拍摄装置以及程序 |
| CN102929934A (zh) * | 2012-09-25 | 2013-02-13 | 东莞宇龙通信科技有限公司 | 照片信息显示的方法及移动终端 |
| CN103971391A (zh) | 2013-02-01 | 2014-08-06 | 腾讯科技（深圳）有限公司 | 一种动画生成方法及装置 |
| CN103412951B (zh) * | 2013-08-22 | 2016-09-21 | 四川农业大学 | 基于人物照片的人脉关联分析管理系统与方法 |
| CN103544721B (zh) * | 2013-10-30 | 2016-05-04 | 宇龙计算机通信科技(深圳)有限公司 | 一种移动终端中添加图片备注的方法、系统及移动终端 |
| JP2015104078A (ja) * | 2013-11-27 | 2015-06-04 | オリンパス株式会社 | 撮像装置、撮像システム、サーバ、撮像方法、及び撮像プログラム |
| JP6323465B2 (ja) * | 2014-01-15 | 2018-05-16 | 富士通株式会社 | アルバム作成プログラム、アルバム作成方法およびアルバム作成装置 |
| JP6338418B2 (ja) * | 2014-03-28 | 2018-06-06 | 三菱電機株式会社 | 画像処理装置及び画像処理方法 |
| CN104317932B (zh) | 2014-10-31 | 2018-04-27 | 小米科技有限责任公司 | 照片分享方法及装置 |
-
2015
- 2015-11-20 CN CN201510813140.5A patent/CN105302315A/zh active Pending
- 2015-12-29 MX MX2016005789A patent/MX360936B/es active IP Right Grant
- 2015-12-29 KR KR1020167009865A patent/KR101910346B1/ko active IP Right Grant
- 2015-12-29 JP JP2016522732A patent/JP2018500611A/ja active Pending
- 2015-12-29 RU RU2016136709A patent/RU2659746C2/ru active
- 2015-12-29 WO PCT/CN2015/099612 patent/WO2017084182A1/zh active Application Filing
-
2016
- 2016-06-28 US US15/195,537 patent/US10013600B2/en active Active
- 2016-09-27 EP EP16190953.6A patent/EP3179408B1/en active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| RU2381553C1 (ru) * | 2008-06-24 | 2010-02-10 | Корпорация "САМСУНГ ЭЛЕКТРОНИКС Ко., Лтд." | Способ и система для распознавания лица с учетом списка людей, не подлежащих проверке |
| US20120294495A1 (en) * | 2011-05-18 | 2012-11-22 | Google Inc. | Retrieving contact information based on image recognition searches |
| US20140241594A1 (en) * | 2013-02-27 | 2014-08-28 | Canon Kabushiki Kaisha | Information processing apparatus and control method thereof |
| US20140280267A1 (en) * | 2013-03-14 | 2014-09-18 | Fotofad, Inc. | Creating real-time association interaction throughout digital media |
| US20150074206A1 (en) * | 2013-09-12 | 2015-03-12 | At&T Intellectual Property I, L.P. | Method and apparatus for providing participant based image and video sharing |
Also Published As
| Publication number | Publication date |
|---|---|
| EP3179408A3 (en) | 2017-09-20 |
| EP3179408A2 (en) | 2017-06-14 |
| RU2016136709A (ru) | 2018-03-16 |
| MX2016005789A (es) | 2017-10-20 |
| MX360936B (es) | 2018-11-21 |
| KR101910346B1 (ko) | 2018-10-22 |
| CN105302315A (zh) | 2016-02-03 |
| US10013600B2 (en) | 2018-07-03 |
| EP3179408B1 (en) | 2024-05-08 |
| JP2018500611A (ja) | 2018-01-11 |
| RU2016136709A3 (ru) | 2018-03-16 |
| US20170147869A1 (en) | 2017-05-25 |
| KR20170072166A (ko) | 2017-06-26 |
| WO2017084182A1 (zh) | 2017-05-26 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| RU2659746C2 (ru) | Способ и устройство обработки изображений | |
| US11637797B2 (en) | Automated image processing and content curation | |
| EP3125154B1 (en) | Photo sharing method and device | |
| CN105631408B (zh) | 基于视频的面孔相册处理方法和装置 | |
| US10534972B2 (en) | Image processing method, device and medium | |
| US10115019B2 (en) | Video categorization method and apparatus, and storage medium | |
| WO2019141042A1 (zh) | 图像分类方法、装置及终端 | |
| US20170154208A1 (en) | Image classification method and device | |
| US9953221B2 (en) | Multimedia presentation method and apparatus | |
| RU2664003C2 (ru) | Способ и устройство для определения ассоциированного пользователя | |
| CN108600632B (zh) | 拍照提示方法、智能眼镜及计算机可读存储介质 | |
| US20170118298A1 (en) | Method, device, and computer-readable medium for pushing information | |
| CN109040605A (zh) | 拍摄引导方法、装置及移动终端和存储介质 | |
| RU2654157C1 (ru) | Способ и устройство для получения изображения радужной оболочки глаза и устройство для идентификации радужной оболочки глаза | |
| RU2656978C2 (ru) | Способ и устройство для рекомендации облачной карты | |
| US20170339287A1 (en) | Image transmission method and apparatus | |
| CN113032627A (zh) | 视频分类方法、装置、存储介质及终端设备 | |
| CN109376674B (zh) | 人脸检测方法、装置及存储介质 | |
| CN108509863A (zh) | 信息提示方法、装置和电子设备 | |
| CN107122801B (zh) | 图像分类的方法和装置 | |
| CN116266418A (zh) | 运动识别方法、装置、电子设备和存储介质 | |
| CN110020117B (zh) | 一种兴趣信息获取方法、装置及电子设备 | |
| CN114020951A (zh) | 一种人脸质量增强模型的训练方法、图片搜索方法及装置 | |
| CN115481271A (zh) | 照片分类方法及装置 | |
| CN112822389A (zh) | 照片拍摄方法、照片拍摄装置及存储介质 |