RU2013104245A - Способ и система преобразования моментального снимка экрана в метафайл - Google Patents

Abstract

1. Способ преобразования моментального снимка экрана (скриншота) в метафайл, включающий в себя выполнение следующих операций:- обнаруживают фрагменты текста на скриншоте;- оценивают цвет фона и цвет символов на каждом фрагменте;- векторизуют контура символов;- модифицируют скриншот за счет заполнения фрагментов текста цветом фона;- создают метафайл на основе модифицированного скриншота и векторизованных контуров, заполненных цветом текста.2. Способ по п.1, отличающийся тем, что фрагменты текста на скриншоте обнаруживают путем выполнения следующих операций:- обнаруживают соседние пиксели с высоким значением горизонтального градиента;- объединяют соседние пиксели во фрагменты;- анализируют гистограммы фрагментов на предмет обнаружения признаков сглаженного текста;- выделяют фрагменты с признаками сглаженного текста.3. Способ по п.2, отличающийся тем, что объединяют соседние пиксели во фрагменты посредством морфологического расширения (дилатапии) и определения ограничивающих прямоугольников для каждой связанной группы пикселей.4. Способ по п.2, отличающийся тем, что в процессе анализа гистограммы фрагментов обнаружение признаков сглаженного текста осуществляют за счет того, что подсчитывают количество изолированных групп с ненулевыми столбцами для каждого цвета и проверяют это количество на превышение заданного порога.5. Способ по п.1, отличающийся тем, что цвет фона и цвет символов на каждом фрагменте оценивают на основе определения крайних столбцов гистограммы фрагмента.6. Способ по п.1, отличающийся тем, что фрагменты текста на скриншоте обнаруживают путем выполнения следующих операций:- делят скриншот �

Claims (10)

1. Способ преобразования моментального снимка экрана (скриншота) в метафайл, включающий в себя выполнение следующих операций:

- обнаруживают фрагменты текста на скриншоте;

- оценивают цвет фона и цвет символов на каждом фрагменте;

- векторизуют контура символов;

- модифицируют скриншот за счет заполнения фрагментов текста цветом фона;

- создают метафайл на основе модифицированного скриншота и векторизованных контуров, заполненных цветом текста.

2. Способ по п.1, отличающийся тем, что фрагменты текста на скриншоте обнаруживают путем выполнения следующих операций:

- обнаруживают соседние пиксели с высоким значением горизонтального градиента;

- объединяют соседние пиксели во фрагменты;

- анализируют гистограммы фрагментов на предмет обнаружения признаков сглаженного текста;

- выделяют фрагменты с признаками сглаженного текста.

3. Способ по п.2, отличающийся тем, что объединяют соседние пиксели во фрагменты посредством морфологического расширения (дилатапии) и определения ограничивающих прямоугольников для каждой связанной группы пикселей.

4. Способ по п.2, отличающийся тем, что в процессе анализа гистограммы фрагментов обнаружение признаков сглаженного текста осуществляют за счет того, что подсчитывают количество изолированных групп с ненулевыми столбцами для каждого цвета и проверяют это количество на превышение заданного порога.

5. Способ по п.1, отличающийся тем, что цвет фона и цвет символов на каждом фрагменте оценивают на основе определения крайних столбцов гистограммы фрагмента.

6. Способ по п.1, отличающийся тем, что фрагменты текста на скриншоте обнаруживают путем выполнения следующих операций:

- делят скриншот на пересекающиеся прямоугольные блоки;

- вычисляют признаки для каждого блока;

- классифицируют каждый блок как текстовый или не текстовый;

- объединяют соседние блоки во фрагменты текста.

7. Способ по п.6, отличающийся тем, что для каждого блока вычисляют следующие характерные признаки:

- число ненулевых столбцов b₊ и нулевых столбцов b₀ раздельно для каждого канала цветового пространства RGB;

- среднюю яркость блока: $${\overline{I}}_i=\frac{{\displaystyle \sum _{r=1}^N{\displaystyle \sum _{c=1}^N{I}_i\left(r,c\right)}}}{N^2}$$

, где I_i(r, c) - яркость пикселя, расположенного в строке r и столбце c, N - количество пикселей в блоке;

- среднюю разность средних яркостей блоков I_k в 4-х связном соседстве с блоком I_i: $${\overline{dI}}_i=\frac{{\displaystyle \sum _{k=1}^4\left|{\overline{I}}_i-{\overline{I}}_k\right|}}{4}$$

;

- среднее значение вертикальных $$d{I}_y^i$$

и горизонтальных $$d{I}_x^i$$

производных по блокам: $${\overline{d_{x,y}I}}_i=\frac{{\displaystyle \sum _{r=1}^N{\displaystyle \sum _{c=1}^{N-1}d{I}_x^i\left(r,c\right)+{\displaystyle \sum _{r=1}^{N-1}{\displaystyle \sum _{c=1}^{N}d{I}_y^i\left(r,c\right)+}}}}}{2N\left(N-1\right)}$$

;

- однородность блока: $$H={\displaystyle \sum _{i,j}\frac{N_d\left(i,j\right)}{1+\left|i-j\right|}}$$

, где N_d - это нормированная матрица вхождений, d - определяет пространственную связь;

- процент пикселей с градиентом выше порога: $$P_g={\displaystyle \sum _{\forall \left(r,c\right)\in Bi}\left\{1\right|\nabla I_i\left(r,c\right)>T\}/N^2}$$

где ∇I_i(r, c) вычисляется как квадратный корень из суммы квадратов горизонтальных и вертикальных производных;

- процент изменений яркостей пикселей на изображении $$I_i^o$$

, полученном в результате применения операции морфологического открытия к бинарному изображению $$I_i^b$$

, полученному бинаризацией с пороговым значением 128: $$P_m={\displaystyle \sum _{\forall \left(r,c\right)\in Bi}\left\{1\right|I_i^o\left(r,c\right)\ne I_i^b\left(r,c\right)\}/N^2}$$

.

8. Способ по п.6, отличающийся тем, что классифицируют каждый блок как текстовый или не текстовый по одному из следующих способов: бустинг комитета решающих деревьев, случайный лес решающих деревьев, машина опорных векторов, способ K-ближайших соседей.

9. Способ по п.1, отличающийся тем, что векторизуют контуры символов путем выполнения следующих операций:

- преобразуют фрагмент текста в полутоновое изображение;

- повышают разрешение полутонового изображения;

- бинаризуют фрагмент повышенного разрешения;

- отслеживают точки контуров символов в пределах фрагментов для описания траектории контуров;

- сокращают числа вершин контуров;

- аппроксимируют траекторию контуров с сокращенным числом вершин последовательностью отрезков прямых и кривых.

10. Система преобразования моментального снимка экрана (скриншота) в метафайл, включающая в себя:

- модуль сегментации текста, выполненный с возможностью сегментации текста, создания размеченной карты сегментированного текста и определения координат фрагментов, содержащих текст; причем на вход модуля поступает исходное растровое изображение скриншота, выходы модуля сегментации текста подключены к входам модулей векторизации и ретуширования, куда передается карта, а также к входу модуля оценки цвета, куда передаются координаты фрагментов и исходный скриншот;

- модуль оценки цвета, выполненный с возможностью определения цвета фона и текста для каждого фрагмента; на вход модуля поступают с выхода модуля сегментации текста координаты фрагментов и исходный скриншот; выходы модуля оценки цвета подключены к входу модуля ретуширования и входу модуля создания метафайла;

- модуль векторизации, выполненный с возможностью аппроксимации контуров символов на карте сегментированного текста замкнутой последовательностью отрезков прямых и кривых; вход модуля подключен к выходу модуля сегментации с возможностью получения карты; выход модуля векторизации подключен к входу модуля создания метафайла;

- модуль ретуширования текста, выполненный с возможностью модификации исходного растрового изображения скриншота посредством закрашивания области фрагментов с текстом соответствующим цветом фона; вход модуля подключен к выходу модуля оценки цвета; выход модуля подключен к входу модуль создания метафайла, куда передается модифицированный скриншот;

- модуль создания метафайла, выполненный с возможностью формирования метафайла из следующих записей: модифицированного скриншота, замкнутых последовательностей отрезков прямых и кривых, заполненных соответствующим цветом символа.