RU2417399C2 - Редактор документов на основе жестов - Google Patents
Редактор документов на основе жестов Download PDFInfo
- Publication number
- RU2417399C2 RU2417399C2 RU2008121933/08A RU2008121933A RU2417399C2 RU 2417399 C2 RU2417399 C2 RU 2417399C2 RU 2008121933/08 A RU2008121933/08 A RU 2008121933/08A RU 2008121933 A RU2008121933 A RU 2008121933A RU 2417399 C2 RU2417399 C2 RU 2417399C2
- Authority
- RU
- Russia
- Prior art keywords
- path
- editing
- computer
- touch screen
- partially
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
- Document Processing Apparatus (AREA)
Abstract
Изобретение относится к сенсорным пользовательским интерфейсам. Технический результат заключается в создании редактора документов на основе жестов. Такой результат достигается благодаря тому, что формируют указывающим устройством первый путь на сенсорном экране, который, по меньшей мере, частично окружает объект, при этом этот объект, окруженный, по меньшей мере, частично, автоматически выбирается; формируют указывающим устройством второй путь в заранее заданной области на сенсорном экране, при этом второй путь активирует операцию редактирования. 4 н. и 20 з.п. ф-лы, 14 ил.
Description
УРОВЕНЬ ТЕХНИКИ
1. ОБЛАСТЬ ТЕХНИКИ
[0001] Настоящее изобретение в общем относится к сенсорным пользовательским интерфейсам и конкретно к редактору документов на основе жестов.
2. КРАТКОЕ ОПИСАНИЕ РОДСТВЕННЫХ РАЗРАБОТОК
[0002] Использование способов ввода пером или стилусом в мобильных устройствах, таких как, например, мобильные телефоны, персональные цифровые секретари и им подобных, становится все более популярным. Одна из наиболее часто используемых функций пера в этих мобильных устройствах - ввод текста. При этом популярна удобная система редактирования текста на основе пера.
[0003] Для полного использования ограниченной области экрана устройств, таких как мобильные устройства для чтения, широко применяется полноэкранный пользовательский интерфейс. При использовании полноэкранного пользовательского интерфейса большинство операций по редактированию текста, например выбор текста, удаление, перемещение, копирование и вставка, не могут быть выполнены в текстовой области так же легко, как могут быть выполнены с использованием основанного на окнах пользовательского интерфейса.
[0004] Традиционно письменные строки в текстовой области относятся к компонентам написанных букв, поэтому пользователь должен отложить перо и обратиться к использованию клавиатуры для последующих операций редактирования текста. В некоторых случаях пером можно управлять всеми операциями редактирования текста, но пользователь должен проводить редактирование очень неэффективным побуквенным способом. Есть другие решения, которые требуют от пользователя мобильного устройства переключиться на оконный пользовательский интерфейс для редактирования текста, при этом допуская выбор текста и операции редактирования в текстовой области.
СУЩНОСТЬ ИЗОБРЕТЕНИЯ
[0005] Настоящее изобретение направлено на создание редактора документов на основе жестов. В соответствии с примером осуществления изобретения предлагается способ для редактирования объектов в устройстве. Способ включает формирование первого пути на сенсорном экране с помощью указывающего устройства. Первый путь по меньшей мере частично окружает объект. Объект, окруженный по меньшей мере частично, автоматически выделяется. Второй путь формируется в заранее заданной области сенсорного экрана с помощью указывающего устройства. Второй путь активирует операцию редактирования.
[0006] В соответствии с примером осуществления изобретения предлагается устройство для редактирования объектов. Устройство включает процессор дисплея, сенсорный экран, соединенный с процессором дисплея, блок обнаружения первого и второго ввода, соединенный с процессором дисплея, блок распознавания ввода, соединенный с процессором дисплея, и блок редактирования, соединенный с блоком распознавания ввода. Блок обнаружения первого ввода принимает первый ввод в виде первого пути, сформированного пользователем с применением указывающего устройства на сенсорном экране. Блок обнаружения второго ввода принимает второй ввод в виде второго пути, сформированного пользователем с применением указывающего устройства на сенсорном экране. Блок распознавания ввода обнаруживает первый путь, окружающий объект по меньшей мере частично. Блок распознавания ввода также обнаруживает второй путь, который формируется в заранее заданной области сенсорного экрана, и генерирует сигнал редактирования. Блок редактирования активирует функцию редактирования в ответ на сигнал редактирования.
[0007] В соответствии с примером осуществления изобретения предлагается компьютерный программный продукт. Компьютерный программный продукт имеет используемый в компьютере носитель, имеющий читаемые компьютером кодовые средства, заставляющие компьютер редактировать объекты в устройстве. Компьютерный программный продукт включает читаемые компьютером программные кодовые средства для формирования компьютером первого пути, в соответствии с определением указывающего устройства, на сенсорном экране, который окружает объект по меньшей мере частично. Компьютерный программный продукт также включает читаемые компьютером программные кодовые средства для автоматического выбора компьютером объекта, окруженного по меньшей мере частично. Компьютерный программный продукт включает читаемые компьютером программные кодовые средства для формирования компьютером второго пути, в соответствии с определением указывающего устройства, в заранее заданной области сенсорного экрана, при этом второй путь активирует операцию редактирования.
[0008] В соответствии с еще одним примером осуществления изобретения предлагается изделие. Изделие имеет используемый в компьютере носитель, содержащий читаемые компьютером программные кодовые средства, заставляющие компьютер редактировать объекты в устройстве. Читаемые компьютером программные кодовые средства в изделии также заставляют компьютер автоматически выбирать объекты, окруженные по меньшей мере частично. Читаемые компьютером программные кодовые средства в изделии также заставляют компьютер формировать второй путь, в соответствии с определением указывающим устройством, в заранее заданной области сенсорного экрана, при этом второй путь активирует операцию редактирования.
КРАТКОЕ ОПИСАНИЕ ЧЕРТЕЖЕЙ
[0009] В последующем описании упомянутые аспекты и другие особенности настоящего изобретения рассматриваются вместе с сопровождающими чертежами, где:
[00010] Фиг.1 - это блок-схема части устройства, включающего сенсорный экран и процессор дисплея, работающий в соответствии с примером осуществления изобретения;
[00011] Фиг.2 иллюстрирует осуществление устройства фиг.1 в соответствии с примером осуществления изобретения;
[00012] Фиг.3(a) и 3(b) иллюстрируют еще одно осуществление устройства на фиг.1 и иллюстрируют процесс выбора объекта в соответствии с примером осуществления изобретения;
[00013] Фиг.4(a)-4(g) показывают объект редактирования в соответствии с примером осуществления изобретения;
[00014] Фиг.5(a)-5(d) показывают объект редактирования в соответствии с примером осуществления изобретения;
[00015] Фиг.6 показывает выбор объекта в соответствии с примером осуществления изобретения;
[00016] Фиг.7 показывает выбор объекта в соответствии с примером осуществления изобретения;
[00017] Фиг.8 показывает выбор объекта в соответствии с примером осуществления изобретения;
[00018] Фиг.9 - это блок-схема одного из вариантов осуществления типичного устройства, которое включает признаки настоящего изобретения и которое может быть использовано в настоящем изобретении;
[00019] Фиг.10 - это блок-схема в соответствии со способом в примере осуществления изобретения;
[00020] Фиг.11 - это блок-схема в соответствии с еще одним способом в примере осуществления изобретения;
[00021] Фиг.12 - это блок-схема в соответствии с еще одним способом в примере осуществления изобретения;
[00022] Фиг.13 - это блок-схема в соответствии с еще одним способом в примере осуществления изобретения; и
[00023] Фиг.14 показывает реализацию выбора объекта в соответствии с примером осуществления изобретения.
ПОДРОБНОЕ ОПИСАНИЕ ПРИМЕРОВ ОСУЩЕСТВЛЕНИЯ ИЗОБРЕТЕНИЯ
[00024] Фиг.1 показывает систему, включающую признаки настоящего изобретения. Хотя настоящее изобретение будет описываться по отношению к примерам осуществлений, показанным в чертежах и описанным ниже, следует понимать, что настоящее изобретение может быть осуществлено во многих альтернативных формах осуществления.
[00025] Фиг.1 - это упрощенная блок-схема части устройства 1, имеющего процессор 12 дисплея и дисплей 10 сенсорного экрана, включающие признаки настоящего изобретения. С дисплеем 10 сенсорного экрана может применяться указывающее устройство 11, такое как, например, стилус, перо или просто палец пользователя. В альтернативных вариантах осуществления изобретения может быть использовано любое подходящее указывающее устройство. Дисплей 10 и указывающее устройство 11 формируют пользовательский интерфейс устройства 1 и могут быть сконфигурированы как графический пользовательский интерфейс. Процессор 12 дисплея соединен с памятью 14, которая хранит алгоритм выбора на основе жеста или росчерка, по которому процессор 12 дисплея работает в соответствии с этим изобретением. Первый канал связи или данных или соединение между дисплеем 10 и процессором 12 используется для получения процессором 12 информации по координате, которая описывает или показывает положение кончика указывающего устройства 11 по отношению к поверхности дисплея 10. Дисплей 10 обычно состоит из пикселей и может содержать жидкокристаллические пиксели или пиксели другого типа дисплея. В альтернативных вариантах осуществления изобретения может быть использован любой подходящий тип дисплея.
[00026] Процессор 12 дисплея обычно предоставляет данные дисплея напрямую или ненапрямую дисплею 10 по второму каналу связи или данных или соединению 12 В для активации желаемых пикселей, как хорошо известно специалистам. Заданное координатное положение, такое как, например, положение X-Y на поверхности дисплея 10, может соответствовать прямо или косвенно одному или нескольким пикселям дисплея в зависимости от разрешения пикселя и разрешения самого сенсорного экрана. Одна точка на дисплее 10 сенсорного экрана (одно положение х-у) может, таким образом, соответствовать одному пикселю или множеству соседних пикселей. В отличие от одной точки, путь, росчерк или линия 50 (здесь эти термины используются взаимозаменяемо) может иметь начальную х-у точку (S) и конечную х-у точку (Е) и может включать некоторое количество х-у положений между S и Е. Приводя конец указывающего устройства 11 в близость или контакт с поверхностью дисплея 10, можно пометить начальную точку S росчерка 50 и, последовательно перемещаясь или подняв конец указывающего устройства 11 от поверхности дисплея 10, можно пометить конечную точку Е росчерка 50. В данном варианте осуществления изобретения для формирования или распознавания входного сигнала от метки указывающее устройство 11 не обязательно приводить в контакт с поверхностью дисплея 10. Приводя конец указывающего устройства 11 в близость или контакт с поверхностью дисплея 10 и последовательно перемещая или поднимая конец указывающего устройства 11 от поверхности дисплея 10 без перемещения кончика указывающего устройства по поверхности дисплея 10, можно пометить одну точку.
[00027] Следует заметить, что росчерк 50 может частично или по существу заключать или окружать область или объект на поверхности дисплея 10, чтобы активировать выделение объекта, как будет описано ниже. В соответствии с примером осуществления изобретения, если область 22 содержит объект и частично или по существу окружена росчерком, объект в окруженной области становится выбранным целевым объектом 10А. Другие объекты дисплея, находящиеся вне области (в границах росчерка), не являются «выбранными» в обычном понимании этого термина, и могут указываться как невыбранный объект 10В.
[00028] В соответствии с примером осуществления изобретения устройство 1 может быть, например, сотовым телефоном 1А, как показано на фиг.2. Сотовый телефон 1А может иметь клавиатуру 25, сенсорный экран 10 и указывающее устройство 11 для использования с дисплеем 10 сенсорного экрана. В соответствии с еще одним примером осуществления изобретения устройство 1 может быть PDA (КПК) 1В, как показано на фиг.3(а) и 3(b). PDA 1В может также иметь дисплей 10 сенсорного экрана и указывающее устройство 11. В других альтернативных вариантах осуществления изобретения устройство 1 может быть персональным коммуникатором, планшетным компьютером, лэптопом или настольным компьютером, или любым другим подходящим устройством, содержащим дисплей 10 сенсорного экрана и поддерживаемым электроникой, такой как процессор 12 дисплея. Следует отметить, что процессор 12 дисплея не обязательно должен быть выделен для работы с дисплеем 10 сенсорного экрана и может отвечать также за выполнение других задач устройства 1. Также процессор 12 дисплея в действительности может сам не выбирать один или несколько объектов дисплея, которые обычно заключены в области, определенной росчерком. Вместо этого процессор 12 дисплея может послать сигнал на более высокий уровень программного обеспечения, такой как операционная система, для идентификации объектов, указанных или выбранных пользователем при помощи указывающего устройства 11.
[00029] Далее, со ссылкой на фиг.3(a), 3(b), 4(a) по 4(g) и 5(a), будет описан способ выбора объекта в соответствии с примером осуществления изобретения. Как обсуждалось выше, дисплей 10 сенсорного экрана и указывающее устройство 11 могут быть сконфигурированы как пользовательский интерфейс устройства 1. В этом примере осуществления изобретения пользователь устройства 1 может пожелать выбрать объект для редактирования, что отображается на дисплее 10 сенсорного экрана как часть приложения или другой программы, хранящейся в памяти или выполняемой в устройстве 11. Функция редактирования может включать, например, функцию копирования и вставки, функцию вырезания и вставки, функцию перемещения и функцию удаления. Как показано на фиг.4(a), на дисплее 10 отображается последовательность текстовых знаков. В альтернативных вариантах осуществления изобретения объектами на дисплее могут быть, например, рисунок, чертеж или любой другой желаемый объект на дисплее 10 устройства 1. В альтернативных вариантах осуществления изобретения могут быть группы объектов 3, как можно видеть на фиг.3(a), которые представлены на дисплее 10 и доступны для выделения пользователем. Хотя для описания примеров осуществления изобретения будет использоваться текст, следует понимать, что изобретение применимо равным образом к любому подходящему объекту, который может быть отображен в устройстве 1. Также, хотя текст, такой как, например, текст 15 на фиг.4(a), обычно показан на чертежах на китайском языке, может быть использован любой подходящий язык, текстовые знаки или объекты.
[00030] В данном варианте осуществления изобретения может быть использован алгоритм 14А на основе росчерка для определения, является ли область или объект на дисплее 10 окруженными или отмеченными пользователем (т.е. росчерк 50 выбора) таким образом, что объект 10А может быть выбран. Например, пользователь частично или по существу окружает текст для редактирования, используя росчерк 50, как можно видеть на фиг.4(a) и 4(b). В данном варианте осуществления изобретения, и как будет описано ниже, росчерк 50 не обязательно должен быть замкнутым, как можно видеть на фиг.1 и 6. Росчерк 50 выбора может быть сформирован пользователем росчерком в любом подходящем направлении, таком как, например, налево, направо, вверх, вниз, по часовой стрелке или против часовой стрелки. Росчерк выбора может иметь любую форму, достаточную для заключения или окружения желаемого объекта, такого как текст 15, который должен быть выбран.
[00031] Для выбора сегмента текста 20 росчерк 50 выбора не обязательно должен иметь полностью замкнутую форму. В соответствии с примером осуществления изобретения, когда начальная и конечная точки S, Е росчерка 50 выбора, как видно на фиг.6(a), находятся на заранее заданной дистанции друг от друга, выбор текста распознается и принимается как достоверный по основанному на росчерке алгоритму 14А выбора, и объект выбирается. В данном варианте осуществления изобретения начальная и конечные точки S, Е находятся поблизости друг от друга. В альтернативных вариантах осуществления изобретения начальная и конечные точки S, E могут быть на любом приемлемом расстоянии друг от друга. При этом пользователь может продолжать последовательные операции редактирования, как будет описано ниже. Если начальная и конечные точки S, Е росчерка 50 выбора не находятся на заранее заданном расстоянии друг от друга, как показано, например, на фиг.6(b), выбор не распознается по основанному на росчерке алгоритму 14А выбора, объект или буква не выбираются, и последовательность или процедура редактирования не активируется. В данном варианте осуществления изобретения заранее заданное расстояние между начальной и конечной точками S, E росчерка 50 выбора может зависеть от используемого языка.
[00032] В данном варианте осуществления изобретения пользователь может частично или по существу окружить или заключить один объект или множество объектов росчерком 50 выбора. Например, см. фиг.4(а)-(с), 14(a) и 14(b), если нужно выбрать множество объектов, объекты должны быть в непрерывной связи друг с другом, такой как у знаков 24. Знаки 24 могут быть, например, последовательностью объектов или букв, смежных друг с другом, таких как буквы, формирующие слово. В альтернативных вариантах осуществления изобретения знаки 24 могут быть, например, последовательностью знаков или объектов, включающей целый параграф или законченное предложение. Если выбранный текст не представляет собой последовательность знаков, как, например, текст 90, показанный на фиг.7 и 14(c), выбор не распознается как достоверный алгоритмом 14А на основе росчерка, и объект не выбирается. Кроме того, попытка выбора не являющегося непрерывным текста может активировать функцию 65 распознавания текста, как показано на фиг.7, которая предоставляет пользователю опции объекта или текста (т.е. знаки), которые имеют сходство по форме, в росчерке 50, используемом для окружения не являющегося непрерывным текста. Пользователь может выбрать вставку одного из знаков или объектов, показываемых функцией 65 распознавания текста, в документе или на дисплее 10.
[00033] В альтернативных вариантах осуществления изобретения, где устройство 1 сконфигурировано для использования с английским языком, росчерк 50 достоверного выбора может походить на знак английского алфавита, такой как буква «О» или «U». В данном варианте осуществления изобретения, где действующий росчерк выбора имеет сходство со знаком английского алфавита, алгоритм 14А выбора на основе росчерка может как распознать выделение как достоверное, так и активировать функцию 65 распознавания текста. Например, росчерк 95 выбора, как показано на фиг.8, окружает последовательность знаков "us". Хотя последовательность знаков и окружена, росчерк 95 выделения также походит на букву "О". При этом алгоритм 14А выбора на основе росчерка распознает выделение объекта как действующее и выделяет окруженный текст, в то же время активируя функцию 65 распознавания текста, позволяющую пользователю выбирать, редактировать ли текст 20 в соответствии с примером осуществления изобретения или введенный знак, т.е. буква "О", должна быть интерпретирована с использованием функции 65 распознавания текста.
[00034] Как показано на фиг.4(a)-4(g) и фиг.10, пользователь выбирает часть текста 20 для редактирования, используя росчерк 50 выбора (блок 1001, фиг.10). Как только росчерк 50 распознан, текст 20 выбирается и выделяется 22. Выбранный и выделенный текст 23, как видно на фиг.4(с), может включать, например, знаки 24, находящиеся в непрерывной связи друг с другом, как обсуждалось выше. Выбор текста 20, сделанный способом, описанным выше, автоматически распознается алгоритмом 14А на основе росчерка в момент времени, когда указывающее устройство удаляется или по существу разрывает контакт с сенсорным экраном (блок 1002, фиг.10). Помеченная область выбора 22 может отображать выбранный текст 23. Помеченная область выбора 22 может быть подсвечена или затенена, как показано на фиг 4(c) (блок 1002, фиг.10). В альтернативных вариантах осуществления изобретения выбранная область может быть отмечена любым подходящим способом, включая, например, штриховку, как показано на фиг.3(b). В других альтернативных вариантах осуществления изобретения выбранная область может быть отмечена, например, цветным фоном.
[00035] Когда выбранный текст 23 распознан алгоритмом 14А на основе росчерка, пользователь может манипулировать выделенным текстом 23 путем жестов или движений, сделанных указывающим устройством 11, по существу или по меньшей мере частично находящимся в контакте с сенсорным экраном 10 на выделенной области 22. В данном варианте осуществления изобретения для указывающего устройства 11 может быть необязательным иметь физический контакт с сенсорным экраном 10 для создания метки. Как показано на фиг.4(d), чтобы инициировать функцию редактирования, пользователь делает или формирует метку на выделенном тексте 23. Метка, например метка 30, может включать любую подходящую метку или метки, сформированные по существу при контакте указывающего устройства 11 с дисплеем 10 и перемещении указывающего устройства 11 на выбранную область 22. Например, в данном варианте осуществления изобретения, как показано на фиг.4(d), пользователь делает на выбранной области 22 метку в форме буквы "V" или галочки. В данном варианте осуществления изобретения "V" или галочка символизирует или вызывает активирование функции редактирования в форме копирования. В альтернативных вариантах осуществления изобретения для инициирования конкретных функций редактирования могут быть использованы любые предварительно заданные или определенные знаки или пометки. В данном варианте осуществления изобретения манипулирование выделенным текстом 23 может включать функции редактирования, такие как, например, операции копирования, вырезания, вставки и удаления. В альтернативных вариантах осуществления изобретения могут быть использованы любые подходящие функции редактирования текста или образа. В качестве примера со ссылкой на фиг.4(d) и 5(a) здесь будет описана операция копирования и вставки. В данном варианте осуществления изобретения пользователь делает метку или росчерк 30 пером в выбранной области 22 текста по существу в виде буквы "V". В соответствии с этим примером осуществления изобретения, метка 30 по существу в форме "V" представляет или активирует операцию копирования (блок 1003, фиг.10). Активизация операции копирования происходит в момент времени, когда после создания или формирования метки 30 указывающее устройство 11 по существу поднимается вверх или уводится от дисплея 10. Когда выделенный текст 23 скопирован, в обычном понимании этого термина, сокращенная версия 70 выделенного текста 23 отображается и запоминается в области буфера 25 обмена, как можно видеть на фиг.4(e), 4(f) и 5(a) (блок 1004, фиг.10). В альтернативных вариантах осуществления изобретения может быть применена любая подходящая индикация скопированного выделенного текста. Сокращенная версия 70 выделенного текста может включать часть выделенного текста, как, например, только первые несколько букв выделенного текста. В альтернативных вариантах осуществления изобретения, когда выделяется такой объект, как, например, рисунок или чертеж, в области буфера обмена может быть отображена миниатюрная версия рисунка или чертежа или только часть рисунка или чертежа. В альтернативных вариантах осуществления изобретения для представления выделенного объекта, помещенного в буфер, может быть использовано любое подходящее сокращение.
[00036] В этом примере осуществления изобретения пользователь может вставить выбранный текст 23 или объект, например, в любую подходящую область дисплея 10. Например, в данном варианте осуществления изобретения пользователь может вставить выбранный текст 23 или объект в документ, как можно видеть на фиг.4(f) и 4(g). В альтернативных вариантах осуществления изобретения пользователь может вставить выбранный текст 23 или объект в другой документ или приложение, которое может быть сохранено в устройстве 1 или быть доступно для него. В данном приложении операция вставки может быть активирована второй меткой 40 по существу в форме "V", сделанной пользователем в желаемом месте или области документа, как показано на фиг.4(f) (блок 1005, фиг 10). Операция вставки распознается после создания или формирования второй метки 40, когда указывающее устройство 11 по существу поднимается вверх или убирается от дисплея 10. После распознавания операции вставки алгоритмом выбора 14А на основе росчерка выбранный текст 23 вставляется из буфера 25 в место или область, предварительно выбранную пользователем, т.е. там, где была сделана метка 40 (блок 1006, фиг.10). В соответствии с этим примером осуществления изобретения метка 30, представляющая операцию копирования, и вторая метка 40, представляющая операцию вставки, сделаны обе по существу в форме "V". Однако в альтернативных вариантах осуществления изобретения для инициирования операций копирования и вставки могут быть использованы любые выполняемые пером росчерки подходящей формы. Как можно видеть на фиг.4(g), в результате операции вставки выбранный текст 23 вставляется в документ как вставка текста 85. В данном варианте осуществления изобретения выбранный и скопированный текст 23 помещается и сохраняется в буфере 25 обмена. При этом выбранный текст 23 может быть вставлен в документ много раз, если требуется, без повторного выбора текста 20, как описано выше.
[00037] Ссылаясь далее на фиг.5(b) и 11, опишем функцию вырезания и вставки в соответствии с примером осуществления изобретения. В этом примере осуществления изобретения часть текста 23 выбирают по существу подобно тому, как описывалось выше (блоки 1101, 1102, фиг.11). В данном варианте осуществления изобретения для активизации операции вырезания, в обычном понимании этого термина, пользователь создает или формирует метку 35 в выбранной текстовой области 22, используя указывающее устройство 11, как можно видеть на фиг.5(b) (блок 1103, фиг.10). В этом варианте осуществления изобретения метка 35 сделана по существу в форме "X". В альтернативных вариантах осуществления изобретения для активизации операции вырезания может использоваться росчерк любой подходящей формы. Операция вырезания распознается, когда указывающее устройство 11 по существу поднимается вверх или убирается от поверхности дисплея после создания или формирования метки 35 по существу в форме "X". Когда операция вырезания распознается алгоритмом 14А выбора на основе росчерка, выбранный текст 23 вырезается или перемещается из видимой области дисплея 10 или документа, как видно на фиг.5(b) (блок 1104, фиг.11). В данном варианте осуществления изобретения вырезанный текст 24 помещается и хранится в буфере 25 обмена, при этом сокращение 70 вырезанного текста 24 показано на экране в области буфера 25, как можно видеть на 5(b) (блок 1104, фиг.11). Пользователь может вставить вырезанный текст 24 из буфера 25 обмена в документ или приложение в основном подобно тому, как описывалось выше для операции копирования и вставки (блок 1105 и 1106, фиг.11). Точно так же, поскольку вырезанный текст 24 помещается или запоминается в буфере 25 обмена, вырезанный текст 24 может быть вставлен в документ любое желаемое число раз.
[00038] Теперь со ссылкой на фиг.5(c) и 12 опишем операцию перемещения в соответствии с примером осуществления изобретения. В этом примере осуществления изобретения в основном подобно тому, как описывалось выше (блоки 1201, 1202, фиг.12), выбирается часть текста 23. В данном варианте осуществления изобретения для активизации операции перемещения, в обычном понимании этой операции, пользователь может создать или сформировать метку по существу в форме "V" или росчерк 40 в заранее заданном месте документа, как показано на фиг.5(c) (блок 1203, фиг.12). В альтернативных вариантах осуществления изобретения для активизации операции перемещения может использоваться метка любой подходящей формы. Операция перемещения распознается алгоритмом 14А на основе росчерка, когда указывающее устройство 11 по существу поднимается или убирается от дисплея 10 после создания или формирования пользователем метки 40. После распознавания операции перемещения выбранный текст 23 вырезается из первоначального места на дисплее 10 в документе или приложении и перемещается на место, указанное меткой 40 по существу в форме "V", без помещения в буфер 25, как можно видеть на фиг.5(c) (блоки 1204, 1205, фиг.12). Поскольку во время операции перемещаемый текст 86 не помещается в буфер, текст 86 может быть повторно выбран каждый раз, когда текст 86 нужно переместить в другое место в документе или на дисплее.
[00039] Далее со ссылкой на фиг.5(d) и фиг.13 описывается операция удаления в соответствии с еще одним примером осуществления изобретения. В этом примере осуществления изобретения по существу подобно тому, как обсуждалось выше (блоки 1301, 1302, фиг.13), выбирается часть текста 23. В данном варианте осуществления изобретения для активизации операции удаления, в обычном понимании этой операции, пользователь может создать или сформировать жест или метку 45 по существу над выбранным текстом 23, как можно видеть на фиг.5(d) (блок 1303, фиг.13). В этом варианте осуществления изобретения жест или метка 45 имеют форму по существу прямой линии. В альтернативных вариантах осуществления изобретения для активизации операции удаления может использоваться метка любой подходящей формы. Метка 45 может быть сделана по существу в выбранной области текста 22 и, например, в общем направлении по стрелке 100. В альтернативных вариантах осуществления изобретения метка 45 может быть сделана в любом заранее заданном направлении. Операция удаления распознается алгоритмом 14А на основе росчерка, когда указывающее устройство 11 по существу поднимается или убирается от дисплея 10 после создания или формирования пользователем метки 45. когда операция удаления распознана, удаляемый текст 46 удаляется из документа без помещения в буфер 25, как можно видеть на фиг.5(d) (блок 1304, фиг.13).
[00040] Хотя предыдущее описание сделано в контексте способа ввода с полноэкранным пользовательским интерфейсом, следует понимать, что примеры осуществления применимы к оконным интерфейсам или также к любым другим подходящим типам интерфейса.
[00041] Настоящее изобретение может также включать программное обеспечение и компьютерные программы, включающие шаги процесса и инструкции, описанные выше, выполняемые в различных компьютерах. На фиг.9 представлена блок-схема типичного устройства 900, включающего признаки настоящего изобретения, которое может быть использовано для применения настоящего изобретения на практике. Как показано, компьютерная система 902 может быть связана с другой компьютерной системой 904 таким образом, что компьютеры 902 и 904 могут передавать информацию один другому и принимать информацию один от другого. В данном варианте осуществления изобретения компьютерная система 902 может включать сервер, приспособленный для связи с сетью 906. Компьютерные системы 902 и 904 могут быть связаны вместе любым приемлемым способом, включая модем, кабель или оптоволоконное соединение. В общем информация может быть сделана доступной для обеих компьютерных систем 902 и 904 с использованием протокола связи, обычно с передачей по каналу связи или по коммутируемой телефонной линии или ISDN линии. Компьютеры 902 и 904 обычно адаптированы к использованию устройств хранения программ, хранящих читаемый машиной исходный программный код, предназначенный для того, чтобы компьютеры 902 и 904 выполняли шаги способа согласно настоящему изобретению. Устройства хранения программ, включающие признаки настоящего изобретения, могут быть разработаны, сделаны и использованы как компоненты компьютера, с использованием оптики, магнитных средств и/или электроники, для выполнения процедур и способов настоящего изобретения. В альтернативных вариантах осуществления изобретения, устройства хранения программ могут включать магнитный носитель, такой как дискета или жесткий диск компьютера, читаемые и исполняемые компьютером. В других альтернативных вариантах осуществления изобретения, устройства хранения программ могут включать оптические диски, память только для чтения ("ROM"), флоппи-диски и полупроводниковые материалы и чипы.
[00042] Компьютерные системы 902 и 904 могут также включать микропроцессор для выполнения хранимых программ. Компьютер 902 может включать устройство 908 хранения данных в его устройстве хранения программ для запоминания информации и данных. Компьютерная программа или программное обеспечение, включающее процессы и шаги способа, включающие признаки настоящего изобретения, может храниться в одном или нескольких компьютерах 902 и 904 на другом традиционном устройстве хранения программ. В данном варианте осуществления изобретения компьютеры 902 и 904 могут включать пользовательский интерфейс 910 и интерфейс 912 дисплея для доступа к функциям настоящего изобретения. Пользовательский интерфейс 908 и интерфейс 912 дисплея могут быть приспособлены для разрешения ввода запросов и команд в систему, а также для представления результатов команд и запросов.
[00043] Следует понимать, что данное описание является только пояснением изобретения. Различные альтернативы и модификации могут быть предложены специалистами без отхода от сущности изобретения. Соответственно, настоящее изобретение охватывает все такие альтернативы, модификации и вариации в рамках формулы изобретения.
Claims (24)
1. Способ редактирования объектов в устройстве, включающий: формирование указывающим устройством на сенсорном экране первого пути, по меньшей мере, частично окружающего объект и включающего начальную точку и конечную точку, которые находятся в пределах заранее заданного расстояния друг от друга;
определение того, является ли первый путь достоверным росчерком выбора; и
в ответ на то, что первый путь является достоверным росчерком выбора, автоматический выбор этого объекта, окруженного, по меньшей мере, частично; и
формирование указывающим устройством второго пути в заранее заданной области на сенсорном экране, при этом второй путь активирует операцию редактирования.
определение того, является ли первый путь достоверным росчерком выбора; и
в ответ на то, что первый путь является достоверным росчерком выбора, автоматический выбор этого объекта, окруженного, по меньшей мере, частично; и
формирование указывающим устройством второго пути в заранее заданной области на сенсорном экране, при этом второй путь активирует операцию редактирования.
2. Способ по п.1, в котором операция редактирования является операцией перемещения и указанный объект, окруженный, по меньшей мере, частично, перемещается в заранее заданную область.
3. Способ по п.1, в котором объект, окруженный, по меньшей мере, частично, выбирают, когда объект, окруженный, по меньшей мере, частично, включает один знак или множество знаков, которое является последовательностью.
4. Способ по п.1, в котором операция редактирования является операцией удаления и объект, окруженный, по меньшей мере, частично, удаляется.
5. Способ по п.1, также включающий формирование указывающим устройством третьего пути в заранее заданной области на сенсорном экране, при этом третий путь активирует операцию второго редактирования.
6. Способ по п.5, в котором операция редактирования является операцией копирования, а операция второго редактирования является операцией вставки.
7. Способ по п.6, в котором частично окруженный объект включает один знак или множество знаков, при этом множество знаков имеют непрерывную связь друг с другом.
8. Способ по п.6, также включающий отображение сокращенной версии выбранного объекта в области буфера обмена.
9. Способ по п.6, в котором третий путь имеет такую же форму, как и второй путь.
10. Способ по п.5, в котором операция редактирования является операцией вырезания, а операция второго редактирования является операцией вставки.
11. Способ по п.10, в котором операция вырезания включает операцию удаления выбранного объекта и отображение сокращенной версии выбранного объекта в области буфера обмена.
12. Устройство для редактирования объектов, включающее:
процессор дисплея;
сенсорный экран, соединенный с процессором дисплея, и блок обнаружения первого ввода, соединенный с процессором дисплея, который принимает первый ввод в виде первого пути, сформированного пользователем с применением указывающего устройства на сенсорном экране, причем первый путь, по меньшей мере, частично окружает объект и включает начальную точку и конечную точку, которые находятся в пределах заранее заданного расстояния друг от друга; и блок обнаружения второго ввода, соединенный с процессором дисплея, который принимает второй ввод в виде второго пути, сформированного пользователем с применением указывающего устройства на сенсорном экране;
блок распознавания ввода, соединенный с процессором дисплея, который обнаруживает первый путь, по меньшей мере, частично окружающий объект, определяет, является ли первый путь достоверным росчерком выбора, и в ответ на то, что первый путь является достоверным росчерком выбора, обнаруживает второй путь, сформированный в заранее заданной области сенсорного экрана, и генерирует сигнал редактирования; и
блок редактирования, соединенный с блоком распознавания ввода, который в ответ на сигнал редактирования активирует функцию редактирования.
процессор дисплея;
сенсорный экран, соединенный с процессором дисплея, и блок обнаружения первого ввода, соединенный с процессором дисплея, который принимает первый ввод в виде первого пути, сформированного пользователем с применением указывающего устройства на сенсорном экране, причем первый путь, по меньшей мере, частично окружает объект и включает начальную точку и конечную точку, которые находятся в пределах заранее заданного расстояния друг от друга; и блок обнаружения второго ввода, соединенный с процессором дисплея, который принимает второй ввод в виде второго пути, сформированного пользователем с применением указывающего устройства на сенсорном экране;
блок распознавания ввода, соединенный с процессором дисплея, который обнаруживает первый путь, по меньшей мере, частично окружающий объект, определяет, является ли первый путь достоверным росчерком выбора, и в ответ на то, что первый путь является достоверным росчерком выбора, обнаруживает второй путь, сформированный в заранее заданной области сенсорного экрана, и генерирует сигнал редактирования; и
блок редактирования, соединенный с блоком распознавания ввода, который в ответ на сигнал редактирования активирует функцию редактирования.
13. Устройство по п.12, в котором операция редактирования является операцией перемещения и объект, окруженный, по меньшей мере, частично, перемещается в заранее заданную область.
14. Устройство по п.12, в котором операция редактирования является операцией удаления и объект, окруженный, по меньшей мере, частично, удаляется.
15. Устройство по п.12, включающее:
блок обнаружения третьего ввода, соединенный с процессором дисплея, который принимает третий ввод в виде третьего пути, сформированного пользователем с применением указывающего устройства на сенсорном экране; при этом
блок распознавания ввода, соединенный с процессором дисплея, обнаруживает третий путь, сформированный в заранее заданной области сенсорного экрана, и генерирует сигнал второго редактирования; и
блок редактирования, соединенный с блоком распознавания ввода, в ответ на сигнал редактирования активирует функцию редактирования.
блок обнаружения третьего ввода, соединенный с процессором дисплея, который принимает третий ввод в виде третьего пути, сформированного пользователем с применением указывающего устройства на сенсорном экране; при этом
блок распознавания ввода, соединенный с процессором дисплея, обнаруживает третий путь, сформированный в заранее заданной области сенсорного экрана, и генерирует сигнал второго редактирования; и
блок редактирования, соединенный с блоком распознавания ввода, в ответ на сигнал редактирования активирует функцию редактирования.
16. Устройство по п.15, в котором операция редактирования является операцией копирования или вырезания, а операция второго редактирования является операцией вставки.
17. Устройство по п.16, в котором процессор дисплея создает сокращенную версию выбранного объекта для отображения в области буфера обмена.
18. Используемый в компьютере носитель, имеющий читаемые компьютером программные кодовые средства, обеспечивающие редактирование компьютером объектов в устройстве, при этом читаемые компьютером программные кодовые средства включают:
читаемые компьютером программные кодовые средства, заставляющие компьютер формировать первый путь, задаваемый указывающим устройством на сенсорном экране, причем первый путь включает начальную точку и конечную точку, которые находятся в пределах заранее заданного расстояния друг от друга, и, по меньшей мере, частично окружает объект;
читаемые компьютером программные кодовые средства, заставляющие компьютер определять, является ли первый путь достоверным росчерком выбора, и в ответ на то, что первый путь является достоверным росчерком выбора, автоматически выбирать объект, окруженный, по меньшей мере, частично; и
читаемые компьютером программные кодовые средства, заставляющие компьютер формировать второй путь, задаваемый указывающим устройством в заранее заданной области сенсорного экрана, при этом второй путь активирует операцию редактирования.
читаемые компьютером программные кодовые средства, заставляющие компьютер формировать первый путь, задаваемый указывающим устройством на сенсорном экране, причем первый путь включает начальную точку и конечную точку, которые находятся в пределах заранее заданного расстояния друг от друга, и, по меньшей мере, частично окружает объект;
читаемые компьютером программные кодовые средства, заставляющие компьютер определять, является ли первый путь достоверным росчерком выбора, и в ответ на то, что первый путь является достоверным росчерком выбора, автоматически выбирать объект, окруженный, по меньшей мере, частично; и
читаемые компьютером программные кодовые средства, заставляющие компьютер формировать второй путь, задаваемый указывающим устройством в заранее заданной области сенсорного экрана, при этом второй путь активирует операцию редактирования.
19. Используемый в компьютере носитель по п.18, в котором операция редактирования является операцией перемещения и выбранный объект перемещается в заранее заданную область.
20. Используемый в компьютере носитель по п.18, в котором операция редактирования является операцией удаления и выбранный объект удаляется.
21. Используемый в компьютере носитель по п.18, также включающий читаемые компьютером программные кодовые средства, заставляющие компьютер формировать третий путь, задаваемый указывающим устройством во второй области сенсорного экрана, при этом третий путь активирует операцию второго редактирования для вставки выбранного объекта во вторую область.
22. Используемый в компьютере носитель по п.21, в котором операция редактирования является операцией копирования или вырезания, а операция второго редактирования является операцией вставки.
23. Процессор дисплея для редактирования объектов, сконфигурированный так, чтобы:
принимать координатную информацию о первом пути, задаваемом указывающим устройством на сенсорном экране, причем первый путь включает начальную точку и конечную точку, которые находятся в пределах заранее заданного расстояния друг от друга, и, по меньшей мере, частично окружает объект;
заставлять устройство определять, является ли первый путь достоверным росчерком выбора, и в ответ на то, что первый путь является достоверным росчерком выбора, заставлять устройство автоматически выбирать объект, окруженный, по меньшей мере, частично; и
принимать второй путь, задаваемый указывающим устройством в заранее заданной области сенсорного экрана, при этом второй путь активирует операцию редактирования.
принимать координатную информацию о первом пути, задаваемом указывающим устройством на сенсорном экране, причем первый путь включает начальную точку и конечную точку, которые находятся в пределах заранее заданного расстояния друг от друга, и, по меньшей мере, частично окружает объект;
заставлять устройство определять, является ли первый путь достоверным росчерком выбора, и в ответ на то, что первый путь является достоверным росчерком выбора, заставлять устройство автоматически выбирать объект, окруженный, по меньшей мере, частично; и
принимать второй путь, задаваемый указывающим устройством в заранее заданной области сенсорного экрана, при этом второй путь активирует операцию редактирования.
24. Процессор по п.23, сконфигурированный так, чтобы заставлять компьютер формировать третий путь, задаваемый указывающим устройством во второй области сенсорного экрана, при этом третий путь активирует операцию второго редактирования для вставки выбранного объекта во вторую область.
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US11/284,141 | 2005-11-21 | ||
| US11/284,141 US8643605B2 (en) | 2005-11-21 | 2005-11-21 | Gesture based document editor |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| RU2008121933A RU2008121933A (ru) | 2009-12-27 |
| RU2417399C2 true RU2417399C2 (ru) | 2011-04-27 |
Family
ID=38049023
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| RU2008121933/08A RU2417399C2 (ru) | 2005-11-21 | 2006-11-21 | Редактор документов на основе жестов |
Country Status (6)
| Country | Link |
|---|---|
| US (2) | US8643605B2 (ru) |
| EP (2) | EP1955136A4 (ru) |
| CN (2) | CN102945132A (ru) |
| CA (1) | CA2630623C (ru) |
| RU (1) | RU2417399C2 (ru) |
| WO (1) | WO2007057770A2 (ru) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| RU2568775C2 (ru) * | 2012-02-28 | 2015-11-20 | Кэнон Кабусики Кайся | Устройство обработки информации, способ управления им и запоминающий носитель |
| US9665201B2 (en) | 2012-03-07 | 2017-05-30 | Canon Kabushiki Kaisha | Information processing apparatus, control method thereof, and storage medium for recognizing a multi-touch operation |
| RU2643437C2 (ru) * | 2014-10-31 | 2018-02-01 | Сяоми Инк. | Способ и устройство для выделения информации |
| RU2656988C2 (ru) * | 2013-06-04 | 2018-06-07 | МАЙКРОСОФТ ТЕКНОЛОДЖИ ЛАЙСЕНСИНГ, ЭлЭлСи | Привязка к границам абзаца выбора текста |
Families Citing this family (94)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7760187B2 (en) * | 2004-07-30 | 2010-07-20 | Apple Inc. | Visual expander |
| KR100823083B1 (ko) * | 2006-02-09 | 2008-04-18 | 삼성전자주식회사 | 터치스크린을 구비한 문서 표시장치의 문서 교정 방법 및그 장치 |
| US8326272B1 (en) * | 2006-07-26 | 2012-12-04 | Amdocs Software Systems Limited | System, method and computer program product for subscriber-specific policies |
| US8564544B2 (en) | 2006-09-06 | 2013-10-22 | Apple Inc. | Touch screen device, method, and graphical user interface for customizing display of content category icons |
| US7856605B2 (en) * | 2006-10-26 | 2010-12-21 | Apple Inc. | Method, system, and graphical user interface for positioning an insertion marker in a touch screen display |
| US8570278B2 (en) | 2006-10-26 | 2013-10-29 | Apple Inc. | Portable multifunction device, method, and graphical user interface for adjusting an insertion point marker |
| KR101491594B1 (ko) | 2007-11-05 | 2015-02-09 | 삼성전자주식회사 | 터치 스크린을 갖는 휴대 단말기 및 그의 이미지 처리 방법 |
| US20090125848A1 (en) * | 2007-11-14 | 2009-05-14 | Susann Marie Keohane | Touch surface-sensitive edit system |
| US8566752B2 (en) * | 2007-12-21 | 2013-10-22 | Ricoh Co., Ltd. | Persistent selection marks |
| US8610671B2 (en) | 2007-12-27 | 2013-12-17 | Apple Inc. | Insertion marker placement on touch sensitive display |
| US8201109B2 (en) * | 2008-03-04 | 2012-06-12 | Apple Inc. | Methods and graphical user interfaces for editing on a portable multifunction device |
| US8650507B2 (en) * | 2008-03-04 | 2014-02-11 | Apple Inc. | Selecting of text using gestures |
| US9442648B2 (en) * | 2008-10-07 | 2016-09-13 | Blackberry Limited | Portable electronic device and method of controlling same |
| EP2175354A1 (en) * | 2008-10-07 | 2010-04-14 | Research In Motion Limited | Portable electronic device and method of controlling same |
| GB2478230B (en) * | 2008-12-15 | 2014-05-14 | Hewlett Packard Development Co | Gesture based edit mode |
| US8255830B2 (en) * | 2009-03-16 | 2012-08-28 | Apple Inc. | Methods and graphical user interfaces for editing on a multifunction device with a touch screen display |
| US20100289757A1 (en) * | 2009-05-14 | 2010-11-18 | Budelli Joey G | Scanner with gesture-based text selection capability |
| KR101623748B1 (ko) * | 2009-09-01 | 2016-05-25 | 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 | 이동 단말기 및 이동 단말기의 메시지 작성 방법 |
| US9092115B2 (en) * | 2009-09-23 | 2015-07-28 | Microsoft Technology Licensing, Llc | Computing system with visual clipboard |
| CN102033642B (zh) * | 2009-09-29 | 2012-10-10 | 联想(北京)有限公司 | 一种手势识别的方法及电子设备 |
| US8570286B2 (en) * | 2010-02-12 | 2013-10-29 | Honeywell International Inc. | Gestures on a touch-sensitive display |
| US20110307840A1 (en) * | 2010-06-10 | 2011-12-15 | Microsoft Corporation | Erase, circle, prioritize and application tray gestures |
| JP2012058857A (ja) * | 2010-09-06 | 2012-03-22 | Sony Corp | 情報処理装置、操作方法及び情報処理プログラム |
| WO2012050251A1 (ko) * | 2010-10-14 | 2012-04-19 | 엘지전자 주식회사 | 이동 단말기 및 그 제어방법 |
| US9323807B2 (en) * | 2010-11-03 | 2016-04-26 | Sap Se | Graphical manipulation of data objects |
| US20120124514A1 (en) * | 2010-11-11 | 2012-05-17 | Microsoft Corporation | Presentation focus and tagging |
| US20120210200A1 (en) * | 2011-02-10 | 2012-08-16 | Kelly Berger | System, method, and touch screen graphical user interface for managing photos and creating photo books |
| US20120278712A1 (en) * | 2011-04-27 | 2012-11-01 | Microsoft Corporation | Multi-input gestures in hierarchical regions |
| US8719695B2 (en) | 2011-05-31 | 2014-05-06 | Apple Inc. | Devices, methods, and graphical user interfaces for document manipulation |
| US20120324345A1 (en) * | 2011-06-14 | 2012-12-20 | Microsoft Corporation | Transitioning between an Editing View and a Backstage View of an Electronic Document |
| US20130007606A1 (en) * | 2011-06-30 | 2013-01-03 | Nokia Corporation | Text deletion |
| US9612670B2 (en) | 2011-09-12 | 2017-04-04 | Microsoft Technology Licensing, Llc | Explicit touch selection and cursor placement |
| US8878785B1 (en) | 2011-10-05 | 2014-11-04 | Google Inc. | Intent determination using geometric shape input |
| US10013152B2 (en) | 2011-10-05 | 2018-07-03 | Google Llc | Content selection disambiguation |
| US8825671B1 (en) | 2011-10-05 | 2014-09-02 | Google Inc. | Referent determination from selected content |
| US9305108B2 (en) | 2011-10-05 | 2016-04-05 | Google Inc. | Semantic selection and purpose facilitation |
| US8930393B1 (en) | 2011-10-05 | 2015-01-06 | Google Inc. | Referent based search suggestions |
| US8890827B1 (en) | 2011-10-05 | 2014-11-18 | Google Inc. | Selected content refinement mechanisms |
| US9032316B1 (en) | 2011-10-05 | 2015-05-12 | Google Inc. | Value-based presentation of user-selectable computing actions |
| US9251144B2 (en) * | 2011-10-19 | 2016-02-02 | Microsoft Technology Licensing, Llc | Translating language characters in media content |
| US9207951B2 (en) | 2011-11-17 | 2015-12-08 | Prezi, Inc. | Grouping with frames to transform display elements within a zooming user interface |
| CN102681764A (zh) * | 2012-01-14 | 2012-09-19 | 广东欧珀移动通信有限公司 | 一种触摸屏文字输入交互方法 |
| CN103294657B (zh) * | 2012-03-02 | 2017-10-27 | 富泰华工业（深圳）有限公司 | 文本编辑方法及系统 |
| JP5994300B2 (ja) * | 2012-03-12 | 2016-09-21 | ブラザー工業株式会社 | 入力装置及び入力プログラム |
| US9575652B2 (en) | 2012-03-31 | 2017-02-21 | Microsoft Technology Licensing, Llc | Instantiable gesture objects |
| JP5790578B2 (ja) * | 2012-04-10 | 2015-10-07 | 株式会社デンソー | 表示システム、表示装置、及び操作装置 |
| EP2847661A2 (en) | 2012-05-09 | 2015-03-18 | Apple Inc. | Device, method, and graphical user interface for moving and dropping a user interface object |
| WO2013169875A2 (en) | 2012-05-09 | 2013-11-14 | Yknots Industries Llc | Device, method, and graphical user interface for displaying content associated with a corresponding affordance |
| WO2013169865A2 (en) | 2012-05-09 | 2013-11-14 | Yknots Industries Llc | Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input |
| WO2013169843A1 (en) | 2012-05-09 | 2013-11-14 | Yknots Industries Llc | Device, method, and graphical user interface for manipulating framed graphical objects |
| CN107977084B (zh) | 2012-05-09 | 2021-11-05 | 苹果公司 | 用于针对在用户界面中执行的操作提供触觉反馈的方法和装置 |
| WO2013169845A1 (en) | 2012-05-09 | 2013-11-14 | Yknots Industries Llc | Device, method, and graphical user interface for scrolling nested regions |
| AU2013259606B2 (en) | 2012-05-09 | 2016-06-02 | Apple Inc. | Device, method, and graphical user interface for displaying additional information in response to a user contact |
| CN109298789B (zh) | 2012-05-09 | 2021-12-31 | 苹果公司 | 用于针对激活状态提供反馈的设备、方法和图形用户界面 |
| WO2013169849A2 (en) | 2012-05-09 | 2013-11-14 | Industries Llc Yknots | Device, method, and graphical user interface for displaying user interface objects corresponding to an application |
| AU2013259637B2 (en) | 2012-05-09 | 2016-07-07 | Apple Inc. | Device, method, and graphical user interface for selecting user interface objects |
| CN104487928B (zh) | 2012-05-09 | 2018-07-06 | 苹果公司 | 用于响应于手势而在显示状态之间进行过渡的设备、方法和图形用户界面 |
| WO2013169842A2 (en) | 2012-05-09 | 2013-11-14 | Yknots Industries Llc | Device, method, and graphical user interface for selecting object within a group of objects |
| WO2013169851A2 (en) | 2012-05-09 | 2013-11-14 | Yknots Industries Llc | Device, method, and graphical user interface for facilitating user interaction with controls in a user interface |
| KR102070013B1 (ko) * | 2012-08-27 | 2020-01-30 | 삼성전자주식회사 | 컨텐츠 활용 기능 지원 방법 및 이를 지원하는 단말기 |
| KR102096581B1 (ko) | 2012-09-14 | 2020-05-29 | 삼성전자주식회사 | 표시 정보를 편집하기 위한 방법 및 그 전자 장치 |
| CN103809954B (zh) * | 2012-11-14 | 2017-03-22 | 腾讯科技（深圳）有限公司 | 实现界面元素选定的方法和装置 |
| KR20140068595A (ko) * | 2012-11-28 | 2014-06-09 | 삼성디스플레이 주식회사 | 단말기 및 그의 조작 방법 |
| CN102999296B (zh) * | 2012-12-03 | 2015-09-09 | 北京百度网讯科技有限公司 | 用于移动终端的文本快捷输入方法、装置和移动终端 |
| KR101275040B1 (ko) * | 2012-12-06 | 2013-06-17 | 주식회사 한글과컴퓨터 | 자유선 입력 기반의 전자 문서 구동 장치 및 방법 |
| WO2014105275A1 (en) | 2012-12-29 | 2014-07-03 | Yknots Industries Llc | Device, method, and graphical user interface for forgoing generation of tactile output for a multi-contact gesture |
| CN105264479B (zh) | 2012-12-29 | 2018-12-25 | 苹果公司 | 用于对用户界面分级结构进行导航的设备、方法和图形用户界面 |
| WO2014105279A1 (en) | 2012-12-29 | 2014-07-03 | Yknots Industries Llc | Device, method, and graphical user interface for switching between user interfaces |
| EP2939096B1 (en) | 2012-12-29 | 2019-08-28 | Apple Inc. | Device, method, and graphical user interface for determining whether to scroll or select contents |
| AU2013368443B2 (en) | 2012-12-29 | 2016-03-24 | Apple Inc. | Device, method, and graphical user interface for transitioning between touch input to display output relationships |
| EP2939095B1 (en) | 2012-12-29 | 2018-10-03 | Apple Inc. | Device, method, and graphical user interface for moving a cursor according to a change in an appearance of a control icon with simulated three-dimensional characteristics |
| KR20140108995A (ko) * | 2013-03-04 | 2014-09-15 | 삼성전자주식회사 | 페이지의 일부 영역을 이용한 데이터 처리 방법 및 장치 |
| CN104035701A (zh) * | 2013-03-06 | 2014-09-10 | 夏普株式会社 | 在电子设备的触摸屏上编辑对象的方法、装置和电子设备 |
| CN104063140B (zh) * | 2013-03-18 | 2017-11-03 | 联想(北京)有限公司 | 选择对象的方法和电子设备 |
| JP6201488B2 (ja) * | 2013-07-29 | 2017-09-27 | 富士通株式会社 | 選択文字特定プログラム、選択文字特定方法、及び、選択文字特定装置 |
| US9811238B2 (en) | 2013-08-29 | 2017-11-07 | Sharp Laboratories Of America, Inc. | Methods and systems for interacting with a digital marking surface |
| US9665206B1 (en) | 2013-09-18 | 2017-05-30 | Apple Inc. | Dynamic user interface adaptable to multiple input tools |
| US9329692B2 (en) | 2013-09-27 | 2016-05-03 | Microsoft Technology Licensing, Llc | Actionable content displayed on a touch screen |
| WO2015068872A1 (en) * | 2013-11-08 | 2015-05-14 | Lg Electronics Inc. | Electronic device and method for controlling of the same |
| CN105339880A (zh) * | 2013-12-27 | 2016-02-17 | 华为终端有限公司 | 一种处理字符的方法及设备 |
| US20160054883A1 (en) * | 2014-08-21 | 2016-02-25 | Xiaomi Inc. | Method and device for positioning cursor |
| KR102393295B1 (ko) * | 2014-09-18 | 2022-05-02 | 삼성전자주식회사 | 컨텐트를 스타일링하는 장치 및 방법 |
| US9645732B2 (en) | 2015-03-08 | 2017-05-09 | Apple Inc. | Devices, methods, and graphical user interfaces for displaying and using menus |
| US10095396B2 (en) | 2015-03-08 | 2018-10-09 | Apple Inc. | Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object |
| US10048757B2 (en) | 2015-03-08 | 2018-08-14 | Apple Inc. | Devices and methods for controlling media presentation |
| US9785305B2 (en) | 2015-03-19 | 2017-10-10 | Apple Inc. | Touch input cursor manipulation |
| US20170045981A1 (en) | 2015-08-10 | 2017-02-16 | Apple Inc. | Devices and Methods for Processing Touch Inputs Based on Their Intensities |
| US9860451B2 (en) | 2015-06-07 | 2018-01-02 | Apple Inc. | Devices and methods for capturing and interacting with enhanced digital images |
| US9674426B2 (en) | 2015-06-07 | 2017-06-06 | Apple Inc. | Devices and methods for capturing and interacting with enhanced digital images |
| JP6971671B2 (ja) * | 2016-07-28 | 2021-11-24 | シャープ株式会社 | 画像表示装置、画像表示システム及びプログラム |
| US10599320B2 (en) | 2017-05-15 | 2020-03-24 | Microsoft Technology Licensing, Llc | Ink Anchoring |
| US20180329583A1 (en) * | 2017-05-15 | 2018-11-15 | Microsoft Technology Licensing, Llc | Object Insertion |
| US10776006B2 (en) | 2018-06-03 | 2020-09-15 | Apple Inc. | Systems and methods for activating and using a trackpad at an electronic device with a touch-sensitive display and no force sensors |
| US11669243B2 (en) | 2018-06-03 | 2023-06-06 | Apple Inc. | Systems and methods for activating and using a trackpad at an electronic device with a touch-sensitive display and no force sensors |
Family Cites Families (40)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0650538B2 (ja) * | 1984-03-28 | 1994-06-29 | 株式会社日立製作所 | 手書き文字・図形認識の認識モード指定方法 |
| US4815029A (en) * | 1985-09-23 | 1989-03-21 | International Business Machines Corp. | In-line dynamic editor for mixed object documents |
| US5347295A (en) | 1990-10-31 | 1994-09-13 | Go Corporation | Control of a computer through a position-sensed stylus |
| US5220649A (en) * | 1991-03-20 | 1993-06-15 | Forcier Mitchell D | Script/binary-encoded-character processing method and system with moving space insertion mode |
| JPH0736142B2 (ja) * | 1991-10-10 | 1995-04-19 | インターナショナル・ビジネス・マシーンズ・コーポレイション | 移動指示手段の運動停止を認識する方法および情報処理装置 |
| US5539427A (en) * | 1992-02-10 | 1996-07-23 | Compaq Computer Corporation | Graphic indexing system |
| US5523775A (en) * | 1992-05-26 | 1996-06-04 | Apple Computer, Inc. | Method for selecting objects on a computer display |
| US5481278A (en) * | 1992-10-21 | 1996-01-02 | Sharp Kabushiki Kaisha | Information processing apparatus |
| US5404442A (en) * | 1992-11-30 | 1995-04-04 | Apple Computer, Inc. | Visible clipboard for graphical computer environments |
| US5513309A (en) | 1993-01-05 | 1996-04-30 | Apple Computer, Inc. | Graphic editor user interface for a pointer-based computer system |
| JPH06208654A (ja) | 1993-01-08 | 1994-07-26 | Hitachi Software Eng Co Ltd | ペン入力図形編集システム |
| US5677710A (en) * | 1993-05-10 | 1997-10-14 | Apple Computer, Inc. | Recognition keypad |
| US5613019A (en) * | 1993-05-20 | 1997-03-18 | Microsoft Corporation | System and methods for spacing, storing and recognizing electronic representations of handwriting, printing and drawings |
| US5528743A (en) * | 1993-05-27 | 1996-06-18 | Apple Computer, Inc. | Method and apparatus for inserting text on a pen-based computer system |
| US5710831A (en) | 1993-07-30 | 1998-01-20 | Apple Computer, Inc. | Method for correcting handwriting on a pen-based computer |
| US5500937A (en) * | 1993-09-08 | 1996-03-19 | Apple Computer, Inc. | Method and apparatus for editing an inked object while simultaneously displaying its recognized object |
| DE69426919T2 (de) * | 1993-12-30 | 2001-06-28 | Xerox Corp | Gerät und Verfahren zur Ausführung von vielen verkettenden Befehlsgesten in einen System mit Gestenbenutzerschnittstelle |
| EP0667567B1 (en) * | 1993-12-30 | 2001-10-17 | Xerox Corporation | Apparatus and method for supporting the implicit structure of freeform lists, outlines, text, tables, and diagrams in a gesture-based input system and editing system |
| US5880743A (en) * | 1995-01-24 | 1999-03-09 | Xerox Corporation | Apparatus and method for implementing visual animation illustrating results of interactive editing operations |
| US5682439A (en) * | 1995-08-07 | 1997-10-28 | Apple Computer, Inc. | Boxed input correction system and method for pen based computer systems |
| US6331840B1 (en) | 1998-03-27 | 2001-12-18 | Kevin W. Nielson | Object-drag continuity between discontinuous touch screens of a single virtual desktop |
| US20020018051A1 (en) * | 1998-09-15 | 2002-02-14 | Mona Singh | Apparatus and method for moving objects on a touchscreen display |
| US20020076109A1 (en) * | 1999-01-25 | 2002-06-20 | Andy Hertzfeld | Method and apparatus for context sensitive text recognition |
| US6545669B1 (en) * | 1999-03-26 | 2003-04-08 | Husam Kinawi | Object-drag continuity between discontinuous touch-screens |
| US6941507B2 (en) * | 2000-11-10 | 2005-09-06 | Microsoft Corporation | Insertion point bungee space tool |
| US7002558B2 (en) * | 2000-12-21 | 2006-02-21 | Microsoft Corporation | Mode hinting and switching |
| US6938222B2 (en) | 2002-02-08 | 2005-08-30 | Microsoft Corporation | Ink gestures |
| US20040054701A1 (en) | 2002-03-01 | 2004-03-18 | Garst Peter F. | Modeless gesture driven editor for handwritten mathematical expressions |
| US7036077B2 (en) * | 2002-03-22 | 2006-04-25 | Xerox Corporation | Method for gestural interpretation in a system for selecting and arranging visible material in document images |
| US7086013B2 (en) * | 2002-03-22 | 2006-08-01 | Xerox Corporation | Method and system for overloading loop selection commands in a system for selecting and arranging visible material in document images |
| US7554530B2 (en) * | 2002-12-23 | 2009-06-30 | Nokia Corporation | Touch screen user interface featuring stroke-based object selection and functional object activation |
| US7098896B2 (en) * | 2003-01-16 | 2006-08-29 | Forword Input Inc. | System and method for continuous stroke word-based text input |
| US7185291B2 (en) * | 2003-03-04 | 2007-02-27 | Institute For Information Industry | Computer with a touch screen |
| US7496853B2 (en) * | 2003-05-08 | 2009-02-24 | International Business Machines Corporation | Method of managing items on a clipboard |
| US7490041B2 (en) * | 2003-07-15 | 2009-02-10 | Nokia Corporation | System to allow the selection of alternative letters in handwriting recognition systems |
| US7301527B2 (en) * | 2004-03-23 | 2007-11-27 | Fujitsu Limited | Feedback based user interface for motion controlled handheld devices |
| US7461348B2 (en) * | 2004-11-19 | 2008-12-02 | Microsoft Corporation | Systems and methods for processing input data before, during, and/or after an input focus change event |
| US7522771B2 (en) * | 2005-03-17 | 2009-04-21 | Microsoft Corporation | Systems, methods, and computer-readable media for fast neighborhood determinations in dynamic environments |
| KR100597798B1 (ko) * | 2005-05-12 | 2006-07-10 | 삼성전자주식회사 | 휴대용 단말기에서 동작인식을 위한 정보를 사용자에게제공하기 방법 |
| US7526737B2 (en) * | 2005-11-14 | 2009-04-28 | Microsoft Corporation | Free form wiper |
-
2005
- 2005-11-21 US US11/284,141 patent/US8643605B2/en not_active Expired - Fee Related
-
2006
- 2006-11-21 EP EP06820939A patent/EP1955136A4/en not_active Ceased
- 2006-11-21 CN CN2012103948083A patent/CN102945132A/zh active Pending
- 2006-11-21 EP EP17157021.1A patent/EP3220252B1/en active Active
- 2006-11-21 CA CA2630623A patent/CA2630623C/en not_active Expired - Fee Related
- 2006-11-21 WO PCT/IB2006/003297 patent/WO2007057770A2/en active Application Filing
- 2006-11-21 RU RU2008121933/08A patent/RU2417399C2/ru not_active IP Right Cessation
- 2006-11-21 CN CN2006800504365A patent/CN101356491B/zh not_active Expired - Fee Related
-
2013
- 2013-12-24 US US14/139,955 patent/US9703474B2/en not_active Expired - Fee Related
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| RU2568775C2 (ru) * | 2012-02-28 | 2015-11-20 | Кэнон Кабусики Кайся | Устройство обработки информации, способ управления им и запоминающий носитель |
| US9880673B2 (en) | 2012-02-28 | 2018-01-30 | Canon Kabushiki Kaisha | Multi-touch input information processing apparatus, method, and storage medium |
| US9665201B2 (en) | 2012-03-07 | 2017-05-30 | Canon Kabushiki Kaisha | Information processing apparatus, control method thereof, and storage medium for recognizing a multi-touch operation |
| RU2656988C2 (ru) * | 2013-06-04 | 2018-06-07 | МАЙКРОСОФТ ТЕКНОЛОДЖИ ЛАЙСЕНСИНГ, ЭлЭлСи | Привязка к границам абзаца выбора текста |
| RU2643437C2 (ru) * | 2014-10-31 | 2018-02-01 | Сяоми Инк. | Способ и устройство для выделения информации |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2007057770A3 (en) | 2008-03-06 |
| EP3220252B1 (en) | 2020-06-17 |
| US8643605B2 (en) | 2014-02-04 |
| CN101356491B (zh) | 2012-12-05 |
| US20140191993A1 (en) | 2014-07-10 |
| CA2630623A1 (en) | 2007-05-24 |
| WO2007057770A2 (en) | 2007-05-24 |
| EP1955136A4 (en) | 2012-11-21 |
| CA2630623C (en) | 2013-09-17 |
| CN102945132A (zh) | 2013-02-27 |
| EP1955136A2 (en) | 2008-08-13 |
| US9703474B2 (en) | 2017-07-11 |
| EP3220252A1 (en) | 2017-09-20 |
| US20070115264A1 (en) | 2007-05-24 |
| RU2008121933A (ru) | 2009-12-27 |
| CN101356491A (zh) | 2009-01-28 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| RU2417399C2 (ru) | Редактор документов на основе жестов | |
| JP7153810B2 (ja) | 電子デバイス上の手書き入力 | |
| US7036077B2 (en) | Method for gestural interpretation in a system for selecting and arranging visible material in document images | |
| KR101488537B1 (ko) | 텍스트 편집 및 메뉴 선택을 위한 사용자 인터페이스 시스템과 구현 방법 | |
| CA2501118C (en) | Method of combining data entry of handwritten symbols with displayed character data | |
| US7542029B2 (en) | System and method for a user interface for text editing and menu selection | |
| US6502114B1 (en) | Script character processing method for determining word boundaries and interactively editing ink strokes using editing gestures | |
| RU2416120C2 (ru) | Копирование текста с использованием сенсорного дисплея | |
| US6434581B1 (en) | Script character processing method for interactively adjusting space between writing element | |
| US7502017B1 (en) | Handwriting recognizer user interface methods | |
| US11157165B2 (en) | Permanent synchronization system for handwriting input | |
| US20020097270A1 (en) | Selection handles in editing electronic documents | |
| KR20180095840A (ko) | 제스쳐들에 의한 노트 필기를 위한 장치 및 방법 | |
| WO1992016900A1 (en) | Script/binary-encoded-character processing method and system with moving space insertion mode | |
| US10416868B2 (en) | Method and system for character insertion in a character string | |
| US20040223647A1 (en) | Data processing apparatus and method | |
| WO2017186350A1 (en) | System and method for editing input management | |
| EP4047465A1 (en) | Modifying digital content | |
| US20240231582A9 (en) | Modifying digital content including typed and handwritten text | |
| CN117910429A (zh) | 锚定注释 | |
| JPH1125224A (ja) | オンライン文字認識装置 | |
| JP2000148322A (ja) | 文字入力方法及び装置並びに記憶媒体 | |
| JPS63284672A (ja) | 文書編集装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PC41 | Official registration of the transfer of exclusive right |
Effective date: 20130125 |
|
| PD4A | Correction of name of patent owner | ||
| MM4A | The patent is invalid due to non-payment of fees |
Effective date: 20151122 |