RU2242043C2 - Method for operation of user interface of portable data processing device - Google Patents

Method for operation of user interface of portable data processing device Download PDF

Info

Publication number
RU2242043C2
RU2242043C2 RU2002112225/09A RU2002112225A RU2242043C2 RU 2242043 C2 RU2242043 C2 RU 2242043C2 RU 2002112225/09 A RU2002112225/09 A RU 2002112225/09A RU 2002112225 A RU2002112225 A RU 2002112225A RU 2242043 C2 RU2242043 C2 RU 2242043C2
Authority
RU
Russia
Prior art keywords
data
display
device
response
method
Prior art date
Application number
RU2002112225/09A
Other languages
Russian (ru)
Other versions
RU2002112225A (en
Inventor
Юкка-Пекка МЕТСЯВАЙНИО (FI)
Юкка-Пекка МЕТСЯВАЙНИО
Original Assignee
Мюориго Ой
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority to FI992191A priority Critical patent/FI19992191A/en
Priority to FI19992191 priority
Priority to FI20001506A priority patent/FI20001506A/en
Priority to FI20001506 priority
Application filed by Мюориго Ой filed Critical Мюориго Ой
Publication of RU2002112225A publication Critical patent/RU2002112225A/en
Application granted granted Critical
Publication of RU2242043C2 publication Critical patent/RU2242043C2/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object or an image, setting a parameter value or selecting a range
    • G06F3/04842Selection of a displayed object
    • GPHYSICS
    • G06COMPUTING; CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 – G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1626Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • GPHYSICS
    • G06COMPUTING; CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 – G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1694Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being a single or a set of motion sensors for pointer control or gesture input obtained by sensing movements of the portable computer
    • GPHYSICS
    • G06COMPUTING; CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • GPHYSICS
    • G06COMPUTING; CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • GPHYSICS
    • G06COMPUTING; CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2200/00Indexing scheme relating to G06F1/04 - G06F1/32
    • G06F2200/16Indexing scheme relating to G06F1/16 - G06F1/18
    • G06F2200/163Indexing scheme relating to constructional details of the computer
    • G06F2200/1637Sensing arrangement for detection of housing movement or orientation, e.g. for controlling scrolling or cursor movement on the display of an handheld computer

Abstract

FIELD: portable data processing devices.
SUBSTANCE: method includes changing data on display of device for search or selection of data, while data on display change in response to certain displacements of device in three-dimensional space of its use, while said displacements of device and respective changes of data are determined in such a way, that displacement and respective change of data on display have causation, which is analogical to causation of three-dimensional space of senses and actions of user.
EFFECT: simplified operation.
10 cl, 16 dwg

Description

Настоящее изобретение относится к способу работы пользовательского интерфейса портативного устройства обработки данных. The present invention relates to a method for operating a user interface of a portable data processing device. Под портативным устройством понимается миниатюрный или карманный компьютер, мобильный телефон, коммуникатор или иное устройство, существенные признаки которого включают отображение данных на дисплее устройства и в котором данные на дисплее устройства изменяются для поиска и выбора требуемых данных. Under understood miniature portable or handheld computer, mobile phone, PDA or other device, essential features of which include displaying data on the display device and wherein the data on the display apparatus changed to search for and select desired data.

Наиболее распространенный в настоящее время тип пользовательских интерфейсов вышеуказанных устройств действует по принципу “указать и щелкнуть”. The most common type is now user interfaces of the above device operates on the principle of "point and click". Обычным способом работы такого пользовательского интерфейса является просмотр и выбор данных посредством клавиш. The usual way this works is the user interface to view and select data by keys. Карманные компьютеры обычно управляются сенсорными дисплеями, виртуальными клавиатурами, пером и часто несколькими дополнительными жестко запрограммированными клавишами или кнопками. Handhelds are usually controlled by touch screen, virtual keyboard, a stylus, and often several additional hard-coded keys or buttons. Во-первых, этот тип пользовательских интерфейсов трудно использовать при малых размерах устройств и соответственно клавиш или виртуальных клавиш. First, this type of user interface is difficult to use devices with small dimensions and accordingly keys or virtual keys. С другой стороны, использование становится более трудным по мере того, как устройства непрерывно снабжаются новыми приложениями и услугами, которые должны использоваться с тем же самым количеством малоразмерных клавиш. On the other hand, the use becomes more difficult according as the devices are continuously provided with new applications and services to be used with the same number of small-sized keys. Характерным для этих пользовательских интерфейсов, подобно пользовательским интерфейсам компьютеров и других устройств обработки данных, является в общем случае то, что они имеют свою собственную искусственную логику и правила, которые полностью приняты и понятны только для небольшого числа технически ориентированных пользователей. A characteristic feature of these custom interfaces, like the user interfaces of computers and other data processing devices is, in general, is that they have their own logic and artificial rules are fully accepted and understood by only a small number of technically oriented users.

Задачей настоящего изобретения является создание такого способа работы пользовательского интерфейса портативных устройств, который в значительной степени устраняет многие из вышеупомянутых проблем. The object of the present invention is to provide a method of operating a portable user interface device, which largely eliminates many of the aforementioned problems.

Для достижения этого результата способ работы пользовательского интерфейса портативного устройства, подобного миниатюрному или карманному компьютеру, мобильному телефону, коммуникатору и т.п. To achieve this result, a method of operating a user interface of a portable device like a miniature or a PDA, mobile phone, PDA, etc. устройству, при котором данные на дисплее устройства изменяются для поиска и выбора требуемых данных, в соответствии с изобретением отличается признаками, изложенными в пункте 1 формулы изобретения. device, in which data on the display apparatus changed for finding and selecting the required data according to the invention is characterized by the features set out in claim 1. В других пунктах приведены различные варианты осуществления изобретения. The other points are the various embodiments.

Преимущество изобретения состоит в том, что пользователь может без труда принять рабочие правила пользовательского интерфейса, поскольку они являются “естественными”. The advantage of the invention is that the user can accept the operating rules of the user interface easily, because they are "natural." Использование устройства эргономически проще, так нет необходимости использовать малоразмерные клавиши или, например, вспомогательные устройства. Using the device is ergonomically easier, so no need to use small-sized keys, or, for example, auxiliary devices.

Изобретение и некоторые его варианты осуществления поясняются более детально ниже со ссылками на чертежи, на которых представлено следующее: The invention and some embodiments thereof are explained in more detail below with reference to the drawings, in which:

фиг.1-10 - схематичное пространственное представление примеров реализации способа работы пользовательского интерфейса, соответствующего изобретению; 1-10 - a schematic perspective view of examples of a method of operating a user interface according to the invention;

фиг.11-13 - схематичные виды спереди устройства и данных, представленных на его дисплее, иллюстрирующие некоторые дополнительные примеры реализации способа работы пользовательского интерфейса, соответствующего изобретению; 11-13 - schematic front views of the device and data presented on its display, illustrating some further examples of the method of operating a user interface according to the invention;

фиг.14 - схематичное представление конфигурации данных и функционирования одного из приложений пользовательского интерфейса в соответствии с изобретением; Figure 14 - a schematic representation of the configuration and operation of a user interface application in accordance with the invention;

фиг.15 - схематичное представление функционирования еще одного приложения пользовательского интерфейса, соответствующего изобретению; Figure 15 - a schematic representation of the operation of another application user interface according to the invention;

фиг.16 - блок-схема, представляющая возможную реализацию способа работы пользовательского интерфейса в соответствии с изобретением. 16 - a block diagram showing a possible implementation of a method for operating a user interface according to the invention.

Как показано на фиг.1-5, пользователь держит портативное устройство 2 в своей руке 3, причем устройство имеет дисплей 2'. As shown in Figures 1-5, the user holds the portable device 2 in his hand 3, the apparatus has a display 2 '. Дисплей 2' представляет собой сенсорный дисплей, причем пользователь имеет возможность ввести в устройство сигнал путем нажатия на дисплей большим пальцем 4. Перемещения устройства 2 обнаруживаются схемой измерения ускорения, установленной, например, в самом устройстве, и данные, полученные со схемы, используются при работе пользовательского интерфейса. The display 2 'is a touch screen, the user is able to enter into the apparatus a signal by pressing the display with his thumb 4. Movements device 2 detected acceleration measuring circuit installed, for example, in the device, and data received from the circuit used in the user interface. Некоторые возможные пути реализации способа работы пользовательского интерфейса в соответствии с изобретением описаны ниже. Some possible ways of implementing a method for operating a user interface according to the invention are described below. На фиг.1-5 представлены примеры работы пользовательского интерфейса. 1-5 are examples of the work of the user interface.

Как показано на фиг.1, страницы 5а, 5b, 5c, 5d, 5e, которые могут представлять собой, например, кары погоды, полученные в результате web-поиска, просматриваются на дисплее 2' в ответ на перемещение устройства 2 по существу перпендикулярно его дисплею 2', как показано стрелкой F. Для пользователя легко представить, что он имеет перед собой стопку изображений 5а-5е, и что он путем перемещения изображений в стопке может видеть изображение, находящееся в данный момент перед ним. As shown in Figure 1, page 5a, 5b, 5c, 5d, 5e, which may be, for example, cars weather resulting web-search, viewed on the display 2 & apos; in response to moving the device 2 essentially perpendicularly to its display 2 ', as indicated by arrow F. For the user to easily imagine that he is in front of a stack of pictures 5a to 5e, and that it by moving the images in the stack may be visible image that is currently in front of him. Тем же самым путем можно представить себе просмотр последовательных страниц книги или иного документа. The same way you can imagine the view successive pages of a book or other document. Скорость просмотра может быть сделана зависимой от быстроты или интенсивности движения, т.е. viewing speed may be made dependent on quickness or intensity of the movement, i.e. от величины ускорения при перемещении. the magnitude of the acceleration when moving. Принцип работы также может быть реализован таким путем, что соответствующее малое перемещение вперед или назад и немедленная остановка перенесут следующую страницу в соответствующем направлении на дисплей. The principle of operation can also be implemented in such a way that the corresponding small movement forward or backward and immediate stop will transfer the next page in the corresponding direction on the display. Кроме того, это может быть выполнено так, что нажатие на сенсорный дисплей 2' вводит сигнал в устройство управления дисплеем, и в ответ на этот сигнал изменение данных на дисплее останавливается. Furthermore, it may be configured so that pressing on the touch screen display 2 'introduces a signal into the display driver, and in response to this signal stops changing data on the display. Этот тип виртуального использования глубины значительно увеличивает емкость дисплея, имеющего ограниченные размеры. This kind of virtual use of depth increases significantly the capacity of a display having a limited size.

Как показано на фиг.2, масштаб изображения на дисплее 2' увеличивается до изображения 6b или уменьшается до изображения 6а в ответ на перемещение устройства 2 таким же путем, как описано выше, по существу перпендикулярно к дисплею 2', как показано стрелкой Z. Этот способ работы пользовательского интерфейса полностью аналогичен действию человека, когда он желает рассмотреть ближе детали объекта, например изображения. As shown in Figure 2, zoom in the display 2 'is increased to image 6b or 6a is reduced to the image in response to moving the device 2 in the same way as described above, essentially perpendicularly to the display 2', as indicated by arrow Z. This method of operating a user interface is completely analogous to human action, when he wishes to see closer details of an object, such as images. После нахождения требуемого увеличения изменение данных на дисплее можно остановить, например, вновь нажав на дисплей 2'. After finding the desired increase in change of data on the display can be stopped, for example, clicking again on the display 2 '. Функции, представленные на фиг.1 и 2, могут быть использованы поочередно в пользовательском интерфейсе соответственно приложению, причем нет никакой разницы, что происходит в ответ на перемещение устройства таким образом. The functions shown in Figures 1 and 2 may be used alternatively in a user interface application, respectively, and there is no difference that occurs in response to movement of the device in this way. Функции, иллюстрируемые на фиг.1 и 2, могут также объединяться при работе пользовательского интерфейса, так что, например, данные сначала просматриваются, потом их масштаб изменяется с помощью того же самого движения. The functions illustrated in Figures 1 and 2 may also be combined with the user interface so that, for example, data is first scanned, then their scale is changed by the same movement. В этом случае предпочтительно предусмотреть соответствующий селектор для выбора одной или другой функции. In this case it is preferable to provide the corresponding selector for selecting one or the other function. Селектор масштабирования может быть реализован, например, нажатием на определенную область на дисплее, причем переход от режима масштабирования к режиму просмотра может происходить автоматически путем выбора необходимого коэффициента увеличения. scaling selector can be implemented, for example, pressing a certain area on the display, wherein the mode transition to the zoom viewing mode can take place automatically by selecting the desired magnification factor.

На фиг.3 ссылочной позицией 7а обозначены данные изображения, размеры которого значительно больше, чем размеры дисплея. 3, reference numeral 7a designated image data whose size is significantly larger than the display size. Емкость дисплея портативного устройства не достаточно велика для большой совокупности фактографических данных или данных изображения. The capacity of the portable display device is not large enough for a large data set of factual or image data. В ответ на поперечное перемещение устройства по существу в плоскости дисплея 2', как показано стрелками N, Е, S, W, данные 7b на дисплее изменяются, как если бы некоторое окно перемещалось по большому изображению, образованному данными изображения 7а. In response to transverse movement of the device substantially in the plane of the display 2 ', as indicated by arrows N, E, S, W, data 7b on the display are changed as if a window is moved across the image formed by the image data 7a. После нахождения требуемого места изменение данных 7b на дисплее можно вновь остановить путем нажатия на дисплей. After finding the desired data change places 7b on the display may be stopped again by clicking on the display. Логично выполнять функции согласно фиг. Logically perform the functions of Fig. 2 и 3 вместе, причем данные изображения могут быть просмотрены более тщательно после масштабирования путем выбора данных таким образом, как описано на фиг.3. 2 and 3 together, the image data may be viewed more thoroughly after zooming by selecting the data in the manner described in Figure 3. Более того, таким путем можно реализовать, например, выбор числа без клавиш, перемещая устройство над большой виртуальной клавиатурой и выбирая желательные числа по одному. Moreover, in this way can be realized, for example, the selection numbers without keys by moving the device above a large virtual keyboard and selecting the desired numbers one by one. Эта функция позволяет прочитывать web-страницы на всю длину, например, с помощью миниатюрного компьютера. This feature allows you to read web-page on the full-length, for example, by means of a miniature computer.

Как показано на фиг.4, в ответ на быстрое поворотное движение устройства 2 как бы вокруг оси, образованной по существу его кромкой 9, т.е. As shown in Figure 4, in response to the rapid rotational movement of the device 2 as if around an axis formed essentially by its edge 9, i.e. в ответ на качание устройства подобно переворачиванию страниц книги, как показано стрелкой Р, данные 8а, 8b, 8с на дисплее 2' соответственно изменяются, например страница электронной книги переворачивается. in response to swinging the device like flipping pages of a book, as indicated by arrow P, data 8a, 8b, 8c on the display 2 ', respectively, are changed, such as the electronic book page is flipped. Посредством выбора направления качания выбирается направление переворачивания страниц. By selecting the oscillation direction is chosen direction of turning pages. Функция может быть реализована так, что малое качание с быстрой остановкой переворачивает одну страницу в направлении качания, а в ответ на более интенсивное качание страницы просматриваются более быстро, пока просмотр не будет остановлен путем нажатия на дисплей. The function can be implemented in such a way that a small swing with a quick stop turns one page in the direction of the swing, and in response to more intense swing pages are viewed more quickly while viewing will not be stopped by pressing the display.

На фиг.5 иллюстрируется приложение, в котором любая часть 9b данных изображения 9а, образующих панорамное изображение, охватывающее полную сферу пространства восприятия (или соответственно данные изображения, образующие цилиндрическое изображение), может просматриваться в каждый данный момент времени. 5 illustrates an application in which any part 9b of image data 9a forming a panorama picture covering the whole sphere perceptual space (or respectively the image data forming a cylindrical picture) can be viewed at any given time. В способе работы пользовательского интерфейса, соответствующего изобретению, в ответ на перемещение устройства 2, как бы перемещая изображение по соответствующей сферической поверхности или в ответ на изменение ориентации устройства, на дисплее отображается та часть 9b данных 9а изображения, которая соответствует ориентации дисплея. The operation method of the user interface according to the invention, in response to moving the device 2 as if moving image of a corresponding spherical surface or in response to changing orientation of the device, the display shows the portion 9b the image data 9a which corresponds to the display orientation. В то же время остановка и изменение масштаба изображения могут быть применены таким же путем, как описано выше. At the same time, stopping and zooming can be applied in the same way as described above. Также возможен вариант, когда панорамное изображение поворачивается путем нажатия вместе с перемещением устройства в нужном направлении, причем панорамное изображение соответственно продолжает перемещаться до тех пор, пока оно не будет остановлено, например, нажатием на дисплей. It is also possible, when the panoramic image is rotated by pressing together with the device moving in the right direction, the panoramic image continues to move, respectively, as long as it is not stopped, for example, pressing the display.

Фиг.6-10 представляют варианты выполнения пользовательского интерфейса согласно изобретению, в котором данные на дисплее изменяются путем наклона устройства. 6-10 represent embodiments of the user interface according to the invention in which the display data is changed by tilting the device. На фиг.6 представлен пример, в котором данные, иллюстрируемые данными D1, на дисплее 2' устройства 2 прокручиваются по траектории, показанной стрелкой R1 в направлении, в котором устройство наклоняется, как показано стрелкой Т1. 6 shows an example in which data, illustrated by data D1, the display 2 'devices 2 are scrolled along the path shown by arrow R1 in a direction in which the device is tilted, as shown by arrow T1. Начальное положение устройства показано пунктирной линией, а наклоненное положение - сплошной линией. The initial position of the device shown by the dotted line and the tilted position - solid line. Иными словами, в ответ на наклон устройства данные на дисплее прокручиваются или пробегают в направлении, в котором наклоняется устройство, что полностью аналогично причинно-следственным соотношениям в реальном пространстве. In other words, in response to tilting the device to display data or run scrolled in a direction in which the device is tilted, which is fully similar causal relations in real space. Это может быть реализовано таким путем, что, например, чем больше скорость изменения, тем больше устройство наклоняется относительно начального положения. This can be realized in such a way that, for example, the larger the change rate is, the more the device is tilted relative to the initial position. Прокрутка или прогон данных могут быть остановлены путем возврата в начальное положение или, например, с помощью клавиши на устройстве. Scrolling data or run can be stopped by returning to the initial position or, for example, using the keys on the device.

На фиг.7 представлен вариант осуществления, пригодный, например, для перемещения и поиска объектов на карте. Figure 7 shows an embodiment suitable for example for moving and searching objects on a map. На дисплее 2' размещается курсор С, который сохраняет свое положение; The display 2 'cursor C is placed which keeps its position; и наклон устройства таким образом, как показано стрелкой Т2, вызывает то, что данные, показанные как данные D2, начинают перемещаться от направления наклона по направлению к курсору С так, как обозначено стрелкой М2. and tilting device in such a manner as indicated by arrow T2 causes that data, illustrated as the data D2, start to move the direction of tilting towards a cursor C as indicated by arrow M2. Иными словами, курсор перемещается по данным, образующим, например, карту, в направлении, в котором наклоняется устройство. In other words, the cursor is moved by the data generator, e.g., a map, in a direction in which device is tilted.

В примере, представленном на фиг.8, данные на дисплее 2' устройства 2 представлены данными D3. In the example shown in Figure 8, the data on the display 2 & apos device 2 presents data D3. Когда пользователь наклоняет устройство 2 из положения, показанного пунктирной линией, в сторону от себя, подобно приближению к данным на дисплее, то данные на дисплее увеличиваются, что иллюстрируется графиком, показывающим увеличение данных D3, и стрелкой Z2. When the user tilts the device 2 from the position shown by a dotted line in the side of itself, like the approximation of the data on the display, the data on the display are increased, as illustrated by a graph showing the increase of data D3 and arrow Z2. В примере, показанном на фиг.9, данные D4 на дисплее соответственно уменьшаются, как показано графиком, иллюстрирующим уменьшение, и стрелкой Z3, что реализуется путем наклона устройства к пользователю таким образом, как показано стрелкой Т4. In the example shown in Figure 9, D4 data on the display are reduced accordingly as shown a graph illustrating the decrease, and the arrow Z3, which is realized by tilting the device towards the user in this way, as shown by arrow T4.

Варианты, показанные на фиг.6, 7, 8 и 9, могут быть объединены в пользовательском интерфейсе устройства таким образом, например, что на устройстве имеется клавиша для выбора режима работы (прокрутка или масштабирование), при этом сначала осуществляется поиск объекта путем наклона в режиме прокрутки, и после нахождения объекта осуществляется переход в режим масштабирования, причем наклон приводит к масштабированию данных на дисплее. The embodiments shown in Figures 6, 7, 8 and 9 may be combined in the user interface device thus, for example, that the device has a key for selecting the operation mode (scrolling or zooming), the first object is searched by tilting in scroll mode, and after a transition of the object in the zoom mode, the tilt results in a scaled data on the display. Прокрутка путем наклона, разумеется, может быть объединена с масштабированием таким путем, как показано на фиг.2. Scrolling by tilting may of course be combined with scaling in this way, as shown in Figure 2.

Фиг.10 схематично представляет вариант осуществления пользовательского интерфейса, соответствующего изобретению, для выбора объектов данных на дисплее. 10 schematically represents an embodiment of a user interface according to the invention for selecting data objects on the display. Объекты D5-D10 данных могут представлять собой, например, опции меню или кнопки выбора на странице. Objects D5-D10 data can be, for example, menu options, or buttons on the page. В начальном положении устройства 2, показанном пунктирной линией, выбран объект D5 данных, показанный на чертеже штриховкой. In the initial position of the device 2 shown by the dashed line selected data object D5 shown in the drawing by shading. Наклоняя устройство в направлении стрелки Т5, выбор сдвигается в направлении наклона, как показано стрелкой М3 и при этом сдвигается к объекту D9 данных. Tilting the device in the direction of arrow T5, the selection is shifted in the direction of tilt as shown by an arrow M3, and thus shifted to the data object D9. Выбрав желательный объект данных, его можно зафиксировать, например, посредством клавиши на устройстве или обратным перемещением устройства. Selecting a desired data object, it can be fixed, such as by keys on the device, or the reverse movement of the device. Для простоты здесь представлены наклон устройства только в одном направлении и выбор из объектов данных, расположенных один под другим, однако тем же путем, разумеется, можно перемещаться между выбираемыми объектами и в поперечном направлении. For simplicity, here represented by the slope of the device in only one direction and selection from data objects located one below the other, but in the same way, of course, possible to move between selectable objects in transverse direction.

На фиг.11 представлен еще один пример варианта осуществления, описанного выше со ссылками на фиг.3. 11 shows another example of the embodiment described above with reference to Figure 3. Широкоформатные данные D11 состоят из объектов, которые описаны буквами, упорядоченными в форме матрицы. Widescreen data D11 are composed of objects which are described letters arranged in matrix form. Путем перемещения устройства способом, показанным стрелками N, Е, S и W, пользователь перемещается так, как если бы он перемещался над данными и просматривал их через окно, образованное дисплеем 2'. By moving the device other shown by arrows N, E, S and W, the user moves as if it moved over the data and view them through a window formed by the display 2 '. Как только желательные данные найдены, в данном случае это буква q, они могут быть выбраны с помощью, например, клавиши на устройстве. Once the desired data is found, in this case the letter q, they can be selected using, e.g., a key on the device. Также может быть реализована еще одна сопоставимая функция, в случае которой вместо перемещения устройства в поперечном направлении оно наклоняется в направлении, в котором пользователю желательно перемещаться при просмотре данных. It may also be implemented in another comparable function, in which case instead of moving the device laterally, it is tilted in a direction in which the user desires to move when viewing data.

На фиг.12 представлен еще один вариант осуществления пользовательского интерфейса, соответствующего изобретению, для выбора объекта на дисплее. Figure 12 shows another embodiment of a user interface according to the invention for selecting an object on the display. На дисплее 2' устройства 2 имеются объекты 01-09, из которых должен быть сделан выбор. The display 2 & apos device 2 there are objects 01-09, from which the selection must be made. В исходном состоянии на чертеже слева курсор расположен в правом верхнем углу дисплея. In the initial state in the drawing to the left cursor is located in the upper right corner of the display. В данном варианте курсор С как будто зафиксирован на своем месте в реальном пространстве. In this embodiment, the cursor C as recorded in its place in the real space. Если пользователю желательно выбрать объект, например 07, то устройство перемещается в боковом направлении, как бы перемещая изображение под курсором, чтобы перевести желательный объект 07 в положение под курсором С, как показано на чертеже справа. If the user desires to select an object, for example 07, then the device is moved laterally as if moving the image under the cursor to move the object 07 in a desired position under the cursor C as shown in the figure on the right. На устройстве имеются клавиши 21, 22 и 23, действие которых соответствует действию кнопок мыши. In the device has keys 21, 22 and 23, whose action corresponds to an operation of the mouse buttons. В действительности, варианты осуществления по фиг.10-12 представляют собой решения, которые в портативных устройствах заменяют функции, подобные функциям мыши, используемым в обычных компьютерах и необходимым для перемещения курсора или выбора объекта на дисплее. In fact, the embodiments of Figures 10-12 represent decisions which in portable devices replace functions similar to the mouse functions used in conventional computers and are necessary to move the cursor or select an object on the display.

На фиг.13 представлен вариант, в котором объекты данных, страницы, карты и т.п.C1,...,Ci,...,Cn упорядочены в стопку или один над другим на дисплее Т устройства, подобно, например, страницам в реальной книге. 13 shows an embodiment in which data objects, pages, cards and t.p.C1, ..., Ci, ..., Cn are arranged in a stack or one above the other on the display device T, like, for example, pages in a real book. Объекты данных могут быть, например, картами, представляющими товары, или web-страницами. Data objects can be, for example, the maps which products or web-pages. Объекты просматриваются таким способом, как обозначено стрелкой М4 вперед и назад, путем наклона устройства соответственно либо вперед в направлении, показанном стрелкой Т6, или назад в направлении, показанном стрелкой Т7. Objects viewed in this way, as indicated by arrow M4 forward and backward by tilting the device correspondingly either forward in the direction indicated by arrow T6 or backward in the direction indicated by arrow T7. С помощью клавиш 24-26 объекты могут быть выделены и могут быть открыты файлы, программы и т.п., связанные с ними. Using the keys 24-26 objects can be identified and can be open files, programs, etc., associated with them. В пользовательском интерфейсе устройства могут быть предусмотрены различные режимы, подобные просмотру, прокрутке, выбору, масштабированию, как описано выше, при этом, например, клавиша 24 может предназначаться для выбора режима, а другие клавиши 25, 26, 27 могут действовать подобно кнопкам обычной мыши. The user interface apparatus different modes, such viewing, scrolling, selection, scaling may be provided, as described above, in this example, the key 24 may be adapted to select the mode, and other keys 25, 26, 27 may operate like the buttons on a conventional mouse .

На фиг.14 представлено приложение пользовательского интерфейса, соответствующего изобретению, на котором объекты данных упорядочены в радиальных стопках S11-S18, проходящих вовне от круга, в центре которого находятся устройство 2 и пользователь. Figure 14 is a user interface application according to the invention in which data objects are arranged in S11-S18 stacks radial extending outward from a circle centered on the device 2 and the user. Первая страница каждой стопки, например Р12 или Р16, определяет данные, находящиеся за ней. The first page of each stack, for example P12 or P16, defines the data stored behind it. Передние страницы могут быть просмотрены путем поворота устройства в поперечном направлении, например, по стрелке Т8, так чтобы обеспечить выбор направления А12 и передней страницы Р12. Front pages may be browsed by turning the device in the transverse direction, e.g., along arrow T8, so as to allow selection of the direction of A12 and the front page P12. Стопка объектов данных за этой страницей может быть просмотрена либо путем перемещения, либо путем наклона устройства 2 вперед и назад по стрелке F1. The stack of data objects for this page can be browsed either by moving or by tilting the device 2 forward and backward direction F1. Таким образом может быть конфигурирован, например, пользовательский интерфейс для электронной торговли, чтобы облегчить поиск мест продажи продукции и ориентацию в виртуальном магазине. Therefore, it may be configured, for example, the user interface for e-commerce to help you find places selling products and orientation in the virtual store.

На фиг.15 представлено дальнейшее развитие варианта осуществления, описанного выше со ссылками на фиг.5. Figure 15 is a further development of the embodiment described above with reference to Figure 5. Круги R1 и R2 представляют теперь данные изображения, формирующие панорамное изображение или 3D-изображение, охватывающее, в принципе, всю сферу пространства восприятия. Circles R1 and R2 present now the image data forming a panorama picture or 3D-images covering, in principle, the whole sphere of the perception space. Данные изображения могут представлять собой также данные изображения, полученные с видеокамеры, соединенной с устройством. The image data may be also image data obtained from a video camera connected to the device. Трехмерные данные D12 изображения, описывающие, например, некоторый объект, могут быть перенесены в эти данные изображения и установлены в желательное место и в желательной ориентации в “реальной окружающей среде”. The three-dimensional image data D12 that describes, for example, an object may be transferred to the image data and set in the desired location and in the desired orientation in the "real environment". В ответ на перемещение устройства 2 таким образом, как описано со ссылками на фиг.5, например, как показано стрелкой Т9, как данные фона, так и 3D-данные D12', D12", описывающие этот объект, изменяются в соответствии с различными положениями устройства, соответственно направлениям А1 и А2 просмотра, так что этот объект может рассматриваться с разных направлений в “реальной окружающей среде”. Это может применяться, например, при поиске 3D-модели софы в web-магазине и при помещении ее в желательное положение в данных изображения, представляющих дом поку In response to moving the device 2 in such a manner as described with reference to Figure 5, for example, as indicated by arrow T9, both the background data and 3D-data D12 ', D12 ", describes the object change in accordance with different positions devices, respectively, areas A1 and A2 view, so that the object can be viewed from different directions in the "real environment". It can be used, for example, when searching for 3D-model of the sofa in the web-shop and by placing it in the desired position in the data image representing a house poku пателя, причем она может рассматриваться с различных сторон, чтобы посмотреть, как выглядит софа в реальной окружающей ее обстановке. Patel, and it can be viewed from different angles to see how the sofa looks in real surrounding environment.

Решения, соответствующие изобретению, могут быть реализованы путем оснащения портативного устройства, например, многоосевым акселерометром и соответствующими схемами и программами, взаимодействующими с операционной системой устройства и, возможно, прикладными программами для обработки и интерпретации результатов измерений, так чтобы изменения данных на дисплее выполнялись соответственно перемещениям, измеренным акселерометром. Solutions of the invention may be realized by equipping a portable device such as a multi-axis accelerometer and associated circuitry and programs that interact with the operating system of the device and possibly application programs for processing and interpreting measurement results so that the display data changes performed respectively displacements measured by the accelerometer. Например, реализация с измерением ускорений базируется на применении известных самих по себе технических решений, и специалист в данной области техники, опираясь на инструкции и спецификации, имеет возможность реализовать работу пользовательского интерфейса, соответствующего изобретению, при приложении разумных усилий. For example, the realization with measurement of accelerations is based on application of per se known technical solutions, and a person skilled in the art, based on the instructions and specifications, is able to realize operation of the user interface according to the invention with reasonable efforts.

В малогабаритных устройствах обработки данных, таких как карманные компьютеры, при использовании технологии, известной из предшествующего уровня техники, невозможно реализовать операционные системы и приложения с производительностью и применимостью, которые были бы близки к уровню, достигнутому в более крупных устройствах обработки данных, подобных настольным или переносным компьютерам. In small data processing units such as PDAs, using techniques known in the art, it is impossible to realize operation systems and applications with a capacity and usability which were close to the levels achieved in larger data processing devices such as a desktop or portable computers. Также в портативные устройства невозможно включить традиционные средства памяти, такие как жесткий диск, дискета или накопители на CD-ROM (ПЗУ на компакт-дисках). Also in the portable device can not turn on the traditional storage media such as hard disk, floppy disk drives or CD-ROM (ROM, CD-ROM). Решение этих проблем может состоять в создании устройства, состоящего из двух частей, причем портативная часть включает в себя, помимо дисплея, лишь часть необходимых схем и программ. The solution of these problems may be to provide a device consisting of two parts, wherein the portable part includes, in addition to display only a part of necessary circuits and programs. Большая часть схем и программ находится в другой переносной части, имеющейся у пользователя, при этом данная часть и упомянутая портативная часть соединяются беспроводной линией связи. Most of the schemes and programs is another portable unit available to the user, this portion and said portable portion connected wireless link. Беспроводная линия связи может работать на частотах инфракрасного диапазона или на радиочастотах. The wireless link may operate at infrared frequencies or radio frequencies. В устройстве данного типа также легко реализовать систему, которая обнаруживает перемещение или положение портативной части относительно переносной части. In an apparatus of this type it is also easy to implement a system which detects movement or position of the handheld part relative to the portable unit. Способ работы пользовательского интерфейса, соответствующего изобретению, может быть реализован посредством этой системы. A method of operating a user interface according to the invention may be realized by this system.

Ниже со ссылками на фиг.16 рассмотрен еще один вариант осуществления изобретения, основанный на обнаружении ускорений, со ссылками на фиг.16. Hereinafter, with reference to Figure 16 is considered another embodiment of the invention based on detection of acceleration, with reference to Figure 16. Устройство включает в себя многоосевой акселерометр и необходимые схемы и программы для измерений. The apparatus includes a multi-axial accelerometer and necessary circuits and programs for measurements. Устройство включается, осуществляет контроль ускорений и на этапе 11 обнаруживает, что ускорение, превысившее определенный порог, вероятно, является начальным этапом перемещения, определенного в способе работы пользовательского интерфейса. The apparatus is turned on, and performs acceleration control at step 11 detects that the acceleration exceeds a certain threshold is likely to be the initial stage of movement defined in the operation method of the user interface. В ответ на это таймеры TD1 и TD2 запускаются на этапе 12. Таймер TD1 устанавливает очень короткий экспериментально определенный интервал времени порядка миллисекунд от обнаружения начала перемещения, за который действительное направление и величина ускорения определяют перемещение, которое пользователь сообщает устройству. In response, the timer TD1 and TD2 are started in step 12. The timer TD1 sets a very short experimentally determined time interval of the order of milliseconds from the detected start of displacement, for which the actual direction and magnitude of the acceleration is determined motion that informs the user device. Таймер TD2 устанавливает более длинный интервал времени, по истечении которого изменение данных на дисплее останавливается, если никаких других причин для остановки не возникло. TD2 timer sets a longer period of time, after which the change of data on the display stops, if no other reason for stopping has not arisen. В момент истечения времени TD1, на этапе 13 измеряется вектор превалирующего ускорения. At the expiration of the time TD1, on the stage 13 is measured by the prevailing acceleration vector. На этапе 14 анализируется, является ли полученный вектор определенным вектором, т.е. In step 14 analyzes whether the resultant vector defined by the vector, i.e., соответствует ли он какому-либо перемещению, определенному в способе работы пользовательского интерфейса. whether it corresponds to any displacement, a specific method of operation in the user interface. Если нет, то процедура возвращается назад к началу 10 и этапу 11 для контроля ускорений устройства. If not, the procedure returns back to the top 10 and stage 11 to control the acceleration device. С другой стороны, если этот вектор является определенным вектором, то данные на дисплее изменяются на этапе 15, например просматриваются, масштабируются и т.д. On the other hand, if the vector is defined vector, data on the display changed in step 15, for example visible, scaled, etc. в соответствии с конкретным алгоритмом. according to a specific algorithm. Как описано выше, с этим может быть связано, например, определение скорости просмотра данных на дисплее на основе величины вектора ускорения. As described above, this may be due, for example, determining the velocity data view on the display based on the magnitude of the acceleration vector. На этапе 16 также осуществляется контроль того, не истек ли интервал времени TD2. In step 16 also monitors whether, if time TD2 has elapsed. Если этот интервал времени истек, то процедура переходит к этапу 19, на котором изменение данных на дисплее останавливается, и процедура заканчивается на этапе 20. Если время TD2 не истекло, то на этапе 17 осуществляется контроль того, не обнаружен ли какой-либо противоположный вектор по отношению к ранее полученному определенному вектору или какой-либо другой сигнал остановки, например, нажатие на дисплей. When this time has elapsed, the routine proceeds to step 19, where the changing data on the display is stopped, and the routine ends at step 20. If time TD2 is not expired, then at step 17 monitors whether, if any opposite vector detected with respect to a particular previously obtained vector or any other stopping signal, for example, pressing the display. Если на этапе 18 обнаружен противоположный вектор или сигнал остановки, то на этапе 19 изменение данных на дисплее останавливается и процедура завершается. If at step 18 is found opposite vector or a stopping signal, then at step 19 the change in data on the display is stopped and the routine is terminated. Если на этапе 18 не обнаружен противоположный вектор или иные сигналы остановки, то процедура возвращается назад для контроля вышеописанных моментов. If in step 18 is not detected opposite vector or other stop signals, the procedure reverts back to control the above points.

Способ работы пользовательского интерфейса, соответствующего изобретению, может быть реализован и иными путями, отличными от использования измерений ускорения. A method of operating a user interface according to the invention may be implemented in other ways other than by using the acceleration measurements. Может быть применен любой метод, посредством которого можно измерить изменения места и позиции устройства. It may be employed any method by which one can measure changes in location and position of the device. Решение, которое может быть реализовано, предусматривает способ, в котором местоположение и ориентация устройства обнаруживаются путем передачи импульсного постоянного магнитного поля и измерения его детектором в устройстве. A solution that may be implemented, provides a method in which the location and orientation of the device are detected by sending pulsed DC magnetic field and measuring its detector in the device. С помощью такого метода можно полностью определить как местоположение, так и ориентацию устройства в трехмерном пространстве. With such a method it is possible to completely determine how the location and orientation of the device in three-dimensional space.

Возможным решением также является способ, на котором базируется так называемая оптическая мышь и в котором перемещение и скорость перемещения обнаруживаются посредством наблюдением и анализом любой находящейся поблизости поверхности, например некоторой поверхности на пользователе. A possible solution is also a method, which is based on the so-called optical mouse and wherein the displacement and speed of displacement are detected by observing and analyzing any surface located nearby, for example a surface of the user. Путем объединения этого метода с измерениями расстояния, что легко реализовать, и путем анализа изменений расстояния и относительного перемещения можно обнаружить изменения в местоположении и ориентации устройства. By combining this method with a measurement range, it is easy to realize, and by analyzing changes of distance and relative movement is possible to detect changes in the position and orientation of the device.

Изобретение, разумеется, может быть реализовано различными путями. The invention, of course, may be implemented in various ways. Может быть предусмотрено, например, что для осуществления обнаружения (детектирования) определенного перемещения более надежным образом ускорение измеряется несколько раз в течение короткого временного окна, и определенное перемещение детектируется, если любой из измеренных векторов удовлетворяет требованиям, установленным для такого детектирования. It can be provided, for example, that for the detection (detection) of a certain movement more reliable manner, the acceleration is measured several times over a short time window, and a specific movement is detected if any of the measured vectors meets the requirements established for such detection. Естественно, может быть применен более сложный анализ перемещения на основе последовательно измеренных векторов ускорения. Naturally, it may be applied more sophisticated analysis moving on the basis of the measured acceleration vectors sequentially. Перемещение устройства может обнаруживаться также с использованием такого средства, в котором, например, измеряются расстояния между передатчиками и приемниками, размещенными, с одной стороны, на устройстве, а с другой стороны, - на пользователе. Moving the device can also be detected using such a means in which, for example, distances are measured between transmitters and receivers placed, on the one hand on the device and on the other hand, - the user.

Пользовательский интерфейс, соответствующий изобретению, может быть реализован в соответствии с использованием и необходимыми признаками портативных устройств как подходящая комбинация вариантов, представленных выше, когда пользовательский интерфейс включает различные режимы работы, в которых одному и тому же перемещению устройства могут соответствовать различные изменения данных на дисплее. The user interface according to the invention can be realized according to use and necessary features of the portable device as a suitable combination of the embodiments presented above, when the user interface includes different modes of operation in which the same movement of the device may correspond to various data changes on the display. Как отмечено выше, в некоторых из вариантов может предусматриваться, например, клавиша, размещенная на устройстве, предназначенная для выбора различных режимов работы. As noted above, in some of the embodiments may be provided, for example, the key placed on the device for selecting different operation modes.

Изобретение допускает изменения в пределах объема, определяемого формулой изобретения. The invention allows for variation within the scope of the claims.

Claims (10)

1. Способ работы пользовательского интерфейса портативного устройства, подобного миниатюрному или карманному компьютеру, мобильному телефону, коммуникатору или иному подобному средству, при котором данные на дисплее (2') устройства (2) изменяются в ответ на определенные перемещения устройства в трехмерном пространстве его использования, причем упомянутые перемещения устройства и соответствующие изменения данных на дисплее определяются таким образом, что перемещение и соответствующее изменение данных на дисплее имеют причинно-следств 1. A method of operating a user interface of a portable device like a miniature computer or PDA, mobile phone, communicator or other similar means, in which data on the display (2 ') of the device (2) change in response to certain manipulation device in three-dimensional space of use, wherein said moving device and the corresponding changes of data on the display are defined so that the movement and a corresponding change of data on the display have a cause-consequence нное соотношение, которое аналогично причинно-следственным соотношениям трехмерного пространства восприятия и действия пользователя (1), отличающийся тем, что упомянутый способ работы включает в себя режим работы, при котором в ответ на наклон портативного устройства данные на дисплее прокручиваются в направлении, в котором наклоняется портативное устройство. constant correlation, which is analogous to cause-effect relations of the three-dimensional space of perception and user actions (1), characterized in that said method of operation includes the mode of operation in which in response to tilting of the portable device data on the display are scrolled in a direction in which the bends portable device.
2. Способ по п.1, отличающийся тем, что в режим работы дополнительно включены один или более следующих признаков: в ответ на поворот (Т8) устройства выбирается стопка данных (S12) из данных, виртуально упорядоченных в стопки (S11-S18) по кругу, окружающему пользователя устройства (2), при этом стопка (S12) просматривается путем наклона (F1) устройства в направлении стопки (S12) и от нее соответственно; 2. A method according to claim 1, characterized in that one or more of the following features operation mode further includes: in response to the rotation (T8) the device is selected stack data (S12) from the data, virtually arranged in the stack (S11-S18) of circle, the user equipment (2) surroundings, the stack (S12) is viewed by tilting (F1) the device in a stack direction (S12) and away from, respectively; в ответ на перемещение (Z) устройства (2) вперед или назад перпендикулярно дисплею (2′) данные (6а) на дисплее соответственно масштабируются с увеличением или с уменьшением; in response to the movement (Z) the device (2) forward or backward perpendicularly to the display (2 ') data (6a) on the display scaled accordingly to increase or decrease; в ответ на перемещение (N, E, S, W) устройства (2), по существу, в направлении плоскости его дисплея (2′) выбираются данные (q) из данных (D11), превышающих по размеру дисплей, и в ответ на помещение курсора (С) на дисплее (2') и перемещение (N, E, S, W) устройства (2), по существу, в направлении плоскости его дисплея (2'), курсор (С) перемещается противоположно перемещению для выбора данных (01-09) на дисплее, подобно перемещению данных на дисплее в реальном пространстве под курсором, сохраняющим свое положение в реальном пространстве. in response to the (N, E, S, W) the device (2) substantially in the direction of the display plane (2 ') chosen data (q) from data (D11), exceeding the size of the display, and in response to cursor space (C) on the display (2 ') and moving (N, E, S, W) the device (2) substantially in the direction of the display plane (2'), a cursor (C) moves opposite to the movement for selecting data (01-09) on the display, like the movement of data on the display in real space under the cursor, preserving their position in real space.
3. Способ по п.1, отличающийся тем, что способ работы дополнительно включает в себя режим работы, в котором в ответ на качание (Р) устройства (2), подобно переворачиванию страниц, данные (8а, 8b, 8с) на дисплее (2') изменяются также способом, соответствующим переворачиванию страниц. 3. A method according to claim 1, characterized in that the method of operation further includes a mode of operation, wherein in response to rocking (P) of the device (2), like flipping pages of data (8a, 8b, 8c) on the display ( 2 ') are also changed in a manner consistent flipping pages.
4. Способ по п.1, отличающийся тем, что способ работы дополнительно включает в себя режим работы, в котором в ответ на наклон (Т2) устройства (2) данные (D2) перемещаются на дисплее (2') с направления наклона к курсору (С). 4. A method according to claim 1, characterized in that the method of operating further comprises operating mode, wherein in response to tilting (T2) the device (2) data (D2) are moved on the display (2 ') with the tilt directions of the cursor (WITH).
5. Способ по п.1, отличающийся тем, что упомянутый способ работы включает в себя режим работы, в котором в ответ на наклон (Т6, Т7) устройства (2) данные (SI, C1,..., Ci,..., Сn) на дисплее (2′) просматриваются (М4) в направлении, соответствующем направлению наклона. 5. A method according to claim 1, characterized in that said method includes the operation mode, wherein in response to tilting (T6, T7) the device (2) data (SI, C1, ..., Ci, .. ., Cn) on the display (2 ') are viewed (M4) in a direction corresponding to the direction of inclination.
6. Способ по п.1, отличающийся тем, что способ работы дополнительно включает в себя режим работы, в котором в ответ на наклон (Т3) устройства (2) от пользователя данные (D3) на дисплее (2′) увеличиваются (Z2) и/или в ответ на наклон (Т4) устройства (2) к пользователю данные (D4) на дисплее (2') уменьшаются (Z3). 6. A method according to claim 1, characterized in that the method of operating further comprises operating mode, wherein in response to tilting (T3) the device (2) from a user data (D3) on the display (2 ') are increased (Z2) and / or in response to tilting (T4) the device (2) to the user data (D4) on the display (2 ') is reduced (Z3).
7. Способ по п.1, отличающийся тем, что способ работы дополнительно включает в себя режим работы, в котором отображаемые на дисплее данные являются желательной частью панорамного изображения (9а), и в ответ на поворот устройства (2) отображаемые данные (9b) изменяются так, что изменение направления наблюдения и отображаемой части панорамного изображения (9а) соответствуют повороту. 7. A method according to claim 1, characterized in that the method of operation further includes a mode in which the displayed data is a desired part of a panorama picture (9a), and in response to rotation of the device (2) displayed data (9b) changed so that a change in the direction of observation and display of the panoramic image (9a) corresponding to the rotation.
8. Способ по п.1, отличающийся тем, что способ работы дополнительно включает в себя режим работы, в котором отображаемые на дисплее данные являются желательной частью панорамного изображения или данными трехмерного изображения (R1, R2), и трехмерные данные (D12), описывающие объект, помещаются на данные изображения, при этом в ответ на поворот устройства (2) как данные панорамного изображения или трехмерного изображения (R1, R2), так и трехмерные данные изображения (D12', D12'') изменяются на дисплее (2') так, чтобы соответствовать направлению наблюдения (A1, 8. A method according to claim 1, characterized in that the method of operation further includes a mode in which the displayed data is a desired part of a panorama picture or three-dimensional image data (R1, R2), and three-dimensional data (D12), describes object placed on the image data, wherein in response to rotation of the device (2) data is a panoramic image or a three-dimensional image (R1, R2), and three-dimensional image data (D12 ', D12' ') are changed on the display (2') so as to correspond to the direction of observation (A1, A2), соответствующему ориентации устройства (2). A2), corresponding to orientation of the device (2).
9. Способ по п.1, отличающийся тем, что в ответ на остановку или существенное замедление (18) перемещения изменение данных на дисплее останавливается. 9. A method according to claim 1, characterized in that in response to stopping or significant slowing (18) The movement stops changing data on the display.
10. Способ по п.1, отличающийся тем, что изменение данных на дисплее останавливается посредством выдачи сигнала в устройство иным путем, чем путем перемещения устройства. 10. The method according to claim 1, characterized in that the change of data on the display is stopped by other dispensing device in the signal path than by moving the device.
RU2002112225/09A 1999-10-12 2000-10-11 Method for operation of user interface of portable data processing device RU2242043C2 (en)

Priority Applications (4)

Application Number Priority Date Filing Date Title
FI992191A FI19992191A (en) 1999-10-12 1999-10-12 A hand-held device interface operating method
FI19992191 1999-10-12
FI20001506A FI20001506A (en) 1999-10-12 2000-06-22 Handheld device operating method
FI20001506 2000-06-22

Publications (2)

Publication Number Publication Date
RU2002112225A RU2002112225A (en) 2003-11-27
RU2242043C2 true RU2242043C2 (en) 2004-12-10

Family

ID=26160785

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2002112225/09A RU2242043C2 (en) 1999-10-12 2000-10-11 Method for operation of user interface of portable data processing device

Country Status (8)

Country Link
EP (1) EP1228422A1 (en)
JP (1) JP2003511786A (en)
CN (1) CN1167995C (en)
AU (1) AU7792600A (en)
FI (1) FI20001506A (en)
NO (1) NO20021647L (en)
RU (1) RU2242043C2 (en)
WO (1) WO2001027735A1 (en)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2451984C2 (en) * 2007-06-28 2012-05-27 Сони Корпорейшн Image display apparatus, image forming apparatus, image display method and programme
US8217964B2 (en) 2008-02-14 2012-07-10 Nokia Corporation Information presentation based on display screen orientation
US8259077B2 (en) 2005-06-02 2012-09-04 Samsung Electronics Co., Ltd. Electronic device for inputting user command 3-dimensionally and method for employing the same
RU2468416C2 (en) * 2006-09-14 2012-11-27 Майкрософт Корпорейшн Defining input fields on portable media device
WO2013048288A2 (en) * 2011-09-30 2013-04-04 Miroshnichenko Vladimir Vitalievich Touch-sensitive panel
RU2494442C2 (en) * 2007-12-08 2013-09-27 Т-Мобиле Интернациональ Аг Virtual keyboard of mobile terminal device
RU2502117C2 (en) * 2009-02-12 2013-12-20 Кэнон Кабусики Кайся Image capturing device and driving method therefor
US8934943B2 (en) 2006-03-21 2015-01-13 Lg Electronics Inc. Mobile communication terminal and information display method thereof
RU2575486C2 (en) * 2010-09-22 2016-02-20 Савант Системс, Ллс Programmable multimedia control system having tactile remote control device
RU2583727C2 (en) * 2009-09-30 2016-05-10 МАЙКРОСОФТ ТЕКНОЛОДЖИ ЛАЙСЕНСИНГ, ЭлЭлСи Dynamic image presentation
RU2597525C2 (en) * 2010-04-22 2016-09-10 Самсунг Электроникс Ко., Лтд. Method of providing graphic interface and mobile device adapted therefor
RU2604518C2 (en) * 2011-03-21 2016-12-10 Самсунг Электроникс Ко., Лтд. Mobile terminal and object change support method
RU2608148C1 (en) * 2015-08-20 2017-01-16 Общество с ограниченной ответственностью "1С ВИАРАБЛ" (ООО "1С ВИАРАБЛ") Method, device and system for data input and display on touch screen display
RU2612031C2 (en) * 2014-10-23 2017-03-02 Сяоми Инк. Method of controlling photography and corresponding device
RU2616567C2 (en) * 2012-01-10 2017-04-17 Самсунг Электроникс Ко., Лтд. Device and method for displayed image rotation control

Families Citing this family (70)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002268622A (en) * 2001-03-09 2002-09-20 Denso Corp User interface device of portable terminal device
JP4530593B2 (en) * 2001-09-20 2010-08-25 シャープ株式会社 Image display system
FI115861B (en) 2001-11-12 2005-07-29 Myorigo Oy A method and apparatus for generating a feedback
FI20012209A (en) * 2001-11-14 2003-06-24 Nokia Corp A method for controlling the presentation of information in an electronic device, and electronic equipment
US7714880B2 (en) 2001-11-16 2010-05-11 Honeywell International Inc. Method and apparatus for displaying images on a display
FI20020582A (en) * 2002-03-26 2003-09-27 Nokia Oyj The user interface to a portable communication device
FI20021037A (en) 2002-05-31 2003-12-01 Nokia Corp Description A system and method for providing a calendar view,
TW200407025A (en) * 2002-08-27 2004-05-01 Vitec Co Ltd Pocket terminal device
AU2003292472A1 (en) * 2003-01-15 2004-08-10 Koninklijke Philips Electronics N.V. Handheld device with a display screen
KR100415161B1 (en) * 2003-07-01 2003-12-31 (주)두모션 Hand held device with three dimensional viewing function by using tilting sensor and system for three-dimensionally displaying image using the same
US7246912B2 (en) 2003-10-03 2007-07-24 Nokia Corporation Electroluminescent lighting system
JP3791848B2 (en) * 2003-10-28 2006-06-28 松下電器産業株式会社 An image display device, image display system, image capturing apparatus, image display method, and program
US20050212760A1 (en) 2004-03-23 2005-09-29 Marvit David L Gesture based user interface supporting preexisting symbols
JP2005292893A (en) * 2004-03-31 2005-10-20 Nec Access Technica Ltd Portable information terminal device
CN1704871B (en) 2004-05-31 2010-04-28 深圳市朗科科技股份有限公 Portable digital devices and input method therefor
EP1759285A1 (en) * 2004-06-04 2007-03-07 Philips Intellectual Property & Standards GmbH A hand-held device for content navigation by a user
JP2006079312A (en) * 2004-09-09 2006-03-23 Matsushita Electric Ind Co Ltd Portable viewer
GB0422090D0 (en) * 2004-10-05 2004-11-03 Symbian Software Ltd An interactive computing device with a configurable user interface
JP2006113859A (en) * 2004-10-15 2006-04-27 Nec Corp Portable information terminal and display control method therefor
KR101002807B1 (en) 2005-02-23 2010-12-21 삼성전자주식회사 Apparatus and method for controlling menu navigation in a terminal capable of displaying menu screen
EP1903425A4 (en) * 2005-07-08 2010-12-22 Mitsubishi Electric Corp Touch panel display device and portable apparatus
KR100651368B1 (en) 2005-09-15 2006-11-22 삼성전자주식회사 Method for controlling image according to movement of wireless terminal
US7431216B2 (en) * 2005-11-16 2008-10-07 Sony Ericsson Mobile Communications Ab Methods for presenting parameter status information and related portable electronic devices and parameters
CN100429610C (en) * 2006-01-19 2008-10-29 宏达国际电子股份有限公司 Intuition type screen controller
US20070174416A1 (en) * 2006-01-20 2007-07-26 France Telecom Spatially articulable interface and associated method of controlling an application framework
EP2062119A4 (en) * 2006-09-09 2012-07-11 Origin Inc F Integrated pressure sensitive lens assembly
JP5158902B2 (en) * 2006-09-14 2013-03-06 シャープ株式会社 Electronic apparatus, a valid function selection method and program
JP4801623B2 (en) * 2006-09-14 2011-10-26 シャープ株式会社 Select method of the electronic equipment and effective function
CN101330811B (en) 2007-06-22 2010-12-08 鸿富锦精密工业(深圳)有限公司;鸿海精密工业股份有限公司 Portable electronic device and operation method thereof
JP5412812B2 (en) * 2007-12-07 2014-02-12 ソニー株式会社 Input device, control device, control system, and handheld devices
JP2009265757A (en) * 2008-04-22 2009-11-12 Toshiba Corp Foldable portable terminal
WO2009141497A1 (en) * 2008-05-22 2009-11-26 Nokia Corporation Device and method for displaying and updating graphical objects according to movement of a device
JP2010092086A (en) * 2008-10-03 2010-04-22 Just Syst Corp User input apparatus, digital camera, input control method, and input control program
FI20080591A0 (en) * 2008-10-24 2008-10-24 Teknillinen Korkeakoulu Gesture-controlled user interface
US8645871B2 (en) 2008-11-21 2014-02-04 Microsoft Corporation Tiltable user interface
US20100146460A1 (en) * 2008-12-10 2010-06-10 Sony Ericsson Mobile Communications Ab System and method for modifying a plurality of key input regions based on detected tilt and/or rate of tilt of an electronic device
JP5618486B2 (en) * 2009-01-30 2014-11-05 株式会社東芝 Portable information terminal
JP5223784B2 (en) * 2009-06-05 2013-06-26 船井電機株式会社 The mobile terminal device
CN101943988B (en) 2009-07-09 2013-04-24 深圳富泰宏精密工业有限公司 System and method for automatically adjusting user interface of electronic device
JP2011097441A (en) * 2009-10-30 2011-05-12 Sony Corp Information processing apparatus, image display method and computer program
EP2513740B1 (en) * 2009-12-18 2018-02-21 Orange Method for restoring information on a screen of a terminal, and corresponding device, terminal, and computer program
US20110161889A1 (en) * 2009-12-30 2011-06-30 Motorola, Inc. User Interface for Electronic Devices
CN102129337A (en) * 2010-01-19 2011-07-20 腾讯科技(北京)有限公司 Method and device for controlling mobile terminal browser
US9977472B2 (en) * 2010-03-19 2018-05-22 Nokia Technologies Oy Method and apparatus for displaying relative motion of objects on graphical user interface
JP2011233064A (en) * 2010-04-30 2011-11-17 Sony Corp Information processor and display screen operation method
US9372618B2 (en) 2010-10-01 2016-06-21 Z124 Gesture based application management
US9454269B2 (en) 2010-10-01 2016-09-27 Z124 Keyboard fills bottom screen on rotation of a multiple screen device
JP2012123451A (en) * 2010-12-06 2012-06-28 Sony Corp Information processor, information processing system and information processing method
KR101740439B1 (en) * 2010-12-23 2017-05-26 엘지전자 주식회사 Mobile terminal and method for controlling thereof
KR101830962B1 (en) * 2010-12-29 2018-02-22 삼성전자주식회사 Apparatus and method for controlling screen display in portable terminal
JP5684621B2 (en) 2011-03-28 2015-03-18 京セラ株式会社 Electronic apparatus, display control method and a display control program
US9495012B2 (en) 2011-09-27 2016-11-15 Z124 Secondary single screen mode activation through user interface activation
JP6019601B2 (en) 2012-02-10 2016-11-02 ソニー株式会社 The information processing apparatus, information processing method, and program
JP2014029522A (en) 2012-07-06 2014-02-13 Funai Electric Co Ltd Electronic information terminal and display method therefor
US9791896B2 (en) * 2012-07-13 2017-10-17 Symbol Technologies, Llc Device and method for performing a functionality
JP5435110B2 (en) * 2012-11-29 2014-03-05 日本電気株式会社 Terminal, a display method, and program
CN103179273A (en) * 2013-03-11 2013-06-26 广东欧珀移动通信有限公司 Mobile phone operation method
JP5516794B2 (en) * 2013-05-13 2014-06-11 日本電気株式会社 A portable information terminal, a display control method, and program
KR20140146352A (en) 2013-06-17 2014-12-26 삼성전자주식회사 User interface device and method of operation of user interface device
CN104407785B (en) * 2013-12-10 2018-06-15 贵阳朗玛信息技术股份有限公司 Type information display method and apparatus
JP5639295B2 (en) * 2014-03-31 2014-12-10 グリー株式会社 User operation control program, a mobile device and user operation control method
JP5640165B2 (en) * 2014-03-31 2014-12-10 グリー株式会社 User operation control program, a mobile device and user operation control method
CN105288997A (en) * 2014-06-24 2016-02-03 腾讯科技(深圳)有限公司 Method and device for implementing interaction in chessboard interface
CN104216634A (en) * 2014-08-27 2014-12-17 小米科技有限责任公司 Method and device for displaying manuscript
JP5826415B2 (en) * 2015-01-14 2015-12-02 京セラ株式会社 Display control method and a display control program
JP5801006B2 (en) * 2015-01-14 2015-10-28 京セラ株式会社 Electronic apparatus, display control method and a display control program
JP2015099602A (en) * 2015-01-14 2015-05-28 京セラ株式会社 Display control program
JP5801005B2 (en) * 2015-01-14 2015-10-28 京セラ株式会社 Electronic apparatus, display control method and a display control program
US9697393B2 (en) 2015-11-20 2017-07-04 Symbol Technologies, Llc Methods and systems for adjusting mobile-device operating parameters based on housing-support type
CN105807952A (en) * 2016-03-07 2016-07-27 联想(北京)有限公司 Information processing method and electronic equipment

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
IL92220A (en) * 1989-11-06 1993-02-21 Ibm Israel Three-dimensional computer input device
SE516552C2 (en) * 1997-10-02 2002-01-29 Ericsson Telefon Ab L M Handheld display device and method of display screens

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8259077B2 (en) 2005-06-02 2012-09-04 Samsung Electronics Co., Ltd. Electronic device for inputting user command 3-dimensionally and method for employing the same
US8934943B2 (en) 2006-03-21 2015-01-13 Lg Electronics Inc. Mobile communication terminal and information display method thereof
RU2468416C2 (en) * 2006-09-14 2012-11-27 Майкрософт Корпорейшн Defining input fields on portable media device
RU2451984C2 (en) * 2007-06-28 2012-05-27 Сони Корпорейшн Image display apparatus, image forming apparatus, image display method and programme
RU2494442C2 (en) * 2007-12-08 2013-09-27 Т-Мобиле Интернациональ Аг Virtual keyboard of mobile terminal device
US8217964B2 (en) 2008-02-14 2012-07-10 Nokia Corporation Information presentation based on display screen orientation
RU2480938C2 (en) * 2008-02-14 2013-04-27 Нокиа Корпорейшн Information presentation based on display screen orientation
US8531486B2 (en) 2008-02-14 2013-09-10 Nokia Corporation Information presentation based on display screen orientation
RU2502117C2 (en) * 2009-02-12 2013-12-20 Кэнон Кабусики Кайся Image capturing device and driving method therefor
US10037593B2 (en) 2009-09-30 2018-07-31 Microsoft Technology Licensing, Llc Dynamic image presentation
RU2583727C2 (en) * 2009-09-30 2016-05-10 МАЙКРОСОФТ ТЕКНОЛОДЖИ ЛАЙСЕНСИНГ, ЭлЭлСи Dynamic image presentation
US9383916B2 (en) 2009-09-30 2016-07-05 Microsoft Technology Licensing, Llc Dynamic image presentation
RU2597525C2 (en) * 2010-04-22 2016-09-10 Самсунг Электроникс Ко., Лтд. Method of providing graphic interface and mobile device adapted therefor
RU2575486C2 (en) * 2010-09-22 2016-02-20 Савант Системс, Ллс Programmable multimedia control system having tactile remote control device
RU2604518C2 (en) * 2011-03-21 2016-12-10 Самсунг Электроникс Ко., Лтд. Mobile terminal and object change support method
WO2013048288A2 (en) * 2011-09-30 2013-04-04 Miroshnichenko Vladimir Vitalievich Touch-sensitive panel
WO2013048288A3 (en) * 2011-09-30 2013-06-06 Miroshnichenko Vladimir Vitalievich Touch-sensitive panel
RU2616567C2 (en) * 2012-01-10 2017-04-17 Самсунг Электроникс Ко., Лтд. Device and method for displayed image rotation control
RU2612031C2 (en) * 2014-10-23 2017-03-02 Сяоми Инк. Method of controlling photography and corresponding device
US10063760B2 (en) 2014-10-23 2018-08-28 Xiaomi Inc. Photographing control methods and devices
RU2608148C1 (en) * 2015-08-20 2017-01-16 Общество с ограниченной ответственностью "1С ВИАРАБЛ" (ООО "1С ВИАРАБЛ") Method, device and system for data input and display on touch screen display

Also Published As

Publication number Publication date
JP2003511786A (en) 2003-03-25
NO20021647L (en) 2002-05-22
CN1379871A (en) 2002-11-13
FI20001506D0 (en)
AU7792600A (en) 2001-04-23
CN1167995C (en) 2004-09-22
NO20021647D0 (en) 2002-04-08
FI20001506A (en) 2001-04-13
WO2001027735A1 (en) 2001-04-19
EP1228422A1 (en) 2002-08-07
FI20001506A0 (en) 2000-06-22

Similar Documents

Publication Publication Date Title
Karlson et al. AppLens and launchTile: two designs for one-handed thumb use on small devices
CN102105853B (en) Touch interaction with a curved display
US7176886B2 (en) Spatial signatures
US6798429B2 (en) Intuitive mobile device interface to virtual spaces
US7301526B2 (en) Dynamic adaptation of gestures for motion controlled handheld devices
EP2353065B1 (en) Controlling and accessing content using motion processing on mobile devices
US7180502B2 (en) Handheld device with preferred motion selection
US6681031B2 (en) Gesture-controlled interfaces for self-service machines and other applications
US8314817B2 (en) Manipulation of graphical objects
Hardy et al. Touch & interact: touch-based interaction of mobile phones with displays
CN103119628B (en) The user interface on a display of the three-dimensional effect using motion characteristics
US6594616B2 (en) System and method for providing a mobile input device
US8970503B2 (en) Gestures for devices having one or more touch sensitive surfaces
US8416266B2 (en) Interacting with detail-in-context presentations
US7301527B2 (en) Feedback based user interface for motion controlled handheld devices
US9727095B2 (en) Method, device and program for browsing information on a display
US7379047B2 (en) Using a physical object to control an attribute of an interactive display application
US7668340B2 (en) Gesture-controlled interfaces for self-service machines and other applications
US8570283B2 (en) Information processing apparatus, information processing method, and program
KR101459816B1 (en) Optical capacitive thumb control with pressure sensor
JP3920833B2 (en) Cursor moving method
US7365737B2 (en) Non-uniform gesture precision
US6690358B2 (en) Display control for hand-held devices
EP2406705B1 (en) System and method for using textures in graphical user interface widgets
JP4100195B2 (en) Display processing device of the three-dimensional object, display processing method, and computer program

Legal Events

Date Code Title Description
MM4A The patent is invalid due to non-payment of fees

Effective date: 20101012