KR100565040B1 - User interface method using 3-dimensional user input device in 3-dimensional graphic display and computer readable medium therefor - Google Patents

User interface method using 3-dimensional user input device in 3-dimensional graphic display and computer readable medium therefor Download PDF

Info

Publication number
KR100565040B1
KR100565040B1 KR19990034575A KR19990034575A KR100565040B1 KR 100565040 B1 KR100565040 B1 KR 100565040B1 KR 19990034575 A KR19990034575 A KR 19990034575A KR 19990034575 A KR19990034575 A KR 19990034575A KR 100565040 B1 KR100565040 B1 KR 100565040B1
Authority
KR
South Korea
Prior art keywords
dimensional
menu
input device
user input
sub
Prior art date
Application number
KR19990034575A
Other languages
Korean (ko)
Other versions
KR20010018568A (en
Inventor
박종욱
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR19990034575A priority Critical patent/KR100565040B1/en
Publication of KR20010018568A publication Critical patent/KR20010018568A/en
Application granted granted Critical
Publication of KR100565040B1 publication Critical patent/KR100565040B1/en

Links

Images

Abstract

본 발명은 3차원 사용자 입력 장치를 사용한 3차원 그래픽 화면상의 사용자 인터페이스에 관한 것으로, (a) 사용자가 3차원 공간상에서 임의의 방향으로 움직일 수 있는 3차원 사용자 입력 장치에 의하여 3차원 그래픽 화면상에 위치하는 계층적인 메뉴를 가지고 있는 오브젝트를 선택하는 단계; The present invention relates to a user interface on the three-dimensional graphic display with three-dimensional user input device, (a) user on the three-dimensional graphical display by the three-dimensional user input device that can move in any direction in 3D space selecting an object that has a location hierarchical menus; (b) 상기 3차원 그래픽 화면상에 상기 오브젝트가 가지고 있는 최상위 메뉴를 표시하는 단계; (B) displaying the top menu, in which the object has on the three-dimensional graphic display; (c) 상기 3차원 사용자 입력 장치에 의하여 상기 메뉴의 항목들 중에서 하위 메뉴를 가지고 있는 항목을 선택하는 단계; (C) sending, by the three-dimensional user input device, select the item with a sub-menu from among the items of the menu; 및 (d) 상기 (c) 단계에서 하위 메뉴를 가지고 있는 항목이 선택되면, 3차원 그래픽 화면상에 하위 메뉴가 표시되는 단계를 포함함을 특징으로 한다. And (d) When an item is selected which has a sub-menu in the step (c), characterized in that it comprises a step in which a sub-menu displayed on the three-dimensional graphic display.
본 발명에 의하면, 사용자가 간단하게 조작할 수 있는 3차원 사용자 입력 장치를 사용한 3차원 그래픽 화면상의 인터페이스를 통하여 다양하고 복잡한 사용자 인터페이스를 쉽고 편리하게 수행할 수 있다. According to the present invention, the user can simply and easily and conveniently perform various complex user interfaces through a three-dimensional graphic interface on the screen with the three-dimensional user input device that can be operated. 특히, 계층적 메뉴를 가지고 있는 오브젝트를 인간의 공간 개념과 일치하는 방식으로 접근할 수 있으므로 효율적인 인터페이스 개발이 가능하다. In particular, since the objects have a hierarchical menu it can be accessed in a manner consistent with human space concept it is possible to develop an efficient interface.

Description

3차원 사용자 입력 장치를 사용한 3차원 그래픽 화면상의 사용자 인터페이스 방법 및 이를 위한 기록 매체 {User interface method using 3-dimensional user input device in 3-dimensional graphic display and computer readable medium therefor} 3D user interface method on the three-dimensional graphic display with the user input device and a recording medium therefor {User interface method using 3-dimensional user input device in 3-dimensional graphic display and computer readable medium therefor}

도 1은 종래의 2차원 사용자 입력 장치를 사용한 2차원 그래픽 화면상의 사용자 인터페이스를 툴바의 메뉴 항목을 중심으로 개략적으로 도시한 것이다. Figure 1 is a simplified view of the user interface on the two-dimensional graphic display with the conventional two-dimensional user input device, the case of the menu item in the toolbar.

도 2는 본 발명의 실시예에서 사용될 수 있는 3차원 사용자 입력 장치의 일 실시예 및 그 입력 처리 과정을 블록으로 도시한 것이다. Figure 2 illustrates the embodiment and the input process of a three-dimensional user input device that may be used in embodiments of the invention as a block.

도 3은 본 발명의 일 실시예에 따른 3차원 사용자 입력 장치를 사용한 3차원 화면상의 사용자 인터페이스를 개략적으로 도시한 것이다. Figure 3 is a schematic illustration of a user interface on a 3D display using a three-dimensional user input device in accordance with one embodiment of the present invention.

도 4는 도 3에서 도시한 3차원 사용자 입력 장치를 사용한 3차원 화면상의 사용자 인터페이스 방법에 대한 흐름도이다. Figure 4 is a flow diagram of the user interface method on the three-dimensional display using a three-dimensional user input device shown in Fig.

도 5는 본 발명의 다른 실시예에 따른 3차원 사용자 입력 장치를 사용한 3차원 화면상의 사용자 인터페이스 방법에 대한 흐름도이다. Figure 5 is a flow diagram of the user interface method on the three-dimensional display using a three-dimensional user input device according to another embodiment of the present invention.

도 6은 본 발명의 또다른 실시예에 따른 3차원 사용자 입력 장치를 사용한 3차원 화면상의 사용자 인터페이스를 개략적으로 도시한 것이다. Figure 6 is a schematic illustration of a user interface on a 3D display using a three-dimensional user input device according to still another embodiment of the present invention.

도 7은 도 6에서 도시한 3차원 사용자 입력 장치를 사용한 3차원 화면상의 사용자 인터페이스 방법에 대한 흐름도이다. 7 is a flow diagram of the user interface method on the three-dimensional display using a three-dimensional user input device shown in Fig.

본 발명은 사용자 인터페이스에 관한 것으로, 특히 3차원 사용자 입력 장치를 사용한 3차원 그래픽 화면상의 사용자 인터페이스에 관한 것이다. The present invention relates to relates to a user interface, particularly the user interface on the three-dimensional graphic display with three-dimensional user input device.

컴퓨터 등의 정보 처리 시스템이나 제어 시스템에서는 사용자 인터페이스를 위한 사용자 입력 및 출력 장치가 사용된다. In the information processing system or a control system such as a computer, a user input and output devices it is used for the user interface. 사용자 입력 장치로는 키보드(keyboard), 마우스(mouse), 터치 스크린(touch screen) 등이 주로 사용되며, 출력 장치로는 모니터 화면(monitor screen) (이하, 그래픽 화면 또는 화면으로 참조함), 프린터(printer) 등이 널리 사용된다. A user input device is mainly used, such as a keyboard (keyboard), a mouse (mouse), touch screen (touch screen), the output device is the monitor screen (monitor screen) (also referred to below, the graphic display or screen), printer, (printer), etc. are widely used.

종래의 마우스 등의 입력 장치는 2차원적인 사용자 입력만을 지원하였다. An input device such as a conventional mouse was only supports the two-dimensional user input. 즉, 사용자 입력 장치를 통한 사용자 입력을 평면상에서 기준축이 되는 X 축 방향의 입력과 이에 수직을 이루는 Y 축 방향의 입력으로 분리하여 감지 또는 검출하였다. That is, by separating the user input via the user input device as a reference axis X-axis input and its input in the vertical Y-axis direction of the direction in which the forming the plane was sensed or detected. 또한, 종래의 그래픽 화면도 특수한 응용 분야를 제외하고는, 일반적으로 2차원적인 사용자 출력을 중심으로 구성되었다. In addition, it is also except for special applications, a conventional graphic display, generally consisted of mainly a two-dimensional user output.

도 1은 이러한 종래의 2차원 사용자 입력 장치를 사용한 2차원 그래픽 화면상의 사용자 인터페이스를 툴바의 메뉴 항목을 중심으로 개략적으로 도시한 것이다. Figure 1 is a simplified view of the user interface on the two-dimensional graphic using such a conventional two-dimensional screen, a user input device in case of the menu item in the toolbar.

종래의 사용자 인터페이스는 사용자의 제어 입력을 2차원적으로만 지원하였 기에 그래픽 화면상의 사용자 인터페이스도 2차원적으로 구현되었다. A conventional user interface is implemented as a two-dimensional graphical user interface on the screen the control input of the user groups was supported by only two dimensions. 이를 도 1을 참조하여 설명하기로 한다. This reference to Figure 1 will be described.

도 1에서 도시한 바와 같이, 사용자가 2차원적인 사용자 입력을 지원하는 마우스(140)를 X 축 및 Y 축 방향으로 임의로 움직여서 툴바(tool bar)(100) 상의 특정 메뉴 버튼(110)을 선택하면, 보통 아래쪽으로 pop-up 메뉴(또는, pull-down 메뉴라고 칭하기도 함)(120)가 보여진다. As it is shown in Figure 1, when the user two-dimensional moving the mouse 140 to support user input arbitrarily in the X-axis and Y-axis directions select a particular menu button 110 on the tool bar (tool bar) (100) , usually (hereinafter also referred to as or, pull-down menu) to the bottom of the pop-up menu 120 it is shown. 화면상에는 현재(즉, 최종 시점)의 마우스의 화면상의 상대적인 위치를 나타내는 마우스 표시점(140p)이 존재하며, 사용자는 마우스 표시점(140p)을 참조하여 사용자 입력 장치인 마우스(140)의 움직임을 제어하게 된다. On the screen, the current (that is, the end point), and this indicates the relative position on the mouse screen cursor mark (140p) of the present, a user with reference to the mouse display point (140p), the movement of the user input device is a mouse (140) It is controlled.

마우스 표시점(140p)이 사용자가 원하는 위치, 예를 들어 도 1의 특정 메뉴 버튼(110)에 위치하게 되면, 사용자는 일반적으로 마우스(140) 상에 존재하는 특정 버튼을 클릭(click)하여 해당 오브젝트를 선택한다. Once the mouse displays point (140p), the user is located at a certain menu button 110 of Figure 1 contains a desired position, for example, the user typically clicks a particular button present on the mouse (140) (click) the It selects the object. 이러한 "선택"은 응용 분야에 따라, 단지 마우스 표시점(140p)의 포인팅(pointing; 마우스 표시점을 해당 오브젝트에 위치시키는 것을 말함)에 의하여 이루어질 수도 있고, 특정 마우스 버튼의 클릭에 의할 수도 있다. The "selection" is pointing, the only mouse mark (140p), depending on the application; may be made by (pointing refers to placing a mouse mark on the object) may be a click on a particular mouse button . 또한, 더블클릭(double click)에 의하여 선택이 이루어지는 경우도 있다. Further, in some cases it made the selection by double-clicking (double click).

만약, 마우스에 의하여 메뉴를 가지고 있는 오브젝트가 선택되면 오브젝트가 가지고 있는 메뉴(최상위 메뉴) (120)가 화면상에 나타난다. If, when an object that has a menu selection by the mouse, a menu (the top menu) 120, that the object does have appear on the screen. 이러한 메뉴(120)의 각 항목은 또한 자신의 하위 메뉴를 가지고 있을 수 있다. Each of these entries in the menu 120 also may have their own sub-menu. 이처럼 계층적인 메뉴를 가지고 있는 경우에, 하위 메뉴를 가지고 있는 항목(124)을 마우스를 움직여서 선 택하면 다시 오른쪽(또는 화면 공간에 따라 왼쪽)으로 하위 pop-up 메뉴(130)가 보여진다. Thus, if you have a hierarchical menu for, if an item 124, which has a sub-menu, select, move the mouse is shown in the lower right of the back pop-up menu 130 (or the left side according to the display space). 또한, 하위 pop-up 메뉴의 항목(135)이 자신의 하위 pop-up 메뉴를 가지고 있는 경우에는 이러한 선택 과정이 반복될 수 있다. Further, if the item 135 of pop-up sub-menu has its own sub-pop-up menu has such a selection process can be repeated. 최종적으로, 사용자가 원하는 최하위 메뉴 항목을 선택하면 해당 항목에 정의된 동작(operation)이 수행된다. Finally, when the user selects a desired menu item, the least significant action (operation) is defined in the item is performed.

종래의 2차원 그래픽 화면상의 인터페이스에서는 많은 양의 정보를 검색함에 있어서 화면 공간상의 제약으로 2차원적으로 메뉴를 계속 보여주는데 한계가 있다. Continue to show menus in two dimensions to limitations on the display area as in the prior art on a two-dimensional graphical display of the search interface a great deal of information is limited. 또한, 평면적인 메뉴 표현은 화면에 많은 것이 보여지므로 복잡해 보이고, 어떤 하나의 메뉴에 대해서 그 하위 레벨의 메뉴가 옆으로 보여지는 것은 인간의 공간적 개념과 잘 맞지 않으므로 가상 현실을 응용한 사용자 인터페이스로는 적절하지 않다. In addition, the flat menu representation showing complicated since show much on the screen, which is one thing about the menu is the menu of the lower level shown to the side is a an application of virtual reality does not fit well with the human spatial concept of the user interface it is not appropriate.

그리고 종래의 2차원 사용자 입력 장치는 2차원적인 사용자의 움직임만을 검출하는 것으로, 3차원 공간에서의 사용자 움직임은 고려되지 않았다. And the conventional two-dimensional user input device by detecting only two-dimensional movement of the user, are not taken into account the motion of the user in three dimensional space. 따라서 향후 기술의 발전에 따른 3차원적인 사용자 인터페이스가 요구되는 3차원 사용자 입력 장치로는 사용될 수 없다. Therefore can not be used as a three-dimensional user input device is a three-dimensional user interface in accordance with the development of future technology requirements.

본 발명이 이루고자 하는 기술적인 과제는 상기의 문제점을 해결하기 위해, 사용자가 간단하게 조작할 수 있는 3차원 사용자 입력 장치를 사용한 사용자의 입력을 받아, 그래픽 화면을 통한 출력을 사용자에게 3차원적으로 제시함으로써 다양하고 복잡한 사용자 인터페이스를 쉽고 편리하게 수행할 수 있도록 하는 3차원 사용자 입력 장치를 사용한 3차원 그래픽 화면상의 사용자 인터페이스 방법 및 이를 위한 프로그램을 기록한 기록 매체를 제공하는데 있다. Technical Problem The present invention to solve the above problem, the user and simple to operate on 3-D received a user input using a user input device to, for output via the graphic display by the user three-dimensionally proposed to provide a variety of complex three-dimensional user interface on a graphical user interface screen, the method using a three-dimensional user input device that allows easy and convenient to perform, and a recording medium storing a program therefor by.

상기 기술적 과제를 해결하기 위하여, 본 발명에 일측면에 의한 3차원 사용자 입력 장치를 사용한 3차원 그래픽 화면상의 사용자 인터페이스 방법은 사용자 입력 장치를 사용한 그래픽 화면상의 사용자 인터페이스 방법에 있어서, (a) 사용자가 3차원 공간상에서 임의의 방향으로 움직일 수 있는 3차원 사용자 입력 장치에 의하여 3차원 그래픽 화면상에 위치하는 계층적인 메뉴를 가지고 있는 오브젝트를 선택하는 단계; Wherein in order to solve the technical problem, the user interface method on the three-dimensional graphic display with three-dimensional user input device according to one aspect the present invention provides a user interface method on the graphic screen using a user input device, (a) user selecting an object that has a hierarchical menu which is located on the three-dimensional graphical display by the three-dimensional movable in any direction of the user input device in the three-dimensional space; (b) 상기 3차원 그래픽 화면상에 상기 오브젝트가 가지고 있는 최상위 메뉴를 표시하는 단계; (B) displaying the top menu, in which the object has on the three-dimensional graphic display; (c) 상기 3차원 사용자 입력 장치에 의하여 상기 메뉴의 항목들 중에서 하위 메뉴를 가지고 있는 항목을 선택하는 단계; (C) sending, by the three-dimensional user input device, select the item with a sub-menu from among the items of the menu; 및 (d) 상기 (c) 단계에서 하위 메뉴를 가지고 있는 항목이 선택되면, 3차원 그래픽 화면상에 하위 메뉴가 표시되는 단계를 포함함을 특징으로 한다. And (d) When an item is selected which has a sub-menu in the step (c), characterized in that it comprises a step in which a sub-menu displayed on the three-dimensional graphic display.

본 발명의 다른 측면에 의한 3차원 사용자 입력 장치를 사용한 3차원 그래픽 화면상의 사용자 인터페이스 방법은 사용자 입력 장치를 사용한 그래픽 화면상의 사용자 인터페이스 방법에 있어서, (a) 사용자가 3차원 공간상에서 임의의 방향으로 움직일 수 있는 3차원 사용자 입력 장치에 의하여 3차원 그래픽 화면상에 위치하는 계층적인 메뉴를 가지고 있는 오브젝트를 선택하는 단계; Three-dimensional graphics display user interface method on using a three-dimensional user input device according to another aspect of the present invention is a user interface method on the graphic screen using a user input device, (a) in any direction on the user and the three-dimensional space selecting an object that has a hierarchical menu which is located on the three-dimensional graphical display by the three-dimensional user input device that can move; (b) 상기 3차원 그래픽 화면상에 상기 오브젝트가 가지고 있는 최상위 메뉴를 표시하는 단계; (B) displaying the top menu, in which the object has on the three-dimensional graphic display; (c) 상기 3차원 사용자 입력 장치의 움직임에 의하여 상기 메뉴의 항목들 중에서 하위 메뉴를 가지고 있는 항목을 선택하는 단계; (C) sending, by the movement of the three-dimensional user input device, select the item with a sub-menu from among the items of the menu; 및 (d) 상기 (c) 단계에서 선택된 항목이 가지고 있는 하위 메뉴가 상기 3차원 사용자 입력 장치가 움직인 방향으로 표시되는 단계를 포함함을 특징으로 한다. And (d) is characterized in that the step (c) with a sub-menu item selected in the step has a step which is represented by the three-dimensional user input device moving direction.

본 발명의 또다른 측면에 의한 3차원 사용자 입력 장치를 사용한 3차원 그래픽 화면상의 사용자 인터페이스 방법은 사용자 입력 장치를 사용한 그래픽 화면상의 사용자 인터페이스 방법에 있어서, (a) 사용자가 2차원 평면상에서 임의의 방향으로 움직일 수 있는 사용자 입력 장치에 상기 2차원 평면과 공간상에서 수직을 이루는 방향의 움직임을 제어하는 제 1 버튼과 상기 제 1 버튼이 제어하는 움직임의 역방향의 움직임을 제어하는 제 2 버튼을 추가하여 3차원 사용자 입력을 지원하는 3차원 사용자 입력 장치에 의하여 3차원 그래픽 화면상에 위치하는 계층적인 메뉴를 가지고 있는 오브젝트를 선택하는 단계; The user interface method on the three-dimensional graphic display with three-dimensional user input device according to yet another aspect of the present invention is a user interface method on the graphic screen using a user input device, (a) user and a random direction on the two-dimensional plane, and a user input device moveable add a second button for controlling the backward movement of the first button and the movement under the control of the first button, to control a direction of movement perpendicular on the two-dimensional plane and the space 3 dimensional selecting an object that has a hierarchical menu which is located on the three-dimensional graphical display by the three-dimensional user input device supported by the user input; (b) 상기 3차원 그래픽 화면상에 상기 오브젝트가 가지고 있는 최상위 메뉴를 표시하는 단계; (B) displaying the top menu, in which the object has on the three-dimensional graphic display; (c) 상기 메뉴의 항목들 중에서 하위 메뉴를 가지고 있는 항목을 상기 제 1 버튼을 누름에 의하여 선택하는 단계; (C) selecting by the first button, the item having a sub-menu from among the menu items of the press; 및 (d) 상기 (c) 단계에서 하위 메뉴를 가지고 있는 항목이 선택되면, 3차원 그래픽 화면상에 하위 메뉴가 표시되는 단계를 포함함을 특징으로 한다. And (d) When an item is selected which has a sub-menu in the step (c), characterized in that it comprises a step in which a sub-menu displayed on the three-dimensional graphic display.

상기 다른 기술적 과제를 해결하기 위하여, 본 발명의 일 측면에 컴퓨터로 읽을 수 있는 기록 매체는 (a) 사용자가 3차원 공간상에서 임의의 방향으로 움직일 수 있는 3차원 사용자 입력 장치에 의하여 3차원 그래픽 화면상에 위치하는 계층적인 메뉴를 가지고 있는 오브젝트를 선택하면, 상기 3차원 그래픽 화면상에 상기 오브젝트가 가지고 있는 최상위 메뉴를 표시하는 기능; In order to achieve the above another aspect, a computer-readable recording medium to an aspect of the invention, (a) user and the three-dimensional graphical display by the three-dimensional user input device that can move in any direction in 3D space selecting objects for which they have a hierarchical menu located on the functions of on the three-dimensional graphics display the top menu, in which the object has; (b) 상기 3차원 사용자 입력 장치의 움직임에 의하여 상기 메뉴의 항목들 중에서 하위 메뉴를 가지고 있는 항목 을 선택하면, 상기 3차원 그래픽 화면상에 하위 메뉴가 표시되는 기능; (B) when an item is selected, which has a sub-menu from among the items in the menu by the movement of the three-dimensional user input device, a function that displays the submenu on the three-dimensional graphic display; 및 (c) 하위 메뉴를 가지고 있는 항목을 선택하는 상기 3차원 사용자 입력 장치의 움직임의 역방향의 움직임에 의하여 상기 3차원 그래픽 화면상에 하위 메뉴를 가지고 있는 항목의 선택을 해제하면, 3차원 그래픽 화면상에서 하위 메뉴가 사라지고 상위 메뉴가 나타나는 기능을 컴퓨터에 의하여 실현시키기 위한 프로그램을 기록함을 특징으로 한다. And (c) if, by the reverse movement of the movement of the three-dimensional user input device to select an item with a sub-menu, clear the item with a submenu on the three-dimensional graphics display, three-dimensional graphic display a sub-menu disappears on the features describe the recording a program for realizing by computer the function of the top menu.

이하에서 첨부된 도면을 참조하여 본 발명의 구성 및 동작의 바람직한 실시예를 상세히 설명한다. Reference is made to the accompanying drawings below with a preferred embodiment of the structure and operation of the present invention will be described in detail.

도 2는 본 발명의 실시예에서 사용될 수 있는 3차원 사용자 입력 장치의 일 실시예 및 그 입력 처리 과정을 블록으로 도시한 것이다. Figure 2 illustrates the embodiment and the input process of a three-dimensional user input device that may be used in embodiments of the invention as a block.

도 2에 도시한 바와 같이, 본 발명의 실시예에서 사용될 수 있는 따른 3차원 사용자 입력 장치의 일 실시예(이하, 입력 장치 실시예라 간단히 표현함)는 크게 사용자 입력부(200a)와 데이터 처리부(200b)로 분리되어 구현된다. One, one embodiment of a three-dimensional user input device of which can be used in the embodiment of the present invention (hereinafter, the input device performed Cordillera simply expressed) is larger user input (200a) and the data processing unit (200b) as shown in Figure 2, It is separated into the implementation. 사용자 입력부(200a)는 X, Y 및 Z 좌표 검출부(210, 220, 230), 데이터 전송부(260)와 선택적으로 포함될 수 있는 자세 검출부(240), A/D 변환기(250)를 포함하고, 데이터 처리부(200b)는 데이터 수신부(270), 좌표 계산부(280), 좌표 출력부(290)를 포함하며, 사용자 입력부(200a)와 데이터 처리부(200b)는 광케이블, 또는 유/무선 전송 매체 등의 연결 매체를 통하여 결합되어 동작한다. User input unit (200a) comprises an X, Y and Z-coordinate detection unit (210, 220, 230), the data transfer unit 260 and selectively position detector (240), A / D converter 250, which may be included in, the data processor (200b) is a data receiver 270, the coordinate calculation section 280, a coordinate, and output comprises a unit 290, a user input (200a) and the data processing section (200b) is a fiber-optic cable, or wire / wireless transmission medium, such as the operative connection is coupled through the medium.

입력 장치 실시예는 사용자가 손에 들 수 있는 공간상의 입력 장치를 공간 내에서 임의로 움직임으로써 발생하는 사용자의 3차원적인 입력을 검출하기 위한 3 개의 센서를 포함한다. Example input devices include a three sensors for the user to detect the three-dimensional input from the user generated by randomly moving the input device in space can be of the hand in space. 즉, X 축 방향의 사용자 입력 장치의 움직임을 감지 또는 검출하는 X 좌표 검출부(210) (이하, X-센서라고 간략히 표현함), X 축 방향과 평면상에서 수직을 이루는 Y 축 방향의 움직임을 검출하는 Y 좌표 검출부(220) (이하, Y-센서라고 간략히 표현함), X 축 방향과 Y 축 방향 각각과 공간상에서 수직을 이루는 Z 축 방향의 움직임을 검출하는 Z 좌표 검출부(230) (이하, Z-센서라고 간략히 표현함)를 포함한다. I.e., X-coordinate detecting unit 210 for sensing or detecting the motion of the user input device in the X-axis direction (as expressed briefly referred to, X- sensor), the X-axis direction and a plane for detecting the Y-axis direction perpendicular movement on Y coordinate detection section 220 (hereinafter, Y- expressed briefly as sensors), X-axis direction and the Y-axis direction Z-coordinate detection unit 230 for detecting the movement of the Z-axis direction perpendicular on each of the space (hereinafter, Z- a sensor that briefly expressed). 이 3개의 센서에 의하여 사용자 입력 장치의 공간상에서의 움직임은 X, Y 및 Z 축 방향의 각 좌표축에 대한 움직임으로 분리되어 감지 또는 검출된다. Movements in space of the three user input device by the sensor is separated into a motion for each of the coordinate axes X, Y and Z-axis direction is sensed or detected. 예를 들어, X-센서(210)는 사용자 입력 장치의 움직임 중에서 X 축 방향의 움직임만을 검출한다. For example, X- sensor 210 detects only the X axis direction of movement out of the motion of the user input device.

일반적으로 이러한 센서는 사용자 입력 장치의 절대 좌표를 직접 검출하는 대신, 단위 시간 동안의 사용자 입력 장치의 움직임을 검출하여, 이전 좌표와 검출된 움직임을 결합하여 새로운 좌표값을 결정한다. In general, such a sensor detects the place of the motion of the user input device for the unit time for detecting the absolute coordinates of the user input device directly determines the new coordinates by combining the detected motion as the previous coordinates. 입력 장치 실시예에서 이러한 움직임의 검출은 X, Y 및 Z-센서(210, 220, 230)에 의하여 수행되고, 검출된 움직임에 근거하여 새로운 좌표값을 결정하는 부분은 추후 기술될 좌표 계산부(280)에서 수행된다. Input portion is performed by the detection of this movement by the device embodiments are X, Y and Z- sensors (210, 220, 230), determining a new coordinate value based on the detected movement of the coordinate calculation section to be described later ( is carried out at 280).

입력 장치 실시예에서 사용될 수 있는 센서는 현재 시판되고 있는 어떠한 센서라도 가능하며, 향후 개발될 센서를 사용하는 것도 본 발명의 범위에 포함된다고 해석되어야 할 것이다. Sensors that may be used in the input device embodiments are possible, and any sensors on the market, also be used for the sensor to be further developed to be construed that the scope of the invention. 예를 들어, 초소형의 자이로스코프를 사용할 경우를 가정하면, 자이로스코프는 사용자 입력 장치의 움직임에 의해 발생하는 가속도를 측정하는 방식으로 사용자 입력 장치의 움직임을 감지 또는 검출한다. For example, assuming the case of using a gyroscope compact, gyroscopes, the movement of the user input device in such a manner as to measure an acceleration generated by the movement of the user input device to sense or detect.

위에서 설명한 X, Y 및 Z-센서(210, 220, 230)가 직접 디지탈 출력을 지원하면, 이들 센서에 의하여 검출된 값(즉, 사용자 입력 장치의 움직임)은 데이터 전송부(260)로 곧바로 전달된다. When the X, Y and Z- sensors described above (210, 220, 230) directly supports the digital output, the values ​​detected by these sensors (i.e., the motion of the user input device) is passed directly to the data transfer unit 260 do. 예를 들어, 현재 널리 사용되고 있는 2차원 사용자 입력 장치인 볼 마우스에 내장된 센서는 직접 디지탈 신호를 출력하므로, 입력 장치 실시예에서 이와 유사한 센서를 채용할 경우에는 아래에서 기술될 A/D 변환기(250)를 거칠 필요없이 직접 데이터 전송부(260)로 검출된 움직임을 전달할 수 있을 것이다. For example, A / D converter will be described below, if so embedded in the two-dimensional user input device is a mouse with a ball that is currently widely used sensor is directly output the digital signal, employing a similar sensor in the input device embodiment ( 250) will be able to pass the motion detected with a direct data transfer unit 260 without having to go through. 그러나, 센서에 의하여 검출된 움직임이 아날로그 형태로만 출력될 경우에는 입력 장치 실시예에서 선택적인 구성 요소로 포함되는 A/D 변환기(250)를 거친다. However, if the detected movement by the sensor to be output only in analog form is subjected to A / D converter 250 is included as an optional component in the input device embodiment. A/D 변환기(250)는 입력되는 아날로그 신호를 디지탈 신호로 변환하여 출력하는 일반적인 기기이며, A/D 변환기(250)를 통하여 변환된 디지탈 신호는 데이터 전송부(260)로 전달된다. A / D converter 250 is a common device that converts the inputted analog signal into a digital signal through the A / D converter 250 converts the digital signal is transmitted to the data transfer unit 260.

입력 장치 실시예에서는 이러한 A/D 변환기를 각 센서마다 둘 수도 있을 것이고, 하나의 A/D 변환기를 사용하여 순차적으로 각 축에 대한 변환을 수행할 수도 있을 것이다. An input device embodiment, these A / D converters will also be two for each sensor, using a single A / D converter it will also perform the transformation on each shaft in sequence. 또한, 본 발명이 속하는 기술 분야에서 숙련된 자는 A/D 변환기의 배치 및 사용 방식에서 경제적이고, 효율적으로 다양한 변형을 할 수 있을 것이다. Further, in the layout, and economical usage of those skilled in the art A / D converter, it will be able to make various modifications to efficiently.

데이터 전송부(260)는 각 센서에 의하여 검출된 움직임을 데이터 처리 장치(200b)로 전송하는 역할을 수행한다. Data transfer unit 260 is responsible for transmitting the detected movement by the sensor to the data processing unit (200b). 일반적으로 사용자 입력부(200a)와 데이터 처리부는 상호 분리되어 구현되며, 시리얼 케이블(serial cable) 또는 광케이블(optical fiber) 등의 유선 매체나, 대기를 통하여 직접적으로 전달되는 무선 매체 등의 전송 매체를 통하여 연결된다. In general, a user input unit (200a) and the data processing unit via a transmission medium such as a cross is being implemented separate, serial cable (serial cable) or optical cable (optical fiber) such as a wired medium or a wireless medium to be passed directly through the air It is connected. 입력 장치 실시예에서는 사용자가 손에 들 수 있는 공간상의 입력 장치를 사용하므로 무선 매체를 이용하는 것이 바람직하나, 반드시 무선 매체를 사용하여야만 하는 것은 아니다. An input device embodiment, one user uses the input device on the space that is in the hands preferable to use the wireless medium, it is not necessarily that must use the wireless medium. 또한, 본 발명이 속하는 기술 분야에서 숙련된 자는 데이터를 전송하기 위한 데이터 포맷을 특정 형태로 구성할 수 있을 것이며, 성능 또는 기타 인자를 고려하여 데이터 포맷을 다양하게 변형시킬 수도 있을 것이다. In addition, those skilled in the art will be able to configure the data format for transmitting data to a specific form, it will in consideration of the performance or other factors may make various modifications to the data format.

이상에서 설명한 사용자 입력부(200a)는 그 자체로 하나의 입력 장치를 구성할 수 있을 뿐만 아니라, 이하에서 설명되는 데이터 처리부(200b)와 결합하여 전체적인 입력 장치를 구성할 수도 있다. User input unit (200a) described above may be configured to input the whole apparatus can be achieved which is capable to form a single input device, in combination with a data processing unit (200b) to be described below as such.

데이터 처리부(200b)에 위치한 데이터 수신부(270)는 사용자 입력부(200a)의 데이터 전송부(260)에서 전송된 데이터를 수신하여, 좌표 계산 계산부(280)로 전달한다. Data receiver 270 is located in the data processing unit (200b) is configured to receive the data transmitted from the data transmission unit 260, a user input unit (200a), and delivered to the calculation coordinate calculation unit 280. 데이터 수신부(270)는 수신한 데이터를 그대로 좌표 계산부(280)에 전달할 수도 있을 것이고, 좌표 계산부(280)에서의 효율적인 처리를 위하여 수신 데이터에 대한 약간의 작업을 수행한 후에 좌표 계산부(280)로 전달할 수도 있을 것이다. Data receiver 270 will be also forward the received data to the same coordinate calculation unit 280, after performing some operations on the received data so as to facilitate efficient processing of the coordinate calculation unit 280, the coordinate calculation section ( 280) will also pass.

데이터 수신부(270)에서 수신되어 좌표 계산부(280)로 전달된 데이터는 결국 사용자 입력부(200a)의 X, Y 및 Z-센서(210, 220, 230)에서 검출된 사용자 입력 장치의 움직임(단위 시간당 움직임)에 해당하는 값이며, 좌표 계산부(280)는 이에 근거하여 실제 공간상의 사용자 입력 장치의 좌표값을 산출 또는 계산한다. Is received by the data receiver 270 are passed to the coordinate computing unit 280 includes a motion data (the unit of the user input device is detected in the X, Y and Z- sensors (210, 220, 230) after all of the user input unit (200a) is a value corresponding to the movement per hour), the coordinates calculating unit 280 calculates or computes the coordinates of the user input device on a real space on the basis of this. 즉, 이전 좌표값과 움직임에 해당하는 값을 결합하여 새로운 좌표값을 결정한다. That is, it determines the new coordinates by combining the values ​​corresponding to the previous coordinate value and the movement. 여기서, 초기 좌표값은 임의로 설정해도 무관하며, 각 좌표축의 좌표 원점이나 중간점 또는 지난번 사용시의 최종 위치 등으로 설정할 수 있다. Here, the initial coordinate value should also be set arbitrarily independent, it may be set as the coordinate origin and the intermediate point or an end position of the last use of the respective coordinate axes.

좌표 출력부(290)는 좌표 계산부(280)에서 계산된 좌표값을 출력하는 기능을 수행하며, 이러한 출력은 일반적으로 그래픽 화면 등을 통하여 사용자에게 적절한 공간적 인터페이스로 제공되며, 또한 사용자 입력 좌표값을 대기하고 있는 응용 프로그램에 전달될 수도 있을 것이고, 시스템에서의 추가적인 사용 또는 기타의 목적을 위하여 이용될 수도 있을 것이다. Coordinate output unit 290 performs a function of outputting the coordinate value calculated at the coordinate calculating unit 280, this output is normally through such a graphic display provided to the user the appropriate spatial interface, and the user inputs coordinate values there will be also be delivered to the application is waiting, it could be used for further use, or other objects of the system.

이제까지의 입력 장치 실시예에 대한 설명은 사용자 입력 장치 자체의 방향이 고정된 상태, 즉, 입력 장치 자체의 상하 좌우 및 전후가 고정되고 이에 따라 X, Y 및 Z 축 방향의 기준축도 항상 고정되어 있는 상태를 가정하고 있다. Description of the embodiments so far from the input device for example, is the orientation of the user input device itself, the fixed state, that is, the input device up, down, left, and right, and front and rear of its locked and thereby X, with the reference axis of the Y and Z-axis direction is always fixed it is assumed the state. 그러나, 사용자는 공간상에서 입력 장치 자체의 방향을 임의로 틀 수 있을 것이므로, 기준축에 대하여 기울어짐(tilt)이 발생할 수 있을 것이다. However, because the user can mold the orientation of the input device itself, optionally in space, it will result in inclined with respect to the reference axis of luggage (tilt). 즉, 사용자 입력 장치의 X 축 방향의 기준축이 공간상에서 임의로 변할 수 있고, 이에 따라 Y 축 및 Z 축 방향의 기준축이 연동하여 변화할 수 있다. That is, the X-axis direction of the reference axis of the user input device can vary arbitrarily in space, so that the reference axis of the Y-axis and Z-axis direction can be changed in association accordingly. 이 경우에는 X, Y 및 Z 축 센서(210, 220, 230)를 통하여 검출된 움직임에 근거하여 계산된 좌표값을 입력 장치 자체의 기울어짐, 즉 자세에 따라 보정하는 과정을 거쳐야 할 것이다. In this case there will need to go through the process of correction in accordance with the X, Y and Z-axis sensor (210, 220, 230) to the coordinate value calculated based on the detected movement of the input device through its inclination, that is, position. 이러한 입력 장치의 "자세"를 고려하여, 입력 장치 실시예에서는 자세 검출부(240)를 선택적 구성 요소로 포함할 수 있으며, 좌표 계산부(280)는 검출된 자세값을 사용하여 좌표값의 보정을 수행하는 추가적인 기능을 수행할 수 있다. In consideration of the "position" of such an input device, an input device embodiment may comprise a position detection unit 240 as an optional component, the coordinate calculation unit 280 uses the detected position value of the correction of the coordinate values to perform can perform additional functions. 이하에서 이에 대하여 기술한다. This will be described with respect below.

자세 검출부(240)는 사용자 입력 장치 자체의 X, Y 및 Z 축 방향의 기준축에 대한 공간상의 자세를 검출하는 기능을 수행한다. Posture detection unit 240 performs a function for detecting the position in space relative to a reference axis of a user input device of its own X, Y and Z-axis direction. 이러한 자세 검출부(240)는, 예를 들어, 나침반과 같이 전후 좌우(또는 동서남북) 방향을 감지하는 센서와 중력에 의한 상하 방향을 감지하는 센서를 포함하여 구성될 수 있으며, 공간상에서 사용자 입력 장치 자체의 기울어짐 또는 자세(이하, 자세라고 표현함)를 결정하기 위하여 필요한 정보, 예를 들어, X, Y 및 Z 축 방향의 기준축에 대한 각변위를 검출한다. The posture detection unit 240 is, for example, as shown in the compass can comprise a sensor for sensing the vertical direction by the sensor and the gravity to sense back and forth (or North, South, East, West) direction, the user input on the space the device itself the information necessary to determine the inclination or orientation (as expressed as below, position), for example, detects the angular displacement relative to the reference axis of the X, Y and Z-axis direction. 자세 검출부(240)는 사용자 입력 장치의 "자세를 계산하기 위하여 필요한 정보"를 검출하는 기능을 수행할 수 있도록 다양한 방법으로 구현될 수 있으며, 본 발명은 앞의 예에서 설명한 방법에 한정된 것은 아니다. Posture detection unit 240 may be implemented in a variety of ways to perform the function of detecting a user input device "necessary information to calculate the position", the present invention is not limited to the method described in the previous example.

만약, 자세 검출부(240)가 직접 디지탈 출력을 지원하면, 자세 검출부(240)에 의하여 검출된 자세값은 데이터 전송부(260)로 직접 전달될 것이다. If, when the position detection unit 240 is directly supported by the digital output, detected by the position detection unit 240 position value it will be transmitted directly to the data transfer unit 260. 그러나 자세값이 아날로그 형태로만 출력될 경우에는 앞에서 설명된 A/D 변환기(250)를 통하여 디지탈 신호로 변환된 후에 데이터 전송부(260)로 전달된다. However, if the position value to be output only in analog form, the data is transmitted to the transmission unit 260 after the via the A / D converter 250 described above convert digital signals. 그러므로 앞에서 설명한 A/D 변환기(250)는 자세 검출부(240)가 선택적으로 포함될 경우에 사용자 입력 장치의 X, Y 및 Z 축 방향의 움직임 뿐만 아니라 자세값에 대한 A/D 변환도 아울러 수행할 수 있도록 구성된다. Therefore, A / D converter 250 described earlier is position detection unit 240 is A / D converted for selective user input X, Y and Z-axis direction of the device movement If included, as well as the position value can also be well carried out It is configured to allow.

또한, 데이터 전송부(260)는 X, Y 및 Z 축 방향의 움직임 뿐만 아니라 자세값도 아울러 전송할 수 있도록 구성되며, 본 발명이 속하는 기술 분야에서 숙련된 자는 이를 위한 전송 데이터 포맷을 쉽게 구현할 수 있을 것이다. Further, the data transmission unit 260 is configured to also as well to transfer, as well as the X, Y and Z-axis direction movement position values, those skilled in the art can easily implement the transmission data format therefor will be. 그리고 데이터 수신부(270)는 자세값을 포함하는 데이터를 수신하여 좌표 계산부(280)로 전달한다. And the data receiver 270 receives the data including the position coordinate value is transmitted to the calculation unit 280. The

좌표 계산부(280)는 데이터 수신부(270)에서 수신되어 전달된 데이터에 포함되어 있는 X, Y 및 Z 축 방향의 움직임에 근거하여 실제 공간상의 입력 장치의 좌 표값을 산출 또는 계산할 뿐만 아니라, 자세 검출부(240)에서 검출된 자세값을 사용하여 X, Y 및 Z 좌표값의 보정을 아울러 수행한다. Coordinate calculation section 280 is not only based on the X, Y and Z-axis direction that is included in the data transmitted is received by the data reception unit 270, the motion calculation, or to calculate the left pyogap of the input devices on the actual space, positions using the position value detected by the detection unit 240 performs the correction of the X, Y and Z coordinates as well. 예를 들어 설명하면, 자세 검출부(240)를 통하여 검출된 3차원 공간상에서의 사용자 입력 장치의 X, Y 및 Z 축 방향의 기본축에 대한 기울어짐을 For example, when described, the inclination of the principal axes of the user input X, Y and Z-axis orientation of the device on a three-dimensional space detected by the position detection unit 240

Figure 111999009875098-pat00001
이라 하고, X, Y 및 Z 축 방향의 움직임에 근거하여 계산된 좌표값이 (PX, PY, PZ)라고 가정할 경우에, 보정된 좌표값 (X, Y, Z)는 변환함수 f( Is referred to, the coordinate value calculated based on the X, Y and Z-axis direction movement (PX, PY, PZ) on the assumption that the corrected coordinate values ​​(X, Y, Z) is a transform function f (
Figure 111999009875098-pat00002
)를 사용하여 다음과 같이 계산할 수 있다. To) use can be calculated as follows:

Figure 111999009875098-pat00003

여기서 변환함수는 If the transform function

Figure 111999009875098-pat00004
의 함수로 표현되었으며, 3차원 회전에 의한 좌표값을 얻기 위한 행렬 형태로 주어진다. It was expressed as a function, given in a matrix format for obtaining the coordinate values ​​of the three-dimensional rotation.

즉, 이러한 변환 함수를 통하여, 사용자 입력 장치의 자세와는 무관한 X, Y 및 Z 기준축(예를 들어, 지구 절대 좌표계)에 대한 사용자 입력 장치의 좌표를 구할 수 있다. That is, through this transformation function, posture and is independent of X, Y and Z axes based on the user input device (e.g., a global world coordinate system) can be determined the coordinates of the user input device for.

이상에서 입력 장치 실시예를 살펴보았으며, 이러한 본 발명의 실시예에서 사용될 수 있는 3차원 사용자 입력 장치는 사용자가 3차원 입력 공간상에서 임의의 방향으로 움직일 수 있고, 이러한 사용자의 3차원 공간상의 움직임을 검출하는 기능을 수행할 수 있는 범위내에서 다양한 형태로 변형될 수 있을 것이다. Was more than seen at the input device embodiments, such a three-dimensional user input device that may be used in embodiments of the invention the user can move in any direction in the three-dimensional input space, a motion on the three-dimensional space in such a user in the can perform the function of detecting it may be modified in various forms within the range. 예를 들어, 입력 장치 실시예에서의 좌표 계산부(280)는 사용자 입력부(200a)의 데이타 전송부(260)의 전단에서 구성될 수도 있을 것이다. For example, the coordinate calculation unit 280 of the source device embodiment it will be configured in the front end of the data transfer unit 260, a user input unit (200a).

이제까지 입력 장치 실시예를 설명하였으며, 계속해서 이러한 3차원 사용자 입력 장치를 사용한 3차원 화면상의 사용자 인터페이스에 대하여 기술한다. So far has been described an input device embodiment, continues to describe a user interface on a 3D display using such a three-dimensional user input device.

도 3은 본 발명의 일 실시예에 따른 3차원 사용자 입력 장치를 사용한 3차원 화면상의 사용자 인터페이스를 개략적으로 도시한 것이다. Figure 3 is a schematic illustration of a user interface on a 3D display using a three-dimensional user input device in accordance with one embodiment of the present invention.

도 3에 도시한 바와 같이, 입력 장치 실시예와 같은 3차원 사용자 입력 장치(200)를 화면상의 마우스 표시점(200p)을 참조하여 3차원 공간상에서 임의의 방향으로 움직여서 3차원 그래픽 화면상에 위치하는 3차원 오브젝트(300)를 "선택"하면, 그 오브젝트가 가지고 있는 최상위 메뉴(310)가 화면상에 표시된다. 3, the input device performed a three-dimensional user input device 200, the position on the three-dimensional graphics display by moving in any direction in three dimensional space with reference to a mouse mark (200p) on the screen, such as for example, When the three-dimensional object "select" 300, a top menu 310 in the object it has is displayed on the screen.

여기서 "선택"을 수행하는 방법은 3차원 사용자 입력 장치(200)를 3차원 공간상에서 임의의 방향으로 움직여서 마우스 표시점(200p)을 사용자가 원하는 위치, 예를 들어, 도 3의 3차원 오브젝트(300)에 위치시키고, 3차원 사용자 입력 장치(200) 상에 존재하는 특정 버튼을 클릭하는 방법이 일반적이다. Here, how to perform the "pick" is the three-dimensional user input device 200 for the user of the mouse display point (200p) by moving in any direction in the three-dimensional space the desired position, e.g., 3-D objects in the 3 ( how to position 300), click on a particular button present on the three-dimensional user input device 200 is common. 그러나, 이러한 "선택"을 수행하는 방법은 응용 분야에 따라, 단지 마우스 표시점(200p)의 포인팅 또는 더블클릭에 의하여 이루어질 수도 있다. But how to do this "choice" it may be made by just double clicking the mouse, or pointing mark (200p), depending on the application. 그리고 본 실시예에서는 3차원 사용자 입력 장치(200)를 사용하기 때문에 3차원 사용자 입력 장치(200) 자체로 3차원 오브젝트(300)를 누르거나 또는 미는 동작에 의하여 이루어질 수도 있을 것이다. And in this embodiment, it will be made by a three-dimensional user input device 200, press the 3-D object to itself (300), or pushing operation due to the use of a three-dimensional user input device 200. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 이러한 선택을 수행하는 구체적인 방법의 다양성을 이해할 수 있을 것이다. Those of ordinary skill in the art will appreciate the variety of specific ways to perform this selection.

이러한 선택에 의하여, 해당 오브젝트(300)가 메뉴 또는 계층적 메뉴를 가지고 있는 경우에는 일차적으로 최상위 메뉴(310)가 화면상에 표시되나, 해당 오브젝 트(300)가 메뉴를 포함하고 있지 않는 경우에는 해당 오브젝트(300)의 선택에 의하여 정의된 동작(operation)이 직접 수행된다. With this choice, when the object 300 is the case with the menu or the hierarchical menu, but primarily displayed on the top menu 310 screen, that the object 300 does not include a menu in the operation (operation) defined by the selection of the object 300 is directly performed.

여기서 계층적 메뉴는 메뉴의 특정 항목이 다시금 하위 메뉴를 가지고 있는 메뉴의 계층적 구조를 일컫는 말이다. The hierarchical menu is refers the hierarchical structure of menu in a particular item in the menu is again to have a sub-menu. 그리고 최상위 메뉴란 자신의 상위 메뉴가 존재하지 않는 메뉴를 말하고, 최하위 메뉴란 자신의 하위 메뉴를 가지고 있지 않는 메뉴를 말한다. And the top menu, the menu is to say that their top menu does not exist, the lowest menu refers to a menu that does not have its own sub-menu. 또한, 상위 메뉴란 메뉴의 적어도 하나의 항목이 다시금 하위 메뉴를 가지고 있는 메뉴를 말하며, 하위 메뉴란 자신의 상위 메뉴를 가지고 있는 메뉴를 말한다. Further, the upper menu are those that have a menu that has a submenu item is once again at least one of a menu, a submenu means the menu that has its own header.

계층적 메뉴를 가지고 있는 상태에서, 최상위 메뉴(310)의 적어도 하나의 항목은 하위 메뉴, 즉, 제 2 레벨 메뉴(320)를 가지고 있으며, 계속하여 제 2 레벨 메뉴의 특정 항목은 다시금 하위 메뉴, 즉, 제 3 레벨 메뉴(330)를 가지고 있을 수 있다. In a state that has a hierarchical menu, at least one item of the top menu 310 are sub menus, i.e., the second level has a menu 320, and continues to a specific item of the second level menu is again sub-menu, That is, it is possible to have a third level menu 330. 이러한 메뉴의 특정 항목과 하위 메뉴의 연결 관계는 도3에 개념적으로 도시되어 있다. Connection relations of the specified items and sub-menu in the menu, this is shown conceptually in FIG. 예를 들면, 최상위 레벨의 특정 최상위 메뉴(311)의 첫째 항목 및 둘째 항목(311a, 311b)은 제 2 레벨의 메뉴(321, 322)와 각각 연결되고, 그 각각의 메뉴의 각 항목들(321a, 321b, 322a, 322b)은 제 3레벨 메뉴(331, 332, 334, 335)와 연결되어 있다. For example, the first item and the second item of a particular top-level menu 311 of the top-level (311a, 311b) is connected to each of the menu (321, 322) of the second level, each entry in each of the menu (321a , 321b, 322a, 322b) is connected to the third level menu (331, 332, 334, 335). 현재 마우스 표시점(200p)은 최상위 레벨 메뉴(311)에서 두번째 항목(311b)을 선택하고, 제 2 레벨 메뉴(322)에서 두번째 항목(322b)을 선택하여 화면상에 표시된 제 3 레벨 메뉴(335)의 두번째 항목(335b)에 위치하고 있다. Current mouse mark (200p) is to select from selecting a second field (311b) at the top level menu 311, and the second-level menu 322. The second field (322b), a third level menu (335 displayed on the screen ) it is located on the second item (335b).

본 실시예에서는 3차원 사용자 입력 장치(200)를 사용하기 때문에, "상위 메뉴에서 특정 항목을 선택"하는 행위는 "3차원 사용자 입력 장치(200)의 움직임"에 의하여 이루어질 수 있다. In this embodiment, due to the use of a three-dimensional user input device 200, "to select a particular item from the previous menu" actions may be performed by a "movement of the three-dimensional user input device 200". 예를 들어, 상위 메뉴 상태에서 하위 메뉴를 가지고 있는 특정 항목을 미는 방향의 사용자 입력 장치(200)의 움직임에 의하여 해당 항목이 선택되어, 해당 항목이 가지고 있는 하위 메뉴가 화면상에 표시될 수 있다. For example, it is to have a sub-menu, the item selected by the movement of the user input device 200 of the pusher for a specific item orientation in the top menu state, the sub-menu that the item has to be displayed on the screen .

하위 메뉴가 3차원 그래픽 화면상에 표시되는 방법은 상위 메뉴위에 중첩되어 표시될 수도 있을 것이고, 상위 메뉴를 화면상에서 지우고(clear) 하위 메뉴만 표시되게 할 수도 있을 것이다. Method is a sub-menu that is displayed on the three-dimensional graphics display will be also used to display only will be also be displayed superimposed on the top menu, clear the upper menu on a screen (clear) submenu. 만약, 3차원 입력 장치(200)로 메뉴 항목을 미는 방향의 움직임과 상위 메뉴를 clear하는 방식을 채용하면, 이 방식은 3차원 입력 장치(200)로 메뉴 항목을 밀면 (메뉴 항목이 열리면서) 하위 메뉴가 화면상에 나타나는 구현 형태가 될 것이다. If, by employing the three-dimensional input device how clear the movement and the upper menu of pushing the menu item (200) direction, this method is a three-dimensional input device by sliding a menu item (200) (opens the menu items) lower the menu will be the implementation form on-screen. 이는 인간의 3차원 공간 개념과 일치하는 방식이다. This is a manner consistent with the human three-dimensional space concept.

상위 메뉴에서 특정 항목을 선택하는 "3차원 입력 장치(200)"의 움직임은 하위 메뉴가 최하위 메뉴가 아니라면 최종 메뉴 항목을 선택할 때까지 반복할 수 있고, 특정 하위 메뉴 상태에서 상위 메뉴로 이동하기 위해서는 "선택"의 역방향으로 3차원 입력 장치(200)"를 움직이면 될 것이다. 즉, 3차원 입력 장치(200)를 앞으로 내밀면 점점 하위 메뉴가 나타나고, 3차원 입력 장치(200)를 뒤로 빼면 상위 메뉴로 이동할 수 있다. A "three-dimensional input device 200" to select a particular item from the previous menu movement is not a sub-menu is the lowest menu can be repeated until a selected end-menu item, to move to a higher menu in the specific sub-menu state will "select" reverse to move the three-dimensional input device 200 ', that is, the three-dimensional input device appears more submenu forward naemilmyeon to 200, except for the three-dimensional input device 200 back to the previous menu you can move.

이상에서, 3차원 사용자 입력 장치를 사용한 3차원 그래픽 화면상에서의 인터페이스에 대하여 개념적으로 살펴보았으며, 계속해서 도 4를 참조하여 그 구체적인 인터페이스 방법을 설명한다. Above, it was looked at in concept with respect to the interface of the three-dimensional graphic display with three-dimensional user input device, to continue with reference to Figure 4 will be described the specific interface method.

도 4는 도 3에서 도시한 3차원 사용자 입력 장치를 사용한 3차원 화면상의 사용자 인터페이스 방법에 대한 흐름도이다. Figure 4 is a flow diagram of the user interface method on the three-dimensional display using a three-dimensional user input device shown in Fig.

사용자는 3차원 사용자 입력 장치를 사용하여 3차원 그래픽 화면상에 존재하는 특정 오브젝트를 선택한다(단계 400). The user selects a specific object existing in the three-dimensional graphical representation using the three-dimensional user input device (step 400). 이러한 "선택"은 도 3에서 설명한 바와 같이 다양한 방식으로 수행될 수 있다. The "selection" can be performed in a variety of ways as described in Fig.

3차원 그래픽 화면상의 특정 오브젝트가 선택되면, 해당 오브젝트가 가지고 있는 최상위 메뉴가 화면상에 표시된다(단계 410). When the three-dimensional graphical display a specific object is selected on, the top menu that is the object has is displayed on the screen (step 410). 물론 해당 오브젝트가 메뉴를 가지고 있지 않으면, 해당 오브젝트에 정의된 동작(operation)이 직접 수행될 것이다(미도시). Of course, if it is not the object has a menu, a motion (operation) defined in the object will be carried out directly (not shown). 이하에서는 3차원 오브젝트가 최상위 메뉴를 가지고 있는 경우를 중심으로 설명한다. Hereinafter, a description is made of a case where the three-dimensional object having a top menu.

사용자는 3차원 사용자 입력 장치를 사용하여 화면상에 표시된 메뉴에서 특정 항목을 선택한다(단계 420). The user selects a particular item from a menu displayed on the screen using the three-dimensional user input device (step 420). 이러한 "선택"도 도 3에서 설명한 다양한 방식, 예를 들어, 3차원 입력 장치로 특정 메뉴 항목을 미는 방향의 움직임에 의하여 수행될 수 있다. The "select" it can also be carried out by the pushing certain menu items forward motion in a number of ways, for example, a three-dimensional input device described in FIG.

선택된 메뉴 항목이 최하위 메뉴 항목, 즉, 자신의 하위 메뉴를 포함하고 있는지의 여부를 판단하여(단계 430), 최하위 메뉴 항목이 아니면 3차원 그래픽 화면상에서 상위 메뉴를 지우고 해당 메뉴 항목에 연결된 하위 메뉴를 표시한다(단계 440). The selected menu item, the lowest menu item, that is, it is determined whether or not include its own sub-menu (step 430), the lowest menu item, or to clear the top menu in the three-dimensional graphic displays the sub-menu associated with the menu item It is displayed (step 440). 응용 분야에 따라서는 상위 메뉴와 하위 메뉴를 중첩시킬 수도 있으며, 이러한 상위 메뉴와 하위 메뉴를 표시하는 다양한 방법을 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 이해할 수 있을 것이다. Therefore, on the application it will be understood one of ordinary skill in the art to which this invention pertains that the various methods may be nested within a top menu and sub-menu, the display of these upper menu and submenu. 만약, 단계 430에서 최하위 메뉴 항목으로 판단되면, 해당 항목에 정의된 동작을 수행하는 모드인지의 여부를 판단하여(단계 480), 해당 항목에 정의된 동작을 직접 수행하든지(단계 490), 단계 470으로 진행하여 다시금 사용자 입력 대기 상태가 된다. If it is determined in step 430 to the lowest menu item, it is determined whether or not to perform the actions defined in the entry mode (step 480), either directly perform the operation defined in the item (step 490), step 470 proceeding to become again a user input standby state.

계층적인 메뉴 구조에서는, 하위 메뉴 상태에서 사용자가 계속하여 메뉴 항목을 선택함으로써 더욱 하위 메뉴로 진행할 수도 있고, 현재의 하위 메뉴 선택 상태를 해제하고 상위 메뉴로 복귀할 수도 있다. In a hierarchical menu structure by the user continues to select a menu item from the submenu status may proceed to further sub-menus, may be turned off the current sub-menu of the selected state and return to a higher menu. 그러므로 3차원 사용자 입력 장치의 움직임이 메뉴 항목의 선택인지, 해제인지의 여부를 판단할 필요가 있다(단계 450). Therefore, whether the three-dimensional movement of the user input device, selection of a menu item, it is necessary to determine whether the release (step 450). 만약, 선택의 경우이면 해당 항목이 최하위 메뉴 항목인지의 여부에 따라(단계 430), 더욱 하위 메뉴로 진행하거나, 해당 항목에 정의된 동작을 수행하고, 해제의 경우에는 현재 화면상에 표시된 하위 메뉴를 지우고, 상위 메뉴를 표시하게 된다(단계 460). If, in the case of choice of the item according to whether or not the lowest menu item (step 430), further proceeding to the submenu or to perform the operation defined in the entry, and release is displayed on the current screen submenu It is the erase, to display the upper menu (step 460).

단계 450에서 선택된 메뉴 항목의 해제 또는 단계 480에서 동작 모드가 아니라고 판단이 난 경우에는 현재의 메뉴 상태가 최상위 메뉴 상태인지의 여부를 판단할 필요가 있다(단계 470). If it is determined not to be off or mode of operation in step 480 of the selected menu item at step 450 I, it is necessary that the current menu state to determine whether the top menu (step 470). 왜냐하면, 최상위 메뉴 상태에서는 상위 메뉴가 존재하지 않으므로(메뉴 항목이 선택된 상태가 아니므로) 사용자가 해제의 동작을 할 수가 없기 때문이다. Because (as a menu item is not selected), the top menu state, because there is no top menu, because a user can not be the action of releasing. 물론, 최상위 메뉴 상태에서 최상위 메뉴 상태를 해제하면, 해당 오브젝트의 선택전의 초기 상태로 복귀하게 되며, 이는 해당 흐름의 종료를 의미한다(미도시). Of course, if you turn off the top menu, top menu, the state in state, and returns to its initial state before the selection of the object, which means the end of the flow (not shown).

단계 470에서 최상위 메뉴 상태이면 단계 420으로 진행하여 "선택" 대기 모드가 되고, 그렇지 않으면 단계 450으로 진행하여 "선택 또는 해제" 대기 모드가 되며, 이러한 과정을 반복하여 최종적으로 최하위 메뉴 항목을 선택하면 해당 모드에 정의된 동작이 수행된다(단계 490). When the process proceeds to back top menu state step 420, and the "select" standby mode, otherwise it proceeds to step 450 and a "select on or off" standby mode, by repeating this process, finally, select the lowest menu item in step 470 the operation defined in the corresponding mode is performed (step 490).

이상에서 본 실시예에 대한 설명은 3차원 그래픽 공간상의 특정 오브젝트를 3차원 사용자 입력 장치로 선택하면 최상위 메뉴가 화면상에 표시된다는 개념에 기초하고 있으나, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 3차원 그래픽 공간상의 특정 오브젝트 자체가 메뉴 오브젝트일 수 있으며, 이 경우에는 화면상의 메뉴 오브젝트 자체를 최상위 메뉴로 간주하고, 곧바로 하위 메뉴의 선택 단계로 진행하는 구현 방식도 쉽게 생각할 수 있을 것이다. Description of the embodiment above is by selecting a specific object on the three-dimensional graphical space as a three-dimensional user input device, but is based on the concept that the top menu is displayed on the screen, of ordinary skill in the art the specific object itself on the three-dimensional graphics space can be a menu object he has, and in this case considered the menu, the object itself on the screen to the top menu, and will be easily conceivable implementation to immediately proceed to the selection phase of the sub-menu. 계속되는 본 발명의 다른 실시예에서도 오브젝트 자체를 최상위 메뉴로 간주하는 구현 방식은 동일하게 적용될 수 있을 것이다. Subsequent implementation of the object itself considered in other embodiments of the invention as a top-level menu, it will be equally applicable.

이제까지 설명한 본 발명의 실시예는 사용자가 손에 들 수 있는 공간상의 입력 장치를 공간 내에서 임의로 움직임으로써 발생하는 사용자의 3차원적인 입력을 가정하고 있다. Practice of the invention so far described example the user has assumed a three-dimensional input from the user generated by the input device, optionally on the space that is in the hands move in the space. 그러나, 기존 시스템을 활용하기 위하여 공간상의 입력 장치가 아닌 기존의 마우스 등의 2차원적인 입력 장치로 상하, 좌우의 움직임을 제어하고, 마우스에 전후의 움직임을 제어하는 특정 버튼을 추가한 변형된 3차원 입력 장치를 사용한 실시예도 가능하다. However, the control of vertical and horizontal motion to the two-dimensional input device such as a conventional mouse, not the input device in space in order to take advantage of the existing system, a more specific buttons for controlling the forward and backward movement on the mouse strain 3 it is possible with the exemplary dimensional input device. 계속해서 도 5를 참조하여, 이 변형된 실시예에서의 구체적인 인터페이스 방법을 도 4에서 설명한 실시예와의 차이점을 중심으로 기술한다. With continuing reference to FIG. 5, it will be described with the focus on the differences from the embodiment described a specific interface method in a modified embodiment in Fig.

도 5는 변형된 3차원 사용자 입력 장치를 사용한 본 발명의 다른 실시예에 따른 3차원 사용자 입력 장치를 사용한 3차원 화면상의 사용자 인터페이스 방법에 대한 흐름도이다. Figure 5 is a flow diagram of the user interface method on the three-dimensional display using a three-dimensional user input device in accordance with another embodiment of the present using the modified three-dimensional user input device invention;

본 실시예에서 사용되는 변형된 3차원 사용자 입력 장치는 기존의 마우스로 상하, 좌우의 2차원적인 움직임을 제어하고, 마우스가 제어하는 평면과 공간상에서 수직을 이루는(이하, Z축이라 참조함) 움직임을 제어하는 두개의 버튼(이하, UP/DOWN 버튼이라 참조함)을 별도로 추가하여 구성된 것이다. A modified three-dimensional user input device that is used in this embodiment (also refer to hereinafter, Z-axis) vertical to the conventional mouse, a control two-dimensional movement of the left and right, and the mouse is perpendicular on a control plane and a space (hereinafter, refer to as UP / DOWN button), the two buttons for controlling the movement is configured to add separately. 사용자는 이러한 변형된 3차원 사용자 입력장치를 사용하여 3차원 그래픽 화면상에 존재하는 특정 오브젝트를 선택한다(단계 500). The user selects a specific object existing in the three-dimensional graphical representation using such a modified three-dimensional user input device (step 500). 여기서 "선택"은 도 3에서 설명한 바와 유사하게, 마우스 표지점의 포인팅, 클릭, 더블클릭 등의 방식이나, Z 축의 움직임을 제어하는 UP/DOWN 버튼을 사용하는 방식도 가능할 것이다. The "select" will also be the way that the UP / DOWN button for controlling the method and, Z-axis movement, such as similarly described in the three, pointing a mouse, click on the marker point, double-click.

다음으로, 최상위 메뉴의 화면 표시 단계(단계 510)는 도 4의 단계 410과 동일하며, 본 변형된 실시예에서 메뉴 항목의 선택은 Z축 움직임을 제어하기 위하여 추가된 DOWN 버튼을 누름에 의하여 간단히 이루어진다(단계 520). Next, the screen display step of the top-level menu (step 510) are the same as step 410 in Figure 4, selection of a menu item in the present modified embodiment, by the added DOWN button for controlling the Z-axis movement to press simply It is made (step 520). 여기서 DOWN 버튼과 UP 버튼은 상호 역방향의 Z 축 움직임을 제어하는 기능을 수행하며, 버튼의 명칭은 임의적인 것이다. The DOWN and UP button button performs a function of controlling the mutual reverse Z-axis motion, the name of the button is arbitrary. 그리고 단계 550에서의 3차원 사용자 입력 장치의 움직임이 메뉴 항목의 선택인지, 해제인지의 여부를 DOWN 또는 UP 키를 눌렀는지의 여부로 간단히 판단한다. And that the three-dimensional movement of the user input device at step 550 selection of a menu item, a brief determined whether or not the release to whether or not the pressed the DOWN or UP key. 그외의 동작 및 설명되지 않은 본 변형된 실시예에서의 각 단계들은 도 4의 실시예에서와 같다. Each of the steps in the present embodiment are not described, and other operations of the modification shown in the embodiment of Figure 4.

이제까지 본 발명의 일 실시예와 이의 변형된 실시예를 살펴보았으며, 계속해서 본 발명의 또다른 실시예를 기술한다. Ever it saw at the one embodiment and the modified embodiments thereof of the present invention, continue to be described yet another embodiment of the invention.

도 6은 본 발명의 또다른 실시예에 따른 3차원 사용자 입력 장치를 사용한 3차원 화면상의 사용자 인터페이스를 개략적으로 도시한 것이다. Figure 6 is a schematic illustration of a user interface on a 3D display using a three-dimensional user input device according to still another embodiment of the present invention.

사용자가 3차원 사용자 입력 장치(200)를 화면상의 마우스 표시점(200p)을 참조하여 3차원 공간상에서 임의의 방향으로 움직여서 3차원 그래픽 화면상에 위치하는 3차원 오브젝트(600)를 선택하면, 그 오브젝트가 가지고 있는 최상위 메뉴(610)가 화면상에 표시된다. When the user selects a three-dimensional object 600, which is located on the three-dimensional graphics display by moving in any direction in the three-dimensional space, a three-dimensional user input device 200, with reference to the mouse display point (200p) on the screen, and the top menu 610 is displayed on the screen that the object does have. 여기서 선택을 수행하는 방법은 도 3에서 기술한 바와 같이 다양한 방식으로 수행될 수 있다. The method for performing the selection may be performed in a variety of ways as described in Fig.

최상위 메뉴(610)가 표시된 상태에서 사용자는 하위 메뉴를 가지고 있는 특정 메뉴 항목(613)을 선택하게 되며, 본 실시예에서 이러한 "선택"은 3차원 입력 장치의 움직임에 의하여 이루어진다. From the top menu 610 is displayed, the user is to select a particular menu item 613 that has a submenu, such a "select" in this embodiment is made by a movement of the three-dimensional input device. 구체적인 예를 들면, 화일 서랍을 잡아 당기는 것과 같이 해당 메뉴 항목을 잡고, 이를 당기는 방식이 가능할 것이다. As a specific example, holding the menu item, such as pulling a file drawer, it will be a way to draw them. 물론, 사용자가 화일 서랍을 메뉴 항목에 수직 방향으로만 잡아 당길 필요는 없으며, 임의의 방향으로 메뉴 항목을 잡아 당길 수 있다. Of course, there is no need for the user to pull a file drawer only in the vertical direction in the menu item, you can pull a menu item in any direction.

그러면, 도 6에 도시된 바와 같이, 제 2 레벨 메뉴(620)가 사용자 입력 장치(200)가 "움직인 방향"으로 표시된다. Then, as shown in Figure 6, the second level menu 620 is displayed to the user input device 200, the "moving direction".

그리고 제 2 레벨 메뉴(620)가 표시된 상태에서 하위 메뉴를 가지고 있는 특정 메뉴 항목(621)을 선택하면, 예를 들어 해당 항목(621)을 잡고 당기면, 제 3 헤벨 메뉴(630)가 사용자 입력 장치가 움직인 방향으로 표시된다. And when the second level menu 620 to select a particular menu item 621 that has a submenu is displayed, for example Pulling the item 621, the three Heber menu 630, a user input device It appears to be moving in a direction. 이는 3차원 공간에서 화일 서랍을 열고, 그 서랍에서 특정 화일을 잡아 올리는 형태의 움직임과 유사한 방식이다. This opens a file drawer in a three-dimensional manner, a manner similar to the form of a raising movement to hold the predetermined file from the drawer. 물론 이러한 움직임이 반드시 메뉴 항목에 수직 방향일 필요가 없음은 이미 언급한 바와 같다. Of course, these movements are not necessarily have to be perpendicular to the menu items are the same as those already mentioned. 계속해서 현재의 마우스 표시점(200p)이 위치한 제 3 레벨 메뉴의 특정 항목(631)에서 위와 같은 행위가 반복될 수 있을 것이다. It will continue to be above such behavior to be repeated in a particular item (631) of the third-level menu that displays the current mouse (200p) is located. 이러한 상위 메뉴에서 특정 항목을 선택하는 작업은 최하위 메뉴에서 원하는 항목을 선택 할 때까지 반복할 수 있고, 특정 하위 메뉴 상태에서 상위 메뉴로의 복귀는 "선택"의 역방향으로 3차원 사용자 입력 장치(200)를 움직이면 된다. Operations for selecting a specific item in this upper menu may be repeated until the selection from the lowermost menu, the return to a higher menu in the specific sub-menu states is in a direction opposite to the "Select" three-dimensional user input device (200 ) it is moved to.

이상에서, 본발명의 또다른 실시에에 따른 3차원 사용자 입력 장치를 사용한 3차원 그래픽 화면상에서의 인터페이스에 대하여 개념적으로 살펴보았으며, 계속해서 도 7을 참조하여 그 구체적인 인터페이스 방법을 도 4에서 설명한 실시예와의 차이점을 중심으로 기술한다. Above, it was looked at in concept with respect to the interface of the three-dimensional graphic display with three-dimensional user input device according to yet to another aspect of the invention, and subsequently with reference to Figure 7 described in Fig. 4 for the specific interface method It will be described with the focus on the differences from the embodiment.

도 7은 도 6에서 도시한 3차원 사용자 입력 장치를 사용한 3차원 화면상의 사용자 인터페이스 방법에 대한 흐름도이다. 7 is a flow diagram of the user interface method on the three-dimensional display using a three-dimensional user input device shown in Fig.

사용자 3차원 사용자 입력 장치에 의하여 해당 오브젝트를 선택하고, 해당 오브젝트의 최상위 메뉴가 화면상에 표시되는 단계(단계 700, 단계 710)는 도 4의 실시예와 같다. Select that object by a user, the three-dimensional user input device, and the step is the top menu of the object displayed on the screen (step 700, step 710) is equal to the embodiment of FIG.

다음으로, 사용자는 3차원 사용자 입력 장치의 움직임, 예를 들어, 메뉴 항목을 잡아 당기는 동작에 의하여 메뉴의 특정 항목을 선택하면(단계 720), 해당 메뉴 항목이 최하위 메뉴가 아닐 경우, 사용자 입력 장치가 움직인 방향으로 하위 메뉴가 표시된다(단계 730, 단계 740). Next, the user can set by the operation of pulling the movement, for example, a menu item of a three-dimensional user input device selecting a specific item in the menu (step 720), if the menu item is not the lowest menu, a user input device to move a sub-menu is displayed in a direction (step 730, step 740).

다음으로, 3차원 사용자 입력 장치의 움직임이 메뉴 항목의 해제이면, 즉, 선택 방향과 역방향의 움직임이면, 하위 메뉴를 화면상에서 지운다. Next, when the movement of the three-dimensional user input device off of a menu item, that is, if the selected direction and a reverse movement, to clear the sub-menu on the screen. 본 실시예에서는 사용자 입력 장치가 움직인 방향으로 하위 메뉴를 상위 메뉴 위에 중첩하여 표시하므로 하위 메뉴를 지우면 상위 메뉴가 다시금 나타나게 된다. In this embodiment, if the user input device to clear the sub-menu so superposed to display a submenu on the top menu to move in the direction in which the upper menu is again displayed.

그외의 동작 및 설명되지 않은 본 실시예에서의 각 단계들은 도 4의 실시예 에서와 동일하다. Each step in the present embodiment are not described, and other operations of the example are the same as those in the embodiment of Figure 4.

이제까지 본 발명에 대하여 그 바람직한 실시예(들)를 중심으로 살펴보았다. Ever investigated mainly the preferred embodiment (s) with respect to the present invention. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. One of ordinary skill in the art will appreciate that the invention may be implemented without departing from the essential characteristics of the invention in a modified form. 그러므로 본 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. Therefore, the disclosed embodiments should be considered in a descriptive sense only and not for purposes of limitation. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다. The scope of the invention, not by the detailed description given in the appended claims, and all differences within the equivalent scope will be construed as being included in the present invention.

또한, 본 발명의 실시예들은 컴퓨터 시스템에서 실행할 수 있는 프로그램으로 작성가능하며, 이러한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체로부터 읽어들여 범용 디지털 컴퓨터 시스템에서 실행될 수 있다. In addition, embodiments of the present invention may be implemented in a general purpose digital computer system reads from the recording medium, and can be written as programs that can be run on a computer system, a computer-readable recording such a program. 이러한 기록 매체에는 마그네틱 저장 매체(예를 들면, 롬, 플로피디스크, 하드디스크 등), 광학적 판독 매체(예를 들면, 씨디롬, 디브이디 등) 및 캐리어 웨이브(예를 들면, 인터넷을 통한 전송)와 같은 매체가 포함된다. The recording medium, such as magnetic storage media (e.g., ROM, floppy disks, hard disks, etc.), optical recording media (e.g., CD-ROMs, DVDs, etc.) and carrier waves (e.g., transmission through the Internet) the medium is contained.

본 발명에 의하면, 사용자가 간단하게 조작할 수 있는 3차원 사용자 입력 장치를 사용한 3차원 그래픽 화면상의 인터페이스를 통하여 다양하고 복잡한 사용자 인터페이스를 쉽고 편리하게 수행할 수 있다. According to the present invention, the user can simply and easily and conveniently perform various complex user interfaces through a three-dimensional graphic interface on the screen with the three-dimensional user input device that can be operated. 특히, 계층적 메뉴를 가지고 있는 오브젝트를 인간의 공간 개념과 일치하는 방식으로 접근할 수 있으므로 효율적인 인터페이스 개발이 가능하다. In particular, since the objects have a hierarchical menu it can be accessed in a manner consistent with human space concept it is possible to develop an efficient interface.

Claims (20)

  1. 사용자 입력 장치를 사용한 그래픽 화면상의 사용자 인터페이스 방법에 있어서, In the user interface method on the graphic screen using a user input device,
    (a) 사용자가 3차원 공간상에서 임의의 방향으로 움직일 수 있는 3차원 사용자 입력 장치에 의하여 3차원 그래픽 화면상에 위치하는 계층적인 메뉴를 가지고 있는 오브젝트를 선택하는 단계; Comprising the steps of: (a) a user selects an object that has a hierarchical menu which is located on the three-dimensional graphical display by the three-dimensional user input device that can move in any direction in 3D space;
    (b) 상기 3차원 그래픽 화면상에 상기 오브젝트가 가지고 있는 최상위 메뉴를 표시하는 단계; (B) displaying the top menu, in which the object has on the three-dimensional graphic display;
    (c) 상기 3차원 사용자 입력 장치에 의하여 상기 메뉴의 항목들 중에서 하위 메뉴를 가지고 있는 항목을 선택하는 단계; (C) sending, by the three-dimensional user input device, select the item with a sub-menu from among the items of the menu; And
    (d) 상기 (c) 단계에서 하위 메뉴를 가지고 있는 항목이 선택되면, 3차원 그래픽 화면상에 하위 메뉴가 표시되는 단계를 포함함을 특징으로 하는 3차원 사용자 입력 장치를 사용한 3차원 그래픽 화면상의 사용자 인터페이스 방법. (D) the (c) when has a sub-menu item is selected in step, three-dimensional graphic on-screen 3D graphics using a three-dimensional user input device, characterized in that the sub-menu comprises a step in which a display screen on the how the user interface.
  2. 제 1항에 있어서, 상기 (c) 단계는, The method of claim 1, wherein the step (c),
    상기 하위 메뉴를 가지고 있는 항목을 상기 3차원 사용자 입력 장치로 미는 방향의 상기 3차원 사용자 입력 장치의 움직임에 의하여 상기 하위 메뉴를 가지고 있는 항목을 선택함을 특징으로 하는 3차원 사용자 입력 장치를 사용한 3차원 그래픽 화면상의 사용자 인터페이스 방법. 3 with a three-dimensional user input device, characterized by the select an item in an item with a sub-menu with the submenu by the movement of the three-dimensional user input device for pushing in the three-dimensional user input device, the direction Do The user interface method on two-dimensional graphics display.
  3. 제 1항에 있어서, 상기 (d) 단계는, The method of claim 1, wherein the step (d),
    상기 (c) 단계에서 하위 메뉴를 가지고 있는 항목이 선택되면, 3차원 그래픽 화면상에서 상위 메뉴는 사라지고, 하위 메뉴가 표시됨을 특징으로 하는 3차원 사용자 입력 장치를 사용한 3차원 그래픽 화면상의 사용자 인터페이스 방법. When the item with a sub-menu in the step (c) selection, 3D graphics to the upper menu will disappear on the screen, three-dimensional graphical user interface method on the screen with the three-dimensional user input device, characterized in that the sub-menu displayed.
  4. 제 1항에 있어서, 상기 (c) 및 (d) 단계는, The method of claim 1, wherein the (c) and (d) comprises,
    사용자가 원하는 최하위 메뉴 항목이 표시될 때까지 반복함을 특징으로 하는 3차원 사용자 입력 장치를 사용한 3차원 그래픽 화면상의 사용자 인터페이스 방법. 3D graphical user interface screen on the method repeats with a three-dimensional user input device, characterized in that until the user views the desired menu item, the lowest.
  5. 제 1항에 있어서, 상기 (d) 단계에서 하위 메뉴가 표시된 상태에서, The method of claim 1, wherein in a state in which the submenu is displayed in the step (d),
    (e) 상기 3차원 사용자 입력 장치에 의하여 상기 하위 메뉴를 가지고 있는 항목의 선택을 해제하면, 3차원 그래픽 화면상에서 하위 메뉴는 사라지고, 상위 메뉴가 표시되는 단계를 더 포함함을 특징으로 하는 3차원 사용자 입력 장치를 사용한 3차원 그래픽 화면상의 사용자 인터페이스 방법. (E) a three-dimensional, characterized by further comprising the step that if, by the three-dimensional user input device, clear the entry that has the sub-menu, a sub menu will disappear and the three-dimensional graphic display, displays the top menu 3D user interface method on the graphic screen using the user input device.
  6. 제 5항에 있어서, 6. The method of claim 5,
    상기 (c) 단계는 상기 하위 메뉴를 가지고 있는 항목을 상기 3차원 사용자 입력 장치로 미는 방향의 상기 3차원 사용자 입력 장치의 움직임에 의하여 상기 하위 메뉴를 가지고 있는 항목을 선택하고, Wherein the step (c) and selecting an item by which an item that has the sub-menu the movement of the three-dimensional user input device for pushing in the three-dimensional user input device direction with the sub-menu,
    상기 (e) 단계는 상기 하위 메뉴를 가지고 있는 항목을 선택하는 상기 3차원 사용자 입력 장치의 움직임의 역방향의 움직임에 의하여 상기 하위 메뉴를 가지고 있는 항목의 선택을 해제함을 특징으로 하는 3차원 사용자 입력 장치를 사용한 3차원 그래픽 화면상의 사용자 인터페이스 방법. The step (e) is a three-dimensional user input, characterized in that the deselect the item which has the sub-menu by the backward motion of the motion of the three-dimensional user input device to select an item that has a submenu 3D user interface method on the graphic screen using the apparatus.
  7. 제 5항에 있어서, 6. The method of claim 5,
    상기 (c) 및 (d) 단계는 사용자가 원하는 최하위 메뉴 항목이 표시될 때까지 반복하고, The (c) and (d) repeating steps and until the lowermost menu item the user wants,
    상기 (e) 단계는 임의의 하위 메뉴에서 반복될 수 있음을 특징으로 하는 3차원 사용자 입력 장치를 사용한 3차원 그래픽 화면상의 사용자 인터페이스 방법. The step (e) is a three-dimensional user interface method on the graphic screen using a three-dimensional user input device, it characterized in that it can be repeated in any sub-menus.
  8. 사용자 입력 장치를 사용한 그래픽 화면상의 사용자 인터페이스 방법에 있어서, In the user interface method on the graphic screen using a user input device,
    (a) 사용자가 3차원 공간상에서 임의의 방향으로 움직일 수 있는 3차원 사용자 입력 장치에 의하여 3차원 그래픽 화면상에 위치하는 계층적인 메뉴를 가지고 있는 오브젝트를 선택하는 단계; Comprising the steps of: (a) a user selects an object that has a hierarchical menu which is located on the three-dimensional graphical display by the three-dimensional user input device that can move in any direction in 3D space;
    (b) 상기 3차원 그래픽 화면상에 상기 오브젝트가 가지고 있는 최상위 메뉴를 표시하는 단계; (B) displaying the top menu, in which the object has on the three-dimensional graphic display;
    (c) 상기 3차원 사용자 입력 장치의 움직임에 의하여 상기 메뉴의 항목들 중에서 하위 메뉴를 가지고 있는 항목을 선택하는 단계; (C) sending, by the movement of the three-dimensional user input device, select the item with a sub-menu from among the items of the menu; And
    (d) 상기 (c) 단계에서 선택된 항목이 가지고 있는 하위 메뉴가 상기 3차원 사용자 입력 장치가 움직인 방향으로 표시되는 단계를 포함함을 특징으로 하는 3차원 사용자 입력 장치를 사용한 3차원 그래픽 화면상의 사용자 인터페이스 방법. (D) the (c) on the three-dimensional graphic display with three-dimensional user input device, characterized in that the sub-menu with the selected item has a step that the three-dimensional user input device represented by the moving direction in step how the user interface.
  9. 제 8항에 있어서, 상기 (c) 단계는, 10. The method of claim 8, wherein the step (c),
    상기 하위 메뉴를 가지고 있는 항목을 상기 3차원 사용자 입력 장치로 잡아 당기는 방향의 상기 3차원 사용자 입력 장치의 움직임에 의하여 상기 하위 메뉴를 가지고 있는 항목을 선택함을 특징으로 하는 3차원 사용자 입력 장치를 사용한 3차원 그래픽 화면상의 사용자 인터페이스 방법. By an item which has the sub-menu the movement of the three-dimensional user input device in the direction of pulling in the three-dimensional user input device using a three-dimensional user input device, characterized in that the selected items with the submenu The user interface method on the three-dimensional graphic display.
  10. 제 9항에 있어서, 상기 (c) 단계는, 10. The method of claim 9, wherein the step (c),
    상기 하위 메뉴를 가지고 있는 항목을 수직 방향으로 잡아 당기는 방향의 상기 3차원 사용자 입력 장치의 움직임에 의하여 상기 하위 메뉴를 가지고 있는 항목을 선택함을 특징으로 하는 3차원 사용자 입력 장치를 사용한 3차원 그래픽 화면상의 사용자 인터페이스 방법. The 3-D using a three-dimensional user input device, characterized in that the select an item that has the sub-menu by an item has a submenu with the movement of the three-dimensional user input device in the direction of pulling in the vertical direction, the graphic display on how the user interface.
  11. 제 8항에 있어서, 상기 (c) 및 (d) 단계는, The method of claim 8, wherein the (c) and (d) comprises,
    사용자가 원하는 최하위 메뉴 항목이 표시될 때까지 반복함을 특징으로 하는 3차원 사용자 입력 장치를 사용한 3차원 그래픽 화면상의 사용자 인터페이스 방법. 3D graphical user interface screen on the method repeats with a three-dimensional user input device, characterized in that until the user views the desired menu item, the lowest.
  12. 제 8항에 있어서, 상기 (d) 단계에서 하위 메뉴가 표시된 상태에서, The method of claim 8, wherein in a state in which the submenu is displayed in the step (d),
    (e) 상기 하위 메뉴를 가지고 있는 항목을 선택하는 상기 3차원 사용자 입력 장치의 움직임의 역방향의 움직임에 의하여 상기 하위 메뉴를 가지고 있는 항목의 선택을 해제하면, 3차원 그래픽 화면 상에서 하위 메뉴가 사라지는 단계를 더 포함함을 특징으로 하는 3차원 사용자 입력 장치를 사용한 3차원 그래픽 화면상의 사용자 인터페이스 방법. (E) If, by the reverse movement of the movement of the three-dimensional user input device to select an item that has the sub-menu, clear the entry that has the sub-menu, step disappears, a submenu on the three-dimensional graphic display 3D user interface method on the graphic screen using a three-dimensional user input device, characterized by further comprising.
  13. 제 12항에 있어서, 13. The method of claim 12,
    상기 (c) 및 (d) 단계는 사용자가 원하는 최하위 메뉴 항목이 표시될 때까지 반복하고, The (c) and (d) repeating steps and until the lowermost menu item the user wants,
    상기 (e) 단계는 임의의 하위 메뉴에서 반복될 수 있음을 특징으로 하는 3차원 사용자 입력 장치를 사용한 3차원 그래픽 화면상의 사용자 인터페이스 방법. The step (e) is a three-dimensional user interface method on the graphic screen using a three-dimensional user input device, it characterized in that it can be repeated in any sub-menus.
  14. 사용자 입력 장치를 사용한 그래픽 화면상의 사용자 인터페이스 방법에 있어서, In the user interface method on the graphic screen using a user input device,
    (a) 사용자가 2차원 평면상에서 임의의 방향으로 움직일 수 있는 사용자 입력 장치에 상기 2차원 평면과 공간상에서 수직을 이루는 방향의 움직임을 제어하는 제 1 버튼과 상기 제 1 버튼이 제어하는 움직임의 역방향의 움직임을 제어하는 제 2 버튼을 추가하여 3차원 사용자 입력을 지원하는 3차원 사용자 입력 장치에 의하여 3차원 그래픽 화면상에 위치하는 계층적인 메뉴를 가지고 있는 오브젝트를 선택 하는 단계; (A) direction opposite to the movement of the user and the first button and the first button, to control a direction of movement perpendicular on the two-dimensional plane and the space on the user input device can move in any direction on a two-dimensional plane control step of adding a second button for controlling the movement and by a three-dimensional user input device that supports the three-dimensional user input selecting an object that has a hierarchical menu which is located on the three-dimensional graphic display;
    (b) 상기 3차원 그래픽 화면상에 상기 오브젝트가 가지고 있는 최상위 메뉴를 표시하는 단계; (B) displaying the top menu, in which the object has on the three-dimensional graphic display;
    (c) 상기 메뉴의 항목들 중에서 하위 메뉴를 가지고 있는 항목을 상기 제 1 버튼을 누름에 의하여 선택하는 단계; (C) selecting by the first button, the item having a sub-menu from among the menu items of the press; And
    (d) 상기 (c) 단계에서 하위 메뉴를 가지고 있는 항목이 선택되면, 3차원 그래픽 화면상에 하위 메뉴가 표시되는 단계를 포함함을 특징으로 하는 3차원 사용자 입력 장치를 사용한 3차원 그래픽 화면상의 사용자 인터페이스 방법. (D) the (c) when has a sub-menu item is selected in step, three-dimensional graphic on-screen 3D graphics using a three-dimensional user input device, characterized in that the sub-menu comprises a step in which a display screen on the how the user interface.
  15. 제 14항에 있어서, 상기 (d) 단계는, 15. The method of claim 14, (d) the step is
    상기 (c) 단계에서 하위 메뉴를 가지고 있는 항목이 선택되면, 3차원 그래픽 화면상에서 상위 메뉴는 사라지고, 하위 메뉴가 표시됨을 특징으로 하는 3차원 사용자 입력 장치를 사용한 3차원 그래픽 화면상의 사용자 인터페이스 방법. When the item with a sub-menu in the step (c) selection, 3D graphics to the upper menu will disappear on the screen, three-dimensional graphical user interface method on the screen with the three-dimensional user input device, characterized in that the sub-menu displayed.
  16. 제 14항에 있어서, 상기 (d) 단계에서 하위 메뉴가 표시된 상태에서, 15. The method of claim 14, in a state in which the submenu is displayed in the step (d),
    (e) 상기 제 2 버튼을 누름에 의하여 상기 하위 메뉴를 가지고 있는 항목의 선택을 해제하면, 3차원 그래픽 화면상에서 하위 메뉴는 사라지고, 상위 메뉴가 표시되는 단계를 더 포함함을 특징으로 하는 3차원 사용자 입력 장치를 사용한 3차원 그래픽 화면상의 사용자 인터페이스 방법. (E) a three-dimensional, characterized by turning off a selection of an item which has the sub-menu by the second button to press, the sub menu will disappear and the three-dimensional graphic display, further comprising the step that the previous menu is displayed 3D user interface method on the graphic screen using the user input device.
  17. 제 16항에 있어서, 17. The method of claim 16,
    상기 (c) 및 (d) 단계는 사용자가 원하는 최하위 메뉴 항목이 표시될 때까지 반복하고, The (c) and (d) repeating steps and until the lowermost menu item the user wants,
    상기 (e) 단계는 임의의 하위 메뉴에서 반복될 수 있음을 특징으로 하는 3차원 사용자 입력 장치를 사용한 3차원 그래픽 화면상의 사용자 인터페이스 방법. The step (e) is a three-dimensional user interface method on the graphic screen using a three-dimensional user input device, it characterized in that it can be repeated in any sub-menus.
  18. (a) 사용자가 3차원 공간상에서 임의의 방향으로 움직일 수 있는 3차원 사용자 입력 장치에 의하여 3차원 그래픽 화면상에 위치하는 계층적인 메뉴를 가지고 있는 오브젝트를 선택하면, 상기 3차원 그래픽 화면상에 상기 오브젝트가 가지고 있는 최상위 메뉴를 표시하는 기능; (A) the user selects an object that has a hierarchical menu which is located on the three-dimensional graphical display by the three-dimensional movable in any direction of the user input device in the three-dimensional space, onto the three-dimensional graphic display the ability to display the top menu that has the object;
    (b) 상기 3차원 사용자 입력 장치의 움직임에 의하여 상기 메뉴의 항목들 중에서 하위 메뉴를 가지고 있는 항목을 선택하면, 상기 3차원 그래픽 화면상에 하위 메뉴가 표시되는 기능; (B) when an item is selected, which has a sub-menu from among the items in the menu by the movement of the three-dimensional user input device, a function that displays the submenu on the three-dimensional graphic display; And
    (c) 하위 메뉴를 가지고 있는 항목을 선택하는 상기 3차원 사용자 입력 장치의 움직임의 역방향의 움직임에 의하여 상기 3차원 그래픽 화면상에 하위 메뉴를 가지고 있는 항목의 선택을 해제하면, 3차원 그래픽 화면상에서 하위 메뉴가 사라지고 상위 메뉴가 나타나는 기능을 컴퓨터에 의하여 실현시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체. (C) If, by the reverse movement of the movement of the three-dimensional user input device to select an item with a sub-menu, clear the item with a submenu on the three-dimensional graphical display, the three-dimensional graphic display a recording medium in the sub menu disappears to read function the upper menu to a computer storing a program for implementing by a computer.
  19. 제 18항에 있어서, 상기 (b) 기능은, 19. The method of claim 18, wherein the (b) function,
    상기 3차원 사용자 입력 장치의 움직임에 의하여 상기 메뉴의 항목들 중에서 하위 메뉴를 가지고 있는 항목을 선택하면, 상기 3차원 그래픽 화면상에서 상위 메뉴는 사라지고, 하위 메뉴가 표시됨을 특징으로 하는 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체. If by the movement of the three-dimensional user input device, select the item with a sub-menu from among the items of the menu, top menu disappears on the three-dimensional graphics display, the computer storing a program, characterized in the sub-menu is displayed readable recording medium.
  20. 제 18항에 있어서, 상기 (b) 기능은, 19. The method of claim 18, wherein the (b) function,
    상기 3차원 사용자 입력 장치의 움직임에 의하여 상기 메뉴의 항목들 중에서 하위 메뉴를 가지고 있는 항목을 선택하면, 상기 3차원 그래픽 화면상에 하위 메뉴가 상기 3차원 사용자 입력 장치가 움직인 방향으로 표시됨을 특징으로 하는 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체. Selecting an item in by the movement of the three-dimensional user input device has a sub-menu from among the items in the menu, characterized by a displayed on the three-dimensional graphic display a sub-menu in the said three-dimensional user input device movement direction readable recording medium recording a program for a computer.
KR19990034575A 1999-08-20 1999-08-20 User interface method using 3-dimensional user input device in 3-dimensional graphic display and computer readable medium therefor KR100565040B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR19990034575A KR100565040B1 (en) 1999-08-20 1999-08-20 User interface method using 3-dimensional user input device in 3-dimensional graphic display and computer readable medium therefor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR19990034575A KR100565040B1 (en) 1999-08-20 1999-08-20 User interface method using 3-dimensional user input device in 3-dimensional graphic display and computer readable medium therefor

Publications (2)

Publication Number Publication Date
KR20010018568A KR20010018568A (en) 2001-03-05
KR100565040B1 true KR100565040B1 (en) 2006-03-30

Family

ID=19608010

Family Applications (1)

Application Number Title Priority Date Filing Date
KR19990034575A KR100565040B1 (en) 1999-08-20 1999-08-20 User interface method using 3-dimensional user input device in 3-dimensional graphic display and computer readable medium therefor

Country Status (1)

Country Link
KR (1) KR100565040B1 (en)

Families Citing this family (68)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1466261B1 (en) 2002-01-08 2018-03-07 Seven Networks, LLC Connection architecture for a mobile network
TWI238348B (en) 2002-05-13 2005-08-21 Kyocera Corp Portable information terminal, display control device, display control method, and recording media
US8010082B2 (en) 2004-10-20 2011-08-30 Seven Networks, Inc. Flexible billing architecture
WO2006045102A2 (en) 2004-10-20 2006-04-27 Seven Networks, Inc. Method and apparatus for intercepting events in a communication system
US7706781B2 (en) 2004-11-22 2010-04-27 Seven Networks International Oy Data security in a mobile e-mail service
FI117152B (en) 2004-12-03 2006-06-30 Seven Networks Internat Oy The introduction of mobile e-mail settings
US7752633B1 (en) 2005-03-14 2010-07-06 Seven Networks, Inc. Cross-platform event engine
US8438633B1 (en) 2005-04-21 2013-05-07 Seven Networks, Inc. Flexible real-time inbox access
WO2006136660A1 (en) 2005-06-21 2006-12-28 Seven Networks International Oy Maintaining an ip connection in a mobile network
US7917468B2 (en) 2005-08-01 2011-03-29 Seven Networks, Inc. Linking of personal information management data
US7853563B2 (en) 2005-08-01 2010-12-14 Seven Networks, Inc. Universal data aggregation
US8468126B2 (en) 2005-08-01 2013-06-18 Seven Networks, Inc. Publishing data in an information community
KR100827230B1 (en) 2006-06-09 2008-05-07 삼성전자주식회사 Portable device and method for providing menu icon
US7769395B2 (en) 2006-06-20 2010-08-03 Seven Networks, Inc. Location-based operations and messaging
US8805425B2 (en) 2007-06-01 2014-08-12 Seven Networks, Inc. Integrated messaging
US8693494B2 (en) 2007-06-01 2014-04-08 Seven Networks, Inc. Polling
US8364181B2 (en) 2007-12-10 2013-01-29 Seven Networks, Inc. Electronic-mail filtering for mobile devices
US8793305B2 (en) 2007-12-13 2014-07-29 Seven Networks, Inc. Content delivery to a mobile device from a content service
US9002828B2 (en) 2007-12-13 2015-04-07 Seven Networks, Inc. Predictive content delivery
US8107921B2 (en) 2008-01-11 2012-01-31 Seven Networks, Inc. Mobile virtual network operator
US8862657B2 (en) 2008-01-25 2014-10-14 Seven Networks, Inc. Policy based content service
US20090193338A1 (en) 2008-01-28 2009-07-30 Trevor Fiatal Reducing network and battery consumption during content delivery and playback
US8787947B2 (en) 2008-06-18 2014-07-22 Seven Networks, Inc. Application discovery on mobile devices
US8078158B2 (en) 2008-06-26 2011-12-13 Seven Networks, Inc. Provisioning applications for a mobile device
US8909759B2 (en) 2008-10-10 2014-12-09 Seven Networks, Inc. Bandwidth measurement
KR101638536B1 (en) * 2009-12-29 2016-07-11 엘지전자 주식회사 Image Display Device and Controlling Method for the Same
US20110179376A1 (en) * 2010-01-21 2011-07-21 Sony Corporation Three or higher dimensional graphical user interface for tv menu and document navigation
US9043731B2 (en) 2010-03-30 2015-05-26 Seven Networks, Inc. 3D mobile user interface with configurable workspace management
KR101147621B1 (en) * 2010-06-09 2012-05-23 주식회사 인프라웨어 Method for displaying idle screen in mobile terminals, and computer readable recording medium storing idle screen display program for mobile terminals
WO2012018556A2 (en) 2010-07-26 2012-02-09 Ari Backholm Mobile application traffic optimization
US8838783B2 (en) 2010-07-26 2014-09-16 Seven Networks, Inc. Distributed caching for resource and mobile network traffic management
US9077630B2 (en) 2010-07-26 2015-07-07 Seven Networks, Inc. Distributed implementation of dynamic wireless traffic policy
JP5620578B2 (en) 2010-07-26 2014-11-05 セブン ネットワークス インコーポレイテッド Mobile network traffic adjustment across multiple applications
WO2012061437A1 (en) 2010-11-01 2012-05-10 Michael Luna Cache defeat detection and caching of content addressed by identifiers intended to defeat cache
US8843153B2 (en) 2010-11-01 2014-09-23 Seven Networks, Inc. Mobile traffic categorization and policy for network use optimization while preserving user experience
WO2012061430A2 (en) 2010-11-01 2012-05-10 Michael Luna Distributed management of keep-alive message signaling for mobile network resource conservation and optimization
WO2012060995A2 (en) 2010-11-01 2012-05-10 Michael Luna Distributed caching in a wireless network of content delivered for a mobile application over a long-held request
US9330196B2 (en) 2010-11-01 2016-05-03 Seven Networks, Llc Wireless traffic management system cache optimization using http headers
GB2499534B (en) 2010-11-01 2018-09-19 Seven Networks Llc Caching adapted for mobile application behavior and network conditions
US8484314B2 (en) 2010-11-01 2013-07-09 Seven Networks, Inc. Distributed caching in a wireless network of content delivered for a mobile application over a long-held request
US9060032B2 (en) 2010-11-01 2015-06-16 Seven Networks, Inc. Selective data compression by a distributed traffic management system to reduce mobile data traffic and signaling traffic
WO2012060997A2 (en) 2010-11-01 2012-05-10 Michael Luna Application and network-based long poll request detection and cacheability assessment therefor
WO2012071283A1 (en) 2010-11-22 2012-05-31 Michael Luna Aligning data transfer to optimize connections established for transmission over a wireless network
GB2500327A (en) 2010-11-22 2013-09-18 Seven Networks Inc Optimization of resource polling intervals to satisfy mobile device requests
GB2501416B (en) 2011-01-07 2018-03-21 Seven Networks Llc System and method for reduction of mobile network traffic used for domain name system (DNS) queries
EP2700019B1 (en) 2011-04-19 2019-03-27 Seven Networks, LLC Social caching for device resource sharing and management
US8832228B2 (en) 2011-04-27 2014-09-09 Seven Networks, Inc. System and method for making requests on behalf of a mobile device based on atomic processes for mobile network traffic relief
WO2012149434A2 (en) 2011-04-27 2012-11-01 Seven Networks, Inc. Detecting and preserving state for satisfying application requests in a distributed proxy and cache system
US9239800B2 (en) 2011-07-27 2016-01-19 Seven Networks, Llc Automatic generation and distribution of policy information regarding malicious mobile traffic in a wireless network
US8934414B2 (en) 2011-12-06 2015-01-13 Seven Networks, Inc. Cellular or WiFi mobile traffic optimization based on public or private network destination
EP2789137A4 (en) 2011-12-06 2015-12-02 Seven Networks Inc A system of redundantly clustered machines to provide failover mechanisms for mobile traffic management and network resource conservation
GB2498064A (en) 2011-12-07 2013-07-03 Seven Networks Inc Distributed content caching mechanism using a network operator proxy
US9277443B2 (en) 2011-12-07 2016-03-01 Seven Networks, Llc Radio-awareness of mobile device for sending server-side control signals using a wireless network optimized transport protocol
WO2013090821A1 (en) 2011-12-14 2013-06-20 Seven Networks, Inc. Hierarchies and categories for management and deployment of policies for distributed wireless traffic optimization
US20130159511A1 (en) 2011-12-14 2013-06-20 Seven Networks, Inc. System and method for generating a report to a network operator by distributing aggregation of data
WO2013090834A1 (en) 2011-12-14 2013-06-20 Seven Networks, Inc. Operation modes for mobile traffic optimization and concurrent management of optimized and non-optimized traffic
EP2801236A4 (en) 2012-01-05 2015-10-21 Seven Networks Inc Detection and management of user interactions with foreground applications on a mobile device in distributed caching
WO2013116856A1 (en) 2012-02-02 2013-08-08 Seven Networks, Inc. Dynamic categorization of applications for network access in a mobile network
WO2013116852A1 (en) 2012-02-03 2013-08-08 Seven Networks, Inc. User as an end point for profiling and optimizing the delivery of content and data in a wireless network
US8812695B2 (en) 2012-04-09 2014-08-19 Seven Networks, Inc. Method and system for management of a virtual network connection without heartbeat messages
US10263899B2 (en) 2012-04-10 2019-04-16 Seven Networks, Llc Enhanced customer service for mobile carriers using real-time and historical mobile application and traffic or optimization data associated with mobile devices in a mobile network
US8775631B2 (en) 2012-07-13 2014-07-08 Seven Networks, Inc. Dynamic bandwidth adjustment for browsing or streaming activity in a wireless network based on prediction of user behavior when interacting with mobile applications
US9161258B2 (en) 2012-10-24 2015-10-13 Seven Networks, Llc Optimized and selective management of policy deployment to mobile clients in a congested network to prevent further aggravation of network congestion
US9307493B2 (en) 2012-12-20 2016-04-05 Seven Networks, Llc Systems and methods for application management of mobile device radio state promotion and demotion
US9241314B2 (en) 2013-01-23 2016-01-19 Seven Networks, Llc Mobile device with application or context aware fast dormancy
US8874761B2 (en) 2013-01-25 2014-10-28 Seven Networks, Inc. Signaling optimization in a wireless network for traffic utilizing proprietary and non-proprietary protocols
US8750123B1 (en) 2013-03-11 2014-06-10 Seven Networks, Inc. Mobile device equipped with mobile network congestion recognition to make intelligent decisions regarding connecting to an operator network
US9065765B2 (en) 2013-07-22 2015-06-23 Seven Networks, Inc. Proxy server associated with a mobile carrier for enhancing mobile traffic management in a mobile network

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10133842A (en) 1996-10-28 1998-05-22 Matsushita Electric Works Ltd Method for displaying selective item, and item selector using the same
JPH10260671A (en) 1997-03-21 1998-09-29 Sony Corp Device and method for controlling image display

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10133842A (en) 1996-10-28 1998-05-22 Matsushita Electric Works Ltd Method for displaying selective item, and item selector using the same
JPH10260671A (en) 1997-03-21 1998-09-29 Sony Corp Device and method for controlling image display

Also Published As

Publication number Publication date
KR20010018568A (en) 2001-03-05

Similar Documents

Publication Publication Date Title
Reitmayr et al. Location based applications for mobile augmented reality
JP5230787B2 (en) Three-dimensional pointing method, three-dimensional pointing device, and three-dimensional pointing program
Argelaguet et al. A survey of 3D object selection techniques for virtual environments
Piekarski et al. Tinmith-metro: New outdoor techniques for creating city models with an augmented reality wearable computer
EP0626636B1 (en) User interface for an information processing system
US6031519A (en) Holographic direct manipulation interface
Hinckley et al. Sensor synaesthesia: touch in motion, and motion in touch
US7126579B2 (en) Method for requesting destination information and for navigating in a map view, computer program product and navigation unit
CN103314351B (en) A method and apparatus for editing the touch display
US8677284B2 (en) Method and apparatus for controlling and displaying contents in a user interface
CN102915112B (en) Close operation of systems and methods for tracking
US8730165B2 (en) Method and apparatus for user interface of input devices
AU2012346380B2 (en) Light-based finger gesture user interface
US7492362B2 (en) Virtual space rendering/display apparatus and virtual space rendering/display method
EP1046137B1 (en) Method and apparatus for facilitating navigation in three-dimensional graphic scenes
Rekimoto et al. Toolstone: effective use of the physical manipulation vocabularies of input devices
JP4058406B2 (en) Computerized hand-held device with a hand
US20160188157A1 (en) Method of real-time incremental zooming
EP2196150B1 (en) Hand-held ultrasound system
US9032336B2 (en) Gesture input system, method and program
US5805137A (en) Touch sensitive input control device
CN1167995C (en) Operation method of user interface of hand-held device
JP5430782B2 (en) Display and input device and the in-vehicle information equipment
KR101542625B1 (en) By performing a gesture method and apparatus for selecting an object within the user interface,
US20070035563A1 (en) Augmented reality spatial interaction and navigational system

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130227

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20140227

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20150226

Year of fee payment: 10

FPAY Annual fee payment

Payment date: 20160226

Year of fee payment: 11

LAPS Lapse due to unpaid annual fee