KR100691561B1 - Input and output system and display method using the system - Google Patents
Input and output system and display method using the system Download PDFInfo
- Publication number
- KR100691561B1 KR100691561B1 KR1020050102598A KR20050102598A KR100691561B1 KR 100691561 B1 KR100691561 B1 KR 100691561B1 KR 1020050102598 A KR1020050102598 A KR 1020050102598A KR 20050102598 A KR20050102598 A KR 20050102598A KR 100691561 B1 KR100691561 B1 KR 100691561B1
- Authority
- KR
- South Korea
- Prior art keywords
- information
- input devices
- input
- display device
- displayed
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/0304—Detection arrangements using opto-electronic means
- G06F3/0325—Detection arrangements using opto-electronic means using a plurality of light emitters or reflectors or a plurality of detectors forming a reference frame from which to derive the orientation of the object, e.g. by triangulation or on the basis of reference deformation in the picked up image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
Abstract
Description
도 1은 본 발명에 따른 입출력 시스템의 구성을 나타낸 블록도이다. 1 is a block diagram showing the configuration of an input / output system according to the present invention.
도 2는 본 발명에 따른 입출력 시스템에서 초기 화면이 제1 디스플레이 장치에 디스플레이된 예를 나타낸 것이다. 2 illustrates an example in which an initial screen is displayed on a first display device in the input / output system according to the present invention.
도 3은 본 발명에 따른 입출력 시스템에서 입력 장치를 통해서 정보를 탐색한 예를 나타낸 것이다. 3 illustrates an example of searching for information through an input device in an input / output system according to the present invention.
도 4는 본 발명에 따른 입출력 시스템에서 입력 장치를 통해서 조작을 나타낸 예이다. 4 is an example illustrating an operation through an input device in the input / output system according to the present invention.
도 5는 도 4의 조작에 따른 결과를 나타낸 것이다. 5 illustrates the results of the manipulation of FIG. 4.
본 발명은 데이터를 입력받고, 처리하며, 출력하는 데이터 입출력 시스템 및 그를 이용한 디스플레이 방법에 관한 것이다. The present invention relates to a data input / output system for receiving data, processing, and outputting data, and a display method using the same.
현대의 디지털 미디어 사회에서는 한 사람이 접하는 정보의 양이 방대하며 또한 가치 없는 정보도 많아서, 필요한 정보를 신속히 찾는 것이 중요해졌다. 한 페이지 정도의 정보를 탐색하는 일은 쉽지만 도서관이나 인터넷에 속한 정보처럼 많은 양의 데이터를 대상으로 하게 되면 원하는 항목의 위치를 찾거나 전체 구조를 파악하는 것조차 어려워지게 된다. 구조화된 데이터베이스와 인쇄 문서, 멀티미디어를 모두 포함하는 미래의 전자 도서관은 다양한 계층의 사용자가 방대해진 정보 공간을 신속하고 쉽게 탐색할 수 있는 시스템을 갖추어야 할 것이다. 정보의 접근에 있어서 기존의 환경에서는 마우스나 키보드를 통한 간접적인 방식이 일반적이다. 하지만, 새로운 HCI (휴먼 컴퓨터 인터페이스, Humane Computer Interface) 기술은 시각, 청각, 촉각 등의 인간의 감각을 통한 직관적인 방식을 통한 정보의 접근을 함으로써 인간 중심적인 인터페이스를 주제로 다루고 있다. 특히, 촉각을 통한 정보의 직접적이고 물리적인 조작을 가능하도록 하는 기술이 많은 주목을 받고 있다. In today's digital media society, the amount of information a person encounters is huge, and there is a lot of valueless information, so it is important to find the information you need quickly. Navigating through a page of information is easy, but targeting large amounts of data, such as information in a library or the Internet, makes it difficult to locate the desired item or even determine its overall structure. Future electronic libraries, including both structured databases, printed documents, and multimedia, will need to have a system that enables users of various levels to quickly and easily navigate the vast information space. In the existing environment for accessing information, an indirect method through a mouse or a keyboard is common. However, the new HCI (Human Computer Interface) technology deals with human-centered interfaces by accessing information in an intuitive way through human senses such as sight, hearing, and touch. In particular, technology that enables direct and physical manipulation of information through tactile touch has attracted much attention.
기존의 컴퓨터 환경은 주로 마우스와 키보드를 이용한 GUI(그래픽 유저 인터페이스, Graphic User Interface)를 기반으로 하고 있다. 이런 방식에서는 사용자가 GUI의 사용 방법을 배워서 익숙해지는 시간이 필요하게 되고 직관성이 떨어진다. 또한 사용자가 한 사람으로 제한되어 있기 때문에 여러 명이 동시에 협업을 하는 데는 적합하지 않은 환경이다. Existing computer environment is mainly based on GUI (Graphic User Interface) using mouse and keyboard. In this way, the user needs time to learn how to use the GUI and becomes less intuitive. In addition, because users are limited to one person, it is not suitable for multiple people collaborating at the same time.
이런 단점을 극복하고 여러 명의 참여자가 동시에 컴퓨터 환경에서 협업을 할 수 있고 마우스나 키보드를 대신하여 물리적으로 정보에 접근하여 제어할 수 있는 사용자 인터페이스들이 등장하였다.Overcoming these shortcomings, user interfaces that allow multiple participants to collaborate simultaneously in a computer environment and to physically access and control information in place of a mouse or keyboard have emerged.
Hiroshi Ishii 교수가 이끄는 미디어 랩의 Tangible 그룹은 이 분야에서 가 장 활발한 활동을 펼치고 있다. metaDESK, transBOARD, 그리고 Sensetable 등의 시스템을 통해 사용자가 직접 물리적으로 정보에 접근하고 조작할 수 있도록 하였다. 사용자들은 이 시스템을 기반으로 도시계획이나 지리정보시스템(GIS)에 대한 적용, 전자회로 설계와 같은 실험 측면에서의 접근, 사업 프로세스와 IP 네트워크 구성과 같은 다이어그램 측면에서의 접근 등 많은 과제들을 연구하고 있다. 이러한 실감 인터페이스의 가장 기본적인 이슈는 물리적인 인터페이스를 통한 정보를 조작 시, 그 물리적인 도구들의 위치를 추적하는 기술과 적당한 디스플레이 기술에 관한 것이다. The Tangible group of Media Lab, led by Professor Hiroshi Ishii, is the most active in this area. Systems such as metaDESK, transBOARD, and Sensetable allow users to physically access and manipulate information. Based on this system, users study many tasks such as the application of urban planning or geographic information system (GIS), access in experimental aspects such as electronic circuit design, and in terms of diagrams such as business process and IP network configuration. have. The most basic issue of this sensory interface is related to the technique of tracking the position of the physical tools and proper display technology when manipulating information through the physical interface.
위치를 추적하기 위해서는 기존의 시스템들은 컴퓨터 비전 기술을 이용하거나, 상용 시스템인 Wacom의 센싱 테블렛 시스템 등을 이용하여 물리적인 정보 접근 도구의 위치를 추적하였다. 하지만, 컴퓨터 비전 기술은 물리적인 도구를 이동시 느린 반응속도가 문제가 되었고 상용화된 센싱 테블렛을 사용할 경우는 스크린의 크기가 제한적이고 여러 개의 테블렛을 연결하여 사용할 때 그 연결 부위에서 위치 추적이 끊어지는 단점이 있다.In order to track the location, existing systems use computer vision technology or commercially available Wacom's sensing tablet system to track the location of physical information access tools. However, computer vision technology has a problem of slow response speed when moving a physical tool, and when using a commercially available sensing tablet, the screen size is limited, and when using multiple tablets, the position tracking at the connection point is lost. There are disadvantages to losing.
디스플레이 경우 대부분 프로젝터를 사용하여 스크린의 표면에 화면을 프로젝션하는 방식을 사용하였다. 이 경우는 사용자가 손을 이용해 정보 조작 시 손 위에 화면이 투사되는 단점이 있다. 반대로 스크린 아래서 투사하는 방식은 스크린 아래 공간을 활용할 수 없다는 단점이 있다. 또한 프로젝터를 이용이 두 가지 경우 모두 선명한 화면을 얻기 위해 어두운 조명 환경이 요구되고 캘리브레이션이 필요한 단점들이 있다.In the case of the display, a projector is used to project the screen to the surface of the screen. In this case, the screen is projected on the hand when the user manipulates the information by using the hand. On the contrary, the projection under the screen has a disadvantage in that the space under the screen cannot be utilized. In addition, in both cases, using a projector requires disadvantages that a dark lighting environment and a calibration are required to obtain a clear screen.
또한 정보 가시화 소프트웨어 부분에서는 사용자가 방대한 정보의 구조를 파악하거나 필요한 정보를 탐색하는 것을 용이하게 하기 위하여, 전체 정보를 개관할 수 있는 관망(overview) 기능과 사용자의 요구에 따라 항목을 확대 또는 축소하는 기능(zoom) 그리고 관심 밖의 정보를 화면에서 제거하는 여과(filter) 기능을 제공한다. 예로써 가시 영역(field-of-view)을 설정하고 이를 이동함으로써 세부 표시 화면(detail-view)을 제어하는 시스템이나, 정보 목록에서 하나 이상의 선택된 항목을 확대하여 보여주고 나머지 항목은 간략하게 표시하는 Fisheye 시스템을 들 수 있다. 이와 관련하여 사용자의 요구에 따라 항목을 확대 또는 축소할 때 부드러운 움직임을 표현함으로써, 전후 관계와 현재 위치에 대한 감을 유지하게 도와주는 기능도 포함된다. In addition, the information visualization software section provides an overview of the overall information and enlarges or reduces items according to the user's needs in order to make it easier for the user to understand the structure of the vast information or to search for necessary information. It provides a zoom and a filter that removes information of interest from the screen. For example, a system that controls detail-view by setting and moving a field-of-view, or zooming in on one or more selected items in an information list and briefly displaying the remaining items. Fisheye system. In this regard, it also includes a function that helps to maintain a sense of the front and rear relationship and the current position by expressing a smooth movement when the item is enlarged or reduced according to the user's request.
또한 필요한 정보를 찾아서 선택하였을 때 상세한 정보를 표시하는 기능과 관련된 정보를 표시하는 기능을 제공한다. 영화 정보 목록을 보여주는 시스템을 예로 들면 보고 싶은 영화의 항목을 클릭하면 Pop-up 창을 열어 자세한 사항을 표시할 수 있으며, 여기서 영화감독의 이름을 클릭하면 이 감독이 만든 영화를 모두 표시해주어 관련된 정보를 제공할 수 있다. 이외에도 사용자가 선택한 항목과 비슷한 속성을 가진 다른 항목을 색깔로 강조 표시 해주거나, 네트워크 구조에서 비슷한 항목을 선택한 항목 가까이에 위치함으로써 관련된 정보를 제공한다.In addition, the present invention provides a function of displaying information related to a function of displaying detailed information when the necessary information is found and selected. For example, a system that displays a list of movie information. Clicking on an item of the movie you want to watch will open a pop-up window, where you can click on the movie director's name to display all the movies this director has created. Can be provided. In addition, you can highlight other items with similar properties as the items you have selected, or provide similar information by placing similar items close to the selected items in the network structure.
본 발명의 목적은 정보를 효과적으로 전달하는 디스플레이 방법과 특정한 입력장치들을 이용한 직관적인 인터페이스 기술을 결합함으로써, 복수의 사용자가 정 보를 직관적으로 인식하고 필요한 정보를 쉽게 찾고 정보의 수정 및 추가를 쉽게 할 수 있는 입출력 시스템 및 그를 이용한 디스플레이 방법을 제공하는데 있다. An object of the present invention is to combine a display method for effectively transmitting information and an intuitive interface technology using specific input devices, so that a plurality of users can intuitively recognize the information, easily find the necessary information, and easily modify and add the information. An input / output system and a display method using the same are provided.
이하에서는, 정보를 효과적으로 전달하는 디스플레이 방법과 실감 아이콘을 이용한 직관적인 인터페이스 기술을 결합함으로써, 정보를 직관적으로 인식하고 필요한 정보를 쉽게 찾고 정보의 수정 및 추가를 쉽게 할 수 있는 입출력 시스템 및 그를 이용한 디스플레이 방법을 도 1 ~ 도 5를 참조하여 상세히 설명한다. In the following, by combining the display method to effectively transfer information and intuitive interface technology using the sensory icons, the input and output system and the display using the same to intuitively recognize the information, easy to find the necessary information, easy to modify and add the information The method is described in detail with reference to FIGS. 1 to 5.
도 1은 본 발명에 따른 입출력 시스템의 구성을 나타낸 블록도이다. 1 is a block diagram showing the configuration of an input / output system according to the present invention.
도 1에 도시한 바와 같이, 본 발명에 따른 입출력 시스템은, 정보를 디스플레이하는 제1 디스플레이 장치와; 상기 제1 디스플레이 장치의 표면에 위치하고, 상기 정보를 조작하는 적어도 하나 이상의 입력장치들과; 상기 입력장치들의 위치 정보를 추적하는 센서부와; 상기 센서부가 추적한 상기 입력장치들의 위치 정보를 근거로 상기 입력장치들이 위치한 지점의 상기 제1 디스플레이 장치에 표시된 정보를 상기 입력장치들의 조작에 의해서 처리하는 처리부로 이루어진다. 여기서, 본 발명에 따른 입출력 시스템은 상기 정보의 관련 데이터(예를 들어, 문서 파일 또는 동영상 파일 등)를 부가적으로 디스플레이하는 제2 디스플레이 장치를 포함한다. As shown in FIG. 1, an input / output system according to the present invention includes a first display device for displaying information; At least one input device positioned on a surface of the first display device and configured to manipulate the information; A sensor unit for tracking location information of the input devices; And a processor configured to process information displayed on the first display apparatus at the point where the input apparatuses are located based on the position information of the input apparatuses tracked by the sensor unit by manipulation of the input apparatuses. Here, the input / output system according to the present invention includes a second display device for additionally displaying related data (for example, a document file or a video file) of the information.
상기 제1 디스플레이 장치는, 상기 처리부로부터 정보를 입력받아 디스플레이 한다. 여기서, 상기 제1 디스플레이 장치는, 상기 입력장치들이 상기 제1 디스플레이 장치의 표면에 위치할 수 있도록 지면과 평행하게 위치하고, 다수의 사용자들이 상기 입력장치들을 조작할 수 있도록 일정한 크기 이상의 디스플레이 장치(50 인치 이상의 PDP)인 것이 바람직하다. The first display device receives information from the processor and displays the information. Here, the first display apparatus is positioned parallel to the ground so that the input apparatuses may be located on the surface of the first display apparatus, and the display apparatus 50 having a predetermined size or larger so that a plurality of users can operate the input apparatuses. PDP) is preferably more than inches.
상기 입력장치들은, 상기 제1 디스플레이 장치의 표면에 위치하고, 상기 제1 디스플레이 장치에 표시된 정보들을 조작한다. 여기서, 상기 입력장치들은 무선 마우스와 유사하나, 복수개가 상기 제1 디스플레이 장치의 표면에 위치하고, 상기 제1 디스플레이 장치에 표시된 정보들을 상기 입력장치들의 움직임(예를 들어, 회전) 또는 상기 입력장치들에 형성된 버튼 입력을 무선 통신으로 상기 처리부에 전송함으로써 조작한다. The input devices are located on a surface of the first display device and manipulate information displayed on the first display device. Here, the input devices are similar to a wireless mouse, but a plurality of the input devices are located on the surface of the first display device, and the information displayed on the first display device may be moved (eg, rotated) or the input devices are displayed. Operation by transmitting the button input formed in the processor to the processing unit by wireless communication.
상기 센서부는, 상기 입력장치들의 위치를 실시간으로 감지하여 상기 처리부에 전송한다. 여기서, 상기 센서부는 카메라와, 적외선 센서 시스템으로 구성된다. 상기 카메라는 상기 제1 디스플레이 장치 상부면에 고정되고, 복수개의 적외선 센서는 상기 제1 디스플레이 장치 모서리에 위치하는 것이 바람직하다. 여기서, 상기 센서부가 상기 입력장치들의 위치를 실시간으로 감지하기 위하여, 컴퓨터 비전 기술을 이용한 위치 추적 정보와 적외선 센서로부터 오는 위치 값을 조합하여 보다 정밀한 추적을 하였다. 또한 적외선 센서가 감지한 위치 정보를 이용하여, 컴퓨터 비전 기술의 문제점인 마커가 가려지는 문제를 보완하였다. 그리고 적외선 센서는 상기 입력장치가 감지범위(상기 제1 디스플레이 장치 면에서 5mm높이 이내)를 벗어나면 추적이 불가능 하므로 이에 대한 대안으로써 컴퓨터 비전 기술을 이용하여 끊김없는 추적이 가능하다.The sensor unit detects the positions of the input devices in real time and transmits them to the processing unit. Here, the sensor unit is composed of a camera and an infrared sensor system. Preferably, the camera is fixed to an upper surface of the first display device, and a plurality of infrared sensors are positioned at an edge of the first display device. In order to detect the position of the input devices in real time, the sensor unit performs a more precise tracking by combining the position tracking information using computer vision technology and the position value coming from the infrared sensor. In addition, by using the location information detected by the infrared sensor, the marker, which is a problem of computer vision technology, is covered. The infrared sensor cannot be tracked if the input device is out of the sensing range (within 5mm height of the first display device), so as an alternative thereto, seamless tracking is possible using computer vision technology.
상기 처리부는, 상기 센서부가 추적한 상기 입력장치들의 위치 정보를 근거로 상기 입력장치들이 위치한 지점의 상기 제1 디스플레이 장치에 표시된 정보를 상기 입력장치들의 조작에 의해서 처리한다. 상기 처리부는, 사용자의 의한 상기 입력장치들의 조작을 인식하기 위하여, 상기 입력장치들의 움직임(예를 들어, 회전) 또는 상기 입력장치들에 형성된 버튼 입력에 대한 정보를 상기 입력장치들로부터 무선 통신(예를 들어, 적외선 통신)으로 수신한다. The processing unit processes the information displayed on the first display device at the point where the input devices are located based on the location information of the input devices tracked by the sensor unit by manipulation of the input devices. The processor may be configured to wirelessly communicate information about movement of the input devices (for example, rotation) or button input formed on the input devices to recognize the manipulation of the input devices by a user. For example, infrared communication).
상기 처리부는, 크게 세 개의 모듈(제1, 제2, 그리고 제3 모듈)로 구성된다. The processing unit is mainly composed of three modules (first, second, and third modules).
제1 모듈은 상기 센서부가 추적한 상기 입력 장치들의 위치 정보와 상기 입력장치들의 조작에 대한 정보를 입력받아 상기 입력장치들의 위치를 실시간으로 추적한다. 상기 제1 모듈은 상기 입력장치들의 ID를 확인하고, 상기 입력장치들의 조작을 감지, 처리 그리고 처리 결과를 상기 제1 디스플레이 장치에 디스플레이한다. 여기서, 상기 입력장치들의 조작은 예를 들어, 상기 입력장치들에 형성된 버튼의 입력 또는 상기 입력장치들의 회전 등에 대한 정보는 상기 입력장치들로부터 적외선 통신을 통해 상기 제1 모듈에 전송된다. The first module receives location information of the input devices tracked by the sensor unit and information on manipulation of the input devices, and tracks the locations of the input devices in real time. The first module checks IDs of the input devices and detects, processes, and displays a result of the manipulation of the input devices on the first display device. Herein, the manipulation of the input apparatuses may include, for example, information about an input of a button formed on the input apparatuses, rotation of the input apparatuses, and the like, from the input apparatuses to the first module through infrared communication.
제2 모듈은 상기 카메라로부터 수신되는 정보와 상기 제1 모듈로부터 처리되는 정보를 근거로 컴퓨터 비전을 담당한다. 즉, 상기 제2 모듈은 상기 센서부의 정보를 근거로 상기 입력장치들의 초기 위치를 측정하고, 상기 입력장치들의 위치변화를 인식하고, 상기 입력장치들 각각의 ID, 위치 및 회전을 실시간으로 추적함으로써, 그에 따른 이벤트를 생성한다. The second module is responsible for computer vision based on the information received from the camera and the information processed from the first module. That is, the second module measures the initial position of the input devices based on the information of the sensor unit, recognizes the change in the position of the input devices, and tracks the ID, position and rotation of each of the input devices in real time. , To generate events accordingly.
그리고 제3 모듈은, 현재 활성화된 정보의 관련 데이터를 제2 디스플레이 장치에 디스플레이한다. 예를 들어, 현재 활성화된 정보가 하나의 아이콘이고, 상기 정보에 관련된 데이터가 문서 파일 또는 동영상 파일일 때, 상기 제3 모듈은 상기 제2 디스플레이 장치에 상기 문서 파일 또는 동영상 파일을 디스플레이한다. The third module displays relevant data of the currently activated information on the second display device. For example, when the currently activated information is one icon and the data related to the information is a document file or a video file, the third module displays the document file or a video file on the second display device.
그리고 상기 처리부는 현재 활성화된 정보와 관련된 정보를 미리 설정된 노드까지 자동으로 상기 제1 디스플레이 장치에 디스플레이 하는 제4 모듈을 더 포함한다. 상기 제4 모듈은 계층구조를 갖는 정보에 사용자가 특정 정보를 검색할 때 유용하다. 여기서, 상기 제4 모듈은 현재 활성화된 정보를 수정(드래그, 삭제, 추가 정보 삽입 등)을 할 때, 부드러운 실시간 애니메이션으로 갱신되는 것이 바람직하다. The processor may further include a fourth module configured to automatically display information related to the currently activated information on the first display device up to a predetermined node. The fourth module is useful when a user searches for specific information in hierarchical information. Here, the fourth module is preferably updated with a smooth real-time animation when modifying (drag, delete, insert additional information, etc.) the currently activated information.
이하에서는, 상기와 같이 구성된 본 발명에 따른 입출력 시스템을 이용한 디스플레이 방법을 도 2 ~ 도 5를 참조하여 상세히 설명한다. Hereinafter, a display method using the input / output system according to the present invention configured as described above will be described in detail with reference to FIGS. 2 to 5.
본 발명에 따른 디스플레이 방법은, 정보를 디스플레이하는 제1 디스플레이 장치와; 상기 제1 디스플레이 장치의 표면에 위치하고, 상기 정보를 조작하는 적어도 하나 이상의 입력장치들과; 상기 입력장치들의 위치 정보를 추적하는 센서부와; 상기 센서부가 추적한 상기 입력장치들의 위치 정보를 근거로 상기 제1 디스플레이 장치에 표시된 정보를 상기 입력장치들의 조작에 의해서 처리하는 처리부로 구성되는 입출력 시스템을 사용하여 디스플레이 방법에 있어서, 사용자가 제1 정보를 활성화할 때, 상기 제1 정보와 관련된 정보를 미리 설정된 범위까지 자동으로 상기 제1 디스플레이 장치에 디스플레이 한다. A display method according to the present invention includes a first display device for displaying information; At least one input device positioned on a surface of the first display device and configured to manipulate the information; A sensor unit for tracking location information of the input devices; A display method using an input / output system comprising a processing unit for processing information displayed on the first display device by operation of the input devices based on the position information of the input devices tracked by the sensor unit, wherein the user has a first method. When the information is activated, the information related to the first information is automatically displayed on the first display device up to a preset range.
본 발명에 따른 디스플레이 방법은, 프로젝트 작업 구조, 자재 분류 목록, 그리고 조직도와 같은 계층 구조를 갖는 정보를 디스플레이 하는데 유용한다. 상기와 같은 정보는 노드와 연결선으로 구성된 트리 형태로 디스플레이 할 수 있다. The display method according to the present invention is useful for displaying information having a hierarchical structure such as a project work structure, a material classification list, and an organization chart. Such information may be displayed in the form of a tree composed of nodes and connecting lines.
먼저, 본 발명에 따른 디스플레이 방법은, 계층 구조를 갖는 정보를 노드와 연결선으로 구성된 트리 형태로 처리한다. First, the display method according to the present invention processes the information having a hierarchical structure in the form of a tree composed of nodes and connecting lines.
다음으로, 사용자의 하나의 노드를 선택할 때, 상기 선택된 노드가 활성화되고, 상기 선택된 노드를 중심으로 미리 설정된 단계까지의 자식 노드를 디스플레이 한다. 이때, 상기 자식 노드는 뿌리 노드로부터 이어지는 경로를 연결선으로 표시하여, 현재 노드의 위치를 쉽게 파악할 수 있도록 한다. 여기서, 상기 미리 설정된 단계는 사용자에 의해서 임의로 변경 가능하다. Next, when selecting one node of the user, the selected node is activated, and displays the child node up to a predetermined step centering on the selected node. In this case, the child node displays a path leading from the root node as a connecting line, so that the position of the current node can be easily identified. Herein, the preset step may be arbitrarily changed by the user.
이하에서는 본 발명에 따른 입출력 시스템을 이용한 디스플레이 방법을 도 2 -도 5를 참조하여 예를 들어 구체적으로 설명하겠다. 여기서, 프로젝트 작업 구조를 예로 들겠다. Hereinafter, a display method using an input / output system according to the present invention will be described in detail with reference to FIGS. 2 to 5. Here is an example of a project work structure.
먼저, 도 2와 같은 초기 화면이 제1 디스플레이 장치에 디스플레이 된다. 여기서, 상기 제1 디스플레이 장치는 50인치 이상의 PDP인 것이 바람직하다. First, an initial screen as shown in FIG. 2 is displayed on the first display device. Here, the first display device is preferably a PDP of 50 inches or more.
사용자가 상기 제1 디스플레이 장치에 디스플레이된 노드들 중 하나에 상기 입력장치를 놓으면, 상기 입력장치가 놓인 노드가 선택되고 활성화된다. 이때, 사용자가 입력장치를 이용하여 상기 선택된 노드를 움직이면, 이에 맞추어 상기 선택된 노드에 연결된 다른 노드들의 위치도 자동으로 변경된다. 여기서, 사용자가 상기 활성화된 노드를 다른 비활성 노드들 중에서 쉽게 식별할 수 있도록, 크기 및 모양 등에서 차이를 두는 것이 바람직하다. When the user places the input device on one of the nodes displayed on the first display device, the node on which the input device is placed is selected and activated. At this time, when the user moves the selected node using an input device, the position of other nodes connected to the selected node is automatically changed accordingly. Here, it is desirable to make a difference in size and shape so that the user can easily identify the activated node among other inactive nodes.
도 3은 도 2에 표시된 노드들 중에서, Task_2를 선택하여 중앙으로 이동시킨 후의 모습이다. 사용자가 한 노드를 선택하여 중앙으로 이동시키면, 상기 이동된 노드를 중심으로 미리 설정된 단계까지의 상/하위 노드를 표시한다. 여기서, 상기 미리 설정된 노드가 상위 단계로 1, 하위 단계로 1인 경우이다. 따라서, 도5에서, Task_2의 1 단계 상위 노드인 Project 노드와 하위 노드인 Task_21, Task_22, Task_23이 표시되고 단계의 차이가 2이상이 나는 Task_1등 나머지 노드들은 사라진다. FIG. 3 is a view after selecting Task_2 from among the nodes shown in FIG. 2 and moving it to the center. When the user selects a node and moves it to the center, the upper and lower nodes up to a predetermined level are displayed based on the moved node. In this case, the preset node is 1 in an upper step and 1 in a lower step. Therefore, in FIG. 5, the Project node, which is the first-level upper node of Task_2, and Task_21, Task_22, and Task_23, which are lower nodes, are displayed and the remaining nodes such as Task_1 having a difference of two or more steps disappear.
여기서, 상기 미리 설정된 단계는 사용자에 의해서 변경 가능하다. 이때, 상기 미리 설정된 단계를 변경하는 방법은, 예를 들어 상기 입력장치를 회전하는 것을 들 수 있다. 예를 들어, 사용자가 상기 입력장치를 시계 방향으로 회전할 때, 미리 설정된 단계가 1씩 커지고, 시계 반대 방향으로 회전할 때, 미리 설정된 단계가 1씩 감소하는 경우, 사용자가 Project 노드에 입력장치를 놓고, 시계 방향으로 상기 입력장치를 회전할 때, Task_1~Task_6의 자식노드까지 표시된다. 위와 같은 과정을 도 4와 도 5에 도시하였다. Here, the preset step may be changed by the user. In this case, the method of changing the preset step may include, for example, rotating the input device. For example, when the user rotates the input device clockwise, the preset step increases by one, and when the user rotates the counterclockwise, the preset step decreases by one. When the input device is rotated clockwise, up to child nodes of Task_1 to Task_6 are displayed. The above process is illustrated in FIGS. 4 and 5.
이상에서 설명한 바와 같이, 본 발명에 따른 입출력 시스템 및 그를 이용한 디스플레이 방법은, 정보를 효과적으로 전달하는 디스플레이 방법과 특정한 입력장치들을 이용한 직관적인 인터페이스 기술을 결합함으로써, 복수의 사용자가 정보를 직관적으로 인식하고 필요한 정보를 쉽게 찾고 정보의 수정 및 추가를 쉽게 할 수 있는 효과가 있다. 이는 특히, 여러 사람이 참여하여 한 주제에 대해 토론하는 회의에 유용하다. As described above, the input / output system and the display method using the same according to the present invention combine a display method for effectively transmitting information and an intuitive interface technology using specific input devices, thereby allowing a plurality of users to recognize the information intuitively. It has the effect of making it easier to find the information you need and to make corrections and additions. This is especially useful for meetings where several people participate and discuss a topic.
Claims (9)
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020050102598A KR100691561B1 (en) | 2005-10-28 | 2005-10-28 | Input and output system and display method using the system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020050102598A KR100691561B1 (en) | 2005-10-28 | 2005-10-28 | Input and output system and display method using the system |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR100691561B1 true KR100691561B1 (en) | 2007-03-09 |
Family
ID=38102825
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020050102598A KR100691561B1 (en) | 2005-10-28 | 2005-10-28 | Input and output system and display method using the system |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR100691561B1 (en) |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH10281724A (en) * | 1997-04-01 | 1998-10-23 | Nippon Telegr & Teleph Corp <Ntt> | Displacement measuring device |
-
2005
- 2005-10-28 KR KR1020050102598A patent/KR100691561B1/en active IP Right Grant
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH10281724A (en) * | 1997-04-01 | 1998-10-23 | Nippon Telegr & Teleph Corp <Ntt> | Displacement measuring device |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US9880640B2 (en) | Multi-dimensional interface | |
| EP2444918B1 (en) | Apparatus and method for providing augmented reality user interface | |
| KR102090269B1 (en) | Method for searching information, device, and computer readable recording medium thereof | |
| US8443302B2 (en) | Systems and methods of touchless interaction | |
| CN102362251B (en) | For the user interface providing the enhancing of application programs to control | |
| KR102184269B1 (en) | Display apparatus, portable apparatus and method for displaying a screen thereof | |
| JP5807686B2 (en) | Image processing apparatus, image processing method, and program | |
| JP5850502B2 (en) | Data sharing method, system, and controller | |
| CN108463784A (en) | Interactive demonstration controls | |
| AU2013219082A1 (en) | Image processing device, and computer program product | |
| WO2007033154A2 (en) | Motion detection and tracking system to control navigation | |
| WO2021128793A1 (en) | Information display method and apparatus, and electronic device and computer-readable storage medium | |
| JP6505242B2 (en) | Cluster-based photo navigation | |
| CA2914351A1 (en) | A method of establishing and managing messaging sessions based on user positions in a collaboration space and a collaboration system employing same | |
| Hasan et al. | SAMMI: a spatially-aware multi-mobile interface for analytic map navigation tasks | |
| GB2504085A (en) | Displaying maps and data sets on image display interfaces | |
| KR100691561B1 (en) | Input and output system and display method using the system | |
| KR101176317B1 (en) | Searched information arrangement method with correlation between search query and searched information | |
| Antoniac | Augmented reality based user interface for mobile applications and services | |
| Mooser et al. | Large document, small screen: a camera driven scroll and zoom control for mobile devices | |
| Klein | A Gesture Control Framework Targeting High-Resolution Video Wall Displays | |
| CN100498683C (en) | Management method of computer network interface | |
| Lee et al. | Smart and space-aware interactions using smartphones in a shared space | |
| Unlu | Designing familiar augmented and virtual reality environments and interactions through off-the-shelf real-world solutions | |
| US20230325216A1 (en) | System for organizing and displaying information on a display device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| E902 | Notification of reason for refusal | ||
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant | ||
| FPAY | Annual fee payment |
Payment date: 20130205 Year of fee payment: 7 |
|
| FPAY | Annual fee payment |
Payment date: 20140128 Year of fee payment: 8 |
|
| FPAY | Annual fee payment |
Payment date: 20150205 Year of fee payment: 9 |
|
| FPAY | Annual fee payment |
Payment date: 20160127 Year of fee payment: 10 |
|
| FPAY | Annual fee payment |
Payment date: 20170125 Year of fee payment: 11 |
|
| FPAY | Annual fee payment |
Payment date: 20190201 Year of fee payment: 13 |
|
| FPAY | Annual fee payment |
Payment date: 20200203 Year of fee payment: 14 |