KR20140039509A - System and method for providing contextual user-interface based on mark-up language - Google Patents

System and method for providing contextual user-interface based on mark-up language Download PDF

Info

Publication number
KR20140039509A
KR20140039509A KR20120105707A KR20120105707A KR20140039509A KR 20140039509 A KR20140039509 A KR 20140039509A KR 20120105707 A KR20120105707 A KR 20120105707A KR 20120105707 A KR20120105707 A KR 20120105707A KR 20140039509 A KR20140039509 A KR 20140039509A
Authority
KR
South Korea
Prior art keywords
web
user
menu
service
markup
Prior art date
Application number
KR20120105707A
Other languages
Korean (ko)
Inventor
심욱
Original Assignee
에스케이플래닛 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스케이플래닛 주식회사 filed Critical 에스케이플래닛 주식회사
Priority to KR20120105707A priority Critical patent/KR20140039509A/en
Priority to PCT/KR2013/006916 priority patent/WO2014046382A1/en
Publication of KR20140039509A publication Critical patent/KR20140039509A/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00—Digital computing or data processing equipment or methods, specially adapted for specific functions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00—Digital computers in general; Data processing equipment in general
    • G06F15/16—Combinations of two or more digital computers each having at least an arithmetic unit, a program unit and a register, e.g. for a simultaneous processing of several programs

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Human Computer Interaction (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Mathematical Physics (AREA)
  • Information Transfer Between Computers (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

The present invention relates to a system and a method for providing a context-sensitive user interface based on a markup language. The system includes: a service providing device for setting a contextual menu, based on each markup element forming a corresponding WAP or web page and user information, and providing the user terminal with the web or WAP page where the contextual menu is set to each markup element; and the user terminal for displaying the web or WAP page received from the service providing device and, when a specific object is selected on the web or WAP page, recognizing a markup element of the selected object, and displaying the contextual menu set to the recognized markup element on a certain area of the web or WAP page. [Reference numerals] (100) User terminal; (200) Service providing device; (AA) Communications network

Description

마크업 언어 기반의 문맥 인식 사용자 인터페이스 제공 시스템 및 방법{System and Method for providing Contextual User-Interface based on Mark-up Language}System and Method for providing Contextual User-Interface based on Mark-up Language}

본 발명은 마크업 언어 기반의 문맥 인식 사용자 인터페이스 제공 시스템 및 방법에 관한 것으로, 보다 상세하게는 서비스 제공 장치가 웹 또는 왑 페이지를 구성하는 각 마크업 요소와 사용자 정보를 기초로 contextual 메뉴를 설정하고, 각 마크업 요소에 contextual 메뉴가 설정된 웹 또는 왑 페이지를 사용자 단말로 전송하면, 사용자 단말은 서비스 제공 장치로부터 수신된 웹 또는 왑 페이지를 표시하고, 그 웹 또는 왑 페이지에서 특정 객체가 선택된 경우, 선택된 객체의 마크업 요소를 인식하고, 인식된 마크업 요소에 설정된 contextual 메뉴를 웹 또는 왑 페이지의 일정 영역에 표시하는 마크업 언어 기반의 문맥 인식 사용자 인터페이스 제공 시스템 및 방법에 관한 것이다.
The present invention relates to a system and method for providing a context-aware user interface based on a markup language. More specifically, the service providing apparatus sets a contextual menu based on each markup element and user information constituting a web or a swap page. When the web or the swap page having the contextual menu set to each markup element is transmitted to the user terminal, the user terminal displays the web or the swap page received from the service providing apparatus, and when a specific object is selected from the web or the swap page, A markup language-based context-aware user interface providing system and method for recognizing markup elements of a selected object and displaying a contextual menu set on the recognized markup elements in a predetermined area of a web or a swap page.

데이터 통신 기술이 발전함에 따라 초고속 인터넷 통신망이 구축되었고, 이는 인터넷의 대중화를 가져왔다. 이러한 인터넷에는 각종 정보를 알려주는 유료 및 무료 웹 사이트들이 다양하게 설치되어 있는데, 예를 들어 회사소개나 개인 정보를 홍보하기 위한 각종 홈페이지 또는 증권정보와 같은 유료 정보를 알려주는 유료 정보 사이트 및 다양한 상품 광고를 포함하여 각종 상품 목록을 화면에 표시하고, 사용자가 원할 경우 이를 인터넷상에서 구매할 수 있는 쇼핑몰 사이트들이 존재한다.As data communication technology has developed, high speed internet communication networks have been established, which has led to the popularization of the Internet. There are various paid and free web sites installed on the Internet. For example, various information products and paid information sites that provide paid information such as various homepages or securities information for promoting the company or personal information. There are shopping mall sites that display a list of various products, including advertisements, and purchase them on the Internet, if desired.

특히, 최근에는 인터넷상에 존재하는 사이트에 인터넷 주소를 통해 접속하여 각종 정보를 얻을 수 있는 이동통신 단말기가 전 세계적으로 널리 사용되고 있다. 이러한 이동통신 단말기는 기존의 인터넷 망을 통해 유선으로 정보를 주고받는 유선 인터넷을 무선 영역으로 확대한 무선 인터넷이 보편적으로 이용되고 있으며, 이동통신 단말기는 무선 웹 브라우저를 내장하고 있어서 이를 이용함에 따라 인터넷상의 웹 사이트를 검색할 수 있다.In particular, recently, mobile communication terminals capable of accessing a site existing on the Internet through an Internet address to obtain various information have been widely used worldwide. Such mobile communication terminals are commonly used in the wireless Internet, which extends the wired Internet to the wireless area, which transmits and receives information through the existing Internet network, and the mobile communication terminal has a built-in wireless web browser. Search websites.

보통 메뉴서비스 인프라는 이동통신 사업자에 의해 구축되어 IMS(IP Multimedia Subsystem)를 활용하는 각 업체에 제공된다. 이에 각 업체에서는 제공된 IMS 메뉴서비스 인프라를 활용함으로써, IMS와의 연결 및 각종 부가 서비스를 이용할 수 있다.In general, the menu service infrastructure is built by a mobile communication provider and provided to each company utilizing IMS (IP Multimedia Subsystem). Therefore, each company can use the IMS menu service infrastructure provided to connect to IMS and use various additional services.

사용자 단말에 표시되는 웹 페이지 또는 왑 페이지는 마크업이란 태그 등을 이용하여 데이터의 구조를 명기하는 마크업 언어를 기반으로 구축되어 있다. 이러한 마크업 언어는 SGML(Standard Generalized Markup Language), HTML(Hyper Text Markup Language), XML(eXtensible Markup Language) 등이 있다. The web page or the swap page displayed on the user terminal is constructed based on a markup language that specifies the structure of data using a markup tag. Such markup languages include Standard Generalized Markup Language (SGML), Hyper Text Markup Language (HTML), and eXtensible Markup Language (XML).

예컨대, HTML 기반의 페이지(혹은 애플리케이션)는 <head>, <body>, <title>, <p>(paragraph), <table>, <form>, <input> 등 해당 영역의 기능을 설명하는 다양한 tag와 그에 상응하는 데이터(주로 text)로 구성되어 있으며, 최신의 HTML5 규격에서는 좀 더 상세한 데이터 구조 및 구성 요소를 명기할 수 있는 <header>, <footer>, <nav> 등의 tag와 더불어 <data-xxx> 형태로 custom tag를 정의할 수 있는 기능이 추가되었다. For example, an HTML-based page (or application) may contain a variety of functions that describe the functionality of that region, including <head>, <body>, <title>, <p> (paragraph), <table>, <form>, and <input>. tag and its corresponding data (usually text). In the latest HTML5 specification, tags such as <header>, <footer>, and <nav> can be used to specify more detailed data structures and components. The ability to define custom tags in the form of data-xxx> has been added.

그러나 종래에는 마크업 정보를 단순히 문서의 구조를 파악하여 UI 화면(브라우저 화면)을 구성하거나 데이터의 종류를 식별하는 용도로 사용했으며, 사용자와의 인터랙션에 대응하는 용도로 활용하지는 못한 단점이 있었다. However, in the related art, the markup information is simply used to construct a UI screen (browser screen) or identify a type of data by simply grasping the structure of a document, and has a disadvantage in that it is not used for a response to a user interaction.

또한, 사용자 인터랙션 역시 해당 문서에 기 정의된 기능(메뉴의 표시/제거, 폼 데이터 입력, 버튼 입력 등)에 한정되거나, 사용자가 입력한 데이터를 서버에 전달하여 문서 전부 혹은 일부(Ajax)를 갱신하는 것이 대부분이었다.
In addition, user interaction is limited to the functions defined in the document (display / remove menu, form data input, button input, etc.), or update all or part of the document (Ajax) by passing the user input data to the server. Most of them were.

한국등록특허 제10-0950994호, 발명의 명칭 '유무선 정보기기의 사용자 인터페이스 관리 시스템 및 방법'Korean Patent No. 10-0950994, titled 'User Interface Management System and Method for Wired and Wireless Information Equipment'

본 발명은 상기한 문제점을 해결하기 위하여 안출된 것으로, 본 발명의 목적은 HTML 등과 같이 마크업 기반의 언어를 이용하는 웹/왑 페이지의 사용자 인터페이스를 마크업 요소와 사용자 정보를 조합하여 상황(context)에 적합한 UI를 제공할 수 있는 마크업 언어 기반의 문맥 인식 사용자 인터페이스 제공 시스템 및 방법을 제공하는데 있다. SUMMARY OF THE INVENTION The present invention has been made to solve the above problems, and an object of the present invention is to combine a markup element and user information in a user interface of a web / wap page using a markup-based language such as HTML. The present invention provides a markup language-based context-aware user interface providing system and method capable of providing a UI suitable for the present invention.

본 발명의 다른 목적은 마크업 언어를 이용한 웹 등의 서비스 및 응용프로그램 환경에서 기존의 정적인 UI가 아닌 마크업 요소 및 사용자 정보에 따라 변화하는 Contextual UI를 제공함으로써, 사용자의 편의성을 향상시킴과 더불어 보다 다양한 매시업 형태의 서비스를 발굴할 수 있는 마크업 언어 기반의 문맥 인식 사용자 인터페이스 제공 시스템 및 방법을 제공하는데 있다.
Another object of the present invention is to improve user convenience by providing a contextual UI that changes according to markup elements and user information instead of the existing static UI in a service and application environment such as a web using a markup language. In addition, the present invention provides a markup language-based context-aware user interface providing system and method for discovering more mashup type services.

상술한 과제를 해결하기 위한 본 발명의 일 측면에 따르면, 사용자 단말로부터 웹 또는 왑 페이지 요청 신호가 수신된 경우, 해당 왑 또는 웹 페이지를 구성하는 각 마크업 요소와 사용자 정보를 기초로 contextual 메뉴를 설정하고, 각 마크업 요소에 contextual 메뉴가 설정된 웹 또는 왑 페이지를 상기 사용자 단말에 제공하는 서비스 제공 장치, 상기 서비스 제공 장치로부터 수신된 웹 또는 왑 페이지를 표시하고, 상기 웹 또는 왑 페이지에서 특정 객체가 선택된 경우, 상기 선택된 객체의 마크업 요소를 인식하고, 상기 인식된 마크업 요소에 설정된 contextual 메뉴를 상기 웹 또는 왑 페이지의 일정 영역에 표시하는 사용자 단말을 포함하는 마크업 언어 기반의 문맥 인식 사용자 인터페이스 제공 시스템이 제공된다. According to an aspect of the present invention for solving the above problems, when a web or a swap page request signal is received from the user terminal, a contextual menu based on each markup element and user information constituting the corresponding swap or web page A service providing device which provides a web or a swap page to which the contextual menu is set in each markup element to the user terminal, a web or a swap page received from the service providing device, and displays a specific object in the web or the swap page. If is selected, a markup language-based context-aware user including a user terminal that recognizes a markup element of the selected object and displays a contextual menu set in the recognized markup element in a predetermined area of the web or the swap page. An interface providing system is provided.

상기 사용자 단말은 메뉴 이용 이력, 서비스 이용 이력, 사용자 식별정보 중 적어도 하나를 포함하는 UI 이용 이력 정보를 서비스 제공 장치로 전송하고, 상기 서비스 제공 장치는 UI 이용 이력 정보를 사용자 정보 데이터베이스에 저장할 수 있다. The user terminal may transmit UI usage history information including at least one of a menu usage history, a service usage history, and user identification information to a service providing apparatus, and the service providing apparatus may store UI usage history information in a user information database. .

본 발명의 다른 측면에 따르면, 통신망을 통해 서비스 제공 장치와 통신을 수행하는 통신부, 상기 통신부를 통해 수신된 웹 또는 왑 페이지를 표시하는 출력부, 상기 출력부에 표시된 웹 또는 왑 페이지에서 특정 객체가 선택된 경우, 상기 선택된 객체의 마크업 요소를 인식하고, 상기 인식된 마크업 요소에 설정된 contextual 메뉴를 상기 웹 또는 왑 페이지의 일정 영역에 표시하는 브라우저 엔진을 포함하는 사용자 단말이 제공된다. According to another aspect of the present invention, a communication unit for communicating with a service providing device through a communication network, an output unit for displaying a web or swap page received through the communication unit, a specific object in the web or swap page displayed on the output unit When selected, a user terminal including a browser engine for recognizing a markup element of the selected object and displaying a contextual menu set in the recognized markup element in a predetermined area of the web or the swap page is provided.

상기 브라우저 엔진은 상기 표시된 contextual 메뉴에서 특정 메뉴가 선택된 경우, 상기 특정 메뉴에 대한 동작을 수행하고, 메뉴 이용 이력, 서비스 이용 이력, 사용자 식별정보 중 적어도 하나를 포함하는 UI 이용 이력 정보를 서비스 제공 장치로 전송할 수 있다. When the specific menu is selected from the displayed contextual menu, the browser engine performs an operation on the specific menu, and provides the UI usage history information including at least one of a menu usage history, a service usage history, and user identification information. Can be sent to.

본 발명의 또 다른 측면에 따르면, 각 서비스의 웹 또는 왑 페이지에 대한 정보가 저장된 서비스 정보 데이터베이스, 사용자 정보가 저장된 사용자 정보 데이터베이스, 사용자 단말로부터 웹 또는 왑 페이지 요청 신호가 수신된 경우, 상기 서비스 정보 데이터베이스로부터 해당 웹 또는 왑 페이지를 획득하고, 상기 사용자 정보 데이터베이스로부터 해당 사용자의 사용자 정보를 획득하며, 상기 획득된 웹 또는 왑 페이지를 구성하는 각 마크업 요소와 상기 사용자 정보를 기초로 contextual 메뉴를 설정하는 contextual 메뉴 설정부, 상기 각 마크업 요소에 contextual 메뉴가 설정된 웹 또는 왑 페이지를 상기 사용자 단말에 제공하는 서비스 처리부를 포함하는 서비스 제공 장치가 제공된다. According to another aspect of the present invention, a service information database storing information on a web or a swap page of each service, a user information database storing the user information, when the web or the swap page request signal is received from the user terminal, the service information Acquire a corresponding web or swap page from a database, obtain user information of the corresponding user from the user information database, and set a contextual menu based on each markup element and the user information constituting the obtained web or swap page. There is provided a service providing apparatus including a contextual menu setting unit and a service processing unit for providing a web or a swap page having a contextual menu set to each markup element to the user terminal.

상기 사용자 정보는 사용자가 사용중인 SNS 관련 정보, 북마크, 방문기록, 검색 이력, 취미/선호도, 컨텐츠/서비스 이용 이력, UI 이용 이력 중 적어도 하나를 포함할 수 있다. The user information may include at least one of SNS-related information, a bookmark, a visit history, a search history, a hobby / preference, a content / service usage history, and a UI usage history that the user is using.

상기 contextual 메뉴 설정부는 각 마크업 요소별로 상기 사용자 정보에 기초하여 사용자가 자주 사용하는 메뉴 또는 선호하는 메뉴들을 선정하고, 상기 선정된 메뉴들에 우선순위가 부여된 contextual 메뉴를 설정할 수 있다. The contextual menu setting unit may select a menu frequently used or preferred by a user based on the user information for each markup element, and set a contextual menu to which priority is given to the selected menus.

또한, 상기 contextual 메뉴 설정부는 복수 개의 마크업 요소와 문서 구조(DOM Tree)를 활용하여 다양한 형태의 Contextual 메뉴를 구성할 수 있다. The contextual menu setting unit may configure various types of contextual menus by using a plurality of markup elements and a document structure (DOM Tree).

상기 contextual 메뉴는 해당 마크업 요소에서 기본으로 제공하는 기본 메뉴, 기본 기능을 확장한 확장 메뉴, Open-API와 결합된 매시업(Mash-up) 서비스와 관련된 매시업 메뉴, 사용자 정보에 기초하여 생성된 개인화 서비스 메뉴 중 적어도 하나를 포함할 수 있다. The contextual menu includes a basic menu provided by a corresponding markup element, an extended menu that extends basic functions, a mashup menu related to a mash-up service combined with Open-API, and a personalization generated based on user information. It may include at least one of the service menu.

본 발명의 또 다른 측면에 따르면, 서비스 제공 장치는 사용자 단말로부터 웹 또는 왑 페이지 요청 신호가 수신된 경우, 해당 왑 또는 웹 페이지를 구성하는 각 마크업 요소와 사용자 정보를 기초로 contextual 메뉴를 설정하는 단계, 상기 서비스 제공 장치는 각 마크업 요소에 contextual 메뉴가 설정된 웹 또는 왑 페이지를 상기 사용자 단말에 제공하는 단계, 상기 사용자 단말은 상기 서비스 제공 장치로부터 수신된 웹 또는 왑 페이지를 표시하고, 상기 웹 또는 왑 페이지에서 특정 객체가 선택된 경우, 상기 선택된 객체의 마크업 요소를 인식하고, 상기 인식된 마크업 요소에 설정된 contextual 메뉴를 상기 마크업 페이지의 일정 영역에 표시하는 단계를 포함하는 마크업 언어 기반의 문맥 인식 사용자 인터페이스 제공 방법이 제공된다. According to another aspect of the present invention, the service providing apparatus for setting a contextual menu based on each markup element and user information constituting the corresponding swap or web page, when a web or swap page request signal is received from the user terminal The service providing apparatus may provide a web or a swap page having a contextual menu set to each markup element to the user terminal. The user terminal may display a web or a swap page received from the service providing apparatus. Or when a specific object is selected in a swap page, recognizing a markup element of the selected object, and displaying a contextual menu set in the recognized markup element in a predetermined area of the markup page. A context aware user interface providing method is provided.

상기 마크업 언어 기반의 문맥 인식 사용자 인터페이스 제공 방법은 상기 사용자 단말은 상기 표시된 contextual 메뉴에서 특정 메뉴가 선택된 경우, 상기 특정 메뉴에 대한 동작을 수행하고, 메뉴 이용 이력, 서비스 이용 이력, 사용자 식별정보 중 적어도 하나를 포함하는 UI 이용 이력 정보를 서비스 제공 장치로 전송하는 단계, 상기 서비스 제공 장치는 상기 UI 이용 이력을 사용자 정보 데이터베이스에 저장하는 단계를 더 포함할 수 있다. In the markup language-based context-aware user interface providing method, when a specific menu is selected from the displayed contextual menu, the user terminal performs an operation on the specific menu, and among menu use history, service use history, and user identification information. The method may further include transmitting UI usage history information including at least one to a service providing apparatus, wherein the service providing apparatus stores the UI usage history in a user information database.

본 발명의 또 다른 측면에 따르면, 서비스 제공 장치가 마크업 언어 기반의 문맥 인식 사용자 인터페이스를 제공하는 방법에 있어서, 사용자 단말로부터 웹 또는 왑 페이지 요청 신호가 수신된 경우, 해당 웹 또는 왑 페이지와 해당 사용자의 사용자 정보를 획득하는 단계, 상기 획득된 왑 또는 웹 페이지를 구성하는 각 마크업 요소와 상기 사용자 정보를 기초로 contextual 메뉴를 설정하는 단계, 상기 각 마크업 요소에 contextual 메뉴가 설정된 웹 또는 왑 페이지를 상기 사용자 단말에 제공하는 단계를 포함하는 마크업 언어 기반의 문맥 인식 사용자 인터페이스 제공 방법이 제공된다. According to another aspect of the present invention, in a method for providing a context-aware user interface based on a markup language in a service providing apparatus, when a web or swap page request signal is received from a user terminal, a corresponding web or swap page and a corresponding page are provided. Obtaining user information of a user, setting up each markup element constituting the acquired swap or web page and a contextual menu based on the user information, web or swap having a contextual menu set on each markup element Provided is a markup language based context aware user interface providing method comprising providing a page to the user terminal.

본 발명의 또 다른 측면에 따르면, 사용자 단말로부터 웹 또는 왑 페이지 요청 신호가 수신된 경우, 해당 웹 또는 왑 페이지와 해당 사용자의 사용자 정보를 획득하는 단계, 상기 획득된 왑 또는 웹 페이지를 구성하는 각 마크업 요소와 상기 사용자 정보를 기초로 contextual 메뉴를 설정하는 단계, 상기 각 마크업 요소에 contextual 메뉴가 설정된 웹 또는 왑 페이지를 상기 사용자 단말에 제공하는 단계를 포함하는 마크업 언어 기반의 문맥 인식 사용자 인터페이스 제공 방법이 프로그램으로 기록된 전자장치에서 판독 가능한 기록매체가 제공된다.According to still another aspect of the present invention, when a web or swap page request signal is received from a user terminal, acquiring a corresponding web or swap page and user information of the corresponding user, and configuring each of the obtained swap or web pages Setting up a contextual menu based on a markup element and the user information, and providing a web or swap page with a contextual menu set to each markup element to the user terminal. Provided is a recording medium readable by an electronic device in which a method of providing an interface is recorded by a program.

본 발명의 또 다른 측면에 따르면, 사용자 단말이 마크업 언어 기반의 문맥 인식 사용자 인터페이스를 제공하는 방법에 있어서, 현재 표시된 웹 또는 왑 페이지에서 특정 객체가 선택된 경우, 상기 선택된 객체의 마크업 요소를 인식하는 단계, 상기 인식된 마크업 요소에 설정된 contextual 메뉴를 상기 페이지의 일정 영역에 표시하는 단계, 상기 표시된 contextual 메뉴에서 특정 메뉴가 선택된 경우, 상기 특정 메뉴에 대한 동작을 수행하고, 메뉴 이용 이력, 서비스 이용 이력, 사용자 식별정보 중 적어도 하나를 포함하는 UI 이용 이력 정보를 서비스 제공 장치로 전송하는 단계를 포함하는 마크업 언어 기반의 문맥 인식 사용자 인터페이스 제공 방법이 제공된다. According to another aspect of the present invention, in a method of providing a markup language-based context-aware user interface, a user terminal recognizes a markup element of the selected object when a specific object is selected in the currently displayed web or swap page. Displaying a contextual menu set in the recognized markup element in a predetermined region of the page; when a specific menu is selected in the displayed contextual menu, performing an operation on the specific menu, and using a menu history and service Provided is a method for providing a context-aware user interface based on a markup language, the method including transmitting UI usage history information including at least one of a usage history and user identification information to a service providing apparatus.

본 발명의 또 다른 측면에 따르면, 현재 표시된 웹 또는 왑 페이지에서 특정 객체가 선택된 경우, 상기 선택된 객체의 마크업 요소를 인식하는 단계, 상기 인식된 마크업 요소에 설정된 contextual 메뉴를 상기 페이지의 일정 영역에 표시하는 단계, 상기 표시된 contextual 메뉴에서 특정 메뉴가 선택된 경우, 상기 특정 메뉴에 대한 동작을 수행하고, 메뉴 이용 이력, 서비스 이용 이력, 사용자 식별정보 중 적어도 하나를 포함하는 UI 이용 이력 정보를 서비스 제공 장치로 전송하는 단계를 포함하는 마크업 언어 기반의 문맥 인식 사용자 인터페이스 제공 방법이 프로그램으로 기록된 전자장치에서 판독 가능한 기록매체가 제공된다.
According to another aspect of the present invention, when a specific object is selected in the currently displayed web or swap page, recognizing a markup element of the selected object, a contextual menu set on the recognized markup element, the predetermined area of the page If the specific menu is selected in the displayed contextual menu, performing the operation on the specific menu, and provides a service using UI history information including at least one of a menu usage history, a service usage history, and user identification information. Provided is a recording medium readable by an electronic device in which a method for providing a markup language-based context-aware user interface comprising transmitting to a device is recorded.

본 발명에 따르면, HTML 등과 같이 마크업 기반의 언어를 이용하는 웹/왑 페이지의 사용자 인터페이스를 마크업 요소와 사용자 정보를 조합하여 상황(context)에 적합한 UI를 제공함으로써, 기존의 정적인 형태의 사용자 인터페이스를 보다 쉽게 동적인 형태로 제공할 수 있으며 해당 기능을 다양하게 조합하여 고 수준의 문맥 기반 사용자 인터페이스를 구축할 수 있다.According to the present invention, a user interface of a web / wap page using a markup-based language such as HTML provides a UI suitable for a context by combining markup elements and user information, thereby providing an existing static type of user. Interfaces can be more easily provided in a dynamic form, and various combinations of these functions can be used to build high-level context-based user interfaces.

또한, 마크업 언어를 이용한 웹 등의 서비스 및 응용프로그램 환경에서 기존의 정적인 UI가 아닌 마크업 요소 및 사용자 정보에 따라 변화하는 Contextual UI를 제공함으로써 사용자의 편의성을 향상시킴과 더불어 보다 다양한 매시업 형태의 서비스를 발굴할 수 있다. In addition, in the service and application environment such as web using markup language, it provides not only the existing static UI but also the contextual UI that changes according to the markup element and user information to improve user convenience and more mashup forms. To discover services.

또한, custom tag를 포함한 다양한 마크업 정보를 기반으로 입력 상황(context)을 파악하여 사용자에게 보다 동적인 UI를 제공할 수 있다.
In addition, based on various markup information including custom tags, an input context can be grasped to provide a user with a more dynamic UI.

도 1은 본 발명의 실시예에 따른 마크업 언어 기반의 문맥 인식 사용자 인터페이스 제공 시스템을 나타낸 도면.
도 2는 본 발명의 실시예에 따른 사용자 단말의 구성을 개략적으로 나타낸 블럭도.
도 3은 본 발명의 실시예에 따른 서비스 제공 장치의 구성을 개략적으로 나타낸 블럭도.
도 4는 본 발명에 따른 마크업 언어 기반의 문맥 인식 사용자 인터페이스 제공 방법을 나타낸 도면.
도 5는 본 발명에 따른 마크업 언어 기반의 문맥 인식 사용자 인터페이스 제공 방법을 설명하기 위한 화면 예시도. 1 is a diagram illustrating a system for providing a context-aware user interface based on a markup language according to an embodiment of the present invention.
2 is a block diagram schematically illustrating a configuration of a user terminal according to an embodiment of the present invention;
3 is a block diagram schematically showing a configuration of a service providing apparatus according to an embodiment of the present invention;
4 is a diagram illustrating a method for providing a context-aware user interface based on a markup language according to the present invention.
5 is an exemplary screen illustrating a method of providing a markup language based context aware user interface according to the present invention.

본 발명의 전술한 목적과 기술적 구성 및 그에 따른 작용 효과에 관한 자세한 사항은 본 발명의 명세서에 첨부된 도면에 의거한 이하 상세한 설명에 의해 보다 명확하게 이해될 것이다.The foregoing and other objects, features, and advantages of the present invention will become more apparent from the following detailed description taken in conjunction with the accompanying drawings, in which: FIG.

도 1은 본 발명의 실시예에 따른 마크업 언어 기반의 문맥 인식 사용자 인터페이스 제공 시스템을 나타낸 도면이다. 1 is a diagram illustrating a system for providing a context-aware user interface based on a markup language according to an exemplary embodiment of the present invention.

도 1을 참조하면, 마크업 언어 기반의 문맥 인식 사용자 인터페이스 제공 시스템은 사용자 단말(100)의 요청에 따라 웹 또는 왑 페이지를 제공하는 서비스 제공 장치(200)를 포함한다. Referring to FIG. 1, the markup language-based context aware user interface providing system includes a service providing apparatus 200 that provides a web or a swap page according to a request of the user terminal 100.

사용자 단말(100)은 서비스 제공 장치(200)로부터 수신된 웹 또는 왑 페이지를 표시하고, 표시된 웹 또는 왑 페이지에서 특정 객체가 선택된 경우, 선택된 객체의 마크업 요소를 인식하고, 인식된 마크업 요소에 설정된 contextual 메뉴를 페이지의 일정 영역에 표시한다. 여기서, 객체는 웹 또는 왑 페이지에 표시된 이미지, 텍스트 등을 포함할 수 있고, 마크업 요소는 <head>, <body>, <title>, <p>(paragraph), <table>, <form>, <input>, <img> 등의 태그를 의미할 수 있다. The user terminal 100 displays the web or the swap page received from the service providing apparatus 200, and when a specific object is selected from the displayed web or the swap page, recognizes the markup element of the selected object and recognizes the markup element. Display the contextual menu set in the selected area of the page. Here, the object may include an image, text, and the like displayed on a web or a swap page, and the markup element may include <head>, <body>, <title>, <p> (paragraph), <table>, and <form>. It can mean a tag such as <input> or <img>.

또한, 사용자 단말(100)은 상기 인식된 마크업 요소에 설정된 contextual 메뉴를 사용자 정보 또는 메뉴 이용 이력 정보를 기초로 순위화하여 표시할 수 있다. In addition, the user terminal 100 may rank and display the contextual menu set in the recognized markup element based on user information or menu usage history information.

또한, 사용자 단말(100)은 contextual 메뉴에서 특정 메뉴가 선택된 경우, 선택된 특정 메뉴에 대한 동작을 수행하고, 메뉴 이용 이력, 서비스 이용 이력, 사용자 식별정보 등을 포함하는 UI 이용 이력 정보를 서비스 제공 장치(200)로 전송한다. 상기 UI 이용 이력 정보는 추후 사용자가 웹 또는 왑 페이지의 제공을 요청할 경우, 사용자의 contextual 메뉴를 설정하는데 이용될 수 있다.In addition, when a specific menu is selected in the contextual menu, the user terminal 100 performs an operation on the selected specific menu, and provides the service usage apparatus with UI usage history information including a menu usage history, a service usage history, and user identification information. Send to 200. The UI usage history information may be used to set the user's contextual menu when the user requests the provision of the web or the swap page.

이러한 사용자 단말(100)은 통신 기능 및 근거리 통신 기능을 탑재한 사용자 장치라면 어느 것이라도 적용될 수 있다. 예를 들면, 노트북, 무선통신 단말, 스마트폰(Smart phone), PMP(Portable Media Player), PDA(Personal Digital Assistant), 타블렛 PC(Tablet PC), 셋탑박스(Set-top box), 스마트 TV 등 다양한 장치가 될 수 있다.The user terminal 100 can be applied to any user device equipped with a communication function and a local communication function. For example, a notebook computer, a wireless communication terminal, a smart phone, a portable media player (PMP), a personal digital assistant (PDA), a tablet PC, a set- It can be a variety of devices.

사용자 단말(100)에 대한 상세한 설명은 도 2를 참조하기로 한다. A detailed description of the user terminal 100 will be given with reference to FIG.

서비스 제공 장치(200)는 사용자 단말(100)로부터 웹 또는 왑 페이지 요청 신호가 수신된 경우, 해당 왑 또는 웹 페이지를 구성하는 각 마크업 요소와 사용자 정보를 기초로 contextual 메뉴를 설정하고, 각 마크업 요소에 contextual 메뉴가 설정된 웹 또는 왑 페이지를 사용자 단말(100)에 제공한다. 서비스 제공 장치(200)는 사용자 정보를 기초로 contextual 메뉴를 설정하므로, 동일한 웹/왑 페이지를 제공할지라도 사용자마다 다른 contextual 메뉴를 제공할 수 있다.When the service providing apparatus 200 receives a web or a swap page request signal from the user terminal 100, the service providing apparatus 200 sets a contextual menu based on each markup element and user information constituting the corresponding swap or web page, and each mark. A web or a swap page in which a contextual menu is set in the up element is provided to the user terminal 100. Since the service providing apparatus 200 sets up a contextual menu based on user information, the service providing apparatus 200 may provide a different contextual menu for each user even if the same web / wap page is provided.

또한, 서비스 제공 장치(200)는 사용자 단말(100)로부터 메뉴 이용 이력, 서비스 이용 이력, 사용자 식별정보 등을 포함하는 UI 이용 이력 정보가 수신된 경우, 수신된 UI 이용 이력 정보를 저장한다. In addition, when the service providing apparatus 200 receives UI usage history information including a menu usage history, a service usage history, user identification information, and the like from the user terminal 100, the service providing apparatus 200 stores the received UI usage history information.

서비스 제공 장치(200)에 대한 상세한 설명은 도 3을 참조하기로 한다. The service providing apparatus 200 will be described in detail with reference to FIG.

도 2는 본 발명의 실시예에 따른 사용자 단말의 구성을 개략적으로 나타낸 블럭도이다. 2 is a block diagram schematically showing the configuration of a user terminal according to an embodiment of the present invention.

도 2를 참조하면, 사용자 단말(100)은 통신망을 통해 데이터를 송수신하는 통신부(110), 입력부(120), 출력부(130), 저장부(140), 브라우저 엔진(150)을 포함한다. Referring to FIG. 2, the user terminal 100 includes a communication unit 110, an input unit 120, an output unit 130, a storage unit 140, and a browser engine 150 for transmitting and receiving data through a communication network.

통신부(110)는 사용자 단말(100)과 서비스 제공 장치를 통신망을 통해 상호 연결시키는 통신 수단으로서, 예를 들어 이동통신, 위성통신 등의 무선 통신모듈, 인터넷 등의 유선 통신모듈, 와이파이 등의 근거리 무선 통신모듈 등을 포함할 수 있다.The communication unit 110 is a communication unit that interconnects the user terminal 100 and the service providing apparatus through a communication network. The communication unit 110 may be a wireless communication module such as mobile communication or satellite communication, a wired communication module such as the Internet, A wireless communication module, and the like.

입력부(120)는 사용자 단말(100)의 동작 제어를 위한 사용자 요청을 입력받기 위한 수단으로서, 사용자의 조작에 따라서 사용자의 요청을 전기 신호로 변환한다. 입력부(120)는 사용자로부터 문자, 숫자 및 텍스트 정보를 입력받는 키 입력 수단으로 예컨대, 키 입력 수단은 키보드, 키패드, 터치 스크린 등으로 구현될 수 있다. The input unit 120 is a means for receiving a user request for controlling the operation of the user terminal 100. The input unit 120 converts a user's request into an electric signal according to a user's operation. The input unit 120 is a key input means for receiving letters, numbers, and text information from a user. For example, the key input means may be implemented as a keyboard, a keypad, a touch screen, or the like.

출력부(130)는 사용자 단말(100)이 접속한 웹 사이트 데이터를 표시한다. 또한, 출력부(130)는 애플리케이션 구동에 따른 화면 정보를 디스플레이하는 디스플레이 수단으로, 이러한 출력부(130)는 LCD(Liquid Crystal Display), OLED(Organic Light Emitting Diodes) 등 소형 평판 디스플레이장치로 구현되는 것이 바람직하며, 전술한 입력부(120)와 겹쳐 터치 스크린 형태로 구현될 수 있다.The output unit 130 displays web site data accessed by the user terminal 100. The output unit 130 is a display unit for displaying screen information according to application driving. The output unit 130 is implemented as a small flat panel display device such as a liquid crystal display (LCD) or an organic light emitting diode (OLED) And may be implemented as a touch screen by overlapping with the input unit 120 described above.

저장부(140)는 사용자 단말(100)의 동작 제어 시 필요한 프로그램과, 그 프로그램 수행 중에 발생되는 데이터를 저장한다.The storage unit 140 stores a program necessary for controlling the operation of the user terminal 100 and data generated during the execution of the program.

브라우저 엔진(150)은 통신부(110)를 통해 서비스 제공 장치에 웹 또는 왑 페이지를 요청하고, 서비스 제공 장치로부터 각 마크업 요소에 contextual 메뉴가 설정된 웹 또는 왑 페이지를 수신하여 출력부(130)를 통해 표시한다. The browser engine 150 requests the web or the swap page to the service providing apparatus through the communication unit 110, and receives the web or the swap page having the contextual menu set to each markup element from the service providing apparatus to output the output unit 130. Display through.

또한, 브라우저 엔진(150)은 출력부(130)에 표시된 웹 또는 왑 페이지에서 특정 객체가 선택된 경우, 선택된 객체의 마크업 요소를 인식하고, 인식된 마크업 요소에 설정된 contextual 메뉴를 상기 웹 또는 왑 페이지의 일정 영역에 표시한다. 이때, 브라우저 엔진(150)은 팝업 창 등의 형태로 contextual 메뉴를 웹 또는 왑 페이지의 일정 영역에 표시할 수 있다. In addition, when a specific object is selected in the web or swap page displayed on the output unit 130, the browser engine 150 recognizes a markup element of the selected object and displays the contextual menu set in the recognized markup element. Display in a certain area of the page. In this case, the browser engine 150 may display a contextual menu in a predetermined area of the web or the swap page in the form of a pop-up window.

또한, 브라우저 엔진(150)은 contextual 메뉴에서 특정 메뉴가 선택된 경우, 특정 메뉴에 대한 동작을 수행하고, 메뉴 이용 이력, 서비스 이용 이력, 사용자 식별정보 등을 포함하는 UI 이용 이력 정보를 서비스 제공 장치로 전송한다. 이때, 브라우저 엔진(150)은 UI 이용 이력 정보를 저장부(140)에 저장할 수도 있다. In addition, when a specific menu is selected in the contextual menu, the browser engine 150 performs an operation on a specific menu and transmits UI usage history information including a menu usage history, a service usage history, and user identification information to the service providing apparatus. send. In this case, the browser engine 150 may store the UI usage history information in the storage 140.

도 3은 본 발명의 실시예에 따른 서비스 제공 장치의 구성을 개략적으로 나타낸 블럭도이다.3 is a block diagram schematically showing a configuration of a service providing apparatus according to an embodiment of the present invention.

도 3을 참조하면, 서비스 제공 장치(200)는 서비스 정보 데이터베이스(210), 사용자 정보 데이터베이스(220), contextual 메뉴 설정부(230), 서비스 처리부(240)를 포함한다. Referring to FIG. 3, the service providing apparatus 200 may include a service information database 210, a user information database 220, a contextual menu setting unit 230, and a service processing unit 240.

서비스 정보 데이터베이스(210)에는 각 서비스의 웹 또는 왑 페이지에 대한 정보가 저장되어 있다. 웹 또는 왑 페이지는 마크업 언어를 기반으로 구성되어 있고, 웹 또는 왑 페이지에는 적어도 하나 이상의 객체가 포함될 수 있는데, 여기서 객체는 웹 또는 왑 페이지를 구성하는 각 마크업 요소를 의미한다. 즉, 객체는 웹 또는 왑 페이지에 포함된 마크업 태그로 이루어져 있는데, 마크업 언어가 예를 들어 HTML(HyperText Markup Language)인 경우 객체에는 하이퍼링크 연결을 나타내는 <a> 객체, 이미지를 나타내는 <img> 객체, 기타 소정의 테이블을 나타내는 <table> 객체 등이 모두 포함된다.The service information database 210 stores information about a web or a swap page of each service. The web or the swap page is constructed based on the markup language, and the web or the swap page may include at least one or more objects, where the objects mean each markup element constituting the web or the swap page. In other words, an object consists of markup tags embedded in a web or swap page. If the markup language is, for example, HyperText Markup Language (HTML), the object has an <a> object representing a hyperlink link, and an <img representing an image. > Objects, <table> objects representing other predetermined tables, and the like.

사용자 정보 데이터베이스(220)에는 사용자 식별정보, 사용자가 사용중인 SNS 관련 정보, 북마크, 방문기록, 검색 이력, 취미/선호도, 컨텐츠/서비스 이용 이력, UI 이용 이력 등을 포함하는 사용자 정보가 저장되어 있다. 여기서, 사용자 식별정보는 사용자 단말 식별정보, ID/비밀번호 등을 포함할 수 있다. The user information database 220 stores user information including user identification information, SNS related information, bookmarks, visit history, search history, hobby / preference, content / service use history, UI use history, and the like. . Here, the user identification information may include user terminal identification information, ID / password and the like.

contextual 메뉴 설정부(230)는 사용자 단말로부터 웹 또는 왑 페이지 요청 신호가 수신된 경우, 서비스 정보 데이터베이스(210)로부터 해당 웹 또는 왑 페이지를 획득하고, 사용자 정보 데이터베이스(220)로부터 해당 사용자의 사용자 정보를 획득한다. 그런 후, contextual 메뉴 설정부(230)는 획득된 왑 또는 웹 페이지를 구성하는 각 마크업 요소와 사용자 정보를 기초로 contextual 메뉴를 설정한다. 여기서, contextual 메뉴는 해당 마크업 요소에서 기본으로 제공하는 기본 메뉴, 기본 기능을 확장한 확장 메뉴, Open-API와 결합된 매시업(Mash-up) 서비스와 관련된 매시업 메뉴, 사용자 정보에 기초하여 생성된 개인화 서비스 메뉴 등을 포함할 수 있다. The contextual menu setting unit 230 obtains the web or the swap page from the service information database 210 when the web or the swap page request signal is received from the user terminal, and user information of the user from the user information database 220. Acquire it. Thereafter, the contextual menu setting unit 230 sets a contextual menu based on each markup element and user information constituting the acquired swap or web page. In this case, the contextual menu is generated based on the basic menu provided by the corresponding markup element, the extended menu which extends the basic functions, the mashup menu related to the mash-up service combined with the Open-API, and the user information. It may include a personalized service menu.

예를 들어, <img>에 설정된 contextual 메뉴에 대해 설명하기로 한다. For example, the contextual menu set in <img> will be described.

<img>의 경우, contextual 메뉴 설정부(230)는 기본 메뉴, 확장 메뉴, 매시업(Mash-up) 메뉴, 개인화 서비스 메뉴 등을 포함하는 contextual 메뉴를 설정할 수 있다. <img>에 설정된 기본 메뉴는 이미지의 저장, 인쇄 등 브라우저의 내장 기능을 대체하거나 필터 효과 적용, 확대/축소 등 기본적인 이미지 처리 관련 기능을 제공하는 메뉴일 수 있다. <img>에 설정된 확장 메뉴는 웹 기반의 이미지 편집 프로그램 구동, 이메일 전송 등의 다양한 확장 기능을 제공하는 메뉴일 수 있다. <img>에 설정된 매시업(Mash-up) 메뉴는 Open-API를 활용하여 SNS, 웹 스토리지 업로드 등의 매시업 서비스를 제공하는 메뉴일 수 있다. <img>에 설정된 개인화 서비스 메뉴는 사용자 정보를 기초로 사용자가 자주 사용하는 메뉴를 우선적으로 배치하는 메뉴로, 예컨대 북마크를 이용하여 사용자가 자주 이용하는 사이트를 메뉴로 제공할 수 있고, 검색이력을 이용하여 사용자가 자주 이용하는 검색어에 대한 정보를 메뉴로 제공할 수도 있다.In the case of <img>, the contextual menu setting unit 230 may set a contextual menu including a basic menu, an extended menu, a mash-up menu, a personalization service menu, and the like. The basic menu set in the <img> may be a menu that replaces a built-in function of the browser such as saving and printing an image, or provides a basic image processing related function such as applying a filter effect or zooming in / out. The extension menu set in <img> may be a menu that provides various extension functions such as running a web-based image editing program and sending an e-mail. The mash-up menu set in <img> may be a menu that provides mashup services such as SNS and web storage upload using Open-API. The personalization service menu set in <img> is a menu that preferentially arranges a menu frequently used by a user based on user information. For example, a bookmark can be used to provide a site frequently used by a user, and a search history is used. Thus, information about a keyword frequently used by a user may be provided as a menu.

또한, contextual 메뉴 설정부(230)는 각 마크업 요소별로 사용자 정보에 기초하여 사용자가 자주 사용하는 메뉴 또는 선호하는 메뉴들을 선정하고, 선정된 메뉴들에 우선순위가 부여된 contextual 메뉴를 설정할 수도 있다. 예를 들어, 이미지 요소의 편집을 선호하는 사용자에게는 이미지 편집 메뉴의 노출을 높이고, SNS 업로드를 선호하는 사용자에게는 SNS 업로드 메뉴를 최상위에 배치할 수 있다. 뿐만 아니라 관련 이미지에 대한 사용자 통계 정보를 이용하여 타겟 사용자의 연령이나 기호에 적합한 메뉴를 제공할 수도 있다. In addition, the contextual menu setting unit 230 may select a menu frequently used or preferred by the user based on user information for each markup element, and set a contextual menu to which priority is given to the selected menus. . For example, a user who prefers to edit an image element may increase exposure of an image editing menu, and a user who prefers SNS upload may place an SNS upload menu at the top. In addition, a menu suitable for the age or preference of the target user may be provided using the user statistical information on the related image.

또한, contextual 메뉴 설정부(230)는 복수 개의 마크업 요소와 문서 구조(DOM Tree)를 활용하여 다양한 형태의 Contextual 메뉴를 구성할 수도 있다.In addition, the contextual menu setting unit 230 may configure various types of contextual menus using a plurality of markup elements and a document structure (DOM Tree).

예를 들어, <form> 태그와 다른 마크업 요소를 조합하여 Contextual 메뉴를 구성하는 방법에 대해 설명하기로 한다. 폼(form)은 사용자 입력을 묶어 서비스 제공 장치에 전달하기 위한 태그로서, <form> 태그 안에는 버튼, 라디오버튼, 체크박스, 파일 등 사용자의 입력을 처리할 수 있는 다양한 요소(element)들이 포함될 수 있다. 따라서, contextual 메뉴 설정부(230)는 폼 요소와 다른 마크업 요소를 조합함으로써, 사용자가 복잡하게 입력해야 하는 동작을 단순하게 처리할 수 있도록 하는 Contextual 메뉴를 제공할 수 있다. 예컨대, 폼 요소와 텍스트 요소의 조합, 폼 요소와 이미지 요소의 조합, 요소 클리핑 등의 다양한 마크업 요소를 조합하여 contextual 메뉴를 설정할 수 있다. 폼 요소와 텍스트 요소의 조합의 경우, 폼 요소를 포함하는 웹/왑 페이지에서 특정 텍스트를 선택(drag)한 후 마우스 오른쪽 버튼을 클릭하면 폼 요소의 어떤 입력 요소에 해당 텍스트를 넣을지 선택하는 메뉴가 나오도록 할 수 있다. 또한, 폼 요소와 이미지 요소의 조합의 경우, 폼 요소를 포함하는 웹/왑 페이지에서 특정 이미지를 선택한 후 마우스 오른쪽 버튼을 클릭하면 폼 요소의 이미지 정보 입력 혹은 이미지 파일 전송 등의 메뉴를 제공할 수 있다. 여기에서는 마우스 오른쪽 버튼을 클릭하는 것으로 contextual 메뉴가 표시되도록 하는 것을 설명하였으나, 마우스 버튼 조작 외에 터치 입력(예컨대 롱탭 등임) 등을 통해서 contextual 메뉴가 표시되도록 할 수도 있다. For example, we will describe how to construct a contextual menu by combining a <form> tag with other markup elements. A form is a tag for binding user input to a service providing device. A <form> tag may include various elements that can process user input such as a button, a radio button, a check box, and a file. have. Accordingly, the contextual menu setting unit 230 may provide a contextual menu that allows the user to simply process an operation that requires complicated input by combining form elements and other markup elements. For example, a contextual menu may be set by combining various markup elements such as a combination of form elements and text elements, a combination of form elements and image elements, and element clipping. For combinations of form elements and text elements, when you drag a specific text in the web / wrapper page that contains the form element, and then right-click, a menu that selects which input element of the form element to put the text into You can get it out. In addition, in the case of the combination of the form element and the image element, when selecting a specific image in the web / wap page including the form element and clicking the right mouse button, a menu such as inputting image information or transferring an image file of the form element can be provided. have. Herein, the contextual menu is displayed by clicking the right mouse button. However, the contextual menu may be displayed through touch input (for example, a long tap) in addition to the mouse button operation.

서비스 처리부(240)는 각 마크업 요소에 contextual 메뉴가 설정된 웹 또는 왑 페이지를 사용자 단말에 제공한다. The service processor 240 provides the user terminal with a web or a swap page in which a contextual menu is set for each markup element.

또한, 서비스 처리부(240)는 사용자 단말로부터 메뉴 이용 이력, 서비스 이용 이력, 사용자 식별정보 등을 포함하는 UI 이용 이력 정보가 수신된 경우, 수신된 UI 이용 이력 정보를 사용자 정보 데이터베이스(220)에 저장한다. In addition, the service processor 240 stores the received UI use history information in the user information database 220 when the UI use history information including a menu use history, service use history, user identification information, etc. is received from the user terminal. do.

사용자 정보 데이터베이스(220)에 저장된 UI 이용 이력 정보는 추후 사용자가 웹/왑 페이지를 요청하는 경우, 사용자의 contextual 메뉴를 설정하는데 이용될 수 있다. The UI usage history information stored in the user information database 220 may be used to set up the user's contextual menu when the user requests a web / wap page later.

도 4는 본 발명에 따른 마크업 언어 기반의 문맥 인식 사용자 인터페이스 제공 방법을 나타낸 도면, 도 5는 본 발명에 따른 마크업 언어 기반의 문맥 인식 사용자 인터페이스 제공 방법을 설명하기 위한 화면 예시도이다. 4 is a diagram illustrating a method of providing a context-aware user interface based on markup language according to the present invention, and FIG. 5 is a diagram illustrating a method of providing a context-aware user interface based on markup language according to the present invention.

도 4를 참조하면, 사용자 단말이 서비스 제공 장치에 접속하여 웹 또는 왑 페이지를 요청하면(S402), 서비스 제공 장치는 해당 웹/왑 페이지를 구성하는 각 마크업 요소와 사용자 정보를 기초로 contextual 메뉴를 설정한다(S404). 즉, 사용자 단말이 웹/왑 페이지를 요청하면, 서비스 제공 장치는 해당 웹/왑 페이지를 구성하는 마크업 요소를 확인하고, 사용자 식별정보를 이용하여 사용자 정보를 획득한다. 여기서, 마크업 요소는 <head>, <body>, <title>, <p>(paragraph), <table>, <form>, <input>, <img> 등의 태그를 말할 수 있고, 사용자 정보는 사용중인 SNS 관련 정보, 북마크, 방문기록, 검색 이력, 취미/선호도, 컨텐츠/서비스 이용 이력, UI 이용 이력 등을 포함할 수 있다. 그런 후, 서비스 제공 장치는 각 마크업 요소별로 상기 획득된 사용자 정보에 기초하여 사용자가 자주 사용하는 메뉴(또는 기능)들로 구성된 contextual 메뉴를 설정한다. 이를 통해 서비스 제공 장치는 동일한 웹/왑 페이지를 제공할지라도 사용자마다 다른 contextual 메뉴를 제공할 수 있다. Referring to FIG. 4, when a user terminal requests a web or a swap page by accessing a service providing apparatus (S402), the service providing apparatus uses a contextual menu based on each markup element and user information constituting the corresponding web / wap page. Set (S404). In other words, when the user terminal requests a web / wap page, the service providing apparatus checks a markup element constituting the web / wap page, and obtains user information using the user identification information. Here, the markup element may refer to tags such as <head>, <body>, <title>, <p> (paragraph), <table>, <form>, <input>, and <img>. The SNS may include information related to SNS, a bookmark, a visit history, a search history, a hobby / preference, a content / service use history, and a UI use history. Thereafter, the apparatus for providing a service sets a contextual menu including menus (or functions) frequently used by a user based on the obtained user information for each markup element. Through this, the service providing device may provide a different contextual menu for each user even if the same web / wap page is provided.

단계 S404가 수행되면, 서비스 제공 장치는 contextual 메뉴가 설정된 웹/왑 페이지를 사용자 단말로 전송하고(S406), 사용자 단말은 서비스 제공 장치로부터 수신된 웹/왑 페이지를 표시한다(S408).When the step S404 is performed, the service providing apparatus transmits the web / wap page on which the contextual menu is set to the user terminal (S406), and the user terminal displays the web / wap page received from the service providing apparatus (S408).

상기 표시된 웹/왑 페이지에서 사용자가 특정 객체를 선택하면(S410), 사용자 단말은 상기 선택된 객체의 마크업 요소를 인식하고(S412), 상기 인식된 마크업 요소에 설정된 contextual 메뉴를 웹/왑 페이지의 일정 영역에 표시한다(S414). 즉, 사용자가 웹/왑 페이지에서 특정 이미지, 특정 텍스트 등의 객체를 선택한 후, 마우스 오른쪽 버튼을 클릭하면, 사용자 단말은 상기 선택된 객체의 마크업 요소를 인식하고, 상기 인식된 마크업 요소에 설정된 contextual 메뉴를 팡업창 등을 통해 표시한다. 예컨대, 사용자가 특정 이미지를 선택하면, 사용자 단말은 그 특정 이미지의 마크업 요소 <img>를 인식하고, <img>에 설정된 contextual 메뉴를 표시할 수 있다. When the user selects a specific object from the displayed web / wap page (S410), the user terminal recognizes a markup element of the selected object (S412), and displays a contextual menu set on the recognized markup element. Displayed in a predetermined region of (S414). That is, when a user selects an object such as a specific image or a specific text in a web / wwap page, and then right-clicks, the user terminal recognizes a markup element of the selected object and is set in the recognized markup element. Display the contextual menu through the popup window. For example, when the user selects a specific image, the user terminal may recognize the markup element <img> of the specific image and display a contextual menu set in the <img>.

단계 S414의 수행 후 사용자가 contextual 메뉴에서 특정 메뉴를 선택하면(S416), 사용자 단말은 선택된 특정 메뉴에 대한 동작을 수행한다(S418).When the user selects a specific menu from the contextual menu after performing step S414 (S416), the user terminal performs an operation on the selected specific menu (S418).

예를 들어, 도 5의 (a)와 같은 웹 또는 왑 페이지(500)에서 사용자가 특정 이미지를 선택하면, 사용자 단말은 (b)와 같이 특정 이미지에 설정된 SNS, 업로드, 추천, 클리핑, 편집, 저장 등을 포함하는 contextual 메뉴(510)를 표시할 수 있다. 사용자가 표시된 contextual 메뉴 중에서 SNS를 선택하면, 사용자의 SNS로 접속될 수 있다.For example, when a user selects a specific image in the web or the swap page 500 as shown in FIG. 5 (a), the user terminal may set SNS, upload, recommend, clipping, edit, A contextual menu 510 including a save may be displayed. If the user selects SNS from the displayed contextual menu, the user can be connected to the user's SNS.

또한, 폼(<form>) 요소를 포함하는 웹/왑 페이지에서 이메일 주소, 전화번호, 이름, 아이디 등의 텍스트를 마우스(또는 터치입력)를 이용하여 선택하면, 사용자 단말은 상기 선택된 텍스트가 필요한 폼 요소 내에 상기 텍스트를 입력하여 서비스 제공 장치로 전송할 수 있다. 이를 통해 사용자는 이메일 주소, 전화번호, 이름, 아이디 등을 직접 입력하지 않고도 그 내용을 입력하여 서비스 제공 장치로 전송할 수 있다.In addition, when a text such as an email address, a phone number, a name, or an ID is selected using a mouse (or a touch input) in a web / wap page including a form element, the user terminal needs the selected text. The text may be input in the form element and transmitted to the service providing apparatus. In this way, the user may input the contents and transmit the contents to the service providing apparatus without directly inputting an email address, a telephone number, a name, an ID, and the like.

또한, 폼 요소를 포함하는 웹/왑 문서에서 특정 이미지를 선택한 후 마우스 오른쪽 버튼을 클릭(또는 터치입력)하면, 사용자 단말은 폼 요소의 이미지 정보 입력 혹은 이미지 파일 전송의 메뉴를 제공할 수 있다. 이를 이용하여 사용자는 웹에서 찾은 이미지를 보다 손쉽게 폼 요소에 입력한 후 서비스 제공 장치로 전송할 수 있다. In addition, if a user right-clicks (or touch inputs) a specific image in a web / wap document including a form element, the user terminal may provide a menu for inputting image information or transmitting an image file of the form element. Using this, the user can more easily input images found on the web to form elements and transmit them to the service providing device.

단계 S418의 수행 후, 사용자 단말은 메뉴 이용 이력, 서비스 이용 이력을 포함하는 UI 이용 이력을 서비스 제공 장치로 전송하고(S420), 서비스 제공 장치는 UI 이용 이력을 사용자 정보 데이터베이스에 저장한다(S422). 이때, 사용자 단말은 UI 이용 이력을 저장할 수 있다. After performing step S418, the user terminal transmits a UI usage history including a menu usage history and a service usage history to the service providing apparatus (S420), and the service providing apparatus stores the UI usage history in the user information database (S422). . In this case, the user terminal may store the UI usage history.

한편, 본 발명의 다른 측면에 따르면, 사용자 단말로부터 웹 또는 왑 페이지 요청 신호가 수신된 경우, 해당 웹 또는 왑 페이지와 해당 사용자의 사용자 정보를 획득하는 단계, 상기 획득된 왑 또는 웹 페이지를 구성하는 각 마크업 요소와 상기 사용자 정보를 기초로 contextual 메뉴를 설정하는 단계, 상기 각 마크업 요소에 contextual 메뉴가 설정된 웹 또는 왑 페이지를 상기 사용자 단말에 제공하는 단계를 포함하는 마크업 언어 기반의 문맥 인식 사용자 인터페이스 제공 방법이 프로그램으로 기록된 전자장치에서 판독 가능한 기록매체가 제공된다.On the other hand, according to another aspect of the present invention, when a web or swap page request signal is received from the user terminal, obtaining the web or the swap page and the user information of the user, configuring the obtained swap or web page Setting up a contextual menu based on each markup element and the user information, and providing a web or swap page with a contextual menu set to each markup element to the user terminal. A recording medium readable by an electronic device in which a method of providing a user interface is recorded by a program is provided.

또한, 본 발명의 다른 측면에 따르면, 현재 표시된 웹 또는 왑 페이지에서 특정 객체가 선택된 경우, 상기 선택된 객체의 마크업 요소를 인식하는 단계, 상기 인식된 마크업 요소에 설정된 contextual 메뉴를 상기 페이지의 일정 영역에 표시하는 단계, 상기 표시된 contextual 메뉴에서 특정 메뉴가 선택된 경우, 상기 특정 메뉴에 대한 동작을 수행하고, 메뉴 이용 이력, 서비스 이용 이력, 사용자 식별정보 중 적어도 하나를 포함하는 UI 이용 이력 정보를 서비스 제공 장치로 전송하는 단계를 포함하는 마크업 언어 기반의 문맥 인식 사용자 인터페이스 제공 방법이 프로그램으로 기록된 전자장치에서 판독 가능한 기록매체가 제공된다.According to another aspect of the present invention, if a specific object is selected in the currently displayed web or swap page, recognizing a markup element of the selected object, the contextual menu set in the recognized markup element is set to the schedule of the page. Displaying in a region, when a specific menu is selected from the displayed contextual menu, performing an operation on the specific menu, and providing UI usage history information including at least one of a menu usage history, a service usage history, and user identification information; There is provided a recording medium readable by an electronic device in which a method for providing a markup language-based context-aware user interface including transmitting to a providing device is programmed.

이러한 마크업 언어 기반의 문맥 인식 사용자 인터페이스 제공 방법은 프로그램으로 작성 가능하며, 프로그램을 구성하는 코드들 및 코드 세그먼트들은 당해 분야의 프로그래머에 의하여 용이하게 추론될 수 있다. 또한, 마크업 언어 기반의 문맥 인식 사용자 인터페이스 제공 방법에 관한 프로그램은 전자장치가 읽을 수 있는 정보저장매체(Readable Media)에 저장되고, 전자장치에 의하여 읽혀지고 실행될 수 있다.Such a markup language-based method for providing a context-aware user interface may be written by a program, and codes and code segments constituting the program may be easily inferred by a programmer in the art. In addition, a program related to a markup language-based context-aware user interface providing method may be stored in a readable media readable by an electronic device, and read and executed by the electronic device.

이와 같이, 본 발명이 속하는 기술분야의 당업자는 본 발명이 그 기술적 사상이나 필수적 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적인 것이 아닌 것으로서 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 등가개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
Thus, those skilled in the art will appreciate that the present invention may be embodied in other specific forms without departing from the spirit or essential characteristics thereof. It is therefore to be understood that the embodiments described above are to be considered in all respects only as illustrative and not restrictive. The scope of the present invention is defined by the appended claims rather than the detailed description and all changes or modifications derived from the meaning and scope of the claims and their equivalents are to be construed as being included within the scope of the present invention do.

본 발명은 HTML 등과 같이 마크업 기반의 언어를 이용하는 웹/왑 페이지의 사용자 인터페이스를 마크업 요소와 사용자 정보를 조합하여 상황(context)에 적합한 UI를 제공함으로써, 기존의 정적인 형태의 사용자 인터페이스를 보다 쉽게 동적인 형태로 제공할 수 있으며 해당 기능을 다양하게 조합하여 고 수준의 문맥 기반 사용자 인터페이스를 구축할 수 있는 마크업 언어 기반의 문맥 인식 사용자 인터페이스 제공 시스템 및 방법에 적용될 수 있다.
The present invention provides a UI suitable for a context by combining markup elements and user information in a user interface of a web / wap page using a markup-based language such as HTML, thereby providing an existing static type user interface. It can be easily provided in a dynamic form, and can be applied to a markup language-based context-aware user interface providing system and method for constructing a high level context-based user interface by combining various functions.

100 : 사용자 단말 110 : 통신부
120 : 입력부 130 : 출력부
140 : 저장부 150 : 브라우저 엔지
200 : 서비스 제공 장치 210 : 서비스 정보 DB
220 : 사용자 정보 DB 230 : contextual 메뉴 설정부
240 : 서비스 처리부100: user terminal 110:
120: input unit 130: output unit
140: storage unit 150: browser engine
200: service providing device 210: service information DB
220: user information DB 230: contextual menu setting unit
240: service processing unit

Claims (15)

사용자 단말로부터 웹 또는 왑 페이지 요청 신호가 수신된 경우, 해당 왑 또는 웹 페이지를 구성하는 각 마크업(mark-up) 요소와 사용자 정보를 기초로 contextual 메뉴를 설정하고, 각 마크업 요소에 contextual 메뉴가 설정된 웹 또는 왑 페이지를 상기 사용자 단말에 제공하는 서비스 제공 장치; 및
상기 서비스 제공 장치로부터 수신된 웹 또는 왑 페이지를 표시하고, 상기 웹 또는 왑 페이지에서 특정 객체가 선택된 경우, 상기 선택된 객체의 마크업 요소를 인식하고, 상기 인식된 마크업 요소에 설정된 contextual 메뉴를 상기 웹 또는 왑 페이지의 일정 영역에 표시하는 사용자 단말;
을 포함하는 마크업 언어 기반의 문맥 인식 사용자 인터페이스 제공 시스템.When a web or swap page request signal is received from the user terminal, a contextual menu is set based on each mark-up element and user information constituting the corresponding swap or web page, and a contextual menu is provided for each markup element. A service providing apparatus for providing a set web or swap page to the user terminal; And
Displays a web or a swap page received from the service providing device, recognizes a markup element of the selected object when a specific object is selected in the web or the swap page, and displays a contextual menu set in the recognized markup element A user terminal displayed on a predetermined area of a web or a swap page;
Markup language-based context aware user interface providing system comprising a. 제1항에 있어서,
상기 사용자 단말은 메뉴 이용 이력, 서비스 이용 이력, 사용자 식별정보 중 적어도 하나를 포함하는 UI(User Interface) 이용 이력 정보를 서비스 제공 장치로 전송하고,
상기 서비스 제공 장치는 UI 이용 이력 정보를 사용자 정보 데이터베이스에 저장하는 것을 특징으로 하는 마크업 언어 기반의 문맥 인식 사용자 인터페이스 제공 시스템.The method of claim 1,
The user terminal transmits user interface (UI) usage history information including at least one of a menu usage history, a service usage history, and user identification information to a service providing apparatus,
The service providing apparatus is a context-sensitive user interface providing system based on markup language, characterized in that for storing the UI use history information in a user information database. 통신망을 통해 서비스 제공 장치와 통신을 수행하는 통신부;
상기 통신부를 통해 수신된 웹 또는 왑 페이지를 표시하는 출력부;
상기 출력부에 표시된 웹 또는 왑 페이지에서 특정 객체가 선택된 경우, 상기 선택된 객체의 마크업 요소를 인식하고, 상기 인식된 마크업 요소에 설정된 contextual 메뉴를 상기 웹 또는 왑 페이지의 일정 영역에 표시하는 브라우저 엔진;
을 포함하는 사용자 단말.A communication unit for communicating with a service providing device through a communication network;
An output unit displaying a web or a swap page received through the communication unit;
When a specific object is selected in the web or swap page displayed on the output unit, a browser that recognizes a markup element of the selected object and displays a contextual menu set in the recognized markup element in a predetermined area of the web or swap page. engine;
. &Lt; / RTI &gt; 제3항에 있어서,
상기 브라우저 엔진은 상기 표시된 contextual 메뉴에서 특정 메뉴가 선택된 경우, 상기 특정 메뉴에 대한 동작을 수행하고, 메뉴 이용 이력, 서비스 이용 이력, 사용자 식별정보 중 적어도 하나를 포함하는 UI 이용 이력 정보를 서비스 제공 장치로 전송하는 것을 특징으로 하는 사용자 단말.The method of claim 3,
When the specific menu is selected from the displayed contextual menu, the browser engine performs an operation on the specific menu, and provides the UI usage history information including at least one of a menu usage history, a service usage history, and user identification information. User terminal, characterized in that for transmitting to. 각 서비스의 웹 또는 왑 페이지에 대한 정보가 저장된 서비스 정보 데이터베이스;
사용자 정보가 저장된 사용자 정보 데이터베이스;
사용자 단말로부터 웹 또는 왑 페이지 요청 신호가 수신된 경우, 상기 서비스 정보 데이터베이스로부터 해당 웹 또는 왑 페이지를 획득하고, 상기 사용자 정보 데이터베이스로부터 해당 사용자의 사용자 정보를 획득하며, 상기 획득된 웹 또는 왑 페이지를 구성하는 각 마크업 요소와 상기 사용자 정보를 기초로 contextual 메뉴를 설정하는 contextual 메뉴 설정부; 및
상기 각 마크업 요소에 contextual 메뉴가 설정된 웹 또는 왑 페이지를 상기 사용자 단말에 제공하는 서비스 처리부;
를 포함하는 서비스 제공 장치.A service information database in which information about web or swap pages of each service is stored;
A user information database storing user information;
When a web or swap page request signal is received from the user terminal, the web or swap page is obtained from the service information database, the user information of the user is obtained from the user information database, and the obtained web or swap page is obtained. A contextual menu setting unit configured to set a contextual menu based on each markup element to be configured and the user information; And
A service processor configured to provide a web or a swap page having a contextual menu set to each markup element to the user terminal;
Service providing device comprising a. 제5항에 있어서,
상기 사용자 정보는 사용자가 사용중인 SNS 관련 정보, 북마크, 방문기록, 검색 이력, 취미, 선호도, 컨텐츠/서비스 이용 이력, UI 이용 이력 중 적어도 하나를 포함하는 것을 특징으로 하는 서비스 제공 장치.6. The method of claim 5,
The user information may include at least one of SNS-related information, a bookmark, a visit history, a search history, a hobby, a preference, a content / service usage history, and a UI usage history that the user is using. 제5항에 있어서,
상기 contextual 메뉴 설정부는 각 마크업 요소별로 상기 사용자 정보에 기초하여 사용자가 자주 사용하는 메뉴 또는 선호하는 메뉴들을 선정하고, 상기 선정된 메뉴들에 우선순위가 부여된 contextual 메뉴를 설정하는 것을 특징으로 하는 서비스 제공 장치.6. The method of claim 5,
The contextual menu setting unit selects a menu frequently used or preferred by a user based on the user information for each markup element, and sets a contextual menu to which priority is given to the selected menus. Service provision device. 제5항에 있어서,
상기 contextual 메뉴 설정부는 복수 개의 마크업 요소와 문서 구조(DOM Tree)를 활용하여 다양한 형태의 Contextual 메뉴를 구성하는 것을 특징으로 하는 서비스 제공 장치. 6. The method of claim 5,
And the contextual menu setting unit configures various types of contextual menus using a plurality of markup elements and a document structure. 제5항에 있어서,
상기 contextual 메뉴는 해당 마크업 요소에서 기본으로 제공하는 기본 메뉴, 기본 기능을 확장한 확장 메뉴, Open-API와 결합된 매시업(Mash-up) 서비스와 관련된 매시업 메뉴, 사용자 정보에 기초하여 생성된 개인화 서비스 메뉴 중 적어도 하나를 포함하는 것을 특징으로 하는 서비스 제공 장치.6. The method of claim 5,
The contextual menu is a basic menu provided by a corresponding markup element, an extended menu that extends basic functions, a mashup menu related to a mash-up service combined with Open-API, and personalization generated based on user information. And at least one of a service menu. 서비스 제공 장치는 사용자 단말로부터 웹 또는 왑 페이지 요청 신호가 수신된 경우, 해당 웹 또는 왑 페이지를 구성하는 각 마크업 요소와 사용자 정보를 기초로 contextual 메뉴를 설정하는 단계;
상기 서비스 제공 장치는 각 마크업 요소에 contextual 메뉴가 설정된 웹 또는 왑 페이지를 상기 사용자 단말에 제공하는 단계;
상기 사용자 단말은 상기 서비스 제공 장치로부터 수신된 웹 또는 왑 페이지를 표시하는 단계; 및
상기 사용자 단말은 상기 웹 또는 왑 페이지에서 특정 객체가 선택된 경우, 상기 선택된 객체의 마크업 요소를 인식하고, 상기 인식된 마크업 요소에 설정된 contextual 메뉴를 상기 웹 또는 왑 페이지의 일정 영역에 표시하는 단계;
를 포함하는 마크업 언어 기반의 문맥 인식 사용자 인터페이스 제공 방법.Setting a contextual menu based on each markup element and user information constituting the web or swap page when a web or swap page request signal is received from the user terminal;
The service providing apparatus may include providing a web or a swap page having a contextual menu set to each markup element to the user terminal;
Displaying, by the user terminal, a web or swap page received from the service providing apparatus; And
If a specific object is selected in the web or swap page, the user terminal recognizes a markup element of the selected object, and displays a contextual menu set in the recognized markup element in a predetermined area of the web or swap page. ;
Method for providing a context-aware user interface based on markup language comprising a. 제10항에 있어서,
상기 사용자 단말은 상기 표시된 contextual 메뉴에서 특정 메뉴가 선택된 경우, 상기 특정 메뉴에 대한 동작을 수행하고, 메뉴 이용 이력, 서비스 이용 이력, 사용자 식별정보 중 적어도 하나를 포함하는 UI 이용 이력 정보를 서비스 제공 장치로 전송하는 단계; 및
상기 서비스 제공 장치는 상기 UI 이용 이력 정보를 사용자 정보 데이터베이스에 저장하는 단계를 더 포함하는 마크업 언어 기반의 문맥 인식 사용자 인터페이스 제공 방법.11. The method of claim 10,
If the user terminal selects a specific menu from the displayed contextual menu, the user terminal performs an operation on the specific menu and provides service history information including UI usage history including at least one of a menu usage history, a service usage history, and user identification information. Transmitting to; And
The service providing apparatus may further include storing the UI usage history information in a user information database. 서비스 제공 장치가 마크업 언어 기반의 문맥 인식 사용자 인터페이스를 제공하는 방법에 있어서,
사용자 단말로부터 웹 또는 왑 페이지 요청 신호가 수신된 경우, 해당 웹 또는 왑 페이지와 해당 사용자의 사용자 정보를 획득하는 단계;
상기 획득된 왑 또는 웹 페이지를 구성하는 각 마크업 요소와 상기 사용자 정보를 기초로 contextual 메뉴를 설정하는 단계; 및
상기 각 마크업 요소에 contextual 메뉴가 설정된 웹 또는 왑 페이지를 상기 사용자 단말에 제공하는 단계;
를 포함하는 마크업 언어 기반의 문맥 인식 사용자 인터페이스 제공 방법.In the method for providing a context-sensitive user interface based on the markup language, the service providing device,
When a web or swap page request signal is received from a user terminal, acquiring a corresponding web or swap page and user information of the corresponding user;
Setting a contextual menu based on each markup element constituting the obtained swap or web page and the user information; And
Providing a web or a swap page having a contextual menu set to each markup element to the user terminal;
Method for providing a context-aware user interface based on markup language comprising a. 사용자 단말로부터 웹 또는 왑 페이지 요청 신호가 수신된 경우, 해당 웹 또는 왑 페이지와 해당 사용자의 사용자 정보를 획득하는 단계;
상기 획득된 왑 또는 웹 페이지를 구성하는 각 마크업 요소와 상기 사용자 정보를 기초로 contextual 메뉴를 설정하는 단계; 및
상기 각 마크업 요소에 contextual 메뉴가 설정된 웹 또는 왑 페이지를 상기 사용자 단말에 제공하는 단계를 포함하는 마크업 언어 기반의 문맥 인식 사용자 인터페이스 제공 방법이 프로그램으로 기록된 전자장치에서 판독 가능한 기록매체.When a web or swap page request signal is received from a user terminal, acquiring a corresponding web or swap page and user information of the corresponding user;
Setting a contextual menu based on each markup element constituting the obtained swap or web page and the user information; And
And providing a web or swap page having a contextual menu set to each markup element to the user terminal. 사용자 단말이 마크업 언어 기반의 문맥 인식 사용자 인터페이스를 제공하는 방법에 있어서,
현재 표시된 웹 또는 왑 페이지에서 특정 객체가 선택된 경우, 상기 선택된 객체의 마크업 요소를 인식하는 단계;
상기 인식된 마크업 요소에 설정된 contextual 메뉴를 상기 페이지의 일정 영역에 표시하는 단계; 및
상기 표시된 contextual 메뉴에서 특정 메뉴가 선택된 경우, 상기 특정 메뉴에 대한 동작을 수행하고, 메뉴 이용 이력, 서비스 이용 이력, 사용자 식별정보 중 적어도 하나를 포함하는 UI 이용 이력 정보를 서비스 제공 장치로 전송하는 단계;
를 포함하는 마크업 언어 기반의 문맥 인식 사용자 인터페이스 제공 방법.A method for providing a markup language based context aware user interface by a user terminal, the method comprising:
Recognizing a markup element of the selected object when a specific object is selected in the currently displayed web or swap page;
Displaying a contextual menu set on the recognized markup element in a predetermined area of the page; And
If a specific menu is selected from the displayed contextual menu, performing an operation on the specific menu and transmitting UI usage history information including at least one of a menu usage history, a service usage history, and user identification information to a service providing apparatus; ;
Method for providing a context-aware user interface based on markup language comprising a. 현재 표시된 웹 또는 왑 페이지에서 특정 객체가 선택된 경우, 상기 선택된 객체의 마크업 요소를 인식하는 단계;
상기 인식된 마크업 요소에 설정된 contextual 메뉴를 상기 페이지의 일정 영역에 표시하는 단계; 및
상기 표시된 contextual 메뉴에서 특정 메뉴가 선택된 경우, 상기 특정 메뉴에 대한 동작을 수행하고, 메뉴 이용 이력, 서비스 이용 이력, 사용자 식별정보 중 적어도 하나를 포함하는 UI 이용 이력 정보를 서비스 제공 장치로 전송하는 단계를 포함하는 마크업 언어 기반의 문맥 인식 사용자 인터페이스 제공 방법이 프로그램으로 기록된 전자장치에서 판독 가능한 기록매체.Recognizing a markup element of the selected object when a specific object is selected in the currently displayed web or swap page;
Displaying a contextual menu set on the recognized markup element in a predetermined area of the page; And
If a specific menu is selected from the displayed contextual menu, performing an operation on the specific menu and transmitting UI usage history information including at least one of a menu usage history, a service usage history, and user identification information to a service providing apparatus; A record medium readable by an electronic device in which a method for providing a context-aware user interface based on a markup language comprising a program is recorded.
KR20120105707A 2012-09-24 2012-09-24 System and method for providing contextual user-interface based on mark-up language KR20140039509A (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR20120105707A KR20140039509A (en) 2012-09-24 2012-09-24 System and method for providing contextual user-interface based on mark-up language
PCT/KR2013/006916 WO2014046382A1 (en) 2012-09-24 2013-07-31 System and method for providing markup language-based contextual recognition user interface

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR20120105707A KR20140039509A (en) 2012-09-24 2012-09-24 System and method for providing contextual user-interface based on mark-up language

Publications (1)

Publication Number Publication Date
KR20140039509A true KR20140039509A (en) 2014-04-02

Family

ID=50341643

Family Applications (1)

Application Number Title Priority Date Filing Date
KR20120105707A KR20140039509A (en) 2012-09-24 2012-09-24 System and method for providing contextual user-interface based on mark-up language

Country Status (2)

Country Link
KR (1) KR20140039509A (en)
WO (1) WO2014046382A1 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101880508B1 (en) * 2017-04-27 2018-07-20 주식회사 한글과컴퓨터 Web document editing support apparatus and method for supporting list generation in web documents
KR101880507B1 (en) * 2017-04-21 2018-07-20 주식회사 한글과컴퓨터 Client terminal device that supports resizing of a figure embedded in a web document and operating method thereof
KR102053078B1 (en) * 2018-07-30 2019-12-06 주식회사 한글과컴퓨터 Document editing processing device supporting customization of document editing interface and operating method thereof
KR20230016291A (en) 2021-07-26 2023-02-02 주식회사 로젠시스 Mimo based full duplex relaying termina having reverse noise floor reduction function

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB0211897D0 (en) * 2002-05-23 2002-07-03 Koninkl Philips Electronics Nv Dynamic markup language
US7356537B2 (en) * 2002-06-06 2008-04-08 Microsoft Corporation Providing contextually sensitive tools and help content in computer-generated documents
KR20050073126A (en) * 2004-01-08 2005-07-13 와이더댄 주식회사 Method and system for providing personalized web-page in wireless internet
US7873710B2 (en) * 2007-02-06 2011-01-18 5O9, Inc. Contextual data communication platform

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101880507B1 (en) * 2017-04-21 2018-07-20 주식회사 한글과컴퓨터 Client terminal device that supports resizing of a figure embedded in a web document and operating method thereof
KR101880508B1 (en) * 2017-04-27 2018-07-20 주식회사 한글과컴퓨터 Web document editing support apparatus and method for supporting list generation in web documents
KR102053078B1 (en) * 2018-07-30 2019-12-06 주식회사 한글과컴퓨터 Document editing processing device supporting customization of document editing interface and operating method thereof
KR20230016291A (en) 2021-07-26 2023-02-02 주식회사 로젠시스 Mimo based full duplex relaying termina having reverse noise floor reduction function

Also Published As

Publication number Publication date
WO2014046382A1 (en) 2014-03-27

Similar Documents

Publication Publication Date Title
US20170255705A1 (en) Method and apparatus of browsing modeling
AU2012216321B2 (en) Share box for endorsements
KR101953303B1 (en) Identifying matching applications based on browsing activity
CN101930448B (en) Method and device for subscribing webpage information
US20170351778A1 (en) Methods and systems for managing bookmarks
US20070061486A1 (en) Systems and methods for creating customized applications
US20110119298A1 (en) Method and apparatus for searching information
CN105302811B (en) Browser page skipping method and device
US8910074B2 (en) System and method for performing auto scroll
KR20140072877A (en) Techniques for managing and viewing followed content
US10303754B1 (en) Creation and display of dynamic content component
JP2011186913A (en) Web site browsing system and server
KR100928315B1 (en) Web browsing system
US20130124974A1 (en) System for Assembling Webpage&#39;s Region of Other Website into a Webpage of a Website and Method for the Same
KR20140039509A (en) System and method for providing contextual user-interface based on mark-up language
CN107430609B (en) Generation of new tab pages for browsers for enterprise environments
KR102012501B1 (en) System and Method for providing contents recommendation service
Rodrigues et al. New trends on ubiquitous mobile multimedia applications
JP2007149016A (en) System, method and server for supporting webpage creation
US20140189478A1 (en) Web browsers for mobile and small screen devices
CN102799650B (en) A kind of communication terminal and character string search method thereof
US9524076B2 (en) Web page management method and apparatus and storage medium thereof
US20130239027A1 (en) Apparatus and method for generating wiki previews
KR100783270B1 (en) Relation method for wireless service by recognize mobile tag in web page
KR101429614B1 (en) System and Method for providing Social Network Service

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E601 Decision to refuse application