KR20180013479A - 사용자 인터페이스 제공 방법 및 장치 - Google Patents

사용자 인터페이스 제공 방법 및 장치 Download PDF

Info

Publication number
KR20180013479A
KR20180013479A KR1020160097275A KR20160097275A KR20180013479A KR 20180013479 A KR20180013479 A KR 20180013479A KR 1020160097275 A KR1020160097275 A KR 1020160097275A KR 20160097275 A KR20160097275 A KR 20160097275A KR 20180013479 A KR20180013479 A KR 20180013479A
Authority
KR
South Korea
Prior art keywords
target object
interface
user interface
storage space
application
Prior art date
Application number
KR1020160097275A
Other languages
English (en)
Inventor
김준성
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020160097275A priority Critical patent/KR20180013479A/ko
Priority to US15/584,724 priority patent/US20180032246A1/en
Publication of KR20180013479A publication Critical patent/KR20180013479A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/14—Details of searching files based on file metadata
    • G06F17/301—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486—Drag-and-drop
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00—Arrangements for software engineering
    • G06F8/30—Creation or generation of source code
    • G06F8/38—Creation or generation of source code for implementing user interfaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0623—Item investigation
    • G06Q30/0625—Directed, with specific intent or strategy
    • G06Q30/0629—Directed, with specific intent or strategy for generating comparisons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0641—Shopping interfaces

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Business, Economics & Management (AREA)
  • Software Systems (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Development Economics (AREA)
  • Strategic Management (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Game Theory and Decision Science (AREA)
  • Library & Information Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

사용자 인터페이스 제공 방법 및 장치가 개시된다. 일실시예에 따른 사용자 인터페이스 제공 장치는 제1 어플리케이션의 인터페이스에서 선택된 타겟 오브젝트를 드래그하는 제1 드래그 입력을 감지하고, 감지된 제1 드래그 입력이 저장 공간 인터페이스 상에서 해제되면 타겟 오브젝트와 연관된 메타데이터를 수집하며, 타겟 오브젝트 및 메타데이터를 저장할 수 있다.

Description

사용자 인터페이스 제공 방법 및 장치{USER INTERFACE PROVIDING METHOD AND APPARATUS}
아래 실시예들은, 사용자 인터페이스를 제공하는 방법 및 장치에 관한 것이다.
사용자 인터페이스(User Interface;　UI)는 사용자가 사물 또는 시스템(예를 들어, 기계, 컴퓨터 프로그램 등)과 의사소통을 하기 위한 물리적 또는 가상의 매개체를 의미한다. 대표적인 예시로 키보드, 마우스 및 디스플레이 등의 입출력을 통해서 제공되는 소프트웨어적인 인터페이스와 키보드의 배열이나 디스플레이의 모양 등의 물리적인 인터페이스를 들 수 있는데, 사용자 인터페이스는 물리적인 하드웨어와 논리적인 소프트웨어의 요소를 모두 포함한다.
사용자 인터페이스는 사용자가 필요한 요소를 쉽게 찾을 수 있고, 그 요소의 의도를 쉽게 파악할 수 있도록 하는 사용성과 체험감을 기준으로 성능이 평가될 수 있다. 다양한 어플리케이션을 탑재한 전자 기기는 어플리케이션을 실행하면서 발생하는 데이터를 보관하거나 다른 어플리케이션으로 전달할 수 있는데, 이에 관해 사용자에게 보다 나은 사용성과 체험감을 제공하는 사용자 어플리케이션에 관한 기술이 요구된다.
일실시예에 따르면, 터치스크린을 구비한 전자 기기의 사용자 인터페이스 제공 방법은 상기 터치스크린을 이용하여, 제1 어플리케이션의 인터페이스에서 선택된 타겟 오브젝트를 드래그하는 제1 드래그 입력을 감지하는 단계; 상기 제1 드래그 입력에 기초하여, 상기 제1 어플리케이션의 인터페이스와 구별되는 저장 공간 인터페이스를 표시하는 단계; 상기 제1 드래그 입력이 상기 저장 공간 인터페이스 상에서 해제되면, 상기 타겟 오브젝트의 타입에 기초하여 상기 타겟 오브젝트와 연관된 메타데이터(metadata)를 수집하는 단계; 상기 타겟 오브젝트 및 상기 메타데이터를 저장하는 단계; 및 상기 타겟 오브젝트 및 상기 메타데이터에 기초하여, 상기 저장 공간 인터페이스를 갱신하는 단계를 포함한다.
일실시예에 따르면, 상기 사용자 인터페이스 제공 방법은 상기 제1 어플리케이션이 활성화된 상태에서 상기 터치스크린의 일 측에 저장 공간 표시 아이콘을 표시하는 단계를 더 포함하고, 상기 저장 공간 인터페이스를 표시하는 단계는 상기 저장 공간 표시 아이콘 쪽으로 향하는 상기 제1 드래그 입력에 기초하여, 상기 저장 공간 인터페이스를 표시하는 단계; 및 기 저장된 오브젝트를 상기 저장 공간 인터페이스에 표시하는 단계를 포함한다.
일실시예에 따르면, 상기 타입은 텍스트, 이미지, 음악, 동영상 및 멀티미디어 콘텐츠 중 적어도 하나를 포함하고, 상기 텍스트는 이메일의 주소 및 웹사이트의 주소 중 적어도 하나를 포함하며, 상기 이미지는 상품의 이미지를 포함한다.
일실시예에 따르면, 상기 저장 공간 인터페이스를 갱신하는 단계는 상기 타겟 오브젝트 및 상기 메타데이터에 기초하여, 상기 타겟 오브젝트에 대응하는 요약 이미지를 생성하는 단계; 및 상기 요약 이미지를 상기 저장 공간 인터페이스에 표시하는 단계를 포함하고, 상기 요약 이미지는 상기 메타데이터의 요약 정보, 상기 텍스트의 머릿글, 상기 텍스트의 첫 단어, 상기 웹사이트의 첫 화면, 상기 이미지의 축소 버전 및 상기 동영상의 썸네일 중 적어도 하나를 포함한다.
일실시예에 따르면, 상기 메타데이터는 상기 타겟 오브젝트와 관련된 히스토리를 포함하고, 상기 히스토리는 상기 타겟 오브젝트의 출처, 상기 타겟 오브젝트의 전송 기록, 상기 타겟 오브젝트의 저장 기록 및 상기 타겟 오브젝트의 이전 소유자 중 적어도 하나를 포함하고, 상기 출처는 상기 제1 어플리케이션을 포함하고, 상기 이전 소유자는 상기 제1 어플리케이션을 통해 상기 타겟 오브젝트를 전송한 주체를 포함한다.
일실시예에 따르면, 상기 메타데이터는 상기 타겟 오브젝트의 소스 어플리케이션, 상기 웹사이트의 연관 웹사이트, 상기 웹사이트의 리뷰 문장, 상기 타겟 오브젝트의 저장 시 웹사이트 이동 과정, 상기 이미지에 대응하는 이미지 검색 결과, 상기 상품을 대표하는 키워드, 상기 상품의 판매 가격, 상기 상품의 리뷰 문장, 상기 상품의 가격 비교 정보 및 상기 상품의 판매 웹사이트 중 적어도 하나를 포함한다.
일실시예에 따르면, 상기 사용자 인터페이스 제공 방법은 상기 제1 드래그 입력을 감지하면, 상기 타겟 오브젝트가 상기 드래그에 따라 이동하는 시각적 효과를 제공하는 단계를 더 포함하고, 상기 제1 어플리케이션의 인터페이스에서 상기 타겟 오브젝트의 선택에 의해 표시된 팝업(pop-up)이 사라질 수 있다.
일실시예에 따르면, 상기 저장 공간 인터페이스를 갱신하는 단계는 상기 저장 공간 인터페이스에 표시된 적어도 하나의 오브젝트의 개수에 따라, 상기 저장 공간 인터페이스에 표시된 상기 타겟 오브젝트의 크기가 변하는 시각적 효과를 제공하는 단계를 포함한다.
일실시예에 따르면, 상기 사용자 인터페이스 제공 방법은 상기 제1 어플리케이션의 인터페이스에서 선택된 상기 타겟 오브젝트가 저장 가능한 오브젝트인지 여부를 판별하는 단계; 및 상기 타겟 오브젝트가 저장 가능한 오브젝트인 경우, 상기 타겟 오브젝트가 상기 드래그에 따라 이동하는 시각적 효과를 제공하는 단계를 더 포함한다.
일실시예에 따르면, 상기 사용자 인터페이스 제공 방법은 제1 타겟 오브젝트가 상기 전자 기기의 메모리에 저장되면, 상기 전자 기기의 OS(Operating System)를 통해 접근 가능한 임시 저장 공간인 클립보드(clipboard)에 상기 제1 타겟 오브젝트를 복사하는 단계; 상기 메모리로부터 상기 제1 타겟 오브젝트가 삭제되면, 상기 클립보드에 복사된 상기 제1 타겟 오브젝트를 삭제하는 단계; 상기 클립보드에 의해 제2 타겟 오브젝트가 복사되면, 상기 제2 타겟 오브젝트 및 상기 제2 타겟 오브젝트와 연관된 메타데이터를 상기 메모리에 저장하는 단계; 및 상기 클립보드로부터 상기 제2 타겟 오브젝트가 삭제되면, 상기 메모리에 저장된 상기 제2 타겟 오브젝트 및 상기 제2 타겟 오브젝트와 연관된 상기 메타데이터를 삭제하는 단계를 더 포함한다.
일실시예에 따르면, 상기 사용자 인터페이스 제공 방법은 상기 터치스크린을 이용하여, 상기 저장 공간 인터페이스에서 선택된 상기 타겟 오브젝트를 드래그하는 제2 드래그 입력을 감지하는 단계; 및 상기 제2 드래그 입력이 제2 어플리케이션의 인터페이스 상에서 해제되면, 상기 타겟 오브젝트를 상기 제2 어플리케이션의 인터페이스에 붙여 넣는(pasting) 동작을 수행하는 단계를 더 포함한다.
일실시예에 따르면, 상기 사용자 인터페이스 제공 방법은 상기 저장 공간 인터페이스를 활성화하는 저장 공간 표시 아이콘을 표시하는 단계; 및 상기 저장 공간 표시 아이콘의 입력에 기초하여, 상기 제2 어플리케이션의 인터페이스와 구별되는 상기 저장 공간 인터페이스를 표시하는 단계를 더 포함한다.
일실시예에 따르면, 상기 타겟 오브젝트가 웹사이트의 주소이고, 상기 제2 어플리케이션이 웹 브라우저인 경우, 상기 웹 브라우저의 주소 창에 상기 웹사이트의 주소가 입력되고, 상기 타겟 오브젝트가 상기 웹사이트의 상기 주소를 제외한 텍스트이고, 상기 제2 어플리케이션이 웹 브라우저인 경우, 상기 웹 브라우저의 검색 창에 상기 텍스트가 입력될 수 있다.
일실시예에 따르면, 상기 사용자 인터페이스 제공 방법은 상기 저장 공간 인터페이스에서 상기 타겟 오브젝트에 대한 입력에 응답하여, 상기 저장된 메타데이터를 획득하는 단계; 및 상기 획득된 메타데이터를 보여주는 팝업(pop-up)을 표시하는 단계를 더 포함한다.
일실시예에 따르면, 상기 사용자 인터페이스 제공 방법은 상기 제2 어플리케이션 상에서 상기 타겟 오브젝트와 관련된 히스토리가 생성되면, 상기 히스토리를 수집하는 단계; 및 상기 수집된 히스토리에 기초하여, 상기 메타데이터를 갱신하는 단계를 더 포함한다.
일실시예에 따르면, 상기 붙여 넣는 동작을 수행하는 단계는 상기 타겟 오브젝트가 상기 제2 어플리케이션의 처리 대상 규약에 포함되어 있지 않은 경우, 상기 타겟 오브젝트를 상기 처리 대상 규약에 적합한 오브젝트로 변환하는 단계; 및 상기 타겟 오브젝트를 상기 변환된 오브젝트로 대체하여, 상기 제2 어플리케이션의 인터페이스에 붙여 넣는 동작을 수행하는 단계를 포함한다.
일실시예에 따르면, 상기 사용자 인터페이스 제공 방법을 실행시키기 위하여 컴퓨터 프로그램이 매체에 저장된다.
일실시예에 따르면, 사용자 인터페이스를 제공하는 터치스크린 기반의 전자 기기는 제1 어플리케이션의 인터페이스에서 선택된 타겟 오브젝트; 및 상기 타겟 오브젝트의 타입에 기초하여 수집된 상기 타겟 오브젝트와 연관된 메타데이터(metadata)를 저장하는 메모리; 및 제2 어플리케이션의 인터페이스와 구별되는 저장 공간 인터페이스를 표시하고, 상기 터치스크린을 이용하여 상기 저장 공간 인터페이스에서 선택된 타겟 오브젝트를 드래그하는 드래그 입력을 감지하며, 상기 드래그 입력이 상기 제2 어플리케이션의 인터페이스 상에서 해제되면, 상기 타겟 오브젝트를 상기 제2 어플리케이션의 인터페이스에 붙여 넣는(pasting) 동작을 수행하는 프로세서를 포함한다.
도 1은 전자 기기의 터치스크린에 일실시예에 따른 사용자 인터페이스가 표시된 예시도이다.
도 2는 일실시예에 따른 사용자 인터페이스를 제공하는 전자 기기의 예시도이다.
도 3은 사용자 인터페이스 제공 방법의 실시예에 따라 오브젝트가 저장되는 과정을 설명하기 위한 순서도이다.
도 4는 사용자 인터페이스 제공 방법의 실시예에 따라 오브젝트의 붙여 넣는 동작이 수행되는 과정을 설명하기 위한 순서도이다.
도 5는 사용자 인터페이스 제공 방법이 적용되는 전자 기기의 실시예이다.
도 6은 사용자 인터페이스 제공 방법의 실시예를 설명하기 위한 순서도이다.
도 7은 사용자 인터페이스 제공 방법의 실시예를 설명하기 위한 순서도이다.
도 8은 사용자 인터페이스 제공 방법의 실시예를 설명하기 위한 순서도이다.
실시예들에 대한 특정한 구조적 또는 기능적 설명들은 단지 예시를 위한 목적으로 개시된 것으로서, 다양한 형태로 변경되어 실시될 수 있다. 따라서, 실시예들은 특정한 개시형태로 한정되는 것이 아니며, 본 명세서의 범위는 기술적 사상에 포함되는 변경, 균등물, 또는 대체물을 포함한다.
제1 또는 제2 등의 용어를 다양한 구성요소들을 설명하는데 사용될 수 있지만, 이런 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 해석되어야 한다. 예를 들어, 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소는 제1 구성요소로도 명명될 수 있다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다.
단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 설명된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함으로 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 해당 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가진다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 갖는 것으로 해석되어야 하며, 본 명세서에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
실시예들은 퍼스널 컴퓨터, 랩톱 컴퓨터, 태블릿 컴퓨터, 스마트 폰, 텔레비전, 스마트 가전 기기, 지능형 자동차, 키오스크, 웨어러블 장치 등 다양한 형태의 제품으로 구현될 수 있다. 예를 들어, 실시예들은 스마트 폰, 모바일 기기, 스마트 홈 시스템 등에서 사용자를 인식하는데 적용될 수 있다. 실시예들은 사용자 인식을 통한 결제 서비스에 적용될 수 있다. 또한, 실시예들은 사용자를 인식하여 자동으로 시동을 거는 지능형 자동차 시스템 등에도 적용될 수 있다. 이하, 실시예들을 첨부된 도면을 참조하여 상세하게 설명한다. 각 도면에 제시된 동일한 참조 부호는 동일한 부재를 나타낸다.
도 1은 전자 기기의 터치스크린에 일실시예에 따른 사용자 인터페이스가 표시된 예시도이다.
실시예는 터치스크린을 구비한 전자 기기(100)를 통해 사용자 인터페이스를 제공할 수 있다. 터치스크린은 사용자의 터치를 감지하는 센서를 탑재할 수 있고, 전자 기기(100)는 감지된 터치에 기반하여 소프트웨어 모듈, 하드웨어 모듈, 또는 이들의 조합을 제어하는 제어 시스템을 포함할 수 있다. 전자 기기(100)는 어플리케이션을 저장하고, 저장된 어플리케이션을 실행할 수 있다. 또는, 전자 기기(100)는 다른 기기 또는 다른 서버와 공유되는 클라우드를 통해 별도의 저장 없이 어플리케이션을 실행할 수 있다. 전자 기기(100)는 스마트 폰, 태블릿 PC, PDA, 스마트 카, 스마트 TV 및 컴퓨터 등을 포함한다.
전자 기기(100)는 어플리케이션의 실행 중에 발생하는 오브젝트 및 데이터(예를 들어, 사진, 웹사이트, 텍스트, 음악 파일, 문서, 동영상 및 멀티 미디어 등)의 저장, 실행, 편집, 전송 및 관리 등의 처리를 사용자가 보다 쉽고, 직관적이고 편리하게 할 수 있도록 사용자 인터페이스를 제공할 수 있다. 예를 들어, 전자 기기(100)를 통해 제공되는 사용자 인터페이스는 특정 어플리케이션에 의해 생성된 오브젝트를 같은 어플리케이션 또는 다른 어플리케이션으로 전달하는 체험감을 제공할 수 있다. 실시예는 사용자 인터페이스를 통해 특정 어플리케이션으로부터 오브젝트를 저장하고, 저장된 오브젝트로부터 파생되는 2차적인 정보, 저장된 오브젝트와 연관된 정보 또는 저장된 오브젝트의 요약 정보를 획득하여 관리할 수 있다. 전자 기기(100)를 통해 제공되는 사용자 인터페이스는 오브젝트와 연관된 정보 등을 사용자가 편리하고 직관적으로 확인할 수 있게 하는 체험감을 제공할 수 있다. 전자 기기(100)를 통해 제공되는 사용자 인터페이스에 관한 실시예는 도 2 내지 도 8을 참조하여 자세하게 설명된다.
일 실시예에 따른 사용자 인터페이스 제공 방법은 사용자 인터페이스 제공 장치에 의하여 수행될 수 있다. 사용자 인터페이스 제공 장치는 하나 또는 그 이상의 소프트웨어 모듈, 하나 또는 그 이상의 하드웨어 모듈, 또는 이들의 다양한 조합으로 구현될 수 있다.
일실시예에 따르면, 사용자 인터페이스를 제공하는 어플리케이션이 전자 기기(100)에 의해 실행되면, 전자 기기(100)의 터치스크린의 일 측에 저장 공간 표시 아이콘(101)이 표시될 수 있다. 사용자 인터페이스를 제공하는 어플리케이션은 백그라운드 어플리케이션으로 구현될 수 있다. 사용자 인터페이스를 제공하는 어플리케이션이 백그라운드 어플리케이션의 형태로 전자 기기(100)에 설치되면, 사용자 인터페이스를 제공하는 어플리케이션은 별도의 시작이나 설정의 절차 없이 현재 실행중인 어플리케이션과 독립적으로 구동될 수 있다. 이 경우, 사용자 인터페이스를 제공하는 어플리케이션과 관련된 제어 명령이 사용자의 터치를 기반으로 한 입력을 통해 감지되면, 오브젝트의 복사, 저장, 전송 및 관리 등의 동작이 처리될 수 있다. 다시 말해, 사용자 인터페이스 제공 방법은 전자 기기(100)에 의해 실행되는 적어도 하나의 어플리케이션과 독립적인 어플리케이션으로 구현되어 어플리케이션 레벨에서 동작하도록 구현될 수 있다.
다른 실시예에 따르면, 사용자 인터페이스 제공 방법은 시스템 레벨로 구현되어 OS(Operating System)를 통해 동작하도록 구현될 수 있다. 사용자 인터페이스 제공 방법의 동작 절차는 OS에서 구동되도록 정의될 수 있고, 전자 기기(100)의 OS를 기반으로 설계 및 제작된 어플리케이션은 사용자 인터페이스 제공 방법의 규약이 정의된 OS를 통해 오브젝트의 복사, 저장, 전송 및 관리 등의 동작을 처리할 수 있다.
도 1을 참조하면, 사용자 인터페이스 제공 장치는 전자 기기(100)의 터치스크린 상에 사용자가 터치할 수 있는 저장 공간 표시 아이콘(101)을 표시할 수 있다. 사용자 인터페이스 제공 장치는 전자 기기(100)에서 실행되는 어플리케이션의 유형과 관계없이 저장 공간 표시 아이콘(101)이 항상 표시되도록 설정할 수 있다. 또는, 사용자 인터페이스 제공 장치는 복수의 어플리케이션을 유형 별로 분류하여, 어플리케이션 실행 시 오브젝트의 복사, 저장, 전송 및 관리 등의 처리의 가능성이 존재하는 어플리케이션이 전자 기기(100)에서 실행되는 경우 저장 공간 표시 아이콘(101)을 표시할 수 있다.
통상적으로 사용되는 스마트 폰은, 저장하고자 하는 오브젝트에 대해 일정 시간을 초과하여 유지되는 터치를 감지하면, 감지된 터치에 반응하여 그 오브젝트와 관련된 기능을 보여주는 팝업(pop-up)을 표시한다. 팝업(pop-up)에 표시된 기능의 예시로는 "복사", "붙여넣기" 및 "공유" 등이 있다. 일실시예에 따른 사용자 인터페이스 제공 장치는 일정 시간을 초과한 터치가 감지한 후, 터치를 유지한 채 선택된 오브젝트를 드래그하는 드래그 입력을 감지할 수 있다.
사용자 인터페이스 제공 장치는 드래그 입력이 감지되면, 저장 공간 인터페이스(102)를 표시할 수 있다. 저장 공간 인터페이스(102)는 선택된 오브젝트를 제공하는 어플리케이션의 인터페이스와 구별되는 인터페이스이다. 드래그 입력이 감지되면 사용자 인터페이스를 제공하는 어플리케이션이 활성화됨에 따라, 선택된 오브젝트를 제공하는 어플리케이션의 인터페이스 상에서 표시된 팝업은 시각적으로 사라질 수 있다. 사용자 입장에서는, 선택된 오브젝트를 드래그하는 드래그 입력을 통해, 오브젝트의 터치로 인한 팝업이 사라지면서 터치스크린의 일정 부분에 저장 공간 인터페이스(102)가 표시되는 시각적인 효과를 체험할 수 있다.
사용자 인터페이스 제공 장치는 오브젝트를 드래그하는 드래그 입력이 저장 공간 인터페이스(102) 상에서 해제되면, 드래그가 해제된 오브젝트를 저장하고, 저장된 오브젝트에 기초하여 저장 공간 인터페이스(102)를 갱신할 수 있다. 사용자 인터페이스 제공 장치는 드래그가 해제된 오브젝트를 전자 기기의 메모리에 저장할 수 있다. 또는, 사용자 인터페이스 제공 장치는 드래그가 해제된 오브젝트를 클라우드에 저장하여 관리할 수도 있다. 클라우드는 복수의 서버 또는 복수의 기기가 접근할 수 있고, 저장된 데이터를 접근 가능한 주체들간에 공유할 수 있는 가상의 저장 공간을 포함한다.
사용자 인터페이스 제공 장치는 저장된 오브젝트를 표현하는 요약 이미지를 생성하고, 생성된 요약 이미지를 표시하는 방식으로 저장 공간 인터페이스(102)를 갱신할 수 있다. 저장 공간 인터페이스(102)는 오브젝트의 타입에 기초하여 요약 이미지를 생성할 수 있다. 예를 들어, 오브젝트가 사진인 경우에는 축소된 모양의 사진으로, 오브젝트가 웹사이트의 주소인 경우에는 웹사이트의 첫 화면으로, 오브젝트가 문장의 경우에는 첫 단어로 요약 이미지가 생성될 수 있다. 사용자 인터페이스 제공 장치는 저장 공간 인터페이스(102)에 표시되는 요약 이미지의 크기를 오브젝트의 크기에 따라 조절할 수 있다. 또는, 사용자 인터페이스 제공 장치는 저장된 오브젝트의 양이 늘어남에 따라, 요약 이미지의 크기를 축소시킬 수 있다. 실시예에 따라서는, 요약 이미지가 줄어들 수 있는 최소한의 크기가 설정될 수 있다. 만약, 저장된 오브젝트의 양이 늘어난 이유로 요약 이미지들을 표시하기 위한 저장 공간 인터페이스(102)의 공간이 부족하게 되면, 사용자 인터페이스 제공 장치는 드래그를 통해 요약 이미지를 확인할 수 있도록 저장 공간 인터페이스(102)를 갱신할 수 있다.
사용자 인터페이스 제공 장치는 저장 공간 표시 아이콘(101)에 대한 입력을 감지하고, 감지된 입력에 응답하여 저장 공간 인터페이스(102)를 표시할 수 있다. 저장 공간 아이콘(101)에 대한 입력은 터치의 감지를 기초로 다양하게 응용되어 정의될 수 있다. 사용자 인터페이스 제공 장치는 현재 실행 중인 어플리케이션의 인터페이스와 구별되게 저장 공간 인터페이스(102)를 표시할 수 있다. 사용자 인터페이스 제공 장치는 저장된 오브젝트들을 저장 공간 인터페이스(102) 상에 시각적으로 표현할 수 있다.
사용자 인터페이스 제공 장치는 저장 공간 인터페이스(102) 상에서 오브젝트의 선택을 감지하고, 선택된 오브젝트를 드래그하는 드래그 입력을 감지할 수 있다. 사용자 인터페이스 제공 장치는 저장 공간 인터페이스(102)와 구별되는 어플리케이션의 인터페이스 상에서 드래그 입력이 해제되면, 오브젝트를 드래그 입력이 해제된 인터페이스에 붙여 넣는 동작을 제공할 수 있다. 오브젝트의 붙여 넣기가 성공적으로 수행되면, 전자 기기(100)로부터 드래그 입력이 해제된 인터페이스를 제공하는 어플리케이션으로 오브젝트가 전송될 수 있다. 또는, 전자 기기(100)에서 접근이 가능한 클라우드로부터 오브젝트가 전송될 수도 있다. 사용자 인터페이스 제공 장치는 메모리 또는 클라우드에 저장된 오브젝트를 다른 어플리케이션의 인터페이스 상에서 편리하게 입력할 수 있도록 하는 체험감을 사용자에게 제공할 수 있다.
사용자 인터페이스 제공 장치는 저장된 오브젝트와 관련된 파생 정보를 팝업으로 표시할 수 있다. 저장 공간 표시 아이콘(101)에 대한 입력이 감지되면, 사용자 인터페이스 제공 장치는 저장 공간 인터페이스(102) 상에 저장된 오브젝트들을 시각적으로 표시할 수 있다. 이 때, 저장 공간 인터페이스(102) 상에 표시된 오브젝트의 터치에 기초하여 사용자 인터페이스 제공 장치는 선택된 오브젝트와 관련된 정보를 팝업으로 표시할 수 있다. 사용자가 확인하고자 하는 오브젝트에 대한 터치를 일정시간 이상 유지하면, 사용자 인터페이스 제공 장치는 일정시간 이상의 터치에 응답하여, 저장된 오브젝트로부터 파생되는 2차적인 정보, 저장된 오브젝트와 연관된 정보 및 저장된 오브젝트의 요약 정보의 특징을 보여주는 팝업을 표시할 수 있다. 예를 들어, 팝업에 표시되는 정보는 오브젝트를 저장할 때의 시스템 로그(log) 정보, 오브젝트와 관련된 검색 결과가 요약된 형태로 제공될 수 있다. 팝업의 실시예에 따르면, 웹사이트에 접근하여 검색을 제공하는 어플리케이션을 통해 사진이 저장된 경우(예를 들어, 오브젝트가 사진인 경우), 사진이 저장되기까지의 웹사이트의 로그 정보, 사진의 이미지 검색 결과 및 검색 결과의 요약 정보(예를 들어, 신발의 사진 인 경우, 신발과 관련된 상품 정보 및 판매 가격 등)가 팝업으로 표시될 수 있다. 오브젝트가 웹사이트의 주소인 경우에는 그 웹사이트와 유사한 웹사이트의 정보 및 웹사이트와 관련된 리뷰 문장들이 팝업으로 표시될 수 있다. 이하, 도 2 내지 도 8을 참조하여 실시예에 관해 상세하게 설명한다.
도 2는 일실시예에 따른 사용자 인터페이스를 제공하는 전자 기기의 예시도이다.
도 2를 참조하면, 사용자 인터페이스 제공 방법이 적용되는 전자 기기(100)는 메모리(201) 및 프로세서(202)를 포함한다. 사용자 인터페이스를 제공하는 전자 기기는 터치스크린 기반의 전자 기기를 포함한다.
메모리(201)는 다른 어플리케이션의 인터페이스에서 선택된 타겟 오브젝트를 저장할 수 있다. 메모리(201)는 타겟 오브젝트의 타입에 기초하여 수집된 타겟 오브젝트와 연관된 메타데이터(metadata)를 저장할 수 있다. 실시예에 따라서 메모리(201)는 서버로 구현된 클라우드로 대체될 수 있다. 다른 어플리케이션의 인터페이스를 통해 선택된 타겟 오브젝트가 저장되고, 메타데이터가 수집되는 과정은 도 3을 참조하여 설명한다.
프로세서(202)는 다른 어플리케이션의 인터페이스에서 선택된 타겟 오브젝트를 저장하기 위한, 사용자 인터페이스를 제공할 수 있다. 예를 들어, 프로세서(202)는 다른 어플리케이션의 인터페이스에서 선택된 타겟 오브젝트를 드래그하는 드래그 입력에 기초하여, 타겟 오브젝트와 타겟 오브젝트와 연관된 메타데이터를 저장하고, 저장 결과에 따라 저장 공간 인터페이스를 갱신할 수 있다. 타겟 오브젝트가 저장되는 사용자 인터페이스는 도 3을 참조하여 설명되고, 저장을 위해 제공되는 사용자 인터페이스는 프로세서(202)에 의해 수행될 수 있다.
프로세서(202)는 기 저장된 오브젝트를 다른 어플리케이션의 인터페이스로 붙여 넣는 동작을 수행할 수 있다. 예를 들어, 프로세서(202)는 저장 공간 인터페이스에서 선택된 오브젝트를 드래그하는 드래그 입력에 기초하여, 오브젝트를 다른 어플리케이션의 인터페이스에 붙여 넣는 동작을 수행할 수 있다. 타겟 오브젝트를 붙여 넣는 사용자 인터페이스는 도 4를 참조하여 설명되고, 붙여 넣기를 위해 제공되는 사용자 인터페이스는 프로세서(202)에 의해 수행될 수 있다.
도 3은 사용자 인터페이스 제공 방법의 실시예에 따라 오브젝트가 저장되는 과정을 설명하기 위한 순서도이다.
도 3을 참조하면, 터치스크린을 구비한 전자 기기의 사용자 인터페이스 제공 장치는 터치스크린을 이용하여, 제1 어플리케이션의 인터페이스에서 선택된 타겟 오브젝트를 드래그하는 제1 드래그 입력을 감지할 수 있다(301). 여기서, 제1 어플리케이션은 타겟 오브젝트의 출처가 되는 어플리케이션으로 실시예로 제공되는 사용자 인터페이스와 구별되는 인터페이스를 제공한다. 이하, 제1 어플리케이션은 저장하고자 하는 오브젝트의 출처가 되는 어플리케이션을 지칭하고, 제2 어플리케이션은 붙여 넣는 동작의 대상이 되는 어플리케이션을 지칭한다. 타겟 오브젝트는 실시예에 따른 사용자 인터페이스를 통해 저장, 이동, 편집, 확인, 붙여 넣기, 선택 및 터치 등의 타겟이 되는 오브젝트를 의미한다.
사용자 인터페이스 제공 장치는 제1 어플리케이션이 활성화된 상태에서 터치스크린의 일 측에 저장 공간 표시 아이콘을 표시할 수 있다. 사용자 인터페이스 제공 방법인 제1 어플리케이션과 독립된 백그라운드 어플리케이션으로 구현된 경우, 저장 공간 표시 아이콘은 제1 어플리케이션의 활성화 여부와 무관하게 터치스크린의 일 측에 항상 표시될 수 있다. 또한, 사용자 인터페이스 제공 방법이 OS를 통해 정의된 경우, 제1 어플리케이션의 활성화 여부에 영향을 받지 않고 시스템 레벨에서 저장 공간 표시 아이콘이 터치스크린의 일 측에 항상 표시될 수도 있다.
제1 어플리케이션의 인터페이스 상에서 수행되는 타겟 오브젝트의 선택은 제1 어플리케이션 또는 전자 기기의 OS에 의해 정의된 방식에 따라 처리될 수 있다. 예를 들어, 제1 어플리케이션의 인터페이스 상에서 특정 오브젝트에 대한 터치가 일정 시간 이상 유지되면, 전자 기기의 OS 또는 제1 어플리케이션은 그 특정 오브젝트를 선택하는 인터페이스를 제공할 수 있고, 여기서 선택된 특정 오브젝트는 타겟 오브젝트일 수 있다.
사용자 인터페이스 제공 장치는 제1 어플리케이션의 인터페이스에서 선택된 타겟 오브젝트가 저장 가능한 오브젝트인지 여부를 판별할 수 있다. 사용자 인터페이스 제공 장치는 타겟 오브젝트가 저장 가능한 오브젝트인 경우, 타겟 오브젝트가 드래그에 따라 이동하는 시각적 효과를 제공할 수 있다. 예를 들어, 제1 어플리케이션이 웹페이지를 실행하는 어플리케이션이고, 웹페이지 상에서 텍스트 또는 이미지가 없는 빈 화면이 선택되었을 때, 사용자 인터페이스 제공 장치는 선택된 오브젝트가 저장 가능한 오브젝트에 해당하지 않는 것으로 판단할 수 있다. 이 경우, 사용자 인터페이스 제공 장치는 드래그 입력에 반응하지 않을 수 있다. 예를 들어, 오브젝트가 드래그에 따라 이동하는 시각적 효과가 제공되지 않거나 저장 공간 인터페이스가 표시되지 않을 수 있다.
사용자 인터페이스 제공 장치는 제1 드래그 입력에 기초하여, 제1 어플리케이션의 인터페이스와 구별되는 저장 공간 인터페이스를 표시할 수 있다(302). 일실시예에 따르면, 사용자 인터페이스 제공 장치는 제1 어플리케이션의 인터페이스에서 선택된 타겟 오브젝트를 드래그하는 제1 드래그 입력이 감지되면, 감지된 제1 드래그 입력의 방향이 저장 공간 표시 아이콘 쪽으로 향하는지 여부를 판단할 수 있다. 사용자 인터페이스 제공 장치는 저장 공간 표시 아이콘 쪽으로 향하는 제1 드래그 입력에 기초하여 저장 공간 인터페이스를 표시할 수 있다. 사용자 인터페이스 제공 장치는 제1 드래그 입력을 감지하면, 타겟 오브젝트가 드래그에 따라 이동하는 시각적 효과를 제공할 수 있다. 또한, 사용자 인터페이스 제공 장치는 제1 드래그 입력이 저장 공간 표시 아이콘 상에서 감지되면, 저장 공간 인터페이스를 표시하는 실시예를 제공할 수도 있다. 사용자 인터페이스 제공 방법이 저장 공간 인터페이스의 표시를 트리거(trigger)하는 명령을 생성하는 방식은 타겟 오브젝트와 관련된 터치 동작을 통해 다양하게 정의될 수 있다.
사용자 인터페이스 제공 방법이 제1 어플리케이션과 독립된 어플리케이션으로 구현된다면, 사용자 인터페이스 제공 방법을 수행하는 어플리케이션은 제1 드래그 입력에 응답하여 활성화될 수 있다. 이 경우, 제1 어플리케이션과 독립된 어플리케이션이 활성화됨에 따라, 제1 어플리케이션의 인터페이스를 통해 표시된 팝업이 사라지는 시각적 효과가 사용자에게 제공될 수 있다. 또한, 사용자 인터페이스 제공 방법이 시스템 레벨에서 OS를 통해 구현된 경우에도, 사용자 인터페이스 제공 방법을 수행하는 OS가 제1 드래그 입력에 응답하여 활성화 될 수 있다. 이 경우에도, 제1 드래그 입력에 따라 제1 어플리케이션의 인터페이스를 통해 표시된 팝업이 사라지는 시각적 효과가 사용자에게 제공될 수 있다.
사용자 인터페이스 제공 장치는 저장 공간 인터페이스에 기 저장된 오브젝트를 표시할 수 있다. 예를 들어, 사용자 인터페이스 제공 장치는 메모리 또는 클라우드에 저장된 오브젝트를 시각화하여 저장 공간 인터페이스에 표시할 수 있는데, 시각화 방식은 사용자 정의에 따라 다양하게 변형될 수 있도록 구현될 수 있다.
사용자 인터페이스 제공 장치는 제1 드래그 입력이 저장 공간 인터페이스 상에서 해제되면, 타겟 오브젝트의 타입에 기초하여 타겟 오브젝트와 연관된 메타데이터(metadata)를 수집할 수 있다(303). 메타데이터는 사용자 인터페이스 제공 방법을 통해 수집되는 타겟 오브젝트와 관련된 데이터로서, 타겟 오브젝트로부터 파생되는 2차적인 정보, 타겟 오브젝트와 연관된 정보 또는 타겟 오브젝트의 요약 정보 등을 포함한다.
타겟 오브젝트의 타입은 텍스트, 이미지, 음악, 동영상 및 멀티미디어 콘텐츠 중 적어도 하나를 포함한다. 텍스트는 이메일의 주소 및 웹사이트의 주소 중 적어도 하나를 포함하며, 이미지는 상품의 이미지를 포함한다. 타겟 오브젝트와 연관된 메타데이터는 타겟 오브젝트와 관련된 히스토리를 포함한다. 여기서, 히스토리는 타겟 오브젝트의 출처, 타겟 오브젝트의 전송 기록, 타겟 오브젝트의 저장 기록 및 타겟 오브젝트의 이전 소유자 중 적어도 하나를 포함한다. 타겟 오브젝트의 출처는 제1 어플리케이션을 포함하고, 타겟 오브젝트의 이전 소유자는 제1 어플리케이션을 통해 타겟 오브젝트를 전송한 주체를 포함한다.
또한, 메타데이터는 타겟 오브젝트의 소스 어플리케이션, 웹사이트의 연관 웹사이트, 웹사이트의 리뷰 문장, 타겟 오브젝트의 저장 시 웹사이트 이동 과정, 이미지에 대응하는 이미지 검색 결과, 상품을 대표하는 키워드, 상품의 판매 가격, 상품의 리뷰 문장, 상품의 가격 비교 정보 및 상품의 판매 웹사이트 중 적어도 하나를 포함한다. 사용자 인터페이스 제공 장치는 타겟 오브젝트를 저장하게 되는 경우, 타겟 오브젝트의 타입에 기초하여 타겟 오브젝트와 관련된 정보를 웹사이트의 검색을 통해 수집하거나, 타겟 오브젝트의 출처가 되는 어플리케이션의 시스템 로그 정보를 통해 수집하거나, 타겟 오브젝트의 타입에 따라 구별되는 식별정보를 수집하거나, 타겟 오브젝트의 이미지 검색을 통해 이미지 검색 결과를 수집하거나, 타겟 오브젝트와 관련된 텍스트를 취합하여 키워드를 추출하는 방식으로 메타데이터를 수집할 수 있다. 사용자 인터페이스 제공 방법에 의해 메타데이터가 수집되는 경로나 방식은 여기에 한정되지 않고 다양한 기법이 채용되어 응용될 수 있다.
사용자 인터페이스 제공 장치는 타겟 오브젝트 및 메타데이터를 저장할 수 있다(304). 사용자 인터페이스 제공 장치는 타겟 오브젝트 및 메타데이터를 매칭하는 매핑 정보를 저장할 수 있다. 일실시예에 따르면, 타겟 오브젝트 및 메타데이터는 사용자 인터페이스 제공 방법을 수행하는 어플리케이션 또는 OS를 통해 파일 형태로 메모리에 영구적으로 저장될 수 있다. 복사 및 붙여 넣기(copy & paste) 동작을 제공하는 전자 기기는 복사된 오브젝트를 임시 저장 공간에 기록하므로, 전자 기기의 전원이 꺼지면, 임시 저장 공간에 기록된 오브젝트들이 삭제될 수 있다. 다만, 사용자 인터페이스 제공 방법에 따른 실시예는 타겟 오브젝트 및 메타데이터를 저장하기 위한 메모리 공간을 별도로 할애하여 파일 형식으로 접근 및 관리할 수 있다.
일실시예에 따라 타겟 오브젝트가 전자 기기의 메모리에 저장되면, 사용자 인터페이스 제공 장치는 전자 기기의 OS 를 통해 접근 가능한 임시 저장 공간인 클립보드(clipboard)에 타겟 오브젝트를 복사할 수 있다. 또한, 메모리로부터 타겟 오브젝트가 삭제되면, 사용자 인터페이스 제공 장치는 클립보드에 복사된 타겟 오브젝트를 삭제할 수 있다. 다시 말해, 사용자 인터페이스 제공 장치는 OS를 통해 제공되는 클립보드와 연동하여, 타겟 오브젝트를 메모리에 저장 및 삭제하는 것과 동시에 클립보드에 저장 및 삭제하는 동작을 수행할 수 있다.
또한, 사용자 인터페이스 제공 장치는 클립보드에 의해 타겟 오브젝트가 복사되면, 타겟 오브젝트 및 타겟 오브젝트와 연관된 메타데이터를 메모리에 저장할 수 있다. 사용자 인터페이스 제공 장치는 클립보드를 통한 타겟 오브젝트의 복사를 인식하면, 타겟 오브젝트와 연관된 메타데이터를 수집할 수 있고, 타겟 오브젝트 및 메타데이터를 매칭시켜 메모리에 저장할 수 있다. 사용자 인터페이스 제공 장치는 클립보드로부터 타겟 오브젝트가 삭제되면, 메모리에 저장된 타겟 오브젝트 및 타겟 오브젝트와 연관된 메타데이터를 삭제할 수 있다. 다시 말해, 사용자 인터페이스 제공 장치는 OS를 통해 제공되는 클립보드와 연동하여, 타겟 오브젝트가 클립보드를 통해 복사 및 삭제되는 동작을 인식하고, 이와 동시에 메모리에 저장 및 삭제하는 동작을 수행할 수 있다.
사용자 인터페이스 제공 장치는 타겟 오브젝트 및 메타데이터에 기초하여, 저장 공간 인터페이스를 갱신할 수 있다(305). 사용자 인터페이스 제공 장치는 타겟 오브젝트 및 메타데이터에 기초하여, 타겟 오브젝트에 대응하는 요약 이미지를 생성할 수 있다. 사용자 인터페이스 제공 장치는 요약 이미지를 저장 공간 인터페이스에 표시할 수 있다. 요약 이미지는 타겟 오브젝트 및 메타데이터를 표현하는 요약된 정보로서, 텍스트, 사진, 동영상 및 멀티미디어 콘텐츠 등으로 구현될 수 있다. 예를 들어, 요약 이미지는 메타데이터의 요약 정보, 텍스트의 머릿글, 텍스트의 첫 단어, 웹사이트의 첫 화면, 이미지의 축소 버전 및 동영상의 썸네일 중 적어도 하나를 포함한다.
사용자 인터페이스 제공 장치는 저장 공간 인터페이스에 표시된 적어도 하나의 오브젝트의 개수에 따라, 저장 공간 인터페이스에 표시된 타겟 오브젝트의 크기가 변하는 시각적 효과를 제공할 수 있다. 또는, 사용자 인터페이스 제공 장치는 저장 공간 인터페이스에 표시된 오브젝트들을 파일의 크기 별로 시각적으로 차별화하여 표현할 수 있다.
사용자 인터페이스 제공 장치는 저장 공간 인터페이스에서 타겟 오브젝트에 대한 입력이 감지되면, 타겟 오브젝트에 대한 입력에 응답하여 저장된 메타데이트를 획득할 수 있고, 여기서 메타데이터는 타겟 오브젝트와 매핑되어 저장되어 있을 수 있다. 사용자 인터페이스 제공 장치는 획득된 메타데이터를 보여주는 팝업을 표시할 수 있다. 사용자 입장에서, 사용자는 저장 공간 표시 아이콘을 터치하면, 저장 공간 인터페이스에 표시된 오브젝트들을 확인할 수 있다. 사용자 인터페이스 제공 장치는 오브젝트들의 타입 별로 수집된 메타데이터들을 저장하고 있고, 메타데이터들을 시각적으로 표시할 수 있기 때문에, 사용자는 저장된 오브젝트와 연관된 정보 또는 오브젝트의 타입에 따라 제공되는 정보를 직관적으로 확인할 수 있다. 예를 들어, 사용자 인터페이스 제공 방법에 따라 특정 웹사이트의 상품 이미지가 저장되었다면, 사용자 인터페이스 제공 장치는 저장 공간 인터페이스에 표시된 상품 이미지와 관련된 정보를 통해, 해당 웹사이트의 접속 히스토리, 해당 상품을 판매하는 유사 웹사이트, 해당 상품의 구매 후기, 해당 상품과 연계되어 제공되는 추천 상품, 해당 상품의 가격 비교 정보, 해당 상품을 선호하는 연령 및 성별 분석 자료, 해당 상품의 판매량 변화 추이 등을 사용자가 직관적으로 확인할 수 있는 체험감을 제공할 수 있다.
도 4는 사용자 인터페이스 제공 방법의 실시예에 따라 오브젝트의 붙여 넣는 동작이 수행되는 과정을 설명하기 위한 순서도이다.
도 4를 참조하면, 사용자 인터페이스 제공 장치는 제2 어플리케이션의 인터페이스와 구별되는 저장 공간 인터페이스를 표시할 수 있다(401). 사용자 인터페이스 제공 장치는 저장 공간 인터페이스를 활성화하는 저장 공간 표시 아이콘을 표시할 수 있는데, 저장 공간 표시 아이콘의 입력에 기초하여 저장 공간 인터페이스를 표시할 수 있다. 저장 공간 표시 아이콘 및 저장 공간 인터페이스가 표시되는 실시예는 도 1 내지 도 3을 참조하여 설명된 기술이 적용될 수 있다.
사용자 인터페이스 제공 장치는 터치스크린을 이용하여, 저장 공간 인터페이스에서 선택된 타겟 오브젝트를 드래그하는 제2 드래그 입력을 감지할 수 있다(402). 저장 공간 인터페이스에서 타겟 오브젝트를 선택하는 사용자의 입력은 터치스크린에 기반한 다양한 방식을 통해 정의될 수 있다. 예를 들어, 사용자 인터페이스 제공 장치는 저장 공간 인터페이스 상의 타겟 오브젝트에 대한 터치를 감지하면, 타겟 오브젝트가 선택된 것으로 인식할 수 있다.
사용자 인터페이스 제공 장치는 제2 드래그 입력이 제2 어플리케이션의 인터페이스 상에서 해제되면, 타겟 오브젝트를 제2 어플리케이션의 인터페이스에 붙여 넣는(pasting) 동작을 수행할 수 있다(403). 사용자 인터페이스 제공 방법이 시스템 레벨에서 OS에서 정의된 규약으로 구현된 경우, 제2 어플리케이션은 사용자 인터페이스 제공 방법에 따라 붙여 넣는 동작을 지원할 수 있으므로, 제2 어플리케이션은 제2 어플리케이션의 인터페이스를 통해 타겟 오브젝트를 입력할 수 있다. 만약, 사용자 인터페이스 제공 방법이 제2 어플리케이션과 독립적인 어플리케이션으로 구현된 경우, 사용자 인터페이스 제공 장치는 제2 어플리케이션과 공유하는 규약을 통해 타겟 오브젝트의 붙여 넣는 동작을 수행할 수 있다. 이 경우, 제2 어플리케이션은 제2 어플리케이션의 인터페이스를 통해 미리 정의된 규약에 따라 타겟 오브젝트를 입력할 수 있다.
타겟 오브젝트가 제2 어플리케이션의 처리 대상 규약에 포함되어 있지 않은 경우, 사용자 인터페이스 제공 장치는 타겟 오브젝트를 제2 어플리케이션이 지원하는 처리 대상 규약에 적합한 오브젝트로 변환할 수 있다. 사용자 인터페이스 제공 장치는 타겟 오브젝트를 변환된 오브젝트로 대체하여, 제2 어플리케이션의 인터페이스에 붙여 넣는 동작을 수행할 수 잇다.
일실시예에 따르면, 타겟 오브젝트가 웹사이트의 주소이고, 제2 어플리케이션이 웹 브라우저인 경우, 웹 브라우저의 주소 창에 웹사이트의 주소가 입력되는 인터페이스가 제공될 수 있다. 또한, 타겟 오브젝트가 웹사이트의 주소를 제외한 텍스트이고, 제2 어플리케이션이 웹 브라우저인 경우, 웹 브라우저의 검색 창에 상기 텍스트가 입력되는 인터페이스가 제공될 수 있다.
사용자 인터페이스 제공 장치는 제2 어플리케이션 상에서 타겟 오브젝트와 관련된 히스토리가 생성되면, 히스토리를 수집할 수 있다. 사용자 인터페이스 제공 장치는 수집된 히스토리에 기초하여, 메타데이터를 갱신할 수 있고, 갱신된 메타데이터를 저장할 수 있다. 예를 들어, 사용자 인터페이스 제공 장치는 제2 어플리케이션 상에서의 타겟 오브젝트의 전송 기록을 획득하고, 획득된 전송 기록에 기초하여 메모리에 저장된 메타데이터를 갱신할 수 있다. 사용자 인터페이스 제공 장치는 갱신된 메타데이터에 기초하여, 저장 공간 인터페이스를 갱신할 수 있다.
도 5는 사용자 인터페이스 제공 방법이 적용되는 전자 기기의 실시예이다.
도 5를 참조하면, 전자 기기(100)는 메모리(501), 어플리케이션 제어부(502), SW(SoftWare) 모듈 제어부(503), 오브젝트 타입 판별부(504), 비디오 프로세서(505), 화면 표시부(506), 화면 터치 센싱부(507) 및 위치 인식부(508)를 포함한다. 사용자가 터치스크린에 표시된 저장 공간 표시 아이콘을 터치하면, 화면 터치 센싱부(260)는 터치스크린 대한 터치를 감지하고, 위치 인식부(508)는 저장 공간 표시 아이콘의 위치를 인식하여, 인식 결과를 SW 모듈 제어부(503)로 전달한다. SW 모듈 제어부(503)는 저장 공간 표시 아이콘에 대한 터치를 인식하여, 제어 명령을 생성할 수 있다. SW 모듈 제어부(503)는 생성된 제어 명령을 비디오 프로세서(505)에 전달하고, 비디오 프로세서(505)는 전달된 제어 명령을 처리하여 화면 처리 명령을 생성하고, 생성된 화면 처리 명령을 화면 표시부(506)로 전달할 수 있다. 화면 표시부(506)는 전달 받은 화면 처리 명령에 기초하여, 터치스크린에 저장 공간 인터페이스를 시각적으로 표시할 수 있다.
사용자가 오브젝트를 저장하기 위해, 오브젝트를 드래그 하여 저장 공간 인터페이스 상에서 해제하는 경우, 화면 터치 센싱부(507) 및 위치 인식부(508)는 드래그 입력과 관련된 터치를 감지하고, 위치를 인식하여 인식 결과를 SW 모듈 제어부(503)로 전달할 수 있다. SW 모듈 제어부(503)는 오브젝트의 드래그 입력과 저장 공간 인터페이스 상에서 드래그 입력이 해제된 것을 인식하여, 제어 명령을 생성할 수 있다. SW 모듈 제어부(503)는 생성된 제어 명령에 기초하여 오브젝트와 연관된 메타데이터를 수집하고, 수집된 메타데이터와 오브젝트를 메모리(501)에 저장할 수 있다. SW 모듈 제어부(503)는 오브젝트의 저장과 관련된 제어 명령을 비디오 프로세서(505)에 전달하고, 비디오 프로세서(505)는 전달된 제어 명령을 처리하여 화면 처리 명령을 생성하고, 생성된 화면 처리 명령을 화면 표시부(506)로 전달할 수 있다. 화면 표시부(506)는 전달 받은 화면 처리 명령에 기초하여, 저장 공간 인터페이스에 저장된 오브젝트를 시각화하여 표시할 수 있다. 오브젝트 타입 판별부(504)는 오브젝트의 타입을 판별할 수 있고, SW 모듈 제어부(503)는 판별된 오브젝트의 타입에 기초하여 메타데이터를 수집할 수 있다. SW 모듈 제어부(503)는 오브젝트의 타입에 기초하여, 오브젝트와 연관된 웹사이트의 검색 및 소스 어플리케이션 정보의 검색 등의 처리를 수행하여 메타데이터를 메모리(501)에 저장할 수 있다.
사용자가 오브젝트의 붙여 넣기를 하기 위해, 저장 공간 인터페이스에 표시된 오브젝트를 드래그 하여 다른 어플리케이션의 인터페이스 상에서 해제하는 경우, 화면 터치 센싱부(507) 및 위치 인식부(508)는 드래그 입력과 관련된 터치를 감지하고, 위치를 인식하여 인식 결과를 SW 모듈 제어부(503)로 전달할 수 있다. SW 모듈 제어부(503)는 오브젝트의 드래그 입력과 드래그 입력이 다른 어플리케이션의 인터페이스 상에서 해제된 것을 인식하여, 제어 명령을 생성할 수 있다. SW 모듈 제어부(503)는 생성된 제어 명령에 기초하여 메모리(501)로부터 오브젝트를 획득할 수 있고, 오브젝트를 다른 어플리케이션의 인터페이스 상에서 붙여 넣는 명령을 생성할 수 있다. SW 모듈 제어부(503)는 오브젝트의 붙여 넣기와 관련된 제어 명령을 비디오 프로세서(505)에 전달하고, 비디오 프로세서(505)는 전달된 제어 명령을 처리하여 화면 처리 명령을 생성하고, 생성된 화면 처리 명령을 화면 표시부(506)로 전달할 수 있다. 화면 표시부(506)는 전달 받은 화면 처리 명령에 기초하여, 드래그 입력에 따라 오브젝트가 이동하는 시각적 효과를 디스플레이를 통해 제공할 수 있다. 다른 어플리케이션의 인터페이스 상에서 오브젝트의 드래그 입력이 해제된 경우, 어플리케이션 제어부(502)는 메모리(501)로부터 오브젝트를 획득할 수 있다. 어플리케이션 제어부(502)는 드래그 입력이 해제된 인터페이스를 제공하는 어플리케이션을 제어할 수 있다.
사용자가 저장된 오브젝트와 관련된 정보를 확인하기 위해, 저장 공간 인터페이스 상에 표시된 오브젝트를 일정 시간 이상 터치하는 경우, 화면 터치 센싱부(507) 및 위치 인식부(508)는 터치를 감지하고, 위치를 인식하여 인식 결과를 SW 모듈 제어부(503)로 전달할 수 있다. SW 모듈 제어부(503)는 오브젝트의 터치가 일정 시간 이상인 것을 인식하여, 제어 명령을 생성할 수 있다. SW 모듈 제어부(503)는 생성된 제어 명령에 기초하여 메모리(501)로부터 오브젝트와 대응하는 메타데이터를 획득할 수 있고, 메타데이터를 보여주는 팝업과 관련된 제어 명령을 생성할 수 있다. SW 모듈 제어부(503)는 팝업과 관련된 제어 명령을 비디오 프로세서(505)에 전달하고, 비디오 프로세서(505)는 전달된 제어 명령을 처리하여 화면 처리 명령을 생성하고, 생성된 화면 처리 명령을 화면 표시부(506)로 전달할 수 있다. 화면 표시부(506)는 전달 받은 화면 처리 명령에 기초하여, 메타데이터를 보여주는 팝업을 터치스크린에 표시할 수 있다.
도 6은 사용자 인터페이스 제공 방법의 실시예를 설명하기 위한 순서도이다.
사용자가 저장하고자 하는 오브젝트를 일정 시간 이상 터치하게 되면, 사용자 인터페이스 제공 장치는 일정 시간 이상의 터치를 감지하고, 오브젝트의 타입을 판별할 수 있다(601 및 602). 사용자 인터페이스 제공 장치는 판별된 타입에 기초하여, 오브젝트가 저장 가능한 오브젝트인지 여부를 결정할 수 있다(603). 오브젝트가 선택된 어플리케이션의 인터페이스 상에서 일정 시간 이상의 터치에 의해 제공되는 관련 기능 팝업이 표시될 수 있다(604 및 605). 사용자 인터페이스 제공 장치는 오브젝트가 저장 가능한 것으로 판별되면, 오브젝트에 대한 드래그 입력을 감지할 수 있다. 사용자 인터페이스 제공 장치는 사용자가 오브젝트에 대한 터치를 유지한 상태에서 저장 공간 표시 아이콘으로 이동하는 드래그 입력을 감지할 수 있다(606). 사용자 인터페이스 제공 장치는 드래그 입력이 감지되면, 저장 공간 인터페이스를 표시할 수 있다(608). 또한, 드래그 입력에 의해, 오브젝트가 선택된 어플리케이션의 인터페이스에 의해 표시된 팝업이 제거될 수 있다(607). 사용자 인터페이스 제공 장치는 저장 공간 인터페이스 상에서 터치가 해제되는지 여부를 판단할 수 있다(609). 예를 들면, 사용자 인터페이스 제공 장치는 오브젝트의 드래그 입력의 해제를 감지할 수 있다. 사용자 인터페이스 제공 장치는 드래그 입력의 해제에 응답하여, 오브젝트를 메모리에 저장할 수 있다(610). 사용자 인터페이스 제공 장치는 오브젝트와 관련된 웹 검색 및 정보의 처리를 수행할 수 있고(611), 그 결과 생성되는 오브젝트 관련 메타데이터를 메모리에 저장할 수 있다(612). 사용자 인터페이스 제공 장치는 메모리에 저장된 오브젝트 및 메타데이터에 기초하여, 저장 공간 인터페이스 상에 요약 이미지를 표시할 수 있다(613).
도 7은 사용자 인터페이스 제공 방법의 실시예를 설명하기 위한 순서도이다.
사용자가 저장 공간 표시 아이콘을 일정 시간 이내 동안 터치하면, 사용자 인터페이스 제공 장치는 일정 시간 이내의 터치를 감지하고, 감지된 터치에 응답하여 저장 공간 인터페이스를 표시할 수 있다(701 및 702). 사용자가 터치스크린 상에서 전달하고자 하는 오브젝트의 위치를 터치하면, 사용자 인터페이스 제공 장치는 붙여 넣기의 대상이 되는 오브젝트의 선택을 인식할 수 있다(703). 사용자가 일정 시간 이내에 오브젝트를 드래그하여 다른 어플리케이션의 인터페이스 상에서 터치를 해제하는 경우, 사용자 인터페이스 제공 장치는 오브젝트의 드래그 입력이 다른 어플리케이션의 인터페이스 상에서 해제된 것으로 인식할 수 있다(704). 사용자 인터페이스 제공 장치는 메모리로부터 오브젝트를 획득하여, 획득된 오브젝트를 다른 어플리케이션의 인터페이스로 붙여 넣는 동작을 수행할 수 있고, 이를 통해 다른 어플리케이션으로 오브젝트를 전달할 수 있다(705).
도 8은 사용자 인터페이스 제공 방법의 실시예를 설명하기 위한 순서도이다.
사용자가 저장 공간 표시 아이콘을 일정 시간 이내 동안 터치하면, 사용자 인터페이스 제공 장치는 일정 시간 이내의 터치를 감지하고, 감지된 터치에 응답하여 저장 공간 인터페이스를 표시할 수 있다(801 및 802). 사용자가 터치스크린 상에서 확인하고자 하는 오브젝트의 위치를 일정 시간 이상 동안 터치하면, 사용자 인터페이스 제공 장치는 오브젝트의 팝업과 관련된 입력을 인식할 수 있다(803). 사용자 인터페이스 제공 장치는 메모리로부터 오브젝트와 관련된 정보(예를 들어, 메타데이터)를 획득하고, 획득된 정보에 기초하여 팝업을 표시할 수 있다(804).
이상에서 설명된 실시예들은 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치, 방법 및 구성요소는, 예를 들어, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPGA(field programmable gate array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 애플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다. 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다. 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다. 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.
소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.
실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
이상과 같이 실시예들이 비록 한정된 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기를 기초로 다양한 기술적 수정 및 변형을 적용할 수 있다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.
그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.

Claims (20)

  1. 터치스크린을 구비한 전자 기기의 사용자 인터페이스 제공 방법에 있어서,
    상기 터치스크린을 이용하여, 제1 어플리케이션의 인터페이스에서 선택된 타겟 오브젝트를 드래그하는 제1 드래그 입력을 감지하는 단계;
    상기 제1 드래그 입력에 기초하여, 상기 제1 어플리케이션의 인터페이스와 구별되는 저장 공간 인터페이스를 표시하는 단계;
    상기 제1 드래그 입력이 상기 저장 공간 인터페이스 상에서 해제되면, 상기 타겟 오브젝트의 타입에 기초하여 상기 타겟 오브젝트와 연관된 메타데이터(metadata)를 수집하는 단계;
    상기 타겟 오브젝트 및 상기 메타데이터를 저장하는 단계; 및
    상기 타겟 오브젝트 및 상기 메타데이터에 기초하여, 상기 저장 공간 인터페이스를 갱신하는 단계
    를 포함하는
    사용자 인터페이스 제공 방법.
  2. 제1항에 있어서,
    상기 제1 어플리케이션이 활성화된 상태에서 상기 터치스크린의 일 측에 저장 공간 표시 아이콘을 표시하는 단계
    를 더 포함하고,
    상기 저장 공간 인터페이스를 표시하는 단계는
    상기 저장 공간 표시 아이콘 쪽으로 향하는 상기 제1 드래그 입력에 기초하여, 상기 저장 공간 인터페이스를 표시하는 단계; 및
    기 저장된 오브젝트를 상기 저장 공간 인터페이스에 표시하는 단계
    를 포함하는,
    사용자 인터페이스 제공 방법.
  3. 제1항에 있어서,
    상기 타입은 텍스트, 이미지, 음악, 동영상 및 멀티미디어 콘텐츠 중 적어도 하나를 포함하고,
    상기 텍스트는 이메일의 주소 및 웹사이트의 주소 중 적어도 하나를 포함하며,
    상기 이미지는 상품의 이미지를 포함하는,
    사용자 인터페이스 제공 방법.
  4. 제3항에 있어서,
    상기 저장 공간 인터페이스를 갱신하는 단계는
    상기 타겟 오브젝트 및 상기 메타데이터에 기초하여, 상기 타겟 오브젝트에 대응하는 요약 이미지를 생성하는 단계; 및
    상기 요약 이미지를 상기 저장 공간 인터페이스에 표시하는 단계
    를 포함하고,
    상기 요약 이미지는
    상기 메타데이터의 요약 정보, 상기 텍스트의 머릿글, 상기 텍스트의 첫 단어, 상기 웹사이트의 첫 화면, 상기 이미지의 축소 버전 및 상기 동영상의 썸네일 중 적어도 하나를 포함하는,
    사용자 인터페이스 제공 방법.
  5. 제3항에 있어서,
    상기 메타데이터는
    상기 타겟 오브젝트와 관련된 히스토리를 포함하고,
    상기 히스토리는 상기 타겟 오브젝트의 출처, 상기 타겟 오브젝트의 전송 기록, 상기 타겟 오브젝트의 저장 기록 및 상기 타겟 오브젝트의 이전 소유자 중 적어도 하나를 포함하고,
    상기 출처는 상기 제1 어플리케이션을 포함하고, 상기 이전 소유자는 상기 제1 어플리케이션을 통해 상기 타겟 오브젝트를 전송한 주체를 포함하는,
    사용자 인터페이스 제공 방법.
  6. 제3항에 있어서,
    상기 메타데이터는
    상기 타겟 오브젝트의 소스 어플리케이션, 상기 웹사이트의 연관 웹사이트, 상기 웹사이트의 리뷰 문장, 상기 타겟 오브젝트의 저장 시 웹사이트 이동 과정, 상기 이미지에 대응하는 이미지 검색 결과, 상기 상품을 대표하는 키워드, 상기 상품의 판매 가격, 상기 상품의 리뷰 문장, 상기 상품의 가격 비교 정보 및 상기 상품의 판매 웹사이트 중 적어도 하나를 포함하는,
    사용자 인터페이스 제공 방법.
  7. 제1항에 있어서,
    상기 제1 드래그 입력을 감지하면, 상기 타겟 오브젝트가 상기 드래그에 따라 이동하는 시각적 효과를 제공하는 단계
    를 더 포함하고,
    상기 제1 어플리케이션의 인터페이스에서 상기 타겟 오브젝트의 선택에 의해 표시된 팝업(pop-up)이 사라지는,
    사용자 인터페이스 제공 방법.
  8. 제1항에 있어서,
    상기 저장 공간 인터페이스를 갱신하는 단계는
    상기 저장 공간 인터페이스에 표시된 적어도 하나의 오브젝트의 개수에 따라, 상기 저장 공간 인터페이스에 표시된 상기 타겟 오브젝트의 크기가 변하는 시각적 효과를 제공하는 단계
    를 포함하는,
    사용자 인터페이스 제공 방법.
  9. 제1항에 있어서,
    상기 제1 어플리케이션의 인터페이스에서 선택된 상기 타겟 오브젝트가 저장 가능한 오브젝트인지 여부를 판별하는 단계; 및
    상기 타겟 오브젝트가 저장 가능한 오브젝트인 경우, 상기 타겟 오브젝트가 상기 드래그에 따라 이동하는 시각적 효과를 제공하는 단계
    를 더 포함하는
    사용자 인터페이스 제공 방법.
  10. 제1항에 있어서,
    제1 타겟 오브젝트가 상기 전자 기기의 메모리에 저장되면, 상기 전자 기기의 OS(Operating System)를 통해 접근 가능한 임시 저장 공간인 클립보드(clipboard)에 상기 제1 타겟 오브젝트를 복사하는 단계;
    상기 메모리로부터 상기 제1 타겟 오브젝트가 삭제되면, 상기 클립보드에 복사된 상기 제1 타겟 오브젝트를 삭제하는 단계;
    상기 클립보드에 의해 제2 타겟 오브젝트가 복사되면, 상기 제2 타겟 오브젝트 및 상기 제2 타겟 오브젝트와 연관된 메타데이터를 상기 메모리에 저장하는 단계; 및
    상기 클립보드로부터 상기 제2 타겟 오브젝트가 삭제되면, 상기 메모리에 저장된 상기 제2 타겟 오브젝트 및 상기 제2 타겟 오브젝트와 연관된 상기 메타데이터를 삭제하는 단계
    를 더 포함하는
    사용자 인터페이스 제공 방법.
  11. 제1항에 있어서,
    상기 터치스크린을 이용하여, 상기 저장 공간 인터페이스에서 선택된 상기 타겟 오브젝트를 드래그하는 제2 드래그 입력을 감지하는 단계; 및
    상기 제2 드래그 입력이 제2 어플리케이션의 인터페이스 상에서 해제되면, 상기 타겟 오브젝트를 상기 제2 어플리케이션의 인터페이스에 붙여 넣는(pasting) 동작을 수행하는 단계
    를 더 포함하는
    사용자 인터페이스 제공 방법.
  12. 제11항에 있어서,
    상기 저장 공간 인터페이스를 활성화하는 저장 공간 표시 아이콘을 표시하는 단계; 및
    상기 저장 공간 표시 아이콘의 입력에 기초하여, 상기 제2 어플리케이션의 인터페이스와 구별되는 상기 저장 공간 인터페이스를 표시하는 단계
    를 더 포함하는
    사용자 인터페이스 제공 방법.
  13. 제11항에 있어서,
    상기 타겟 오브젝트가 웹사이트의 주소이고, 상기 제2 어플리케이션이 웹 브라우저인 경우, 상기 웹 브라우저의 주소 창에 상기 웹사이트의 주소가 입력되고,
    상기 타겟 오브젝트가 상기 웹사이트의 상기 주소를 제외한 텍스트이고, 상기 제2 어플리케이션이 웹 브라우저인 경우, 상기 웹 브라우저의 검색 창에 상기 텍스트가 입력되는,
    사용자 인터페이스 제공 방법.
  14. 제11항에 있어서,
    상기 저장 공간 인터페이스에서 상기 타겟 오브젝트에 대한 입력에 응답하여, 상기 저장된 메타데이터를 획득하는 단계; 및
    상기 획득된 메타데이터를 보여주는 팝업(pop-up)을 표시하는 단계
    를 더 포함하는
    사용자 인터페이스 제공 방법.
  15. 제11항에 있어서,
    상기 제2 어플리케이션 상에서 상기 타겟 오브젝트와 관련된 히스토리가 생성되면, 상기 히스토리를 수집하는 단계; 및
    상기 수집된 히스토리에 기초하여, 상기 메타데이터를 갱신하는 단계
    를 더 포함하는
    사용자 인터페이스 제공 방법.
  16. 제11항에 있어서,
    상기 붙여 넣는 동작을 수행하는 단계는
    상기 타겟 오브젝트가 상기 제2 어플리케이션의 처리 대상 규약에 포함되어 있지 않은 경우, 상기 타겟 오브젝트를 상기 처리 대상 규약에 적합한 오브젝트로 변환하는 단계; 및
    상기 타겟 오브젝트를 상기 변환된 오브젝트로 대체하여, 상기 제2 어플리케이션의 인터페이스에 붙여 넣는 동작을 수행하는 단계
    를 포함하는,
    사용자 인터페이스 제공 방법.
  17. 하드웨어와 결합되어 제1항 내지 제16항 중 어느 하나의 항의 방법을 실행시키기 위하여 매체에 저장된 컴퓨터 프로그램.
  18. 사용자 인터페이스를 제공하는 터치스크린 기반의 전자 기기에 있어서,
    제1 어플리케이션의 인터페이스에서 선택된 타겟 오브젝트; 및 상기 타겟 오브젝트의 타입에 기초하여 수집된 상기 타겟 오브젝트와 연관된 메타데이터(metadata)를 저장하는 메모리; 및
    제2 어플리케이션의 인터페이스와 구별되는 저장 공간 인터페이스를 표시하고, 상기 터치스크린을 이용하여 상기 저장 공간 인터페이스에서 선택된 타겟 오브젝트를 드래그하는 드래그 입력을 감지하며, 상기 드래그 입력이 상기 제2 어플리케이션의 인터페이스 상에서 해제되면, 상기 타겟 오브젝트를 상기 제2 어플리케이션의 인터페이스에 붙여 넣는(pasting) 동작을 수행하는 프로세서
    를 포함하는
    터치스크린 기반의 전자 기기.
  19. 제18항에 있어서,
    상기 프로세서는
    상기 저장 공간 인터페이스에서 상기 타겟 오브젝트에 대한 입력에 응답하여, 상기 저장된 메타데이터를 획득하고,
    상기 획득된 메타데이터를 보여주는 팝업(pop-up)을 표시하는,
    터치스크린 기반의 전자 기기.
  20. 제18항에 있어서,
    상기 메타데이터는 상기 타겟 오브젝트와 관련된 히스토리를 포함하고,
    상기 프로세서는
    상기 제2 어플리케이션 상에서의 상기 타겟 오브젝트의 전송 기록을 획득하고, 상기 획득된 전송 기록에 기초하여 상기 메모리에 저장된 메타데이터를 갱신하며, 상기 갱신된 메타데이터에 기초하여 상기 저장 공간 인터페이스를 갱신하는,
    터치스크린 기반의 전자 기기.
KR1020160097275A 2016-07-29 2016-07-29 사용자 인터페이스 제공 방법 및 장치 KR20180013479A (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020160097275A KR20180013479A (ko) 2016-07-29 2016-07-29 사용자 인터페이스 제공 방법 및 장치
US15/584,724 US20180032246A1 (en) 2016-07-29 2017-05-02 Method and apparatus to provide user interface

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160097275A KR20180013479A (ko) 2016-07-29 2016-07-29 사용자 인터페이스 제공 방법 및 장치

Publications (1)

Publication Number Publication Date
KR20180013479A true KR20180013479A (ko) 2018-02-07

Family

ID=61010136

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160097275A KR20180013479A (ko) 2016-07-29 2016-07-29 사용자 인터페이스 제공 방법 및 장치

Country Status (2)

Country Link
US (1) US20180032246A1 (ko)
KR (1) KR20180013479A (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102481843B1 (ko) * 2022-09-26 2022-12-26 김태원 Nft 기반의 메타버스 티켓을 이용하는 메타버스 서비스 플랫폼 및 그 서비스 제공방법
KR102559768B1 (ko) * 2022-07-27 2023-07-26 콩테크 주식회사 오브젝트와 앱 간의 연관도를 이용한 앱목록 인터페이스를 제공하는 방법, 이를 수행하는 서비스서버 및 컴퓨터-판독가능 매체
KR102559765B1 (ko) * 2022-07-27 2023-07-26 콩테크 주식회사 오브젝트 관련 앱목록 인터페이스를 제공하는 방법, 이를 수행하는 서비스서버 및 컴퓨터-판독가능 매체

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8984080B1 (en) 2013-04-09 2015-03-17 Kabam, Inc. Facilitating user configured assistance requests through a chat in a virtual space
US9332043B1 (en) 2013-04-12 2016-05-03 Kabam, Inc. System and method for facilitating user interaction with a virtual space through a graphical chat interface
CN112988660A (zh) * 2019-12-16 2021-06-18 青岛海信移动通信技术股份有限公司 应用数据的收藏方法及终端
CN112764614B (zh) * 2021-01-22 2022-06-24 维沃移动通信有限公司 一种数据隔离方法和电子设备
CN112954111A (zh) * 2021-02-09 2021-06-11 维沃移动通信有限公司 分享图片的方法、装置、电子设备及存储介质
US11711493B1 (en) 2021-03-04 2023-07-25 Meta Platforms, Inc. Systems and methods for ephemeral streaming spaces
CN113867608A (zh) * 2021-09-02 2021-12-31 浙江大华技术股份有限公司 一种业务处理模型的组建方法与装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102559768B1 (ko) * 2022-07-27 2023-07-26 콩테크 주식회사 오브젝트와 앱 간의 연관도를 이용한 앱목록 인터페이스를 제공하는 방법, 이를 수행하는 서비스서버 및 컴퓨터-판독가능 매체
KR102559765B1 (ko) * 2022-07-27 2023-07-26 콩테크 주식회사 오브젝트 관련 앱목록 인터페이스를 제공하는 방법, 이를 수행하는 서비스서버 및 컴퓨터-판독가능 매체
KR102481843B1 (ko) * 2022-09-26 2022-12-26 김태원 Nft 기반의 메타버스 티켓을 이용하는 메타버스 서비스 플랫폼 및 그 서비스 제공방법

Also Published As

Publication number Publication date
US20180032246A1 (en) 2018-02-01

Similar Documents

Publication Publication Date Title
KR20180013479A (ko) 사용자 인터페이스 제공 방법 및 장치
US11157577B2 (en) Method for searching and device thereof
US11200293B2 (en) Method and system for controlling presentation of web resources in a browser window
EP2662762A2 (en) Document manager and browser
US10921974B2 (en) Using drag and drop to apply metadata
US11314826B2 (en) Method for searching and device thereof
US20160077673A1 (en) Intelligent Canvas
US8799255B2 (en) Button-activated contextual search
US20120124068A1 (en) Document management apparatus and method for controlling same
US10846328B2 (en) Digital asset association with search query data
US10437464B2 (en) Content filtering system for touchscreen devices
US20170277722A1 (en) Search service providing apparatus, system, method, and computer program
EP3649606A1 (en) Method and apparatus to transfer data from a first computer state to a different computer state
US10782947B2 (en) Systems and methods of diagram transformation
US11768573B2 (en) Graphical user interface marking feedback
KR20180071886A (ko) 컨텐트를 분류하는 방법 및 전자 장치
US20190155812A1 (en) Method, device, and non-transitory computer-readable recording medium storing computer program for providing content
US20170300199A1 (en) Method and apparatus to transfer data from a first computer state to a different computer state
US10838918B2 (en) Preservation of referential integrity
WO2009029219A1 (en) Information retrieval using keywords from cursor positions on display