KR20120133149A - 데이터 태깅 장치, 그의 데이터 태깅 방법 및 데이터 검색 방법 - Google Patents

데이터 태깅 장치, 그의 데이터 태깅 방법 및 데이터 검색 방법 Download PDF

Info

Publication number
KR20120133149A
KR20120133149A KR1020110051671A KR20110051671A KR20120133149A KR 20120133149 A KR20120133149 A KR 20120133149A KR 1020110051671 A KR1020110051671 A KR 1020110051671A KR 20110051671 A KR20110051671 A KR 20110051671A KR 20120133149 A KR20120133149 A KR 20120133149A
Authority
KR
South Korea
Prior art keywords
data
tagging
tag information
image tag
hand drawing
Prior art date
Application number
KR1020110051671A
Other languages
English (en)
Other versions
KR101789234B1 (ko
Inventor
김보미
이정선
최정아
김형찬
Original Assignee
삼성에스디에스 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성에스디에스 주식회사 filed Critical 삼성에스디에스 주식회사
Priority to KR1020110051671A priority Critical patent/KR101789234B1/ko
Publication of KR20120133149A publication Critical patent/KR20120133149A/ko
Application granted granted Critical
Publication of KR101789234B1 publication Critical patent/KR101789234B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/51—Indexing; Data structures therefor; Storage structures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/55—Clustering; Classification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/5866—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, manually generated location and time information
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/80—Creating or modifying a manually drawn or painted image using a manual input device, e.g. mouse, light pen, direction keys on keyboard
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00—Image coding
    • G06T9/20—Contour coding, e.g. using detection of edges

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Library & Information Science (AREA)
  • Multimedia (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Processing Or Creating Images (AREA)

Abstract

본 발명은, 데이터 태깅 장치, 그의 데이터 태깅 방법 및 데이터 검색 방법 에 관한 것으로, 사용자의 핸드 드로잉을 인식하여 이로부터 추출한 이미지 태그를 데이터에 자동으로 태깅함으로써, 사용자의 핸드 드로잉으로 입력한 이미지 패턴과 같이 직관적이고 기억하기 용이한 형태의 이미지 태그를 기초로 데이터를 저장하고 관리할 수 있다.

Description

데이터 태깅 장치, 그의 데이터 태깅 방법 및 데이터 검색 방법{Data tagging apparatus and method thereof, and data search method using the same}
본 발명은, 데이터 태깅 장치, 그의 데이터 태깅 방법 및 데이터 검색 방법에 관한 것으로, 사용자의 핸드 드로잉을 인식하여 이로부터 추출한 이미지 태그를 데이터에 자동으로 태깅하는 데이터 태깅 장치, 그의 데이터 태깅 방법 및 데이터 검색 방법에 관한 것이다.
퍼스널 컴퓨터, 노트북, 스마트 폰과 같은 정보 처리 기기가 발전하면서, 매일 방대한 디지털 데이터가 생성되고 있다. 뿐만 아니라, 아날로그 데이터도 사진 촬영 및 스캔 등으로 디지털화하여 디지털 데이터와 함께 관리하고 싶은 욕구가 증대되고 있다.
이처럼 정보 처리 기기를 통해 아날로그 또는 디지털 데이터를 저장하고 관리함에 있어서, 통상적으로 사용자들은 텍스트 형태의 키워드를 입력하여 이를 기초로 저장된 데이터의 검색을 수행할 수 있다. 그러나, 이러한 텍스트 형태의 키워드 들은 철자를 다르게 입력할 경우에 올바르게 검색되지 않는 경우가 빈번하며, 직관적이지 않아 어떤 키워드로 데이터를 저장했는지에 대해 기억하기 힘들다.
따라서, 사용자의 핸드 드로잉으로 입력한 이미지 패턴과 같이 직관적이고 기억하기 용이한 형태의 이미지 태그를 기초로 데이터를 저장하고 관리할 수 있는 수단이 요청되고 있는 실정이다.
본 발명은 사용자의 핸드 드로잉을 인식하여 이로부터 추출한 이미지 태그를 데이터에 자동으로 태깅하는 데이터 태깅 장치, 그의 데이터 태깅 방법 및 데이터 검색 방법을 제공하는 데에 있다.
상기의 기술적 과제를 이루기 위한, 본 발명에 따른 데이터 태깅 장치는 데이터를 입력받는 데이터입력부; 사용자의 핸드 드로잉을 인식하여 인식된 핸드 드로잉으로부터 이미지 태그 정보를 추출하는 태그입력부; 태그입력부를 통해 추출된 이미지 태그 정보를 저장하는 태그저장부; 및 태그저장부에 저장된 기저장 이미지 태그 정보 중에서 입력받은 데이터에 대응가능한 기저장 이미지 태그 정보를 탐색하여 탐색된 기저장 이미지 태그 정보를 입력받은 데이터에 자동적으로 태깅하는 태깅제어부를 포함한다.
상기의 기술적 과제를 이루기 위한, 본 발명에 따른 데이터 태깅 방법은 데이터를 입력받는 단계; 저장된 기저장 이미지 태그 정보 중에서 입력받은 데이터에 대응가능한 기저장 이미지 태그 정보를 탐색하는 탐색단계; 및 탐색된 기저장 이미지 태그 정보를 입력받은 데이터에 자동적으로 태깅하는 단계를 포함한다.
상기의 기술적 과제를 이루기 위한, 본 발명에 따른 데이터 검색 방법은 사용자의 핸드 드로잉을 인식하여 인식된 핸드 드로잉으로부터 검색 이미지 태그 정보를 추출하는 단계; 추출된 검색 이미지 태그 정보를 기초로 태깅데이터저장부에 저장된 태깅 데이터를 검색하는 검색 단계; 및 검색된 태깅 데이터를 디스플레이하는 단계를 포함한다.
상기의 기술적 과제를 이루기 위한, 본 발명은 데이터 태깅 방법 또는 데이터 검색 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체를 제공한다.
본 발명에 따르면, 사용자의 핸드 드로잉을 인식하여 이로부터 추출한 이미지 태그를 데이터에 자동으로 태깅함으로써, 사용자의 핸드 드로잉으로 입력한 이미지 패턴과 같이 직관적이고 기억하기 용이한 형태의 이미지 태그를 기초로 데이터를 저장하고 관리할 수 있다.
도 1은 본 발명의 바람직한 일 실시예에 따른 데이터 태깅 장치의 구성을 도시한 블록도이다.
도 2는 본 발명의 바람직한 일 실시예에 따른 데이터 태깅 장치에서 수행될 수 있는 데이터 태깅 방법의 흐름을 도시한 도면이다.
도 3은 본 발명의 바람직한 일 실시예에 따른 데이터 태깅 장치에서 수행될 수 있는 데이터 검색 방법의 흐름을 도시한 도면이다.
도 4a 내지 4e는 본 발명의 바람직한 일 실시예에 따른 데이터 태깅 장치에서 다양한 종류의 데이터를 입력하여 태깅하는 과정을 설명하기 위해 데이터 태깅 장치의 인터페이스 화면을 예시한 도면이다.
이하의 내용은 단지 본 발명의 원리를 예시한다. 그러므로 당업자는 비록 본 명세서에 명확히 설명되거나 도시되지 않았지만 본 발명의 원리를 구현하고 본 발명의 개념과 범위에 포함된 다양한 장치를 발명할 수 있는 것이다. 또한, 본 명세서에 열거된 모든 조건부 용어 및 실시예들은 원칙적으로, 본 발명의 개념이 이해되도록 하기 위한 목적으로만 명백히 의도되고, 이와 같이 특별히 열거된 실시예들 및 상태들에 제한적이지 않는 것으로 이해되어야 한다. 또한, 본 발명의 원리, 관점 및 실시예들 뿐만 아니라 특정 실시예를 열거하는 모든 상세한 설명은 이러한 사항의 구조적 및 기능적 균등물을 포함하도록 의도되는 것으로 이해되어야 한다. 또한, 이러한 균등물들은 현재 공지된 균등물뿐만 아니라 장래에 개발될 균등물 즉 구조와 무관하게 동일한 기능을 수행하도록 발명된 모든 소자를 포함하는 것으로 이해되어야 한다.
따라서, 프로세서 또는 이와 유사한 개념으로 표시된 기능 블록을 포함하는 도면에 도시된 다양한 소자의 기능은 전용 하드웨어뿐만 아니라 적절한 소프트웨어와 관련하여 소프트웨어를 실행할 능력을 가진 하드웨어의 사용으로 제공될 수 있다. 프로세서에 의해 제공될 때, 기능은 단일 전용 프로세서, 단일 공유 프로세서 또는 복수의 개별적 프로세서에 의해 제공될 수 있고, 이들 중 일부는 공유될 수 있다. 또한, 프로세서, 제어 또는 이와 유사한 개념으로 제시되는 용어의 사용은 소프트웨어를 실행할 능력을 가진 하드웨어를 배타적으로 인용하여 해석되어서는 아니 되고, 제한 없이 디지털 신호 프로세서(DSP) 하드웨어, 소프트웨어를 저장하기 위한 롬(ROM), 램(RAM) 및 비휘발성 메모리를 암시적으로 포함하는 것으로 이해되어야 한다. 주지 관용의 다른 하드웨어도 포함될 수 있다.
상술한 목적, 특징 및 장점들은 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 더욱 분명해 질 것이다. 본 발명을 설명함에 있어서, 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략하거나 간략하게 설명하는 것으로 한다.
한편 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라, 다른 구성요소를 더 포함할 수 있는 것을 의미한다.
이하, 첨부된 도면을 참조하여 바람직한 실시예에 따른 본 발명을 상세히 설명하기로 한다.
도 1은 본 발명의 바람직한 일 실시예에 따른 데이터 태깅 장치(100)의 구성을 도시한 블록도이다.
도 1을 참조하면, 본 실시예에 따른 데이터 태깅 장치(100)는 데이터입력부(101), 태그입력부(102), 태깅제어부(103), 태그저장부(104), 태깅데이터저장부(105) 및 검색기능부(106)를 포함한다.
데이터입력부(101)는 데이터를 입력받아 태깅제어부(104)에 전달한다.
데이터입력부(101)는 필요한 경우에 입력받은 데이터의 종류를 분류하여 분류한 결과를 입력받은 데이터와 함께 태깅제어부(104)에 전달함으로써, 태깅제어부(104)에서 데이터의 타입에 따라 다르게 태깅 처리를 수행할 수 있도록 지원할 수 있다.
본 발명에서의 데이터는 사용자의 핸드 드로잉, 이미지뿐만 아니라 일정 정보, 연락처 정보 및 웹 페이지 주소 정보 등의 정보성 콘텐츠와, 웹 페이지 콘텐츠, 오디오 콘텐츠, 비디오 콘텐츠 등과 같은 각종 멀티미디어 콘텐츠 등이 이에 해당될 수 있으며, 다양한 형태의 아날로그 및 디지털 데이터를 모두 포함한다.
태그입력부(102)는 사용자의 핸드 드로잉을 인식하여 인식된 핸드 드로잉으로부터 이미지 태그 정보를 추출한다.
태그입력부(102)는 일반적으로 사용자의 핸드 드로잉을 인식하기 위한 인식부(107)와 인식된 내용으로부터 이미지 태그 정보를 추출하는 추출부로 구성될 수 있으며, 추출부(108)에서는 인식된 핸드 드로잉으로부터 이미지 태그 정보를 추출하는 패턴 추출 알고리즘이 구현된 어플리케이션이 실행될 수 있다.
사용자의 핸드 드로잉이란, 손 동작이나 손에 쥔 도구 등을 이용하여 스케치(sketch), 낙서(graffiti), 필기(note) 등을 수행함으로써, 문자, 숫자, 도형, 기호 등을 입력하는 것을 가리킨다.
인식부(107)는 터치 스크린, 마우스 및 태블릿(tablet) 등을 통해 사용자의 손 동작이나 손에 쥔 도구의 움직임을 센싱하여 사용자의 핸드 드로잉을 인식하거나, 화상 카메라 등을 통해 사용자의 제스처 영상을 획득하여 이러한 영상으로부터 사용자의 핸드 드로잉을 검출하도록 구성할 수 있으나, 이는 하나의 실시예에 불과하고, 본 발명이 이에 한정되지 않으며, 이외에도 다양한 핸드 드로잉 입력 내지 인식 기술이 적용될 수 있을 것이다.
추출부(108)는 인식부(107)에서 인식된 핸드 드로잉으로부터 이미지 태그 정보를 추출한다.
본 실시예에서의 이미지 태그 정보는 인식부(107)에서 인식된 핸드 드로잉으로부터 패턴 추출 기술을 이용하여 추출된 정보로써, 문자, 숫자, 도형, 기호의 하나로써 그 의미를 해석한 것이 아니라 핸드 드로잉의 형상에 포함된 패턴 그 자체를 표현하기 위한 정보로써, 핸드 드로잉의 형상에 포함된 패턴, 패턴을 구성하는 특징점, 핸드 드로잉의 드로잉 경로 및 핸드 드로잉의 드로잉 획수 등을 포함할 수 있다.
추출부(108)는 사용자의 핸드 드로잉으로부터 이러한 이미지 태그 정보를 추출하는 패턴 추출 알고리즘이 구현된 어플리케이션을 실행하는 방식으로 구현될 수 있으며, 이 때, 적용되는 패턴 추출 알고리즘으로 대표적인 것으로는 Sift(Scale Invariant Feature Transform) 알고리즘, 템플릿 매칭(template matching) 알고리즘 등이 있다.
이처럼 사용자의 핸드 드로잉을 인식하는 핸드 드로잉 인식 기술이나 이러한 핸드 드로잉으로부터 이미지 태그 정보를 추출하는 패턴 추출 기술은 매우 다양하게 존재하고 있다. 본 발명에서는 핸드 드로잉 인식이나 패턴 추출 기술 그 자체에 대해서는 제한을 두지 않고, 기존에 이미 구현되었거나 혹은 향후에 구현될 수 있는 핸드 드로잉 인식 기술이나 패턴 추출 기술을 적용하는 것을 전제로 한다.
태그저장부(104)는 태그입력부(102)를 통해 추출된 이미지 태그 정보를 저장한다.
태깅제어부(103)는 데이터입력부(101)를 통해 입력된 데이터(이하, 입력 데이터)에 이미지 태그정보를 자동적으로 태깅하는 것으로, 여기에서 태깅되는 이미지 태깅 정보로는 태그저장부(104)에 저장된 기저장 이미지 태그 정보나 태그입력부(102)를 통해 입력되는 신규 이미지 태그 정보 등이 있다.
태깅제어부(103)는 태그저장부(104)에 저장된 기저장 이미지 태그 정보 중에서 입력 데이터에 대응가능한 기저장 이미지 태그 정보를 탐색하여 탐색된 기저장 이미지 태그 정보를 입력 데이터에 자동적으로 태깅한다.
태깅제어부(103)에서 입력 데이터에 대응가능한 기저장 이미지 태그 정보를 찾는 방법에 있어서, 입력 데이터의 종류가 사용자의 핸드 드로잉 또는 이미지 형태가 아닌 경우에는 이미지 태그 정보와 입력 데이터의 대응 여부를 비교하기 어려우므로 별도의 탐색 과정을 거치지 않고, 태그입력부(102)를 통해 신규 이미지 태그 정보를 입력받아 신규 이미지 태그 정보를 입력 데이터에 자동적으로 태깅하는 것이 바람직하다.
태깅제어부(103)는 입력 데이터가 사용자의 핸드 드로잉인 경우에는 입력 데이터에 패턴 추출 기술을 적용하여 입력 데이터의 형상에 포함된 패턴, 입력 데이터의 패턴을 구성하는 특징점, 입력 데이터의 드로잉 경로 및 입력 데이터의 드로잉 횟수 등을 추출하여, 이를 태그저장부(104)에 저장된 기저장 이미지 태그 정보를 비교함으로써, 입력 데이터에 대응가능한 기저장 이미지 태그 정보를 탐색할 수 있다.
또한, 태깅제어부(103)는 입력 데이터가 이미지 형태인 경우에는 입력 데이터에 패턴 추출 기술을 적용하여 입력 데이터에 포함된 패턴 및 입력 데이터의 패턴을 구성하는 특징점 등을 추출하여, 이를 태그저장부(104)에 저장된 기저장 이미지 태그 정보를 비교함으로써, 입력 데이터에 대응가능한 기저장 이미지 태그 정보를 탐색한다.
태깅제어부(103)는, 상기한 방법과 같이 탐색한 결과, 입력 데이터에 대응가능한 기저장 이미지 태그 정보를 탐색하지 못한 경우에는 태그입력부(102)를 통해 신규 이미지 태그 정보를 입력받아 신규 이미지 태그 정보를 입력 데이터에 자동적으로 태깅한다.
이때, 태깅제어부(103)는 태그저장부(104)에 저장된 기저장 이미지 태그 정보 중에서 신규 이미지 태그 정보와 중복되는 기저장 이미지 태그 정보를 탐색하여 탐색 결과 신규 이미지 태그 정보와 중복되는 기저장 이미지 태그 정보가 없는 경우에는 신규 이미지 태그 정보를 태그저장부에 저장함으로써 기저장 이미지 태그 정보를 업데이트할 수 있다.
태깅데이터저장부(105)는 입력 데이터에 태깅된 이미지 태그 정보를 입력 데이터의 검색에 이용되는 인덱스로 등록하여 입력 데이터를 저장함으로써, 사용자가 이미지 태그 정보를 이용하여 태깅데이터저장부(105) 내의 데이터 검색을 용이하게 할 수 있도록 지원한다.
이처럼 데이터 검색 기능을 강화하기 위해, 검색기능부(106)는 태그입력부(102)를 통해 사용자의 핸드 드로잉이 인식되어 추출된 이미지 태그 정보를 기초로 태깅데이터저장부(105)에 저장된 데이터를 검색하여 이미지 태그 정보를 인덱스로 갖는 데이터를 디스플레이한다.
도 2는 본 발명의 바람직한 일 실시예에 따른 데이터 태깅 장치에서 수행될 수 있는 데이터 태깅 방법(S200)의 흐름을 도시한 도면이다.
본 실시예에 따른 데이터 태깅 장치는 도 1에 도시된 예와 같이 사용자의 핸드 드로잉으로부터 추출된 이미지 태그 정보를 저장하는 태그 저장부를 구비한 것을 전제로 한다.
도 2를 참조하면, 먼저 데이터를 입력받는다(S201).
S201 단계에서 입력받은 데이터가 사용자의 핸드 드로잉 또는 이미지 형태인지를 판단하여(S202), 입력 데이터가 사용자의 핸드 드로잉 또는 이미지 형태인 경우에는 태그저장부에 저장된 기저장 이미지 태그 정보 중에서 S201 단계에서 입력 데이터에 대응가능한 기저장 이미지 태그 정보를 탐색한다(S203).
입력 데이터에 대응가능한 기저장 이미지 태그 정보의 탐색에 성공한 경우에는(S204), S203 단계에서 탐색된 기저장 이미지 태그 정보를 입력 데이터에 자동적으로 태깅한다(S210).
입력 데이터에 대응가능한 기저장 이미지 태그 정보의 탐색에 성공하지 못한 경우에는(S204), 사용자의 핸드 드로잉을 요청한다(S205).
S205 단계에서의 요청에 따른 사용자의 핸드 드로잉을 인식하여(S206), S206 단계에서 인식된 핸드 드로잉으로부터 신규 이미지 태그 정보를 추출한다(S207).
S207 단계에서 추출된 신규 이미지 태그 정보와 중복되는 기저장 이미지 태그 정보를 탐색한다(S208).
신규 이미지 태그 정보와 중복되는 기저장 이미지 태그 정보의 탐색에 성공한 경우(S209)에는, S208 단계에서 탐색된 기저장 이미지 태그 정보를 입력 데이터에 자동적으로 태깅한다(S210).
아울러, 신규 이미지 태그 정보와 중복되는 기저장 이미지 태그 정보의 탐색에 성공하지 못한 경우(S209)에는 신규 이미지 태그 정보를 저장하고, 입력 데이터에 자동적으로 태깅한다(S211).
도 3은 본 발명의 바람직한 일 실시예에 따른 데이터 태깅 장치에서 수행될 수 있는 데이터 검색 방법(S300)의 흐름을 도시한 도면이다.
본 실시예에 따른 데이터 태깅 장치는 도 1에 도시된 예와 같이 사용자의 핸드 드로잉으로부터 추출된 이미지 태그 정보에 태깅된 태깅 데이터를 저장하는 태깅데이터저장부를 구비한 것을 전제로 한다. 여기에서 태깅데이터저장부는 태깅 데이터의 검색을 용이하게 하기 위해, 태깅 데이터에 태깅된 이미지 태그 정보를 태깅 데이터의 검색에 이용되는 인덱스로 등록하여 태깅 데이터를 저장할 수 있다.
도 3를 참조하면, 먼저, 사용자의 핸드 드로잉을 인식한다(S301).
S301 단계에서 인식된 핸드 드로잉으로부터 검색 이미지 태그 정보를 추출한다(S302).
S302 단계에서 추출된 검색 이미지 태그 정보를 기초로 태깅 데이터를 검색한다(S303).
좀더 구체적으로 살펴보면, S302 단계에서 추출된 검색 이미지 태그 정보 중 S301 단계에서 인식된 핸드 드로잉의 형상에 포함된 패턴, S301 단계에서 인식된 핸드 드로잉의 패턴을 구성하는 특징점, S301 단계에서 인식된 핸드 드로잉의 드로잉 경로 및 S301 단계에서 인식된 핸드 드로잉의 드로잉 횟수 중 적어도 하나 이상의 정보와 태그저장부에 저장된 태깅 데이터의 이미지 태그 정보를 비교하여 검색 이미지 태그 정보와 대응되는 이미지 태그 정보를 검색한 후에, 검색된 이미지 태그 정보에 태깅된 태깅 데이터를 검색 결과로 출력할 수 있다.
S303 단계에서 검색된 태깅 데이터를 디스플레이한다(S304). 검색된 태깅 데이터가 한 개인 경우에는 바로 태깅 데이터의 내용을 디스플레이하거나 태깅 데이터의 콘텐츠를 재생할 수 있고, 검색된 태깅 데이터가 적어도 둘 이상인 경우에는 태깅 데이터의 목록을 디스플레이하여 사용자가 이를 선택하도록 할 수 있다.
도 4a 내지 4e는 본 발명의 바람직한 일 실시예에 따른 데이터 태깅 장치에서 다양한 종류의 데이터를 입력하여 태깅하는 과정을 설명하기 위해 데이터 태깅 장치의 인터페이스 화면을 예시한 도면으로, 설명의 편의를 위해, 본 실시예의 데이터 태깅 장치는 이동통신 단말기이거나 이동통신 단말기 내에 포함되는 것으로 상정하여 도시한다.
도 4a는 본 실시예에 따른 데이터 태깅 장치에서 사용자가 핸드 드로잉을 통해 데이터를 입력한 예를 도시한다.
도 4a를 참조하면, 본 실시예에 따른 입력 데이터는 별 모양의 형상, “http://www.samsung.com”의 인터넷 주소 텍스트, “삼성 URL”의 일반 텍스트로 구성된다.
본 발명에서는, 이러한 입력 데이터에, 패턴 매칭 기술을 사용하여 별 모양의 형상의 패턴을 추출해낸 후, 이러한 패턴을 구성하는 특징점 등을 비교하여 이에 대응될 수 있는 기저장 이미지 태그 정보를 탐색하여 이에 입력 데이터를 태깅할 수 있다.
도 4b는 본 실시예에 따른 데이터 태깅 장치에서 사용자가 촬영이나 전송 등을 통해 이미지 형태의 데이터를 입력한 예를 도시한다.
도 4b를 참조하면, 본 실시예에 따른 입력 데이터는 별 모양의 형상, “8:15”의 시간 정보 텍스트, “강남역”의 장소 정보 텍스트로 구성된다.
본 발명에서는, 이러한 입력 데이터에, 패턴 매칭 기술을 사용하여 별 모양의 형상의 패턴을 추출해낸 후, 이러한 패턴을 구성하는 특징점 등을 비교하여 이에 대응될 수 있는 기저장 이미지 태그 정보를 탐색하여 이에 입력 데이터를 태깅할 수 있다. 만약 탐색 결과 대응될 수 있는 기저장 이미지 태그 정보가 없는 경우에는 신규 이미지 태그 정보를 입력받아 태깅하게 된다.
도 4c는 본 실시예에 따른 데이터 태깅 장치에서 사용자가 인터넷 웹 페이지 형태의 입력 데이터를 태깅하는 과정의 인터페이스 화면을 예시한다.
인터넷 웹 페이지 형태의 입력 데이터는 사용자의 핸드 드로잉이나 이미지 형태가 아니므로, 이로부터 직접 이미지 태그 정보를 추출할 수 없다. 따라서, 입력 데이터로부터 직접 이미지 태그 정보를 추출하지 않고 사용자의 핸드 드로잉을 입력받는 것이 바람직하다.
예컨대, 사용자는 이동통신 단말기 상에서 현재 보고 있는 인터넷 웹 페이지를 입력 데이터로서 이미지 태그 정보에 태깅하기 위해서, 인터넷 웹 페이지 상에서 화면 하단부의 메뉴의 태그 입력 버튼(401)을 선택하여 인터페이스 화면에 태그 입력 창(402)를 띄우도록 한다.
그리고, 사용자는 태그 입력 창(402) 내에 핸드 드로잉을 입력하게 되고, 데이터 태깅 장치는 입력된 핸드 드로잉로부터 신규 이미지 태그 정보를 추출하여, 기존에 이와 중복되는 기저장 이미지 태그 정보가 있으면, 해당 기저장 이미지 태그 정보를 인터넷 웹 페이지 형태의 입력 데이터에 태깅하고, 중복되는 기저장 이미지 태그 정보가 없는 경우에는 신규 이미지 태그 정보를 입력 데이터에 태깅하고, 이를 태그저장부에 저장하게 된다.
도 4d는 본 실시예에 따른 데이터 태깅 장치에서 이미지 태그와 카테고리가 매핑된 예를 도시한다.
본 실시예에 따른 데이터 태깅 장치는 태깅 데이터의 검색을 용이하게 하기 위해, 태깅 데이터에 태깅된 이미지 태그 정보를 태깅 데이터의 검색에 이용되는 인덱스로 등록하여 태깅 데이터를 저장하며, 따라서 태그 기반의 검색이 가능하다.
도 4d를 참조하면, 태깅 데이터들은 태그를 기반으로 분류되며, 데이터를 분류하는 카테고리와 태그가 매핑되어 태그 기반으로 카테고리를 생성하여 데이터를 관리할 수도 있다. 이 경우 사용자는 핸드 드로잉을 통해 신규 이미지 태그 입력시 카테고리 명을 부여할 수 있으며, 종래에 생성된 카테고리에 신규 이미지 태그를 매핑시킬 수도 있을 것이다.
이처럼 태그와 카테고리가 매핑되는 경우에는 사용자가 데이터에 태깅된 태그를 다른 태그로 변경하면 카테고리 또한 변경된 태그에 매핑된 카테고리로 자동적으로 변경되도록 구현될 수 있으며, 사용자가 데이터의 카테고리를 변경할 경우에는 데이터의 태그 역시 변경된 카테고리에 매핑되는 태그로 자동적으로 변경되도록 구현될 수 있다.
도 4e는 본 실시예에 따른 데이터 태깅 장치에서 사용자가 데이터를 검색하는 과정의 인터페이스 화면을 예시한다.
사용자가 태그 입력창(405)에 핸드 드로잉으로 별 모양의 형상을 입력하면, 별 모양의 형상에 대응되는 이미지 태그 정보에 태깅된 데이터의 목록이 제공될 수 있다. 사용자가 제공된 데이터의 목록 중에 특정 데이터를 선택하면, 해당 데이터에 바로 접근이 가능하도록 제공할 수 있다. 예컨대, 사용자가 선택한 데이터가 오디오 콘텐츠 형태의 데이터인 경우에는 앨범 등에 저장된 해당 오디오 콘텐츠가 바로 재생되며(406), 사용자가 선택한 데이터가 인터넷 웹 페이지 형태 데이터인 경우에는, 인터넷을 통해 해당 웹페이지에 접속하여 브라우저 상에서 해당 웹페이지를 실행할 수 있다(407).
본 발명에 따르면, 사용자의 핸드 드로잉을 인식하여 이로부터 추출한 이미지 태그를 데이터에 자동으로 태깅함으로써, 사용자의 핸드 드로잉으로 입력한 이미지 패턴과 같이 직관적이고 기억하기 용이한 형태의 이미지 태그를 기초로 데이터를 저장하고 관리할 수 있다.
본 발명에 따른 데이터 태깅 방법 또는 데이터 검색 방법은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의해 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광데이터 저장장치 등이 있으며, 또한 케리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한, 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다. 그리고, 본 발명을 구현하기 위한 기능적인(functional) 프로그램, 코드 및 코드 세그먼트들은 본 발명이 속하는 기술분야의 프로그래머들에 의해 용이하게 추론될 수 있다.
본 발명은 첨부된 도면에 도시된 일 실시예를 참고로 설명되었으나, 이는 예시적인 것에 불과하며, 당해 기술분야에서 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 수 있을 것이다. 따라서, 본 발명의 진정한 보호 범위는 첨부된 청구 범위에 의해서만 정해져야 할 것이다.

Claims (20)

  1. 데이터를 입력받는 데이터입력부;
    사용자의 핸드 드로잉을 인식하여 상기 인식된 핸드 드로잉으로부터 이미지 태그 정보를 추출하는 태그입력부;
    태그입력부를 통해 추출된 이미지 태그 정보를 저장하는 태그저장부; 및
    상기 태그저장부에 저장된 기저장 이미지 태그 정보 중에서 상기 입력받은 데이터에 대응가능한 기저장 이미지 태그 정보를 탐색하여 상기 탐색된 기저장 이미지 태그 정보를 상기 입력받은 데이터에 자동적으로 태깅하는 태깅제어부를 포함하는 것을 특징으로 하는 데이터 태깅 장치.
  2. 제1항에 있어서,
    상기 태깅제어부는 상기 입력받은 데이터에 대응가능한 기저장 이미지 태그 정보를 탐색하지 못한 경우에는 상기 태그입력부를 통해 신규 이미지 태그 정보를 입력받아 상기 신규 이미지 태그 정보를 상기 입력받은 데이터에 자동적으로 태깅하는 것을 특징으로 하는 데이터 태깅 장치.
  3. 제2항에 있어서,
    상기 태깅제어부는 상기 태그저장부에 저장된 기저장 이미지 태그 정보 중에서 상기 신규 이미지 태그 정보와 중복되는 기저장 이미지 태그 정보를 탐색하여 상기 탐색 결과 상기 중복되는 기저장 이미지 태그 정보가 없는 경우에는 상기 신규 이미지 태그 정보를 상기 태그저장부에 저장하는 것을 특징으로 하는 데이터 태깅 장치.
  4. 제1항에 있어서,
    상기 이미지 태그 정보는 상기 인식된 핸드 드로잉의 형상에 포함된 패턴, 상기 패턴을 구성하는 특징점, 상기 핸드 드로잉의 드로잉 경로 및 상기 핸드 드로잉의 드로잉 획수 중 적어도 하나 이상을 포함하는 것을 특징으로 하는 데이터 태깅 장치.
  5. 제1항에 있어서,
    상기 데이터는 사용자의 핸드 드로잉, 이미지, 일정 정보, 연락처 정보, 웹 페이지 주소 정보, 웹 페이지 콘텐츠, 오디오 콘텐츠 및 비디오 콘텐츠 중 적어도 하나 이상을 포함하는 것을 특징으로 하는 데이터 태깅 장치.
  6. 제5항에 있어서,
    상기 태깅제어부는, 상기 입력받은 데이터가 상기 사용자의 핸드 드로잉인 경우에는, 상기 입력받은 데이터의 형상에 포함된 패턴, 상기 입력받은 데이터의 패턴을 구성하는 특징점, 상기 입력받은 데이터의 드로잉 경로 및 상기 입력받은 데이터의 드로잉 횟수 중 적어도 하나 이상의 정보와 상기 태그저장부에 저장된 기저장 이미지 태그 정보를 비교하여 상기 입력받은 데이터에 대응가능한 기저장 이미지 태그 정보를 탐색하는 것을 특징으로 하는 데이터 태깅 장치.
  7. 제5항에 있어서,
    상기 태깅제어부는, 상기 입력받은 데이터가 이미지 형태인 경우에는, 상기 입력받은 데이터에 포함된 패턴 및 상기 입력받은 데이터의 패턴을 구성하는 특징점 중 적어도 하나 이상의 정보와 상상기 태그저장부에 저장된 기저장 이미지 태그 정보를 비교하여 상기 입력받은 데이터에 대응가능한 기저장 이미지 태그 정보를 탐색하는 것을 특징으로 하는 데이터 태깅 장치.
  8. 제5항에 있어서,
    상기 태깅제어부는, 상기 입력받은 데이터가 상기 사용자의 핸드 드로잉 또는 이미지 형태가 아닌 경우에는, 상기 태그입력부를 통해 신규 이미지 태그 정보를 입력받아 상기 신규 이미지 태그 정보를 상기 입력받은 데이터에 자동적으로 태깅하는 것을 특징으로 하는 데이터 태깅 장치.
  9. 제1항에 있어서,
    상기 입력받은 데이터에 태깅된 이미지 태그 정보를 상기 입력받은 데이터의 검색에 이용되는 인덱스로 등록하여 상기 입력받은 데이터를 저장하는 태깅데이터저장부; 및
    상기 태그 입력부를 통해 사용자의 핸드 드로잉이 인식되어 추출된 이미지 태그 정보를 기초로 상기 태깅데이터저장부에 저장된 데이터를 검색하여 상기 이미지 태그 정보를 인덱스로 갖는 데이터를 디스플레이하는 검색기능부를 더 포함하는 것을 특징으로 하는 데이터 태깅 장치.
  10. 사용자의 핸드 드로잉으로부터 추출된 이미지 태그 정보를 저장하는 태그 저장부를 구비한 데이터 태깅 장치의 데이터 태깅 방법에 있어서,
    데이터를 입력받는 단계;
    상기 태그저장부에 저장된 기저장 이미지 태그 정보 중에서 상기 입력받은 데이터에 대응가능한 기저장 이미지 태그 정보를 탐색하는 탐색단계; 및
    상기 탐색된 기저장 이미지 태그 정보를 상기 입력받은 데이터에 자동적으로 태깅하는 단계를 포함하는 것을 특징으로 하는 데이터 태깅 장치의 데이터 태깅 방법.
  11. 제10항에 있어서,
    상기 탐색 결과 상기 입력받은 데이터에 대응가능한 기저장 이미지 태그 정보가 없는 경우에는 상기 사용자의 핸드 드로잉을 요청하는 단계;
    상기 요청에 따른 핸드 드로잉을 인식하여 상기 인식된 핸드 드로잉으로부터 신규 이미지 태그 정보를 추출하는 단계; 및
    상기 추출된 신규 이미지 태그 정보를 상기 입력받은 데이터에 자동적으로 태깅하는 신규 이미지 태그 태깅 단계를 더 포함하는 것을 특징으로 하는 데이터 태깅 장치의 데이터 태깅 방법.
  12. 제11항에 있어서,
    상기 신규 이미지 태그 태깅 단계는
    상기 태그저장부에 저장된 기저장 이미지 태그 정보 중에서 상기 신규 이미지 태그 정보와 중복되는 기저장 이미지 태그 정보를 탐색하는 단계;
    상기 탐색된 기저장 이미지 태그 정보를 상기 입력받은 데이터에 자동적으로 태깅하는 단계; 및
    상기 탐색 결과 상기 중복되는 기저장 이미지 태그 정보가 없는 경우에는 상기 신규 이미지 태그 정보를 상기 태그저장부에 저장하고, 상기 신규 이미지 태그 정보를 상기 입력받은 데이터에 자동적으로 태깅하는 단계를 포함하는 것을 특징으로 하는 데이터 태깅 장치의 데이터 태깅 방법.
  13. 제10항에 있어서,
    상기 이미지 태그 정보는 상기 인식된 핸드 드로잉의 형상에 포함된 패턴, 상기 패턴을 구성하는 특징점, 상기 핸드 드로잉의 드로잉 경로 및 상기 핸드 드로잉의 드로잉 획수 중 적어도 하나 이상을 포함하는 것을 특징으로 하는 데이터 태깅 장치의 데이터 태깅 방법.
  14. 제10항에 있어서,
    상기 데이터는 사용자의 핸드 드로잉, 이미지, 일정 정보, 연락처 정보, 웹페이지 주소 정보, 오디오 콘텐츠 및 비디오 콘텐츠 중 적어도 하나 이상을 포함하는 것을 특징으로 하는 데이터 태깅 장치의 데이터 태깅 방법.
  15. 제14항에 있어서,
    상기 탐색 단계는, 상기 입력받은 데이터가 상기 사용자의 핸드 드로잉인 경우에는, 상기 입력받은 데이터의 형상에 포함된 패턴, 상기 입력받은 데이터의 패턴을 구성하는 특징점, 상기 입력받은 데이터의 드로잉 경로 및 상기 입력받은 데이터의 드로잉 횟수 중 적어도 하나 이상의 정보와 상기 태그저장부에 저장된 기저장 이미지 태그 정보를 비교하여 상기 입력받은 데이터에 대응가능한 기저장 이미지 태그 정보를 탐색하는 단계를 포함하는 것을 특징으로 하는 데이터 태깅 장치의 데이터 태깅 방법.
  16. 제14항에 있어서,
    상기 탐색 단계는, 상기 입력받은 데이터가 이미지 형태인 경우에는, 상기 입력받은 데이터에 포함된 패턴 및 상기 입력받은 데이터의 패턴을 구성하는 특징점 중 적어도 하나 이상의 정보와 상기 태그저장부에 저장된 기저장 이미지 태그 정보를 비교하여 상기 입력받은 데이터에 대응가능한 기저장 이미지 태그 정보를 탐색하는 것을 특징으로 하는 데이터 태깅 장치의 데이터 태깅 방법.
  17. 제14항에 있어서,
    상기 입력받은 데이터가 상기 사용자의 핸드 드로잉 또는 이미지 형태가 아닌 경우에는 상기 탐색 단계를 수행하는 대신에 신규 이미지 태그 정보를 입력받아, 상기 신규 이미지 태그 정보를 상기 입력받은 데이터에 자동적으로 태깅하는 단계를 더 포함하는 것을 특징으로 하는 데이터 태깅 장치의 데이터 태깅 방법.
  18. 사용자의 핸드 드로잉으로부터 추출된 이미지 태그 정보에 태깅된 태깅 데이터를 저장하는 태깅데이터저장부를 구비한 데이터 태깅 장치의 데이터 검색 방법에 있어서,
    사용자의 핸드 드로잉을 인식하여 상기 인식된 핸드 드로잉으로부터 검색 이미지 태그 정보를 추출하는 단계;
    상기 추출된 검색 이미지 태그 정보를 기초로 상기 태깅데이터저장부에 저장된 태깅 데이터를 검색하는 검색단계; 및
    상기 검색된 태깅 데이터를 디스플레이하는 단계를 포함하는 것을 특징으로 하는 데이터 태깅 장치의 데이터 검색 방법.
  19. 제18항에 있어서,
    상기 검색단계는
    상기 추출된 검색 이미지 태그 정보 중 상기 인식된 핸드 드로잉의 형상에 포함된 패턴, 상기 인식된 핸드 드로잉의 패턴을 구성하는 특징점, 상기 인식된 핸드 드로잉의 드로잉 경로 및 상기 인식된 핸드 드로잉의 드로잉 횟수 중 적어도 하나 이상의 정보와 상기 태그저장부에 저장된 태깅 데이터의 이미지 태그 정보를 비교하여 상기 검색 이미지 태그 정보와 대응되는 이미지 태그 정보를 검색하는 단계; 및
    상기 검색된 이미지 태그 정보에 태깅된 태깅 데이터를 검색 결과로 출력하는 단계를 포함하는 것을 특징으로 하는 데이터 태깅 장치의 데이터 태깅 방법.
  20. 제10항 내지 제19항 중 어느 한 항에 기재된 방법을 수행하는 프로그램을 수록한 컴퓨터로 읽을 수 있는 기록매체.
KR1020110051671A 2011-05-30 2011-05-30 데이터 태깅 장치, 그의 데이터 태깅 방법 및 데이터 검색 방법 KR101789234B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020110051671A KR101789234B1 (ko) 2011-05-30 2011-05-30 데이터 태깅 장치, 그의 데이터 태깅 방법 및 데이터 검색 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110051671A KR101789234B1 (ko) 2011-05-30 2011-05-30 데이터 태깅 장치, 그의 데이터 태깅 방법 및 데이터 검색 방법

Publications (2)

Publication Number Publication Date
KR20120133149A true KR20120133149A (ko) 2012-12-10
KR101789234B1 KR101789234B1 (ko) 2017-11-20

Family

ID=47516563

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110051671A KR101789234B1 (ko) 2011-05-30 2011-05-30 데이터 태깅 장치, 그의 데이터 태깅 방법 및 데이터 검색 방법

Country Status (1)

Country Link
KR (1) KR101789234B1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150022588A (ko) * 2013-08-23 2015-03-04 삼성전자주식회사 전자 장치 및 전자 장치의 태그 정보 처리 방법
KR20200025614A (ko) * 2018-08-31 2020-03-10 엔에이치엔 주식회사 텍스트 기반 이미지 검색 방법 및 장치
KR20200100027A (ko) * 2018-08-31 2020-08-25 엔에이치엔 주식회사 텍스트 기반 이미지 검색 방법 및 장치

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009524873A (ja) 2006-01-24 2009-07-02 ヨン−ジック・イ 電子ペンを用いる情報の入力及び伝送が可能な携帯機器並びに電子ペンを用いる情報の入力及び伝送方法
KR100851433B1 (ko) * 2007-02-08 2008-08-11 (주)올라웍스 이미지 태그 정보에 기반한 인물 이미지 전송 방법,송수신자 이미지 디스플레이 방법 및 인물 이미지 검색방법

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150022588A (ko) * 2013-08-23 2015-03-04 삼성전자주식회사 전자 장치 및 전자 장치의 태그 정보 처리 방법
KR20200025614A (ko) * 2018-08-31 2020-03-10 엔에이치엔 주식회사 텍스트 기반 이미지 검색 방법 및 장치
KR20200100027A (ko) * 2018-08-31 2020-08-25 엔에이치엔 주식회사 텍스트 기반 이미지 검색 방법 및 장치

Also Published As

Publication number Publication date
KR101789234B1 (ko) 2017-11-20

Similar Documents

Publication Publication Date Title
US11157577B2 (en) Method for searching and device thereof
KR102347398B1 (ko) 터치스크린 상에 표시되는 조치 가능한 콘텐츠
CN106484266B (zh) 一种文本处理方法及装置
EP3579124A1 (en) Method and apparatus for providing search results
WO2016091095A1 (zh) 基于终端界面触控操作进行搜索的方法及系统
KR20180112031A (ko) 컨텐츠 선택을 제공하는 시스템들 및 방법들
WO2016095689A1 (zh) 基于终端界面多次触控操作进行识别搜索的方法及系统
US20160026858A1 (en) Image based search to identify objects in documents
US20160077673A1 (en) Intelligent Canvas
US11734370B2 (en) Method for searching and device thereof
CN110462613A (zh) 自动生成文档
KR20150027885A (ko) 전자 필기 운용 방법 및 이를 지원하는 전자 장치
US20150134641A1 (en) Electronic device and method for processing clip of electronic document
EP3910496A1 (en) Search method and device
WO2014176938A1 (en) Method and apparatus of retrieving information
US20180089150A1 (en) Providing location-based font recommendations
CN114067797A (zh) 一种语音控制方法、装置、设备以及计算机存储介质
CN113869063A (zh) 数据推荐方法、装置、电子设备及存储介质
KR101789234B1 (ko) 데이터 태깅 장치, 그의 데이터 태깅 방법 및 데이터 검색 방법
CN106970899B (zh) 一种文本处理方法及装置
US11314793B2 (en) Query processing
CN113672154B (zh) 页面交互方法、介质、装置和计算设备
CN107168627B (zh) 用于触摸屏的文本编辑方法和装置
WO2016077681A1 (en) System and method for voice and icon tagging
KR20150097250A (ko) 태그 정보를 이용한 스케치 검색 시스템, 사용자 장치, 서비스 제공 장치, 그 서비스 방법 및 컴퓨터 프로그램이 기록된 기록매체

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant