KR102240279B1 - 컨텐트 처리 방법 및 그 전자 장치 - Google Patents
컨텐트 처리 방법 및 그 전자 장치 Download PDFInfo
- Publication number
- KR102240279B1 KR102240279B1 KR1020140047394A KR20140047394A KR102240279B1 KR 102240279 B1 KR102240279 B1 KR 102240279B1 KR 1020140047394 A KR1020140047394 A KR 1020140047394A KR 20140047394 A KR20140047394 A KR 20140047394A KR 102240279 B1 KR102240279 B1 KR 102240279B1
- Authority
- KR
- South Korea
- Prior art keywords
- vector images
- content
- electronic device
- vector
- images
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/40—Document-oriented image-based pattern recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/10—Text processing
- G06F40/103—Formatting, i.e. changing of presentation of documents
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/10—Text processing
- G06F40/12—Use of codes for handling textual entities
- G06F40/131—Fragmentation of text files, e.g. creating reusable text-blocks; Linking to fragments, e.g. using XInclude; Namespaces
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/10—Text processing
- G06F40/166—Editing, e.g. inserting or deleting
- G06F40/171—Editing, e.g. inserting or deleting by use of digital ink
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/30—Semantic analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/40—Document-oriented image-based pattern recognition
- G06V30/43—Editing text-bitmaps, e.g. alignment, spacing; Semantic analysis of bitmaps of text without OCR
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Artificial Intelligence (AREA)
- General Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Computational Linguistics (AREA)
- General Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- User Interface Of Digital Computer (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
다양한 실시예에 따른, 전자 장치의 컨텐트 처리 방법에 있어서, 적어도 하나의 글자를 포함하는 컨텐트를 획득하는 동작; 및 상기 획득된 컨텐트를 분석하여, 상기 획득된 컨텐트를 복수의 카테고리 중 적어도 하나에 포함되도록 분류하는 동작, 또는 상기 컨텐트에 기반하여 상기 적어도 하나의 글자에 대응하는 벡터 이미지를 포함하는 벡터 이미지들을 생성하고 상기 벡터 이미지들 중 적어도 일부를 상기 전자 장치에 기능적으로 연결된 디스플레이를 통하여 표시하는 동작 중 적어도 하나의 동작을 포함함을 특징으로 한다. 다른 실시예가 가능하다.
Description
본 발명의 다양한 실시예는 전자 장치를 통하여 컨텐트를 획득하고, 컨텐트 정보를 분석하여 사용자에게 제공하는 컨텐트 처리 방법 및 그 전자 장치에 관한 것이다.
최근에는, 스마트폰, 태블릿(Tablet) PC 등과 같은 전자 장치에 터치 패널이 장착된 디스플레이 장치가 구비되어, 화면의 표시 기능과 함께, 전자 장치를 이용하는 사용자가 직접 화면을 터치하여 입력하는 터치스크린의 사용이 일반화되고 있다. 또한, 전자 장치에 카메라 기능이 구비되어, 언제 어디서나 사진 및 동영상을 촬영할 수 있게 되었다. 이에 따라, 전자 장치를 이용하는 사용자들은 필요한 정보를 일반 종이에 메모하는 대신, 전자펜과 같은 터치 가능한 입력 수단을 이용하여 필요한 정보를 전자 장치에 메모할 수 있게 되었다. 또한, 필요한 정보를 사진 촬영함으로써, 특정 정보들을 손쉽게 전자 장치에 저장하여 확인할 수 있게 되었다.
한편, 다양한 이미지 인식 및/또는 변환 기술들이 개발되면서, 이미지 인식 및/또는 변환 기술들이 상술한 전자 장치의 기능들과 함께 이용되어, 사용자들이 보다 용이하게 다양한 이미지들의 정보를 활용할 수 있게 되었다. 예를 들어, 전자 장치에 구비된 이미지 센서를 통해 문서를 촬영하면, 광학식 문자 인식(Optical Character Recognition; OCR) 기능을 이용하여, 촬영된 문서의 이미지를 텍스트 정보로 변환함으로써, 사용자가 촬영된 이미지를 텍스트 이미지화하여 이용할 수 있게 되었다.
종래의 이미지 인식 기술들 중 문자 인식 기술은 정확도가 높지 않아서 전자 장치를 이용하는 사용자들에게 만족할 만한 성능을 제공하지 못하는 문제가 있다.
또한, 종래의 문자 인식 기술은 대충 필기한 문자들, 즉, 아무렇게나 갈겨쓰는 문자들을 정확하게 인식하는 기술이 개발되어 있지 않다. 이에 따라, 종래의 문자 인식 기술은 사용자가 고딕체, 바탕체 등과 같이 전자 장치에 사용되는 일반적인 글꼴과 유사하게 필기 하였을 경우에만 문자를 인식하고, 사용자가 임의로 대충 필기하였을 경우에는 문자를 인식하지 못하는 문제가 있다.
또한, 종래에는 사람들의 필기 스타일에 따라 필기 내용의 정렬(또는 배열)이 일정하지 않을 경우, 전자 장치에서 획득한 필기 이미지에서 사용자들이 내용을 확인할 때 다소 어려움이 발생하기도 한다.
또한, 종래에는 일상에 산재되어 존재하는 메모들(노트들)을 촬영한 후, 전자 장치에 저장할 때, 자동으로 카테고리화되도록 하여 보관하는 기술이 개발되어 있지 않다. 이에 따라, 필요한 이미지들을 사용자가 직접 분류하여 이용해야 하는 불편함이 있다.
따라서, 본 발명의 일 목적은 전자 장치에서 획득한 컨텐트 예를 들어, 획득한 필기 이미지를 제공하기 위한 컨텐트 처리 방법 및 그 전자 장치를 제공할 수 있도록 한다.
본 발명의 다른 목적은 전자 장치의 사용자가 간편하게 컨텐트를 편집하고 사용할 수 있는 방법을 제공하기 위한 컨텐트 처리 방법 및 그 전자 장치를 제공할 수 있도록 한다. 보다 상세하게는 필기 내용을 촬영하거나, 전자펜 등과 같은 입력 수단을 통해 필기 할 때, 컨텐트 정보를 기반으로 하여, 필기 내용을 벡터 이미지로 저장함으로써, 사용자가 편하게 필기 내용을 편집하고 사용할 수 있도록 한다. 이때의 벡터 이미지는 사용자가 쉽게 필기 내용을 확인할 수 있도록 자동 정렬될 수 있도록 한다.
본 발명의 또 다른 목적은 일상의 다양한 메모들을 특정 파일로 생성, 예를 들어, 디지털 메모로 카테고리화하여 보관할 수 있는 방법을 제공하기 위한 컨텐트 처리 방법 및 그 전자 장치를 제공할 수 있도록 한다. 보다 상세하게는 예를 들어, 문서, 노트 등을 촬영하여 컨텐트를 획득하면, 자동으로 획득한 컨텐트를 카테고리화하여 보관할 수 있도록 한다.
본 발명의 일 견지에 따르면, 전자 장치의 컨텐트 처리 방법에 있어서, 적어도 하나의 글자를 포함하는 컨텐트를 획득하는 동작; 및 상기 획득된 컨텐트를 분석하여, 상기 획득된 컨텐트를 복수의 카테고리 중 적어도 하나에 포함되도록 분류하는 동작, 또는 상기 컨텐트에 기반하여 상기 적어도 하나의 글자에 대응하는 벡터 이미지를 포함하는 벡터 이미지들을 생성하고 상기 벡터 이미지들 중 적어도 일부를 상기 전자 장치에 기능적으로 연결된 디스플레이를 통하여 표시하는 동작 중 적어도 하나의 동작을 포함할 수 있다.
상기 컨텐트를 획득하는 동작은, 정지 영상 또는 동영상을 통해 상기 컨텐트를 획득하거나, 상기 디스플레이에 대한 사용자 입력을 통해 상기 컨텐트를 획득하는 동작을 포함할 수 있다.
상기 분류하는 동작은, 상기 획득된 컨텐트의 속성 또는 상기 획득된 컨텐트의 관련 정보 중 적어도 하나에 기반하여 상기 획득된 컨텐트를 상기 복수의 카테고리 중 적어도 하나에 포함되도록 분류하는 동작을 포함할 수 있다.
상기 분류하는 동작은, 상기 획득된 컨텐트에 포함된 패턴, 상기 획득된 컨텐트의 형태, 상기 획득된 컨텐트의 양식 또는 상기 획득된 컨텐트에 포함된 문자 중 적어도 하나를 인식하여 상기 획득된 컨텐트의 속성을 판별하는 동작을 포함할 수 있다.
상기 획득된 컨텐트의 형태는, 상기 획득된 컨텐트의 색상, 모서리 형태, 또는 종횡비(aspect ratio) 중 적어도 하나를 포함할 수 있다.
상기 획득된 컨텐트의 양식 인식은, 지정된 위치의 문자를 인식하여 상기 지정된 위치에 포함된 내용을 확인하며, 상기 확인된 내용에 따라, 상기 획득된 컨텐트의 양식을 분류하는 것을 포함할 수 있다.
상기 속성을 판별하는 동작은, 상기 인식된 문자의 굵기 또는 번짐 정도 중 적어도 하나를 확인하여 지정된 정보와의 비교를 통해 상기 문자를 작성한 펜 종류를 판단하는 동작, 상기 인식된 문자의 필체를 인식하는 동작, 상기 인식된 문자의 색상을 판단하는 동작 또는 상기 인식된 문자에 따라 상기 획득된 컨텐트에 포함된 내용을 확인하는 동작 중 적어도 하나의 동작을 포함할 수 있다.
상기 속성을 판별하는 동작은, 상기 획득된 컨텐트의 태그 정보를 이용하여 상기 획득된 컨텐트의 속성을 분석하는 동작을 포함할 수 있다.
상기 획득된 컨텐트의 관련 정보는, 상기 전자 장치에 저장된 스케줄 정보, 상기 전자 장치의 위치 정보, 또는 현재 시간 정보 중 적어도 하나를 포함할 수 있다.
상기 표시하는 동작은, 상기 벡터 이미지들을 분석하는 동작과, 상기 분석 결과에 기반하여 상기 벡터 이미지들을 편집하여 정렬하는 동작을 포함할 수 있다.
상기 분석하는 동작은, 상기 생성된 벡터 이미지들간의 간격을 확인하고 상기 확인된 벡터 이미지들간의 간격이 지정된 범위에 포함되는 벡터 이미지들을 분석하는 동작, 상기 생성된 벡터 이미지들간의 간격 및 상기 생성된 벡터 이미지들의 크기를 확인하고 상기 생성된 벡터 이미지들의 크기와 상기 생성된 벡터 이미지들간의 간격의 비율을 이용하여 지정된 범위에 포함되는 벡터 이미지들을 분석하는 동작, 또는 지정된 형태와의 비교를 통해 벡터 이미지들을 분석하는 동작 중 적어도 하나의 동작을 포함할 수 있다.
상기 분석하는 동작은, 상기 생성된 벡터 이미지들을 글자 단위 또는 단어 단위 또는 문장 단위로 분석하는 동작을 포함할 수 있다.
상기 분석하는 동작은, 상기 생성된 벡터 이미지들의 크기, 상기 생성된 벡터 이미지들 간의 간격, 또는 상기 생성된 벡터 이미지들의 회전 정도 중 적어도 하나를 분석하는 동작을 포함할 수 있다.
상기 정렬하는 동작은, 상기 벡터 이미지들의 종류를 판단하는 동작; 및 상기 종류에 따라, 상기 벡터 이미지들의 크기를 조정하는 동작을 포함할 수 있다.
상기 블록들의 종류는, 글자, 도형, 그림 또는 기호 중 적어도 하나의 종류를 포함할 수 있다.
상기 판단하는 동작은, 상기 벡터 이미지들의 위치, 주변 벡터 이미지들의 종류, 또는 형태 중 적어도 하나를 이용하여 상기 벡터 이미지에 대한 종류를 판단하는 동작을 포함할 수 있다.
상기 정렬하는 동작은, 상기 벡터 이미지들 각각의 높이(height) 값 또는 너비(width) 값 중 적어도 하나의 값을 확인하는 동작; 상기 종류 별로 상기 확인된 적어도 하나의 값의 평균 값을 산출하는 동작; 및 상기 벡터 이미지들의 크기를 상기 종류 별로 산출된 평균 값에 대응되는 크기로 조정하는 동작을 포함할 수 있다.
상기 정렬하는 동작은, 상기 벡터 이미지들 각각의 높이 값과 너비 값의 비를 확인하며, 상기 종류 별로 상기 확인된 비의 평균 값을 산출하며, 상기 종류 별로 산출된 평균 값의 크기를 이용하여 상기 종류 별로 해당 상기 벡터 이미지들의 크기를 조정하는 동작을 포함할 수 있다.
상기 정렬하는 동작은, 지정된 가이드 라인의 크기에 따라, 상기 벡터 이미지들의 크기를 조정하는 동작을 포함하며, 상기 가이드 라인의 크기는 높이 또는 너비 중 적어도 하나를 포함할 수 있다.
상기 정렬하는 동작은, 상기 벡터 이미지들을 적어도 하나의 블록으로 블록화하는 동작; 및 상기 블록화된 벡터 이미지들의 크기, 상기 블록화에 따른 블록들 별 벡터 이미지들 간의 간격, 상기 블록들 간의 간격, 또는 상기 블록들 별 벡터 이미지들의 회전 정도 중 적어도 하나를 조정하는 동작을 포함할 수 있다.
상기 정렬하는 동작은, 상기 블록들에서 인접 블록들 간의 간격, 또는 상기 블록들 별 벡터 이미지들에서 인접 벡터 이미지들 간의 간격 중 적어도 하나의 간격을 확인하며, 상기 확인된 간격을 이용하여, 상기 블록들 간의 간격, 또는 상기 블록들 별 벡터 이미지들 간의 간격 중 적어도 하나를 조정하는 동작을 포함할 수 있다.
상기 정렬하는 동작은, 상기 벡터 이미지들의 회전 정도 에 따라, 상기 벡터 이미지들의 기울기, 크기 또는 위치 이동 중 적어도 하나를 조정하는 동작을 포함할 수 있다.
상기 정렬하는 동작은, 상기 벡터 이미지들을 화면의 지정된 영역에 정렬할 때, 상기 벡터 이미지들 중 적어도 하나의 벡터 이미지가 상기 영역의 범위를 벗어날 것인지를 판단하며,상기 범위를 벗어날 것으로 판단되면, 상기 범위를 벗어날 것으로 판단되는 벡터 이미지를 포함하는 블록 내의 전체 벡터 이미지들을 새로운 영역에 위치시켜 정렬하는 동작을 포함하며, 상기 새로운 영역은, 상기 범위를 벗어날 것으로 판단되는 벡터 이미지에 대응되도록 삽입된 영역을 포함할 수 있다.
상기 조정하는 동작은, 상기 종류 별 해당 벡터 이미지들의 크기를, 상기 종류 별로 미리 설정된 크기 또는 상기 종류 별로 산출된 상기 생성된 벡터 이미지들의 크기의 평균 크기로 조정하는 동작을 포함할 수 있다.
상기 표시하는 동작은, 지정된 가이드 라인의 크기에 따라, 상기 생성된 벡터 이미지들의 크기를 조정하는 동작을 포함할 수 있다.
상기 컨텐트를 획득하는 동작의 수행 시, 상기 전자 장치 또는 네트워크에 상기 획득된 컨텐트와 적어도 일부가 일치하는 컨텐트를 검색하는 동작과, 상기 적어도 일부가 일치하는 컨텐트가 검색되면, 상기 검색된 컨텐트를 상기 획득된 컨텐트로 대체하는 동작을 포함할 수 있다.
사용자 조작에 따라, 상기 정렬된 벡터 이미지들이 편집되면, 상기 편집에 따라 변경된 내용을 적용하며, 상기 적용된 변경 내용에 대한 사용자 확인용 유저 인터페이스(User interface; UI)를 생성하여 추가하는 동작을 포함할 수 있다.
본 발명의 다른 견지에 따르면, 전자 장치에 있어서, 표시부와, 적어도 하나의 글자를 포함하는 컨텐트를 획득하면, 상기 획득된 컨텐트를 분석하여 복수의 카테고리 중 하나에 포함되도록 분류하는 동작, 또는 상기 획득된 컨텐트에 기반하여 상기 적어도 하나의 글자에 대응하는 벡터 이미지를 포함하는 벡터 이미지들을 생성하고 상기 벡터 이미지들 중 적어도 일부를 상기 표시부를 통해 표시하는 동작 중 적어도 하나의 동작을 제어하는 제어부를 포함할 수 있다.
상기 제어부는, 정지 영상 또는 동영상을 통해 상기 컨텐트를 획득하거나, 상기 표시부에 대한 사용자 입력을 통해 상기 컨텐트를 획득하는 것을 포함할 수 있다.
상기 제어부는, 상기 획득된 컨텐트의 속성 또는 상기 획득된 컨텐트의 관련 정보 중 적어도 하나에 기반하여, 상기 획득된 컨텐트를 상기 복수의 카테고리 중 적어도 하나에 포함되도록 분류하는 것을 포함할 수 있다.
상기 제어부는, 상기 획득된 컨텐트에 포함된 패턴, 상기 획득된 컨텐트의 형태, 상기 획득된 컨텐트의 양식, 또는 상기 획득된 컨텐트에 포함된 문자 중 적어도 하나를 인식하여 상기 획득된 컨텐트의 속성을 판별하는 것을 포함할 수 있다.
상기 제어부는, 상기 인식된 문자의 굵기 또는 상기 문자의 번짐 정도 중 적어도 하나를 확인하여 지정된 정보와의 비교를 통해 상기 문자를 작성한 펜 종류를 판단하는 동작, 상기 인식된 문자의 필체를 인식하는 동작, 상기 인식된 문자의 색상을 판단하는 동작, 또는 상기 인식된 문자에 따라 상기 획득된 컨텐트에 포함된 내용을 확인하는 동작 중 적어도 하나의 동작을 수행하여 상기 획득된 컨텐트의 속성을 분석 하는 것을 포함할 수 있다.
상기 제어부는, 상기 획득된 컨텐트의 태그 정보를 이용하여 상기 획득된 컨텐트의 속성을 분석 하는 것을 포함할 수 있다.
상기 제어부는, 저장된 스케줄 정보, 위치 정보 또는 현재 시간 정보 중 적어도 하나를 이용하여 상기 획득된 컨텐트의 관련 정보를 확인을 하는 것을 포함할 수 있다.
상기 제어부는, 상기 벡터 이미지들을 분석하며, 상기 분석 결과에 기반하여 상기 벡터 이미지들을 편집하여 정렬하는 것을 포함할 수 있다.
상기 제어부는, 상기 생성된 벡터 이미지들간의 간격을 확인하고 상기 확인된 벡터 이미지들간의 간격이 지정된 범위에 포함되는 벡터 이미지들을 분석하는 동작, 상기 생성된 벡터 이미지들간의 간격 및 상기 생성된 벡터 이미지들의 크기를 확인하고 상기 생성된 벡터 이미지들의 크기와 상기 생성된 벡터 이미지들간의 간격의 비율을 이용하여 지정된 범위에 포함되는 벡터 이미지들을 분석하는 동작, 또는 지정된 형태와의 비교를 통해 벡터 이미지들을 분석하는 동작 중 적어도 하나의 동작을 수행을 포함할 수 있다.
상기 제어부는, 상기 생성된 벡터 이미지들의 크기, 상기 생성된 벡터 이미지들 간의 간격, 또는 상기 생성된 벡터 이미지들의 회전 정도 중 적어도 하나를 분석하는 것을 포함할 수 있다.
상기 제어부는, 상기 벡터 이미지들의 종류를 판단하며, 상기 종류에 따라 상기 벡터 이미지들의 크기를 조정하는 것을 포함하며, 상기 벡터 이미지들의 종류를 판단하는 것은, 상기 벡터 이미지들의 위치, 주변 벡터 이미지들의 종류, 또는 형태 중 적어도 하나를 이용하는 것을 포함할 수 있다.
상기 제어부는, 상기 벡터 이미지들을 적어도 하나의 블록으로 블록화하며, 상기 블록화된 벡터 이미지들의 크기, 상기 블록화에 따른 블록들 별 벡터 이미지들 간의 간격, 상기 블록들 간의 간격, 또는 상기 블록들 별 벡터 이미지들의 회전 정도 중 적어도 하나를 조정하는 것을 포함할 수 있다.
상기 제어부는, 상기 블록들에서 인접 블록들 간의 간격, 또는 상기 블록들 별 벡터 이미지들에서 인접 벡터 이미지들 간의 간격 중 적어도 하나의 간격을 확인하며, 상기 확인된 간격을 이용하여, 상기 블록들 간의 간격, 또는 상기 블록들 별 벡터 이미지들 간의 간격 중 적어도 하나를 조정하는 것을 포함할 수 있다.
상기 제어부는, 상기 종류 별 해당 벡터 이미지들의 크기를, 상기 종류 별로 미리 설정된 크기 또는 상기 종류 별로 산출된 상기 생성된 벡터 이미지들의 크기의 평균 크기로 조정하는 것을 포함할 수 있다.
상기 제어부는, 상기 컨텐트를 획득하면, 상기 전자 장치 또는 네트워크에서 상기 획득된 컨텐트와 적어도 일부가 일치하는 컨텐트를 검색하며, 상기 적어도 일부가 일치하는 컨텐트가 검색되면, 상기 검색된 컨텐트를 상기 획득된 컨텐트로 대체하는 것을 포함할 수 있다.
다양한 실시예들에 따른 컨텐트 처리 방법 및 그 전자 장치에 따르면, 전자 장치에서 획득한 컨텐트 예를 들어, 획득한 필기 이미지를 제공할 수 있도록 한다.
다양한 실시예들에 따른 컨텐트 처리 방법 및 그 전자 장치에 따르면, 전자 장치를 이용하여, 사진 촬영, 필기 입력 등을 통해 획득한 컨텐트에서의 필기 내용을 벡터 이미지로 저장함으로써, 사용자가 간편하게 필기 내용을 편집할 수 있도록 한다. 이때의 벡터 이미지는 누구나 쉽게 필기 내용을 인식할 수 있도록 자동 정렬될 수 있도록 한다.
또한, 다양한 실시예들에 따른 컨텐트 처리 방법 및 그 전자 장치에 따르면, 다양한 노트들, 메모들의 컨텐트들을 자동으로 디지털 메모로 카테고리화하여 보관할 수 있도록 한다.
도 1은 본 발명의 일 실시예에 따른 이미지 처리 동작을 수행하는 전자 장치의 블록도
도 2는 본 발명의 일 실시예에 따른 이미지 처리 동작을 나타내는 흐름도
도 3은 본 발명의 일 실시예에 따른 이미지 획득 및 획득된 이미지를 벡터 이미지화하는 동작을 나타내는 예시도
도 4는 본 발명의 일 실시예에 따른 이미지의 내용 편집 및 정렬 동작을 나타내는 흐름도
도 5는 본 발명의 일 실시예에 따른 벡터 이미지 요소들을 적어도 하나의 블록으로 블록화한 결과를 나타내는 예시도
도 6은 본 발명의 일 실시예에 따른 블록화된 벡터 이미지 요소들의 크기를 조정하여 정렬하는 동작을 나타내는 흐름도
도 7은 도 6의 일 실시예에 따른 블록화된 벡터 이미지 요소들의 크기를 조정하여 정렬하는 동작을 나타내는 제1 흐름도
도 8은 도 6의 일 실시예에 따른 블록화된 벡터 이미지 요소들의 크기를 조정하여 정렬하는 동작을 나타내는 제2 흐름도
도 9는 본 발명의 일 실시예에 따른 블록들 간의 간격을 조정하여 정렬하는 동작을 나타내는 흐름도
도 10은 본 발명의 일 실시예에 따른 블록들 간의 간격이 조정되어 정렬된 결과를 나타내는 예시도
도 11은 본 발명의 일 실시예에 따른 블록들 별 벡터 이미지 요소들 간의 간격을 조정하여 정렬하는 동작을 나타내는 흐름도
도 12는 본 발명의 일 실시예에 따른 블록들 별 벡터 이미지 요소들의 회전 정도를 조정하여 정렬하는 동작을 나타내는 흐름도
도 13은 본 발명의 일 실시예에 따른 블록들 별 벡터 이미지 요소들의 회전 정도가 조정되어 정렬된 결과를 나타내는 예시도
도 14는 본 발명의 일 실시예에 따른 블록화된 벡터 이미지 요소들을 편집하여 정렬하는 동작의 결과를 나타낸 예시도
도 15는 본 발명의 일 실시예에 따른 이미지의 내용 편집 및 정렬 동작을 나타내는 흐름도
도 16은 본 발명의 일 실시예에 따른 이미지의 내용 편집 및 정렬 동작의 결과를 나타내는 예시도
도 17은 본 발명의 일 실시예에 따른 이미지의 내용 편집 및 정렬 동작을 나타내는 흐름도
도 18은 본 발명의 일 실시예에 따른 이미지의 내용 편집 및 정렬 동작의 결과를 나타내는 예시도
도 19는 본 발명의 일 실시예에 따른 이미지의 내용 편집 및 정렬 동작을 나타내는 흐름도
도 20은 본 발명의 일 실시예에 따른 획득된 이미지의 예시도
도 21은 본 발명의 일 실시예에 따른 이미지의 내용 편집 및 정렬 동작의 결과를 나타내는 예시도
도 22는 본 발명의 일 실시예에 따른 이미지의 내용 편집 및 정렬 동작의 결과를 나타내는 예시도
도 23은 본 발명의 일 실시예에 따른 이미지의 내용 편집 및 정렬 동작의 결과를 나타내는 예시도
도 24는 본 발명의 일 실시예에 따른 이미지의 내용 편집 및 정렬 동작의 결과를 나타내는 예시도
도 25는 본 발명의 일 실시예에 따른 이미지 분류 동작을 나타내는 흐름도
도 26은 본 발명의 일 실시예에 따른 다양한 형태의 노트 이미지들을 나타내는 예시도
도 27은 본 발명의 일 실시예에 따른 다양한 형태의 노트 이미지들을 나타내는 예시도
도 28은 본 발명의 일 실시예에 따른 노트 이미지의 형태를 이용한 속성 분석을 설명하기 위한 예시도
도 29는 본 발명의 일 실시예에 따른 노트 이미지의 형태를 이용한 속성 분석을 설명하기 위한 예시도
도 30은 본 발명의 일 실시예에 따른 노트 이미지의 문자 인식을 이용한 속성 분석을 설명하기 위한 예시도
도 31은 본 발명의 다양한 실시예에 따른 전자 장치를 포함하는 네트워크 환경을 도시한 블록도
도 32는 본 발명의 다양한 실시예에 따른 전자 장치의 블록도
도 2는 본 발명의 일 실시예에 따른 이미지 처리 동작을 나타내는 흐름도
도 3은 본 발명의 일 실시예에 따른 이미지 획득 및 획득된 이미지를 벡터 이미지화하는 동작을 나타내는 예시도
도 4는 본 발명의 일 실시예에 따른 이미지의 내용 편집 및 정렬 동작을 나타내는 흐름도
도 5는 본 발명의 일 실시예에 따른 벡터 이미지 요소들을 적어도 하나의 블록으로 블록화한 결과를 나타내는 예시도
도 6은 본 발명의 일 실시예에 따른 블록화된 벡터 이미지 요소들의 크기를 조정하여 정렬하는 동작을 나타내는 흐름도
도 7은 도 6의 일 실시예에 따른 블록화된 벡터 이미지 요소들의 크기를 조정하여 정렬하는 동작을 나타내는 제1 흐름도
도 8은 도 6의 일 실시예에 따른 블록화된 벡터 이미지 요소들의 크기를 조정하여 정렬하는 동작을 나타내는 제2 흐름도
도 9는 본 발명의 일 실시예에 따른 블록들 간의 간격을 조정하여 정렬하는 동작을 나타내는 흐름도
도 10은 본 발명의 일 실시예에 따른 블록들 간의 간격이 조정되어 정렬된 결과를 나타내는 예시도
도 11은 본 발명의 일 실시예에 따른 블록들 별 벡터 이미지 요소들 간의 간격을 조정하여 정렬하는 동작을 나타내는 흐름도
도 12는 본 발명의 일 실시예에 따른 블록들 별 벡터 이미지 요소들의 회전 정도를 조정하여 정렬하는 동작을 나타내는 흐름도
도 13은 본 발명의 일 실시예에 따른 블록들 별 벡터 이미지 요소들의 회전 정도가 조정되어 정렬된 결과를 나타내는 예시도
도 14는 본 발명의 일 실시예에 따른 블록화된 벡터 이미지 요소들을 편집하여 정렬하는 동작의 결과를 나타낸 예시도
도 15는 본 발명의 일 실시예에 따른 이미지의 내용 편집 및 정렬 동작을 나타내는 흐름도
도 16은 본 발명의 일 실시예에 따른 이미지의 내용 편집 및 정렬 동작의 결과를 나타내는 예시도
도 17은 본 발명의 일 실시예에 따른 이미지의 내용 편집 및 정렬 동작을 나타내는 흐름도
도 18은 본 발명의 일 실시예에 따른 이미지의 내용 편집 및 정렬 동작의 결과를 나타내는 예시도
도 19는 본 발명의 일 실시예에 따른 이미지의 내용 편집 및 정렬 동작을 나타내는 흐름도
도 20은 본 발명의 일 실시예에 따른 획득된 이미지의 예시도
도 21은 본 발명의 일 실시예에 따른 이미지의 내용 편집 및 정렬 동작의 결과를 나타내는 예시도
도 22는 본 발명의 일 실시예에 따른 이미지의 내용 편집 및 정렬 동작의 결과를 나타내는 예시도
도 23은 본 발명의 일 실시예에 따른 이미지의 내용 편집 및 정렬 동작의 결과를 나타내는 예시도
도 24는 본 발명의 일 실시예에 따른 이미지의 내용 편집 및 정렬 동작의 결과를 나타내는 예시도
도 25는 본 발명의 일 실시예에 따른 이미지 분류 동작을 나타내는 흐름도
도 26은 본 발명의 일 실시예에 따른 다양한 형태의 노트 이미지들을 나타내는 예시도
도 27은 본 발명의 일 실시예에 따른 다양한 형태의 노트 이미지들을 나타내는 예시도
도 28은 본 발명의 일 실시예에 따른 노트 이미지의 형태를 이용한 속성 분석을 설명하기 위한 예시도
도 29는 본 발명의 일 실시예에 따른 노트 이미지의 형태를 이용한 속성 분석을 설명하기 위한 예시도
도 30은 본 발명의 일 실시예에 따른 노트 이미지의 문자 인식을 이용한 속성 분석을 설명하기 위한 예시도
도 31은 본 발명의 다양한 실시예에 따른 전자 장치를 포함하는 네트워크 환경을 도시한 블록도
도 32는 본 발명의 다양한 실시예에 따른 전자 장치의 블록도
이하, 본 발명의 다양한 실시예가 첨부된 도면과 연관되어 기재된다. 본 발명의 다양한 실시예는 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들이 도면에 예시되고 관련된 상세한 설명이 기재되어 있다. 그러나, 이는 본 발명의 다양한 실시예를 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 다양한 실시예의 사상 및 기술 범위에 포함되는 모든 변경 및/또는 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성요소에 대해서는 유사한 참조 부호가 사용되었다.
본 발명의 다양한 실시예에서 사용될 수 있는“포함한다” 또는 “포함할 수 있다” 등의 표현은 개시(disclosure)된 해당 기능, 동작 또는 구성요소 등의 존재를 가리키며, 추가적인 하나 이상의 기능, 동작 또는 구성요소 등을 제한하지 않는다. 또한, 본 발명의 다양한 실시예에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
본 발명의 다양한 실시예에서 “또는” 또는 “ A 또는/및 B 중 적어도 하나” 등의 표현은 함께 나열된 단어들의 어떠한, 그리고 모든 조합을 포함한다. 예를 들어, “A 또는 B” 또는 “ A 또는/및 B 중 적어도 하나” 각각은, A를 포함할 수도, B를 포함할 수도, 또는 A 와 B 모두를 포함할 수도 있다.
본 발명의 다양한 실시예에서 사용된 “제 1,”“제2,”“첫째,”또는“둘째,”등의 표현들은 다양한 실시예들의 다양한 구성요소들을 수식할 수 있지만, 해당 구성요소들을 한정하지 않는다. 예를 들어, 상기 표현들은 해당 구성요소들의 순서 및/또는 중요도 등을 한정하지 않는다. 상기 표현들은 한 구성요소를 다른 구성요소와 구분하기 위해 사용될 수 있다. 예를 들어, 제1 사용자 기기와 제 2 사용자 기기는 모두 사용자 기기이며, 서로 다른 사용자 기기를 나타낸다. 예를 들어, 본 발명의 다양한 실시예의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 상기 어떤 구성요소가 상기 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 상기 어떤 구성요소와 상기 다른 구성요소 사이에 새로운 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 상기 어떤 구성요소와 상기 다른 구성요소 사이에 새로운 다른 구성요소가 존재하지 않는 것으로 이해될 수 있어야 할 것이다.
본 발명의 다양한 실시예에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명의 다양한 실시예를 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명의 다양한 실시예가 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 발명의 다양한 실시예에서 명백하게 정의되지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
본 발명의 다양한 실시예에 따른 전자 장치는, 통신 기능이 포함된 장치일 수 있다. 예를 들면, 전자 장치는 스마트 폰(smartphone), 태블릿 PC(tablet personal computer), 이동 전화기(mobile phone), 화상전화기, 전자북 리더기(e-book reader), 데스크탑 PC(desktop personal computer), 랩탑 PC(laptop personal computer), 넷북 컴퓨터(netbook computer), PDA(personal digital assistant), PMP(portable multimedia player), MP3 플레이어, 모바일 의료기기, 카메라(camera), 또는 웨어러블 장치(wearable device)(예: 전자 안경과 같은 head-mounted-device(HMD), 전자 의복, 전자 팔찌, 전자 목걸이, 전자 앱세서리(appcessory), 전자 문신, 또는 스마트 와치(smart watch))중 적어도 하나를 포함할 수 있다.
어떤 실시예들에 따르면, 전자 장치는 통신 기능을 갖춘 스마트 가전 제품(smart home appliance)일 수 있다. 스마트 가전 제품은, 예를 들자면, 전자 장치는 텔레비전, DVD(digital video disk) 플레이어, 오디오, 냉장고, 에어컨, 청소기, 오븐, 전자레인지, 세탁기, 공기 청정기, 셋톱 박스(set-top box), TV 박스(예를 들면, 삼성 HomeSync™, 애플TV™, 또는 구글 TV™), 게임 콘솔(game consoles), 전자 사전, 전자 키, 캠코더(camcorder), 또는 전자 액자 중 적어도 하나를 포함할 수 있다.
어떤 실시예들에 따르면, 전자 장치는 각종 의료기기(예: MRA(magnetic resonance angiography), MRI(magnetic resonance imaging), CT(computed tomography), 촬영기, 초음파기 등), 네비게이션(navigation) 장치, GPS 수신기(global positioning system receiver), EDR(event data recorder), FDR(flight data recorder), 자동차 인포테인먼트(infotainment) 장치, 선박용 전자 장비(예: 선박용 항법 장치 및 자이로 콤파스 등), 항공 전자기기(avionics), 보안 기기, 차량용 헤드 유닛, 산업용 또는 가정용 로봇, 금융 기관의 ATM(automatic tellers machine) 또는 상점의 POS(point of sales) 중 적어도 하나를 포함할 수 있다.
어떤 실시예들에 따르면, 전자 장치는 통신 기능을 포함한 가구(furniture) 또는 건물/구조물의 일부, 전자 보드(electronic board), 전자 사인 입력장치(electronic signature receiving device), 프로젝터(projector), 또는 각종 계측기기(예: 수도, 전기, 가스, 또는 전파 계측 기기 등) 중 적어도 하나를 포함할 수 있다. 본 발명의 다양한 실시예에 따른 전자 장치는 전술한 다양한 장치들 중 하나 또는 그 이상의 조합일 수 있다. 또한, 본 발명의 다양한 실시예에 따른 전자 장치는 플렉서블 장치일 수 있다. 또한, 본 발명의 다양한 실시예에 따른 전자 장치는 전술한 기기들에 한정되지 않음은 당업자에게 자명하다.
이하, 첨부된 도면을 참조하여 다양한 실시예에 따른 전자 장치에 대해서 살펴본다. 다양한 실시예에서 이용되는 사용자라는 용어는 전자 장치를 사용하는 사람 또는 전자 장치를 사용하는 장치(예: 인공지능 전자 장치)를 지칭할 수 있다.
이하 본 발명에 따른 바람직한 실시예를 첨부한 도면을 참조하여 상세히 설명한다. 하기 설명에서는 구체적인 카테고리, 필기 이미지 등의 특정 사항들이 나타나고 있는데 이는 본 발명의 보다 전반적인 이해를 돕기 위해서 제공된 것일 뿐 이러한 특정 사항들이 본 발명의 범위 내에서 소정의 변형이나 혹은 변경이 이루어질 수 있음은 이 기술 분야에서 통상의 지식을 가진 자에게는 자명하다 할 것이다.
도 1은 본 발명의 일 실시예에 따른 이미지 처리 동작을 수행하는 전자 장치의 블록도이다. 도 1을 참조하면, 전자 장치(100)는 제어부(110), 표시부(120), 입력부(130), 카메라 모듈(140), 저장부(150)를 포함할 수 있다. 이하에서는 표시부(120)를 터치스크린인 경우를 예로 들어 설명한다.
표시부(120)(예: 터치스크린)는 사용자의 조작을 입력 받으며, 응용 프로그램의 실행 영상과 동작 상태 및 메뉴 상태를 디스플레이 할 수 있다. 예컨대, 표시부(120)는 사용자에게 다양한 서비스(예, 통화, 데이터 전송, 방송, 사진촬영 등)에 대응되는 유저 인터페이스를 제공할 수 있다. 표시부(120)는 유저 인터페이스에 입력되는 적어도 하나의 터치에 대응되는 아날로그 신호를 터치스크린 컨트롤러(미도시)로 전송할 수 있다. 표시부(120)는 손 터치 또는 전자펜과 같은 터치 가능한 입력 수단(예, 스타일러스 펜, 이하에서는 전자펜이라 함)을 통해 적어도 하나의 터치를 입력 받을 수 있다. 또한, 표시부(120)는 적어도 하나의 터치 중에서, 하나의 터치의 연속적인 움직임을 입력 받을 수 있다. 표시부(120)는 입력되는 터치의 연속적인 움직임에 대응되는 아날로그 신호를 터치스크린 컨트롤러로 전송할 수 있다.
한 실시예에 따르면, 표시부(120)는 예를 들어, 저항막(resistive) 방식, 정전용량(capacitive) 방식, 전자 유도(EMR) 방식, 적외선(infrared) 방식 또는 초음파(acoustic wave) 방식으로 구현될 수 있다.
한 실시예에 따르면, 터치는 표시부(120)에 대한 손 터치 또는 전자펜과의 직접적인 접촉에 한정되지 않고, 비접촉을 포함할 수 있다. 표시부(120)에서 검출 가능한 간격은 전자 장치(100)의 성능 또는 구조에 따라 변경될 수 있으며, 예를 들면, 표시부(120)는 손 터치 또는 전자펜과의 접촉에 의한 터치 이벤트와, 비접촉 상태로의 입력(예컨대, 호버링(Hovering)) 이벤트를 구분하여 인식 가능하도록, 상기 터치 이벤트와 호버링 이벤트에 의해 인식되는 값(예컨대, 전류값 등)이 다르게 출력될 수 있도록 구성될 수 있다. 또한, 표시부(120)는 호버링 이벤트가 발생되는 공간과 표시부(120) 사이의 거리에 따라, 인식되는 값(예컨대, 전류값 등)을 다르게 출력할 수 있다.
한 실시예에 따르면, 터치스크린 컨트롤러는 표시부(120)에서부터 수신된 아날로그 신호를 디지털 신호(예, X와 Y좌표)로 변환하여 제어부(110)로 전송할 수 있다. 제어부(110)는 터치스크린 컨트롤러로부터 수신된 디지털 신호를 이용하여 표시부(120)를 제어할 수 있다. 예를 들어, 제어부(110)는 터치 이벤트 또는 호버링 이벤트에 응답하여 표시부(120)에 표시된 단축 아이콘(도시되지 아니함) 또는 단축 아이콘(도시되지 아니함)을 실행할 수 있다. 한 실시예에 따르면, 터치스크린 컨트롤러는 제어부(110)에 포함될 수도 있다.
한 실시예에 따르면, 터치스크린 컨트롤러는 표시부(120)를 통해 출력되는 값(예컨대, 전류값 등)을 인식하여 호버링 이벤트가 발생되는 공간과 표시부(120) 사이의 거리를 확인할 수 있고, 확인된 거리 값을 디지털 신호(예컨대, Z좌표)로 변환하여 제어부(110)로 제공할 수 있다.
한 실시예에 따르면, 표시부(120)는 손 터치 및 전자펜에 의한 입력을 동시에 입력 받을 수 있도록, 손 터치 및 전자펜의 터치나 근접을 각각 인식할 수 있는 적어도 두 개의 터치스크린 패널을 포함할 수 있다. 상기 적어도 두 개의 터치스크린 패널은 서로 다른 출력값을 터치스크린 컨트롤러에 제공하고, 터치스크린 컨트롤러는 상기 적어도 두 개의 터치스크린 패널에서 입력되는 값을 서로 다르게 인식하여, 표시부(120)로부터의 입력이 손 터치에 의한 입력인지, 전자펜에 의한 입력인지를 구분할 수 있다.
입력부(130)는 사용자의 조작을 입력 받으며, 버튼(미도시), 키패드(미도시), 및 마이크(미도시) 중 적어도 하나를 포함할 수 있다. 한 실시예에 따르면, 버튼은 상기 전자 장치(100)의 하우징의 전면, 측면 또는 후면에 형성될 수 있으며, 전원/잠금 버튼, 메뉴 버튼 중 적어도 하나일 수 있다.
한 실시예에 따르면, 키패드는 전자 장치(100)의 제어를 위해 사용자로부터 키 입력을 수신할 수 있다. 키패드는 전자 장치(100)에 형성되는 물리적인 키패드 를 포함할 수 있다. 한 실시예에 따르면, 전자 장치(100)에 형성되는 물리적인 키패드는 전자 장치(100)의 성능 또는 구조에 따라 제외될 수 있다. 한 실시예에 따르면, 마이크는 제어부(110)의 제어에 따라 음성(voice) 또는 사운드(sound)를 입력 받아 전기적인 신호를 생성할 수 있다.
카메라 모듈(140)은 제1 카메라(미도시) 및 제2 카메라(미도시) 중 적어도 하나를 포함할 수 있으며, 카메라 모듈(140)은 제어부(110)의 제어에 따라 정지이미지 또는 동영상 촬영과 같은 일반적인 디지털 카메라 기능을 수행할 수 있다. 예를 들면, 제1 카메라 또는 제2 카메라를 구동하여 해당 카메라에 포함된 이미지 센서(미도시)를 통해 이미지를 획득하는 기능을 수행할 수 있다.
저장부(150)는 제어부(110)의 제어에 따라 표시부(120), 입력부(130), 카메라 모듈(140)의 동작에 대응되게 입/출력되는 신호 또는 데이터를 저장할 수 있다. 저장부(150)는 전자 장치(100) 또는 제어부(110)의 제어를 위한 제어 프로그램, 애플리케이션 또는 컨텐트들을 저장할 수 있다.
한 실시예에 따르면, "저장부"라는 용어는 저장부(150), 제어부(110)내 롬(미도시), 램(미도시) 또는 전자 장치(100)에 장착되는 메모리 카드(미도시)(예, SD 카드, 메모리 스틱)를 포함할 수 있다. 저장부(150)는 비휘발성메모리, 휘발성메모리, 하드 디스크 드라이브(HDD) 또는 솔리드 스테이트 드라이브(SSD)를 포함할 수 있다.
제어부(110)는 CPU(미도시), 전자 장치(100)의 제어를 위한 제어프로그램이 저장된 롬(ROM, 미도시) 및 전자 장치(100)의 외부로부터 입력되는 신호 또는 데이터를 기억하거나, 전자 장치(100)에서 수행되는 작업을 위한 기억영역으로 사용되는 램(RAM, 미도시)을 포함할 수 있다. CPU는 싱글 코어, 듀얼 코어, 트리플 코어, 또는 쿼드 코어를 포함할 수 있다. CPU, 롬 및 램은 내부버스(bus; 미도시)를 통해 상호 연결될 수 있다.
제어부(110)는 표시부(120), 입력부(130), 카메라 모듈(140) 또는 저장부(150) 중 적어도 하나와 기능적으로 연결되어 표시부(120), 입력부(130), 카메라 모듈(140) 또는 저장부(150)를 제어할 수 있다.
또한 제어부(110)는 본 발명의 일 실시예에 따라, 적어도 하나의 글자를 포함하는 컨텐트를 획득하면, 상기 획득된 컨텐트를 분석하여 복수의 카테고리 중 하나에 포함되도록 분류하는 동작 또는 상기 획득된 컨텐트에 기반하여 상기 적어도 하나의 글자에 대응하는 벡터 이미지를 포함하는 벡터 이미지들을 생성하고 상기 벡터 이미지들 중 적어도 일부를 상기 표시부(120)를 통해 표시하는 동작 중 적어도 하나의 동작을 제어할 수 있다. 한 실시예에 따르면, 제어부(110)는 하드웨어 모듈(예: 프로세서), 소프트웨어 모듈(예: 어플리케이션) 또는 그 조합으로 구현될 수 있다.
상기 컨텐트는 상기 제어부(110)와 기능적으로 연결된 카메라 모듈(140)을 통해 특정 피사체를 촬영함으로써 획득된 이미지일 수 있다. 한 실시예에 따르면, 컨텐트는 전자 장치(100)의 기능 중 화면 캡쳐 기능의 실행에 따라, 캡쳐되어 획득된 이미지일 수 있다. 한 실시예에 따르면, 컨텐트는 디지털 노트 등과 같은 필기 입력을 위한 애플리케이션을 실행시켜, 전자펜 등과 같은 입력 수단을 통해 표시부(120)에 입력되어 획득된 텍스트일 수 있다. 한 실시예에 따르면, 컨텐트는 외부 전자 장치로부터 전달 받은 컨텐트, 예컨대 JPG, GIF, BMP 등 다양한 형식의 파일일 수 있다.
이하에서는 컨텐트가 카메라 모듈(140)을 통해 획득된 이미지인 경우를 예를 들어, 실시예들에 따른 이미지 처리 동작을 상세히 설명한다.
도 2는 본 발명의 일 실시예에 따른 컨텐트(예: 이미지) 처리 동작을 나타내는 흐름도이다. 도 2를 참조하면, 컨텐트 처리 동작은 컨텐트 처리 방법의 선택에 따라, 컨텐트의 내용 편집 및 정렬 동작 또는 컨텐트 분류 동작 중 적어도 하나를 수행할 수 있다. 한 실시예에 따르면, 상기 컨텐트의 내용 편집 및 정렬 동작은, 사용자가 전자 장치를 통해 획득한 컨텐트의 내용(예: 필기 내용 또는 문서의 내용)을 쉽게 인식하고 간편하게 편집할 수 있도록 컨텐트의 내용을 벡터 이미지로 생성하여 제공할 수 있다. 한 실시예에 따르면, 상기 컨텐트 분류 동작은 전자 장치에서 획득한 컨텐트를 자동으로 카테고리화하여 보관할 수 있다.
도 2를 참조하면, 210 동작에서는 사용자 조작에 따라, 전자 장치(예: 제어부(110))가 컨텐트를 획득할 수 있다. 예를 들어, 전자 장치는 카메라(예: 카메라 모듈(140))를 통해서 도 3의 (a)와 같은 컨텐트(예: 필기 입력된 노트)를 획득할 수 있다.
한 실시예에 따르면, 220 동작에서는 전자 장치가 획득된 컨텐트의 컨텐트 처리 방법을 선택할 수 있다. 예를 들면, 컨텐트 처리 방법은 컨텐트의 내용 편집 및 정렬과, 컨텐트 분류일 수 있다. 220 동작에서 컨텐트 처리 방법으로 컨텐트의 내용 편집 및 정렬이 선택된 경우 전자 장치는 230 동작을 수행하고, 컨텐트 처리 방법으로 컨텐트 분류가 선택된 경우 전자 장치는 260 동작을 수행할 수 있다. 한 실시예에 따르면, 전자 장치는, 220 동작을 생략할 수 있으며, 230 동작 및 260 동작을 순차적으로 또는 동시에 수행 할 수 있다.
상기 220 동작에서 컨텐트의 내용 편집 및 정렬이 선택되면, 이후 230 동작에서는 전자 장치가 컨텐트를 벡터 이미지화 할 수 있다. 한 실시예에 따르면, 벡터 이미지화는 컨텐트에 대한 정보가 모양과 선에 대한 형태로 저장될 수 있도록 컨텐트에서 벡터 이미지들을 생성하는 동작을 포함할 있다. 예컨대, 전자 장치가 획득된 컨텐트를 OCR(Optical Character Recognition; 광학식 문자 인식) 전처리 하고, 벡터 이미지들을 생성하여 벡터 파일(벡터 이미지 파일이라고도 함)을 생성할 수 있다. 예컨대, 상기 OCR 전처리 동작은 전자 장치가 컨텐트에 포함된 획 또는 글자에서 불필요한 정보를 제거하고, 인식이 용이하도록 정보를 가공하는 동작을 포함할 수 있다. 한 실시예에 따르면, 전자 장치는 상기 획득된 컨텐트를 벡터 이미지화하기 위해서, 예를 들어, 촬영을 통해 획득된 컨텐트에 퍼스펙티브(perspective) 보정 기술을 적용할 수 있다. 예컨대, 전자 장치가 도 3의 (b)와 같은 컨텐트를 도 3의 (c)와 같은 컨텐트가 되도록 퍼스펙티브 보정을 적용할 수 있다. 이후, 전자 장치가 퍼스펙티브 보정이 적용된 컨텐트에서 벡터 이미지들을 생성하여 벡터 이미지 파일을 생성할 수 있다. 이와 같은 동작에 따라, 전자 장치가 어느 특정 애플리케이션을 실행시켜 생성된 벡터 이미지 파일의 벡터 이미지들을 화면에 표시하면 도 3의 (d)와 같은 형태일 수 있다.
240 동작에서는 전자 장치가 벡터 이미지화에 따른, 벡터 이미지 들을 편집하여 정렬할 수 있다. 예를 들면, 벡터 이미지들은 컨텐트에서 생성된 점, 직선, 곡선, 다각형 등 다양한 형태의 이미지를 포함할 수 있다. 일 실시예에 따르면, 240 동작의 벡터 이미지들을 편집하여 정렬하는 동작은, 전자 장치가 생성된 벡터 이미지들을 적어도 하나의 블록으로 블록화한 후, 블록화된 벡터 이미지들을 편집하여 정렬하는 것일 수 있다. 예를 들면, 전자 장치가 블록화된 벡터 이미지들의 크기, 블록화에 따른 블록 별 벡터 이미지들 간의 간격, 블록들 간의 간격, 블록들 별 벡터 이미지들의 회전 정도 중 적어도 하나를 조정하여, 벡터 이미지들을 편집하여 정렬하는 동작을 수행할 수 있다.
일 실시예에 따르면, 240 동작의 벡터 이미지들을 편집하여 정렬하는 동작은, 전자 장치가 생성된 벡터 이미지들의 크기, 벡터 이미지들 간의 간격, 벡터 이미지들의 회전 정도 중 적어도 하나를 조정하여 정렬하는 것일 수 있다.
240 동작의 벡터 이미지들을 편집하여 정렬하는 동작에 대한 추가적인 정보가 도 4 내지 도 24를 참조하여 제공된다.
상기 220 동작에서 컨텐트 분류가 선택되면, 이후 260 동작에서는 전자 장치가 획득된 컨텐트를 분석할 수 있다. 예컨대, 전자 장치가 획득된 컨텐트의 속성 분석 및/또는 획득된 컨텐트의 관련 정보 확인 동작을 수행할 수 있다.
270 동작에서는 분석 결과에 따라, 전자 장치가 미리 설정된 복수의 카테고리 중 하나에 포함되도록 미리 설정된 기준(조건)에 맞춰 컨텐트를 분류할 수 있다. 예컨대, 전자 장치가 미리 설정된 복수의 카테고리 중 하나에 포함되도록 획득된 컨텐트를 분류하여 저장할 수 있다. 상기 복수의 카테고리는 제품 제작 시, 기본적으로 설정된 것을 수 있으며, 사용자가 직접 설정한 것일 수 있다. 또한, 카테고리는 사용자 조작에 따라, 삭제, 삽입 등 변경이 가능할 수 있다.
260 동작 및 270 동작의 컨텐트 분류 동작에 대한 추가적인 정보가 도 25 내지 도 30을 참조하여 제공된다.
도 4는 본 발명의 일 실시예에 따른 컨텐트(예: 이미지)의 내용 편집 및 정렬 동작을 나타내는 흐름도이다. 도 4를 참조하면, 컨텐트의 내용 편집 및 정렬 동작은, 획득된 컨텐트(예: 필기 이미지 또는 판서 등)에 포함된 이미지 요소(예: 획 또는 글씨 등)들을 적어도 하나의 블록으로 블록화한 후, 블록들 별로 이미지 요소들을 편집하여 재정렬할 수 있다. 예를 들어, 블록화된 이미지 요소들의 크기, 블록들 간의 간격, 블록화에 따른 블록들 별 이미지 요소들 간의 간격, 블록들 별 이미지 요소들의 회전 정도 중 적어도 하나를 조정하여 정렬하는 동작을 수행할 수 있다.
도 4를 참조하면, 410 동작에서는 사용자 조작에 따라, 전자 장치가 컨텐트(예: 필기 이미지 또는 판서)를 획득할 수 있다. 420 동작에서는 전자 장치가 컨텐트에서 벡터 이미지들을 생성 할 수 있다.
430 동작에서는 전자 장치가 벡터 이미지들을 분석할 수 있다. 예를 들면, 전자 장치는, 벡터 이미지들을 적어도 하나의 블록으로 블록화하여 분석 할 수 있다. 예컨대, 전자 장치가 인접한 벡터 이미지들을 하나의 블록으로 블록화(예를 들어, 인접한 벡터 이미지들의 조합으로 하나의 문자, 단어, 문장 등이 생성될 때, 상기 조합에 따른 하나의 문자, 단어, 문장 등을 하나의 블록으로 블록화)하거나, 벡터 이미지들간의 크기와 간격 중 적어도 하나에 기반하여 각각의 블록으로 블록화할 수 있다.
한 실시예에 따르면, 도 5의 (a)를 참조하면, 상기 430 동작에 따라, 블록화된 각각의 블록은 말머리 기호 하나를 블록화 한 것과 같이, 하나의 벡터 이미지로 이루어 질 수 있다. 예를 들면, 도 5의 (a)를 참조하면 블록화된 각각의 블록은, 하나의 단어를 블록화 하거나 다수의 단어들의 조합을 블록화 한 것과 같이, 다수의 벡터 이미지들로 이루어 질 수 있다.
일 실시예에 따르면, 상기 벡터 이미지들을 적어도 하나의 블록으로 블록화하는 동작은, 전자 장치가 생성된 벡터 이미지들간의 간격을 확인한 후, 확인된 벡터 이미지들간의 간격이 지정된 범위 이하에 포함되는 벡터 이미지들을 하나의 블록으로 블록화할 수 있다.
일 실시예에 따르면, 상기 벡터 이미지들을 적어도 하나의 블록으로 블록화하는 동작은, 전자 장치가 생성된 벡터 이미지들간의 간격 및/또는 생성된 벡터 이미지들의 크기(예를 들어 높이, 너비, 높이 및 너비의 비 등)를 확인하고, 이를 이용하여 일정 범위 이하에 포함되는 벡터 이미지들을 하나의 블록으로 블록화할 수 있다. 예를 들어, 전자 장치가 벡터 이미지들의 크기와 벡터 이미지들 간의 간격의 비율을 이용하여 일정 범위 이하에 속하는 벡터 이미지들을 블록화 할 수 있다.
일 실시예에 따르면, 상기 벡터 이미지들을 적어도 하나의 블록으로 블록화하는 동작은, 특정 기호들이 테이블 등에 미리 저장되어 있을 경우, 전자 장치가 저장된 기호의 형태와의 비교를 통해, 벡터 이미지 요소 각각을 블록화하거나 또는 다수의 벡터 이미지들을 조합하여 블록화할 수 있다.
상술한 실시예들의 블록화 동작에 따라, 벡터 이미지들은 글자 단위, 또는 그것보다 더 작은 단위로도 블록화될 수 있다. 예컨대, 한글의 경우, 모음 단위, 자음 단위로 벡터 이미지들이 블록화되거나, 또는 도 5 (b)와 같이, 문자 단위, 단어 단위, 또는 문장 단위로 벡터 이미지들이 블록화될 수 있다. 또한, 영어의 경우, 알파벳 단위로 벡터 이미지들이 블록화되거나, 또는 단어 단위, 문장 단위로 벡터 이미지들이 블록화될 수 있다.
한 실시예에 따르면, 도 5의 (c)를 참조하면, 전자 장치는, 블록화 된 벡터 이미지들을 분석할 수 있다. 예를 들면, 전자 장치는, 블록화된 벡터 이미지들의 너비, 높이, 너비 대 높이 비, 수평 중심선, 수직 중심선, 수평 외곽선들, 수직 외곽선들, 간격, 회전 정도 또는 중심점 등의 다양한 기준에 따라, 블록화된 벡터 이미지들간의 관계를 분석할 수 있다. 예컨대, 전자 장치는, 블록화된 벡터 이미지들 간의 너비, 높이, 너비 대 높이 비, 수평 중심선, 수직 중심선, 수평 외곽선들, 수직 외곽선들, 간격, 회전 정도 또는 중심점 중 적어도 하나의 차이, 평균, 분포도, 최저점, 최고점 또는 유사성 등을 분석하여 벡터 이미지들간의 관계를 분석할 수 있다.
440 동작에서는 전자 장치가 벡터 이미지들을 편집하여 정렬할 수 있다. 예컨대, 440 동작에서는 전자 장치가 블록화된 벡터 이미지들의 크기(예: 너비 또는 높이), 블록들 간의 간격, 블록들 별 벡터 이미지들의 회전 정도 중 적어도 하나를 조정하여 정렬하는 동작을 수행할 수 있다.
상기 440 동작의 벡터 이미지들을 편집하여 정렬하는 동작에서, 블록화된 벡터 이미지들의 크기를 조정하여 정렬하는 동작에 대한 추가적인 정보를 도 6을 참조하여 제공한다.
도 6을 참조하면, 610동작에서, 전자 장치(예: 제어부(110))는 벡터 이미지들을 분류 할 수 있다. 한 실시예에 따르면, 전자 장치는, 블록화에 따른 벡터 이미지들의 종류를 분류할 수 있다. 예를 들면, 전자 장치는 블록들의 위치, 블록들의 주변 정보(예: 주변 벡터 이미지들의 종류 등), 또는 블록들에 포함된 벡터 이미지들의 형태 중 적어도 하나를 이용하여 블록들의 종류를 분류할 수 있다.
예를 들어, 말머리 기호의 경우, 일반적으로 문단의 앞쪽에 위치하며, 느낌표와 같은 기호의 경우, 문단의 뒤쪽에 위치하므로 전자 장치는 블록들의 위치 정보를 이용하여 블록들의 종류를 분류할 수 있다. 또한, 예를 들어, 말머리 기호의 경우, 좌측 방향으로는 다른 블록들(즉, 다른 벡터 이미지들)이 존재하지 않고, 상하 방향으로 유사한 벡터가 존재할 수 있으며, 우측으로는 글씨 또는 내용에 해당하는 벡터 이미지들이 존재할 수 있으므로, 전자 장치는 블록들의 주변 정보를 이용하여 블록들의 종류를 분류할 수 있다. 또한, 예를 들어, 전자 장치는 말머리 기호를 포함하는 블록의 경우, 일반적으로 많이 사용되는 기호의 형태를 테이블에 미리 저장하여, 기호 형태와 유사한지에 따라 분류할 수 있으며, 글씨를 포함하는 블록의 경우, 일반적인 글씨의 형태를 테이블에 미리 저장하여 이와 유사한지에 따라 분류할 수도 있다.
상술한 분류 방법들에 따라, 전자 장치는 블록들의 종류를 글자, 도형, 그림, 기호 등 다양하게 분류할 수 있다.
620 동작에서, 전자 장치는 상기 분류에 따라, 벡터 이미지들의 크기를 조정할 수 있다. 이때의 벡터 이미지들은 상술한 610 동작의 실시예에 따라, 블록화된 벡터 이미지들일 수 있다.
상기 620 동작의 실시예인 블록화된 벡터 이미지들의 크기 조정 동작에 대한 추가적인 정보가 도 7을 참조하여 제공된다.
도 7을 참조하면, 블록화된 벡터 이미지들의 크기를 조정하는 동작은, 분류별 블록들의 높이 값의 평균 값 및 너비 값의 평균 값에 대응되도록, 전자 장치가 분류 별 해당 블록에 포함된 벡터 이미지들의 크기를 조정할 수 있다.
도 7을 참조하면, 710 동작에서는 전자 장치가 블록들별로 높이(height; h) 값 및 너비(width; w) 값을 각각 확인할 수 있다.
730 동작에서는 전자 장치가 확인된 각각의 높이 값 및 너비 값을 이용하여, 상술한 블록들의 종류 분류 별로, 높이 값의 평균 값 및 너비 값의 평균 값을 각각 산출할 수 있다. 예를 들어, 분류된 블록들의 종류가 글자 블록, 기호 블록이라고 하면, 전자 장치는 글자 블록으로 분류된 블록들 전체의 높이 값의 평균 값 및 너비 값의 평균 값을 산출하고, 기호 블록으로 분류된 블록들 전체의 높이 값의 평균 값 및 너비 값의 평균 값을 산출할 수 있다.
750 동작에서는 전자 장치가 블록들의 종류 분류 별로 해당 블록들에 포함된 벡터 이미지들의 크기를 블록들의 종류 분류 별로 산출된 평균 값에 대응되는 크기로 조정할 수 있다. 예를 들어, 전자 장치는 글자 블록으로 분류된 블록들에 포함된 벡터 이미지들의 높이 및 너비를 각각 글자 블록으로 분류된 블록들 전체의 높이 값의 평균 값 및 너비 값의 평균 값의 크기로 조정할 수 있다. 또한, 전자 장치는 기호 블록으로 분류된 블록들에 포함된 벡터 이미지들의 높이 및 너비를 각각 기호 블록으로 분류된 블록들 전체의 높이 값의 평균 값 및 너비 값의 평균 값의 크기로 조정할 수 있다.
상기 도 7을 참조한 실시예에서 전자 장치는 블록화된 벡터 이미지들의 크기를 조정하는 동작을 일부 변경하여, 블록들의 높이 값 또는 너비 값을 확인하고 이를 이용하여 산출된 분류 별 블록들의 높이 값의 평균 값 또는 너비 값의 평균 값에 대응되도록, 분류 별 해당 블록에 포함된 벡터 이미지들의 크기를 조정할 수도 있다.
상기 620 동작의 실시예인 블록화된 벡터 이미지들의 크기 조정 동작을 도 8을 참조하여 상세히 설명하면 다음과 같다. 도 8을 참조하면, 블록화된 벡터 이미지들의 크기를 조정하는 동작은, 전자 장치가 분류 별로 블록들의 높이 값 및 너비 값의 비의 평균 값에 대응되도록, 분류 별 해당 블록에 포함된 벡터 이미지들의 크기를 조정할 있다.
도 8을 참조하면, 810 동작에서는 전자 장치가 블록들 각각의 높이 값 및 너비 값의 비를 확인할 수 있다.
830 동작에서는 전자 장치가 확인된 높이 값 및 너비 값의 비를 이용하여, 분류 별로, 확인된 높이 값 및 너비 값의 비의 평균 값을 산출할 수 있다.
850 동작에서는 전자 장치가 블록들의 종류 분류 별로 해당 블록들에 포함된 벡터 이미지들의 크기를 블록들의 종류 분류 별로 산출된 평균 값에 대응되는 크기로 조정할 수 있다. 예를 들어, 전자 장치는 각 블록 별로 높이/너비 값의 평균(h/w 값의 평균)을 기반으로 해당 블록들에 포함된 벡터 이미지들의 크기를 조정할 수 있다.
상기 620 동작의 실시예인 블록화된 벡터 이미지들의 크기 조정 동작은, 전자 장치가 미리 설정된 가이드 라인(예를 들어, 원고선)을 이용하는 것일 수 있다. 예를 들어, 전자 장치가 미리 설정된 가이드 라인의 크기(예: 가이드 라인의 높이 및 너비 중 적어도 하나의 크기)에 따라, 블록들에 포함된 벡터 이미지들의 크기를 조정할 수 있다. 예를 들어, 블록들의 종류 분류에 따른 블록 별 높이가 미리 설정되어 있을 수 있으며, 전자 장치가 미리 설정된 높이에 맞게 블록들에 포함된 벡터 이미지들의 높이를 조정할 수 있다.
상기 440 동작의 벡터 이미지들을 편집하여 정렬하는 동작에서, 예를 들어 블록화된 벡터 이미지들의 블록들 간의 간격을 조정하여 정렬하는 동작을 도 9를 참조하여 상세히 설명하면 다음과 같다.
도 9를 참조하면, 910 동작에서는 전자 장치가 인접 블록들간의 간격을 확인할 수 있다. 하나의 블록을 예로 들면, 전자 장치는 하나의 블록의 상, 하, 좌, 우측에 바로 인접하여 위치한 블록과의 간격을 확인할 수 있다.
920 동작에서 전자 장치는 910 동작에 따라 확인된 인접 블록들 간의 간격을 이용하여, 블록들 간의 간격을 조정할 수 있다. 예를 들어, 전자 장치는 도 10과 같이 벡터 이미지들의 블록화에 따라 생성된 블록들에서 좌, 우측의 인접 블록들 간의 간격을 확인할 수 있다.
상기 440 동작의 벡터 이미지들을 편집하여 정렬하는 동작에서, 예를 들어 벡터 이미지들의 블록화에 따른 블록들 별 벡터 이미지들 간의 간격을 조정하여 정렬하는 동작을 도 11을 참조하여 상세히 설명하면 다음과 같다.
도 11을 참조하면, 1110 동작에서 전자 장치는 블록들 별로 포함되어 있는 인접 벡터 이미지들 간의 간격을 확인할 수 있다. 하나의 블록에 포함된 하나의 벡터 이미지를 예로 들면, 전자 장치는 하나의 벡터 이미지가 포함되어 있는 블록 내에서 하나의 벡터 이미지의 상, 하, 좌, 우측에 바로 인접하여 위치한 벡터 이미지와의 간격을 확인할 수 있다.
1120 동작에서 전자 장치는 확인된 블록들 별로 포함되어 있는 인접 벡터 이미지들 간의 간격을 이용하여, 블록들 별 벡터 이미지들 간의 간격을 조정할 수 있다. 예를 들어, 문자 블록 내의 문자 이미지들의 평균 간격이 4mm 정도이면, 전자 장치가 문자 블록 내의 문자 이미지들, 예컨대, 문자들 간의 간격을 4mm 정도로 일정하게 되도록 조정할 수 있다.
상기 440 동작의 벡터 이미지들을 편집하여 정렬하는 동작에서, 예를 들어, 벡터 이미지들을 블록화함에 따른, 블록들 별 벡터 이미지들의 회전 정도를 조정하여 정렬하는 동작을 도 12를 참조하여 상세히 설명하면 다음과 같다.
도 12를 참조하면, 1210 동작에서 전자 장치는 블록들의 회전 정도 및/또는 블록들 별 벡터 이미지들의 회전 정도를 확인할 수 있다. 예를 들어, 전자 장치가 미리 설정된 x, y축 기준을 중심으로 블록들의 회전 정도 및/또는 블록들 별 벡터 이미지들의 회전 정도를 확인할 수 있다. 또한, 예를 들어, 전자 장치는 블록 내에서 각 글자들의 상단 벡터 이미지들의 최상단 부분을 잇는 선과 각 글자들의 하단 벡터 이미지들의 최하단 부분을 잇는 가상의 선의 기울기에 기반하여, 블록들의 회전 정도 및/또는 블록들 별 벡터 이미지들의 회전 정도를 확인할 수 있다.
1220 동작에서 전자 장치는 확인된 회전 정도에 따라, 블록들 별 벡터 이미지들의 기울기, 크기, 및 위치 이동 중 적어도 하나를 조정할 수 있다. 예를 들어, 도 13을 참조하면, "위험"의 문자 블록(135)의 경우, 전자 장치는 각 글자들의 상단 벡터 이미지들을 잇는 선(136)과, 최하단 벡터 이미지들을 잇는 선(137)의 기울기에 기반하여, 글자들이 전반적으로 기울어져(회전되어) 있음을 판단할 수 있다. 이에 따라 전자 장치가 "위험"의 기울기를 조정해 줄 수 있다. 예를 들면, 전자 장치가 "위"와 "험"의 크기를 서로 비슷하거나 같도록 조정하여 줄 수 있다. 또는 전자 장치가 "위" 또는 "험"의 위치를 조정하여, "위"를 상단으로 이동하여 전체적인 문자 블록의 회전 정도를 조정해 줄 수 있다.
상술한 440 동작의 벡터 이미지들을 편집하여 정렬하는 동작들의 다양한 실시예들의 조합, 예를 들어, 블록화된 벡터 이미지들의 크기를 조정하여 정렬하는 동작과 블록들 별 벡터 이미지들의 회전 정도를 조정하여 정렬하는 동작을 조합에 따른 정렬 동작이 수행될 수도 있다. 예를 들어, 도 13을 참조하면, "넣기에는"의 문자 블록(131)의 경우, 전자 장치는 각 글자들의 최상단 벡터 이미지들을 잇는 선(132)과, 최하단 벡터 이미지들을 잇는 선(133)의 기울기에 기반하여, 글자들이 점차적으로 작게 쓰였다고 판단할 수 있다. 이런 경우, 전자 장치가 "넣기에는"의 문자 블록(131)의 글자들의 크기를 일정하게 조정할 수 있다. 예를 들어, 전자 장치가 "는"에 해당하는 벡터 이미지(들)의 크기를 키워줄 수 있으며, 또는 "넣"에 해당하는 벡터 이미지(들)의 크기를 줄여줄 수 있다.
또한, 상술한 440 동작의 벡터 이미지들을 편집하여 정렬하는 동작들의 다양한 실시예들의 조합에 따르면, 예를 들어, 글자를 구성하는 각 획이 벡터 이미지일 때, 벡터 이미지들 간의 간격은 각 획간 간격일 수 있다. 이와 같은 경우, 전자 장치는 획 간의 간격 정보에 따라, 획 간의 간격을 조정하여 블록화된 벡터 이미지들을 정렬할 수 있다. 도 14의 (a) 및 도 14의(b)를 참조하면, 전자 장치가 "장"에 해당하는 글자에서, ㅈ(141), ㅏ(142), ㅇ(143) 간의 획간 간격, 높이, 크기, 회전을 재조정할 수 있다. 또한, 전자 장치가 "에"에 해당하는 글자에서, ㅇ(144), ㅓ(145), ㅣ(146) 간의 획간의 간격 및 높이, 크기, 회전을 재조정할 수 있다.
도 15는 본 발명의 일 실시예에 따른 컨텐트(예: 이미지)의 내용 편집 및 정렬 동작을 나타내는 흐름도이다. 도 15를 참조하면, 컨텐트의 내용 편집 및 정렬 동작은, 컨텐트(예: 획득된 필기 이미지)에 포함된 이미지 요소들(예: 획 또는 글씨 등)을 편집하여 재정렬할 수 있다. 예를 들어, 획득된 필기 이미지에 포함된 이미지 요소들의 크기, 이미지 요소들 간의 간격, 이미지 요소들의 회전 정도 중 적어도 하나를 조정하여 정렬하는 동작을 수행할 수 있다.
도 15를 참조하면, 1510 동작에서 전자 장치는 컨텐트를 획득할 수 있다. 1520 동작에서 전자 장치는 컨텐트에서 벡터 이미지들을 생성할 수 있다.
1530 동작에서 전자 장치는 생성된 벡터 이미지들을 편집하여 정렬할 수 있다. 예를 들어, 전자 장치는 생성된 벡터 이미지들의 크기, 벡터 이미지들 간의 간격, 벡터 이미지들의 회전 정도 중 적어도 하나를 조정하여, 벡터 이미지들을 편집하여 정렬하는 동작을 수행할 수 있다.
상기 1530 동작의 생성된 벡터 이미지들을 편집하여 정렬하는 동작에서 벡터 이미지들의 크기 조정은, 전자 장치가 벡터 이미지의 종류 분류에 따라, 예컨대, 글자 벡터 이미지와 도형 벡터 이미지의 크기를 다르게 조정할 수 있다. 또한, 전자 장치는 예를 들어, 글자 벡터 이미지를 글자 벡터 이미지간의 크기 및 비율에 기반하여 유사하도록 조정할 수 있으며, 글자 벡터 이미지의 크기 및 비율을 참조하여 도형 벡터 이미지의 크기 및 비율을 조정할 수 있다. 또한, 예를 들어, 전자 장치는 도형 벡터 이미지내에 포함되거나 도형 벡터 이미지를 수식하는 글자 벡터 이미지의 크기를 기반으로 하여, 글자 벡터 이미지가 조정되는 비율에 따라, 도형 벡터 이미지의 크기 및 비율을 조정할 수도 있다. 또한, 예를 들어, 전자 장치는 도형 벡터 이미지의 크기와 다른 글자 벡터 이미지의 크기를 비교하여, 도형 벡터 이미지가 글자 벡터 이미지보다 크기가 일정 범위 이내(예를 들어 크기가 1.2배 이내)이면, 도형 벡터 이미지의 크기를 글자 벡터 이미지와 유사한 크기로 조정하고, 도형 벡터 이미지가 글자 벡터 이미지보다 크기가 일정 범위 이상(예를 들어 크기가 1.2배 이상)이면, 도형 벡터 이미지의 크기가 글자 벡터 이미지의 정수배에 비례(예를 들어, 약 2배, 3배, 4배 중 비슷한 크기로)하도록 크기를 조정할 수 있다. 또한, 예를 들어, 전자 장치는 도형 벡터 이미지의 크기가 글자 벡터 이미지의 약 1.5배 크기라면, 도형 벡터 이미지의 크기를 글자 벡터 이미지의 약 2배가 되도록 조정할 수 있다. 또한, 예를 들어, 전자 장치는 도형 벡터 이미지의 크기가 글자 벡터 이미지의 약 1.2배 크기라면, 도형 벡터 이미지의 크기를 글자 벡터 이미지의 약 1배가 되도록 조정할 수도 있다.
상기 1530 동작의 생성된 벡터 이미지들을 편집하여 정렬하는 동작에서, 벡터 이미지들의 크기를 조정하는 동작은 예를 들어, 전자 장치가 벡터 이미지들의 종류를 분류하여, 상기 분류에 따라 벡터 이미지들의 크기를 조정하는 것일 수 있다.
상기 벡터 이미지들의 종류 분류는, 상술한 블록들의 종류를 분류하는 동작과 같이, 전자 장치가 벡터 이미지들의 위치, 벡터 이미지들의 주변 정보(종류 분류 해당 벡터 이미지의 주변 벡터 이미지들의 정보), 벡터 이미지들의 형태 중 적어도 하나를 이용할 수 있다. 상술한 분류에 따라, 벡터 이미지들의 종류는 글자, 도형, 그림, 기호 등 다양할 수 있다.
또한, 분류에 따른 벡터 이미지들의 크기 조정은, 전자 장치가 벡터 이미지들의 분류 별 높이 값의 평균 값 및 너비 값의 평균 값 중 적어도 하나의 평균 값을 산출하여, 분류 별로 해당 벡터 이미지들의 크기를 분류 별로 산출된 평균 값에 대응되는 크기로 조정하도록 할 수 있다. 예를 들어, 10mm, 8mm, 6mm의 높이를 갖는 문자 벡터 요소들이 있다면, 전자 장치는 문자 벡터 이미지들을 모두 8mm 정도의 크기를 가지도록 할 수 있다.
또한, 분류에 따른 벡터 이미지들의 크기 조정은, 전자 장치가 벡터 이미지들의 분류 별 높이 값 및 너비 값의 비(예를 들어 높이 값/너비 값)의 평균 값을 산출하여, 분류 별로 해당 벡터 이미지들의 크기를 분류 별 산출된 평균값에 대응되는 크기로 조정 할 수 있다.
또한, 분류에 따른 벡터 이미지들의 크기 조정은, 전자 장치가 미리 설정된 가이드 라인의 크기에 따라, 분류 별 벡터 이미지들의 크기를 조정할 수 있다. 예를 들어, 분류에 따른 벡터 이미지들의 높이가 미리 설정되어 있을 수 있는 경우, 전자 장치는 미리 설정된 높이에 맞게 벡터 이미지들의 높이를 조정할 수 있다. 예를 들어, 배경 이미지에 가이드 라인이 있고, 문자 벡터 이미지들의 가이드 라인의 크기가 12mm 일 때, 전자 장치는 문자 벡터 이미지들의 크기를 9mm 정도의 크기를 가지도록 조정할 수 있다.
상기 1530 동작의 벡터 이미지들을 편집하여 정렬하는 동작에서, 벡터 이미지들 간의 간격은, 전자 장치가 벡터 이미지의 종류 분류에 따라, 상이한 벡터 이미지들간에는 각기 다른 간격을 가지도록 조정할 수 있다. 예를 들어, 전자 장치는 같은 벡터 이미지들간에는 동일한 간격을 가지도록 조정할 수 있고, 상이한 벡터 이미지들간에는 지정된 간격에 따라, 상이한 벡터 이미지들간에는 각기 다른 간격을 가지도록 조정할 수 있다. 또한, 예를 들어, 글자를 구성하는 각 획이 벡터 이미지일 때, 전자 장치는 벡터 이미지들 간의 간격은 각 획간 간격을 분석하여, 분석된 획 간의 간격 정보에 따라, 획 간의 간격을 조정할 수 있다.
상기 1530 동작의 벡터 이미지들을 편집하여 정렬하는 동작에서, 벡터 이미지들 간의 간격을 조정하는 동작은, 전자 장치가 인접 벡터 이미지들 간의 간격을 이용하거나, 벡터 이미지의 종류 분류 별 인접 벡터 이미지들 간의 간격을 이용하거나, 벡터 이미지의 종류 분류 별 미리 설정된 벡터 이미지들 간의 간격을 이용하여 벡터 이미지들 간의 간격을 조정할 수 있다.
상기 1530 동작의 벡터 이미지들을 편집하여 정렬하는 동작에서, 벡터 이미지들의 회전 정도를 조정하는 동작은, 전자 장치가 상술한 블록들 별 벡터 이미지들의 회전 정도를 조정하여 정렬하는 동작과 유사하게 벡터 이미지들의 회전 정도에 따라, 벡터 이미지들의 기울기, 크기, 및 위치 이동 중 적어도 하나를 조정함으로써 수행될 수 있다.
상술한 실시예들에 따라, 획득된 컨텐트(예: 필기 이미지)에서 벡터 이미지들을 생성하여 벡터 이미지들을 편집하여 재정렬하는 벡터 이미지의 내용 편집 및 정렬 동작에 따른 결과는 예를 들어 도 16과 같을 수 있다. 벡터 이미지의 내용 편집 및 정렬 동작이 적용되기 전의 이미지인 도 16의 (a)와 벡터 이미지의 내용 편집 및 정렬 동작이 적용된 후의 이미지인 도 16의 (b)를 참조하면, 벡터 이미지들, 예컨대, 문자들 전체가 균일하게 정렬된 것을 확인할 수 있다.
도 16의 (a) 및 도 16의 (b)를 참조하면, 말머리 기호 분류에 따라, 말머리 기호(161, 161')간의 정렬 및 그에 따른 문단들의 정렬이 수행되었음을 확인할 수 있다. 예를 들면, 말머리 기호(161)와 "장노출에 있다"라는 문구(162)간의 간격과, 말머리 기호(161')와 "AF"라는 문구(163)간의 간격이 일정하게 정렬되었음을 확인할 수 있다. 또한, "장노출에 있다"라는 문구(162)를 보면, 높이 및 글자 크기가 조정되었음을 확인할 수 있다. 또한 "AF"라는 문구(163)의 경우, 크기가 조정되었음을 확인할 수 있다. 이때의 "AF"라는 문구(163)의 크기 조정은 도형 벡터 이미지내에 포함된 글자 벡터 이미지의 크기에 기반하여 조정되었거나, 또는 도형 벡터 이미지 크기가 다른 글자 벡터 이미지의 크기의 일정 배율(약 1.2배)이내여서, 약 1배의 크기로 조정된 것일 수 있다. 또한, 각 문단을 미리 설정된 가이드 라인(164), 예를 들어 원고 라인(전자 장치의 원고 라인 또는 촬영된 이미지 상의 원고 라인)에 맞도록 위치가 수정된 것을 확인할 수 있다. 또한, 각 단어간의 간격이 조정된 것을 확인할 수 있다.
도 17은 본 발명의 일 실시예에 따른 컨텐트(예: 필기 이미지)의 내용 편집 및 정렬 동작을 나타내는 흐름도이다. 도 17을 참조하면, 컨텐트의 내용 편집 및 정렬 동작은, 자동 줄바꿈 기능에 따라, 획득된 컨텐트를 화면에 표시할 때, 화면의 미리 설정된 영역의 범위 내에 컨텐트들이 자동 정렬되도록 할 수 있다. 예를 들어, 획득된 컨텐트들(예: 필기 이미지의 문자들)을 화면의 미리 설정된 영역에 정렬되도록 할 때, 컨텐트들 중 일부가 화면의 미리 설정된 영역의 범위를 벗어날 것으로 판단되면, 범위를 벗어날 것으로 판단되는 컨텐트들에 대응되는 새로운 영역을 삽입하여, 해당 컨텐트들을 삽입한 영역에 위치시켜 정렬되도록 할 수 있다.
도 17을 참조하면, 1710 동작에서 전자 장치는 컨텐트(예: 필기 이미지)를 획득할 수 있다. 1720 동작에서 전자 장치는 컨텐트에서 벡터 이미지들을 생성할 수 있다. 1730 동작에서 전자 장치는 벡터 이미지들을 블록화할 수 있다. 1740 동작에서 전자 장치는 블록화된 벡터 이미지들을 편집하여 정렬할 때, 정렬될 적어도 하나의 벡터 이미지 요소가 미리 설정된 영역의 범위를 벗어날 것인지를 판단할 수 있다. 이때의 미리 설정된 영역의 범위는 예를 들어, 전자 장치 또는 특정 애플리케이션의 디지털 노트의 미리 설정된 원고라인일 수 있다. 1740 동작에서 정렬될 적어도 하나의 벡터 이미지 요소가 미리 설정된 영역의 범위를 벗어날 것으로 판단되면 전자 장치는 1750 동작을 수행하고, 1740 동작에서 정렬될 적어도 하나의 벡터 이미지 요소가 미리 설정된 영역의 범위를 벗어나지 않을 것으로 판단되면 전자 장치는 1760 동작을 수행할 수 있다.
1750 동작에서 전자 장치는 블록화된 벡터 이미지들을 편집하여 정렬하고, 범위를 벗어난 벡터 이미지가 포함된 블록 내의 벡터 이미지들 전체를 자동 줄바꿈하여 정렬할 수 있다. 이때의 자동 줄바꿈은 예를 들어, 전자 장치는 미리 설정된 범위를 벗어날 것으로 판단되는 벡터 이미지를 포함하는 블록 내의 전체 벡터 이미지들을 새로운 영역에 위치시켜 정렬할 수 있다. 이때의 새로운 영역은 상기 범위를 벗어날 것으로 판단되는 벡터 이미지에 대응되도록 삽입된 영역일 수 있다. 예를 들어, 전자 장치가 미리 설정된 범위를 벗어날 것으로 판단되는 벡터 이미지가 포함된 블록 바로 아래에 새로운 영역(줄(행))을 삽입하여, 상기 범위를 벗어날 것으로 판단되는 벡터 이미지가 포함된 블록 내의 벡터 이미지들 전체를 상기 삽입된 영역에 이동시켜 정렬하는 것일 수 있다.
1760 동작에서 전자 장치는 블록화된 벡터 이미지들을 편집하여 정렬할 수 있다.
상술한 실시예에 따라, 예컨대, 자동 줄바꿈 정렬 동작에 따른 결과는 도 18과 같을 수 있다. 도 18의 (a)를 참조하면, "정확한 실험값은 아니니"라는 문구를 하나의 글자 블록(181)이라고 하였을 때, 글자 블록(181)의 일부 벡터 이미지들이 최초 촬영 시에는 미리 설정된 원고 라인(182)의 범위를 벗어난다는 것을 알 수 있다. 이와 같이, 미리 설정된 원고 라인(182)의 범위를 벗어나는 벡터 이미지들을 포함하는 글자 블록(181)을 도 18의 (b)와 같이 전자 장치가 원고 라인의 범위를 벗어나는 글자 이미지 요소들을 포함하는 행(183)과 그 바로 아래의 행(184) 사이로 위치 이동시켜, 자동 줄바꿈 처리할 수 있다. 이에 따라, 전자 장치는 필기 이미지 획득 시, 필기 이미지를 지정된 캔버스(또는 배경 또는 원고 라인) 내에 정렬할 수 있다.
도 19는 본 발명의 일 실시예에 따른 컨텐트(예: 이미지)의 내용 편집 및 정렬 동작을 나타내는 흐름도이다. 도 19를 참조하면, 컨텐트의 내용 편집 및 정렬 동작은 각기 다른 시점에 획득한 각각의 컨텐트가 컨텐트에 포함된 이미지 요소(예: 문장 등) 일부분을 공유하면, 전자 장치가 최초 획득한 컨텐트에 추후에 획득한 컨텐트의 변경 사항만을 적용하여, 최초 획득한 컨텐트를 업데이트하여 정렬하는 동작을 수행할 수 있다. 예를 들어, 노트에 필기 입력 후 사진 촬영을 통해 이미지를 획득하고, 이후에 상기 필기 입력한 노트에 추가로 필기 입력을 하여 사진 촬영을 통해 이미지를 획득하면, 전자 장치가 최초 획득한 이미지에 추가로 입력된 필기 내용만을 업데이트하여 정렬하고, 저장하는 동작을 수행할 수 있다.
도 19를 참조하면, 1910 동작에서 사용자 조작에 따라 전자 장치는 컨텐트(예: 필기 이미지)를 획득할 수 있다.
1920 동작에서 전자 장치는 획득된 컨텐트와 적어도 일부가 일치하는 컨텐트가 있는지를 검색할 수 있다. 예를 들어, 전자 장치는 전자 장치 또는 네트워크(예를 들어 클라우드)에서 획득된 컨텐트와 적어도 일부가 일치하는 예컨대, 획득된 컨텐트와 유사한 컨텐트 또는 동일한 컨텐트가 있는지를 검색할 수 있다.
1930 동작에서 전자 장치는 획득된 컨텐트와 적어도 일부가 일치하는 컨텐트가 검색되었는지를 판단할 수 있다. 1930 동작에서 획득된 컨텐트와 적어도 일부가 일치하는 컨텐트가 검색된 것으로 판단되면 전자 장치는 1940 동작을 수행하고, 1930 동작에서 획득된 컨텐트와 적어도 일부가 일치하는 컨텐트가 검색되지 않은 것으로 판단되면 전자 장치는 1950 동작을 수행할 수 있다.
1940 동작에서는 전자 장치가 검색된 컨텐트를 획득된 컨텐트로 대체하여 저장할 수 있다. 예를 들어, 전자 장치가 검색된 컨텐트에서 획득된 컨텐트와 일치하지 않는 부분만을 변경(삭제, 삽입, 대체 등)할 수 있다.
추가로, 상술한 도 19의 동작을 보다 상세히 설명하면 다음과 같다.
전자 장치는 벡터 이미지화 동작의 적용에 따라, 획득된 컨텐트와 검색된 컨텐트를 벡터 이미지화하여 획득된 컨텐트를 검색된 컨텐트와 비교함으로써, 획득된 컨텐트에 새롭게 추가된 벡터 이미지들, 또는 변경된 벡터 이미지들, 삭제된 벡터 이미지들을 확인할 수 있다. 이와 같은 확인에 따라, 획득된 컨텐트에 새롭게 추가된 벡터 이미지들이 있는 경우에는 전자 장치가 검색된 컨텐트에 새롭게 추가된 벡터 이미지들을 추가할 수 있다. 또한, 획득된 컨텐트에 변경된 벡터 이미지들이 있는 경우에는 전자 장치가 검색된 컨텐트에 변경된 벡터 이미지들을 적용할 수 있다. 또한, 획득된 컨텐트에 삭제된 벡터 이미지들이 있는 경우에는 전자 장치가 검색된 컨텐트에 해당 벡터 이미지들을 삭제하거나, 또는 검색된 컨텐트에 해당 벡터 이미지들을 임시로 숨기도록 할 수도 있다.
또한, 추가로, 벡터 이미지의 블록화 동작의 적용에 따라, 전자 장치가 블록별로 상술한 동작이 적용되도록 할 수 있다. 예를 들어, 검색된 컨텐트와 비교하여 획득된 컨텐트에 변경된 벡터 이미지들이 있는 경우, 전자 장치는 검색된 컨텐트에 변경된 벡터 이미지들을 포함하는 블록에 포함된 벡터 이미지 전체의 추가, 삭제, 숨김 등을 적용하여, 검색된 컨텐트의 벡터 이미지들을 변경할 수 있다.
또한, 도 20의 (b)와 같은 컨텐트 획득 시, 도 20의 (a)와 같이 전자 장치가 최초 획득한 컨텐트와 비교하여 최초 획득한 컨텐트에 추가된 컨텐트(예: 추가로 입력된 필기 내용; 201)만을 업데이트하여 정렬하고, 저장하는 동작에 따른 결과는 예를 들어 도 21 및 도 22와 같을 수 있다.
도 20을 참조하면, 제1 시점에 사진 촬영을 통해 도 20의 (a)와 같은 제1 컨텐트를 획득하고, 제2 시점(예를 들어 다음날)에 도 20의 (b)와 같은 제2 컨텐트를 획득하였다고 가정한다. 이와 같은 가정에서, 추가로, 제1 컨텐트와 제2 컨텐트가 일부 내용이 공유된 컨텐트인 경우, 예를 들어, 제1 컨텐트에 추가적인 정보를 더한 것(예를 들어 필기를 더 한 것; 201)이 제2 컨텐트인 경우라고 가정한다.
상기와 같은 가정하에서, 한 실시예에 따르면, 제2 컨텐트가 획득되면, 전자 장치는 제2 컨텐트와 유사한 또는 일치하는 컨텐트를 전자 장치 또는 네트워크(예를 들어 클라우드)에서 검색할 수 있다. 검색 결과 제2 컨텐트와 유사한 제1 컨텐트를 획득할 수 있다.
이후, 제1 컨텐트를 벡터 이미지화한 후, 별도의 추가적인 동작이 없는 경우, 도 21을 참조하면, 전자 장치는 도 21의 (a)의 제1 컨텐트를 도 21의 (b)의 제2 컨텐트로 대체할 수 있다. 또는, 전자 장치가 제1 컨텐트와 제2 컨텐트 간에 차이가 있는 부분(211)만을 생성하여 벡터 이미지화한 상태에서 해당 부분(211)만을 추가 또는 삭제 또는 대체할 수도 있다. 또한, 추가로 전자 장치가 제1 컨텐트와 제2 컨텐트 사이에, 삭제된 구문이나 삭제 기호가 있는 블록을 삭제하거나 임시로 숨길 수 있다.
한편, 제1 컨텐츠를 벡터 이미지화한 후, 별도의 추가적인 동작이 없는 경우, 예를 들어, 사용자가 벡터 이미지를 편집한 경우, 도 22를 참조하면, 전자 장치는 제1 컨텐트와 제2 컨텐트간의 차이가 있는 부분(221)만을 생성하여, 벡터 이미지화한 상태에서 해당 부분(221)만을 추가 또는 삭제 또는 대체할 수도 있다.
또한, 예를 들어, 새롭게 추가되는 사항에 대해서는 전자 장치가 사용자 확인을 받을 수 있는 유저인터페이스(UI; User Interface)를 제공 할 수 있다. 또한, 도 23을 참조하면, 전자 장치가 음영 표시(231) 또는/및 기호 표시(232) 등을 수행하여, 새롭게 추가되는 "핵심"과 "numbering이 더 필요"에 대응되는 내용이 새롭게 변경되거나 추가됨을 사용자에게 알리고, 이것이 정상적으로 되었는지를 사용자에게 확인받도록 동작할 수 있다. 예를 들어 사용자 조작에 따라 도 23의 X(232)가 선택되면, 선택된 X(232)에 대응되는 영역(음영이 적용된 영역; 231)은 변경 또는 추가가 취소되고 원래의 내용이 유지될 수 있다. 추가로, 상기 선택된 X(232)에 대응되는 영역(음영이 적용된 영역; 231)을 편집하거나 추가할 수도 있다.
또한, 추가로, 전자 장치는 삭제된 구문이나 삭제 기호가 있는 영역은 삭제 기능이 적용되기 전에 확인받을 수 있다. 또한, 추가로, 일시적으로 보이지 않도록 하는 기능이 적용되어 특정 영역의 내용이 일시적으로 보이지 않더라도, 전자 장치가 특정 제스처나 입력(예를 들어 호버링)을 인식하는 경우, 일시적으로 보이지 않도록 설정한 부분이 다시 보여지도록 할 수도 있다.
본 발명의 일 실시예에 따른 컨텐트(예: 이미지)의 내용 편집 및 정렬 동작을 도 24를 참조하여 설명한다. 도 24를 참조하면, 컨텐트 내용 편집 및 정렬 동작에서 추가로, 사용자의 조작에 따라 전자 장치는 전자 노트(241)에 새로 추가되는 내용의 입력 위치(242)를 지정할 수 있다. 또한, 전자 장치가 지정한 입력 위치(242)에 새로 추가되는 내용을 위치시켜 저장할 수 있다.
도 24를 참조하면, 특정 애플리케이션 예를 들어, 메모 애플리케이션에서는, 화면에 표시된 전자 노트(241)에 사용자 조작에 따라 전자 장치가 특정 영역(242)을 지정할 수 있다. 또한, 미리 설정된 기능의 실행에 따라, 전자 장치는 상기 특정 영역(242) 내부에 카메라 모듈을 통해 획득한 컨텐트를 표시할 수 있으며, 표시되는 컨텐트를 저장할 수 있다. 이때의 컨텐트 표시 및/또는 저장은 상기 지정된 특정 영역 내에서 상술한 실시예들에 따라, 예를 들어 필기 이미지인 경우, 사용자가 쉽게 필기 내용을 인식할 수 있도록 자동 정렬 후 수행될 수 있다.
도 25는 본 발명의 일 실시예에 따른 컨텐트(예: 이미지) 분류 동작을 나타내는 흐름도이다. 도 25를 참조하면, 컨텐트의 분류 동작은, 전자 장치가 획득된 컨텐트의 속성 정보 또는 획득된 컨텐트의 관련 정보(예: 노트 이미지의 속성 정보 또는 획득된 노트 이미지의 관련 정보) 중 적어도 하나의 정보에 따라, 컨텐트를 해당 카테고리에 포함되도록 분류하여 저장하는 동작을 수행할 수 있다. 이때의 획득된 컨텐트는 예를 들어, 전자 장치가 카메라 모듈을 통해 획득한 컨텐트일 수 있으며, 또는 전자 장치가 컨텐트를 획득한 후 벡터 이미지들을 생성하여 벡터 이미지들로 구성된 컨텐트일 수 있으며, 또한 전자 장치가 벡터 이미지들을 블록화함으로써 생성한 블록화된 벡터 이미지들로 구성된 컨텐트 등 다양한 방법으로 획득한 컨텐트일 수 있으며 다양한 형식의 파일일 수 있다.
도 25를 참조하면, 2510 동작에서 전자 장치는 컨텐트(예: 노트 이미지)를 획득할 수 있다.
2520 동작에서 전자 장치는 획득된 컨텐트의 속성 분석 및/또는 획득된 컨텐트의 관련 정보를 확인할 수 있다. 2530 동작에서 전자 장치는 획득된 컨텐트의 속성 및/또는 확인된 컨텐트의 관련 정보에 따라, 컨텐트를 분류할 수 있다.
상기 속성 분석은 예를 들어, 양식적 속성 및 실체적 속성으로 구분할 수도 있다. 상기 양식적 속성은 예를 들어, 컨텐트에 포함된 패턴, 색상, 이미지, 지정된 특정 형상, 또는 컨텐트의 특정 비(비율) 등일 수 있다. 또한, 상기 실체적 속성은 실체적 정보와 관련된 속성으로 예를 들어, 컨텐트에 포함된 문자와 관련된 속성일 수 있다.
상기 2520 동작 및 2530 동작에서의 획득된 컨텐트의 속성 분석 및 획득된 컨텐트의 관련 정보 확인에 대한 보다 상세한 실시예들은 아래에 후술하였다.
2040 동작에서는 전자 장치가 분류된 컨텐트를 미리 설정된 형식의 디지털 노트 파일로 생성할 수 있다. 예를 들어, 전자 장치가 상술한 컨텐트의 내용 편집 및 정렬 동작의 실시예들의 일부 동작을 적용하여, 획득된 컨텐트에서 벡터 이미지들을 생성하여 벡터 파일(벡터 이미지 파일)을 생성할 수 있다. 또한, 예를 들어, 전자 장치가 상술한 컨텐트의 내용 편집 및 정렬 동작의 실시예들을 적용하여, 획득된 컨텐트에서 벡터 이미지들을 생성하여, 생성된 벡터 이미지들을 편집하여 정렬함으로써, 디지털 노트 파일을 생성할 수 있다.
2050 동작에서는 전자 장치가 생성된 디지털 노트 파일을 대응되는 카테고리에 포함되도록 저장할 수 있다.
본 발명의 실시예에 따른 컨텐트 분류 동작에 있어서, 전자 장치가 컨텐트의 속성 분석에 따라, 컨텐트의 속성을 이용하여 컨텐트를 분류하는 동작들을 설명하면 다음과 같다.
상기 컨텐트의 속성 분석은, 예를 들어, 전자 장치가 컨텐트(예: 노트 이미지)에 포함된 패턴, 컨텐트의 형태, 컨텐트의 양식, 컨텐트에 포함된 문자 중 적어도 하나를 인식하고, 이를 이용하여 수행될 수 있다.
상기 컨텐트의 속성 중 상기 컨텐트에 포함된 패턴을 이용한 속성 분석은, 전자 장치가 컨텐트에 프린트 되어 있는 부분을 인식하여 미리 저장되어 있는 패턴 정보의 확인을 통해 수행될 수 있다. 예를 들어, 전자 장치가 도 26의 (a) 내지 (d)와 같은 노트 이미지를 획득할 경우, 각각의 노트 이미지에 포함된 패턴 즉, 글자, 줄 간격, 배경의 색상이나 그림(워터 마크) 등을 인식하여, 미리 저장되어 있는 정보를 확인하는 동작이 수행될 수 있다. 또한, 컨텐트에 포함된 패턴을 이용한 속성 분석은, 전자 장치가 QR 코드 등의 특정 패턴 즉, 식별자를 인식하여 수행될 수 있다.
또한, 상기 컨텐트의 속성 중 컨텐트의 형태를 이용한 속성 분석은, 전자 장치가 획득된 컨텐트의 색상, 컨텐트의 모서리 형태, 컨텐트의 종횡비(aspect ratio; 컨텐트의 가로 대 세로 비율) 중 적어도 하나를 인식하고, 미리 저장되어 있는 형태 정보(또는 미리 저장되어 있는 기준 정보)의 확인을 통해 수행될 수 있다. 예를 들어, 전자 장치가 도 27의 (a) 및 (b)와 같은 다양한 노트 이미지들 중 하나의 노트 이미지를 획득할 경우, 도 28의 (a)와 같이 특정 영역의 표지 색상(281)을 인식하여, 미리 저장되어 있는 정보를 확인하는 동작이 수행될 수 있다. 또는, 예를 들어, 전자 장치가 전체 표지 색상을 인식하여, 미리 저장되어 있는 정보를 확인하는 동작이 수행될 수 있다. 또한, 전자 장치가 도 28의 (b)와 같이 모서리 형태(282)의 인식, 및/또는 도 28의 (c)와 같이 가로 대 세로의 비율(283) 인식 및/또는 도 28의 (d)와 같이 스프링 간격의 비율(284) 인식 후, 미리 저장되어 있는 정보를 확인하는 동작이 수행될 수 있다. 또한, 예를 들어, 전자 장치가 노트의 페이지 크기와 글자 크기의 비율 확인한 후, 미리 저장되어 있는 정보를 확인하는 동작이 수행될 수 있다. 또한, 예를 들어, 전자 장치가 도 29와 같이 인덱싱 레이블(291)을 인식한 후, 미리 저장되어 있는 정보를 확인하는 동작이 수행될 수 있다. 노트를 펼쳤을 때, 인덱싱 레이블(291)은 노트의 좌/우 측면에 위치할 수 있으며, 인덱싱 레이블의 위치에 따라 전자 장치는 촬영된 노트의 분류를 판단할 수 있다. 예를 들면, 인덱싱 레이블 1,2,3을 가진 노트의 임의의 면을 펼쳐서 촬영된 노트의 경우, 전자 장치는 펼친 면의 좌측에서 인덱싱 레이블 1이 검출되고, 우측에서 인덱싱 레이블 2 또는 2와 3이 검출된 경우, 해당 면은 인덱싱 레이블 1에 관련된 노트로 분류할 수 있다.
또한, 상기 컨텐트의 속성 중 컨텐트(예: 노트 이미지)의 양식(예를 들어, 회의록, 일기, 영수증 등)을 이용한 속성 분석은, 전자 장치가 지정된 위치에서 문자를 인식(예를 들어, OCR 기능 등을 이용하여)하여 지정된 위치에 포함된 내용을 확인하여 수행할 수 있다. 예를 들어, 인식된 문자가 이름일 경우, 컨텐트의 양식은 시험지, 설문지, 서약서, 계약서 등일 수 있다. 또한, 예를 들어, 인식된 문자가 날짜일 경우, 컨텐트의 양식은 회의록, 일기, 연구 노트, 일정 등일 수 있다. 또한, 예를 들어, 인식된 문자가 금액일 경우, 컨텐트의 양식은 영수증, 가계부 등일 수 있다.
또한, 전자 장치는 상기 컨텐트의 속성 중 컨텐트의 문자를 인식하여 인식된 문자에 따라, 컨텐트를 분류할 수 있다. 예를 들어, 전자 장치가 컨텐트 획득 시, 문자를 인식하고, 인식된 문자의 굵기 및 문자의 번짐 정도 중 적어도 하나를 확인하여 미리 저장되어 있는 정보와의 비교를 통해, 문자를 작성한 펜 종류를 판단한 후, 판단된 펜 종류에 따라, 컨텐트를 분류할 수도 있다. 또한, 예를 들어, 전자 장치가 인식된 문자의 필체를 인식하여, 필체에 따라, 컨텐트를 분류할 수도 있다. 예를 들어서, 전자 장치가 다수의 사용자가 작성한 노트의 페이지 각각의 이미지가 획득된 경우, 작성자 별로 이미지를 인식하여 인식된 이미지인 컨텐트를 분류할 수 있다. 또한, 예를 들어, 전자 장치가 인식된 문자의 색상을 판단하여, 색상에 따라, 컨텐트를 분류할 수도 있다. 또한, 예를 들어, 전자 장치가 인식된 문자에 따라, 획득된 컨텐트에 포함된 내용을 확인하고, 확인된 내용에 따라, 컨텐트를 분류할 수도 있다. 전자 장치가 컨텐트에 기록된 단어, 문장, 언어를 인식하고, 컨텐트를 특정 카테고리로 분류할 수 있다. 예를 들어, 전자 장치가 수식 또는 공식을 인식한 경우, 해당 컨텐트를 수학과 관련된 카테고리로 분류할 수 있다. 또한, 예를 들어 전자 장치가 "설탕", "소금" 등의 음식 재료와 관련된 단어를 인식한 경우, 해당 컨텐트를 레시피 관련 카테고리로 분류할 수 있다. 또한, 예를 들어, 전자 장치는 참가자 목록에 있는 참가자 이름, 또는 회의 시간 및 장소, 또는 회의록 타이틀에 기반하여 해당 컨텐트를 회의록과 관련된 카테고리로 분류할 수 있다. 또한, 예를 들어, 렌덤 프로세스 수업의 경우, 확률적인 용어들이 많이 사용되고, 서양학 수업의 경우, 서양 국가 이름, 인물 이름들이 많이 사용되는 특성에 따라, 유사한 특성의 단어들이 반복될 경우, 전자 장치가 이를 확인하여 해당 컨텐트를 특정 카테고리에 포함되도록 분류할 수 있다.
또한, 상기 컨텐트의 속성 중 컨텐트의 문자를 인식하여 인식된 문자에 따라, 컨텐트를 분류하는 일부 동작에, 추가로, 상술한 컨텐트의 내용 편집 및 정렬 동작의 실시예들을 적용하여, 전자 장치가 획득된 켄텐트의 내용을 분류할 수도 있다. 예를 들어, 도 30의 (a) 및 (b)와 같이 각기 다른 펜 종류, 글자체가 적용된 노트 이미지는, 전자 장치가 노트 이미지의 문자를 인식하여, 인식된 문자의 굵기, 문자의 번짐 정도, 글자체(필체) 중 적어도 하나를 확인하고, 미리 저장되어 있는 정보와의 비교를 통해, 획득된 노트 이미지의 내용을 분류하여, 미리 설정된 전자 노트의 해당 페이지에 포함되도록 할 수도 있다.
본 발명의 실시예에 따른 컨텐트 분류 동작에 있어서, 전자 장치가 컨텐트의 관련 정보 확인에 따라, 컨텐트의 관련 정보를 이용하여 컨텐트를 분류하는 동작의 실시예들을 설명하면 다음과 같다.
상기 획득된 컨텐트의 관련 정보 확인은, 전자 장치가 전자 장치에 저장된 스케줄 정보, 전자 장치의 위치 정보, 현재 시간 정보 중 적어도 하나를 이용하여 수행되도록 할 수 있다. 일 실시예에 따르면, 전자 장치가 컨텐트의 획득 시, 컨텐트의 획득 시간, 장소를 판별하고, 지정된 스케줄 정보와의 비교를 통해, 해당 스케줄과 관련하여 컨텐트를 분류할 수 있다. 예를 들어, 전자 장치가 학교에서 필기 노트를 촬영하여 컨텐트를 획득한 경우, 전자 장치가 해당 교실과 시간을 확인하여 그 수업 과목에 해당하는 카테고리로 상기 촬영에 따른 컨텐트를 분류할 수 있다.
또한, 추가로, 상술한 컨텐트의 내용 편집 및 정렬 동작의 실시예들을 적용하여 전자 장치는 그 수업 과목에 해당하는 미리 저장된 컨텐트에 상기 촬영에 따른 컨텐트의 내용을 업데이트 할 수도 있다.
본 발명의 실시예에 따른 컨텐트 분류 동작은, 컨텐트의 속성 분석 및 컨텐트의 관련 정보 확인 중 적어도 하나의 동작에 따라 컨텐트 분류 시, 전자 장치는 분류할 참조 데이터가 없는 경우, 또는 정보가 부족하여 분류가 어려운 경우, 획득된 컨텐트의 태그 정보를 이용하여 컨텐트를 분류할 수도 있다. 이때의 태그 정보는 사용자가 입력한 것일 수 있다. 또한 태그 정보는 해당 컨텐트의 획득 시, 자동으로 획득되어 전자 장치에 저장된 정보 예를 들어, 이미지 획득 장소(GPS를 이용하여), 이미지 획득 시간 등일 수 있다.
본 발명의 실시예에 따른 컨텐트 분류 동작은, 전자 장치의 연속 촬영(예를 들어 동영상 촬영) 기능의 실행으로 노트나 책 등의 페이지를 넘기면서 촬영하여 전자 장치가 컨텐트를 획득한 경우, 전자 장치가 이전에 스캔한 정보와의 비교를 통해, 페이지 넘김을 인식하고 스캔된 페이지를 상술한 컨텐트의 내용 편집 및 정렬 동작의 실시예들을 적용하여 디지털 노트에 정렬하여 저장할 수도 있다. 예컨대, 전자 장치가 상술한 실시예들의 컨텐트의 내용 편집 및 정렬 동작과 컨텐트의 분류 동작을 적용하여, 연속 촬영으로 획득된 컨텐트들을 하나의 디지털 노트의 각각의 페이지로 순차적으로 생성되도록 할 수도 있다.
상기와 같이 일 실시예에 따른 본 발명의 전자 장치의 컨텐트 처리 동작이 이루어질 수 있으며, 한편 상기한 본 발명의 설명에서는 구체적인 실시예에 관해 설명하였으나 이외에도 본 발명의 다양한 실시예들이나, 여러 가지 변형 및 변경이 있을 수 있다. 본 명세서에서 기재된 각각의 동작들은 그 전체 또는 일부가 병력적으로 동시에 수행되거나, 일부가 생략되거나, 다른 추가적인 동작들을 포함할 수 있다. 또한, 본 명세서에서 기재된 각각의 동작들은 그 전체 또는 일부가 병력적으로 동시에 수행되거나, 일부가 생략되거나, 다른 추가적인 동작들을 포함할 수 있다.
예를 들어, 블록들 별 벡터 컨텐트들의 회전 정도를 조정하여 정렬하는 동작의 추가적인 실시예로서, 어느 특정 블록 전체가 일정 범위 내에서 회전되어 있는 경우에, 전자 장치는 해당 블록 전체를 일정 각도로 회전 시킬 수 있다. 또한, 도시되지는 않았지만, 블록을 나타내는 도형은, 직사각형뿐 아니라 다양한 다각형 형태일 수 있으며, 전자 장치는 다양한 다각형의 회전 정도를 파악하여, 벡터 이미지의 회전 정도를 파악할 수도 있다.
또한, 상술한 다양한 실시예들을 조합하여, 전자 장치는 컨텐트를 획득하면, 컨텐트를 지정된 캔버스(또는 배경) 내에 정렬할 수 있다. 예를 들어, 전자 장치는 전체 컨텐트가 캔버스 범위 안에 들어올 수 있도록 컨텐트의 크기를 줄이거나 크게 할 수 있다. 또한, 컨텐트의 크기를 줄이는 경우, 컨텐트 내의 어느 특정 블록(또는 이미지 요소)이 정해진 크기 이하로 줄어들게 되어 가독성이 나빠지게 될 경우, 전자 장치는 해당 특정 블록(또는 이미지 요소)이 정해진 크기 이하로 줄어들지 않도록 하고, 캔버스 안에 포함되지 않은 블록(또는 이미지 요소)은 자동 줄바꿈 하도록 할 수 있다.
또한, 상술한 실시예에서는 최초 획득한 컨텐트와 추후에 획득한 컨텐트가 일부 내용이 공유된 컨텐트인 경우를 가정하여, 최초 획득한 컨텐트에 추가된 컨텐트 내용만을 업데이트하여 정렬하고, 저장하는 동작을 설명하였다. 그러나, 본 발명의 또다른 실시예에 따른 컨텐트 내용 편집 및 정렬 동작은 전자 장치가 각기 다른 시점에 획득한 각각의 컨텐트를 이용하여, 하나의 컨텐트로 형성하는 동작을 수행할 수도 있다. 예를 들어, 전자 장치가 최초 획득한 컨텐트에 추후에 획득된 컨텐트를 추가한 후, 업데이트하여 정렬하고 저장하는 동작을 수행할 수 있다.
도 31은 다양한 실시예에 따른, 전자 장치(3101)를 포함하는 네트워크 환경(3100)을 도시한다. 도 31을 참조하면, 상기 전자 장치(3101)는 버스(3110), 프로세서(3120), 메모리(3130), 입출력 인터페이스(3140), 디스플레이(3150), 통신 인터페이스(3160) 및 컨텐트 처리 모듈(3170)을 포함할 수 있다.
상기 버스(3110)는 전술한 구성요소들을 서로 연결하고, 전술한 구성요소들 간의 통신(예: 제어 메시지)을 전달하는 회로일 수 있다.
상기 프로세서(3120)는, 예를 들면, 상기 버스(3110)를 통해 전술한 다른 구성요소들(예: 상기 메모리(3130), 상기 입출력 인터페이스(3140), 상기 디스플레이(3150), 상기 통신 인터페이스(3160), 또는 상기 컨텐트 처리 모듈(3170) 등)로부터 명령을 수신하여, 수신된 명령을 해독하고, 해독된 명령에 따른 연산이나 데이터 처리를 실행할 수 있다.
상기 메모리(3130)는, 상기 프로세서(3120) 또는 다른 구성요소들(예: 상기 입출력 인터페이스(3140), 상기 디스플레이(3150), 상기 통신 인터페이스(3160), 또는 상기 컨텐트 처리 모듈(3170) 등)로부터 수신되거나 상기 프로세서(3120) 또는 다른 구성요소들에 의해 생성된 명령 또는 데이터를 저장할 수 있다. 상기 메모리(3130)는, 예를 들면, 커널(3131), 미들웨어(3132), 어플리케이션 프로그래밍 인터페이스(API: application programming interface; 3133) 또는 어플리케이션(3134) 등의 프로그래밍 모듈들을 포함할 수 있다. 전술한 각각의 프로그래밍 모듈들은 소프트웨어, 펌웨어, 하드웨어 또는 이들 중 적어도 둘 이상의 조합으로 구성될 수 있다.
상기 커널(3131)은 나머지 다른 프로그래밍 모듈들, 예를 들면, 상기 미들웨어(3132), 상기 API(3133) 또는 상기 어플리케이션(3134)에 구현된 동작 또는 기능을 실행하는 데 사용되는 시스템 리소스들(예: 상기 버스(3110), 상기 프로세서(3120) 또는 상기 메모리(3130) 등)을 제어 또는 관리할 수 있다. 또한, 상기 커널(3131)은 상기 미들웨어(3132), 상기 API(3133) 또는 상기 어플리케이션(3134)에서 상기 전자 장치 3101의 개별 구성요소에 접근하여 제어 또는 관리할 수 있는 인터페이스를 제공할 수 있다.
상기 미들웨어(3132)는 상기 API(3133) 또는 상기 어플리케이션(3134)이 상기 커널(3131)과 통신하여 데이터를 주고받을 수 있도록 중개 역할을 수행할 수 있다. 또한, 상기 미들웨어(3132)는 상기 어플리케이션(3134)로부터 수신된 작업 요청들과 관련하여, 예를 들면, 상기 어플리케이션(3134) 중 적어도 하나의 어플리케이션에 상기 전자 장치(3101)의 시스템 리소스(예: 상기 버스(3110), 상기 프로세서(3120) 또는 상기 메모리(3130) 등)를 사용할 수 있는 우선 순위를 배정하는 등의 방법을 이용하여 작업 요청에 대한 제어(예: 스케쥴링 또는 로드 밸런싱)을 수행할 수 있다.
상기 API(3133)는 상기 어플리케이션(3134)이 상기 커널(3131) 또는 상기 미들웨어(3132)에서 제공되는 기능을 제어하기 위한 인터페이스로, 예를 들면, 파일 제어, 창 제어, 화상 처리 또는 문자 제어 등을 위한 적어도 하나의 인터페이스 또는 함수(예: 명령어)를 포함할 수 있다.
다양한 실시예에 따르면, 상기 어플리케이션(3134)는 SMS/MMS 어플리케이션, 이메일 어플리케이션, 달력 어플리케이션, 알람 어플리케이션, 건강 관리(health care) 어플리케이션(예: 운동량 또는 혈당 등을 측정하는 어플리케이션) 또는 환경 정보 어플리케이션(예: 기압, 습도 또는 온도 정보 등을 제공하는 어플리케이션) 등을 포함할 수 있다. 추가적으로 또는 대체적으로, 상기 어플리케이션(3134)은 상기 전자 장치(3101)와 외부 전자 장치(예: 전자 장치(3104)) 사이의 정보 교환과 관련된 어플리케이션일 수 있다. 상기 정보 교환과 관련된 어플리케이션은, 예를 들어, 상기 외부 전자 장치에 특정 정보를 전달하기 위한 알림 전달(notification relay) 어플리케이션, 또는 상기 외부 전자 장치를 관리하기 위한 장치 관리(device management) 어플리케이션을 포함할 수 있다.
예를 들면, 상기 알림 전달 어플리케이션은 상기 전자 장치(3101) 의 다른 어플리케이션(예: SMS/MMS 어플리케이션, 이메일 어플리케이션, 건강 관리 어플리케이션 또는 환경 정보 어플리케이션 등)에서 발생한 알림 정보를 외부 전자 장치(예: 전자 장치(3104))로 전달하는 기능을 포함할 수 있다. 추가적으로 또는 대체적으로, 상기 알림 전달 어플리케이션은, 예를 들면, 외부 전자 장치(예: 전자 장치(3104))로부터 알림 정보를 수신하여 사용자에게 제공할 수 있다. 상기 장치 관리 어플리케이션은, 예를 들면, 상기 전자 장치(3101)와 통신하는 외부 전자 장치(예: 전자 장치(3104))의 적어도 일부에 대한 기능(예: 외부 전자 장치 자체(또는, 일부 구성 부품)의 턴온/턴오프 또는 디스플레이의 밝기(또는, 해상도) 조절), 상기 외부 전자 장치에서 동작하는 어플리케이션 또는 상기 외부 전자 장치에서 제공되는 서비스(예: 통화 서비스 또는 메시지 서비스)를 관리(예: 설치, 삭제 또는 업데이트)할 수 있다.
다양한 실시예에 따르면, 상기 어플리케이션(3134)은 상기 외부 전자 장치(예: 전자 장치(3104))의 속성(예: 전자 장치의 종류)에 따라 지정된 어플리케이션을 포함할 수 있다. 예를 들어, 외부 전자 장치가 MP3 플레이어인 경우, 상기 어플리케이션(3134)은 음악 재생과 관련된 어플리케이션을 포함할 수 있다. 유사하게, 외부 전자 장치가 모바일 의료기기인 경우, 상기 어플리케이션(3134)은 건강 관리와 관련된 어플리케이션을 포함할 수 있다. 한 실시예에 따르면, 상기 어플리케이션(3134)은 전자 장치(310)1에 지정된 어플리케이션 또는 외부 전자 장치(예: 서버(3106) 또는 전자 장치(3104))로부터 수신된 어플리케이션 중 적어도 하나를 포함할 수 있다.
상기 입출력 인터페이스(3140)은, 입출력 장치(예: 센서, 키보드 또는 터치 스크린)를 통하여 사용자로부터 입력된 명령 또는 데이터를, 예를 들면, 상기 버스(3110)를 통해 상기 프로세서(3120), 상기 메모리(3130), 상기 통신 인터페이스(3160), 또는 상기 컨텐트 처리 모듈(3170)에 전달할 수 있다. 예를 들면, 상기 입출력 인터페이스(3140)은 터치 스크린을 통하여 입력된 사용자의 터치에 대한 데이터를 상기 프로세서(3120)로 제공할 수 있다. 또한, 상기 입출력 인터페이스(3140)은, 예를 들면, 상기 버스(3110)를 통해 상기 프로세서(3120), 상기 메모리(3130), 상기 통신 인터페이스(3160), 또는 상기 컨텐트 처리 모듈(3170)로부터 수신된 명령 또는 데이터를 상기 입출력 장치(예: 스피커 또는 디스플레이)를 통하여 출력할 수 있다.
상기 디스플레이(3150)는 사용자에게 각종 정보(예: 멀티미디어 데이터 또는 텍스트 데이터 등)을 표시할 수 있다.
상기 통신 인터페이스(3160)는 상기 전자 장치(3101)와 외부 장치(예: 전자 장치(3104) 또는 서버(3106)) 간의 통신을 연결할 수 있다. 예를 들면, 상기 통신 인터페이스(3160)는 무선 통신 또는 유선 통신을 통해서 네트워크(3162)에 연결되어 상기 외부 장치와 통신할 수 있다. 상기 무선 통신은, 예를 들어, Wifi(wireless fidelity), BT(Bluetooth), NFC(near field communication), GPS(global positioning system) 또는 cellular 통신(예: LTE, LTE-A, CDMA, WCDMA, UMTS, WiBro 또는 GSM 등) 중 적어도 하나를 포함할 수 있다. 상기 유선 통신은, 예를 들어, USB(universal serial bus), HDMI(high definition multimedia interface), RS-232(recommended standard 232) 또는 POTS(plain old telephone service) 중 적어도 하나를 포함할 수 있다.
한 실시예에 따르면, 상기 컨텐트 처리 모듈(3170)은 상기 제어부(150)일 수 있다. 한 실시예에 따르면, 상기 컨텐트 처리 모듈(3170)은, 적어도 하나의 컨텐트를 획득하고, 상기 획득된 컨텐트를 분석하여, 상기 획득된 컨텐트를 상기 복수의 카테고리 중 적어도 하나에 포함되도록 분류할 수 있다. 한 실시예에 따르면, 상기 컨텐트 처리 모듈(3170)은, 상기 획득된 컨텐트에서 벡터 이미지들을 생성하여 상기 벡터 이미지들 중 적어도 일부를 상기 전자 장치에 기능적으로 연결된 디스플레이를 통하여 표시할 수 있다.
한 실시예에 따르면, 상기 네트워크(3162)는 통신 네트워크(telecommunications network)일 수 있다. 상기 통신 네트워크 는 컴퓨터 네트워크(computer network), 인터넷(internet), 사물 인터넷(internet of things) 또는 전화망(telephone network) 중 적어도 하나를 포함할 수 있다. 한 실시예에 따르면, 상기 전자 장치(3101)와 외부 장치 간의 통신을 위한 프로토콜(예: transport layer protocol, data link layer protocol 또는 physical layer protocol))은 어플리케이션(3134), 어플리케이션 프로그래밍 인터페이스(3133), 상기 미들웨어(3132), 커널(3131) 또는 통신 인터페이스(3160) 중 적어도 하나에서 지원될 수 있다.
한 실시예에 따르면, 상기 서버(3106)는 상기 전자 장치(3101)에서 구현되는 동작(또는, 기능)들 중 적어도 하나의 동작을 수행함으로써, 상기 전자 장치(3101)의 구동을 지원할 수 있다. 예를 들면, 상기 서버(3106)는 상기 전자 장치(3101)에 구현된 컨텐트 처리 모듈(3170)을 지원할 수 있는 컨텐트 처리 서버 모듈(3108)을 포함할 수 있다. 예컨대, 상기 컨텐트 처리 서버 모듈(3108)은 컨텐트 처리 모듈(3170)의 적어도 하나의 구성요소를 포함하여, 컨텐트 처리 모듈(3170)이 수행하는 동작들 중 적어도 하나의 동작을 수행(예: 대행)할 수 있다.
도 32은 다양한 실시예들에 따른 전자 장치(3201)의 블록도(3200)를 도시한다. 상기 전자 장치(3201)는, 예를 들면, 도 31에 도시된 전자 장치(3101)의 전체 또는 일부를 구성할 수 있다. 도 32을 참조하면, 상기 전자 장치 3201는 하나 이상의 어플리케이션 프로세서(AP: application processor; 3210), 통신 모듈(3220), SIM(subscriber identification module) 카드(3224), 메모리(3230), 센서 모듈(3240), 입력 장치(3250), 디스플레이(3260), 인터페이스(3270), 오디오 모듈(3280), 카메라 모듈(3291), 전력관리 모듈(3295), 배터리(3296), 인디케이터(3297) 및 모터(3298) 를 포함할 수 있다.
상기 AP(3210)는 운영체제 또는 응용 프로그램을 구동하여 상기 AP(3210)에 연결된 다수의 하드웨어 또는 소프트웨어 구성요소들을 제어할 수 있고, 멀티미디어 데이터를 포함한 각종 데이터 처리 및 연산을 수행할 수 있다. 상기 AP(3210)는, 예를 들면, SoC(system on chip) 로 구현될 수 있다. 한 실시예에 따르면, 상기 AP(3210)는 GPU(graphic processing unit, 미도시)를 더 포함할 수 있다.
상기 통신 모듈(3220; 예: 상기 통신 인터페이스(3160))은 상기 전자 장치(3201; 예: 상기 전자 장치(3101))와 네트워크를 통해 연결된 다른 전자 장치들(예: 전자 장치(3104) 또는 서버(3106)) 간의 통신에서 데이터 송수신을 수행할 수 있다. 한 실시예에 따르면, 상기 통신 모듈(3220)은 셀룰러 모듈(3221), Wifi 모듈(3223), BT 모듈(3225), GPS 모듈(3227), NFC 모듈(3228) 및 RF(radio frequency) 모듈(3229)을 포함할 수 있다.
상기 셀룰러 모듈(3221)은 통신망(예: LTE, LTE-A, CDMA, WCDMA, UMTS, WiBro 또는 GSM 등)을 통해서 음성 통화, 영상 통화, 문자 서비스 또는 인터넷 서비스 등을 제공할 수 있다. 또한, 상기 셀룰러 모듈(3221)은, 예를 들면, 가입자 식별 모듈(예: SIM 카드(3224))을 이용하여 통신 네트워크 내에서 전자 장치의 구별 및 인증을 수행할 수 있다. 한 실시예에 따르면, 상기 셀룰러 모듈(3221)은 상기 AP(3210)가 제공할 수 있는 기능 중 적어도 일부 기능을 수행할 수 있다. 예를 들면, 상기 셀룰러 모듈(3221)은 멀티 미디어 제어 기능의 적어도 일부를 수행할 수 있다.
한 실시예에 따르면, 상기 셀룰러 모듈(3221_은 커뮤니케이션 프로세서(CP: communication processor)를 포함할 수 있다. 또한, 상기 셀룰러 모듈(3221)은, 예를 들면, SoC로 구현될 수 있다. 도 32에서는 상기 셀룰러 모듈(3221; 예: 커뮤니케이션 프로세서)), 상기 메모리(3230) 또는 상기 전력관리 모듈(3295) 등의 구성요소들이 상기 AP(3210)와 별개의 구성요소로 도시되어 있으나, 한 실시예에 따르면, 상기 AP(3210)가 전술한 구성요소들의 적어도 일부(예: 셀룰러 모듈(3221))를 포함하도록 구현될 수 있다.
한 실시예에 따르면, 상기 AP(3210) 또는 상기 셀룰러 모듈(3221; 예: 커뮤니케이션 프로세서)은 각각에 연결된 비휘발성 메모리 또는 다른 구성요소 중 적어도 하나로부터 수신한 명령 또는 데이터를 휘발성 메모리에 로드(load)하여 처리할 수 있다. 또한, 상기 AP(3210) 또는 상기 셀룰러 모듈(3221)은 다른 구성요소 중 적어도 하나로부터 수신하거나 다른 구성요소 중 적어도 하나에 의해 생성된 데이터를 비휘발성 메모리에 저장(store)할 수 있다.
상기 Wifi 모듈(3223), 상기 BT 모듈(3225), 상기 GPS 모듈(3227) 또는 상기 NFC 모듈(3228) 각각은, 예를 들면, 해당하는 모듈을 통해서 송수신되는 데이터를 처리하기 위한 프로세서를 포함할 수 있다. 도 32에서는 셀룰러 모듈(3221), Wifi 모듈(3223), BT 모듈(3225), GPS 모듈(3227) 또는 NFC 모듈(3228)이 각각 별개의 블록으로 도시되었으나, 한 실시예에 따르면, 셀룰러 모듈(3221), Wifi 모듈(3223), BT 모듈(3225), GPS 모듈(3227) 또는 NFC 모듈(3228) 중 적어도 일부(예: 두 개 이상)는 하나의 integrated chip(IC) 또는 IC 패키지 내에 포함될 수 있다. 예를 들면, 셀룰러 모듈(3221), Wifi 모듈(3223), BT 모듈(3225), GPS 모듈(3227) 또는 NFC 모듈(3228) 각각에 대응하는 프로세서들 중 적어도 일부(예: 셀룰러 모듈(3221)에 대응하는 커뮤니케이션 프로세서 및 Wifi 모듈(3223)에 대응하는 Wifi 프로세서)는 하나의 SoC로 구현될 수 있다.
상기 RF 모듈(3229)은 데이터의 송수신, 예를 들면, RF 신호의 송수신을 할 수 있다. 상기 RF 모듈(3229)은, 도시되지는 않았으나, 예를 들면, 트랜시버(transceiver), PAM(power amp module), 주파수 필터(frequency filter) 또는 LNA(low noise amplifier) 등을 포함할 수 있다. 또한, 상기 RF 모듈(3229)은 무선 통신에서 자유 공간상의 전자파를 송수신하기 위한 부품, 예를 들면, 도체 또는 도선 등을 더 포함할 수 있다. 도 32에서는 셀룰러 모듈(3221), Wifi 모듈(3223), BT 모듈(3225), GPS 모듈(32270 및 NFC 모듈(3228)이 하나의 RF 모듈(3229)을 서로 공유하는 것으로 도시되어 있으나, 한 실시예에 따르면, 셀룰러 모듈(3221), Wifi 모듈(3223), BT 모듈(3225), GPS 모듈(3227) 또는 NFC 모듈(3228) 중 적어도 하나는 별개의 RF 모듈을 통하여 RF 신호의 송수신을 수행할 수 있다.
상기 SIM 카드(3224)는 가입자 식별 모듈을 포함하는 카드일 수 있으며, 전자 장치의 특정 위치에 형성된 슬롯에 삽입될 수 있다. 상기 SIM 카드(3224)는 고유한 식별 정보(예: ICCID(integrated circuit card identifier)) 또는 가입자 정보(예: IMSI(international mobile subscriber identity))를 포함할 수 있다.
상기 메모리(3230; 예: 상기 메모리 3130)는 내장 메모리(3232) 또는 외장 메모리(3234)를 포함할 수 있다. 상기 내장 메모리(3232)는, 예를 들면, 휘발성 메모리(예를 들면, DRAM(dynamic RAM), SRAM(static RAM), SDRAM(synchronous dynamic RAM) 등) 또는 비휘발성 메모리(non-volatile Memory, 예를 들면, OTPROM(one time programmable ROM), PROM(programmable ROM), EPROM(erasable and programmable ROM), EEPROM(electrically erasable and programmable ROM), mask ROM, flash ROM, NAND flash memory, NOR flash memory 등) 중 적어도 하나를 포함할 수 있다.
한 실시예에 따르면, 상기 내장 메모리(3232)는 Solid State Drive (SSD)일 수 있다. 상기 외장 메모리(3234)는 flash drive, 예를 들면, CF(compact flash), SD(secure digital), Micro-SD(micro secure digital), Mini-SD(mini secure digital), xD(extreme digital) 또는 Memory Stick 등을 더 포함할 수 있다. 상기 외장 메모리(3234)는 다양한 인터페이스를 통하여 상기 전자 장치(3201)과 기능적으로 연결될 수 있다. 한 실시예에 따르면, 상기 전자 장치(3201)는 하드 드라이브와 같은 저장 장치(또는 저장 매체)를 더 포함할 수 있다.
상기 센서 모듈(3240)은 물리량을 계측하거나 전자 장치(3201)의 작동 상태를 감지하여, 계측 또는 감지된 정보를 전기 신호로 변환할 수 있다. 상기 센서 모듈(3240)은, 예를 들면, 제스처 센서(3240A), 자이로 센서(3240B), 기압 센서(3240C), 마그네틱 센서(3240D), 가속도 센서(3240E), 그립 센서(3240F), 근접 센서(3240G), color 센서(3240H; 예: RGB(red, green, blue) 센서), 생체 센서(3240I), 온/습도 센서(3240J), 조도 센서(3240K) 또는 UV(ultra violet) 센서(3240M) 중의 적어도 하나를 포함할 수 있다. 추가적으로 또는 대체적으로, 상기 센서 모듈(3240)은, 예를 들면, 후각 센서(E-nose sensor, 미도시), EMG 센서(electromyography sensor, 미도시), EEG 센서(electroencephalogram sensor, 미도시), ECG 센서(electrocardiogram sensor, 미도시), IR(infra red) 센서(미도시), 홍채 센서(미도시) 또는 지문 센서(미도시) 등을 포함할 수 있다. 상기 센서 모듈(3240)은 그 안에 속한 적어도 하나 이상의 센서들을 제어하기 위한 제어 회로를 더 포함할 수 있다.
상기 입력 장치(3250)는 터치 패널(touch panel; 3252), (디지털) 펜 센서(pen sensor; 3254), 키(key; 3256) 또는 초음파(ultrasonic) 입력 장치(3258)를 포함할 수 있다. 상기 터치 패널(3252)은, 예를 들면, 정전식, 감압식, 적외선 방식 또는 초음파 방식 중 적어도 하나의 방식으로 터치 입력을 인식할 수 있다. 또한, 상기 터치 패널(3252)은 제어 회로를 더 포함할 수도 있다. 정전식의 경우, 물리적 접촉 또는 근접 인식이 가능하다. 상기 터치 패널(3252)은 택타일 레이어(tactile layer)를 더 포함할 수도 있다. 이 경우, 상기 터치 패널(3252)은 사용자에게 촉각 반응을 제공할 수 있다.
상기 (디지털) 펜 센서(3254)는, 예를 들면, 사용자의 터치 입력을 받는 것과 동일 또는 유사한 방법 또는 별도의 인식용 쉬트(sheet)를 이용하여 구현될 수 있다. 상기 키(3256)는, 예를 들면, 물리적인 버튼, 광학식 키 또는 키패드를 포함할 수 있다. 상기 초음파(ultrasonic) 입력 장치(3258)는 초음파 신호를 발생하는 입력 도구를 통해, 전자 장치(3201)에서 마이크(예: 마이크(3288))로 음파를 감지하여 데이터를 확인할 수 있는 장치로서, 무선 인식이 가능하다. 한 실시예에 따르면, 상기 전자 장치(3201)는 상기 통신 모듈(3220)를 이용하여 이와 연결된 외부 장치(예: 컴퓨터 또는 서버)로부터 사용자 입력을 수신할 수도 있다.
상기 디스플레이(3260; 예: 상기 디스플레이 3150)은 패널(3262), 홀로그램 장치(3264) 또는 프로젝터(3266)를 포함할 수 있다. 상기 패널(3262)은, 예를 들면, LCD(liquid-crystal display) 또는 AM-OLED(active-matrix organic light-emitting diode) 등일 수 있다. 상기 패널(3262)은, 예를 들면, 유연하게(flexible), 투명하게(transparent) 또는 착용할 수 있게(wearable) 구현될 수 있다. 상기 패널(3262)은 상기 터치 패널(3252)과 하나의 모듈로 구성될 수도 있다. 상기 홀로그램 장치(3264)는 빛의 간섭을 이용하여 입체 영상을 허공에 보여줄 수 있다. 상기 프로젝터(3266)는 스크린에 빛을 투사하여 영상을 표시할 수 있다. 상기 스크린은, 예를 들면, 상기 전자 장치(3201)의 내부 또는 외부에 위치할 수 있다. 한 실시예에 따르면, 상기 디스플레이(3260)는 상기 패널(3262), 상기 홀로그램 장치(3264), 또는 프로젝터(3266)를 제어하기 위한 제어 회로를 더 포함할 수 있다.
상기 인터페이스(3270)는, 예를 들면, HDMI(high-definition multimedia interface; 3272), USB(universal serial bus; 3274), 광 인터페이스(optical interface; 3276) 또는 D-sub(D-subminiature; 3278)를 포함할 수 있다. 상기 인터페이스(3270)는, 예를 들면, 도 31에 도시된 통신 인터페이스(3160)에 포함될 수 있다. 추가적으로 또는 대체적으로, 상기 인터페이스(3270)는, 예를 들면, MHL(mobile high-definition link) 인터페이스, SD(secure Digital) 카드/MMC(multi-media card) 인터페이스 또는 IrDA(infrared data association) 규격 인터페이스를 포함할 수 있다.
상기 오디오 모듈(3280)은 소리(sound)와 전기신호를 쌍방향으로 변환시킬 수 있다. 상기 오디오 모듈(3280)의 적어도 일부 구성요소는, 예를 들면, 도 31 에 도시된 입출력 인터페이스 3140에 포함될 수 있다. 상기 오디오 모듈(3280)은, 예를 들면, 스피커(3282), 리시버(3284), 이어폰(3286) 또는 마이크(3288) 등을 통해 입력 또는 출력되는 소리 정보를 처리할 수 있다.
상기 카메라 모듈(3291)은 정지 영상 및 동영상을 촬영할 수 있는 장치로서, 한 실시예에 따르면, 하나 이상의 이미지 센서(예: 전면 센서 또는 후면 센서), 렌즈(미도시), ISP(image signal processor, 미도시) 또는 플래쉬 (flash, 미도시)(예: LED 또는 xenon lamp)를 포함할 수 있다.
상기 전력 관리 모듈(3295)은 상기 전자 장치(3201)의 전력을 관리할 수 있다. 도시하지는 않았으나, 상기 전력 관리 모듈(3295)은, 예를 들면, PMIC(power management integrated circuit), 충전 IC(charger integrated circuit) 또는 배터리 또는 연료 게이지(battery or fuel gauge)를 포함할 수 있다.
상기 PMIC는, 예를 들면, 집적회로 또는 SoC 반도체 내에 탑재될 수 있다. 충전 방식은 유선과 무선으로 구분될 수 있다. 상기 충전 IC는 배터리를 충전시킬 수 있으며, 충전기로부터의 과전압 또는 과전류 유입을 방지할 수 있다. 한 실시예에 따르면, 상기 충전 IC는 유선 충전 방식 또는 무선 충전 방식 중 적어도 하나를 위한 충전 IC를 포함할 수 있다. 무선 충전 방식으로는, 예를 들면, 자기공명 방식, 자기유도 방식 또는 전자기파 방식 등이 있으며, 무선 충전을 위한 부가적인 회로, 예를 들면, 코일 루프, 공진 회로 또는 정류기 등의 회로가 추가될 수 있다.
상기 배터리 게이지는, 예를 들면, 상기 배터리(3296)의 잔량, 충전 중 전압, 전류 또는 온도를 측정할 수 있다. 상기 배터리(3296)는 전기를 저장 또는 생성할 수 있고, 그 저장 또는 생성된 전기를 이용하여 상기 전자 장치(3201)에 전원을 공급할 수 있다. 상기 배터리(3296)는, 예를 들면, 충전식 전지(rechargeable battery) 또는 태양 전지(solar battery)를 포함할 수 있다.
상기 인디케이터(3297)는 상기 전자 장치(3201) 혹은 그 일부(예: 상기 AP(3210))의 특정 상태, 예를 들면, 부팅 상태, 메시지 상태 또는 충전 상태 등을 표시할 수 있다. 상기 모터(3298)는 전기적 신호를 기계적 진동으로 변환할 수 있다. 도시되지는 않았으나, 상기 전자 장치(3201)는 모바일 TV 지원을 위한 처리 장치(예: GPU)를 포함할 수 있다. 상기 모바일 TV지원을 위한 처리 장치는, 예를 들면, DMB(digital multimedia broadcasting), DVB(digital video broadcasting) 또는 미디어플로우(media flow) 등의 규격에 따른 미디어 데이터를 처리할 수 있다.
본 발명의 다양한 실시예에 따른 전자 장치의 전술한 구성요소들 각각은 하나 또는 그 이상의 부품(component)으로 구성될 수 있으며, 해당 구성 요소의 명칭은 전자 장치의 종류에 따라서 달라질 수 있다. 본 발명의 다양한 실시예에 따른 전자 장치는 전술한 구성요소 중 적어도 하나를 포함하여 구성될 수 있으며, 일부 구성요소가 생략되거나 또는 추가적인 다른 구성요소를 더 포함할 수 있다. 또한, 본 발명의 다양한 실시예에 따른 전자 장치의 구성 요소들 중 일부가 결합되어 하나의 개체(entity)로 구성됨으로써, 결합되기 이전의 해당 구성 요소들의 기능을 동일하게 수행할 수 있다.
본 발명의 다양한 실시예에 사용된 용어 "모듈"은, 예를 들어, 하드웨어, 소프트웨어 또는 펌웨어(firmware) 중 하나 또는 둘 이상의 조합을 포함하는 단위(unit)를 의미할 수 있다. "모듈"은 예를 들어, 유닛(unit), 로직(logic), 논리 블록(logical block), 부품(component) 또는 회로(circuit) 등의 용어와 바꾸어 사용(interchangeably use)될 수 있다. "모듈"은, 일체로 구성된 부품의 최소 단위 또는 그 일부가 될 수 있다. "모듈"은 하나 또는 그 이상의 기능을 수행하는 최소 단위 또는 그 일부가 될 수도 있다. "모듈"은 기계적으로 또는 전자적으로 구현될 수 있다. 예를 들면, 본 발명의 다양한 실시예에 따른 "모듈"은, 알려졌거나 앞으로 개발될, 어떤 동작들을 수행하는 ASIC(application-specific integrated circuit) 칩, FPGAs(field-programmable gate arrays) 또는 프로그램 가능 논리 장치(programmable-logic device) 중 적어도 하나를 포함할 수 있다.
다양한 실시예에 따르면, 본 발명의 다양한 실시예에 따른 장치(예: 모듈들 또는 그 기능들) 또는 방법(예: 동작들)의 적어도 일부는, 예컨대, 프로그래밍 모듈의 형태로 컴퓨터로 읽을 수 있는 저장매체(computer-readable storage media)에 저장된 명령어로 구현될 수 있다. 상기 명령어는, 하나 이상의 프로세서 (예: 상기 프로세서(3122))에 의해 실행될 경우, 상기 하나 이상의 프로세서가 상기 명령어에 해당하는 기능을 수행할 수 있다. 컴퓨터로 읽을 수 있는 저장매체는, 예를 들면, 상기 메모리(3130)가 될 수 있다. 상기 프로그래밍 모듈의 적어도 일부는, 예를 들면, 상기 프로세서210에 의해 구현(implement)(예: 실행)될 수 있다. 상기 프로그래밍 모듈 의 적어도 일부는 하나 이상의 기능을 수행하기 위한, 예를 들면, 모듈, 프로그램, 루틴, 명령어 세트 (sets of instructions) 또는 프로세스 등을 포함할 수 있다.
상기 컴퓨터로 판독 가능한 기록 매체에는 하드디스크, 플로피디스크 및 자기 테이프와 같은 마그네틱 매체(Magnetic Media)와, CD-ROM(Compact Disc Read Only Memory), DVD(Digital Versatile Disc)와 같은 광기록 매체(Optical Media)와, 플롭티컬 디스크(Floptical Disk)와 같은 자기-광 매체(Magneto-Optical Media)와, 그리고 ROM(Read Only Memory), RAM(Random Access Memory), 플래시 메모리 등과 같은 프로그램 명령(예: 프로그래밍 모듈)을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함될 수 있다. 또한, 프로그램 명령에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함할 수 있다. 상술한 하드웨어 장치는 본 발명의 다양한 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지다.
본 발명의 다양한 실시예에 따른 모듈 또는 프로그래밍 모듈은 전술한 구성요소들 중 적어도 하나 이상을 포함하거나, 일부가 생략되거나, 또는 추가적인 다른 구성요소를 더 포함할 수 있다. 본 발명의 다양한 실시예에 따른 모듈, 프로그래밍 모듈 또는 다른 구성요소에 의해 수행되는 동작들은 순차적, 병렬적, 반복적 또는 휴리스틱(heuristic)한 방법으로 실행될 수 있다. 또한, 일부 동작은 다른 순서로 실행되거나, 생략되거나, 또는 다른 동작이 추가될 수 있다.
그리고 본 명세서와 도면에 개시된 본 발명의 실시예들은 본 발명의 실시예에 따른 의 기술 내용을 쉽게 설명하고 본 발명의 실시예의 이해를 돕기 위해 특정 예를 제시한 것일 뿐이며, 본 발명의 실시예의 범위를 한정하고자 하는 것은 아니다. 따라서 본 발명의 다양한 실시예의 범위는 여기에 개시된 실시예들 이외에도 본 발명의 다양한 실시예의 기술적 사상을 바탕으로 도출되는 모든 변경 또는 변형된 형태가 본 발명의 다양한 실시예의 범위에 포함되는 것으로 해석되어야 한다.
또한 본 발명의 실시 예들은 하드웨어, 소프트웨어 또는 하드웨어 및 소프트웨어의 조합의 형태로 실현 가능하다는 것을 알 수 있을 것이다. 이러한 임의의 소프트웨어는 예를 들어, 삭제 가능 또는 재기록 가능 여부와 상관없이, ROM 등의 저장 장치와 같은 비휘발성 저장 장치, 또는 예를 들어, RAM, 메모리 칩, 장치 또는 집적 회로와 같은 메모리, 또는 예를 들어 CD, DVD, 자기 디스크 또는 자기 테이프 등과 같은 광학 또는 자기적으로 기록 가능함과 동시에 기계(예를 들어, 컴퓨터)로 읽을 수 있는 저장 매체에 저장될 수 있다. 전자기기 내에 포함될 수 있는 메모리는 본 발명의 실시 예들을 구현하는 지시들을 포함하는 프로그램 또는 프로그램들을 저장하기에 적합한 기계로 읽을 수 있는 저장 매체의 한 예임을 알 수 있을 것이다. 따라서, 본 발명은 본 명세서의 임의의 청구항에 기재된 장치 또는 방법을 구현하기 위한 코드를 포함하는 프로그램 및 이러한 프로그램을 저장하는 기계로 읽을 수 있는 기록 매체를 포함한다. 또한, 이러한 프로그램은 유선 또는 무선 연결을 통해 전달되는 통신 신호와 같은 임의의 매체를 통해 전자적으로 이송될 수 있고, 본 발명은 이와 균등한 것을 적절하게 포함한다.
Claims (42)
- 전자 장치의 컨텐트 처리 방법에 있어서,
복수의 문자를 포함하는 컨텐트를 획득하는 동작;
상기 획득된 컨텐트를 이용하여 상기 복수의 문자 각각에 대응하는 복수의 벡터 이미지들을 생성하는 동작;
상기 복수의 벡터 이미지들의 사이즈 및 상기 복수의 벡터 이미지들 간의 간격을 기반으로 상기 복수의 벡터 이미지들을, 하나 이상의 문자를 각각 포함하는 복수의 블록으로 구성하는 동작;
상기 복수의 블록으로 구성하는 동작을 기반으로 상기 복수의 벡터 이미지들을 블록 단위로 편집하는 동작; 및
상기 편집된 복수의 벡터 이미지들을 상기 전자 장치에 기능적으로 연결된 디스플레이에 표시하는 동작;을 포함하고,
상기 복수의 벡터 이미지들 각각은, 상기 복수의 문자의 서로 다른 부분을 포함하고,
상기 편집하는 동작은,
상기 복수의 블록 중 인접한 블록 사이의 간격을 확인하는 동작; 및
상기 인접한 블록 사이의 간격을 기반으로 상기 인접한 블록 사이의 간격을 조절하는 동작;을 포함하는 전자 장치의 컨텐트 처리 방법. - 제 1항에 있어서, 상기 복수의 벡터 이미지들을 상기 전자 장치에 기능적으로 연결된 디스플레이에 표시하는 동작은,
상기 디스플레이를 통하여, 상기 복수의 벡터 이미지들을, 필기 입력할 수 있는 어플리케이션의 화면에 표시하는 동작,
상기 복수의 벡터 이미지들의 편집을 위한 사용자 조작에 따라, 상기 표시된 화면 내의 상기 복수의 벡터 이미지의 편집을 확인할 수 있는 유저인터페이스(UI; user interface)를 상기 화면에 디스플레이하는 동작을 더 포함하는 컨텐트 처리 방법. - 제 1항에 있어서,
상기 편집하는 동작은:
상기 복수의 벡터 이미지들을 분석하는 동작, 및
상기 분석의 결과에 기초하여 상기 복수의 벡터 이미지들을 정렬하는 동작을 더 포함하는 컨텐트 처리 방법. - 제 3항에 있어서, 상기 복수의 벡터 이미지들을 분석하는 동작은:
상기 복수의 벡터 이미지들간의 간격을 확인하고 상기 복수의 벡터 이미지들간의 간격이 지정된 범위에 포함되는 벡터 이미지들을 분석하는 동작,
상기 복수의 벡터 이미지들간의 간격 및 상기 복수의 벡터 이미지들의 크기를 확인하고 상기 복수의 벡터 이미지들의 크기와 상기 복수의 벡터 이미지들간의 간격의 비율을 이용하여 지정된 범위에 포함되는 벡터 이미지들을 분석하는 동작, 또는
지정된 형태와의 비교를 통해 상기 복수의 벡터 이미지들을 분석하는 동작 중 적어도 하나의 동작을 포함하는 컨텐트 처리 방법. - 제 3항에 있어서, 상기 복수의 벡터 이미지들을 정렬하는 동작은,
상기 복수의 벡터 이미지들의 위치, 주변 벡터 이미지들의 종류, 또는 형태 중 적어도 하나를 이용하여 상기 복수의 벡터 이미지들에 대한 종류를 판단하며, 상기 종류에 따라, 상기 종류 별로 미리 설정된 크기로 상기 복수의 벡터 이미지들의 크기를 조정하는 동작, 또는
상기 복수의 벡터 이미지들 각각의 높이(height) 값 또는 너비(width) 값 중 적어도 하나의 값을 확인하며, 상기 종류 별로, 상기 확인된 적어도 하나의 값의 평균 값을 산출하거나 또는 상기 복수의 벡터 이미지들 각각의 높이 값과 너비 값의 비의 평균 값을 산출하며, 상기 복수의 벡터 이미지들의 크기를 상기 종류 별로 산출된 평균 값에 대응되는 크기로 조정하는 동작을 포함하고,
상기 복수의 벡터 이미지들의 종류는,
글자, 도형, 그림 또는 기호 중 적어도 하나의 종류를 포함하는 컨텐트 처리 방법. - 제 3항에 있어서, 상기 복수의 벡터 이미지들을 정렬하는 동작은,
지정된 가이드 라인의 크기에 따라, 상기 복수의 벡터 이미지들의 크기를 조정하는 동작을 포함하며,
상기 가이드 라인의 크기는 높이 또는 너비 중 적어도 하나를 포함하는 컨텐트 처리 방법. - 제 3항에 있어서, 상기 복수의 벡터 이미지들을 정렬하는 동작은,
상기 복수의 벡터 이미지들의 회전 정도에 따라, 상기 복수의 벡터 이미지들의 기울기, 크기 또는 위치 이동 중 적어도 하나를 조정하거나,
상기 복수의 블록 각각을 구성하는 벡터 이미지들의 크기, 상기 복수의 블록 각각을 구성하는 벡터 이미지들 간의 간격, 또는 상기 복수의 블록 각각을 구성하는 벡터 이미지들의 회전 정도 중 적어도 하나를 조정하는 동작을 포함하는 컨텐트 처리 방법. - 제 3항에 있어서, 상기 복수의 벡터 이미지들을 정렬하는 동작은,
상기 복수의 벡터 이미지들을 화면의 지정된 영역에 정렬할 때, 상기 복수의 벡터 이미지들 중 적어도 하나의 벡터 이미지가 상기 영역의 범위를 벗어날 것인지를 판단하며, 상기 범위를 벗어날 것으로 판단되면, 상기 범위를 벗어날 것으로 판단되는 벡터 이미지를 포함하는 블록 내의 전체 벡터 이미지들을 새로운 영역에 위치시켜 정렬하는 동작을 포함하며,
상기 새로운 영역은,
상기 범위를 벗어날 것으로 판단되는 벡터 이미지에 대응되도록 삽입된 영역을 포함하는 컨텐트 처리 방법. - 제 1항에 있어서,
상기 컨텐트를 획득하는 동작의 수행 시, 상기 전자 장치 또는 네트워크에 상기 획득된 컨텐트와 적어도 일부가 일치하는 컨텐트를 검색하는 동작과,
상기 적어도 일부가 일치하는 컨텐트가 검색되면, 상기 검색된 컨텐트를 상기 획득된 컨텐트로 대체하는 동작을 포함하는 컨텐트 처리 방법. - 제 1항에 있어서,
상기 컨텐트의 속성 또는 상기 컨텐트의 관련 정보 중 적어도 하나에 기반하여 상기 컨텐트를 지정된 복수의 카테고리 중 적어도 하나에 포함되도록 분류하는 동작을 포함하며,
상기 컨텐트의 속성은,
상기 컨텐트에 포함된 패턴, 상기 컨텐트의 형태, 상기 컨텐트의 양식, 또는 상기 컨텐트에 포함된 문자 중 적어도 하나를 인식하여 판별되며,
상기 컨텐트의 관련 정보는,
상기 전자 장치에 저장된 스케줄 정보, 상기 전자 장치의 위치 정보, 또는 현재 시간 정보 중 적어도 하나를 포함하는 컨텐트 처리 방법. - 전자 장치에 있어서,
디스플레이와,
상기 디스플레이와 기능적으로 연결된 제어부;를 포함하고,
상기 제어부는,
복수의 문자를 포함하는 컨텐트를 획득하며,
상기 획득된 컨텐트를 상기 복수의 문자 각각에 대응하는 복수의 벡터 이미지들로 생성하며,
상기 복수의 벡터 이미지들의 사이즈 및 상기 복수의 벡터 이미지들 간의 간격을 기반으로 상기 복수의 벡터 이미지들을, 하나 이상의 문자를 각각 포함하는 복수의 블록으로 구성하며,
상기 복수의 블록으로 구성하는 동작을 기반으로 상기 복수의 벡터 이미지들을 블록 단위로 편집하며,
상기 편집된 복수의 벡터 이미지들을 상기 디스플레이에 표시하며,
상기 복수의 벡터 이미지들 각각은 상기 복수의 문자의 서로 다른 부분을 포함하고,
상기 제어부는, 상기 복수의 블록 중 인접한 블록 사이의 간격을 확인하고, 상기 인접한 블록 사이의 간격을 기반으로 상기 인접한 블록 사이의 간격을 조절하여 상기 복수의 벡터 이미지들을 상기 블록 단위로 편집하는 전자 장치. - 제 11항에 있어서,
입력 장치를 더 포함하며,
상기 제어부는,
상기 디스플레이를 통하여, 상기 복수의 벡터 이미지들을, 필기 입력할 수 있는 어플리케이션의 화면에 표시하고, 상기 입력 장치를 통해 상기 복수의 벡터 이미지들의 편집을 위한 사용자 조작에 따라, 상기 표시된 화면 내의 상기 복수의 벡터 이미지들의 편집을 확인할 수 있는 유저인터페이스(UI; user interface)를 상기 화면에 표시하는 전자 장치. - 제 11항에 있어서, 상기 제어부는,
상기 복수의 벡터 이미지들을 분석하며, 상기 분석 결과에 기반하여 상기 복수의 벡터 이미지들을 정렬하는 전자 장치. - 제 13항에 있어서, 상기 제어부는,
상기 복수의 벡터 이미지들간의 간격을 확인하고 상기 복수의 벡터 이미지들 간의 간격이 지정된 범위에 포함되는 벡터 이미지들을 분석하는 동작,
상기 복수의 벡터 이미지들간의 간격 및 상기 복수의 벡터 이미지들의 크기를 확인하고 상기 복수의 벡터 이미지들의 크기와 상기 복수의 벡터 이미지들 간의 간격의 비율을 이용하여 지정된 범위에 포함되는 벡터 이미지들을 분석하는 동작, 또는
지정된 형태와의 비교를 통해 상기 복수의 벡터 이미지들을 분석하는 동작 중 적어도 하나의 동작을 통해 상기 복수의 벡터 이미지들을 분석하는 전자 장치. - 제 13항에 있어서, 상기 제어부는,
상기 복수의 벡터 이미지들의 위치, 주변 벡터 이미지들의 종류, 또는 형태 중 적어도 하나를 이용하여 상기 복수의 벡터 이미지에 대한 종류를 판단하며, 상기 종류에 따라, 상기 종류 별로 미리 설정된 크기로 상기 복수의 벡터 이미지들의 크기를 조정하는 동작, 또는 상기 복수의 벡터 이미지들 각각의 높이(height) 값 또는 너비(width) 값 중 적어도 하나의 값을 확인하며, 상기 종류 별로, 상기 확인된 적어도 하나의 값의 평균 값을 산출하거나 또는 상기 벡터 이미지들 각각의 높이 값과 너비 값의 비의 평균 값을 산출하며, 상기 복수의 벡터 이미지들의 크기를 상기 종류 별로 산출된 평균 값에 대응되는 크기로 조정하는 동작을 통해 상기 복수의 벡터 이미지들을 정렬하며,
상기 복수의 벡터 이미지들의 종류는,
글자, 도형, 그림 또는 기호 중 적어도 하나의 종류를 포함하는 전자 장치. - 제 13항에 있어서, 상기 제어부는,
지정된 가이드 라인의 크기에 따라, 상기 복수의 벡터 이미지들의 크기를 조정하여 상기 복수의 이미지들을 정렬하며,
상기 가이드 라인의 크기는 높이 또는 너비 중 적어도 하나를 포함하는 전자 장치. - 제 13항에 있어서, 상기 제어부는,
상기 복수의 벡터 이미지들의 회전 정도에 따라, 상기 복수의 벡터 이미지들의 기울기, 크기 또는 위치 이동 중 적어도 하나를 조정하거나, 상기 복수의 블록 각각을 구성하는 벡터 이미지들의 크기, 상기 복수의 블록 각각을 구성하는 벡터 이미지들 간의 간격, 또는 상기 복수의 블록 각각을 구성하는 벡터 이미지들의 회전 정도 중 적어도 하나를 조정하여 상기 복수의 이미지들을 정렬하는 전자 장치. - 제 13항에 있어서, 상기 제어부는,
상기 복수의 벡터 이미지들을 화면의 지정된 영역에 정렬할 때, 상기 복수의 벡터 이미지들 중 적어도 하나의 벡터 이미지가 상기 영역의 범위를 벗어날 것인지를 판단하며, 상기 범위를 벗어날 것으로 판단되면, 상기 범위를 벗어날 것으로 판단되는 벡터 이미지를 포함하는 블록 내의 전체 벡터 이미지들을 새로운 영역에 위치시켜 정렬하여 상기 복수의 벡터 이미지들을 정렬하며,
상기 새로운 영역은,
상기 범위를 벗어날 것으로 판단되는 벡터 이미지에 대응되도록 삽입된 영역을 포함하는 전자 장치. - 제 11항에 있어서, 상기 제어부는,
상기 컨텐트를 획득하는 동작의 수행 시, 상기 전자 장치 또는 네트워크에 상기 획득된 컨텐트와 적어도 일부가 일치하는 컨텐트를 검색하며, 상기 적어도 일부가 일치하는 컨텐트가 검색되면, 상기 검색된 컨텐트를 상기 획득된 컨텐트로 대체하도록 제어하는 것을 포함하는 전자 장치. - 제 11항에 있어서, 상기 제어부는,
상기 컨텐트의 속성 또는 상기 컨텐트의 관련 정보 중 적어도 하나에 기반하여 상기 컨텐트를 지정된 복수의 카테고리 중 적어도 하나에 포함되도록 분류하도록 제어하며,
상기 컨텐트의 속성은,
상기 컨텐트에 포함된 패턴, 상기 컨텐트의 형태, 상기 컨텐트의 양식, 또는 상기 컨텐트에 포함된 문자 중 적어도 하나를 인식하여 판별되며,
상기 컨텐트의 관련 정보는,
상기 전자 장치에 저장된 스케줄 정보, 상기 전자 장치의 위치 정보, 또는 현재 시간 정보 중 적어도 하나를 포함하는 전자 장치.
- 삭제
- 삭제
- 삭제
- 삭제
- 삭제
- 삭제
- 삭제
- 삭제
- 삭제
- 삭제
- 삭제
- 삭제
- 삭제
- 삭제
- 삭제
- 삭제
- 삭제
- 삭제
- 삭제
- 삭제
- 삭제
- 삭제
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020140047394A KR102240279B1 (ko) | 2014-04-21 | 2014-04-21 | 컨텐트 처리 방법 및 그 전자 장치 |
US14/687,583 US10430648B2 (en) | 2014-04-21 | 2015-04-15 | Method of processing content and electronic device using the same |
PCT/KR2015/003976 WO2015163675A1 (en) | 2014-04-21 | 2015-04-21 | Method of processing content and electronic device using the same |
CN201580020740.4A CN106233228B (zh) | 2014-04-21 | 2015-04-21 | 处理内容的方法及使用该方法的电子设备 |
EP15164402.8A EP2937813A3 (en) | 2014-04-21 | 2015-04-21 | Method of processing content and electronic device using the same |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020140047394A KR102240279B1 (ko) | 2014-04-21 | 2014-04-21 | 컨텐트 처리 방법 및 그 전자 장치 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20150121483A KR20150121483A (ko) | 2015-10-29 |
KR102240279B1 true KR102240279B1 (ko) | 2021-04-14 |
Family
ID=53002534
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020140047394A KR102240279B1 (ko) | 2014-04-21 | 2014-04-21 | 컨텐트 처리 방법 및 그 전자 장치 |
Country Status (5)
Country | Link |
---|---|
US (1) | US10430648B2 (ko) |
EP (1) | EP2937813A3 (ko) |
KR (1) | KR102240279B1 (ko) |
CN (1) | CN106233228B (ko) |
WO (1) | WO2015163675A1 (ko) |
Families Citing this family (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10725650B2 (en) * | 2014-03-17 | 2020-07-28 | Kabushiki Kaisha Kawai Gakki Seisakusho | Handwritten music sign recognition device and program |
US10614300B2 (en) * | 2014-12-23 | 2020-04-07 | Lenovo (Singapore) Pte. Ltd. | Formatting handwritten content |
KR101890831B1 (ko) * | 2017-01-11 | 2018-09-28 | 주식회사 펍플 | 전자책 서비스 제공방법 및 그를 위한 컴퓨터 프로그램 |
CN107977391B (zh) * | 2017-03-09 | 2020-12-08 | 北京物灵智能科技有限公司 | 绘本识别方法、装置、系统及电子设备 |
CN107977392B (zh) * | 2017-03-09 | 2020-12-04 | 北京物灵智能科技有限公司 | 绘本识别方法、装置、系统及电子设备 |
US10895954B2 (en) * | 2017-06-02 | 2021-01-19 | Apple Inc. | Providing a graphical canvas for handwritten input |
US10872199B2 (en) | 2018-05-26 | 2020-12-22 | Microsoft Technology Licensing, Llc | Mapping a gesture and/or electronic pen attribute(s) to an advanced productivity action |
WO2020045704A1 (ko) * | 2018-08-30 | 2020-03-05 | 주식회사 펍플 | 전자책 제작방법 및 그를 위한 컴퓨터 프로그램 |
CN109525795B (zh) * | 2018-11-14 | 2020-11-24 | 武汉精立电子技术有限公司 | 将逻辑图片转化为bmp图片的方法和装置 |
US10970848B2 (en) * | 2018-11-29 | 2021-04-06 | Sap Se | Font family and size aware character segmentation |
KR102005829B1 (ko) * | 2018-12-11 | 2019-07-31 | 이수민 | 디지털 라이브 북 제작 시스템 |
CN111368492B (zh) * | 2018-12-24 | 2023-09-01 | 上海新微技术研发中心有限公司 | 一种用于在集成电路版图中设置标识信息的方法及系统 |
CN109871545B (zh) * | 2019-04-22 | 2022-08-05 | 京东方科技集团股份有限公司 | 命名实体识别方法及装置 |
CN111079729B (zh) * | 2019-07-29 | 2023-09-26 | 广东小天才科技有限公司 | 一种听写检测方法及电子设备、计算机可读存储介质 |
CN111275794B (zh) * | 2019-12-09 | 2023-07-11 | 佛山欧神诺云商科技有限公司 | 一种自动生成表情图片的方法、装置及存储介质 |
US11701914B2 (en) * | 2020-06-15 | 2023-07-18 | Edward Riley | Using indexing targets to index textual and/or graphical visual content manually created in a book |
CN111860444B (zh) * | 2020-07-31 | 2022-06-17 | 上海掌学教育科技有限公司 | 一种语文试卷版面分析方法及系统 |
KR102292628B1 (ko) * | 2021-05-07 | 2021-08-23 | 주식회사 미리디 | 웹 서버의 메타 데이터를 이용한 적응적 출력물 디자인 생성 및 자동 검증 방법 |
Family Cites Families (44)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4741045A (en) | 1983-09-23 | 1988-04-26 | Dest Corporation | Optical character isolation system, apparatus and method |
DE3523042A1 (de) | 1984-06-28 | 1986-01-02 | Canon K.K., Tokio/Tokyo | Bildverarbeitungssystem |
US6002799A (en) * | 1986-07-25 | 1999-12-14 | Ast Research, Inc. | Handwritten keyboardless entry computer system |
JP2717537B2 (ja) * | 1987-12-25 | 1998-02-18 | 蛇の目ミシン工業株式会社 | 刺繍ミシンの文字間隔設定方法 |
CA2027253C (en) * | 1989-12-29 | 1997-12-16 | Steven C. Bagley | Editing text in an image |
JP3576570B2 (ja) * | 1991-11-19 | 2004-10-13 | ゼロックス コーポレイション | 比較方法 |
US5488719A (en) * | 1991-12-30 | 1996-01-30 | Xerox Corporation | System for categorizing character strings using acceptability and category information contained in ending substrings |
US5734761A (en) * | 1994-06-30 | 1998-03-31 | Xerox Corporation | Editing scanned document images using simple interpretations |
CA2154952A1 (en) * | 1994-09-12 | 1996-03-13 | Robert M. Ayers | Method and apparatus for identifying words described in a page description language file |
US5613017A (en) * | 1994-09-29 | 1997-03-18 | Kabushiki Kaisha Toshiba | Apparatus for processing image data among media having different image output sizes |
EP0739521B1 (en) * | 1994-11-14 | 2001-10-31 | Motorola, Inc. | Method of splitting handwritten input |
US5737443A (en) * | 1994-11-14 | 1998-04-07 | Motorola, Inc. | Method of joining handwritten input |
JPH08202711A (ja) | 1995-01-23 | 1996-08-09 | Canon Inc | 文書編集操作電子装置 |
US6005680A (en) * | 1995-04-04 | 1999-12-21 | Canon Information Systems, Inc. | Method for capturing a document image, a scanner using the method and a document image management system using the scanner |
CA2176691C (en) * | 1995-05-15 | 2004-04-13 | Junji Tanaka | Hand-written character recognition apparatus and facsimile apparatus |
JPH09161089A (ja) | 1995-12-12 | 1997-06-20 | Matsushita Electric Ind Co Ltd | 手書きデータ編集装置及びその方法 |
TW362070B (en) * | 1995-12-28 | 1999-06-21 | Seiko Epson Corp | Method and apparatus for word composition design, portrait making and impress making |
US5803629A (en) * | 1997-03-14 | 1998-09-08 | Paul H. Neville | Method and apparatus for automatic, shape-based character spacing |
US6332148B1 (en) * | 1997-03-31 | 2001-12-18 | Adobe Systems Incorporated | Appearance and positioning annotation text string and base text string specifying a rule that relates the formatting annotation, base text characters |
EP0952554A3 (en) * | 1998-02-26 | 2003-01-08 | Canon Kabushiki Kaisha | Information processing apparatus and information processing method |
JP2000331121A (ja) | 1999-05-21 | 2000-11-30 | Mitsui High Tec Inc | 手書き文字認識方法及びその装置 |
US6681044B1 (en) | 2000-03-29 | 2004-01-20 | Matsushita Electric Industrial Co., Ltd. | Retrieval of cursive Chinese handwritten annotations based on radical model |
US7139004B2 (en) * | 2002-01-25 | 2006-11-21 | Xerox Corporation | Method and apparatus to convert bitmapped images for use in a structured text/graphics editor |
US7751623B1 (en) | 2002-06-28 | 2010-07-06 | Microsoft Corporation | Writing guide for a free-form document editor |
US20050281467A1 (en) | 2003-01-24 | 2005-12-22 | Stahovich Thomas F | Recognizing multi-stroke symbols |
US6989822B2 (en) * | 2003-11-10 | 2006-01-24 | Microsoft Corporation | Ink correction pad |
KR20050054713A (ko) | 2003-12-05 | 2005-06-10 | (주)동방에스앤씨 | 문자 군집화 기술 기반 문서의 디지털화 검증 시스템 및방법 |
KR20050116900A (ko) | 2004-06-08 | 2005-12-13 | 삼성전자주식회사 | 스캐닝 이미지를 메모지 형식으로 표현하는 방법 |
FR2880708A1 (fr) | 2005-01-11 | 2006-07-14 | Vision Objects Sa | Procede de recherche dans l'encre par conversion dynamique de requete. |
FR2880709B1 (fr) | 2005-01-11 | 2014-04-25 | Vision Objects | Procede de recherche, reconnaissance et localisation dans l'encre, dispositif, programme et langage correspondants |
US7392473B2 (en) * | 2005-05-26 | 2008-06-24 | Xerox Corporation | Method and apparatus for determining logical document structure |
US7933395B1 (en) * | 2005-06-27 | 2011-04-26 | Google Inc. | Virtual tour of user-defined paths in a geographic information system |
KR100785083B1 (ko) * | 2005-12-26 | 2007-12-12 | 삼성전자주식회사 | 화상형성장치 및 그의 제어방법과 포토드라마 화상형성장치 및 그의 이미지 편집 저장방법 |
KR100656875B1 (ko) | 2006-02-10 | 2006-12-14 | 삼성전자주식회사 | 휴대단말을 이용한 가계부 작성 방법 및 장치 |
US20070245229A1 (en) | 2006-04-17 | 2007-10-18 | Microsoft Corporation | User experience for multimedia mobile note taking |
US7817857B2 (en) | 2006-05-31 | 2010-10-19 | Microsoft Corporation | Combiner for improving handwriting recognition |
KR100869712B1 (ko) | 2007-02-09 | 2008-11-21 | (주)펜앤프리 | 필기 입력 방법 및 장치와 이를 이용하는 입력 시스템 |
JPWO2008132977A1 (ja) | 2007-04-24 | 2010-07-22 | コニカミノルタホールディングス株式会社 | 画像編集装置及び画像編集システム |
JP5123588B2 (ja) | 2007-07-17 | 2013-01-23 | キヤノン株式会社 | 表示制御装置および表示制御方法 |
US8331677B2 (en) | 2009-01-08 | 2012-12-11 | Microsoft Corporation | Combined image and text document |
JP5531412B2 (ja) | 2009-01-14 | 2014-06-25 | シャープ株式会社 | 電子機器および情報処理方法 |
KR101848507B1 (ko) | 2011-10-12 | 2018-04-13 | 삼성전자주식회사 | 미려화 필기 메시지 전송 장치 및 방법 |
JP2013182512A (ja) | 2012-03-02 | 2013-09-12 | Casio Comput Co Ltd | 手書き文字処理装置およびプログラム |
EP3097496A4 (en) * | 2014-01-22 | 2017-10-11 | Ai Squared | Emphasizing a portion of the visible content elements of a markup language document |
-
2014
- 2014-04-21 KR KR1020140047394A patent/KR102240279B1/ko active IP Right Grant
-
2015
- 2015-04-15 US US14/687,583 patent/US10430648B2/en active Active
- 2015-04-21 WO PCT/KR2015/003976 patent/WO2015163675A1/en active Application Filing
- 2015-04-21 CN CN201580020740.4A patent/CN106233228B/zh active Active
- 2015-04-21 EP EP15164402.8A patent/EP2937813A3/en not_active Ceased
Also Published As
Publication number | Publication date |
---|---|
EP2937813A3 (en) | 2016-03-02 |
US20150302242A1 (en) | 2015-10-22 |
CN106233228A (zh) | 2016-12-14 |
EP2937813A2 (en) | 2015-10-28 |
WO2015163675A1 (en) | 2015-10-29 |
KR20150121483A (ko) | 2015-10-29 |
CN106233228B (zh) | 2019-08-02 |
US10430648B2 (en) | 2019-10-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102240279B1 (ko) | 컨텐트 처리 방법 및 그 전자 장치 | |
US11113523B2 (en) | Method for recognizing a specific object inside an image and electronic device thereof | |
KR102309175B1 (ko) | 스크랩 정보를 제공하는 전자 장치 및 그 제공 방법 | |
KR102199786B1 (ko) | 콘텐트를 기반으로 하는 정보 제공 방법 및 장치 | |
KR102482850B1 (ko) | 전자 장치 및 전자 장치의 필체 교정 기능 제공 방법 | |
KR102178892B1 (ko) | 정보 제공 방법 및 그 전자 장치 | |
US9734591B2 (en) | Image data processing method and electronic device supporting the same | |
US20150301609A1 (en) | Gesture recognition method and gesture recognition apparatus | |
CN115097982A (zh) | 处理内容的方法及其电子设备 | |
KR20150145583A (ko) | 디스플레이를 제어하는 전자 장치 및 방법 | |
US20150234799A1 (en) | Method of performing text related operation and electronic device supporting same | |
KR102125212B1 (ko) | 전자 필기 운용 방법 및 이를 지원하는 전자 장치 | |
KR102274944B1 (ko) | 오브젝트를 식별하는 전자 장치 및 방법 | |
US11361148B2 (en) | Electronic device sharing content with an external device and method for sharing content thereof | |
KR20160034685A (ko) | 전자장치에서 객체 입력 방법 및 장치 | |
KR20180121273A (ko) | 객체에 대응하는 콘텐트를 출력하기 위한 방법 및 그 전자 장치 | |
KR102316846B1 (ko) | 미디어 컨텐츠를 선별하는 방법 및 이를 구현하는 전자장치 | |
US20150278207A1 (en) | Electronic device and method for acquiring image data | |
KR102303206B1 (ko) | 전자장치에서 이미지 내의 특정 객체를 인식하기 위한 방법 및 장치 | |
US20150138077A1 (en) | Display system and display controll device | |
CN108141474B (zh) | 与外部设备共享内容的电子设备及其用于共享内容的方法 | |
US20160048498A1 (en) | Method for providing alternative service and electronic device thereof | |
KR20150140012A (ko) | 화면 표시 방법 및 이를 구현하는 전자장치 | |
KR20150050882A (ko) | 다국어 입력 방법 및 이를 이용하는 다국어 입력 장치 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant |