KR20170137491A - 전자 장치 및 그의 동작 방법 - Google Patents

전자 장치 및 그의 동작 방법 Download PDF

Info

Publication number
KR20170137491A
KR20170137491A KR1020160069709A KR20160069709A KR20170137491A KR 20170137491 A KR20170137491 A KR 20170137491A KR 1020160069709 A KR1020160069709 A KR 1020160069709A KR 20160069709 A KR20160069709 A KR 20160069709A KR 20170137491 A KR20170137491 A KR 20170137491A
Authority
KR
South Korea
Prior art keywords
image
note
cover
page
electronic device
Prior art date
Application number
KR1020160069709A
Other languages
English (en)
Other versions
KR102594951B1 (ko
Inventor
강민희
김경화
진형주
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020160069709A priority Critical patent/KR102594951B1/ko
Priority to US16/306,814 priority patent/US10990748B2/en
Priority to PCT/KR2017/005805 priority patent/WO2017209568A1/ko
Publication of KR20170137491A publication Critical patent/KR20170137491A/ko
Application granted granted Critical
Publication of KR102594951B1 publication Critical patent/KR102594951B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/103—Formatting, i.e. changing of presentation of documents
    • G06F17/211—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F17/24—
    • G06F17/27—
    • G06F17/30247—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/166—Editing, e.g. inserting or deleting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/166—Editing, e.g. inserting or deleting
    • G06F40/186—Templates
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/20—Natural language analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/32—Digital ink
    • G06V30/333—Preprocessing; Feature extraction
    • G06V30/347—Sampling; Contour coding; Stroke extraction

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Artificial Intelligence (AREA)
  • Library & Information Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명의 다양한 실시 예들은 전자 장치에서 사용자가 작성하는 노트 객체에 기반하여 노트 커버를 제공하는 방법 및 장치에 관하여 개시한다. 본 발명의 다양한 실시 예들에 따르면, 전자 장치에 있어서, 디스플레이; 메모리; 및 상기 디스플레이 및 상기 메모리와 전기적으로 연결된 프로세서를 포함하고, 상기 프로세서는, 노트 생성에 응답하여 설정된 페이지를 추출하고, 상기 추출된 페이지에서 적어도 하나의 객체를 인식하고, 상기 객체에 기반하여 커버 이미지를 위한 시각 정보를 생성하고, 상기 시각 정보에 기반하여 프리뷰 커버를 표시하고, 및 상기 프리뷰 커버와 상기 노트에 연관된 파일 정보에 기반하여 커버 이미지를 생성하도록 구성할 수 있다. 다양한 실시 예들이 가능하다.

Description

전자 장치 및 그의 동작 방법{ELECTRONIC APPARATUS AND OPERATING METHOD THEREOF}
본 발명의 다양한 실시 예들은 전자 장치에서 사용자가 작성하는 노트(note)의 커버(cover)를 제공하는 방법 및 장치에 관하여 개시한다.
최근 디지털 기술의 발달과 함께 이동통신 단말기, 스마트폰(smart phone), 태블릿(tablet) PC(personal computer), 노트북(notebook), 웨어러블 장치(wearable device) 등과 같은 다양한 유형의 전자 장치가 널리 사용되고 있다.
전자 장치에서는 사용자의 전자 장치를 이용한 노트 작성의 니즈(needs)에 따라 다양한 노트(note) 기능(예: 메모 작성 기능)을 제공하고 있다. 전자 장치는 사용자에 의해 작성된 노트를 저장하여 관리할 수 있다. 전자 장치는 저장하는 노트에 대하여 노트 커버를 이용하여 사용자에게 제공하고 있다. 예를 들면, 전자 장치는 미리 설정되는 하나 또는 그 이상의 커버를 저장할 수 있고, 사용자는 작성된 노트의 저장 시 미리 저장된 커버 중 어느 하나의 커버를 선택하거나, 또는 랜덤(random)하게 어느 하나의 커버가 자동 선택하도록 하고 있다.
하지만, 종래의 노트 커버의 경우, 제공되는 커버가 제한적이며, 또한 작성된 노트와 연관되지 않은 커버 이미지로 표시하고 있다. 따라서 종래의 노트 커버의 경우, 사용자에게 직관적이지 못하며, 그 표현에 있어서도 제한적이며, 사용자가 원하지 않는 커버가 제공되는 문제점이 따른다. 또한 노트 커버를 제작하는 기능을 지원하는 전자 장치에서는, 사용자가 노트 작성 시마다 노트 커버를 직접 제작해야 하며, 이는 사용자에게 노트 커버의 작성의 어려움과 번거로움을 제공할 수 있다.
다양한 실시 예들에서는, 사용자에 의해 작성된 노트 객체에 기반하여 노트 커버를 자동으로 구성하여 제공할 수 있는 방법 및 장치에 관하여 개시한다.
다양한 실시 예들에서는, 전자 장치에서 사용자에 의해 작성된 노트 객체(예: 텍스트, 그림, 첨부 이미지 등)에 기초하여 해당 노트 파일의 커버를 생성 및 추천하는 방법 및 장치에 관하여 개시한다.
다양한 실시 예들에서는, 사용자에 의해 작성된 노트의 특정 페이지(예: 마지막 페이지, 마지막으로 수정된 페이지, 또는 주요 객체가 포함된 페이지)에 포함된 노트 객체(예: 텍스트 객체, 이미지 객체)에 기반하여 노트 커버를 자동으로 구성하여 제공할 수 있는 방법 및 장치에 관하여 개시한다.
본 발명의 다양한 실시 예들에 따른 전자 장치는, 디스플레이, 메모리, 및 상기 디스플레이 및 상기 메모리와 전기적으로 연결된 프로세서를 포함하고, 상기 프로세서는, 노트 생성에 응답하여 설정된 페이지를 추출하고, 상기 추출된 페이지에서 객체 인식을 수행하고, 상기 객체에 기반하여 커버 이미지를 위한 시각 정보를 생성하고, 상기 시각 정보에 기반하여 프리뷰 커버를 표시하고, 및 상기 프리뷰 커버와 상기 노트에 연관된 파일 정보에 기반하여 커버 이미지를 생성하도록 구성할 수 있다.
본 발명의 다양한 실시 예들에 따른 전자 장치의 동작 방법은, 노트 생성에 응답하여 설정된 페이지를 추출하는 동작, 상기 추출된 페이지에서 객체 인식을 수행하는 동작, 상기 객체에 기반하여 커버 이미지를 위한 시각 정보를 생성하는 동작, 상기 시각 정보에 기반하여 프리뷰 커버를 표시하는 동작, 및 상기 프리뷰 커버와 상기 노트에 연관된 파일 정보에 기반하여 커버 이미지를 생성하는 동작을 포함할 수 있다.
상기와 같은 과제를 해결하기 위하여 본 발명의 다양한 실시 예들에서는, 상기 방법을 프로세서에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 판독 가능한 기록 매체를 포함할 수 있다.
다양한 실시 예들에 따른 전자 장치 및 그의 동작 방법에 따르면, 사용자가 작성하는 노트 객체에 기반하여 노트 커버를 자동으로 구성하여 제공할 수 있다. 예를 들면, 전자 장치는 사용자에 의해 작성된 노트 객체(예: 텍스트, 그림, 첨부 이미지 등)에 기초하여 해당 노트 파일의 커버를 생성 및 추천하여 사용자에게 편의성을 제공할 수 있다.
다양한 실시 예들에 따르면, 노트 객체(또는 컨텐츠)를 판단한 후 자동 편집하여 그에 대응하는 커버를 추천함으로써, 각각의 노트에 연관된 커버를 제공할 수 있다. 이에 따라, 사용자에 의해 작성된 노트와 연관된 커버를 제공함으로써, 사용자의 노트 식별에 직관성을 향상시킬 수 있는 효과가 있다. 다양한 실시 예들에 따르면, 전자 장치는 일정한 템플릿(또는 레이아웃)을 제공하여 노트 객체의 내용과 관계 없이 커버 이미지의 일정 품질(quality)를 유지할 수 있다. 다양한 실시 예들에 따르면, 전자 장치의 사용성, 편의성 및 경쟁력을 향상시키는데 기여할 수 있다.
도 1은 다양한 실시 예들에서 전자 장치의 구성을 개략적으로 도시하는 도면이다.
도 2는 본 발명의 다양한 실시 예들에 따른 전자 장치에서 노트 기능을 제공하는 방법을 도시하는 흐름도이다.
도 3, 도 4 및 도 5는 본 발명의 다양한 실시 예들에 따른 전자 장치에서 노트 기능을 제공하는 화면 예시를 도시하는 도면들이다.
도 6a, 도 6b, 도 6c 및 도 6d는 본 발명의 다양한 실시 예들에 따른 전자 장치에서 제공되는 커버 이미지의 예시를 도시하는 도면들이다.
도 7a 내지 도 7d 및 도 8 내지 도 11은 본 발명의 다양한 실시 예들에 따른 전자 장치에서 객체를 시각 정보로 전환하는 다양한 동작을 설명하기 위해 도시하는 도면들이다.
도 12는 본 발명의 다양한 실시 예들에 따른 전자 장치에서 노트 커버를 제공하는 방법을 도시하는 흐름도이다.
도 13은 본 발명의 다양한 실시 예들에 따른 전자 장치에서 노트 커버를 위한 프리뷰 커버를 생성하는 방법을 도시하는 흐름도이다.
도 14는 본 발명의 다양한 실시 예들에 따른 전자 장치에서 노트 커버를 제공하는 동작을 도시하는 도면이다.
이하, 본 문서의 다양한 실시 예들이 첨부된 도면을 참조하여 기재된다. 실시 예 및 이에 사용된 용어들은 본 문서에 기재된 기술을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 해당 실시 예의 다양한 변경(modifications), 균등물(equivalents), 및/또는 대체물(alternatives)을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다. 그리고 본 발명에 개시된 실시 예는 개시된 기술 내용의 설명 및 이해를 위해 제시된 것이며, 본 발명에서 기재된 기술의 범위를 한정하는 것은 아니다. 따라서, 본 발명의 범위는, 본 발명의 기술적 사상에 근거한 모든 변경 또는 다양한 다른 실시 예들을 포함하는 것으로 해석되어야 한다.
제안하는 본 발명의 다양한 실시 예들은 노트 기능을 포함하는 전자 장치 및 그의 동작 방법에 관하여 개시한다. 예를 들면, 다양한 실시 예들에서는 전자 장치에서 사용자에 의해 작성된 노트 객체(예: 텍스트, 그림, 첨부 이미지 등)에 기초하여 해당 노트 파일의 커버(cover)를 생성 및 추천할 수 있는 방법 및 장치에 관하여 개시한다.
다양한 실시 예들에서 전자 장치는 노트 기능을 포함하는 모든 정보통신기기, 멀티미디어기기, 웨어러블 장치(wearable device), 사물 인터넷(IoT(internet of things) 장치 및 그에 대한 응용기기와 같이 AP(application processor)), CP(communication processor), GPU(Graphic Processing Unit), 및 CPU(central processing unit) 등의 다양한 프로세서(processor) 중 하나 또는 그 이상을 사용하는 모든 장치를 포함할 수 있다.
다양한 실시 예들에 따른 전자 장치는, 예를 들면, 스마트폰(smartphone), 태블릿 PC(tablet personal computer), 이동 전화기(mobile phone), 영상 전화기, 전자책 리더기(e-book reader), 랩탑 PC(laptop personal computer), 넷북 컴퓨터(netbook computer), PDA(personal digital assistant), PMP(portable multimedia player), MP3 플레이어, 모바일 의료기기, 카메라(camera), 또는 웨어러블 장치(wearable device) 중 적어도 하나를 포함할 수 있다. 어떤 실시 예들에서, 전자 장치는, 예를 들면, 텔레비전, DVD(digital video disk) 플레이어, 오디오, 냉장고, 에어컨, 청소기, 오븐, 전자레인지, 세탁기, 공기 청정기, 셋톱 박스, 홈 오토매이션 컨트롤 패널, 미디어 박스(예: 삼성 HomeSyncTM, 애플TVTM, 또는 구글 TVTM), 게임 콘솔(예: XboxTM, PlayStationTM), 전자 사전, 전자 키, 캠코더, 또는 전자 액자 중 적어도 하나를 포함할 수 있다.
다른 실시 예에서, 전자 장치는, 각종 의료기기(예: 각종 휴대용 의료측정기기(예: 혈당 측정기, 심박 측정기, 혈압 측정기, 또는 체온 측정기 등)), 네비게이션(navigation) 장치, 위성 항법 시스템(GNSS(global navigation satellite system)), 자동차 인포테인먼트(infotainment) 장치, 선박용 전자 장비(예: 선박용 항법 장치, 자이로 콤파스 등), 차량용 헤드 유닛(head unit), 산업용 또는 가정용 로봇, 드론(drone), 또는 상점의 POS(point of sales) 중 적어도 하나를 포함할 수 있다. 어떤 실시 예에 따르면, 전자 장치는 가구, 건물/구조물 또는 자동차의 일부, 전자 보드(electronic board), 전자 사인 수신 장치(electronic signature receiving device), 또는 각종 계측 기기(예: 수도, 전기, 가스, 또는 전파 계측 기기 등) 중 적어도 하나를 포함할 수 있다. 다양한 실시 예들에서, 전자 장치는 플렉서블(flexible)하거나, 또는 전술한 다양한 장치들 중 둘 이상의 조합일 수 있다. 다양한 실시 예들에 따른 전자 장치는 전술한 기기들에 한정되지 않는다.
또한 다양한 실시 예들에서, 사용자라는 용어는 전자 장치를 사용하는 사람 또는 전자 장치를 사용하는 장치(예: 인공지능 전자 장치)를 지칭할 수 있다.
다양한 실시 예들에 따른 장치(예: 모듈들 또는 그 기능들) 또는 방법(예: 동작들)의 적어도 일부는 프로그램 모듈의 형태로 컴퓨터로 판독 가능한 기록 매체(예: 메모리)에 저장된 명령어로 구현될 수 있다. 명령어가 프로세서에 의해 실행될 경우, 프로세서가 명령어에 해당하는 기능을 수행할 수 있다.
컴퓨터로 판독 가능한 기록 매체는, 하드디스크, 플로피디스크, 마그네틱 매체(magnetic media)(예: 자기테이프), 광기록 매체(optical recording media)(예: CD-ROM(compact disc read only memory), DVD(digital versatile disc), 자기-광 매체(magneto-optical media)(예: 플롭티컬 디스크(floptical disk)), 내장 메모리 등을 포함할 수 있다. 명령어는 컴파일러에 의해 만들어지는 코드 또는 인터프리터에 의해 실행될 수 있는 코드를 포함할 수 있다. 다양한 실시 예들에 따른 모듈 또는 프로그램 모듈은 전술한 구성요소들 중 적어도 하나 이상을 포함하거나, 일부가 생략되거나, 또는 다른 구성요소를 더 포함할 수 있다. 다양한 실시 예들에 따른, 모듈, 프로그램 모듈 또는 다른 구성요소에 의해 수행되는 동작들은 순차적, 병렬적, 반복적 또는 휴리스틱(heuristic)하게 실행되거나, 적어도 일부 동작이 다른 순서로 실행되거나, 생략되거나, 또는 다른 동작이 추가될 수 있다.
이하에서, 첨부 도면을 참조하여 본 발명의 다양한 실시 예들에 따른 동작 방법 및 장치에 대하여 살펴보기로 한다. 하지만, 본 발명의 다양한 실시 예들이 하기에서 기술하는 내용에 의해 제한되거나 한정되는 것은 아니므로, 하기의 실시 예에 의거하여 다양한 실시 예들에 적용할 수 있음에 유의하여야 한다. 이하에서 설명되는 본 발명의 다양한 실시 예들에서는 하드웨어적인 접근 방법을 예시로서 설명한다. 하지만, 본 발명의 다양한 실시 예들에서는 하드웨어와 소프트웨어를 모두 사용하는 기술을 포함하고 있으므로, 본 발명의 다양한 실시 예들이 소프트웨어 기반의 접근 방법을 제외하는 것은 아니다.
도 1은 다양한 실시 예들에서 전자 장치의 구성을 개략적으로 도시하는 도면이다.
도 1을 참조하면, 다양한 실시 예들에 따른 전자 장치(100)는, 예를 들면, 무선 통신부(110), 사용자 입력부(120), 터치스크린(touchscreen)(130), 오디오 처리부(140), 메모리(150), 인터페이스부(160), 카메라 모듈(170), 제어부(180)(예: 프로세서), 그리고 전원 공급부(190)를 포함할 수 있다. 본 발명의 다양한 실시 예들에서 전자 장치(100)는 도 1에 도시된 구성들이 필수적인 것은 아니어서, 도 1에 도시된 구성들보다 많은 구성들을 가지거나, 또는 그보다 적은 구성들을 가지는 것으로 구현될 수 있다. 예를 들어, 다양한 실시 예들에 따른 전자 장치(100)는 그 종류에 따라, 무선 통신부(110) 또는 카메라 모듈(170) 등과 같은 일부 구성요소를 포함하지 않을 수 있다.
무선 통신부(110)는, 전자 장치(100)와 다른 전자 장치 사이의 무선 통신을 가능하게 하는 하나 또는 그 이상의 모듈들을 포함할 수 있다. 예를 들어, 무선 통신부(110)는 이동통신 모듈(111), 무선 랜(WLAN, wireless local area network) 모듈(113), 근거리 통신 모듈(115), 그리고 위치 산출 모듈(117) 등을 포함하여 구성될 수 있다. 다양한 실시 예들에서 무선 통신부(110)는 주변의 외부 전자 장치와 통신을 수행하기 위한 모듈(예: 근거리 통신 모듈, 원거리 통신 모듈 등)을 포함할 수 있다. 다양한 실시 예들에 따라, 무선 통신부(110)는, 사용자에 의해 작성된 노트를 다른 전자 장치로 전송하거나, 다른 전자 장치로부터 노트를 수신할 수 있다. 무선 통신부(110)는 노트 커버 데이터를 관련된 서버로부터 수신할 수 있다.
이동통신 모듈(111)은, 예를 들면, 셀룰러 모듈을 포함할 수 있다. 이동통신 모듈(111)은 이동통신 네트워크 상에서 기지국, 외부 전자 장치 또는 다양한 서버들(예: 어플리케이션 서버, 관리 서버, 통합 서버(integration server), 프로바이더 서버(provider server), 컨텐츠 서버(content server), 인터넷 서버(internet server), 또는 클라우드 서버(cloud server) 등) 중 적어도 하나와 무선 신호를 송수신할 수 있다. 무선 신호는 음성 신호, 데이터 신호 또는 다양한 형태의 제어 신호를 포함할 수 있다. 이동통신 모듈(111)은 전자 장치(100)의 동작에 필요한 다양한 데이터들을 사용자 요청에 응답하여 외부 전자 장치로 전송할 수 있다.
무선 랜 모듈(113)은, 무선 인터넷 접속 및 다른 전자 장치와 무선 랜 링크(link)를 형성하기 위한 모듈을 나타낼 수 있다. 무선 랜 모듈(113)은 전자 장치(100)에 내장되거나 외장될 수 있다. 무선 인터넷 기술로는 WiFi(wireless fidelity), WiGig(wireless gigabit alliance), Wibro(wireless broadband), WiMax(world interoperability for microwave access), HSDPA(high speed downlink packet access), 또는 mmWave(millimeter wave) 등이 이용될 수 있다. 무선 랜 모듈(113)은 전자 장치(100)와 네트워크(예: 무선 인터넷 네트워크)를 통해 연결되어 있는 다른 전자 장치와 연동하여, 전자 장치(100)의 다양한 데이터들을 외부 전자 장치로 전송하거나, 또는 외부 전자 장치로부터 수신할 수 있다. 무선 랜 모듈(113)은 상시 온(on) 상태를 유지하거나, 전자 장치(100)의 설정 또는 사용자 입력에 따라 턴-온(turn-on)/턴-오프(turn-off)될 수 있다.
근거리 통신 모듈(115)은 근거리 통신(short range communication)을 수행하기 위한 모듈을 나타낼 수 있다. 근거리 통신 기술로 블루투스(Bluetooth), 저전력 블루투스(BLE, bluetooth low energy), RFID(radio frequency identification), 적외선 통신(IrDA, infrared data association), UWB(ultra wideband), 지그비(zigBee), 또는 NFC(near field communication) 등이 이용될 수 있다. 근거리 통신 모듈(115)은 전자 장치(100)와 네트워크(예: 근거리 통신 네트워크)를 통해 연결되어 있는 다른 전자 장치와 연동하여, 전자 장치(100)의 다양한 데이터들을 외부 전자 장치로 전송하거나, 또는 외부 전자 장치로부터 수신 받을 수 있다. 근거리 통신 모듈(115)은 상시 온 상태를 유지하거나, 전자 장치(100)의 설정 또는 사용자 입력에 따라 턴-온/턴-오프될 수 있다.
위치 산출 모듈(117)은, 전자 장치(100)의 위치를 획득하기 위한 모듈로서, 대표적인 예로는 GPS(global position system) 모듈을 포함할 수 있다. 위치 산출 모듈(117)은 삼각 측량의 원리로 전자 장치(100)의 위치를 측정할 수 있다. 전자 장치(100)의 위치 정보는 다양한 방법에 의해 획득할 수 있다.
사용자 입력부(120)는 전자 장치(100)의 동작 제어를 위한 입력 데이터를 사용자 입력에 응답하여 발생할 수 있다. 사용자 입력부(120)는 사용자의 다양한 입력을 검출하기 위한 적어도 하나의 입력 장치(input device)를 포함할 수 있다. 예를 들어, 사용자 입력부(120)는 키패드(key pad), 돔 스위치(dome switch), 물리 버튼, 터치패드(정압/정전), 조그셔틀(jog & shuttle), 그리고 센서 등을 포함할 수 있다. 한 실시 예에 따라, 사용자 입력부(120)는 전자 펜을 포함할 수 있다. 한 실시 예에 따라, 사용자 입력부(120)는 포스 터치(force touch)를 입력 받을 수 있도록 구현될 수 있다.
다양한 실시 예들에서, 센서는, 예를 들면, 물리량을 계측하거나 전자 장치(100)의 작동 상태를 감지하여, 계측 또는 감지된 정보를 전기 신호로 변환할 수 있다. 센서는, 예를 들면, 홍채 인식 센서(iris scan sensor), 지문 인식 센서(finger scan sensor), 이미지 센서(image sensor), 또는 조도 센서(illuminance sensor) 등을 포함할 수 있다. 또한 센서는, 제스처 센서(gesture sensor), 자이로 센서(gyro sensor), 압력 센서(pressure sensor), 마그네틱 센서(magnetic sensor), 가속도 센서(acceleration sensor), 지자기 센서(terrestrial sensor), 동작 인식 센서(motion recognition sensor), 그립 센서(grip sensor), 근접 센서(proximity sensor), 컬러 센서(color sensor)(예: RGB(red, green, blue) 센서), 생체 센서(medical sensor), 온/습도 센서(temperature-humidity sensor), UV(ultra violet) 센서, 또는 HRM(heart rate monitor) 센서 중의 적어도 하나를 포함할 수 있다. 또한 센서는, 예를 들면, 후각 센서(E-nose sensor), EMG 센서(electromyography sensor), EEG 센서(electroencephalogram sensor), ECG 센서(electrocardiogram sensor), IR(infrared) 센서 등을 포함할 수도 있다.
사용자 입력부(120)는 일부가 전자 장치(100)의 외부에 버튼 형태로 구현될 수 있으며, 일부 또는 전체가 터치 패널(touch panel)로 구현될 수도 있다. 사용자 입력부(120)는 다양한 실시 예들에 따른 전자 장치(100)의 동작(예: 파워 온/오프 기능, 오디오 재생 기능, 노트 기능 등)을 개시(initiation)하기 위한 사용자 입력을 수신할 수 있고, 사용자 입력에 따른 입력 신호를 발생할 수 있다.
터치스크린(130)은 입력 기능과 표시기능을 동시에 수행할 수 있는 입출력 장치를 나타내며, 디스플레이(131)와 터치감지부(133)를 포함할 수 있다. 터치스크린(130)은 전자 장치(100)와 사용자 사이에 입출력 인터페이스를 제공하며, 사용자의 터치 입력을 전자 장치(100)에게 전달할 수 있고, 또한 전자 장치(100)로부터의 출력을 사용자에게 보여주는 매개체 역할을 포함할 수 있다. 터치스크린(130)은 사용자에게 시각적인 출력(visual output)을 보여줄 수 있다. 시각적 출력은 텍스트(text), 그래픽(graphic), 비디오(video)와 이들의 조합의 형태로 나타날 수 있다.
디스플레이(131)는 전자 장치(100)에서 처리되는 다양한 정보를 표시출력)할 수 있다. 예를 들어, 디스플레이(131)는 전자 장치(100)의 사용과 관련된 다양한 유저 인터페이스(UI, user interface) 또는 그래픽 유저 인터페이스(GUI, graphical UI)를 표시할 수 있다. 디스플레이(131)는 다양한 디스플레이가 사용될 수 있다. 예를 들면, 디스플레이(131)는 액정 디스플레이(LCD, liquid crystal display), 발광 다이오드(LED, light-emitting diode) 디스플레이, 유기 발광 다이오드(OLED, organic light-emitting diode) 디스플레이, 마이크로 전자기계 시스템(MEMS, microelectromechanical systems) 디스플레이, 또는 전자 종이(electronic paper) 디스플레이 등을 포함할 수 있다. 일부 디스플레이는 투명형 또는 광투명형으로 구성되는 투명 디스플레이(transparent display)로 구현될 수 있다. 다양한 실시 예들에서 디스플레이(131)는 벤디드 디스플레이가 사용될 수 있다.
터치감지부(133)는 디스플레이(131)에 안착될 수 있으며, 터치스크린(130) 표면에 접촉 또는 근접하는 사용자 입력을 감지할 수 있다. 사용자 입력은 싱글터치(single-touch), 멀티터치(multi-touch), 호버링(hovering), 또는 에어 제스처(air gesture) 중 적어도 하나에 기반하여 입력되는 터치 입력 또는 근접 입력을 포함할 수 있다. 터치감지부(133)는 다양한 실시 예들에서 전자 장치(100)의 사용과 관련된 동작을 개시하기 위한 사용자 입력을 수신할 수 있고, 사용자 입력에 따른 입력 신호를 발생할 수 있다. 터치감지부(133)는 디스플레이(131)의 특정 부위에 가해진 압력 또는 디스플레이(131)의 특정 부위에 발생하는 정전 용량 등의 변화를 전기적인 입력 신호로 변환하도록 구성될 수 있다. 터치감지부(133)는 입력 도구(예: 사용자 손가락, 전자 펜 등)가 디스플레이(131)의 표면 상에 터치 또는 근접되는 위치 및 면적을 검출할 수 있다. 또한 터치감지부(133)는 적용한 터치 방식에 따라 터치 시의 압력(예: 포스 터치(force touch))까지도 검출할 수 있도록 구현될 수 있다.
오디오 처리부(140)는, 제어부(180)로부터 입력 받은 오디오 신호를 스피커(SPK, speaker)(141)로 전송하고, 마이크(MIC, microphone)(143)로부터 입력 받은 음성 등의 오디오 신호를 제어부(180)에 전달하는 기능을 수행할 수 있다. 오디오 처리부(140)는 음성/음향 데이터를 제어부(180)의 제어에 따라 스피커(141)를 통해 가청음으로 변환하여 출력하고, 마이크(143)로부터 수신되는 음성 등의 오디오 신호를 디지털 신호로 변환하여 제어부(180)에게 전달할 수 있다.
스피커(141)는 무선 통신부(110)로부터 수신되거나, 또는 메모리(150)에 저장된 오디오 데이터를 출력할 수 있다. 스피커(141)는 전자 장치(100)에서 수행되는 다양한 동작(기능)과 관련된 음향 신호를 출력할 수도 있다.
마이크(143)는 외부의 음향 신호를 입력 받아 전기적인 음성 데이터로 처리할 수 있다. 마이크(143)에는 외부의 음향 신호를 입력 받는 과정에서 발생되는 잡음(noise)을 제거하기 위한 다양한 잡음 제거 알고리즘(noise reduction algorithm)이 구현될 수 있다. 마이크(143)는 음성 명령 등과 같은 오디오 스트리밍의 입력을 담당할 수 있다.
메모리(150)는 제어부(180)에 의해 실행되는 하나 또는 그 이상의 프로그램들(one or more programs)을 저장할 수 있고, 입/출력되는 데이터들의 임시 저장을 위한 기능을 수행할 수도 있다. 입/출력되는 데이터들은, 예를 들면, 노트, 노트 커버, 동영상, 이미지, 사진, 또는 오디오 등의 파일을 포함할 수 있다. 메모리(150)는 획득된 데이터를 저장하는 역할을 담당하며, 실시간으로 획득된 데이터는 일시적인 저장 장치에 저장할 수 있고, 저장하기로 확정된 데이터는 오래 보관 가능한 저장 장치에 저장할 수 있다.
메모리(150)는 다양한 실시 예들에서, 제어부(180)(예: 프로세서)가, 사용자에 의해 작성된 노트 객체(예: 텍스트, 그림, 첨부 이미지 등)에 기초하여 해당 노트 파일의 커버를 생성 및 추천하도록 하는 것과 관련되는 하나 또는 그 이상의 프로그램들, 데이터 또는 인스트럭션들(instructions)을 저장할 수 있다. 다양한 실시 예들에 따라, 메모리(150)는 노트 생성에 응답하여 설정된 페이지를 추출하고, 추출된 페이지에서 객체 인식을 수행하고, 객체에 기반하여 커버 이미지를 위한 시각 정보를 생성하고, 시각 정보에 기반하여 프리뷰 커버를 표시하고, 프리뷰 커버와 노트에 연관된 파일 정보에 기반하여 커버 이미지를 생성하도록 하는 것과 관련되는 하나 또는 그 이상의 프로그램들, 데이터 또는 인스트럭션들을 저장할 수 있다.
메모리(150)는 하나 이상의 어플리케이션 모듈(또는 소프트웨어 모듈) 등을 포함할 수 있다. 메모리(150)는, 다양한 실시 예들에 따라, 사용자에 의해 작성되는 하나 또는 그 이상의 노트 파일을 저장할 수 있다. 다양한 실시 예들에서, 노트 파일은 사용자에 의해 작성된 노트 객체에 기초하는 노트 커버에 의해 이미지 형식으로 제공될 수 있다. 이미지 형식의 노트 파일 선택에 대응하여 디스플레이(131)에 해당 노트가 제공될 수 있다.
인터페이스부(160)는, 다른 전자 장치로부터 데이터를 전송 받거나, 전원을 공급받아 전자 장치(100) 내부의 각 구성들에 전달할 수 있다. 인터페이스부(160)는 전자 장치(100) 내부의 데이터가 다른 전자 장치로 전송되도록 할 수 있다. 예를 들어, 유/무선 헤드폰 포트(port), 외부 충전기 포트, 유/무선 데이터 포트, 메모리 카드(memory card) 포트, 오디오 입/출력(input/output) 포트, 비디오 입/출력 포트, 이어폰 포트 등이 인터페이스부(160)에 포함될 수 있다.
카메라 모듈(170)은 전자 장치(100)의 촬영 기능을 지원하는 구성을 나타낸다. 카메라 모듈(170)은 제어부(180)의 제어에 따라 임의의 피사체를 촬영하고, 촬영된 데이터(예: 이미지)를 디스플레이(131) 및 제어부(180)에 전달할 수 있다.
제어부(180)(예: 프로세서)는 전자 장치(100)의 전반적인 동작을 제어할 수 있다. 다양한 실시 예들에서 제어부(180)는, 하나 또는 그 이상의 프로세서들(one or more processors)을 포함하거나, 또는 제어부(180)를 프로세서로 칭할 수도 있다. 예를 들면, 제어부(180)는 커뮤니케이션 프로세서(CP, communication processor), 어플리케이션 프로세서(AP, application processor), 인터페이스(예: GPIO, general purpose input/output), 또는 내부 메모리 등을 별개의 구성요소로 포함하거나, 또는 하나 이상의 집적화된 회로에 집적화될 수 있다. 한 실시 예에 따라, 어플리케이션 프로세서는 여러 가지의 소프트웨어 프로그램을 실행하여 전자 장치(100)를 위한 여러 기능을 수행할 수 있고, 커뮤니케이션 프로세서는 음성 통신 및 데이터 통신을 위한 처리 및 제어를 수행할 수 있다. 또한 제어부(180)는 메모리(150)에 저장되어 있는 특정한 소프트웨어 모듈(예: 명령어 세트(instruction set))을 실행하여 그 모듈에 대응하는 특정한 여러 가지의 기능을 수행하는 역할을 담당할 수 있다.
다양한 실시 예들에서 제어부(180)는 오디오 처리부(140), 인터페이스부(160), 디스플레이(131), 카메라 모듈(170) 등의 하드웨어적 모듈의 동작을 제어할 수 있다. 다양한 실시 예들에 따라, 제어부(180)는 전자 장치(100)의 디스플레이(131) 및 메모리(150)와 전기적으로 연결될 수 있다.
다양한 실시 예들에 따라, 제어부(180)는 사용자에 의해 작성된 노트 객체(예: 텍스트, 그림, 첨부 이미지 등)에 기초하여 해당 노트 파일의 커버를 생성 및 추천하는 동작을 제어할 수 있다. 다양한 실시 예들에 따라, 제어부(180)는 전자 장치(100)가 노트 생성에 응답하여 설정된 페이지를 추출하는 동작, 추출된 페이지에서 객체 인식을 수행하는 동작, 객체에 기반하여 커버 이미지를 위한 시각 정보를 생성하는 동작, 시각 정보에 기반하여 프리뷰 커버를 표시하는 동작, 프리뷰 커버와 노트에 연관된 파일 정보에 기반하여 커버 이미지를 생성하는 동작을 제어할 수 있다. 다양한 실시 예에 따르면, 제어부(180)는 사용자에 의해 작성되는 노트의 페이지들 중 설정된 페이지(예: 사용자에 의해 작성되는 노트의 페이지들 중 마지막 페이지, 사용자에 의해 작성되는 노트의 페이지들 중 마지막으로 수정된 페이지, 또는 사용자에 의해 작성되는 노트의 페이지들 중 주요 객체가 포함된 페이지)를 추출하고, 추출된 페이지의 적어도 하나의 객체에 기반하여 노트에 연관된 커버를 생성 및 추천하는 것과 관련된 동작을 처리할 수 있다. 다양한 실시 예들에 따라, 주요 객체는 전자 장치(100) 또는 사용자에 의해 정의될 수 있다. 예를 들면, 주요 객체는 핸드라이팅 기반 도형, 특정 컨텐츠 타입(예: 이미지, 동영상, 음악 등), 링크(예: URL) 등과 같이 노트의 특징을 표현 또는 구별할 수 있는 특정 형태의 객체를 나타낼 수 있다. 주요 객체의 중요도는 사용자에 의해 다양하게 설정 또는 변경될 수 있다.
다양한 실시 예들에 따른 제어부(180)의 제어 동작은 후술하는 도면들을 참조하여 구체적으로 설명된다.
전원 공급부(190)는 제어부(180)의 제어에 의해 외부의 전원, 내부의 전원을 인가 받아 각 구성 요소들의 동작에 필요한 전원을 공급할 수 있다. 다양한 실시 예들에서 전원 공급부(190)는 제어부(180)의 제어에 의해 무선 통신부(110), 디스플레이(131), 카메라 모듈(170) 등에 전원을 공급 또는 차단(on/off)할 수 있다.
다양한 실시 예들에 따르면, 전원 공급부(190)는, 예를 들면, 배터리 제어 회로를 포함할 수 있다. 예를 들면, 전원 공급부(190)는 배터리(예: 충전식 전지(rechargeable battery) 및/또는 태양 전지(solar battery)), 배터리 잔량 측정 회로(예: fuel gauge), 전력관리 집적회로(예: PMIC, power management integrated circuit), 충전 회로, 승압 회로(예: booster circuit) 등을 포함하여 구성할 수 있다.
이상에서 살펴본 바와 같이, 다양한 실시 예들에 따른 전자 장치(100)는, 디스플레이(131), 메모리(150), 및 디스플레이(131) 및 메모리(150)와 전기적으로 연결된 프로세서(예: 제어부(180))를 포함하고, 프로세서는, 노트 생성에 응답하여 설정된 페이지를 추출하고, 추출된 페이지에서 적어도 하나의 객체를 인식하고, 객체에 기반하여 커버 이미지를 위한 시각 정보를 생성하고, 시각 정보에 기반하여 프리뷰 커버를 표시하고, 및 프리뷰 커버와 노트에 연관된 파일 정보에 기반하여 커버 이미지를 생성하도록 구성할 수 있다.
다양한 실시 예들에서, 프로세서는, 노트의 마지막 페이지, 노트의 페이지들 중 마지막으로 수정된 페이지, 또는 주요 객체가 포함된 페이지를 추출하도록 구성할 수 있다.
다양한 실시 예들에서, 프로세서는, 객체 인식에 응답하여 이미지 객체를 판단하고, 페이지에 이미지 객체가 존재하지 않은 경우, 텍스트 객체에 기반하여 시각 정보를 생성하고, 페이지에 이미지 객체가 존재하는 경우, 이미지 객체에 기반하여 시각 정보를 생성하도록 구성할 수 있다.
다양한 실시 예들에서, 프로세서는, 텍스트 객체에서 특징점을 추출하고, 특징점에 대응하는 객체에 기반하여 시각 정보를 생성하도록 구성할 수 있다. 다양한 실시 예들에서, 프로세서는, 텍스트 객체에서 주변 객체와 다른 글꼴 색, 글꼴 스타일, 하이라이팅 부분, 핸드라이팅에 의해 그려진 그림 중 적어도 일부에 기초하여 특징점을 추출하도록 구성할 수 있다. 다양한 실시 예들에서, 프로세서는, 텍스트 객체에서 다수 개의 특징점이 추출되는 경우, 설정된 우선 순위에 따라 특징점을 결정하거나, 또는 각 특징점 모두를 하나의 범위로 포함하여 특징점을 결정하도록 구성할 수 있다.
다양한 실시 예들에서, 프로세서는, 전체 화면을 기준으로 이미지 객체의 이미지 면적을 판단하고, 이미지 면적이 기준 비율 미만이면, 페이지에서 객체가 포함된 영역의 적어도 일부에 기초하여 시각 정보를 생성하고, 이미지 면적이 기준 비율 이상이면, 이미지 객체의 적어도 일부에 기초하여 시각 정보를 생성하도록 구성할 수 있다.
다양한 실시 예들에서, 프로세서는, 객체를 이용하여, 미리 정의된 템플릿에 대응하는 하나 또는 그 이상의 시각 정보를 생성하도록 구성할 수 있다.
다양한 실시 예들에서, 프로세서는, 프리뷰 커버 중 사용자 선택에 따른 프리뷰 커버와 노트에 관련된 파일 정보를 결합하여 커버 이미지를 구성할 수 있고, 파일 정보는, 파일 이름 및 시간 정보를 포함할 수 있다.
다양한 실시 예들에서, 프로세서는, 프리뷰 커버 중, 전자 장치에 의해 추천하는 특정 프리뷰 커버에 추천 마커를 제공하도록 구성할 수 있다.
이하에서는, 본 발명의 다양한 실시 예들에 따라, 전자 장치(100)에서 노트 기능을 제공하는 동작에 대하여 살펴보기로 한다.
예를 들면, 본 발명의 다양한 실시 예들에 따르면, 전자 장치(100)는 사용자가 작성하는 노트 객체(텍스트, 컨텐츠(예: 이미지, 동영상, 음악 등))를 판단하고, 판단하는 노트 객체에 따라 커버를 추천함으로써 노트 객체에 맞는 커버를 제공할 수 있다.
본 발명의 다양한 실시 예들에 따르면, 전자 장치(100)는 사용자가 작성된 노트를 저장할 때, 작성된 노트의 마지막 페이지, 마지막으로 수정된 페이지, 또는 주요 개체를 포함하는 페이지 등과 같이 특정 설정된 페이지를 추출할 수 있다. 전자 장치(100)는 해당 페이지에 포함된 이미지의 면적을 판단하여, 전체 화면의 기준 비율(예: N%) 이상인 경우, 해당 이미지를 노트의 커버(예: 표지) 이미지로 추천할 수 있다. 전자 장치(100)는 해당 페이지에 포함된 이미지의 면적을 판단하여, 전체 화면의 기준 비율(예: N%) 미만인 경우 사용자가 직접 작성한 영역(예: 핸드라이팅 영역) 중 특정 부분을 이미지로 변경하여 커버 이미지로 추천할 수 있다.
본 발명의 다양한 실시 예들에 따르면, 전자 장치(100)는 노트 객체(또는 컨텐츠)를 판단한 후 자동 편집하여 그에 대응하는 커버를 추천함으로써, 각각의 노트에 연관된 커버를 제공할 수 있다. 본 발명의 다양한 실시 예들에 따르면, 전자 장치(100)는 일정한 템플릿(또는 레이아웃)을 제공하여 노트 객체의 내용과 관계 없이 커버 이미지의 일정 품질(quality)를 유지할 수 있다.
도 2는 본 발명의 다양한 실시 예들에 따른 전자 장치에서 노트 기능을 제공하는 방법을 도시하는 흐름도이다.
도 2를 참조하면, 동작 201에서, 전자 장치(100)의 제어부(180)(예: 프로세서)는 노트(note) 작성을 수행할 수 있다. 예를 들면, 제어부(180)는 사용자 입력(예: 노트 기능(또는 어플리케이션) 실행을 위한 조작 입력)에 응답하여, 노트 기능을 실행하고, 노트 작성 관련 인터페이스(이하, 노트 작성 인터페이스)를 디스플레이(131)를 통해 표시할 수 있다. 사용자는 노트 작성 인터페이스를 통해, 텍스트 입력(예: 키패드를 이용한 문자 입력, 핸드라이팅(handwriting)에 의한 필기 입력, 핸드라이팅에 의한 그림(도형) 그리기 입력 등), 이미지(예: 사진, 지도 등) 삽입(첨부) 등에 의한 노트를 작성할 수 있다. 제어부(180)는 노트 작성과 관련된 사용자 입력에 대응하여 노트를 작성할 수 있다. 다양한 실시 예들에 따라, 사용자는 페이지(page)를 전환하여 복수의 페이지들에 걸쳐 노트를 작성할 수 있다. 이에 대하여, 후술하는 도면 도 3을 참조하여 설명된다.
동작 203에서, 제어부(180)는 노트 작성 완료 여부를 판단할 수 있다. 한 실시 예에 따르면, 사용자는 노트를 작성하고, 작성된 노트를 저장하기 위한 사용자 입력(예: 노트 작성 인터페이스에서 저장 버튼 선택 등)을 발생할 수 있고, 제어부(180)는 사용자 입력에 응답하여 노트 작성 완료를 판단할 수 있다.
동작 203에서, 제어부(180)는 노트 작성의 완료가 감지되지 않으면(동작 203의 아니오), 동작 201로 진행하여, 동작 201 이하의 동작 수행을 처리할 수 있다.
동작 203에서, 제어부(180)는 노트 작성의 완료가 감지되면(동작 203의 예), 동작 205에서, 마지막 페이지에서 객체 인식을 수행할 수 있다. 예를 들면, 제어부(180)는 사용자에 의해 작성된 노트의 페이지를 분석하여, 페이지가 단일 페이지인지 또는 복수의 페이지들인지 판단할 수 있다. 한 실시 예에 따라, 제어부(180)는 노트가 복수의 페이지들에 의해 작성된 경우, 복수의 페이지들 중에서 노트가 마지막으로 작성된 마지막 페이지에 기반하여 적어도 하나의 객체를 인식할 수 있다. 다른 한 실시 예에 따라, 제어부(180)는 노트가 복수의 페이지들에 의해 작성된 경우, 복수의 페이지들 중에서 사용자에 의해 마지막으로 수정된 페이지에 기반하여 적어도 하나의 객체를 인식할 수 있다. 다른 한 실시 예에 따라, 제어부(180)는 노트가 복수의 페이지들에 의해 작성된 경우, 복수의 페이지들 중에서 주요 객체가 있는 페이지에 기반하여 적어도 하나의 객체를 인식할 수 있다. 다양한 실시 예들에서, 제어부(180)는 사용자에 의해 작성된 복수의 페이지들을 추출(또는 파싱)할 수 있고, 해당 페이지의 적어도 하나의 객체에 기반하여 커버를 생성할 수 있다. 다양한 실시 예들에 따라, 객체는 사용자에 의해 작성된 노트 객체로, 예를 들면, 텍스트(예: 필기 문자, 그림, 도형 등), 컨텐츠(예: 이미지(사진, 아이콘 등), 동영상, 음악 등) 등을 포함할 수 있다. 이하에서는 노트 객체를, 텍스트 기반의 객체와 이미지 기반의 객체를 대표적인 예시로 설명하지만, 본 발명이 이에 한정되는 것은 아니며, 전술한 바와 같이 동영상이나 음악 등의 컨텐츠를 포함할 수 있다.
동작 207에서, 제어부(180)는 인식된 객체에 기반하여 프리뷰 커버(preview cover)를 생성할 수 있다. 한 실시 예에 따라, 제어부(180)는 노트 객체가 텍스트인 경우, 텍스트의 일부 또는 전체에 기반하여 프리뷰 커버를 생성할 수 있다. 한 실시 예에 따라, 제어부(180)는 노트 객체가 이미지인 경우, 이미지의 일부 또는 전체에 기반하여 프리뷰 커버를 생성할 수 있다. 한 실시 예에 따라, 제어부(180)는 텍스트와 이미지의 조합에 기반하여 프리뷰 커버를 생성할 수 있다. 한 실시 예에 따라, 제어부(180)는 마지막 페이지 자체(예: 전체 페이지)에 기반하여 프리뷰 커버를 생성할 수 있다. 다양한 실시 예들에 따라, 제어부(180)는 프리뷰 커버를 생성할 때 설정된 커버 템플릿(template)(또는 레이아웃(layout))에 따라 서로 다른 형태의 복수의 프리뷰 커버를 생성할 수 있다. 다양한 실시 예들에 따라, 제어부(180)는 프리뷰 커버를 생성할 때 노트 객체의 일부 또는 전체에 대한 이미지 프로세싱(image processing)을 통해, 해당 템플릿에 적용 가능하도록 가공할 수 있다. 다양한 실시 예들에 따른 프리뷰 커버 또는 커버 생성 동작에 대하여 후술하는 도면들을 참조하여 구체적으로 설명된다.
동작 209에서, 제어부(180)는 프리뷰 커버를 포함하는 노트 저장 팝업(pop up)을 표시할 수 있다. 예를 들면, 제어부(180)는 프리뷰 커버를 생성한 이후에, 작성된 노트의 저장과 관련된 인터페이스를 팝업 윈도우(pop window)로 표시할 수 있다. 제어부(180)는 팝업을 표시할 때, 생성된 프리뷰 커버를 팝업의 일 영역 내에 정렬하여 표시할 수 있다. 이에 대하여, 후술하는 도면 도 4를 참조하여 설명된다.
동작 211에서, 제어부(180)는 저장을 감지할 수 있다. 예를 들면, 사용자는 노트 저장 팝업에서 파일 정보(예: 파일 이름, 카테고리 등)를 입력 또는 선택하고, 프리뷰 커버를 선택한 후, 저장을 명령하기 위해 제공되는 확인 버튼(예: done 버튼, save 버튼, ok 버튼 등)을 선택할 수 있다. 제어부(180)는 팝업을 통해 확인 버튼에 의한 입력을 감지할 시 작성된 노트의 저장을 판단할 수 있다. 다양한 실시 예들에 따라, 사용자는 프리뷰 커버를 선택하지 않고 확인 버튼을 바로 선택할 수도 있다.
동작 213에서, 제어부(180)는 사용자에 의해 선택된 커버가 있는지 여부를 판단할 수 있다. 예를 들면, 제어부(180)는 팝업을 통해 제공된 프리뷰 커버 중 선택된 커버가 있는지 판단할 수 있다.
동작 213에서, 제어부(180)는 선택된 커버가 있는 것으로 판단하면(동작 213의 예), 동작 217로 진행하여, 동작 217 이하의 동작 수행을 처리할 수 있다.
동작 213에서, 제어부(180)는 선택된 커버가 없는 것으로 판단하면(동작 213의 아니오), 동작 215에서 추천 커버를 선택할 수 있다. 다양한 실시 예들에 따르면, 제어부(180)는 팝업을 통해 프리뷰 커버를 제공할 때, 특정 템플릿(레이아웃)의 프리뷰 커버를 추천할 수 있다. 추천된 프리뷰 커버의 템플릿은 사용자에 의해 설정되거나, 전자 장치에 의해 미리 설정될 수 있으며, 랜덤(random)하게 제공될 수도 있다. 또는 사용자에 의해 자주 사용(또는 선택)된 템플릿에 우선순위를 두어 프리뷰 커버를 추천할 수도 있다. 다양한 실시 예들에 따라, 제어부(180)는 팝업을 통해 프리뷰 커버를 제공할 때 추천 프리뷰 커버에 대해 다른 프리뷰 커버와 구분하여 제공할 수도 있다. 이에 대해, 후술하는 도면을 참조하여 설명된다.
동작 217에서, 제어부(180)는 선택된 커버와 파일 정보에 기반하여 커버 이미지를 생성할 수 있다. 예를 들면, 제어부(180)는 프리뷰 커버에 파일 정보(예: 저장을 위해 사용자에 의해 입력된 파일 이름, 노트 생성 날짜 등)를 결합하여 커버 이미지를 생성할 수 있다. 이에 대하여, 후술하는 도면들을 참조하여 구체적으로 설명된다.
동작 219에서, 제어부(180)는 노트 파일을 저장하고, 커버 이미지를 표시할 수 있다. 예를 들면, 제어부(180)는 사용자에 의해 작성된 노트 파일을 저장하고, 저장하는 노트 파일의 커버를 생성된 커버 이미지에 기초하여 나타낼 수 있다. 커버 이미지는 사용자에 의해 작성되어 저장된 노트들에 대한 리스트를 통해 제공될 수 있다. 이에 대하여, 후술하는 도면 도 5를 참조하여 설명된다.
도 3은 본 발명의 다양한 실시 예들에 따른 전자 장치에서 노트 기능을 제공하는 화면 예시를 도시하는 도면이다.
도 3을 참조하면, 도 3은 전자 장치(100)에서 노트 기능을 실행하고, 사용자의 노트 작성에 대응하는 노트 객체(300)를 디스플레이(131)를 통해 표시되는 화면 예시를 나타낸다. 즉, 전자 장치(100)에 의해 노트 작성이 수행되는 상태를 나타낼 수 있다.
전자 장치(100)는 사용자 입력(예: 노트 기능(또는 어플리케이션) 실행을 위한 조작 입력)에 응답하여, 노트 기능을 실행하고, 도 13의 예시와 같이 노트 작성 관련 인터페이스(이하, 노트 작성 인터페이스)를 디스플레이(131)를 통해 표시할 수 있다. 한 실시 예에 따라, 노트 작성 인터페이스는 도구 영역(350)을 포함할 수 있다. 도구 영역(350)은 노트 작성과 관련하여, 펜 선택, 지우기, 텍스트 모드, 입력 취소(되돌리기), 입력 다시 실행(되살리기), 저장 등의 다양한 옵션 메뉴를 포함할 수 있다.
사용자는 노트 작성 인터페이스를 통해, 텍스트 입력(예: 키패드를 이용한 문자 입력, 핸드라이팅(handwriting)에 의한 필기 입력, 핸드라이팅에 의한 그림(도형) 그리기 입력 등), 이미지(예: 사진, 지도 등) 삽입(첨부) 등에 의한 노트를 작성할 수 있다. 제어부(180)는 노트 작성과 관련된 사용자 입력에 대응하여 노트를 작성할 수 있다.
도 3에 도시된 바와 같이, 사용자는 텍스트 입력(예: 키패드를 이용한 문자 입력, 핸드라이팅에 의한 필기 입력, 핸드라이팅에 의한 그림(도형) 그리기 입력 등), 이미지(예: 사진, 지도 등) 삽입(첨부) 등에 의한 노트를 작성할 수 있고, 전자 장치(100)는 사용자의 노트 작성에 대응하는 노트 객체(300)를 표시할 수 있다. 사용자는 페이지(page)를 전환하여 복수의 페이지들에 걸쳐 노트를 작성할 수 있다. 도 3의 예시에서는 사용자가 2번째 페이지(예: 2/2)에서 노트를 작성 중인 상태를 나타낼 수 있다.
도 4는 본 발명의 다양한 실시 예들에 따른 전자 장치에서 노트 기능을 제공하는 화면 예시를 도시하는 도면이다.
도 4를 참조하면, 도 4는 도 3의 예시와 같이 사용자에 의해 작성된 노트를 저장하는 동작의 화면 예시를 나타낸다. 예를 들면, 사용자는 도 3에서와 같은 동작을 통해 작성된 노트의 완료하고 저장하고자 하는 경우 도구 영역(350)의 저장 메뉴(버튼)를 이용하여 노트 작성 완료 및 저장할 수 있다. 전자 장치(100)는 사용자에 의해 노트 작성 완료(예: 저장 메뉴에 의한 노트 저장 요청)를 감지할 시, 프리뷰 커버(431, 432, 433, 434)를 포함하는 노트 저장 팝업(pop up)(400)을 표시할 수 있다.
다양한 실시 예들에 따르면, 전자 장치(100)는 도 3과 같이 사용자에 의해 작성된 노트의 마지막 페이지에 기초하여 설정된 복수의 템플릿에 대응하는 복수의 프리뷰 커버들을 생성할 수 있다. 다양한 실시 예들에서, 전자 장치(100)는 마지막 페이지 내의 노트 객체의 일부 또는 전체에 기반하여 프리뷰 커버를 생성하거나, 또는 마지막 페이지 자체의 일부 영역 또는 전체 영역에 기반하여 프리뷰 커버를 생성할 수 있다. 한 실시 예에 따라, 전자 장치(100)는 노트 객체가 텍스트인 경우, 텍스트의 일부 또는 전체에 기반하여 프리뷰 커버를 생성할 수 있다. 한 실시 예에 따라, 전자 장치(100)는 노트 객체가 이미지인 경우, 이미지의 일부 또는 전체에 기반하여 프리뷰 커버를 생성할 수 있다. 한 실시 예에 따라, 전자 장치(100)는 노트 객체가 동영상인 경우, 동영상의 적어도 일부분 캡쳐에 기반하여 프리뷰 커버를 생성할 수 있다. 한 실시 예에 따라, 전자 장치(100)는 노트 객체가 음악인 경우, 음악의 앨범 커버에 적어도 일부 기반하여 프리뷰 커버를 생성할 수 있다.
다양한 실시 예들에 따라, 전자 장치(100)는 프리뷰 커버를 생성할 때 설정된 커버 템플릿에 따라 서로 다른 형태의 복수의 프리뷰 커버를 생성할 수 있다. 한 실시 예에 따라, 전자 장치(100)는 프리뷰 커버를 생성할 때 노트 객체의 일부 또는 전체에 대한 이미지 프로세싱을 통해, 해당 템플릿에 적용 가능하도록 가공할 수 있다.
다양한 실시 예들에 따르면, 템플릿은 설정된 개수로 구현될 수 있고, 프리뷰 커버는 해당 템플릿의 타입(예: 제1 타입, 제2 타입, 제3 타입, 제4 타입 등)에 따라 해당 객체와 파일 정보의 위치, 모양, 효과 등이 다르게 제공될 수 있다.
한 실시 예에 따라, 제1 타입의 프리뷰 커버는, 예를 들면, 프리뷰 커버(431)의 예시와 같이, 해당 객체(예: 텍스트 객체, 이미지 객체)의 일부 또는 전체를 특정 도형 형태(예: 원, 타원, 별, 사각, 삼각 등의 형태) 내에서 표시하도록 하고, 나머지 배경 영역을 특정한 컬러의 불투명도(opacity) 값을 적용하고, 배경 영역에 파일 정보를 포함하는 형태로 제공할 수 있다.
한 실시 예에 따라, 제2 타입의 프리뷰 커버는, 예를 들면, 프리뷰 커버(432)의 예시와 같이, 해당 객체(예: 텍스트 객체, 이미지 객체)의 일부 또는 전체를 정렬(예: 텍스트 문단 정렬, 문단 모양, 들여쓰기 등) 후 이미지화 하고, 전체 페이지에 특정한 컬러에 불투명 값을 적용하고, 하단 영역에 파일 정보를 포함하는 형태로 제공할 수 있다.
한 실시 예에 따라, 제3 타입의 프리뷰 커버는, 예를 들면, 프리뷰 커버(434)의 예시와 같이, 해당 객체(예: 텍스트 객체, 이미지 객체)의 일부 또는 전체를 이미지화(예: 배경 이미지) 하고, 이미지의 일 영역에 파일 정보를 포함하는 형태로 제공할 수 있다.
한 실시 예에 따라, 제4 타입은, 예를 들면, 프리뷰 커버(433)의 예시와 같이, 해당 객체(예: 텍스트 객체, 이미지 객체)의 일부 또는 전체를 템플릿의 제1 설정 영역(예: 이미지 영역)에 대응하는 크기로 이미지화(예: 배경 이미지)하고, 템플릿의 제2 설정 영역(예: 파일 영역)에 파일 정보를 포함하는 형태로 제공할 수 있다. 예를 들면, 제4 타입은 제1 설정 영역과 제2 설정 영역과 2개의 영역으로 구분하여 객체에 대응하는 이미지와 파일 정보에 대응하는 이미지를 구분하여 표시하는 형태일 수 있다.
다양한 실시 예들에 따르면, 전자 장치(100)는 프리뷰 커버를 제공할 때, 전자 장치(100)에 의해 추천되는 프리뷰 커버를 사용자에게 제공할 수 있다. 예를 들면, 전자 장치(100)는 구성하는 프리뷰 커버들 중 전자 장치(100)에 의해 판단되는 프리뷰 커버를 추천할 수 있다. 한 실시 예에 따라, 전자 장치(400)는 프리뷰 커버(432)를 추천하는 경우, 도 4의 예시와 같이 프리뷰 커버(432)의 일 영역에 추천 마커(marker)(450)(예: 왕관 아이콘)를 표시하여 사용자에게 제공할 수 있다.
다양한 실시 예들에 따르면, 전자 장치(100)는 프리뷰 커버를 제공할 때, 노트 내에 포함된 컨텐츠에 대한 정보를 사용자에게 제공할 수 있다. 예를 들면, 전자 장치(100)는 노트 내에 이미지, 동영상, 또는 음악 등의 컨텐츠가 삽입되어 있는 경우, 해당 컨텐츠가 포함되어 있음을 연관 아이템(예: 아이콘 형태)을 표시하여 사용자에게 제공할 수 있다. 한 실시 예에 따르면, 전자 장치(100)는 노트 내에 동영상이 포함된 경우 동영상을 식별할 수 있는 연관 아이템(예: 동영상 연관 아이콘 형태(예: 필름 아이콘))을 프리뷰 커버의 일 영역에 표시할 수 있다. 한 실시 예에 따르면, 전자 장치(100)는 노트 내에 음악이 포함된 경우 음악을 식별할 수 있는 연관 아이템(예: 뮤직 연관 아이콘 형태(예: 음표 아이콘))을 프리뷰 커버의 일 영역에 표시할 수 있다.
다양한 실시 예들에 따른 프리뷰 커버 또는 커버 생성 동작에 대하여 후술하는 도면들을 참조하여 구체적으로 설명된다.
다양한 실시 예들에 따라, 프리뷰 커버가 도 4의 예시보다 더 포함되는 경우, 도시하지는 않았으나, 커버 영역(430)에서 사용자 입력(예: 스윕, 드래그, 플릭 등)에 기반하여 좌 또는 우 방향으로의 스크롤에 의해 제공될 수 있다.
다양한 실시 예들에 따르면, 전자 장치(100)는 프리뷰 커버를 생성한 이후에, 작성된 노트의 저장과 관련된 인터페이스를 팝업(400)을 통해 표시할 수 있다. 예를 들면, 도 4의 예시와 같이, 전자 장치(100)는 생성된 프리뷰 커버(431, 432, 433, 434)를 팝업(400)의 일 영역(예: 팝업(400) 하단의 커버 영역(430))을 통해 제공할 수 있다. 다양한 실시 예들에 따라, 팝업(400)은 저장하고자 하는 대상 노트의 파일 정보(예: 파일 이름, 카테고리)의 입력 또는 선택을 위한 정보 입력 영역(예: 이름 입력 필드(410), 카테고리 선택 필드(420))을 포함할 수 있다. 한 실시 예에 따라, 사용자는 이름 입력 필드(410)에서 파일 이름을 선택적으로 입력하거나, 또는 자동 입력(생성)된 이름(예: Note 1)을 사용할 수 있다. 한 실시 예에 따라, 사용자는 카테고리 선택 필드(420)를 통해 작성된 노트의 카테고리를 설정할 수 있다. 카테고리의 설정 동작은 수행하지 않고 생략될 수도 있다.
사용자는 파일 정보의 선택적 입력 이후, 또는 이전에 프리뷰 커버(431, 432, 433, 434) 중에서, 생성하고자 하는 노트 파일의 커버를 위한 프리뷰 커버를 선택할 수 있다. 다양한 실시 예들에 따라, 프리뷰 커버(431, 432, 433, 434)는 사용자에 의해 작성된 노트의 마지막 페이지의 노트 객체에 기반하여 설정된 템플릿 별로 복수개 생성되어 제공될 수 있다. 이에 대해 후술하는 도면들을 참조하여 설명된다.
사용자는 파일 정보와 프리뷰 커버를 선택한 후 작성된 노트를 저장하거나 저장을 취소할 수 있다. 예를 들면, 사용자는 팝업(400)의 일 영역을 통해 제공된 취소 버튼(441)(예: CANCEL 또는 NO 등)을 선택(예: 터치)하여 저장을 취소하거나, 또는 확인 버튼(442)(예: DONE, SAVE 또는 OK 등)을 선택하여 저장을 수행할 수 있다.
전자 장치(100)는 팝업(400)을 통해 사용자에 의한 확인 버튼(442)의 선택을 감지할 시, 노트 생성(저장)을 위한 명령으로 판단할 수 있다. 전자 장치(100)는 노트를 생성할 때, 파일 정보(예: 파일 이름, 카테고리)에 시간 정보를 더 포함할 수 있다. 예를 들면, 사용자에 의해 설정되는 이름 정보, 카테고리 정보(예: 카테고리 정보는 포함하지 않을 수 있음)에 해당 노트를 저장(생성)하는 시점의 시간 정보(예: 날짜, 시간)를 파일 정보에 포함할 수 있다. 전자 장치(100)는 노트를 생성할 때, 사용자에 의해 선택된 프리뷰 커버와 파일 정보(예: 파일 이름, 카테고리, 시간 정보)에 기반하여 커버 이미지를 생성할 수 있다. 한 실시 예에 따르면, 전자 장치(100)는 사용자에 의해 선택된 프리뷰 커버의 일 영역에 파일 정보를 더 결합하여 커버 이미지를 생성하고, 커버 이미지와 연관하여 노트 파일을 생성하여 메모리(150)에 저장할 수 있다. 다양한 실시 예들에 따른 커버 이미지 생성 및 그에 대한 예시들에 대하여 후술하는 도면들을 참조하여 설명된다.
도 5는 본 발명의 다양한 실시 예들에 따른 전자 장치에서 노트 리스트의 화면 예시를 도시하는 도면이다.
도 5에 도시한 바와 같이, 도 5는 전자 장치(100)에서 생성된 노트 파일들의 리스트가 표시되는 화면 예시를 나타낸다. 도 5를 참조하면, 각각의 노트 파일은 커버 이미지에 의해 사용자에게 해당 노트 파일이 어떠한 노트에 대한 것인지 직관적으로 제공할 수 있다.
다양한 실시 예들에 따르면, 노트 파일의 커버 이미지는 작성된 노트의 객체를 기반으로 생성될 수 있다. 따라서 각 노트 파일은 사용자에 의해 작성된 노트의 객체에 따라 제각각 다른 형태의 커버 이미지에 의해 표현될 수 있다. 예를 들면, 객체가 텍스트인 경우 커버 이미지에 의해 나타나는(또는 커버 이미지를 구성하는) 텍스트 내용이 다를 수 있다. 또한 객체가 컨텐츠(예: 이미지(사진, 아이콘 등), 동영상, 음악 등)인 경우 커버 이미지에 의해 나타나는(또는 커버 이미지를 구성하는) 이미지(예: 사진, 동영상의 갭쳐 부분, 음악의 앨범 커버 등)가 다를 수 있다.
다양한 실시 예들에 따라, 도 5의 예시에서, 노트 파일(511, 512, 513)은 텍스트(예: 핸드라이팅 입력) 객체를 기반으로 하는 커버 이미지의 예를 나타낼 수 있다. 노트 파일(511, 512, 513)은 텍스트 객체와 파일 정보(예: 이름, 날짜)가 결합된 서로 다른 커버 이미지에 의해 각각 제공될 수 있다. 다양한 실시 예들에 따라, 노트 파일(511)과 노트 파일(512, 513)은 서로 다른 형태의 템플릿(예: 제1타입(예: 노트 파일(511)), 제2타입(예: 노트 파일(512, 513)) 등)에 의해 구현된 경우일 수 있다.
다양한 실시 예들에 따라, 도 5의 예시에서, 노트 파일(521, 522, 523, 525)은 이미지 객체를 기반으로 하는 커버 이미지의 예를 나타낼 수 있다. 노트 파일(521, 522, 523, 525)은 이미지 객체와 파일 정보(예: 이름, 날짜)가 결합된 서로 다른 커버 이미지에 의해 각각 제공될 수 있다. 다양한 실시 예들에 따라, 노트 파일(521, 525)과 노트 파일(522, 523)은 서로 다른 형태의 템플릿(예: 제3 타입(예: 노트 파일(521, 525)), 제4 타입(예: 노트 파일(522, 523)) 등)에 의해 구현된 경우일 수 있다.
다양한 실시 예들에 따르면, 커버 이미지는 전자 장치(100)의 설정에 따라 마지막 페이지의 객체 외에, 전자 장치(100)에서 미리 제공되는 템플릿에 따라 정형화된 형태로도 제공할 수 있다. 예를 들면, 노트 파일(531, 533)은 작성된 노트의 객체와 상관 없이, 전자 장치(100)에서 정해진 이미지에 기반하여 제공되는 커버 이미지의 예를 나타낼 수 있다.
다양한 실시 예들에 따르면, 템플릿은 설정된 개수로 구현될 수 있고, 해당 템플릿의 타입(예: 제1 타입, 제2 타입, 제3 타입, 제4 타입 등)에 따라 해당 객체와 파일 정보의 위치, 모양, 효과 등이 다르게 적용될 수 있다.
다양한 실시 예들에 따라, 전술한 도 5의 예시와 같이 노트 파일의 리스트가 표시된 상태에서, 사용자가 특정 노트 파일 선택 시, 커버 이미지를 위해 사용된 객체에 연관된 페이지로 노트 파일을 실행할 수 있다. 한 실시 예에 따르면, 커버 이미지가 특정 설정된 페이지(예: 마지막 페이지, 마지막으로 수정된 페이지, 또는 주요 객체가 포함된 페이지)의 적어도 하나의 객체에 의해 생성된 경우, 노트 파일을 오픈할 때, 노트의 페이지들 중 커버 이미지를 위해 사용된 해당 객체가 포함된 페이지(예: 마지막 페이지, 마지막으로 수정된 페이지, 또는 주요 객체가 포함된 페이지)를 바로 오픈(또는 실행)하여 사용자에게 제공할 수 있다. 예를 들면, 전자 자치(100)는 리스트에서 특정 노트 파일이 선택되면, 선택된 노트 파일의 페이지를 파싱하고, 파싱된 페이지에서 주요 객체가 있는 페이지를 판단하고, 판단된 페이지로 노트를 실행할 수 있다.
다양한 실시 예들에 따르면, 전자 장치(100)는 커버 이미지를 생성할 때, 노트 내에 포함된 컨텐츠에 대한 정보를 포함하여 생성할 수도 있다. 예를 들면, 전자 장치(100)는 노트 내에 이미지, 동영상, 또는 음악 등의 컨텐츠가 삽입되어 있는 경우, 해당 컨텐츠가 포함되어 있음을 연관 아이템(예: 아이콘 형태)을 표시하여 사용자에게 제공할 수 있다. 한 실시 예에 따르면, 전자 장치(100)는 노트 내에 동영상이 포함된 경우 동영상을 식별할 수 있는 연관 아이템(예: 동영상 연관 아이콘 형태(예: 필름 아이콘))을 커버 이미지에 포함하여 생성할 수 있다. 한 실시 예에 따르면, 전자 장치(100)는 노트 내에 음악이 포함된 경우 음악을 식별할 수 있는 연관 아이템(예: 뮤직 연관 아이콘 형태(예: 음표 아이콘))을 포함하여 생성할 수 있다.
다양한 실시 예들에 따라, 커버 이미지가 연관 아이템을 포함할 시, 전술한 도 5의 리스트에서 해당 노트 파일의 커버 이미지의 일 영역에 연관 아이템이 표시되어 사용자에게 제공될 수 있다. 이에 따라, 사용자는 해당 노트 내에 동영상이나 음악 등의 컨텐츠가 삽입되어 있음을 직관적으로 판단할 수 있다.
도 6a, 도 6b, 도 6c 및 도 6d는 본 발명의 다양한 실시 예들에 따른 전자 장치에서 제공되는 커버 이미지의 예시를 도시하는 도면들이다.
도 5 및 도 6a를 참조하면, 제1 타입은, 예를 들면, 도 5의 노트 파일(511)의 커버 이미지의 예시와 같이, 해당 객체(예: 텍스트 객체, 이미지 객체)의 일부 또는 전체(예: 핸드라이팅 영역, 이미지)를 특정 도형(613) 형태(예: 원, 타원, 별, 사각, 삼각 등의 형태) 내에서 표시하도록 하고, 나머지 배경 영역(615)을 특정한 컬러의 불투명 값을 적용하고, 배경 영역(615)에 파일 정보(611)(예: 이름(Interior Story), 날짜(Sep 4, 2016))를 포함하는 형태로 제공할 수 있다.
도 5 및 도 6b를 참조하면, 제2 타입은, 예를 들면, 도 5의 노트 파일(512, 513)의 커버 이미지의 예시와 같이, 해당 객체(예: 텍스트 객체, 이미지 객체)의 일부 또는 전체를 정렬(예: 텍스트 정렬, 글꼴 변경, 글꼴 크기 변경 등) 후 이미지화 하고, 전체 페이지에 특정한 컬러에 불투명 값을 차등 적용하고, 어느 일 영역(621)(예: 투명도가 낮은 영역으로, 예를 들면, 도 6b에서 하단 영역)에 파일 정보(623)(예: 이름(Handwriting), 날짜(Sep 4, 2016))를 포함하는 형태로 제공할 수 있다.
도 5 및 도 6c를 참조하면, 제3 타입은, 예를 들면, 도 5의 노트 파일(521, 525)의 커버 이미지의 예시와 같이, 해당 객체(예: 텍스트 객체, 이미지 객체)의 일부 또는 전체를 이미지화(예: 배경 이미지(631)) 하고, 배경 이미지(631)의 일 영역에 파일 정보(633)(예: 이름(America Travel), 날짜(Sep 4, 2016))를 포함하는 형태로 제공할 수 있다. 다양한 실시 예들에 따르면, 파일 정보(633)를 도 6b의 예와 같이 배경 이미지(631)에 새겨 넣는 것이 아니라, 파일 정보(633)를 특정 도형(예: 원, 사각, 타원 등)의 이미지로 생성하여 배경 이미지(631)와 결합하는 형태로 제공할 수 있다.
도 5 및 도 6d를 참조하면, 제4 타입은, 예를 들면, 도 5의 노트 파일(522, 523)의 커버 이미지의 예시와 같이, 해당 객체(예: 텍스트 객체, 이미지 객체)의 일부 또는 전체를 템플릿의 제1 설정 영역(641)(예: 이미지 영역)에 대응하는 크기로 이미지화 하고, 템플릿의 제2 설정 영역(643)(예: 파일 영역)에 파일 정보(예: 이름(Drawing Class), 날짜(Sep 4, 2016))를 포함하는 형태로 제공할 수 있다. 예를 들면, 제4 타입은 제1 설정 영역(641)과 제2 설정 영역(643)과 같이 2개의 영역으로 구분하여 객체에 대응하는 이미지와 파일 정보에 대응하는 이미지를 구분하여 표시하는 형태일 수 있다.
이하에서는, 도 4 내지 도 6을 참조하여 살펴본 바와 같은, 객체(예: 텍스트 객체, 이미지 객체)를 가공하여 커버 이미지를 위한 시각 정보로 전환하는 동작 예에 대하여 살펴보기로 한다. 예를 들면, 다양한 실시 예들에서는, 사용자가 마지막으로 작성한 페이지를 추출하고, 추출된 페이지의 객체를 가공(예: 이미지 프로세싱)하여 커버 이미지로 제공할 수 있다.
도 7a 내지 도 7d 및 도 8 내지 도 11은 본 발명의 다양한 실시 예들에 따른 전자 장치에서 객체를 시각 정보로 전환하는 다양한 동작을 설명하기 위해 도시하는 도면들이다.
도 7a에 도시한 바와 같이, 도 7a는 노트의 객체(예: 텍스트 객체, 이미지 객체)를 커버 이미지를 위한 커버의 시각 정보로 전환하는 예시로, 객체의 특징점을 기반으로 하는 예시를 나타낼 수 있다.
도 7a를 참조하면, 전자 장치(100)는 마지막 페이지의 객체에 기반하여 특징점을 추출할 수 있다(동작 701). 예를 들어, 도 8을 참조하면, 도 8은 페이지가 핸드라이팅에 의한 텍스트 객체(810)로 구성된 화면 예시를 나타낼 수 있다. 전자 장치(100)는 텍스트 객체(810)에서 특징점(예: 글꼴 색, 글꼴 스타일(예: 굵게, 기울임꼴 등), 하이라이팅된 부분, 핸드라이팅에 의해 그려진 그림(도형) 등 주변 영역과 다른 특징을 가지는 부분)을 추출할 수 있다. 다양한 실시 예들에 따라 특징점이 다수 개 추출되는 경우, 우선 순위(예: 글꼴 색)에 따라 해당 특징점을 기반으로 추출하거나, 각 특징점 모두를 하나의 범위(예: 사각 범위)로 포함하여 추출할 수 있다. 한 실시 예에 따라, 전자 장치(100)는 도 8에서, 주변의 객체와 다른 특징을 가지는(또는 중요하다고 판단되는) 객체 영역(820)(예: 굵은 글꼴로 작성된 부분)을 특징점으로 추출할 수 있다.
전자 장치(100)는 추출된 특징점을 기반으로 특정 도형(예: 원, 타원, 사각, 삼각, 별 모양 등) 형태로 자를 수 있다(동작 703). 예를 들어, 도 8을 참조하면, 전자 장치(100)는 특징점으로 추출된 객체 영역(820)에 적어도 일부 기반하여 특정 범위(예: 미리 설정되거나 사용자에 의해 재설정 가능)를 가지는 원형(830)으로 자를 수 있다.
전자 장치(100)는 잘려진 원형(830)의 객체(원형 이미지)에 기반하여 이미지화 처리(예: 페이지에 대응하는 크기의 이미지로 변경)할 수 있다(동작 705).
전자 장치(100)는 객체 기반의 원형(830)의 객체(원형 이미지) 위에 특정 컬러(color)에 불투명도(opacity) 값을 적용(예: 불투명도 10%, 15% 등)하여(동작 707), 이미지로 재가공할 수 있다(동작 709). 이러한 결과의 예시가 전술한 도 6a에 도시된다.
도 7b를 참조하면, 전자 장치(100)는 마지막 페이지의 객체에 기반하여 이미지화 하고, 이미지의 일부 영역에 특정한 컬러로 그라데이션(gradation)을 적용할 수 있다(동작 711). 예를 들어, 도 9를 참조하면, 전자 장치(100)는 페이지의 하단 부분(910)에 특정한 컬러로 그라데이션을 적용하여 페이지의 객체(예: 텍스트 객체, 이미지 객체)의 일부분을 가리는 효과를 제공할 수 있다.
전자 장치(100)는 전체 페이지에 특정한 컬러에 불투명도 값을 적용(예: 불투명도 10%, 15% 등)하여(동작 713), 이미지로 재가공할 수 있다(동작 715). 다양한 실시 예들에 따라, 전자 장치(100)는 텍스트 객체의 경우 객체를 정렬(예: 텍스트 문단 정렬, 문단 모양, 들여쓰기 등)한 후 재가공할 수 있다. 다양한 실시 예들에 따라, 전자 장치(100)는 이미지 객체의 경우 객체를 정렬(예: 가운데 정렬 등)한 후 재가공할 수 있다. 이러한 결과의 예시가 전술한 도 6b에 도시된다.
도 7c를 참조하면, 전자 장치(100)는 마지막 페이지의 전체에 특정한 컬러에 불투명도 값을 적용하여, 해당 페이지를 이미지로 생성하고(동작 721), 해당 이미지를 리사이징(resizing)하여 재가공할 수 있다(동작 723). 한 실시 예에 따라, 객체가 이미지 객체이고, 이미지 객체 기반의 커버를 생성하는 것을 가정할 때, 전자 장치(100)는 이미지 객체에 특정한 컬러에 불투명도 값을 적용하고 이미지 객체를 리사이징하여 재가공할 수 있다. 이러한 결과의 예시가 전술한 도 6c에 도시된다.
도 7d를 참조하면, 전자 장치(100)는 전체 페이지에서 객체가 있는 영역을 판단하고(동작 731), 객체가 있는 영역을 일정 도형 내에 포함하도록 해당 도형 형태로 자를 수 있다(동작 733). 전자 장치(100)는 잘려진 도형 형태의 객체에 기반하여 이미지로 재가공할 수 있다(동작 735). 예를 들어, 도 10을 참조하면, 전자 장치(100)는 이미지 객체와 텍스트 객체가 혼재된 페이지에서 객체들의 일부분(예: 이미지 객체(1010))을 커버의 일부 영역(예: 제1 설정 영역(641))의 이미지로 재가공할 수 있다. 다른 예를 들어, 도 11을 참조하면, 전자 장치(100)는 이미지 객체(1110)가 페이지 전체 또는 일정 비율 이상을 차지하는 경우, 이미지 객체(1110)의 일 부분을 특정 도형으로 잘라서 커버의 일부 영역의 이미지로 재가공할 수 있다. 다른 예를 들어, 전자 장치(100)는 페이지에서 텍스트 객체가 있는 부분을 일정 도형으로 잘라서 커버의 일부 영역의 이미지로 재가공할 수 있다. 이러한 결과의 예시가 전술한 도 6d에 도시된다.
다양한 실시 예들에 따르면, 전술한 도 7a 내지 도 7d와 같은 재가공 동작을 통해 프리뷰 커버를 생성할 수 있고, 생성된 프리뷰 커버 중 사용자 선택에 따른 프리뷰 커버와 사용자 입력에 따른 파일 정보에 기초하여 커버 이미지를 생성할 수 있다.
다양한 실시 예들에 따르면, 전자 장치(100)는 객체가 텍스트 객체와 이미지 객체가 혼재된 경우, 전술한 도 7a 내지 도 7d에 따라, 프리뷰 커버의 일부(예: 제1 타입, 제2 타입)는 텍스트 객체에 기반하여 생성하고, 프리뷰 커버의 다른 일부(예: 제3 타입, 제4 타입)는 이미지 객체에 기반하여 생성할 수 있으며, 다양한 조합으로 구현될 수 있다.
도 12는 본 발명의 다양한 실시 예들에 따른 전자 장치에서 노트 커버를 제공하는 방법을 도시하는 흐름도이다.
도 12를 참조하면, 동작 1201에서, 전자 장치(100)의 제어부(180)(예: 프로세서)는 노트 생성을 감지할 수 있다. 예를 들면, 제어부(180)는 사용자 입력(예: 핸드라이팅 입력, 이미지 삽입 등)에 대응하여 노트를 작성하고, 작성된 노트를 저장하기 위한 사용자 입력(예: 저장 요청 입력)을 감지할 수 있다.
동작 1203에서, 제어부(180)는 작성된 노트의 마지막 페이지에 기초하여 객체 인식을 수행할 수 있다. 예를 들면, 제어부(180)는 노트 생성 감지에 응답하여, 작성된 노트의 마지막 페이지를 판단할 수 있고, 판단된 페이지 내에서 객체(예: 텍스트 객체, 이미지 객체)를 분석할 수 있다. 다양한 실시 예들에 따라, 전자 장치(100)는 노트의 마지막 페이지가 아니라, 노트의 페이지들 중 사용자에 의해 마지막으로 수정된 페이지를 판단하고, 해당 페이지의 객체 인식을 통해 커버 이미지 생성 동작을 수행할 수 있다. 다양한 실시 예들에 따라, 전자 장치(100)는 노트의 마지막 페이지가 아니라, 노트의 페이지들 중 주요 객체가 있는 페이지를 판단하고, 해당 페이지의 객체 인식을 통해 커버 이미지 생성 동작을 수행할 수 있다.
동작 1205에서, 제어부(180)는 해당 페이지의 객체 중 이미지가 포함되어 있는지 여부를 판단할 수 있다. 예를 들면, 제어부(180)는 객체 인식 수행 결과에 기반하여, 인식된 객체들 중 이미지 객체가 존재하는지 여부를 판단할 수 있다.
동작 1205에서, 제어부(180)는 페이지에 이미지가 포함되어 있는 것으로 판단하면(동작 1205의 예), 동작 1207에서, 이미지를 가공하여 커버 시각 정보로 전환할 수 있다. 한 실시 예에 따라, 제어부(180)는 이미지에 기초하여, 미리 정의된 템플릿(또는 레이아웃) 별로 다른 형태의 효과(예: 특정 도형 모양, 컬러 적용, 불투명도 조정 등)를 가지는 이미지 프로세싱을 수행할 수 있다. 즉, 제어부(180)는 사용자에 의해 작성된 이미지에 기초하여 커버 이미지를 위한 이미지로 재가공할 수 있다.
동작 1209에서, 제어부(180)는 시각 정보에 기초하여 이미지 기반 프리뷰 커버를 생성할 수 있다. 다양한 실시 예들에 따라, 제어부(180)는 미리 정의된 템플릿에 대응하여 하나 또는 그 이상의 프리뷰 커버를 생성할 수 있다. 프리뷰 커버는 생성될 커버 이미지의 미리 보기 이미지를 나타낼 수 있다.
동작 1211에서, 제어부(180)는 이미지 기반 프리뷰 커버를 제공할 수 있다. 예를 들면, 전술한 도 4의 예시와 같이 노트 저장 팝업(400)의 일 영역(예: 커버 영역(430))을 통해 하나 또는 그 이상의 프리뷰 커버를 제공할 수 있다.
동작 1205에서, 제어부(180)는 페이지에 이미지가 포함되지 않은 것으로 판단하면(동작 1205의 아니오), 동작 1213에서, 텍스트를 가공하여 커버 시각 정보로 전환할 수 있다. 한 실시 예에 따라, 제어부(180)는 텍스트에 기초하여, 미리 정의된 템플릿 별로 다른 형태의 효과(예: 특정 도형 모양, 컬러 적용, 불투명도 조정 등)를 가지는 이미지 프로세싱을 수행할 수 있다. 즉, 제어부(180)는 사용자에 의해 작성된 텍스트에 기초하여 커버 이미지를 위한 이미지로 재가공할 수 있다.
동작 1215에서, 제어부(180)는 시각 정보에 기초하여 텍스트 기반 프리뷰 커버를 생성할 수 있다. 다양한 실시 예들에 따라, 제어부(180)는 미리 정의된 템플릿에 대응하여 하나 또는 그 이상의 프리뷰 커버를 생성할 수 있다.
동작 1217에서, 제어부(180)는 텍스트 기반 프리뷰 커버를 제공할 수 있다. 예를 들면, 전술한 도 4의 예시와 같이 노트 저장 팝업(400)의 일 영역(예: 커버 영역(430))을 통해 하나 또는 그 이상의 프리뷰 커버를 제공할 수 있다.
동작 1219에서, 제어부(180)는 파일 정보 입력 및 프리뷰 커버 선택을 감지할 수 있다. 한 실시 예에 따라, 사용자는 노트 저장 팝업(400)에서 이름 입력 필드(410)를 통해 파일 이름을 입력하거나, 또는 자동 입력(생성)된 이름(예: Note 1)을 사용할 수 있다. 한 실시 예에 따라, 사용자는 카테고리 선택 필드(420)를 통해 작성된 노트의 카테고리를 설정할 수 있다. 사용자는 파일 정보의 입력 이후, 또는 이전에 프리뷰 커버(431, 432, 433, 434) 중에서, 생성하고자 하는 노트 파일의 커버를 위한 프리뷰 커버를 선택할 수 있다. 사용자는 파일 정보와 프리뷰 커버를 선택한 후 확인 버튼(442)(예: DONE, SAVE 또는 OK 등)을 선택하여 저장을 수행할 수 있다. 제어부(180)는 노트 저장 팝업(400)을 통해 사용자에 의한 확인 버튼(442)의 선택을 감지할 시, 노트 생성(저장)을 위한 명령으로 판단할 수 있다.
동작 1221에서, 제어부(180)는 파일 정보와 선택된 프리뷰 커버에 기초하여 커버 이미지를 생성할 수 있다. 한 실시 예에 따라, 제어부(180)는 노트를 생성할 때, 파일 정보(예: 파일 이름, 카테고리)에 시간 정보를 더 포함할 수 있다. 예를 들면, 사용자에 의해 설정되는 이름 정보, 카테고리 정보(예: 카테고리 정보는 포함하지 않을 수 있음)에 해당 노트를 저장(생성)하는 시점의 시간 정보(예: 날짜, 시간)를 파일 정보에 포함할 수 있다. 제어부(180)는 노트를 생성할 때, 사용자에 의해 선택된 프리뷰 커버와 파일 정보(예: 파일 이름, 카테고리, 시간 정보)에 기반하여 커버 이미지를 생성할 수 있다. 한 실시 예에 따르면, 제어부(180)는 사용자에 의해 선택된 프리뷰 커버의 일 영역(예: 해당 템플릿의 형태에 따라 파일 정보를 위해 설정된 영역)에 파일 정보를 결합하여 커버 이미지를 생성할 수 있다.
동작 1223에서, 제어부(180)는 파일 생성 및 노트 리스트에 커버 이미지를 표시할 수 있다. 한 실시 예에 따라, 제어부(180)는 커버 이미지와 연관하여 노트 파일을 생성하여 메모리(150)에 저장하고, 해당 노트 파일의 커버 이미지를 노트 리스트를 통해 사용자에게 제공할 수 있다. 이의 예시가 전술한 도 5에 도시된다.
도 12의 예시에서는 설정된 페이지에서 객체를 인식하여 이미지의 포함 여부에 따라 커버를 생성하는 것을 예시로 한다. 하지만, 본 발명이 이에 한정되는 것은 아니다. 예를 들면, 전술한 바와 같이, 객체를 인식하여 노트에 컨텐츠의 포함 여부를 판단하고, 컨텐츠가 포함된 경우 컨텐츠의 종류를 구분하여 그에 연관된 동작에 따라 커버를 제공할 수도 있다. 한 실시 예에 따르면, 제어부(180)는 노트 객체가 동영상인 경우, 동영상의 적어도 일부분을 캡쳐하고 캡쳐 이미지의 적어도 일부에 기반하여 커버를 생성할 수 있다. 한 실시 예에 따라, 전자 장치(100)는 노트 객체가 음악인 경우, 음악의 앨범 커버를 추출하고, 앨범 커버의 적어도 일부에 기반하여 커버를 생성할 수 있다.
도 13은 본 발명의 다양한 실시 예들에 따른 전자 장치에서 노트 커버를 위한 프리뷰 커버를 생성하는 방법을 도시하는 흐름도이다.
도 13을 참조하면, 동작 1301에서, 전자 장치(100)의 제어부(180)(예: 프로세서)는 작성된 노트의 마지막 페이지에 기초하여 객체 인식을 수행할 수 있다. 예를 들면, 제어부(180)는 노트 생성 감지에 응답하여, 작성된 노트의 마지막 페이지를 추출할 수 있고, 추출된 페이지 내에서 객체(예: 텍스트 객체, 이미지 객체)를 분석할 수 있다. 다양한 실시 예들에 따라, 전자 장치(100)는 노트의 마지막 페이지가 아니라, 사용자에 의해 마지막으로 수정된 페이지를 추출하고, 해당 페이지의 객체 인식을 통해 커버 이미지 생성 동작을 수행할 수 있다. 다양한 실시 예들에 따라, 전자 장치(100)는 노트의 마지막 페이지가 아니라, 노트의 페이지들 중 주요 객체가 있는 페이지를 추출하고, 해당 페이지의 객체 인식을 통해 커버 이미지 생성 동작을 수행할 수 있다.
동작 1303에서, 제어부(180)는 해당 페이지의 객체 중 이미지가 포함되어 있는지 여부를 판단할 수 있다. 예를 들면, 제어부(180)는 객체 인식 수행 결과에 기반하여, 인식된 객체들 중 이미지 객체가 존재하는지 여부를 판단할 수 있다.
동작 1303에서, 제어부(180)는 페이지에 이미지가 포함되지 않은 것으로 판단하면(동작 1303의 아니오), 동작 1305에서, 페이지의 객체(예: 텍스트 객체)에 기반하여 특징점을 추출할 수 있다. 한 실시 예에 따라, 제어부(180)는 페이지에서 사용자에 의해 작성된 영역의 객체들로부터 특정 특징점, 예를 들면, 글꼴 색, 글꼴 스타일(예: 굵게, 기울임꼴 등), 하이라이팅된 부분, 핸드라이팅에 의해 그려진 그림(도형) 등 주변 영역과 다른 특징을 가지는 부분을 추출할 수 있다. 예를 들면, 제어부(180)는 사용자가 작성한 영역의 객체들 중, 빨간 컬러로 작성된 텍스트, 하이라이팅(예: 밑줄, 텍스트 강조 표시 등)이 표시된 텍스트, 핸드라이팅에 의해 그려진 도형 등과 같이, 중요하다고 판단되는 부분을 특징점으로 추출할 수 있다.
동작 1307에서, 제어부(180)는 추출된 특징점에 기초하여 템플릿(레이아웃) 별 이미지 프로세싱을 수행할 수 있다. 예를 들면, 제어부(180)는 추출된 특징점에 대응하는 객체 또는 그 영역에 적어도 일부 기초하여 이미지로 변경할 수 있다. 다양한 실시 예들에 따라, 제어부(180)는 이미지로 변경 시 미리 정의된 템플릿에 따라 하나 또는 그 이상의 이미지를 생성할 수 있다. 한 실시 예에 따라, 제어부(180)는 특정한 템플릿(레이아웃)에 해당하는 형태로 이미지를 자동 편집하여 생성할 수 있다.
동작 1303에서, 제어부(180)는 페이지에 이미지가 포함되어 있는 것으로 판단하면(동작 1303의 예), 동작 1309에서, 전체 화면을 기준으로 이미지 면적을 판단할 수 있다.
동작 1311에서, 제어부(180)는 이미지의 면적이 기준 비율 이상 차지하는지 여부를 판단할 수 있다. 예를 들면, 제어부(180)는 해당 페이지에 포함된 이미지의 면적이 전체 화면의 N%(N은 자연수, 예를 들면, 30%) 이상 차지하는지 여부를 판단할 수 있다. 다양한 실시 예들에 따라, 제어부(180)는 페이지에 포함된 이미지 면적이, 전자 장치(100)의 화면 기준으로 차지하는 퍼센트(%)에 따라 이미지 기반의 커버로 추천 또는 추천하지 않을 수 있다.
동작 1311에서, 제어부(180)는 이미지 면적이 기준 비율 미만인 것으로 판단하면(동작 1311의 아니오), 동작 1313에서, 노트가 작성된 영역 또는 전체 페이지에 기초하여 템플릿(레이아웃) 별 이미지 프로세싱을 수행할 수 있다. 예를 들면, 제어부(180)는 페이지에서 객체가 포함된 영역의 적어도 일부(예: 텍스트 영역, 이미지 영역, 또는 텍스트 및 이미지 혼재 영역)에 기초하여 이미지로 변경할 수 있다. 다양한 실시 예들에 따라, 제어부(180)는 이미지로 변경 시 미리 정의된 템플릿에 따라 하나 또는 그 이상의 이미지를 생성할 수 있다. 한 실시 예에 따라, 제어부(180)는 특정한 템플릿(레이아웃)에 해당하는 형태로 이미지를 자동 편집하여 생성할 수 있다.
동작 1311에서, 제어부(180)는 이미지 면적이 기준 비율 이상인 것으로 판단하면(동작 1311의 예), 동작 1315에서, 이미지에 기초하여 템플릿(레이아웃) 별 이미지 프로세싱을 수행할 수 있다. 예를 들면, 제어부(180)는 페이지 내의 이미지의 적어도 일부에 기초하여 커버를 위한 이미지로 변경할 수 있다. 다양한 실시 예들에 따라, 제어부(180)는 이미지로 변경 시 미리 정의된 템플릿에 따라 하나 또는 그 이상의 이미지를 생성할 수 있다. 한 실시 예에 따라, 제어부(180)는 특정한 템플릿(레이아웃)에 해당하는 형태로 이미지를 자동 편집하여 생성할 수 있다.
동작 1317에서, 제어부(180)는 템플릿(레이아웃) 별 프리뷰 커버를 생성할 수 있다. 예를 들면, 제어부(180)는 동작 1307, 동작 1313, 또는 동작 1315의 이미지 프로세싱 수행에 따라 생성된 이미지에 기초하여 템플릿에 대응하는 하나 또는 그 이상의 프리뷰 커버를 생성할 수 있다. 다양한 실시 예들에 따라, 제어부(180)는 사용자에 의해 작성된 객체에 적어도 일부 기반하여 이미지로 변경하고, 변경된 이미지를 커버 이미지를 추천하기 위한 프리뷰 커버로 사용자에게 제공할 수 있다. 다양한 실시 예들에 따르면, 제어부(180)는 프리뷰 커버에 기초하여 특정한 템플릿(레이아웃)에 해당하는 다양한 형태의 커버 이미지의 추천이 가능하다.
도 14는 본 발명의 다양한 실시 예들에 따른 전자 장치에서 노트 커버를 제공하는 동작을 도시하는 도면이다.
도 14를 참조하면, 다양한 실시 예들에 따라, 사용자에 의해 작성된 노트 객체에 기반하여 커버 이미지를 제공하는 동작은, 생성 과정(1401), 판단 과정(1403), 가공 과정(1405), 실행 과정(1407)을 포함할 수 있다.
다양한 실시 예들에 따라, 생성 과정(1401)은, 사용자 입력에 기초하여 노트 객체를 생성하는 동작을 포함할 수 있다.
다양한 실시 예들에 따라, 판단 과정(1403)은, 사용자에 의해 작성된 노트에서 설정된 페이지(예: 마지막 페이지, 마지막으로 수정된 페이지, 주요 객체가 포함된 페이지 등)를 추출하고, 추출된 페이지에서 노트 객체(예: 텍스트 객체, 이미지 객체)를 분석(또는 인식)하는 동작을 포함할 수 있다. 다양한 실시 예들에 따라, 판단 과정(1403)은 추출된 페이지에서 이미지의 존재 여부, 이미지 존재 시 이미지 면적이 차지하는 비율, 텍스트 객체에서 특징점 등을 분석 및 판단하는 동작을 포함할 수 있다.
다양한 실시 예들에 따라, 가공 과정(1405)은, 분석된 객체에 기반하여 커버 이미지를 위한 시각 정보로 전환하는 동작을 포함할 수 있다. 한 실시 예에 따르면, 객체 또는 객체 영역의 적어도 일부에 기반하여 특정 도형 형태로 구성하고, 도형 형태를 가지는 객체를 이미지화 하여 그 위에 임의의 컬러에 불투명도 값을 적용하여 이미지화 할 수 있다. 한 실시 예에 따르면, 객체를 포함하는 영역의 하단 부분에 특정한 컬러로 그라데이션을 적용하여 객체의 하단 부분을 가리고, 전체 페이지에 특정한 컬러에 불투명도 값을 적용하여 이미지화 할 수 있다. 한 실시 예에 따르면, 전체 페이지에서 이미지가 있는 부분을 일정 도형 형태로 구성하여 이미지화 할 수 있다. 한 실시 예에 따르면, 전체 페이지에 특정한 컬러에 불투명도 값을 적용하여 전체 이미지를 다운사이징(downsizing)하여 이미지화 할 수 있다.
다양한 실시 예들에 따라, 실행 과정(1407)은, 전환된 시각 정보에 기초하여 노트 커버를 추천(예: 프리뷰 커버를 통해 추천)하는 동작을 포함할 수 있다. 한 실시 예에 따르면, 노트 커버를 추천할 때 특정한 템플릿(레이아웃)에 대응하는 형태로 이미지를 자동 편집하여 사용자에게 제공할 수 있다. 한 실시 예에 따르면, 노트 커버를 추천할 때 사용자에 의해 작성된 부분 중 특정 영역을 이미지로 변경하여 사용자에게 제공할 수 있다.
이상에서 살펴본 바와 같이, 다양한 실시 예들에 따른 전자 장치(100)는, 노트 생성에 응답하여 설정된 페이지를 추출하는 동작, 추출된 페이지에서 적어도 하나의 객체를 인식하는 동작, 객체에 기반하여 커버 이미지를 위한 시각 정보를 생성하는 동작, 시각 정보에 기반하여 프리뷰 커버를 표시하는 동작, 및 프리뷰 커버와 노트에 연관된 파일 정보에 기반하여 커버 이미지를 생성하는 동작을 포함할 수 있다.
다양한 실시 예들에 따라, 페이지를 추출하는 동작은, 노트의 마지막 페이지, 노트의 페이지들 중 마지막으로 수정된 페이지, 또는 주요 객체가 포함된 페이지를 추출하는 동작을 포함할 수 있다.
다양한 실시 예들에 따라, 시각 정보를 생성하는 동작은, 객체 인식에 응답하여 이미지 객체를 판단하는 동작, 페이지에 이미지 객체가 존재하지 않은 경우, 텍스트 객체에 기반하여 시각 정보를 생성하는 동작, 및 페이지에 이미지 객체가 존재하는 경우, 이미지 객체에 기반하여 시각 정보를 생성하는 동작을 포함할 수 있다.
다양한 실시 예들에 따라, 텍스트 객체에 기반하여 시각 정보를 생성하는 동작은, 텍스트 객체에서 특징점을 추출하는 동작, 및 특징점에 대응하는 객체에 기반하여 시각 정보를 생성하는 동작을 포함할 수 있다.
다양한 실시 예들에 따라, 특징점을 추출하는 동작은, 텍스트 객체에서 주변 객체와 다른 글꼴 색, 글꼴 스타일, 하이라이팅 부분, 핸드라이팅에 의해 그려진 그림 중 적어도 일부에 기초하여 특징점을 추출하는 것을 포함할 수 있다.
다양한 실시 예들에 따라, 특징점을 추출하는 동작은, 텍스트 객체에서 다수 개의 특징점이 추출되는 경우, 설정된 우선 순위에 따라 특징점을 결정하거나, 또는 각 특징점 모두를 하나의 범위로 포함하여 특징점을 결정하는 동작을 포함할 수 있다.
다양한 실시 예들에 따라, 이미지 객체에 기반하여 시각 정보를 생성하는 동작은, 전체 화면을 기준으로 이미지 객체의 이미지 면적을 판단하는 동작, 이미지 면적이 기준 비율 미만이면, 페이지에서 객체가 포함된 영역의 적어도 일부에 기초하여 시각 정보를 생성하는 동작, 및 이미지 면적이 기준 비율 이상이면, 이미지 객체의 적어도 일부에 기초하여 시각 정보를 생성하는 동작을 포함할 수 있다.
다양한 실시 예들에 따라, 시각 정보를 생성하는 동작은, 객체를 이용하여, 미리 정의된 템플릿에 대응하는 하나 또는 그 이상의 시각 정보를 생성하는 것을 포함할 수 있다.
다양한 실시 예들에 따라, 프리뷰 커버 중 사용자 선택에 따른 프리뷰 커버와 노트에 관련된 파일 정보를 결합하여 커버 이미지를 구성하는 동작을 더 포함하고, 파일 정보는, 파일 이름 및 시간 정보를 포함할 수 있다.
다양한 실시 예들에 따라, 프리뷰 커버를 표시하는 동작은, 프리뷰 커버 중, 전자 장치에 의해 추천하는 특정 프리뷰 커버에 추천 마커를 제공하는 동작을 포함할 수 있다.
본 명세서와 도면에 개시된 본 발명의 다양한 실시 예들은 본 발명의 기술 내용을 쉽게 설명하고 본 발명의 이해를 돕기 위해 특정 예를 제시한 것일 뿐이며, 본 발명의 범위를 한정하고자 하는 것은 아니다. 따라서 본 발명의 범위는 여기에 개시된 실시 예들 이외에도 본 발명의 기술적 사상을 바탕으로 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
100: 전자 장치
130: 터치스크린
150: 메모리
180: 제어부(프로세서)
400: 팝업
431, 432, 433, 434: 프리뷰 커버
511, 512, 513, 521, 522, 523, 525, 531, 533: 커버 이미지

Claims (20)

  1. 전자 장치에 있어서,
    디스플레이;
    메모리; 및
    상기 디스플레이 및 상기 메모리와 전기적으로 연결된 프로세서를 포함하고, 상기 프로세서는,
    노트 생성에 응답하여 설정된 페이지를 추출하고,
    상기 추출된 페이지에서 적어도 하나의 객체를 인식하고,
    상기 객체에 기반하여 커버 이미지를 위한 시각 정보를 생성하고,
    상기 시각 정보에 기반하여 프리뷰 커버를 표시하고, 및
    상기 프리뷰 커버와 상기 노트에 연관된 파일 정보에 기반하여 커버 이미지를 생성하도록 설정된 전자 장치.
  2. 제1항에 있어서, 상기 프로세서는,
    상기 노트의 마지막 페이지, 상기 노트의 페이지들 중 마지막으로 수정된 페이지, 또는 주요 객체가 포함된 페이지를 추출하도록 설정된 전자 장치.
  3. 제1항에 있어서, 상기 프로세서는,
    상기 객체 인식에 응답하여 이미지 객체를 판단하고,
    상기 페이지에 이미지 객체가 존재하지 않은 경우, 텍스트 객체에 기반하여 상기 시각 정보를 생성하고,
    상기 페이지에 이미지 객체가 존재하는 경우, 상기 이미지 객체에 기반하여 상기 시각 정보를 생성하도록 설정된 전자 장치.
  4. 제3항에 있어서, 상기 프로세서는,
    상기 텍스트 객체에서 특징점을 추출하고, 상기 특징점에 대응하는 객체에 기반하여 상기 시각 정보를 생성하도록 설정된 전자 장치.
  5. 제4항에 있어서, 상기 프로세서는,
    상기 텍스트 객체에서 주변 객체와 다른 글꼴 색, 글꼴 스타일, 하이라이팅 부분, 핸드라이팅에 의해 그려진 그림 중 적어도 일부에 기초하여 상기 특징점을 추출하도록 설정된 전자 장치.
  6. 제4항에 있어서, 상기 프로세서는,
    상기 텍스트 객체에서 다수 개의 특징점이 추출되는 경우, 설정된 우선 순위에 따라 특징점을 결정하거나, 또는 각 특징점 모두를 하나의 범위로 포함하여 특징점을 결정하도록 설정된 전자 장치.
  7. 제3항에 있어서, 상기 프로세서는,
    전체 화면을 기준으로 상기 이미지 객체의 이미지 면적을 판단하고,
    상기 이미지 면적이 기준 비율 미만이면, 페이지에서 객체가 포함된 영역의 적어도 일부에 기초하여 상기 시각 정보를 생성하고,
    상기 이미지 면적이 기준 비율 이상이면, 상기 이미지 객체의 적어도 일부에 기초하여 상기 시각 정보를 생성하도록 설정된 전자 장치.
  8. 제1항에 있어서, 상기 프로세서는,
    상기 객체를 이용하여, 미리 정의된 템플릿에 대응하는 하나 또는 그 이상의 시각 정보를 생성하도록 설정된 전자 장치.
  9. 제1항에 있어서, 상기 프로세서는,
    상기 프리뷰 커버 중 사용자 선택에 따른 프리뷰 커버와 상기 노트에 관련된 파일 정보를 결합하여 상기 커버 이미지를 구성하는 것을 포함하고,
    상기 파일 정보는, 파일 이름 및 시간 정보를 포함하도록 설정된 전자 장치.
  10. 제1항에 있어서, 상기 프로세서는,
    상기 프리뷰 커버 중, 상기 전자 장치에 의해 추천하는 특정 프리뷰 커버에 추천 마커를 제공하도록 설정된 전자 장치.
  11. 전자 장치의 동작 방법에 있어서,
    노트 생성에 응답하여 설정된 페이지를 추출하는 동작;
    상기 추출된 페이지에서 적어도 하나의 객체를 인식하는 동작;
    상기 객체에 기반하여 커버 이미지를 위한 시각 정보를 생성하는 동작;
    상기 시각 정보에 기반하여 프리뷰 커버를 표시하는 동작; 및
    상기 프리뷰 커버와 상기 노트에 연관된 파일 정보에 기반하여 커버 이미지를 생성하는 동작을 포함하는 방법.
  12. 제11항에 있어서, 상기 페이지를 추출하는 동작은,
    상기 노트의 마지막 페이지, 상기 노트의 페이지들 중 마지막으로 수정된 페이지, 또는 주요 객체가 포함된 페이지를 추출하는 동작을 포함하는 방법.
  13. 제11항에 있어서, 상기 시각 정보를 생성하는 동작은,
    상기 객체 인식에 응답하여 이미지 객체를 판단하는 동작;
    상기 페이지에 이미지 객체가 존재하지 않은 경우, 텍스트 객체에 기반하여 상기 시각 정보를 생성하는 동작; 및
    상기 페이지에 이미지 객체가 존재하는 경우, 상기 이미지 객체에 기반하여 상기 시각 정보를 생성하는 동작을 포함하는 방법.
  14. 제13항에 있어서, 상기 텍스트 객체에 기반하여 상기 시각 정보를 생성하는 동작은,
    상기 텍스트 객체에서 특징점을 추출하는 동작; 및
    상기 특징점에 대응하는 객체에 기반하여 상기 시각 정보를 생성하는 동작을 포함하는 방법.
  15. 제14항에 있어서, 상기 특징점을 추출하는 동작은,
    상기 텍스트 객체에서 주변 객체와 다른 글꼴 색, 글꼴 스타일, 하이라이팅 부분, 핸드라이팅에 의해 그려진 그림 중 적어도 일부에 기초하여 상기 특징점을 추출하는 것을 포함하는 방법.
  16. 제14항에 있어서, 상기 특징점을 추출하는 동작은,
    상기 텍스트 객체에서 다수 개의 특징점이 추출되는 경우, 설정된 우선 순위에 따라 특징점을 결정하거나, 또는 각 특징점 모두를 하나의 범위로 포함하여 특징점을 결정하는 동작을 포함하는 방법.
  17. 제13항에 있어서, 상기 이미지 객체에 기반하여 상기 시각 정보를 생성하는 동작은,
    전체 화면을 기준으로 상기 이미지 객체의 이미지 면적을 판단하는 동작;
    상기 이미지 면적이 기준 비율 미만이면, 페이지에서 객체가 포함된 영역의 적어도 일부에 기초하여 상기 시각 정보를 생성하는 동작; 및
    상기 이미지 면적이 기준 비율 이상이면, 상기 이미지 객체의 적어도 일부에 기초하여 상기 시각 정보를 생성하는 동작을 포함하는 방법.
  18. 제11항에 있어서, 상기 시각 정보를 생성하는 동작은,
    상기 객체를 이용하여, 미리 정의된 템플릿에 대응하는 하나 또는 그 이상의 시각 정보를 생성하는 것을 포함하는 방법.
  19. 제11항에 있어서,
    상기 프리뷰 커버 중 사용자 선택에 따른 프리뷰 커버와 상기 노트에 관련된 파일 정보를 결합하여 상기 커버 이미지를 구성하는 동작을 더 포함하고,
    상기 파일 정보는, 파일 이름 및 시간 정보를 포함하는 방법.
  20. 제11항에 있어서, 상기 프리뷰 커버를 표시하는 동작은,
    상기 프리뷰 커버 중, 상기 전자 장치에 의해 추천하는 특정 프리뷰 커버에 추천 마커를 제공하는 동작을 포함하는 방법.
KR1020160069709A 2016-06-03 2016-06-03 전자 장치 및 그의 동작 방법 KR102594951B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020160069709A KR102594951B1 (ko) 2016-06-03 2016-06-03 전자 장치 및 그의 동작 방법
US16/306,814 US10990748B2 (en) 2016-06-03 2017-06-02 Electronic device and operation method for providing cover of note in electronic device
PCT/KR2017/005805 WO2017209568A1 (ko) 2016-06-03 2017-06-02 전자 장치 및 그의 동작 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160069709A KR102594951B1 (ko) 2016-06-03 2016-06-03 전자 장치 및 그의 동작 방법

Publications (2)

Publication Number Publication Date
KR20170137491A true KR20170137491A (ko) 2017-12-13
KR102594951B1 KR102594951B1 (ko) 2023-10-27

Family

ID=60478781

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160069709A KR102594951B1 (ko) 2016-06-03 2016-06-03 전자 장치 및 그의 동작 방법

Country Status (3)

Country Link
US (1) US10990748B2 (ko)
KR (1) KR102594951B1 (ko)
WO (1) WO2017209568A1 (ko)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108108461B (zh) * 2017-12-29 2021-08-31 北京小米移动软件有限公司 确定封面图像的方法及装置
CN108965922B (zh) * 2018-08-22 2021-05-25 广州酷狗计算机科技有限公司 视频封面生成方法、装置和存储介质
JP7443779B2 (ja) * 2020-01-16 2024-03-06 富士フイルムビジネスイノベーション株式会社 情報処理装置及び情報処理プログラム
CN111339742B (zh) * 2020-03-26 2021-06-15 掌阅科技股份有限公司 笔记区域划分方法、终端及计算机存储介质
US11543945B1 (en) * 2020-03-30 2023-01-03 Amazon Technologies, Inc. Accurate local depiction of preview of a program window included in a remote graphical desktop
CN112752121B (zh) * 2020-05-26 2023-06-09 腾讯科技（深圳）有限公司 一种视频封面生成方法及装置
CN113473019A (zh) * 2021-07-01 2021-10-01 北京字跳网络技术有限公司 一种图像处理方法、装置、设备及存储介质
CN113473017A (zh) * 2021-07-01 2021-10-01 北京字跳网络技术有限公司 一种图像处理方法、装置、设备及存储介质
CN118057278A (zh) * 2022-11-21 2024-05-21 北京有竹居网络技术有限公司 确定推荐信息的方法、装置、电子设备和存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110051374A (ko) * 2009-11-10 2011-05-18 삼성전자주식회사 단말기에서 데이터 처리 방법 및 그를 수행하는 장치
US20120192118A1 (en) * 2011-01-24 2012-07-26 Migos Charles J Device, Method, and Graphical User Interface for Navigating through an Electronic Document
KR20130092934A (ko) * 2012-02-13 2013-08-21 삼성전자주식회사 사용자 인터페이스를 가진 태블릿
US20140372877A1 (en) * 2013-06-15 2014-12-18 Microsoft Corporation Previews of Electronic Notes
KR20150060392A (ko) * 2013-11-26 2015-06-03 엘지전자 주식회사 이동 단말기 및 이동 단말기의 제어 방법

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100107091A1 (en) * 2008-10-29 2010-04-29 International Business Machines Corporation Publishing requests for dynamically loaded missing images
US9466050B2 (en) * 2009-05-22 2016-10-11 EVDense Holding Company, Inc. System and method for interactive visual representation of items along a timeline
KR20110001105A (ko) 2009-06-29 2011-01-06 엘지전자 주식회사 이동 단말기 및 그 제어 방법
US8645363B2 (en) * 2009-08-12 2014-02-04 Google Inc. Spreading comments to other documents
US8775921B2 (en) * 2009-09-03 2014-07-08 International Business Machines Corporation Creating, updating, saving, and propagating customized views of table and grid information
JP5413156B2 (ja) 2009-11-30 2014-02-12 富士ゼロックス株式会社 画像処理プログラム及び画像処理装置
US9250768B2 (en) 2012-02-13 2016-02-02 Samsung Electronics Co., Ltd. Tablet having user interface
US9747019B2 (en) 2012-02-24 2017-08-29 Lg Electronics Inc. Mobile terminal and control method thereof
US9268858B1 (en) * 2012-06-27 2016-02-23 Amazon Technologies, Inc. Previewing content based on detected customer activities
US9779091B2 (en) * 2014-10-31 2017-10-03 Adobe Systems Corporation Restoration of modified document to original state
KR101658097B1 (ko) 2015-06-02 2016-09-21 엘지전자 주식회사 이동 단말기 및 그것의 제어 방법
US10452707B2 (en) * 2015-08-31 2019-10-22 The Nielsen Company (Us), Llc Product auditing in point-of-sale images

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110051374A (ko) * 2009-11-10 2011-05-18 삼성전자주식회사 단말기에서 데이터 처리 방법 및 그를 수행하는 장치
US20120192118A1 (en) * 2011-01-24 2012-07-26 Migos Charles J Device, Method, and Graphical User Interface for Navigating through an Electronic Document
KR20130092934A (ko) * 2012-02-13 2013-08-21 삼성전자주식회사 사용자 인터페이스를 가진 태블릿
US20140372877A1 (en) * 2013-06-15 2014-12-18 Microsoft Corporation Previews of Electronic Notes
KR20150060392A (ko) * 2013-11-26 2015-06-03 엘지전자 주식회사 이동 단말기 및 이동 단말기의 제어 방법

Also Published As

Publication number Publication date
US10990748B2 (en) 2021-04-27
WO2017209568A1 (ko) 2017-12-07
KR102594951B1 (ko) 2023-10-27
US20190294652A1 (en) 2019-09-26

Similar Documents

Publication Publication Date Title
KR102594951B1 (ko) 전자 장치 및 그의 동작 방법
CN105830422B (zh) 可折叠电子设备及其界面交互方法
US10841265B2 (en) Apparatus and method for providing information
US10452333B2 (en) User terminal device providing user interaction and method therefor
CN107077292B (zh) 剪贴信息提供方法和装置
EP2808781B1 (en) Method, storage medium, and electronic device for mirroring screen data
US9652679B2 (en) Method and device for reproducing content
EP2720126B1 (en) Method and apparatus for generating task recommendation icon in a mobile device
CN103870804B (zh) 具有脸部识别功能的移动装置和控制该移动装置的方法
EP2811420A2 (en) Method for quickly executing application on lock screen in mobile device, and mobile device therefor
US20160227010A1 (en) Device and method for providing lock screen
EP3510517B1 (en) Method of displaying user interface related to user authentication and electronic device for implementing same
EP3693837A1 (en) Method and apparatus for processing multiple inputs
US20150339524A1 (en) Method and device for reproducing partial handwritten content
US11847302B2 (en) Spatial navigation and creation interface
US20140176600A1 (en) Text-enlargement display method
KR102521192B1 (ko) 전자 장치 및 그의 동작 방법
US20140337720A1 (en) Apparatus and method of executing function related to user input on screen
CN108958635A (zh) 显示结束效果的移动设备及其控制方法
KR20180081353A (ko) 전자 장치 및 그의 동작 방법
KR20160101605A (ko) 제스처 입력 처리 방법 및 이를 지원하는 전자 장치
US10409478B2 (en) Method, apparatus, and recording medium for scrapping content
KR20140136349A (ko) 대화 기록 장치 및 그 방법
KR20140027838A (ko) 멀티 터치를 이용한 핸드 라이팅 기능을 가지는 모바일 장치 및 제어 방법
KR20180111242A (ko) 채색 가능한 콘텐트를 제공하는 전자 장치 및 그 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant