KR20150125287A - 전자장치에서 미디어 추천 방법 및 장치 - Google Patents

전자장치에서 미디어 추천 방법 및 장치 Download PDF

Info

Publication number
KR20150125287A
KR20150125287A KR1020140052368A KR20140052368A KR20150125287A KR 20150125287 A KR20150125287 A KR 20150125287A KR 1020140052368 A KR1020140052368 A KR 1020140052368A KR 20140052368 A KR20140052368 A KR 20140052368A KR 20150125287 A KR20150125287 A KR 20150125287A
Authority
KR
South Korea
Prior art keywords
media
text
recommended
displaying
input
Prior art date
Application number
KR1020140052368A
Other languages
English (en)
Inventor
정진회
이공욱
이준호
조익환
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020140052368A priority Critical patent/KR20150125287A/ko
Priority to US14/701,330 priority patent/US20150317315A1/en
Publication of KR20150125287A publication Critical patent/KR20150125287A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22—Indexing; Data structures therefor; Storage structures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/245—Query processing
    • G06F16/2457—Query processing with adaptation to user needs
    • G06F16/24578—Query processing with adaptation to user needs using ranking
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/248—Presentation of query results

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Library & Information Science (AREA)
  • Computational Linguistics (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명의 다양한 실시 예는 전자장치에서 텍스트 입력에 따른 미디어를 추천하는 방법 및 장치에 관한 것이다. 다양하 실시 예는 입력되는 텍스트를 표시하는 동작; 상기 입력되는 텍스트와 미디어 디스크립트DB에 저장된 미디어를 비교하는 동작; 상기 저장된 미디어 중 상기 입력된 텍스트에 대응되는 추천 미디어를 표시하는 동작; 및 상기 추천 미디어의 선택에 따라, 입력된 추천 미디어를 표시하는 동작을 포함 할 수 있다.
따라서 다양한 실시 예에 따르면 사용자 중심의 미디어를 추천하여, 미디어를 입력할 때, 효율성을 향상시킬 수 있다.

Description

전자장치에서 미디어 추천 방법 및 장치{METHOD AND APPARATUS FOR SUGGESTING MEDIA IN ELECTRONIC DEVICE}
본 발명의 다양한 실시 예는 텍스트 입력 시, 사용자 중심의 미디어를 추천하는 방법 및 장치에 관한 것이다.
최근, 전자장치를 이용하여 다양한 활용을 할 수 있다. 예를 들어, 채팅 창(chatting window)에서 메시지 송/수신 시, 단순 텍스트뿐 아니라 이미지, 동영상, 음성 파일, 이모티콘, 스티커 등을 입력할 수 있다. 또한, 사용자가 텍스트 입력 시, DB에 저장된 이미지를 검색하고, 입력되는 텍스트에 대응되는 이미지를 추천할 수 있다.
텍스트 입력 시, 상기 텍스트에 대응되는 이미지를 추천할 수 있다. 하지만, 이러한 이미지 추천은 전자장치가 일방적으로 제공하는DB내에서 검색하여 이미지를 추천하는 한계가 존재한다.
따라서, 다양한 실시 예에 따른 전자장치는 저장된 미디어가 갱신되면, 최신의DB에서 사용자 중심의 미디어를 추천하는 방법 및 장치를 제안한다. 또한, 전자장치는 사용자 중심의 미디어를 통하여 감정, 정보가 풍부한DB를 생성하는 방법 및 장치를 제안한다.
상기와 같은 과제를 해결하기 위한 본 발명의 다양한 실시 예는 입력되는 텍스트를 표시하는 동작; 상기 입력되는 텍스트와 미디어 디스크립트DB에 저장된 미디어를 비교하는 동작; 상기 저장된 미디어 중 상기 입력된 텍스트에 대응되는 추천 미디어를 표시하는 동작; 및 상기 추천 미디어 선택에 따라 입력된 추천 미디어를 표시하는 동작을 포함 할 수 있다.
또한, 상기와 같은 과제를 해결하기 위한 본 발명의 다양한 실시 예는 입력되는 텍스트를 감지하는 터치패널과, 상기 입력되는 텍스트 및 상기 텍스트에 대응되는 추천 미디어를 표시하는 표시패널과, 상기 미디어 및 미디어 정보를 저장하는 저장부와, 미디어 갱신 시, 상기 미디어를 분석하고, 상기 미디어를 분석한 미디어 상세 정보를 서술하여 상기 저장부에 저장하도록 제어하고, 텍스트 입력 시, 상기 텍스트에 대응되는 추천 미디어를 표시하고, 상기 표시되는 추천 미디어의 선택에 따라 입력된 추천 미디어를 표시하도록 제어하는 제어부를 포함할 수 있다.
본 발명의 다양한 실시 예에 따른 전자장치는 텍스트 입력 시, 추천 미디어를 표시할 수 있다. 이 때, 추천 미디어가 선택되면, 이를 입력한다. 표시되는 추천 미디어는 사용자 중심으로 이루어 지며, 지속적으로 갱신되어 최신성을 유지할 수 있다.
도 1은 다양한 실시 예에 따른 추천 미디어를 표시하는 전자장치의 구성을 개략적으로 나타낸 도면.
도 2는 다양한 실시 예에 따른 추천 미디어를 표시하기 위한 동작을 설명하기 위한 전자장치의 일부 구성을 나타낸 도면.
도 3은 다양한 실시 예에 따른 미디어 디스크립트DB의 구조의 예시를 나타낸 도면.
도 4는 다양한 실시 예에 따른 미디어 디스크립트DB를 생성하는 과정을 나타낸 도면.
도 5는 다양한 실시 예에 따른 미디어 디스크립트DB를 생성하기 위하여 미디어를 분석하는 과정을 나타낸 도면.
도 6은 다양한 실시 예에 따른 추천 미디어를 표시하는 과정을 나타낸 도면.
도 7은 다양한 실시 예에 따른 입력을 처리하는 과정을 나타낸 도면.
도 8a 내지 도8c는 다양한 실시 예에 따른 추천 미디어를 표시하는 예를 도시하는 도면.
도9은 다양한 실시 예에 따른 추천 미디어를 표시하는 과정을 나타낸 도면.
도 10a 내지 도10b는 다양한 실시 예에 따른 추천 미디어를 표시하는 예를 도시하는 도면.
이하, 첨부된 도면들을 참조하여 다양한 실시 예들을 상세히 설명한다. 이때, 첨부된 도면들에서 동일한 구성 요소는 가능한 동일한 부호로 나타내고 있음에 유의해야 한다. 또한 본 발명의 요지를 흐리게 할 수 있는 공지 기능 및 구성에 대한 상세한 설명은 생략할 것이다. 하기의 설명에서는 본 발명의 다양한 실시 예들에 따른 동작을 이해하는데 필요한 부분만이 설명되며, 그 이외 부분의 설명은 본 발명의 요지를 흩트리지 않도록 생략될 것이라는 것을 유의하여야 한다.
이하의 설명에서 ‘미디어’라는 용어는 이미지, 비디오, 이모티콘 등을 포함할 수 있으며, 전자장치에 저장된 미디어, 클라우드(CLOUD)의 미디어, 인터넷의 오픈된 미디어를 포함할 수 있다.
도 1은 다양한 실시 예에 따른 추천 미디어를 표시하는 전자장치의 구성을 개략적으로 나타낸 도면이다.
도 1을 참조하면, 전자장치는 무선통신부(110), 터치스크린(120), 저장부(130), 제어부(140)를 포함하여 구성될 수 있다.
무선통신부(110)는 전자장치와 무선 통신 시스템 사이 또는 전자장치와 다른 전자장치가 위치한 네트워크(network) 사이의 무선 통신을 가능하게 하는 하나 이상의 모듈을 포함할 수 있다. 예를 들어, 무선 통신부(110)는 이동통신 모듈, 무선 랜(WLAN, Wireless Local Area Network) 모듈, 근거리 통신 모듈, 위치 산출 모듈, 그리고 방송 수신 모듈 등을 포함하여 구성될 수 있다. 본 발명의 다양한 실시 예에 따르면, 무선통신부(110)는 앱이 실행되면, 무선 통신을 수행할 수 있다.
터치스크린(120)은 터치패널(121)과 표시패널(122)를 포함하여 구성될 수 있다. 터치패널(121)은 사용자 입력이 발생하면, 이를 제어부(140)에 전달할 수 있다. 여기서 사용자 입력은 펜과 같은 터치 입력기구 또는 손가락으로 입력 요청하는 것일 수 있다. 표시패널(122)은 제어부(140)가 전달하는 내용을 표시할 수 있다. 표시패널(122)은 텍스트에 대응되는 추천 미디어를 표시할 수 있다.
저장부(130)는 미디어 DB(131), 미디어 디스크립트 DB(132)를 포함하여 구성될 수 있다. 미디어 DB(131)는 이미지, 비디오, 이모티콘 등과 같은 영상 기반의 미디어를 저장할 수 있다. 또한, 미디어 디스크립트 DB(132)는 미디어 및 미디어에 대응되는 미디어 상세 정보를 저장할 수 있다. 여기서, 미디어 상세 정보는 미디어에 표시되는 각각의 오브젝트들의 상호관계를 서술한 정보, 오브젝트들의 위치정보, 오브젝트들의 카테고리 정보, 미디어가 생성된 날짜정보 등을 포함할 수 있다. 상기 미디어 DB(131)와 미디어 디스크립트 DB(132)는 서로 연동될 수 있다.
제어부(140)는 미디어 디스크립트 DB생성 모듈(141)을 포함하여 구성될 수 있다. 제어부(140)는 미디어 디스크립트 DB생성 모듈(141)을 통하여 텍스트에 대응되는 추천 미디어를 표시할 수 있다. 이에 관한 절차를 보다 상세히 설명하면, 제어부(140)는 미디어 DB(131)의 미디어가 갱신되면, 이를 분석할 수 있다. 제어부(140)는 미디어 분석 시, 미디어에 표시되는 오브젝트를 분류하고, 분류된 오브젝트를 더 이상 분류할 수 없으면, 고유한 ID형태로 오브젝트를 인식할 수 있다. 그리고 제어부(140)는 각각의 오브젝트의 상호관계를 서술할 수 있다. 예를 들면, 상호관계는 하나의 미디어(예를 들어, 이미지)에 표시되는 오브젝트가 두 개인 경우, 두 개의 오브젝트의 위치가 어디에 표시되는지 인식한 정보일 수 있다. 보다 상세하게 설명하면, 왼쪽에 A오브젝트, 오른쪽에 B오브젝트가 표시되는 이미지가 있다고 가정하자, 이 때, 상호관계는 ‘A오브젝트는 B오브젝트의 왼쪽에 위치하고, B오브젝트는 A오브젝트 오른쪽에 위치하고 있다’라고 인식할 수 있다. 이와 같이, 제어부(140)는 서술한 오브젝트의 상호관계를 미디어 디스크립트 DB(132)에 저장할 수 있다. 제어부(140)는 미디어를 분석한 미디어 상세 정보를 서술하여 미디어 디스크립트 DB(132)에 저장할 수 있다. 그리고제어부(140)는 텍스트가 입력되면, 텍스트와 미디어 디스크립트 DB(132)에 저장된 미디어를 비교할 수 있다. 이 때, 제어부(140)는 입력되는 텍스트와 저장된 미디어의 미디어 상세 정보를 비교할 수 있다. 비교 결과, 미디어 디스크립트 DB(132)에 저장된 미디어 중 입력된 텍스트에 대응되는 추천 미디어가 있으면, 제어부(140)는 추천된 미디어를 표시할 수 있다. 그리고 추천 미디어 선택을 감지하면, 제어부(140)는 선택에 따라 입력된 추천 미디어를 표시할 수 있다.
도 2는 다양한 실시 예에 따른 추천 미디어를 표시하기 위한 동작을 설명하기 위한 전자장치의 일부 구성을 나타낸 도면 이다.
도 1 및 도 2를 참조하면, 미디어 디스크립트 DB 생성 모듈(141)은 미디어 셀렉터(220), 입력 프로세서(230), 미디어 프로세서(240), 미디어 스캐너(250), 미디어 디스크립터(260)를 포함하여 구성될 수 있다.
미디어 DB(131)는 이미지, 비디오, 이모티콘 등과 같은 미디어를 저장할 수 있다. 이러한 미디어 DB(131)는 전자장치에 저장된 미디어, 클라우드(CLOUD)의 미디어, 인터넷의 오픈된 미디어를 포함할 수 있다. 또한, 미디어 DB(131)에 저장되는 미디어는 수정, 삭제, 삽입 등 갱신 될 수 있다.
미디어 스캐너(250)는 미디어 DB(131)를 계속하여 스캔할 수 있다. 그리고 미디어 DB(131)에 미디어가 갱신되면, 미디어 스캐너(250)은 갱신된 미디어를 미디어 프로세서(240)에 전송할 수 있다. 이와 같이 미디어 스캐너(250)는 항상 최신의 미디어 상태를 유지할 수 있도록 제어할 수 있다.
미디어 프로세서(240)는 인식부(241), 분류부(242)를 포함하여 구성될 수 있다. 또한, 미디어 프로세서(240)는 미디어 스캐너(250)로부터 수정이나 삽입 등 갱신된 미디어를 수신하면, 수신한 미디어를 분석할 수 있다. 미디어 분석 시, 미디어 프로세서(240)는 미디어가 포함하고 있는 적어도 하나 이상의 오브젝트를 분석할 수 있다. 이 때, 분류부(242)는 표시되는 오브젝트의 카테고리를 분류하고, 인식부(241)은 각각의 오브젝트의 고유성을 보장할 수 있도록 오브젝트에 대응되는 고유 ID형태로 인식할 수 있다. 카테고리를 분류할 때, 상위 레벨에서 하위 레벨로 더욱 상세하게 분류할 수 있다. 예를 들어, 이미지 한 장에 하나의 오브젝트(예를 들어, 강아지)가 표시된다고 가정한다. 분류부(242)는 상기 오브젝트를 동물 카테고리로 분류하고, 하위 레벨로 강아지 카테고리로 분류할 수 있다. 그리고 더 이상 하위 레벨이 없으면, 인식부(241)는 강아지 카테고리에 해당하는 오브젝트의 고유성을 보장할 수 있는 고유 ID형태로 인식할 수 있다. 그리고 미디어 프로세서(240)는 미디어를 분석한 미디어 상세 정보를 미디어 디스크립터(260)에 전송할 수 있다.
미디어 디스크립터(260)는 미디어 상세 정보를 수신하면, 미디어 상세 정보를 서술하여 미디어 디스크립트DB(132)에 전송할 수 있다. 미디어 상세 정보 서술 시, 미디어 스크립터(260)는 분석된 오브젝트들의 상호관계 및 위치정보를 함께 서술할 수 있다. 예들 들어, 위치정보는 이미지의 좌표값일 수 있다. 미디어 디스크립터(260)가 오브젝트들의 위치정보를 서술함으로써, 추후, 제어부(140)가 필요한 오브젝트의 일부분만 잘라서 사용할 수 있다.
미디어 디스크립트 DB(132)는 미디어 상세 정보를 미디어 디스크립터(260)로부터 수신하여 저장할 수 있다. 여기서, 미디어 상세 정보는 미디어에 표시되는 각각의 오브젝트들의 상호관계를 서술한 정보, 오브젝트들의 위치정보, 오브젝트들의 카테고리 정보, 미디어가 생성된 날짜정보를 포함할 수 있다. 미디어 디스크립트 DB(132)는 미디어 및 이에 대응되는 미디어 상세 정보를 저장하는 상태를 유지할 수 있다.
미디어 디스크립트 DB(132)에 서술된 미디어 상세 정보를 저장하는 상태에서, 제어부(140)는 사용자 입력(210,User Input)이 발생하는지 검사할 수 있다. 여기서, 사용자 입력(210)은 터치패널(121)을 통하여 이루어지는 텍스트 입력, 수정, 삭제 등일 수 있다.
입력 프로세서(230)는 사용자 입력(210)이 발생하면, 언어 컨버터(231), 문맥 컨버터(232), 문장 처리부(233)를 통하여 텍스트 입력을 처리할 수 있다. 언어 컨버터(231)는 비정상 단어가 입력되면, 이에 대응되는 정상단어로 변환할 수 있다. 예를 들어, 비정상 단어 ‘ㅋㅋㅋ’가 입력되면, 언어 컨버터(231)는 정상 단어 ‘웃음’으로 변환할 수 있다. 문맥 컨버터(232)는 문맥을 앞뒤로 분석하여, 대명사 또는 문맥 오류를 검출하면, 문맥을 교정할 수 있다. 예를 들어, 대명사 ‘나는’을 사용자 이름 ‘Alice’로 교정할 수 있다. 문장처리부(233)는 불완전한 문장이 입력되면, 완전한 문장으로 교정할 수 있다. 예를 들어, 불완전 문장 ‘어제 만난 강아지에게 배를 주었어’라는 문장이 입력되면, 완전 문장 ‘나는 어제 만난 강아지에게 배를 주었어’라는 완전한 문장으로 교정할 수 있다.
미디어 셀렉터(220)는 입력 프로세서(230)를 통하여 텍스트 입력을 처리한 이후, 상기 텍스트에 대응되는 추천 미디어가 미디어 디스크립트 DB(132)에 있는지 비교할 수 있다. 미디어 셀렉터(220)는 텍스트와 미디어의 미디어 상세 정보를 비교하여 텍스트에 대응하는 추천 미디어가 있는지 비교할 수 있다. 즉, 미디어 셀렉터(220)는 텍스트와 미디어 상세 정보가 포함하는 오브젝트들의 서술된 정보, 오브젝트들의 카테고리, 미디어 생성 날짜 등을 비교할 수 있다. 비교 결과, 텍스트에 대응되는 추천 미디어가 있으면, 미디어 셀렉터(220)는 추천 미디어를 표시할 수 있다. 추천 미디어를 표시할 때, 미디어 셀렉터(220)는 연관성, 최신성 및 사용자 기호(preference)을 기반으로 정렬하여 표시할 수 있다.
도 3은 본 발명의 실시 예에 따른 미디어 디스크립트DB의 구조의 예시를 나타낸 도면이다.
도 3을 참조하면, 제어부(140)는 미디어 디스크립트DB(132)에 미디어(예컨대, 이미지) 및 미디어 상세 정보를 저장할 수 있다. 여기서, 미디어 상세 정보는 미디어에 표시되는 각각의 오브젝트들의 상호관계를 서술한 정보, 오브젝트들의 위치정보, 오브젝트들의 카테고리 정보, 미디어가 생성된 날짜정보를 포함할 수 있다. 여기서, 오브젝트들의 카테고리 정보는 상위 레벨에서 하위 레벨로 분류하여 저장되는 정보일 수 있다. 예를 들어, 이미지(310)을 참조하면, 제어부(140)는 이미지(310)에 표시되는 오브젝트의 상호관계를 서술한 정보, 카테고리1, 카테고리2......등을 포함하여 저장할 수 있다. 이미지(310)에 해당하는 카테고리와 같이 카테고리는 상위레벨(예컨대, 동물)에서 하위레벨(예컨대, 강아지)로 분류하여 저장될 수 있다.
오브젝트들의 상호관계는 예를 들어, 이미지(320)에 표시되는 나무와 강아지 오브젝트가 서로 어디에 표시되는지 서술되는 정보일 수 있다. 예를 들어, 상호관계는 ‘나무 오른쪽에 강아지’, ‘강아지 왼쪽에 나무’ 등의 표현으로 서술될 수 있다. 또한, 이미지(330)을 참조하면, 제어부(140)는 이미지(330)에 대응되는 미디어 상세 정보를 저장할 수 있다. 여기서, 미디어정보는 카테고리를 포함하고, 카테고리는 단어 또는 문장으로 카테고리를 분류할 수 있다. 그리고, 단어로 카테고리를 분류하는 경우, 이미지(330)의 카테고리와 같이 명사, 동사, 형용사, 등으로 세분화되어 나누어질 수 있다.
도 4는 다양한 실시 예에 따른 미디어 디스크립트DB를 생성하는 과정을 나타낸 도면이다.
도 4를 참조하면, 제어부(140)는 401동작에서 미디어 스캐너(250)를 통하여 미디어가 갱신되는지 검사할 수 있다. 여기서, 미디어는 이미지, 비디오, 이모티콘 등과 같은 영상 기반 미디어이다. 미디어가 갱신되면, 제어부(140)는 403동작에서 미디어 프로세서(240)를 통하여 미디어를 분석할 수 있다.
도 5는 다양한 실시 예에 따른 미디어 디스크립트DB를 생성하기 위하여 미디어를 분석하는 과정을 나타낸 도면이다.
도 5를 참조하면, 제어부(140)는 501동작에서 1개의 오브젝트를 검출할 수 있다. 예를 들어, 제어부(140)는 제일 크거나 가장 가운데에 위치한 오브젝트를 우선적으로 인식할 수 있다. 제어부(140)는 503동작에서 분류부(242)를 통하여 검출한 하나의 오브젝트를 분류할 수 있다. 예를 들어, 하나의 오브젝트(예컨대, 강아지)를 검출하면, 강아지 카테고리 혹은 그보다 상위 카테고리인 동물 카테고리로 분류할 수 있다. 이후, 제어부(140)는 505동작에서 인식부(241)를 통하여 오브젝트의 고유성을 인식할 수 있도록 고유 ID형태로 인식할 수 있다. 이후, 제어부(140)는 507동작에서 오브젝트를 더 포함하는지 검사할 수 있다. 오브젝트를 더 포함하면, 제어부(140)는 501동작 이전으로 분기하여 오브젝트를 인식할 수 있다. 한편, 오브젝트를 더 포함하지 않으면, 도 4의 403동작으로 복귀할 수 있다.
제어부(140)는 도 5에서 상술한 과정을 통하여 미디어를 분석한 후, 미디어 스크립터(260)를 통하여 405동작에서 분석한 미디어 상세 정보를 서술할 수 있다. 여기서 서술되는 미디어 상세 정보는 도 3과 같이 미디어에 표시되는 오브젝트들의 위치정보, 오브젝트들의 상호관계, 미디어가 생성된 날짜, 오브젝트들의 카테고리 등을 포함할 수 있다. 이 후, 제어부(140)는 407동작에서 상기 서술된 미디어 상세 정보를 포함하는 미디어 디스크립트 DB(132)를 생성할 수 있다. 이 후, 제어부(140)는 409동작에서 미디어 디스크립트 DB(132)를 생성 종료인지 검사할 수 있다. 미디어 디스크립트 DB(132)를 생성 종료가 아니면, 제어부(140)는 401동작 이전으로 분기하여 미디어가 갱신되는지 검사하고 상술한 과정을 반복 수행한다. 한편, 미디어 디스크립트 DB(132)를 생성 종료이면, 미디어 디스크립트DB를 생성을 종료할 수 있다.
도 6은 다양한 일 실시 예에 따른 추천 미디어를 표시하는 과정을 나타낸 도면이다.
도 6을 참조하면, 제어부(140)는 601동작에서 텍스트가 입력되는지 검사할 수 있다. 텍스트가 입력되면, 제어부(140)는 603동작에서 입력프로세서(230)를 통하여 텍스트 입력을 처리할 수 있다.
도 7은 다양한 실시 예에 따른 입력을 처리하는 과정을 나타낸 도면이다.
도 7을 참조하면, 제어부(140)는 701동작에서 비정상 단어가 입력되는지 검사할 수 있다. 비정상 단어가 입력되면, 제어부(140)는 707동작에서 저장된 단어 중 비정상 단어에 대응되는 정상단어가 있는지 검사할 수 있다. 비정상 단어에 대응되는 정상단어가 있으면, 제어부(140)는 713동작에서 정상단어로 변환할 수 있다. 한편, 701동작에서 비정상 단어가 입력되지 않으면, 제어부(140)는 703동작에서 문맥의 오류를 검출할 수 있다. 문맥의 오류가 있으면, 제어부(140)는 709동작에서 문맥을 교정할 수 있다. 또한, 문맥 상 대명사 검출 시, 제어부(140)는 해당하는 단어로 교정할 수 있다. 한편, 703동작에서 문맥의 오류를 검출하지 않으면, 제어부(140)는 705동작에서 불완전한 문장이 입력되는지 검사할 수 있다. 불완전한 문장이 입력되면, 제어부(140)는 711동작에서 불완전한 문장을 완전한 문장으로 변환할 수 있다. 상술한 바와 같이, 제어부(140)는 텍스트 입력을 처리할 수 있다.
이후, 제어부(140)는 605동작에서 입력된 텍스트와 미디어 디스크립트 DB(132)에 저장된 미디어를 비교할 수 있다. 상기 텍스트와 상기 미디어를 비교할 때, 제어부(140)는 텍스트와 미디어 디스크립트 DB(132)의 미디어 상세 정보를 비교할 수 있다. 미디어 상세 정보는 미디어에 표시되는 각각의 오브젝트들의 상호관계를 서술한 정보, 오브젝트들의 위치정보, 오브젝트들의 카테고리 정보, 미디어가 생성된 날짜정보를 포함할 수 있다. 미디어 디스크립트 DB(132)는 미디어 DB(131)과 연동된 상태일 수 있다. 이후, 제어부(140)는 입력되는 텍스트와 미디어 상세정보가 일치하면, 607동작에서 추천 미디어가 존재한다고 한단할 수 있다. 예를 들어 도 3을 참고하여 설명하면, 사용자가 텍스트(강아지)를 입력했다고 가정한다. 이 때, 제어부(140)는 텍스트와 미디어 디스크립트 DB에 저장된 미디어 상세 정보를 비교할 수 있다. 미디어 상세 정보를 비교할 때, 제어부(140)는 하위 카테고리 및 상위 카테고리에서 비교를 수행할 수 있다. 여기서, 강아지에 대응하는 하위 카테고리는 ‘강아지 카테고리’ 일 수 있으며, 상위 카테고리는 ‘동물 카테고리’일 수 있다. 이에 따라, 입력된 텍스트 ‘강아지’와 이에 대응하는 카테고리에서 비교를 수행할 수 있다입력되는 텍스트와 대응되는 추천 미디어가 존재하면, 제어부(140)는 609동작에서 추천 미디어를 표시할 수 있다.
도 8a 내지 도8c는 다양한 실시 예에 따른 추천 미디어를 표시하는 예를 도시하는 도면이다.
도 8a는 입력되는 텍스트가 단어이면, 단어에 대응되는 추천 미디어를 표시하는 화면의 예시이다. 예를 들어, ‘I’m’이 입력을 검출하면, 제어부(140)는 ‘I’에 대응되는 사용자의 사진을 연관성, 최신성 및 사용자 기호(prefernce)를 기준으로 정렬하여 표시할 수 있다. 도 8a와 같이, 제어부(140)는 사용자가 찍힌 적어도 하나 이상의 추천 미디어를 정렬하여 표시할 수 있다. ‘I’에 대응되는 추천 미디어가 존재하면, 제어부(140)는 미디어(예컨대, 이미지)의 전체 영역 중 ‘I’에 해당하는 일부 영역만 검출하고, 상기 일부 영역을 표시할 수 있다. 미디어 상세 정보 저장 시, 미디어에 표시되는 오브젝트들의 위치정보를 포함하기 때문에 제어부(140)는 ‘I’오브젝트에 해당하는 일부 영역만 표시할 수 있다.
도 8b는 입력되는 텍스트가 문장인 경우, 단어 및 문장에 대응되는 추천 미디어를 표시하는 화면의 예시이다. 예를 들어, ‘I ate the spaghetti’입력을 검출하면, 제어부(140)는 ‘I’에 대응되는 추천 미디어, ‘spaghetti’에 대응되는 추천 미디어, ‘I, spaghetti’에 대응되는 적어도 하나의 추천 미디어를 정렬하고, 함께 표시할 수 있다.
도 8c는 입력되는 텍스트가 문장인 경우, 문장에 대응되는 추천 미디어를 표시하는 화면의 예시이다. 예를 들어, ‘He gave a pear to the puppy that he met yesterday in the park.’입력을 검출하면, 제어부(140)는 ‘he’, ‘gave’, ‘pear’, ‘puppy’, ‘yesterday’, ‘in the park’등으로 텍스트를 인식하고, 미디어 상세 정보에서 이러한 텍스트에 대응하는 오브젝트 하나 이상을 포함하는 미디어를 추천 미디어로 표시할 수 있다. 이 때, 텍스트에 대응되는 오브젝트를 많이 포함할수록 연관성이 높아질 수 있다.
적어도 하나 이상의 추천 미디어를 표시하는 상태에서 제어부(140)는 611동작에서 추천 미디어 선택을 감지하면, 613동작에서 선택된 추천 미디어를 입력하고, 이를 표시할 수 있다. 한편, 추천 미디어 선택을 감지하지 않으면, 제어부(140)는 617동작에서 입력되는 텍스트를 계속 표시할 수 있다. 이후, 제어부(140)는 615동작에서 텍스트 입력이 종료되는지 검사할 수 있다. 입력이 종료되지 않으면, 603동작 이전으로 분기하여 상기와 같은 과정을 반복 수행할 수 있다.
도9은 다양한 실시 예에 따른 추천 미디어를 표시하는 과정을 나타낸 도면이다. 도 10a 내지 도10b는 다양한 실시 예에 따른 추천 미디어를 표시하는 예를 도시하는 도면이다.
도 9 및 도 10a 내지 도 10b를 참조하면, 제어부(140)는 900동작에서 화면을 표시할 수 있다. 여기서, 화면은 갤러리 실행화면, 인터넷 실행화면, 저장된 이미지 표시 화면 등일 수 있다. 화면을 표시하는 상태에서 제어부(140)는 901동작에서 텍스트 검출 여부를 검사할 수 있다. 텍스트가 검출되면, 제어부(140)는 903동작에서 입력 프로세서(230)를 통하여 도 7과 같은 과정을 수행하여 텍스트를 처리할 수 있다. 이후, 제어부(140)는 905동작에서 텍스트와 미디어 디스크립트 DB(132)에 저장된 미디어를 비교할 수 있다. 텍스트에 대응되는 추천 미디어가 존재하면, 제어부(140)는 907동작에서 이를 감지하고, 909 동작에서 아이템을 표시할 수 있다. 여기서, 아이템은 텍스트에 대응되는 추천 미디어의 썸네일(thumbnail), 특정한 아이콘 등일 수 있다. 그리고 911동작에서 아이템 선택 감지 여부를 검사할 수 있다. 아이템 선택을 감지하면, 제어부(140)는 913동작에서 텍스트에 대응되는 추천 미디어를 표시할 수 있다. 한편, 아이템 선택을 감지하지 못하면, 제어부(140)는 917동작에서 해당 화면을 표시할 수 있다.
도 10a는 저장된 이미지를 표시하는 상태에서 ‘아빠’라는 텍스트를 검출하고, ‘아빠’에 대응되는 추천 미디어를 표시하는 화면의 예시이다. ‘아빠’라는 텍스트를 검출하면, 제어부(140)는 ‘아빠’와 미디어 디스크립트 DB(132)에 저장된 미디어를 비교한다. ‘아빠’와 대응되는 추천 미디어가 존재하면, 제어부(140)는 아이템(1001)을 표시할 수 있다. 이후, 아이템(1001)선택을 감지하면, 제어부(140)는 추천 미디어(1002)를 표시할 수 있다.
도 10b는 인터넷 실행화면을 표시하는 상태에서 ‘자유의 여신상’이라는 텍스트를 검출하여, ‘자유의 여신상’에 대응되는 추천 미디어를 표시하는 화면의 예시이다. 인터넷 실행화면에서 ‘자유의 여신상’을 검출하면, 제어부(140)는 ‘자유의 여신상’과 미디어 디스크립트 DB(132)에 저장된 미디어를 비교할 수 있다. 이후, ‘자유의 여신상’과 대응되는 추천 미디어가 있으면, 아이템(1001)을 표시할 수 있다. 그리고 아이템(1001) 선택을 감지하면, 제어부(140)는 ‘자유의 여신상’과 대응되는 추천 미디어(1003)을 표시할 수 있다. 예를 들어, 추천미디어(1003)는 사용자가 함께 찍힌 사진일 수 있다.
이후, 제어부(140)는 915동작에서 화면 표시 종료 여부를 검사한다. 화면 표시 종료가 아니면, 제어부(140)는 900동작 이전으로 분기하여 상기와 같은 과정을 반복 수행할 수 있다.
그리고 본 명세서와 도면에 개시된 실시 예들은 본 발명의 내용을 쉽게 설명하고, 이해를 돕기 위해 특정 예를 제시한 것일 뿐이며, 본 발명의 범위를 한정하고자 하는 것은 아니다. 따라서 본 발명의 범위는 여기에 개시된 실시 예들 이외에도 본 발명의 기술적 사상을 바탕으로 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
110: 무선통신부
120: 터치스크린
130: 저장부
140: 제어부

Claims (18)

  1. 전자장치에 있어서,
    입력되는 텍스트를 표시하는 동작;
    상기 입력되는 텍스트와 미디어 디스크립트DB에 저장된 미디어를 비교하는 동작;
    상기 저장된 미디어 중 상기 입력된 텍스트에 대응되는 추천 미디어를 표시하는 동작; 및
    상기 추천 미디어의 선택에 따라 입력된 추천 미디어를 표시하는 동작을 포함하는 방법.
  2. 제 1항에 있어서,
    상기 추천 미디어를 표시하는 동작은,
    상기 입력되는 텍스트가 단어이면, 상기 단어에 대응되는 추천 미디어를 표시하는 동작을 포함하는 방법.
  3. 제 1항에 있어서,
    상기 추천 미디어를 표시하는 동작은,
    상기 입력되는 텍스트가 문장이면, 상기 문장에 대응되는 추천 미디어를 표시하는 동작을 포함하는 방법.
  4. 제 1항에 있어서,
    상기 미디어 디스크립트DB에 저장된 미디어는 미디어 갱신 시, 상기 미디어를 분석한 미디어 상세 정보를 포함하는 동작을 포함하는 방법.
  5. 제 4항에 있어서,
    상기 미디어 상세 정보는 상기 미디어에 표시되는 적어도 하나의 오브젝트의 카테고리를 분류하고, 카테고리에 따라 분류된 각각의 오브젝트를 인식하여 상기 미디어에 표시되는 오브젝트의 상호관계를 서술한 것을 포함하는 방법.
  6. 제 5항에 있어서,
    상기 미디어 디스크립트 DB에 저장된 미디어를 비교하는 동작은,
    상기 텍스트와 미디어 상세 정보를 비교하는 동작을 포함하는 방법.
  7. 제 1항에 있어서,
    상기 입력되는 텍스트를 표시하는 동작은,
    입력 처리 동작을 포함하고,
    상기 입력 처리 동작은,
    비정상 단어를 정상 단어로 변환하고, 오류가 있는 문맥을 교정하고, 불완전한 문장을 완전한 문장으로 교정하는 동작을 포함하는 방법.
  8. 제 1항에 있어서,
    상기 추천 미디어를 표시하는 동작은,
    연관성,최신성과 사용자 기호(preference)를 기반으로 정렬하여 표시하는 동작을 포함하는 방법.
  9. 전자장치에 있어서,
    화면을 표시하는 동작;
    상기 화면에서 텍스트 검출 시, 상기 텍스트와 미디어 디스크립트DB에 저장된 미디어를 비교하는 동작;
    상기 저장된 미디어 중 상기 표시하는 텍스트에 대응되는 추천 미디어를 표시하는 동작; 및
    상기 추천 미디어 선택에 따라 입력된 추천 미디어를 표시하는 동작을 포함하여 이루어지는 방법.
  10. 전자장치에 있어서,
    입력되는 텍스트를 감지하는 터치패널과,
    상기 입력되는 텍스트 및 상기 텍스트에 대응되는 추천 미디어를 표시하는 표시패널과,
    상기 미디어 및 미디어 정보를 저장하는 저장부와,
    미디어 갱신 시, 상기 미디어를 분석하고, 상기 미디어를 분석한 미디어 상세 정보를 서술하여 상기 저장부에 저장하도록 제어하고, 텍스트 입력 시, 상기 텍스트에 대응되는 추천 미디어를 표시하고, 상기 표시되는 추천 미디어의 선택에 따라 입력된 추천 미디어를 표시하도록 제어하는 제어부를 포함하는 장치.
  11. 제 10항에 있어서,
    상기 저장부는,
    미디어를 저장하는 미디어DB와,
    상기 미디어를 분석한 미디어 상세 정보를 서술하고, 이를 저장하는 미디어 디스크립트DB를 포함하는 장치.
  12. 제 11항에 있어서,
    상기 제어부는,
    상기 미디어DB에서 미디어를 검색하여 새로운 미디어를 인식하면, 미디어 프로세서에 전송하는 미디어 스캐너;
    상기 미디어 스캐너로부터 새로운 미디어를 수신하면, 수신한 미디어를 분석한 미디어 상세 정보를 미디어 스크립터에 전송하는 미디어 프로세서;
    상기 미디어 프로세서로부터 수신한 미디어 상세 정보를 서술하여 미디어 디스크립트DB에 전송하는 미디어 디스크립터;
    텍스트 검출 시, 상기 미디어 디스크립트DB에서 상기 사용자 입력에 대응하는 추천 미디어를 표시하도록 제어하는 미디어 셀렉터;를 포함하는 미디어 디스크립트DB생성모듈을 포함하는 장치.
  13. 제 10항에 있어서,
    상기 제어부는,
    상기 텍스트가 단어이면, 상기 단어에 대응되는 추천 미디어를 표시하고, 상기 텍스트가 문장이면, 상기 문장에 대응되는 추천 미디어를 표시하도록 제어하는 것을 포함하는 장치.
  14. 제 10항에 있어서,
    상기 제어부는,
    상기 미디어의 오브젝트의 카테고리를 분류하고, 상기 카테고리에 따라 분류된 각각의 오브젝트를 인식하여 상기 미디어에 표시되는 오브젝트의 상호관계를 서술하여 상기 미디어 상세 정보로 저장하도록 제어하는 것을 포함하는 장치.
  15. 제 11항에 있어서,
    상기 제어부는,
    상기 텍스트 입력 시, 상기 텍스트와 상기 미디어 디스크립트DB에 저장된 미디어 상세 정보를 비교하도록 제어하는 것을 포함하는 장치.
  16. 제 11항에 있어서,
    상기 제어부는,
    상기 텍스트 입력 시, 비정상 단어를 정상 단어로 변환하고, 오류가 있는 문맥을 교정하고, 불완전한 문장을 완전한 문장으로 교정하는 입력 프로세서를 더 포함하는 장치.
  17. 제 10항에 있어서,
    상기 제어부는,
    연관성, 최신성 및 사용자 기호(preference)를 기반으로 정렬하여 추천 미디어를 표시하도록 제어하는 것을 포함하는 장치.
  18. 제 11항에 있어서,
    상기 제어부는,
    화면 표시 시, 표시하는 텍스트와 미디어 디스크립트DB에 저장된 미디어를 비교하고, 상기 저장된 미디어 중 상기 표시하는 텍스트에 대응되는 추천 미디어를 표시하도록 제어하는 것을 포함하는 장치.
KR1020140052368A 2014-04-30 2014-04-30 전자장치에서 미디어 추천 방법 및 장치 KR20150125287A (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020140052368A KR20150125287A (ko) 2014-04-30 2014-04-30 전자장치에서 미디어 추천 방법 및 장치
US14/701,330 US20150317315A1 (en) 2014-04-30 2015-04-30 Method and apparatus for recommending media at electronic device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140052368A KR20150125287A (ko) 2014-04-30 2014-04-30 전자장치에서 미디어 추천 방법 및 장치

Publications (1)

Publication Number Publication Date
KR20150125287A true KR20150125287A (ko) 2015-11-09

Family

ID=54355364

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140052368A KR20150125287A (ko) 2014-04-30 2014-04-30 전자장치에서 미디어 추천 방법 및 장치

Country Status (2)

Country Link
US (1) US20150317315A1 (ko)
KR (1) KR20150125287A (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190122331A (ko) * 2018-04-20 2019-10-30 삼성전자주식회사 문자를 입력하기 위한 전자 장치 및 그의 동작 방법
KR20220082139A (ko) 2020-12-09 2022-06-17 주식회사그린존시큐리티 보안 위험 예보를 기초로 컨텐츠를 추천하기 위한 장치 및 이를 위한 방법
US12019792B2 (en) 2021-03-15 2024-06-25 Samsung Electronics Co., Ltd. Electronic device for providing alternative content and operating method thereof

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9740963B2 (en) * 2014-08-05 2017-08-22 Sri International Multi-dimensional realization of visual content of an image collection

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070143307A1 (en) * 2005-12-15 2007-06-21 Bowers Matthew N Communication system employing a context engine
US20090271283A1 (en) * 2008-02-13 2009-10-29 Catholic Content, Llc Network Media Distribution
US8161071B2 (en) * 2009-09-30 2012-04-17 United Video Properties, Inc. Systems and methods for audio asset storage and management
US8358749B2 (en) * 2009-11-21 2013-01-22 At&T Intellectual Property I, L.P. System and method to search a media content database based on voice input data
US9774948B2 (en) * 2010-02-18 2017-09-26 The Trustees Of Dartmouth College System and method for automatically remixing digital music
KR101009973B1 (ko) * 2010-04-07 2011-01-21 김덕훈 미디어 컨텐츠 제공 방법, 그리고 그를 위한 장치
US9235806B2 (en) * 2010-06-22 2016-01-12 Primal Fusion Inc. Methods and devices for customizing knowledge representation systems
US9002835B2 (en) * 2013-08-15 2015-04-07 Google Inc. Query response using media consumption history
TWI521959B (zh) * 2013-12-13 2016-02-11 財團法人工業技術研究院 影片搜尋整理方法、系統、建立語意辭組的方法及其程式儲存媒體
US9430573B2 (en) * 2014-01-14 2016-08-30 Microsoft Technology Licensing, Llc Coherent question answering in search results

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190122331A (ko) * 2018-04-20 2019-10-30 삼성전자주식회사 문자를 입력하기 위한 전자 장치 및 그의 동작 방법
US11501069B2 (en) 2018-04-20 2022-11-15 Samsung Electronics Co., Ltd Electronic device for inputting characters and method of operation of same
KR20220082139A (ko) 2020-12-09 2022-06-17 주식회사그린존시큐리티 보안 위험 예보를 기초로 컨텐츠를 추천하기 위한 장치 및 이를 위한 방법
US12019792B2 (en) 2021-03-15 2024-06-25 Samsung Electronics Co., Ltd. Electronic device for providing alternative content and operating method thereof

Also Published As

Publication number Publication date
US20150317315A1 (en) 2015-11-05

Similar Documents

Publication Publication Date Title
US20240078386A1 (en) Methods and systems for language-agnostic machine learning in natural language processing using feature extraction
US20220006768A1 (en) Detecting messages with offensive content
CN107766426B (zh) 一种文本分类方法、装置及电子设备
US20210004405A1 (en) Enhancing tangible content on physical activity surface
US20160294755A1 (en) Detecting messages with offensive content
US7694214B2 (en) Multimodal note taking, annotation, and gaming
US10846475B2 (en) Emoji input method and device thereof
WO2015185019A1 (zh) 一种基于语义理解的表情输入方法和装置
US20140056475A1 (en) Apparatus and method for recognizing a character in terminal equipment
KR101756042B1 (ko) 입력 처리 방법, 장치 및 설비
US20140156277A1 (en) Information processing device and content retrieval method
CN101561725B (zh) 一种手写快速输入的方法和系统
CN105518657A (zh) 信息处理设备、信息处理方法及程序
KR20150125287A (ko) 전자장치에서 미디어 추천 방법 및 장치
US20200202068A1 (en) Computing apparatus and information input method of the computing apparatus
US20140258852A1 (en) Detection and Reconstruction of Right-to-Left Text Direction, Ligatures and Diacritics in a Fixed Format Document
KR20150027885A (ko) 전자 필기 운용 방법 및 이를 지원하는 전자 장치
US9501220B2 (en) Device and method for extracting data on a touch screen
US20210133287A1 (en) Intelligent subject line suggestions and reformulation
CN114090766A (zh) 视频文本筛选方法、装置及电子设备
CN113869063A (zh) 数据推荐方法、装置、电子设备及存储介质
KR101769981B1 (ko) 이미지를 이용한 번역문 제공 방법, 사용자 단말, 서버, 시스템 및 컴퓨터 프로그램
CN107908792B (zh) 信息推送方法和装置
KR101789234B1 (ko) 데이터 태깅 장치, 그의 데이터 태깅 방법 및 데이터 검색 방법
US12001669B2 (en) Searching for write information corresponding to a feature of an image

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid