KR20190070576A - 개인의 감정에 따른 맞춤형 미디어 서비스를 제공하는 장치 및 방법 - Google Patents

개인의 감정에 따른 맞춤형 미디어 서비스를 제공하는 장치 및 방법 Download PDF

Info

Publication number
KR20190070576A
KR20190070576A KR1020170171231A KR20170171231A KR20190070576A KR 20190070576 A KR20190070576 A KR 20190070576A KR 1020170171231 A KR1020170171231 A KR 1020170171231A KR 20170171231 A KR20170171231 A KR 20170171231A KR 20190070576 A KR20190070576 A KR 20190070576A
Authority
KR
South Korea
Prior art keywords
segment
information
field
metadata
scene
Prior art date
Application number
KR1020170171231A
Other languages
English (en)
Other versions
KR102016758B1 (ko
Inventor
이석필
변성우
Original Assignee
상명대학교산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 상명대학교산학협력단 filed Critical 상명대학교산학협력단
Priority to KR1020170171231A priority Critical patent/KR102016758B1/ko
Publication of KR20190070576A publication Critical patent/KR20190070576A/ko
Application granted granted Critical
Publication of KR102016758B1 publication Critical patent/KR102016758B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43—Querying
    • G06F16/435—Filtering based on additional data, e.g. user or group profiles
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services

Abstract

본 발명에 따른 개인의 감정에 따른 맞춤형 미디어 서비스를 제공하는 방법은 멀티미디어 콘텐츠를 수신하는 단계; 빅데이터 기반의 학습 알고리즘에 기초하여 상기 멀티미디어 콘텐츠에 포함된 객체의 감정을 분석하고 표준 평가지표에 따라 매칭한 감정 정보를 메타데이터에 인덱싱하는 단계; 사용자 단말로부터 수신한 데이터에 기초하여 사용자의 감정 정보를 분석하는 단계 및 상기 분석된 사용자의 감정 정보에 대응되는 멀티미디어 콘텐츠 또는 상기 멀티미디어 콘텐츠의 장면을 상기 메타데이터에 기초하여 검색 및 제공하는 단계를 포함한다.

Description

개인의 감정에 따른 맞춤형 미디어 서비스를 제공하는 장치 및 방법{SYSTEM AND METHOD FOR PROVIDING PRIVATE MULTIMEDIA SERVICE BASED ON PERSONAL EMOTIONS}
본 발명은 개인의 감정에 따른 맞춤형 미디어 서비스를 제공하는 장치 및 방법에 관한 것이다.
TV-Anytime은 개인용 대용량 저장매체를 갖는 사용자 환경에서 오디오 비주얼 관련 서비스 제공을 위한 표준 개발을 목적으로 하는 국제 민간 표준 기구이다.
이러한 TV-Anytime은 모든 사용자가 개인용 저장장치를 기반으로 자기가 원하는 방법으로 원하는 시간에 다양한 형태(기존의 방송 서비스 및 온라인 대화형 서비스 등)의 프로그램을 시청할 수 있게 하는 것을 그 구체적인 서비스 목표로 하였으며, 궁극적으로는 실시간 방송과 인터넷이 결합된 형태의 통합 서비스 환경에서의 관련 표준 개발을 지향한다.
한편, TV Anytime은 국제 맞춤형 방송 서비스 규격으로 메타데이터 표준을 정의한다. 이는 Anytime 서비스를 위한 콘텐츠 개발사에서부터 가전기기에 이르는 분야에서 상호 정보 교환이 가능한 규격을 만드는 것을 목적으로 한다.
그러나 종래 TV Anytime에서는 등장 인물의 대한 감정 정보에 대한 메타데이터를 정의하고 있지 않아, 해당 메타데이터를 이용하여 사용자의 감정 정보에 대응되는 멀티미디어 콘텐츠를 제공받지 못하고 있는 실정이다.
본 발명의 실시예는 TV Anytime 규격에 있어서 해당 장면에 등장하는 객체의 감정 정보를 분석하여 메타데이터에 인덱싱함으로써, 사용자의 감정 정보에 부합하는 멀티미디어 콘텐츠 또는 장면을 검색 및 제공할 수 있는 맞춤형 미디어 서비스 제공 장치 및 방법을 제공하고자 한다.
다만, 본 실시예가 이루고자 하는 기술적 과제는 상기된 바와 같은 기술적 과제로 한정되지 않으며, 또 다른 기술적 과제들이 존재할 수 있다.
상술한 기술적 과제를 달성하기 위한 기술적 수단으로서, 본 발명의 제 1 측면에 따른 개인의 감정에 따른 맞춤형 미디어 서비스를 제공하는 방법은 멀티미디어 콘텐츠를 수신하는 단계; 빅데이터 기반의 학습 알고리즘에 기초하여 상기 멀티미디어 콘텐츠에 포함된 객체의 감정을 분석하고 표준 평가지표에 따라 매칭한 감정 정보를 메타데이터에 인덱싱하는 단계; 사용자 단말로부터 수신한 데이터에 기초하여 사용자의 감정 정보를 분석하는 단계 및 상기 분석된 사용자의 감정 정보에 대응되는 멀티미디어 콘텐츠 또는 상기 멀티미디어 콘텐츠의 장면을 상기 메타데이터에 기초하여 검색 및 제공하는 단계를 포함한다.
상기 메타데이터는 상기 멀티미디어 콘텐츠에 대해 기술된 프로그램 정보 테이블 메타데이터와, 상기 멀티미디어 콘텐츠의 스트림 내의 일정 구간을 정의하고 접근이 가능하도록 구성된 세그먼트에 대한 세그먼트 정보 테이블 메타데이터를 포함할 수 있다.
상기 프로그램 정보 테이블 메타데이터는 장면 번호 필드, 각 해당 장면에 대한 타이틀 필드, 각 해당 장면의 대표이미지에 대한 파일 타이틀 필드, 해당 장면에 대한 설명 필드 및 해당 장면에 등장하는 객체들의 정보가 리스트 형태로 저장된 리스트 필드를 포함할 수 있다.
상기 세그먼트 정보 테이블 메타데이터는 해당 장면에 대한 세그먼트 정보 및 세그먼트 그룹 정보가 각각 리스트 형태로 저장된 세그먼트 정보 메타데이터와 세그먼트 그룹 정보 메타데이터를 포함할 수 있다.
상기 세그먼트 정보 메타데이터는 세그먼트 ID 필드, 세그먼트 위치 필드, 세그먼트 대표이미지에 대한 URL 정보 필드, 해당 세그먼트의 객체 ID 정보가 저장된 객체 ID 필드 및 상기 해당 세그먼트의 객체의 감정 정보가 저장된 감정 정보 필드를 포함하는 것인 맞춤형 미디어 서비스 제공 방법.
상기 객체 ID 필드는 상기 프로그램 정보 테이블 메타데이터의 리스트 필드에 포함된 객체의 정보 및 해당 객체의 ID와 상호 연결되어 사용될 수 있다.
상기 세그먼트는 해당 장면에 등장하는 하나 이상의 객체와 대응되도록 생성될 수 있다.
또한, 본 발명의 제 2 측면에 따른 개인의 감정에 따른 맞춤형 미디어 서비스를 제공하는 장치는 사용자 단말로부터 사용자의 감정 정보를 수신하는 통신모듈, 상기 사용자의 감정 정보에 대응하는 멀티미디어 콘텐츠를 검색 및 제공하기 위한 프로그램이 저장된 메모리 및 상기 메모리에 저장된 프로그램을 실행시키는 프로세서를 포함한다. 이때, 상기 프로세서는 상기 프로그램을 실행시킴에 따라, 빅데이터 기반의 학습 알고리즘에 기초하여 멀티미디어 콘텐츠에 포함된 객체의 감정을 분석하고, 분석된 감정을 표준 평가지표에 따라 매칭시킴에 따라 감정 정보로 생성하여 메타데이터에 인덱싱하며, 기 인덱싱된 메타데이터에 기초하여 상기 사용자의 감정 정보에 대응하는 멀티미디어 콘텐츠 또는 상기 멀티미디어 콘텐츠의 장면을 검색 및 제공하되, 상기 메타데이터에는 상기 멀티미디어 콘텐츠의 스트림 내의 일정 구간을 정의하고 접근이 가능하도록 구성된 세그먼트에 대한 객체 ID 정보가 저장된 객체 ID 필드 및 상기 해당 세그먼트의 객체의 감정 정보가 저장된 감정 정보 필드가 포함된다.
상기 메타데이터는 상기 멀티미디어 콘텐츠에 대해 기술된 프로그램 정보 테이블 메타데이터와, 상기 세그먼트에 대한 세그먼트 정보 테이블 메타데이터를 포함할 수 있다.
상기 세그먼트 정보 테이블 메타데이터는 해당 장면에 대한 세그먼트 정보 및 세그먼트 그룹 정보가 각각 리스트 형태로 저장된 세그먼트 정보 메타데이터와 세그먼트 그룹 정보 메타데이터를 포함할 수 있다. 이때, 상기 세그먼트는 해당 장면에 등장하는 하나 이상의 객체와 대응되도록 생성될 수 있다.
상기 세그먼트 정보 메타데이터는 세그먼트 ID 필드, 세그먼트 위치 필드, 세그먼트 대표이미지에 대한 URL 정보 필드, 상기 객체 ID 필드 및 상기 감정 정보 필드를 포함할 수 있다.
상기 객체 ID 필드는 상기 프로그램 정보 테이블 메타데이터의 리스트 필드에 포함된 객체의 정보 및 해당 객체의 ID와 상호 연결되어 사용될 수 있다.
전술한 본 발명의 과제 해결 수단 중 어느 하나에 의하면, TV Anytime 규격에 있어서 객체에 대한 세그먼트 정보에 감정 정보를 확장한 메타데이터 타입을 규정함으로써, 사용자의 감정에 따라 멀티미디어 콘텐츠 또는 멀티미디어 콘텐츠에 포함된 해당 장면을 용이하게 검색하여 사용자 단말에게 제공할 수 있는 맞춤형 미디어 서비스를 제공할 수 있다.
도 1은 본 발명의 일 실시예에 따른 맞춤형 미디어 서비스 제공 장치를 설명하기 위한 도면이다.
도 2는 본 발명의 일 실시예에 따른 미디어 서비스 제공 장치의 블록도이다.
도 3은 본 발명의 일 실시예에서의 메타데이터 예시를 설명하기 위한 도면이다.
도 4는 본 발명의 일 실시예에 따른 맞춤형 미디어 서비스 제공 방법의 순서도이다.
도 5는 메타데이터의 구조를 설명하기 위한 도면이다.
도 6은 프로그램 정보 테이블 메타데이터를 설명하기 위한 도면이다.
도 7은 세그먼트 정보 테이블 메타데이터를 설명하기 위한 도면이다.
아래에서는 첨부한 도면을 참조하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 본 발명의 실시예를 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였다.
명세서 전체에서 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.
본 발명의 일 실시예는 개인의 감정에 따른 맞춤형 미디어 서비스를 제공하는 장치(100) 및 방법에 관한 것이다.
일반적으로, 맞춤형 미디어 서비스는 프로그램의 정보들을 모아놓은 메타데이터를 이용하여 사용자가 원하는 프로그램을 시간 제약없이 검색 및 시청할 수 있도록 한다.
사용자는 자신이 원하는 정보를 얻기 위해 데이터를 입력하면, 맞춤형 미디어 서비스는 입력한 데이터를 바탕으로 맞춤형 미디어 서비스를 위한 메타데이터를 검색하고, 그 결과를 근거로 서비스를 제공하게 된다.
본 발명의 일 실시예는 이에 더 나아가, TV Anytime을 규격으로 하는 기존의 맞춤형 미디어 서비스에는 제공되지 않던, 객체에 대한 세그먼트 정보에 감정 정보를 확장한 메타데이터 타입을 규정함으로써, 사용자의 감정에 따라 멀티미디어 콘텐츠 또는 멀티미디어 콘텐츠에 포함된 해당 장면을 검색 및 제공할 수 있다.
즉, 영화나 드라마와 같은 멀티미디어 콘텐츠 상에서 등장하는 객체나 장면의 감정과, 이를 시청하는 사용자의 감정을 매칭하여 멀티미디어 콘텐츠나 해당 장면을 제공해줄 수 있다.
이하에서는 도 1 내지 도 3을 참조하여 본 발명의 일 실시예에 따른 맞춤형 미디어 콘텐츠 제공 장치(100)에 대해 설명하도록 한다.
도 1은 본 발명의 일 실시예에 따른 맞춤형 미디어 서비스 제공 장치(100)를 설명하기 위한 도면이다. 도 2는 본 발명의 일 실시예에 따른 미디어 서비스 제공 장치(100)의 블록도이다. 도 3은 본 발명의 일 실시예에서의 메타데이터 예시를 설명하기 위한 도면이다.
도 1에 도시된 바와 같이, 본 발명의 일 실시예에 따른 맞춤형 미디어 서비스 제공 장치(100)는 사용자 단말(200), 댁내 전자기기(300)와 네트워크(network)를 통해 연결될 수 있다.
네트워크는 단말들 및 서버들과 같은 각각의 노드 상호 간에 정보 교환이 가능한 연결 구조를 의미하는 것으로, 이러한 네트워크(network)의 일 예에는 3GPP(3rd Generation Partnership Project) 네트워크, LTE(Long Term Evolution) 네트워크, WIMAX(World Interoperability for Microwave Access) 네트워크, 인터넷(Internet), LAN(Local Area Network), Wireless LAN(Wireless Local Area Network), WAN(Wide Area Network), PAN(Personal Area Network), 블루투스(Bluetooth) 네트워크, 위성 방송 네트워크, 아날로그 방송 네트워크, DMB(Digital Multimedia Broadcasting) 네트워크, WiFi 등이 포함되나 이에 한정되지는 않는다.
도 2에 도시된 바와 같이, 본 발명의 일 실시예에 따른 맞춤형 미디어 서비스 제공 장치(100)는 통신모듈, 메모리(120) 및 프로세서(130)를 포함한다.
통신모듈(110)은 사용자 단말(200)로부터 사용자의 감정 정보를 수신한다. 이러한 통신모듈(110)은 유선 통신 모듈 및 무선 통신 모듈을 모두 포함할 수 있다. 유선 통신 모듈은 전화선 통신 장치, 케이블 홈(MoCA), 이더넷(Ethernet), IEEE1294, 통합 유선 홈 네트워크 및 RS-485 제어 장치로 구현될 수 있다. 또한, 무선 통신 모듈은 WLAN(wireless LAN), Bluetooth, HDR WPAN, UWB, ZigBee, Impulse Radio, 60GHz WPAN, Binary-CDMA, 무선 USB 기술 및 무선 HDMI 기술 등으로 구현될 수 있다.
메모리(120)에는 사용자의 감정 정보에 대응하는 멀티미디어 콘텐츠를 검색 및 제공하기 위한 프로그램이 저장된다. 여기에서, 메모리(120)는 전원이 공급되지 않아도 저장된 정보를 계속 유지하는 비휘발성 저장장치 및 휘발성 저장장치를 통칭하는 것이다.
예를 들어, 메모리(120)는 콤팩트 플래시(compact flash; CF) 카드, SD(secure digital) 카드, 메모리 스틱(memory stick), 솔리드 스테이트 드라이브(solid-state drive; SSD) 및 마이크로(micro) SD 카드 등과 같은 낸드 플래시 메모리(NAND flash memory), 하드 디스크 드라이브(hard disk drive; HDD) 등과 같은 마그네틱 컴퓨터 기억 장치 및 CD-ROM, DVD-ROM 등과 같은 광학 디스크 드라이브(optical disc drive) 등을 포함할 수 있다.
프로세서(130)는 메모리(120)에 저장된 프로그램을 실행시킴에 따라, 빅데이터 기반의 학습 알고리즘에 기초하여 멀티미디어 콘텐츠에 포함된 객체의 감정을 분석한다.
그리고 프로세서(130)는 분석된 감정을 표준 평가지표에 따라 매칭시킨 감정 정보로 생성하여 메타데이터에 인덱싱한 다음 인덱싱된 메타데이터에 기초하여 사용자의 감정 정보에 대응하는 멀티미디어 콘텐츠 또는 멀티미디어 콘텐츠의 장면을 검색 및 사용자 단말로 제공한다.
한편, 본 발명의 일 실시예에서 메타데이터에는 멀티미디어 콘텐츠의 스트림 내의 일정 구간을 정의하고 접근이 가능하도록 구성된 세그먼트에 대한 객체 ID 정보가 저장된 객체 ID 필드 및 상기 해당 세그먼트의 객체의 감정 정보가 저장된 감정 정보 필드가 포함되는 것을 특징으로 한다.
즉, 도 3과 같이 멀티미디어 콘텐츠의 메타데이터에는 콘텐츠를 식별하기 위한 번호(1)와, 해당 객체의 ID(1-1, 1-2) 및 감정 정보가 저장된 세그먼트 필드(1-1-1, 1-2-1)가 포함되어 있다.
한편, 사용자 단말(200)은 사용자 인터페이스를 통해 사용자의 감정 정보를 입력받아 맞춤형 미디어 서비스 제공 장치(100)로 전송한다. 이때, 사용자의 감정 정보는 사용자로부터 텍스트, 음성으로 직접 입력받아 전달될 수 있다. 또는, 사용자로부터 영상, 사진을 통해서 입력받거나, SNS, 생체 신호 등을 수집하고 이를 빅데이터 기반의 학습된 알고리즘에 기초하여 감정 정보로 분석하여 전달될 수 있다.
이와 같은 사용자 단말(200)은 사용자가 원하는 다수의 응용 프로그램(즉, 애플리케이션)을 설치하여 실행할 수 있는 휴대폰, 스마트 폰(smart phone), 패드(Pad), 스마트 워치(Smart watch), 웨어러블(wearable) 단말, 기타 이동통신 단말 등일 수 있다. 또한, 스마트 TV, 월패드 등과 같이 스마트 기기들이 이에 해당할 수 있다.
이와 더불어, 본 발명의 일 실시예에 따른 맞춤형 미디어 서비스 제공 장치(100)는 사용자의 감정 정보에 대응하는 멀티미디어 콘텐츠나 해당 장면을 검색하여 사용자 단말(200)로 제공함에 있어, 해당 장면 또는 해당 감정 정보에 매칭되도록 댁내의 기기(300)를 제어할 수 있다.
이러한 댁내의 기기(300)에는 에어컨, 전등 스위치, TV, 전동 커튼, 오디오 등이 이에 해당할 수 있다.
참고로, 본 발명의 실시예에 따른 도 2에 도시된 구성 요소들은 소프트웨어 또는 FPGA(Field Programmable Gate Array) 또는 ASIC(Application Specific Integrated Circuit)와 같은 하드웨어 형태로 구현될 수 있으며, 소정의 역할들을 수행할 수 있다.
그렇지만 '구성 요소들'은 소프트웨어 또는 하드웨어에 한정되는 의미는 아니며, 각 구성 요소는 어드레싱할 수 있는 저장 매체에 있도록 구성될 수도 있고 하나 또는 그 이상의 프로세서들을 재생시키도록 구성될 수도 있다.
따라서, 일 예로서 구성 요소는 소프트웨어 구성 요소들, 객체지향 소프트웨어 구성 요소들, 클래스 구성 요소들 및 태스크 구성 요소들과 같은 구성 요소들과, 프로세스들, 함수들, 속성들, 프로시저들, 서브루틴들, 프로그램 코드의 세그먼트들, 드라이버들, 펌웨어, 마이크로 코드, 회로, 데이터, 데이터베이스, 데이터 구조들, 테이블들, 어레이들 및 변수들을 포함한다.
구성 요소들과 해당 구성 요소들 안에서 제공되는 기능은 더 작은 수의 구성 요소들로 결합되거나 추가적인 구성 요소들로 더 분리될 수 있다.
이하에서는 도 4 내지 도 7을 참조하여 본 발명의 일 실시예에 따른 맞춤형 미디어 서비스 제공 장치(100)에서 수행되는 방법을 구체적으로 설명하도록 한다.
도 4는 본 발명의 일 실시예에 따른 맞춤형 미디어 서비스 제공 방법의 순서도이다. 도 5는 메타데이터의 구조를 설명하기 위한 도면이다. 도 6은 프로그램 정보 테이블 메타데이터를 설명하기 위한 도면이다. 도 7은 세그먼트 정보 테이블 메타데이터를 설명하기 위한 도면이다.
본 발명의 일 실시예에 따른 맞춤형 미디어 서비스 제공 방법은 먼저, 멀티미디어 콘텐츠를 수신하면(S110), 빅데이터 기반의 학습된 알고리즘에 기초하여 멀티미디어 콘텐츠에 포함된 객체의 감정 정보를 분석하고 표준 평가 지표에 따라 매칭한 감정 정보를 메타데이터에 인덱싱한다(S120).
다음으로, 사용자 단말(200)로부터 수신한 데이터에 기초하여 사용자의 감정 정보를 분석하고(S130), 분석된 사용자의 감정 정보에 대응되는 멀티미디어 콘텐츠 또는 멀티미디어 콘텐츠의 장면을 메타데이터에 기초하여 검색한 뒤 사용자 단말(200)로 제공한다(S140).
이를 위해 본 발명의 일 실시예에서의 메타데이터는 도 5 및 표 1과 같이 프로그램 정보 테이블 메타데이터(ProgramInformation Table)와 세그먼트 정보 테이블 메타데이터(SegmantInformation Table)를 포함하도록 구성될 수 있다.
이때, 프로그램 정보 테이블 메타데이터는 멀티미디어 콘텐츠에 대해 기술된 것이고, 세그먼트 정보 테이블 메타데이터는 멀티미디어 콘텐츠의 스트림 내의 일정 구간을 정의하고 접근이 가능하도록 구성된 것이다.
데이터 필드 비고/예제 설명
ProgramInformationTable ProgramInformation 멀티미디어 콘텐츠에 대해 기술한 메타데이터 필드
SegmentInformationTable SegmentInformation 멀티미디어 콘텐츠의 일부분(Segment)에 대해 기술한 메타데이터 필드
상기 프로그램 정보 테이블 메타데이터는 도 6의 (a) 및 표 2와 같이, 장면 번호 필드(Scene_num), 각 해당 장면에 대한 타이틀 필드(Title), 각 해당 장면의 대표이미지에 대한 파일 타이틀 필드(MediaTitle), 해당 장면에 대한 설명 필드(Synopsis) 및 해당 장면에 등장하는 객체들의 정보가 리스트 형태로 저장된 리스트 필드(CreditsList, 도 6의 (b))를 포함할 수 있다.
데이터 필드 비고/예제 설명
Scene_num 1 멀티미디어 콘텐츠의 장면에 대한 식별 번호
Title 2013 수영 선수권 대회 해당 장면에 대한 이름 필드
MediaTitle Media_Title.jpg 해당 장면 대표이미지에 대한 파일 이름 필드
Synopsis 2013년 세계 수영 선수권 대회 결승전 해당 장면 설명에 대한 필드
CreditsList CreditsItem 현재 장면에 등장하는 객체들의 정보로, 등장하는 객체에 따라 리스트 형태로 저장됨
상기 세그먼트 정보 테이블 메타데이터는 도 7의 (a) 및 표 3과 같이, 해당 장면에 대한 세그먼트 정보 및 세그먼트 그룹 정보가 각각 리스트 형태로 저장된 세그먼트 정보 메타데이터(SegmentList)와 세그먼트 그룹 정보 메타데이터(SegmentGroupList)를 포함할 수 있다.
데이터 필드 비고/예제 설명
SegmentList SegmentInformation 현재 장면에 대한 세그먼트 정보를 리스트 형태로 저장하는 메타데이터 필드
SegmentGroupList SegmentGroupInformation 현재 장면에 대한 세그먼트 그룹 정보를 리스트 형태로 저장하는 메타데이터 필드
상기 세그먼트 정보 메타데이터는 도 7의 (b) 및 표 4와 같이 세그먼트 ID 필드(segmentID), 세그먼트 위치 필드(segmentLocator), 세그먼트 대표이미지에 대한 URL 정보 필드(KeyFrameLocator), 해당 세그먼트의 객체 ID 정보가 저장된 객체 ID 필드(PersonNameIDRef) 및 상기 해당 세그먼트의 객체의 감정 정보가 저장된 감정 정보 필드(Emotion)를 포함할 수 있다.
데이터 필드 비고/예제 설명
SegmentID 1 세그먼트에 대한 식별 번호인 세그먼트 ID 필드
segmentLocator Time 0 영상 내에 세그먼트의 위치를 알려주는 필드
696
Frame 0
200
keyFrameLocator /web_external/1/segment/segment1.jpg 세그먼트 대표 이미지에 대한 위치 URL 정보를 저장하는 필드
PersonNameIDRef 1 해당 세그먼트에 등장하는 객체에 대한 ID 정보를 저장하는 필드
Emotion Angry 세그먼트에 등장하는 객체의 감정 정보가 저장된 필드
여기에서 세그먼트 ID 필드는 segmentInformationType의 요소 값으로 정의될 수 있다. 그리고 세그먼트 위치 필드의 하위부분에는 시간에 대한 정보 및 프레임에 대한 정보가 포함되어 있다. 이때, 시간에 대한 정보는 ms단위로 저장될 수 있고, 프레임에 대한 정보는 각 프레임의 번호로 저장될 수 있다.
URL 정보 필드는 맞춤형 미디어 서비스 제공 장치(100)의 URL에 대한 절대 경로가 저장되며, 객체 ID 필드는 상기 프로그램 정보 메타데이터의 리스트 필드에 포함된 객체의 정보 및 해당 객체의 ID와 상호 연결되어 사용될 수 있다.
마지막으로 감정 정보 필드는 세그먼트에 등장하는 객체의 감정 정보가 저장된 필드에 해당한다.
상기 세그먼트 그룹 정보 메타데이터(SegmentGroupList)는 도 7의 (c) 및 표 5와 같이, 그룹 ID 필드(groupID) 및 세그먼트 ID 정보 저장 필드(Segments)를 포함한다.
데이터 필드 비고/예제 설명
groupId 1 세그먼트 그룹에 대한 식별 번호인 그룹 ID 필
segments 1 2 3 세그먼트에 속한 세그먼트의 ID에 대한 정보를 저장하는 필드
이때, 그룹 ID 필드는 SegmentGroupInformationType의 요소 값으로 정의될 수 있다. 또한, 세그먼트 ID 정보 저장 필드는 현재 카메라 영상에서 출력중인 세그먼트에 대응되는 것으로서, 해당 세그먼트의 ID를 나타낸다.
한편, 본 발명의 일 실시예에서 세그먼트는 해당 장면에 등장하는 하나 이상의 객체와 대응되도록 메타데이터로 생성될 수 있다.
예를 들어, 멀티미디어 콘텐츠의 하나의 장면에 등장하는 객체(등장인물)가 여러 명인 경우, 각 객체들은 별도의 세그먼트로 관리될 수 있다. 즉, 하나의 장면에 대하여 ‘등장인물 1’, ‘등장인물 2’, ‘등장인물 3’이 나오는 경우, ‘세그먼트 1’, ‘세그먼트 2’, ‘세그먼트 3’으로 관리될 수 있다. 이에 따라, 해당 씬에서 ‘등장인물 1’의 감정이 기쁨(1), 슬픔(2)을 가지고 있는 것으로 분석되어 표준 평가지표에 따라 정의될 경우, ‘세그먼트 1-1’, ‘세그먼트 1-2’와 같은 형태로 메타데이터에 인덱싱할 수 있다.
이와 같이 본 발명의 일 실시예는 세그먼트가 각 객체별로 생성 및 관리됨에 따라, 사용자의 감정 정보와 매칭되는 멀티미디어 콘텐츠를 검색하거나 해당 장면을 검색시 메타데이터의 세그먼트 정보를 이용하여 검색함으로써, 사용자의 감정 정보에 매칭되는 맞춤형 미디어 서비스를 제공할 수 있게 된다.
상술한 설명에서, 단계 S410 내지 S140은 본 발명의 구현예에 따라서, 추가적인 단계들로 더 분할되거나, 더 적은 단계들로 조합될 수 있다. 또한, 일부 단계는 필요에 따라 생략될 수도 있고, 단계 간의 순서가 변경될 수도 있다. 아울러, 기타 생략된 내용이라 하더라도 도 1 내지 도 3에서의 맞춤형 미디어 서비스 제공 장치(100)에 관하여 이미 기술된 내용은 도 4 내지 도 7의의 맞춤형 미디어 서비스 제공 방법에도 적용된다.
본 발명의 일 실시예는 컴퓨터에 의해 실행되는 매체에 저장된 컴퓨터 프로그램 또는 컴퓨터에 의해 실행가능한 명령어를 포함하는 기록 매체의 형태로도 구현될 수 있다. 컴퓨터 판독 가능 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 가용 매체일 수 있고, 휘발성 및 비휘발성 매체, 분리형 및 비분리형 매체를 모두 포함한다. 또한, 컴퓨터 판독가능 매체는 컴퓨터 저장 매체 및 통신 매체를 모두 포함할 수 있다. 컴퓨터 저장 매체는 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 기타 데이터와 같은 정보의 저장을 위한 임의의 방법 또는 기술로 구현된 휘발성 및 비휘발성, 분리형 및 비분리형 매체를 모두 포함한다. 통신 매체는 전형적으로 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈, 또는 반송파와 같은 변조된 데이터 신호의 기타 데이터, 또는 기타 전송 메커니즘을 포함하며, 임의의 정보 전달 매체를 포함한다.
본 발명의 방법 및 시스템은 특정 실시예와 관련하여 설명되었지만, 그것들의 구성 요소 또는 동작의 일부 또는 전부는 범용 하드웨어 아키텍쳐를 갖는 컴퓨터 시스템을 사용하여 구현될 수 있다.
전술한 본 발명의 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.
본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
100: 맞춤형 미디어 서비스 제공 장치
110: 통신모듈
120: 메모리
130: 프로세서

Claims (12)

  1. 개인의 감정에 따른 맞춤형 미디어 서비스를 제공하는 방법에 있어서,
    멀티미디어 콘텐츠를 수신하는 단계;
    빅데이터 기반의 학습 알고리즘에 기초하여 상기 멀티미디어 콘텐츠에 포함된 객체의 감정을 분석하고 표준 평가지표에 따라 매칭한 감정 정보를 메타데이터에 인덱싱하는 단계;
    사용자 단말로부터 수신한 데이터에 기초하여 사용자의 감정 정보를 분석하는 단계 및
    상기 분석된 사용자의 감정 정보에 대응되는 멀티미디어 콘텐츠 또는 상기 멀티미디어 콘텐츠의 장면을 상기 메타데이터에 기초하여 검색 및 제공하는 단계를 포함하는 맞춤형 미디어 서비스 제공 방법.
  2. 제 1 항에 있어서,
    상기 메타데이터는 상기 멀티미디어 콘텐츠에 대해 기술된 프로그램 정보 테이블 메타데이터와, 상기 멀티미디어 콘텐츠의 스트림 내의 일정 구간을 정의하고 접근이 가능하도록 구성된 세그먼트에 대한 세그먼트 정보 테이블 메타데이터를 포함하는 것인 맞춤형 미디어 서비스 제공 방법.
  3. 제 2 항에 있어서,
    상기 프로그램 정보 테이블 메타데이터는 장면 번호 필드, 각 해당 장면에 대한 타이틀 필드, 각 해당 장면의 대표이미지에 대한 파일 타이틀 필드, 해당 장면에 대한 설명 필드 및 해당 장면에 등장하는 객체들의 정보가 리스트 형태로 저장된 리스트 필드를 포함하는 것인 맞춤형 미디어 서비스 제공 방법.
  4. 제 2 항에 있어서,
    상기 세그먼트 정보 테이블 메타데이터는 해당 장면에 대한 세그먼트 정보 및 세그먼트 그룹 정보가 각각 리스트 형태로 저장된 세그먼트 정보 메타데이터와 세그먼트 그룹 정보 메타데이터를 포함하는 것인 맞춤형 미디어 서비스 제공 방법.
  5. 제 4 항에 있어서,
    상기 세그먼트 정보 메타데이터는 세그먼트 ID 필드, 세그먼트 위치 필드, 세그먼트 대표이미지에 대한 URL 정보 필드, 해당 세그먼트의 객체 ID 정보가 저장된 객체 ID 필드 및 상기 해당 세그먼트의 객체의 감정 정보가 저장된 감정 정보 필드를 포함하는 것인 맞춤형 미디어 서비스 제공 방법.
  6. 제 5 항에 있어서,
    상기 객체 ID 필드는 상기 프로그램 정보 테이블 메타데이터의 리스트 필드에 포함된 객체의 정보 및 해당 객체의 ID와 상호 연결되어 사용되는 것인 맞춤형 미디어 서비스 제공 방법.
  7. 제 2 항에 있어서,
    상기 세그먼트는 해당 장면에 등장하는 하나 이상의 객체와 대응되도록 생성되는 것인 맞춤형 미디어 서비스 제공 방법.
  8. 개인의 감정에 따른 맞춤형 미디어 서비스를 제공하는 장치에 있어서,
    사용자 단말로부터 사용자의 감정 정보를 수신하는 통신모듈,
    상기 사용자의 감정 정보에 대응하는 멀티미디어 콘텐츠를 검색 및 제공하기 위한 프로그램이 저장된 메모리 및
    상기 메모리에 저장된 프로그램을 실행시키는 프로세서를 포함하되,
    상기 프로세서는 상기 프로그램을 실행시킴에 따라, 빅데이터 기반의 학습 알고리즘에 기초하여 멀티미디어 콘텐츠에 포함된 객체의 감정을 분석하고, 분석된 감정을 표준 평가지표에 따라 매칭시킴에 따라 감정 정보로 생성하여 메타데이터에 인덱싱하며, 상기 인덱싱된 메타데이터에 기초하여 상기 사용자의 감정 정보에 대응하는 멀티미디어 콘텐츠 또는 상기 멀티미디어 콘텐츠의 장면을 검색 및 제공하되,
    상기 인덱싱된 감정 정보는 상기 멀티미디어 콘텐츠의 스트림 내의 일정 구간을 정의하고 접근이 가능하도록 구성된 상기 메타데이터의 세그먼트마다 감정 정보 필드로 할당되는 것인 맞춤형 미디어 서비스 제공 장치.
  9. 제 8 항에 있어서,
    상기 메타데이터는 상기 멀티미디어 콘텐츠에 대해 기술된 프로그램 정보 테이블 메타데이터와, 상기 세그먼트에 대한 세그먼트 정보 테이블 메타데이터를 포함하는 것인 맞춤형 미디어 서비스 제공 장치.
  10. 제 9 항에 있어서,
    상기 세그먼트 정보 테이블 메타데이터는 해당 장면에 대한 세그먼트 정보 및 세그먼트 그룹 정보가 각각 리스트 형태로 저장된 세그먼트 정보 메타데이터와 세그먼트 그룹 정보 메타데이터를 포함하되,
    상기 세그먼트는 해당 장면에 등장하는 하나 이상의 객체와 대응되도록 생성되는 것인 맞춤형 미디어 서비스 제공 장치.
  11. 제 10 항에 있어서,
    상기 세그먼트 정보 메타데이터는 세그먼트 ID 필드, 세그먼트 위치 필드, 세그먼트 대표이미지에 대한 URL 정보 필드, 상기 세그먼트에 대한 객체 ID 정보가 저장된 객체 ID 필드 및 상기 해당 세그먼트의 객체의 감정 정보가 저장된 감정 정보 필드를 포함하는 것인 맞춤형 미디어 서비스 제공 장치.
  12. 제 8 항에 있어서,
    상기 객체 ID 필드는 상기 프로그램 정보 테이블 메타데이터의 리스트 필드에 포함된 객체의 정보 및 해당 객체의 ID와 상호 연결되어 사용되는 것인 맞춤형 미디어 서비스 제공 장치.
KR1020170171231A 2017-12-13 2017-12-13 개인의 감정에 따른 맞춤형 미디어 서비스를 제공하는 장치 및 방법 KR102016758B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170171231A KR102016758B1 (ko) 2017-12-13 2017-12-13 개인의 감정에 따른 맞춤형 미디어 서비스를 제공하는 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170171231A KR102016758B1 (ko) 2017-12-13 2017-12-13 개인의 감정에 따른 맞춤형 미디어 서비스를 제공하는 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20190070576A true KR20190070576A (ko) 2019-06-21
KR102016758B1 KR102016758B1 (ko) 2019-10-14

Family

ID=67056653

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170171231A KR102016758B1 (ko) 2017-12-13 2017-12-13 개인의 감정에 따른 맞춤형 미디어 서비스를 제공하는 장치 및 방법

Country Status (1)

Country Link
KR (1) KR102016758B1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102564513B1 (ko) * 2020-11-09 2023-08-07 주식회사 스피랩 감성 기반 추천 시스템 및 방법

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060131981A (ko) * 2004-04-15 2006-12-20 코닌클리케 필립스 일렉트로닉스 엔.브이. 사용자에 대해 특정 감정적 영향을 갖는 콘텐츠 항목을생성하는 방법
KR20110065860A (ko) * 2009-12-10 2011-06-16 (주)더힘스 상황과 문맥 정보에 기반한 사용자 맞춤형 콘텐츠를 생성하는 방법 및 장치
KR20140093949A (ko) * 2011-11-15 2014-07-29 마이크로소프트 코포레이션 컴퓨터 애플리케이션들을 위한 검색 강화 메뉴 및 구성

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060131981A (ko) * 2004-04-15 2006-12-20 코닌클리케 필립스 일렉트로닉스 엔.브이. 사용자에 대해 특정 감정적 영향을 갖는 콘텐츠 항목을생성하는 방법
KR20110065860A (ko) * 2009-12-10 2011-06-16 (주)더힘스 상황과 문맥 정보에 기반한 사용자 맞춤형 콘텐츠를 생성하는 방법 및 장치
KR20140093949A (ko) * 2011-11-15 2014-07-29 마이크로소프트 코포레이션 컴퓨터 애플리케이션들을 위한 검색 강화 메뉴 및 구성

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
변성우 외, 확률 변수를 이용한 음악에 따른 감정분석에의 최적 EEG 채널 선택, 전기학회논문지 (2013) *
이소민 외, 음악에 따른 감정 분류를 위한 EEG 특징벡터 비교, 전기학회논문지 (2014) *

Also Published As

Publication number Publication date
KR102016758B1 (ko) 2019-10-14

Similar Documents

Publication Publication Date Title
US9253533B1 (en) Scene identification
US9077956B1 (en) Scene identification
US9497497B2 (en) Supplemental content for a video program
US8938151B2 (en) Video distribution apparatus and video distribution method
US20150296033A1 (en) Life Experience Enhancement Via Temporally Appropriate Communique
CN105580013A (zh) 通过搜索多个用户评论并将其覆盖到内容中来浏览视频
US20110214147A1 (en) Method for determining content for a personal channel
US20230061691A1 (en) Display Apparatus with Intelligent User Interface
CN110324679B (zh) 一种视频数据处理方法及装置
US20160295272A1 (en) Method and Device for Playing Video File
JP2016533075A (ja) 情報取得方法、装置、プログラム、及び記録媒体
CN107087224A (zh) 内容同步设备和方法
US9565477B2 (en) Bookmarking prospective media content on computer network
ES2914124T3 (es) Focalización multimedia
US20160035392A1 (en) Systems and methods for clipping video segments
CN109429103B (zh) 推荐信息的方法、装置及计算机可读存储介质、终端设备
CN103220581A (zh) 电视社交网络信息提供方法和电视接收机设备
CN108600820A (zh) 用于呈现视频流的系统和方法
WO2016192501A1 (zh) 视频查找方法及装置
CN107920274A (zh) 一种视频处理方法、客户端及服务器
CN102802028A (zh) 针对电视节目的交互系统和方法
CN111279709A (zh) 提供视频推荐
US20140208350A1 (en) System and method for recommending on demand multimedia content based on event information
US20170094364A1 (en) Social news aggregation and distribution
CN105915936B (zh) 一种视频网站的视频打点方法和系统

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant