KR101988601B1 - 도메인 지식 온톨로지 기반의 장면 지식 온톨로지 생성 장치 및 방법 - Google Patents

Abstract

도메인 지식 온톨로지에 기반한 장면 지식 온톨로지 생성 시스템 및 방법이 제공되며, 콘텐츠의 장면 별 메타데이터를 정의할 수 있는 도메인 지식들로 구축된 도메인 지식 온톨로지를 생성하고, 도메인 지식 온톨로지에 기반하여 임의의 콘텐츠의 장면 별 하나 이상의 이벤트의 장면 지식을 정의하고, 정의된 장면 지식을 해당 장면의 메타데이터로서 태깅하여 장면 지식 온톨로지를 생성한다.

Description

도메인 지식 온톨로지 기반의 장면 지식 온톨로지 생성 장치 및 방법{SYSTEM AND METHOD FOR CONSTRUCTING OF SCENE KNOWLEDGE ONTOLOGY BASED IN DOMAIN KNOWLEDGE ONTOLOGY}

본 발명은 도메인 지식 온톨로지에 기반하여 동영상 콘텐츠에 대한 장면 지식 온톨로지를 생성하는 시스템 및 방법에 대한 것이다.

최근 들어, 영화, 방송 및 UCC(User Created Contents)/UGC(User Generated Content) 등의 콘텐츠 제작 기술이 발전하고 있으며, 콘텐츠 제작 방법이 다양화되고 송출 채널이 다각화됨에 따라 양질의 콘텐츠가 증가하고 있다. 특히 MCN(Multi Channel Network) 산업 및 다양한 독립 영화 제작 등이 활성화됨에 따라 기존의 상업용 콘텐츠 제작 시장뿐만 아니라 개인 방송 및 영화 제작 산업도 동반 성장하고 있는 추세이다.

이처럼 콘텐츠 제작 시장이 다각화되고 양질의 콘텐츠가 늘어남에 따라, 이미 생성된 콘텐츠를 재활용 또는 재사용하여 새로운 콘텐츠를 생성하는 기술 및 시장이 활성화될 것으로 예상된다. 즉, 기존의 콘텐츠만을 재사용하여 새로운 콘텐츠를 만들거나 또는 새로운 콘텐츠를 생성하는 과정에서, 기존 콘텐츠의 일부를 활용하여 콘텐츠를 제작하는 방법 등이 적용될 수 있다. 이를 위해서는 콘텐츠 제작을 위한 콘텐츠 기획, 시나리오 제작 등의 초기 단계에서부터 콘텐츠가 담고 있는 장면의 내용을 파악하여 기록으로 명세하거나, 기존 상영된 콘텐츠에 대하여 정보가 파악된 자료를 재사용하는 것이 필요하다. 그러나, 이러한 방식들은, 콘텐츠를 제작하는 과정에서 데이터를 잘 명세해야 하거나, 개인의 기억에 크게 의존해야 하므로, 콘텐츠의 재활용 및 재사용에 한계가 있다. 종래에는 이러한 콘텐츠의 재활용 및 재사용을 위하여, 콘텐츠가 포함하고 있는 특정 장면에 장면 메타데이터를 생성하여 태깅하는 기법이 제안되었다.

이와 관련하여, 대한민국 등록특허 제 10-1658002호(발명의 명칭: 동영상 주석 시스템 및 주석 방법)에는, 새로운 비디오 인덱싱 단위로 비디오 문장(Video Sentence)과 비디오 문단(Video Paragraph)을 정의하고, 비디오 문장 및 비디오 문단의 단위로 인덱싱을 수행하는 기술이 개시되어 있다. 이때, 비디오 문장은 한 명의 화자가 하나 혹은 여러 샷을 통해 한 문장 단위의 음성 설명을 하는 비디오 구간을 의미하며, 비디오 문단은 하나 이상의 비디오 문장으로 이루어진 여러 명의 화자가 하나의 소주제를 두고 말하는 구간이며 다른 주제로 변경되기 전까지를 경계로 한다.

이러한 기존의 장면 메타데이터를 생성하는 방식은 동영상 주석 생성을 위하여 비디오를 비디오 문장 및 문단에 기준하여 구간화 한다는 점에서, 장면의 메타데이터가 등장인물의 대사 등에 한정된다는 한계가 있었다.

본 발명의 일 실시예는 새로운 동영상 콘텐츠를 제작하는 과정에서 기존 동영상 콘텐츠를 재사용 또는 재활용하고자 할 때, 방대한 동영상 콘텐츠의 일부 장면을 편리하게 검색할 수 있도록 하는, 장면 지식 온톨로지 생성 시스템 및 방법을 제공하고자 한다.

또한, 본 발명의 일 실시예는, 동영상 콘텐츠의 특정 장면이 내포하고 있는 다양한 구성 요소를 검색할 수 있는 메타데이터를 생성하되, 이를 위해 콘텐츠가 내포할 수 있는 도메인 지식을 확보하여 온톨로지를 구축하고, 이를 장면 지식 구축을 위한 데이터로 활용하는, 장면 지식 온톨로지 생성 시스템 및 방법을 제공하고자 한다.

다만, 본 실시예가 이루고자 하는 기술적 과제는 상기된 바와 같은 기술적 과제로 한정되지 않으며, 또 다른 기술적 과제들이 존재할 수 있다.

상술한 기술적 과제를 달성하기 위한 기술적 수단으로서, 본 발명의 일 측면에 따른 도메인 지식 온톨로지에 기반한 장면 지식 온톨로지 생성 시스템은, 콘텐츠의 장면(scene) 별 메타데이터를 설정하기 위한 도메인 지식 온톨로지 및 장면 지식 온톨로지를 구축하는 지식 온톨로지 생성 프로그램이 저장된 메모리; 및 상기 메모리에 저장된 프로그램을 수행하는 프로세서를 포함한다.

이때, 상기 프로세서는 상기 지식 온톨로지 생성 프로그램의 실행에 대응하여, 콘텐츠의 장면 지식을 정의할 수 있는 도메인 지식이 저장된 도메인 지식 온톨로지를 생성하고, 상기 도메인 지식 온톨로지에 기초하여 임의의 콘텐츠의 장면 별 적어도 하나의 이벤트에 대응되는 장면 지식을 메타데이터로서 태깅하여 장면 지식 온톨로지를 생성한다.

그리고 본 발명의 다른 측면에 따른 장면 지식 온톨로지 생성 시스템을 통한 도메인 지식 온톨로지에 기반한 장면 지식 온톨로지 생성 방법은, 콘텐츠의 장면(scene) 별 메타데이터를 정의할 수 있는 도메인 지식들로 구축된 도메인 지식 온톨로지를 생성하는 단계; 상기 도메인 지식 온톨로지에 기반하여 임의의 콘텐츠의 장면 별 하나 이상의 이벤트의 장면 지식을 정의하는 단계; 및 상기 정의된 장면 지식을 해당 장면의 메타데이터로서 태깅하여 장면 지식 온톨로지를 생성하는 단계를 포함한다.

전술한 본 발명의 과제 해결 수단 중 어느 하나에 의하면, 콘텐츠가 포함하고 있는 장면 검색용 메타데이터에 기초하여 장면 구성 요소를 대상으로 검색함으로써 기존 콘텐츠의 장면 검색 및 탐색이 용이하며, 사용자가 원하는 기존 콘텐츠의 일부 장면을 재활용한 새로운 콘텐츠 생성 및 제작이 가능하다.

또한, 본 발명의 과제 해결 수단 중 어느 하나에 의하면, 도메인 지식을 도메인 온톨로지로 구축하고 이를 장면 지식 구축에 활용함으로써, 다양한 장면 지식 관리자들이 일관성 있는 장면 온톨로지 생성 및 지식 구축이 가능하다. 이를 통해, 크라우드 소싱(crowd sourcing) 방식으로 데이터를 수집할 경우에 빈번히 발생하는 데이터 무결성, 데이터의 오류 발생률을 기존에 비해 상대적으로 크게 낮출 수 있다.

도 1은 본 발명의 일 실시예에 따른 콘텐츠 장면 지식 온톨로지 생성 시스템의 구성도이다.
도 2는 본 발명의 일 실시예에 따른 프로세서를 통해 처리되는 도메인 지식 온톨로지에 기반한 장면 지식 온톨로지 생성 및 사용 방식을 설명하기 위한 개념도이다.
도 3은 본 발명의 일 실시예에 따른 도메인 지식 온톨로지 생성 방법을 설명하기 위한 순서도이다.
도 4는 본 발명의 일 실시예에 따른 장면 지식 온톨로지 생성 방법을 설명하기 위한 순서도이다.
도 5는 본 발명의 일 실시예에 따른 장면 지식 온톨로지를 사용한 콘텐츠 제작 방법을 설명하기 위한 순서도이다.

아래에서는 첨부한 도면을 참조하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 본 발명의 실시예를 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 본 발명을 명확하게 설명하기 위해 도면에서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다. 또한, 도면을 참고하여 설명하면서, 같은 명칭으로 나타낸 구성일지라도 도면에 따라 도면 번호가 달라질 수 있고, 도면 번호는 설명의 편의를 위해 기재된 것에 불과하고 해당 도면 번호에 의해 각 구성의 개념, 특징, 기능 또는 효과가 제한 해석되는 것은 아니다.

명세서 전체에서, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미하며, 하나 또는 그 이상의 다른 특징이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.

본 명세서에 있어서 '부(部)' 또는 ‘모듈’이란, 하드웨어 또는 소프트웨어에 의해 실현되는 유닛(unit), 양방을 이용하여 실현되는 유닛을 포함하며, 하나의 유닛이 둘 이상의 하드웨어를 이용하여 실현되어도 되고, 둘 이상의 유닛이 하나의 하드웨어에 의해 실현되어도 된다.

도 1은 본 발명의 일 실시예에 따른 콘텐츠 장면 지식 온톨로지 생성 시스템의 구성도이다. 그리고, 도 2는 본 발명의 일 실시예에 따른 프로세서를 통해 처리되는 도메인 지식 온톨로지에 기반한 장면 지식 온톨로지 생성 및 사용 방식을 설명하기 위한 개념도이다.

일반적으로, 온톨로지(ontology)는 특정 분야(즉, 도메인)의 지식과 관련된 용어 및 각 용어 사이의 관계가 정의된 일종의 ‘컴퓨팅 시스템을 통해 처리될 수 있는 사전’을 의미한다. 본 발명의 일 실시예에서 “온톨로지 구축 또는 생성”을 처리한다는 것은 온톨로지를 구성하는 요소들을 생성하는 것이되, 예를 들어 하나의 개념(concept)에 대해서 속성(property) 및 개체(instance)를 추가하는 것을 의미할 수 있다.

도 1에 도시한 바와 같이, 본 발명의 일 실시예에 따른 콘텐츠 장면 지식 온톨로지 생성 시스템(100)은 메모리(110), 프로세서(120) 및 지식 온톨로지 데이터베이스(130)를 포함한다.

메모리(110)에는, 동영상 형태의 콘텐츠에 있어서 장면(scene) 별 메타데이터를 설정하기 위한 도메인 지식 온톨로지 및 장면 지식 온톨로지를 구축하는 지식 온톨로지 생성 프로그램이 저장되어 있다. 이때, 지식 온톨로지 생성 프로그램은, 도메인 지식 온톨로지 및 장면 지식 온톨로지를 구축하기 위한 모든 처리와 더불어, 장면 지식 온톨로지를 사용하여 새로운 콘텐츠를 제작하기 위한 모든 처리 절차를 포함할 수 있다.

이러한 메모리(110)는 전원이 공급되지 않아도 저장된 정보를 계속 유지하는 비휘발성 저장장치 및 저장된 정보를 유지하기 위하여 전력이 필요한 휘발성 저장장치를 통칭하는 것이다.

프로세서(120)는 메모리(110)에 저장된 프로그램을 실행하여, 그에 따른 처리들을 수행한다.

구체적으로, 프로세서(120)는 지식 온톨로지 생성 프로그램의 실행에 대응하여, 도메인 지식 온톨로지를 생성하기 위한 각종 데이터를 사용자가 검색, 탐색 및 구축할 수 있도록 하는 도메인 지식 구축 사용자 인터페이스를 제공한다. 또한, 프로세서(120)는 생성된 도메인 지식 온톨로지에 기반하여 콘텐츠에 대한 장면 지식 온톨로지를 생성하기 위한 각종 데이터를 사용자가 검색, 탐색 및 구축할 수 있도록 하는 장면 지식 구축 사용자 인터페이스를 제공한다. 이러한 지식 구축 사용자 인터페이스들은 프로세서(120)의 지식 온톨로지 생성 모듈을 통해 처리될 수 있다.

본 발명의 일 실시예에 따른 콘텐츠 장면 지식 온톨로지 생성 시스템(100)(이하, 설명의 편의상 “시스템(100)”이라고 지칭함)은 지식 온톨로지 구축을 담당하는 사용자가 임의의 사용자 단말(미도시)를 통해 시스템(100)에 접속할 경우, 해당 사용자 단말(미도시)과 데이터를 송수신할 수 있는 통신 모듈(미도시)을 더 포함할 수 있다. 그리고 프로세서(120)는 통신 모듈(미도시)을 통해 사용자 단말(미도시)로 도메인 지식 구축 또는 장면 지식 구축 사용자 인터페이스를 제공한다. 또한, 시스템(100)은 복수의 사용자가 접속할 수 있는 서버 장치로 구현될 수 있으며, 이때 프로세서(120)는 서버 장치(미도시)에 자체적으로 포함된 입력장비 및 디스플레이장비 등을 통해 사용자에게 도메인 지식 구축 또는 장면 지식 구축 사용자 인터페이스를 제공하는 것도 가능하다.

참고로, 도메인 지식 구축 또는 장면 지식 구축 사용자 인터페이스를 사용하는 사용자는, 온톨로지 구축 전문가 또는 임의의 복수의 사용자들을 포함하는 지식 관리자일 수 있다. 이때, 지식 관리자가 임의의 복수의 사용자인 경우, 프로세서(120)는 크라우드 소싱 방식으로 다수의 사용자에 의해 지식 온톨로지가 구축될 수 있도록 각 사용자에게 장면 지식 구축 사용자 인터페이스를 제공할 수 있다.

또한, 프로세서(120)는 지식 온톨로지 생성 프로그램의 실행에 대응하여, 지식 온톨로지 데이터베이스(130)에 저장된 정보들에 기초하여 사용자가 원하는 콘텐츠의 장면들을 검색하여 재사용할 수 있도록 제공할 수 있다. 이러한 콘텐츠 장면 재사용 처리를 위한 각종 동작은 프로세서(120)의 장면 재사용 모듈을 통해 처리될 수 있다.

이상에서 설명한 프로세서(120)가 지식 온톨로지 생성 프로그램의 실행에 대응하여 처리하는 동작 및 절차에 대해서는 아래 도 2 내지 도 5를 참조하여 상세히 설명하도록 한다.

지식 온톨로지 데이터베이스(130)는 프로세서(120)에 의해 정의되고 구축되는 도메인 지식 온톨로지 및 장면 지식 온톨로지가 저장된다. 이때, 도메인 지식 온톨로지 및 장면 지식 온톨로지는 별도의 저장 공간에 구분되어 저장될 수 있으며, 앞서 설명한 사용자 인터페이스에 의해 참조되거나 데이터가 추가 저장될 수 있다.

도 2에 도시된 바에 따르면, 프로세서(120)는 도메인 지식 온톨로지를 구축하고, 이를 기반으로 동영상 콘텐츠의 장면에 대한 지식 온톨로지(즉, 장면 지식 온톨로지)를 생성한다. 이에 따라, 도 1의 지식 온톨로지 데이터베이스(130)에는 도메인 지식 온톨로지 DB와 장면 지식 온톨로지 DB가 각각 구현될 수 있다.

도메인 지식 온톨로지는 동영상 콘텐츠 별로 각 장면에 포함될 수 있는 지식 정보를 구성할 수 있도록 하는 모든 도메인 지식 정보가 저장된다.

도 2에 도시한 바와 같이, 프로세서(120)는 도메인 지식 구축 사용자 인터페이스를 통한 사용자 입력에 기초하여, 도메인 지식 생성 및 변환 처리를 통해 도메인 지식 온톨로지를 구축한다. 구체적으로, 도메인 지식 구축 사용자 인터페이스를 통한 사용자 입력은, 도메인 지식에 포함될 범주를 정의하기 위해 장면의 구성 요소를 설정하는 입력, 및 도메인 지식으로 확대될 수 있는 장면을 설정하는 입력을 포함한다.

이하 도 3을 참조하여, 프로세서(120)가 도메인 지식 온톨로지를 구축하는 절차에 대해서 상세히 설명하도록 한다.

도 3은 본 발명의 일 실시예에 따른 도메인 지식 온톨로지 생성 방법을 설명하기 위한 순서도이다.

도 3에 도시된 절차는 프로세서(120)가 제공하는 도메인 지식 구축 사용자 인터페이스를 통해 처리될 수 있다.

먼저, 다양한 콘텐츠들에 대해 공통적으로 적용할 수 있는 장면 구성 요소를 정의하여 설정한다(S310).

장면 구성 요소는, 동영상 콘텐츠를 구성하는 수많은 장면에 포함된 이벤트들을 구분하여 정의할 수 있는 기준으로서 사용될 수 있다.

도메인 지식 온톨로지에서는 콘텐츠의 장면 별 이벤트를 4W(누가/Who, 언제/When, 어디서/Where, 무엇/What) 1H(어떻게/How(Act, Emotion))를 포함하는 표현 속성을 사용하여 정의할 수 있다. 이때, “4W 1H”는 콘텐츠의 장면 별로 발생된 이벤트를 묘사하기 위한 표현 방식으로서, 각 장면에 대해서 “누가(예: 사람, 동물 등 행동 주체의 이름, 성별, 직업, 별명, 국적 등), 언제(예: 시각, 생활 시간 등), 어디서(예: 장소, 국가, 행정구역, 랜드마크, 관광지 등), 무엇(예: 의류, 자동차, 가구, 브랜드, 가전, 가구, 식물, 동물, 사람 등), 어떻게(예: 행동, 감정 등)”와 같이 지식 표현할 수 있다.

장면은 적어도 하나의 이벤트를 포함할 수 있으며, 각 이벤트는 4W 1H의 구성 요소 중 한 개 이상을 포함할 수 있다.

다음으로, 장면 구성 요소에 대응하는 도메인 지식의 종류를 설정한다(S320).

이때, 장면 구성 요소에 포함될 수 있는 도메인 지식 종류를 정의한다. 도메인 지식은 주어진 문제(즉, 장면의 구성 요소)에 대해 특별한 지식으로서, 장면의 구성 요소로서 4W 1H의 형태로 활용할 수 있는 다양한 종류의 도메인 지식을 포함할 수 있다.

그런 다음, 정의된 도메인 지식들에 대한 도메인 온톨로지를 구축하기 위하여, 설정된 도메인 지식 종류에 대응하는 도메인 지식을 수집한다(S330).

구체적으로, 도메인 지식 수집의 방식은 정의형 및 수집형으로 구분될 수 있다.

수집형은 도메인 지식으로서 기존에 정의되어 있는 데이터베이스나 또는 다른 온롤로지를 재활용 가능한 형태로 수집하여 활용하는 것이다. 여기서, 수집될 도메인 지식이 기존의 데이터베이스로 구축된 경우, 기존 데이터베이스의 스키마를 분석하여 도메인 온톨로지로 변환하여 사용할 수 있다. 또한, 수집될 도메인 지식이 다른 온톨로지로 구축된 경우, 기생성된 온톨로지와 연결하여 도메인 온톨로지로서 활용할 수 있다. 한편, 재활용할 데이터베이스 또는 다른 온톨로지가 없는 도메인 지식의 경우, 정의형 도메인 지식으로서 사용자(즉, 지식 관리자)가 직접 정의하여 도메인 온톨로지에 포함시킬 수 있다. 즉, 새로운 도메인 지식을 사용자가 정의하는 경우에는 새로운 장면 요소 계층 및 계층 내에 포함되는 인스턴스를 사용자가 정의한다.

다음으로, 정의된 도메인 지식의 종류를 기반으로 도메인 온톨로지를 정의하고(S340), 수집된 도메인 지식을 트리플(triple)로 변환하여 도메인 지식을 구축하여(S350), 도메인 지식 온톨로지를 생성한다(S360).

이상에서와 같이 수집 및 구축된 도메인 지식 및 도메인 지식 온톨로지는, 새롭게 정의되는 지식 데이터베이스나 온톨로지를 지속적으로 활용하여 수집, 변환, 및 적용 과정을 거쳐 지식 구축 과정을 반복함으로써 수평적 및 수직적 확장을 처리할 수 있다.

아래 표 1은 프로세서(120)가 도메인 지식 온톨로지를 수평적 및 수직적으로 확장시키는 형태를 설명하기 위한 일례이다.

Who	사람	배우
		스텝
	동물	사자, 고래, 파리
When	시각	01:00, 23:35
	생활시간	아침, 점심, 저녁, 새벽, 밤, 초저녁
Where	장소	국가(대한민국, 가나, 미국)
		도시(서울, 대전, 파리, 뉴욕)
		랜드마크(경복궁, 광안대교, 불국사)
		관광지(해운대, 경포대)
What	물건	물건 종류(의류, 셔츠, 자동차)
		브랜드(나이키, 아디다스)
		관광 상품(한옥마을, 부산시민공원, 안압지)
How	감정	공포, 분노, 슬픔, 기쁨, 좋음, 싫음, 공감
	행동	청소함, 회의함, 마심, 먹음, 찾음, 싸움
기타	영화, 드라마

상기 표 1에서와 같이, 도메인 지식 온톨로지를 수직으로 확장할 수 있다. 예를 들어, 장면 구성 요소로서 4W 1H 표현 속성 중 하나 이상이 설정될 때, “누가(Who)”에 해당하는 주체가 사람인 경우에 대응하여, 콘텐츠에 등장하는 “배우” 및 콘텐츠 제작에 참여한 “스텝” 등의 도메인 지식이 수집되어 정의될 수 있다. 또한, “누가(Who)”에 해당하는 주체가 동물인 경우 “사자, 고래, 파리” 등의 다양한 지식 정보가 정의될 수 있다. 참고로, 동영상 콘텐츠가 애니메이션인 경우를 예상하여, “식물, 사물” 등이 주체로 추가 정의될 수 있다. 이러한 방식으로 도메인 지식 온톨로지는 장면 구성 요소(즉, 지식 카테고리) 별로 개념 상의 수직적 확장이 가능하다. 또한, 도메인 지식 온톨로지의 모든 지식 카테고리는 새로운 프로퍼티 및 인스턴스를 지속적으로 추가하여 수평적인 확장도 가능하다.

한편, 장면 지식 온톨로지는 동영상 콘텐츠 별 장면들의 메타데이터로서의 모든 장면 지식 정보가 저장된다. 이러한 장면 지식 온톨로지를 통해, 콘텐츠 장면의 재사용 시 콘텐츠에 포함된 주체, 행위, 물체 및 장면 등이 포함하는 이벤트를 검색할 수 있도록, 콘텐츠의 메타데이터를 장면 단위로 제공할 수 있다.

다시 도 2를 참조하여 설명하자면, 프로세서(120)는 장면 지식 구축 사용자 인터페이스를 통한 사용자 입력에 기초하여, 도메인 지식 탐색 도구를 통해 도메인 지식 온톨로지에 기반한 장면 별 메타데이터(즉, 장면 지식)를 설정하여 장면 지식 온톨로지를 구축한다. 구체적으로, 장면 지식 구축 사용자 인터페이스를 통한 사용자 입력은, 콘텐츠를 구성하는 복수의 장면 별로 이벤트 및 이벤트 표현 속성을 정의하는 입력 및 도메인 지식 온톨로지에 기반하여 표현 속성에 따른 하나 이상의 장면 지식을 설정하는 입력을 포함한다.

이하, 도 4를 참조하여, 프로세서(120)가 장면 지식 온톨로지를 구축하는 절차에 대해서 상세히 설명하도록 한다.

도 4는 본 발명의 일 실시예에 따른 장면 지식 온톨로지 생성 방법을 설명하기 위한 순서도이다.

도 4에 도시된 절차는 프로세서(120)가 제공하는 장면 지식 구축 사용자 인터페이스를 통해 처리될 수 있다.

먼저, 임의의 콘텐츠에 대해서, 콘텐츠를 구성하는 복수의 장면 별로 이벤트를 설정한다(S410).

그리고 설정된 이벤트 별로 표현 속성을 정의한다(S420).

이때, 이벤트 별 표현 속성은, 도메인 지식 온톨로지에 기초하여 해당 장면에 포함된 “누가(예: 사람, 동물 등 행동 주체), 언제(예: 시간), 어디서(예: 행정 구역, 랜드마크, 관광지), 무엇(예: 의류, 자동차, 가구, 브랜드, 가전, 가구, 식물, 동물, 사람), 어떻게(예: 행동, 감정)” 등의 4W 1H 요소에 대한 지식 정보일 수 있다.

예를 들어, 영화 콘텐츠의 특정 장면이 “한 배우가 새벽녘에 따듯한 커피를 마시며 바닷가를 걷고 있는” 장면이라면, 해당 장면의 이벤트는 “누가(배우이름, 배우성별, 캐릭터이름), 시간(새벽녘), 어디서(바닷가), 무엇(커피), 어떻게(마신다, 걷는다, 따듯함, 평화로움, 고즈넉함)” 등의 표현 속성으로 정의되어 장면 지식 온톨로지를 구축할 수 있다.

다음으로, 정의된 장면의 이벤트 별 표현 속성에 대해서 도메인 지식 온톨로지에 기반하여 장면 지식 온톨로지를 정의하고(S430), 이에 따라 복수의 콘텐츠 별 장면들에 대한 메타데이터를 태깅하는 장면 지식 온톨로지를 구축한다(S440).

이때, 도메인 지식 온톨로지 탐색 도구를 통해 도메인 지식 온톨로지에 포함된 지식 정보들을 활용하되, 예를 들어 “누가(예를 들어, 배우이름)”에 대한 도메인 지식 온톨로지를 활용하여 장면과 배우의 관계 정보를 연결할 수 있고, 새로운 지식을 추론하는 것도 가능하다.

구체적으로, 지식 관리자는 장면 지식 구축 사용자 인터페이스를 통해 도메인 지식 온톨로지에 정의한 도메인 지식을 검색한 후, 검색된 도메인 지식의 정보들을 탐색함으로써, 콘텐츠의 특정 장면이 포함하고 있는 복수의 이벤트에 포함된 복수의 4W 1H에 대응하는 지식 정보를 획득한다. 예를 들어, 장면 지식 관리자는 동영상 콘텐츠를 재생하면서, 영상이 내포하고 있는 복수의 이벤트에 관련된 장면 지식을 도메인 지식 온톨로지로부터 탐색 및 선택하여 장면 지식을 구축하고, 이벤트의 시작 시간 및 끝 시간을 추가하여 특정 이벤트에 대한 장면 지식을 구축할 수 있다.

또한, 도메인 지식 온톨로지를 검색 또는 탐색하였을 때 기존에 구축된 도메인 지식 온토롤지에 없는 새로운 지식을 장면 지식으로서 설정할 경우, 장면 지식 관리자는 장면 지식 구축 사용자 인터페이스를 통해 해당 장면 지식을 도메인 지식 범주 및 키워드 추가 등의 기능을 통해 도메인 지식 온톨로지에 추가할 수 있다.

참고로, 다양한 채널로 생성되는 방송 콘텐츠, 영화, UCC, UGG 등의 동영상 콘텐츠 지식을 확보하기 위하여, 장면 지식 관리자는 크라우드 소싱 기법에 따라 사용자의 장면 지식을 구축할 수 있다. 즉, 프로세서(120)는 다양한 장면 지식 관리자에게 장면 지식 구축 사용자 인터페이스를 제공하여, 대규모의 콘텐츠 별 장면들에 대해 장면 지식을 구축할 수 있다. 이러한 크라우드 소싱 기법을 통한 지식 확보 방식에서는, 지식을 생성하는 사용자의 자질 또는 지식의 수준이 상이할 수 있으므로, 일관된 기준의 지식 생성 및 태깅이 매우 중요하다. 따라서, 본 발명의 일 실시예에 따른 장면 지식 온톨로지 생성 방식의 경우, 도메인 지식 온톨로지에 기반하여 장면 지식을 구축함으로써 사용자(즉, 지식 관리자) 별 지식 수준에 크게 영향을 받지 않으면서도 크라우드 소싱 기법을 적용하여 장면 지식 온톨로지를 생성할 수 있다. 또한, 도메인 지식 확보를 위하여 기존에 생성된 도메인 지식을 수집하여 일괄 변환하여 정보를 추가할 수 있으며, 수집된 정보 외에 추가로 도메인 지식 관리자로부터 정의된 정의형 도메인 지식 온톨로지를 구축할 수 있으며, 장면 지식 관리자에 의해 새롭게 정의된 도메인 지식 정보를 더 추가할 수 있다.

한편, 도 2를 다시 참조하면, 프로세서(120)는 콘텐츠 장면들에 대해 지식 검색을 처리하여 사용자의 요구에 적합한 장면들을 검출하고, 이를 사용하여 새로운 콘텐츠를 제작하거나 기존의 콘텐츠 중 적어도 일부를 대체한다.

이때, 프로세서(120)는 장면 지식 재사용 모듈을 통해 대량의 장면 지식을 검색, 탐색, 및 스파클(SPARQL) 질의 처리하여, 사용자의 요구 사항에 대응하는 장면 검색 결과를 제공한다.

이하, 도 5를 참조하여, 프로세서(120)가 장면 지식 온톨로지를 사용하여 콘텐츠 장면 검색 및 재사용을 처리하는 절차에 대해서 상세히 설명하도록 한다.

도 5는 본 발명의 일 실시예에 따른 장면 지식 온톨로지를 사용한 콘텐츠 제작 방법을 설명하기 위한 순서도이다.

도 5에 도시된 절차는 프로세서(120)의 장면 재사용 모듈을 통해 제공되는 콘텐츠 장면 검색 사용자 인터페이스를 통해 처리될 수 있다.

먼저, 다양한 콘텐츠의 장면 별 메타데이터가 태깅되어 있는 장면 지식 온톨로지를 검색하여 사용자가 요구하는 조건을 만족하는 장면들을 탐색한다(S510).

이때, 사용자는 콘텐츠 장면 검색 사용자 인터페이스를 통해 원하는 장면 조건을 입력할 수 있으며, 프로세서(120)는 사용자가 입력한 장면 조건에 대응하는 콘텐츠 장면들을 장면 지식 온톨로지로부터 검색할 수 있다. 사용자가 입력한 장면 조건은 4W 1H에 기반한 다양한 정보들일 수 있으며, 사용자는 SPARQL 질의를 하는 형태로 사용자 조건을 입력할 수 있다.

다음으로, 장면 지식 온톨로지를 통해 검색된 장면 검색 결과를 제공하고(S520), 제공된 장면 검색 결과 중 사용자의 하나 이상의 장면에 대한 선택을 수신한다(S530).

이때, 프로세서(120)는 콘텐츠 장면 검색 사용자 인터페이스를 통해 장면 검색 결과를 제공하고 사용자의 장면 선택을 입력받을 수 있다.

그런 다음, 선택된 장면을 사용하여 새로운 콘텐츠를 제작하여 제공한다(S540).

이때, 프로세서(120)는 사용자에 의해 선택된 장면으로만 이루어진 새로운 동영상 콘텐츠를 제작하거나 또는 사용자가 원하는 기존의 동영상 콘텐츠에 상기 선택된 장면을 일부 삽입하거나 대체하여 새로운 동영상 콘텐츠를 제작할 수 있다.

이상에서 설명한 본 발명의 일 실시예에 따른 장면 지식 온톨로지 생성 시스템을 통한 그 생성 방법은 컴퓨터에 의해 실행되는 매체에 저장된 컴퓨터 프로그램 또는 컴퓨터에 의해 실행가능한 명령어를 포함하는 기록 매체의 형태로도 구현될 수 있다. 이러한 기록 매체는 컴퓨터 판독 가능 매체로서, 컴퓨터에 의해 액세스될 수 있는 임의의 가용 매체일 수 있고, 휘발성 및 비휘발성 매체, 분리형 및 비분리형 매체를 모두 포함한다. 또한, 컴퓨터 판독가능 매체는 컴퓨터 저장 매체를 포함할 수 있으며, 컴퓨터 저장 매체는 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 기타 데이터와 같은 정보의 저장을 위한 임의의 방법 또는 기술로 구현된 휘발성 및 비휘발성, 분리형 및 비분리형 매체를 모두 포함한다.

본 발명의 방법 및 시스템은 특정 실시예와 관련하여 설명되었지만, 그것들의 구성 요소 또는 동작의 일부 또는 전부는 범용 하드웨어 아키텍쳐를 갖는 컴퓨터 시스템을 사용하여 구현될 수 있다.

전술한 본 발명의 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.

본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.

100: 장면 지식 온톨로지 생성 시스템
110: 메모리
120: 프로세서
130: 지식 온톨로지 데이터베이스

Claims (14)

1. 도메인 지식 온톨로지에 기반한 장면 지식 온톨로지 생성 시스템에 있어서,
   콘텐츠의 장면(scene) 별 메타데이터를 설정하기 위한 도메인 지식 온톨로지 및 장면 지식 온톨로지를 구축하는 지식 온톨로지 생성 프로그램이 저장된 메모리; 및
   상기 메모리에 저장된 프로그램을 수행하는 프로세서를 포함하며,
   상기 프로세서는 상기 지식 온톨로지 생성 프로그램의 실행에 대응하여, 콘텐츠의 장면의 복수 이벤트를 정의할 수 있는 복수의 장면 구성 요소 형태의 표현 속성을 정의하고, 상기 장면 구성 요소에 대응하는 도메인 지식의 종류를 정의하고, 수집된 도메인 지식의 종류에 기반하여 도메인 지식 온톨로지를 생성하고, 이벤트 별로 정의된 표현 속성에 따라 상기 도메인 지식 온톨로지에 기초하여 임의의 콘텐츠의 장면 별 적어도 하나의 이벤트에 대응되는 장면 지식을 메타데이터로서 태깅하여 장면 지식 온톨로지를 생성하고,
   상기 프로세서는, 크라우드 소싱 기법에 따라 복수의 사용자에게 각각 장면 지식 구축 사용자 인터페이스를 제공하여 복수의 콘텐츠의 장면들에 대한 장면 지식을 구축하되, 임의의 콘텐츠 별로 콘텐츠를 구성하는 복수의 장면 별로 하나 이상의 이벤트를 설정하고, 설정된 이벤트 별로4W 1H(Who, When, Where, What, How) 형태의 표현 속성을 정의하고, 상기 도메인 지식 온톨로지에 기반하여 상기 콘텐츠의 장면 별 이벤트에 대해 정의된 표현 속성에 대응하는 하나 이상의 장면 지식을 설정할 수 있는 상기 장면 지식 구축 사용자 인터페이스를 제공하고, 상기 장면 지식이 설정된 장면 별로 해당 장면 지식을 메타데이터로서 태깅하여 장면 지식 온톨로지를 생성하는 것
   을 특징으로 하는 장면 지식 온톨로지 생성 시스템.
   
2. 제 1 항에 있어서,
   상기 프로세서는,
   상기 콘텐츠의 장면의 복수 이벤트를 정의할 수 있는 복수의 장면 구성 요소로서 4W 1H(Who, When, Where, What, How) 형태의 표현 속성을 정의하고, 상기 장면 구성 요소에 대응하는 도메인 지식의 종류를 정의할 수 있는 도메인 지식 구축 사용자 입력 인터페이스를 제공하고,
   상기 정의된 도메인 지식의 종류에 대응하는 도메인 지식들을 수집 또는 정의하고, 상기 수집된 도메인 지식의 종류에 기반하여 도메인 온톨로지를 정의하고, 상기 수집된 도메인 지식들을 트리플 변환하여 상기 도메인 온톨로지에 대응하는 도메인 지식으로 구축하여 도메인 지식 온톨로지를 생성하는, 장면 지식 온톨로지 생성 시스템.
   
3. 제 2 항에 있어서,
   상기 프로세서는,
   상기 도메인 지식 구축 사용자 인터페이스를 통해, 상시 생성된 도메인 지식 온톨로지를 상기 장면 구성 요소의 계층을 확장하는 수직적 확장 및 상기 장면 구성 요소의 계층 별로 프로퍼티 및 인스턴스를 추가하는 수평적 확장을 처리하는, 장면 지식 온톨로지 생성 시스템.
   
4. 제 2 항에 있어서,
   상기 프로세서는,
   상기 도메인 지식의 수집 처리 시, 기존에 정의된 데이터베이스 또는 다른 온톨로지를 재활용하는 수집형 처리 및 새로운 도메인 지식을 사용자가 직접 정의하는 정의형 처리 중 적어도 하나를 수행하고,
   상기 기존에 정의된 데이터베이스를 수집한 경우 스키마를 분석하여 도메인 온톨로지로 변환하고,
   상기 다른 온톨로지를 수집한 경우 기생성된 도메인 온톨로지에 연결하고,
   새로운 도메인 지식을 사용자가 정의하는 경우 새로운 장면 요소 계층 및 계층 내에 포함되는 인스턴스를 사용자가 정의하는,
   장면 지식 온톨로지 생성 시스템.
   
5. 삭제
6. 제 1 항에 있어서,
   상기 프로세서는,
   상기 도메인 지식 온톨로지에는 정의되지 않은 지식 정보를 장면 지식으로서 설정할 경우, 해당 장면 지식을 도메인 지식의 범주 및 키워드로서 상기 도메인 지식 온톨로지에 추가하는, 장면 지식 온톨로지 생성 시스템.
   
7. 삭제
8. 제 1 항에 있어서,
   상기 프로세서는,
   복수의 콘텐츠의 장면 별 메타데이터가 태깅된 상기 장면 지식 온톨로지를 검색하여 사용자가 요구한 조건에 대응하는 장면을 탐색하고, 상기 탐색에 따른 장면 검색 결과를 제공하며, 상기 장면 검색 결과 중 적어도 하나를 사용자가 선택할 수 있도록 하는 콘텐츠 장면 검색 사용자 인터페이스를 제공하고,
   상기 사용자가 선택한 적어도 하나의 장면을 사용하여 새로운 콘텐츠를 제작하는, 장면 지식 온톨로지 생성 시스템.
   
9. 제 8 항에 있어서,
   상기 프로세서는,
   상기 선택된 적어도 하나의 장면을 임의의 콘텐츠의 일부에 삽입 또는 대체하거나, 또는 상기 선택된 적어도 하나의 장면들로만 구성하여 상기 새로운 콘텐츠를 제작하는, 장면 지식 온톨로지 생성 시스템.
   
10. 삭제
11. 삭제
12. 삭제
13. 삭제
14. 삭제

Images