KR100961444B1 - 멀티미디어 콘텐츠를 검색하는 방법 및 장치 - Google Patents

멀티미디어 콘텐츠를 검색하는 방법 및 장치 Download PDF

Info

Publication number
KR100961444B1
KR100961444B1 KR1020080035896A KR20080035896A KR100961444B1 KR 100961444 B1 KR100961444 B1 KR 100961444B1 KR 1020080035896 A KR1020080035896 A KR 1020080035896A KR 20080035896 A KR20080035896 A KR 20080035896A KR 100961444 B1 KR100961444 B1 KR 100961444B1
Authority
KR
South Korea
Prior art keywords
indicator
query
user
mpeg
multimedia content
Prior art date
Application number
KR1020080035896A
Other languages
English (en)
Other versions
KR20080095180A (ko
Inventor
서희철
최미란
김현기
장명길
허정
임수종
윤여찬
윤경로
Original Assignee
한국전자통신연구원
건국대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원, 건국대학교 산학협력단 filed Critical 한국전자통신연구원
Priority to US12/597,158 priority Critical patent/US8577919B2/en
Priority to JP2010506044A priority patent/JP5426533B2/ja
Priority to EP08753141A priority patent/EP2143027A4/en
Priority to PCT/KR2008/002285 priority patent/WO2008130182A1/en
Priority to CN2008800173376A priority patent/CN101720462B/zh
Publication of KR20080095180A publication Critical patent/KR20080095180A/ko
Application granted granted Critical
Publication of KR100961444B1 publication Critical patent/KR100961444B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/48Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/587Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using geographical or spatial information, e.g. location
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/60Information retrieval; Database structures therefor; File system structures therefor of audio data
    • G06F16/63Querying
    • G06F16/632Query formulation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/60Information retrieval; Database structures therefor; File system structures therefor of audio data
    • G06F16/68Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data

Abstract

본 발명은 MPEG-7로 표현된 멀티미디어 콘텐츠를 검색하기 위한 사용자 질의를 MPEG-7 질의 포맷으로 변환하여 멀티미디어 콘텐츠를 검색하는 방법 및 장치에 관한 것이다. 본 발명에 의한 멀티미디어 콘텐츠 검색 방법은 사용자의 질의를 MPEG-7 문서의 특정 영역을 지시하는 지시자와 상기 지시자를 참조하는 참조자를 이용하여 표현하는 단계와, 상기 지시자와 상기 참조자를 이용하여 표현된 상기 사용자의 질의의 의미를 해석하는 단계와, 상기 해석 결과에 따라 해당 멀티미디어 콘텐츠를 검색하는 단계를 포함한다. 이러한 본 발명에 의하면, MPEG-7 질의 포맷에서 2 이상의 검색 조건이 동일한 구조 내에서 모두 충족된다는 것이나, 또한 서로 다른 MPEG-7 문서를 참조하고 있다는 것을 명시적으로 표현할 수 있다. 또한, 검색 과정에서 사용자 질의의 의미가 정확하게 해석되므로 사용자 질의에 부합하는 멀티미디어 콘텐츠가 정확하게 검색될 수 있다.
MPEG-7, 질의 포맷, 지시자, 참조자, 멀티미디어 콘텐츠

Description

멀티미디어 콘텐츠를 검색하는 방법 및 장치{METHOD AND APPARATUS FOR RETRIEVING MULTIMEDIA CONTENTS}
본 발명은 멀티미디어 콘텐츠를 검색하는 방법 및 장치에 관한 것으로서, 더욱 상세하게는 MPEG-7로 표현된 멀티미디어 콘텐츠를 검색하기 위한 사용자 질의를 MPEG-7 질의 포맷으로 변환하여 멀티미디어 콘텐츠를 검색하는 방법 및 장치에 관한 것이다.
본 발명은 정보통신부의 IT성장동력기술개발사업의 일환으로 수행한 연구로부터 도출된 것이다[과제관리번호 : 2005-S-117-03, 과제명 : 유비쿼터스 지향 지능형 개인용 미디어 관리 기술 개발(Development of Intelligent Personal Media Managing Technology for Ubiquitous Environment)].
MPEG-7은 이미지, 오디오, 동영상과 같은 멀티미디어 정보를 표현하기 위한 메타데이터들의 구조에 관한 국제표준이다. 그리고 MPEG-7 질의 포맷은 MPEG-7로 표현된 멀티미디어 콘텐츠를 검색하는 데 사용되는 질의 형식이다. MPEG-7 멀티미디어 콘텐츠를 검색하는 시스템에서는 MPEG-7 질의 포맷으로 입력된 질의와 관련된 MPEG-7 멀티미디어 콘텐츠를 검색한다.
MPEG-7 질의 포맷은 MPEG-7 문서를 검색하기 위한 구문을 정의하고 있다. 이 구문은 MPEG-7 문서 검색에 사용할 수 있는 다양한 질의 유형들을 표현할 수 있다. 예를 들어, "산이 있는 이미지"와 같은 자연어 문장 형식의 질의뿐만 아니라, 멀티미디어 파일 자체를 질의로 사용하는 예제 기반 질의, MPEG-7 문서적 기술(textual description) 기반 질의 등 다양한 질의를 표현할 수 있다.
그런데 다양한 유형의 질의를 표현하는 데 있어서, MPEG-7 문서의 동일한 구조를 참조하거나 서로 다른 부분을 참조하는 경우가 빈번하게 발생한다. 즉, 하나 이상의 검색 조건이 동일한 구조 내에서 모두 만족 되어야 하는 경우가 있다. 예를 들어서, "산"과 "바다"가 함께 있는 동영상 세그먼트를 검색하기 위해서는, 하나의 영역에 대해서 "산"이 있고, "바다"가 있음을 질의로 표현할 수 있어야 한다. 그리고 결합 연산(Join operation)을 위해서는 서로 다른 두 개의 MPEG-7 문서를 참조할 필요가 있는데, 이를 위해서는 서로 다른 두 개의 MPEG-7 문서를 참조하고 있음을 명시적으로 표현할 필요가 있다.
그러나 지금까지의 MPEG-7 질의 포맷에서는 2 이상의 검색 조건이 동일한 구조 내에서 모두 충족해야 된다는 것이나, 또한 서로 다른 MPEG-7 문서를 참조한다는 것을 명시적으로 표현할 수 없는 문제점이 있다.
이러한 문제점을 해결하기 위하여 제안된 본 발명은 2 이상의 검색 조건이 동일한 구조 내에서 모두 충족된다는 것이나, 또한 서로 다른 MPEG-7 문서를 참조한다는 것을 명시적으로 표현할 수 있도록 하는 MPEG-7 질의 포맷을 제공하는 것을 일 목적으로 한다.
또한, 본 발명은 검색 과정에서 사용자의 질의의 의미가 정확하게 해석되어 멀티미디어 콘텐츠에 대한 정확한 검색이 가능하도록 하는 검색 방법 및 장치를 제공하는 것을 다른 목적으로 한다.
본 발명의 다른 목적 및 장점들은 하기의 설명에 의해서 이해될 수 있으며, 본 발명의 실시예에 의해 더욱 분명하게 알게 될 것이다. 또한, 본 발명의 목적 및 장점들은 특허청구범위에 나타낸 수단 및 그 조합에 의해 실현될 수 있음을 쉽게 알 수 있을 것이다.
이러한 목적을 달성하기 위한 본 발명은, 멀티미디어 콘텐츠를 검색하는 방법에 있어서, 사용자의 질의를 MPEG-7 문서의 특정 영역을 지시하는 지시자와 상기 지시자를 참조하는 참조자를 이용하여 표현하는 단계와, 상기 지시자와 상기 참조자를 이용하여 표현된 상기 사용자의 질의의 의미를 해석하는 단계와, 상기 해석 결과에 따라 해당 멀티미디어 콘텐츠를 검색하는 단계를 포함하는 것을 일 특징으 로 한다.
또한, 본 발명은 멀티미디어 콘텐츠를 검색하기 위하여 사용자 질의를 처리하는 방법에 있어서, 사용자로부터 멀티미디어 콘텐츠의 검색을 위한 질의를 입력받는 단계와, 상기 사용자 질의를 MPEG-7 문서의 특정 영역을 지시하는 지시자와 상기 지시자를 참조하는 참조자로 표현하는 단계를 포함하는 것을 다른 특징으로 한다.
또한, 본 발명은 멀티미디어 콘텐츠를 검색하는 장치에 있어서, 사용자로부터 멀티미디어 콘텐츠의 검색을 위한 질의를 입력받는 질의 입력부와, 상기 질의 입력부를 통해 입력된 사용자 질의를 MPEG-7 문서의 특정 영역을 지시하는 지시자와 상기 지시자를 참조하는 참조자를 이용하여 표현하는 질의 표현부와, 상기 질의 표현부에서 상기 지시자와 상기 참조자를 이용하여 표현된 상기 사용자 질의의 의미를 해석하는 질의 해석부와, 상기 질의 해석부에서의 해석 결과에 따라 해당 멀티미디어 콘텐츠를 검색하는 콘텐츠 검색부를 포함하는 것을 또 다른 특징으로 한다.
또한, 본 발명은 멀티미디어 콘텐츠를 검색하기 위하여 사용자 질의를 표현하는 데이터 구조에 있어서, MPEG-7 문서의 특정 영역을 지시하는 지시자와, 상기 지시자를 참조하는 참조자를 포함하는 것을 또 다른 특징으로 한다.
전술한 바와 같은 본 발명에 의하면, MPEG-7 질의 포맷에서 2 이상의 검색 조건이 동일한 구조 내에서 모두 충족된다는 것이나, 또한 서로 다른 MPEG-7 문서를 참조한다는 것을 명시적으로 표현할 수 있다. 또한, 본 발명에 의하면 검색 과정에서 사용자 질의의 의미가 정확하게 해석되므로 사용자 질의에 부합하는 멀티미디어 콘텐츠가 정확하게 검색될 수 있다.
상술한 목적, 특징 및 장점은 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 더욱 분명해 질 것이며, 그에 따라 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 것이다. 또한, 본 발명을 설명함에 있어서 본 발명과 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에 그 상세한 설명을 생략하기로 한다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 일 실시예를 상세히 설명하기로 한다.
도 1은 본 발명의 일 실시예에 의한 멀티미디어 콘텐츠 검색 방법을 설명하는 흐름도이다.
본 발명에서 사용자 질의는 멀티미디어 검색을 위한 질의로 표현된다(10). 이 단계(10)에서의 질의 표현은 사용자가 작성한 질의의 의미를 정확하게 표현하기 위해서 지시자와, 지시자를 참조하는 참조자를 이용한다. 지시자는 MPEG-7 문서의 특정 영역을 지칭하며, 참조자는 특정 지시자를 참조하는데 사용된다. 위에서 예로 든, "산"과 "바다"가 함께 있는 동영상 세그먼트를 검색하는 경우, 동영상 세그먼 트에 대한 지시자를 두고, 이 지시자의 참조자를 이용해서 "산"이 있고, "바다"가 있는 것을 표현할 수 있다. 그리고 결합 연산에서는 서로 다른 두 개의 MPEG-7 문서에 대해서 두 개의 지시자를 설정하고, 각각의 지시자에 대한 각각의 참조자를 둠으로써 서로 다른 두 개의 MPEG-7 문서를 지칭함으로 명시적으로 표현할 수 있다.
지시자와 참조자를 사용하여 표현된 사용자 질의는 질의 처리기에서 분석되고(20), 검색 엔진은 질의 처리기에서 분석된 사용자 질의와 관련된 멀티미디어를 검색하여(30) 검색 결과를 제공한다(40).
도 2는 본 발명의 일 실시예에 의한 지시자의 XML 스키마의 형식을 설명하는 도면이다. 도시된 바와 같이, 지시자는 지시자 고유번호(101), 지시자 영역 기술자(102), 지시자 제한 기술자(103)로 구성된다. 그리고 지시자 영역 기술자(102)에서는 다른 지시자를 참조할 수 있도록 하는 참조자(104)가 있을 수 있다. 지시자 제한 기술자(103)에서는 지시자 제한을 위한 조건을 기술하는 부분(105)이 있다.
MPEG-7 문서는 XML 형식으로 기술되어 있으며, 지시자는 MPEG-7 문서의 특정 영역을 지시한다. 이를 위해서 지시자 영역 기술자(102)는 특정 영역의 최상위 노드를 지정하는데 사용된다. 지시자 제한 기술자(103)는 지시자 영역 기술자로 표현된 영역과 관련해서 추가적인 제한 조건이 필요한 경우에 사용된다. 지시자 고유 번호(101)는 지시자를 참조할 때 사용된다.
도 2를 XML 스키마 형식으로 기술하면 표 1과 같다. 표 1에서 "Path" 요소는 지시자 영역을 기술하기 위한 부분이고, "Selector" 요소는 지시자 제한을 기술하 기 위한 부분이며, "id"는 지시자의 고유 번호를 나타낸다. 지시자 내부에서 다른 지시자도 참조할 수 있기 위해서 다른 지시자를 참조하기 위한 "ref" 속성을 둔다. 지시자 제한 부분에서는 제한을 위한 조건으로 "ConditionType"을 정의해서 특정 조건들을 기술할 수 있다.
Figure 112008027573826-pat00001
도 3은 본 발명의 일 실시예에 의한 참조자의 XML 스키마의 형식을 설명하는 도면이다. 참조자는 특정 지시자를 참조하고, 참조자를 이용해서 지시자가 지시하는 특정 영역 내부의 노드까지 참조할 수 있다.
도 3에서 참조자는 박스(106)로 표시된 바와 같이, 특정 지시자를 참조하기 위한 "ref" 속성을 가질 수 있으며, 속성값으로 지시자와 관련된 영역을 표현할 수 있다. 도 3과 관련된 XML 스키마는 표 2와 같이 기술할 수 있다. 표 2에서 "ref" 속성이 지시자를 참조하며, "xPathType"으로 지시자와 관련된 부분을 표기할 수 있다.
Figure 112008027573826-pat00002
도 4는 도 1에서의 질의 표현 단계(10)의 상세 흐름도이다. 먼저 사용자로부터 멀티미디어 콘텐츠의 검색을 위한 질의를 입력받는다(402). 다음에 입력된 사용자 질의를 MPEG-7 문서의 특정 영역을 지시하는 지시자와, 지시자를 참조하는 참조자로 표현한다(404).
예를 들어, 표 1과 2에 정의된 XML 스키마를 이용해서 "이미지 크기(가로*세로)가 1024 * 768보다 큰 이미지를 검색"하는 질의를 표 3과 같이 표현할 수 있다. 표 3에서 "href"와 같은 참조자를 이용해서 지시자를 참조하고, 추가 패스를 기술함으로써 지시자가 지시하는 영역과 관련된 특정 부분을 지시할 수 있다.
Figure 112008027573826-pat00003
도 5는 도 1에서의 질의 처리 단계(20)의 상세 흐름도이다. 질의 처리 단계(20)에서는 지시자와 참조자를 이용해서 표현된 사용자 질의의 의미를 분석한다. 먼저, XML 형식으로 기술된 사용자 질의를 XML 파서로 파싱한다(502). 다음에는 파싱된 결과를 기반으로 지시자와 참조자를 처리하고(504), 처리된 지시자와 참조자를 이용하여 사용자 질의의 의미를 해석한다(506).
지시자와 참조자를 처리하는 단계(504)에서 동일한 지시자를 참조하는 참조자들은 동일 영역 내부의 값을 참조하는 값으로 간주하여, 질의 의미를 해석한다. 예를 들어, 위의 질의에서 "@height"와 "@width"는 "VisualCodingFrameID"를 참조하고 있으므로, 두 개가 "VisualCodingFrameID"가 지시하는 영역의 내부에 있는 값을 참조하고 있는 것으로 분석한다.
도 6은 본 발명의 다른 실시예에 의한 지시자의 XML 스키마의 형식을 설명하는 도면이다. 지시자 고유번호(601)는 도 2의 지시자 고유번호(101)과 동일하다. 도 6에서 지시자 영역 기술자(602)는 선택 사항이고 "attribute"를 가지지 않으며, 지시자 제한 기술자(603)는 필수 사항이다. 도 6을 XML 스키마 형식으로 기술하면 표 4와 같다.
Figure 112008027573826-pat00004
도 7은 본 발명의 일 실시예에 의한 멀티미디어 콘텐츠 검색 장치의 구조를 설명하는 블록도이다. 도시된 바와 같이, 멀터미디어 콘텐츠 검색 장치(700)는 질의 입력부(702), 질의 표현부(704), 질의 해석부(706), 콘텐츠 검색부(708), 콘텐츠 출력부(710)를 구비하고 있다.
질의 입력부(702)는 사용자로부터 멀티미디어 콘텐츠의 검색을 위한 질의를 입력받는다. 질의 표현부(704)는 질의 입력부(702)를 통해 입력된 사용자 질의를 MPEG-7 문서의 특정 영역을 지시하는 지시자와, 지시자를 참조하는 참조자를 이용하여 MPEG-7 질의 포맷으로 표현한다. 지시자는 참조자가 자신을 참조할 때 사용되는 지시자 식별부호와, 지시자가 지시하는 영역에 대한 제한 조건을 기술하는 기술자와, 지시자가 지시하는 영역의 최상위 노드를 지정하는 기술자를 포함한다. 사용자 질의는 XML 형식으로 표현된다.
질의 해석부(706)는 질의 표현부(704)에서 지시자와 참조자를 이용하여 표현된 사용자 질의의 의미를 해석한다. 질의 해석부(706)는 사용자 질의를 파싱하는 XML 파서(712)와, XML 파서(712)의 파싱 결과를 기반으로 지시자와 참조자를 처리하는 기술자 처리부(714)와, 기술자 처리부(714)에서 처리된 지시자와 참조자를 이용하여 사용자 질의의 의미를 해석하는 의미 해석부(716)를 포함한다. 콘텐츠 검색부(708)는 질의 해석부(706)에서의 해석 결과에 따라 해당 멀티미디어 콘텐츠를 검색한다. 콘텐츠 검색부(708)는 데이터베이스(718)를 검색하거나, 통신부(720)를 이용하여 인터넷(722)을 검색할 수 있다. 데이터베이스(718)는 검색 장치(700)의 내부에 설치된 것일 수도 있고, 외부에 설치된 것일 수도 있다. 출력부(710)는 콘텐츠 검색부(708)가 검색한 멀티미디어 콘텐츠를 사용자에게 제공한다.
상술한 바와 같은 본 발명의 방법은 프로그램으로 구현되어 컴퓨터로 읽을 수 있는 형태로 기록매체(씨디롬, 램, 롬, 플로피 디스크, 하드 디스크, 광자기 디스크 등)에 저장될 수 있다. 이러한 과정은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있으므로 더 이상 상세히 설명하지 않기로 한다.
이상에서 설명한 본 발명은, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하므로 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니다.
도 1은 본 발명의 일 실시예에 의한 멀티미디어 콘텐츠 검색 방법을 설명하는 흐름도.
도 2는 본 발명의 일 실시예에 의한 지시자의 XML 스키마의 형식을 설명하는 도면.
도 3은 본 발명의 일 실시예에 의한 참조자의 XML 스키마의 형식을 설명하는 도면.
도 4는 도 1에서의 질의 표현 단계(10)의 상세 흐름도.
도 5는 도 1에서의 질의 처리 단계(20)의 상세 흐름도.
도 6은 본 발명의 다른 실시예에 의한 지시자의 XML 스키마의 형식을 설명하는 도면.
도 7은 본 발명의 일 실시예에 의한 멀티미디어 콘텐츠 검색 장치의 구조를 설명하는 블록도.

Claims (19)

  1. 멀티미디어 콘텐츠를 검색하는 방법에 있어서,
    사용자의 질의를 MPEG-7 문서의 특정 영역을 지시하는 지시자와 상기 지시자를 참조하는 참조자를 이용하여 표현하는 단계와,
    상기 지시자와 상기 참조자를 이용하여 표현된 상기 사용자의 질의의 의미를 해석하는 단계와,
    상기 해석 결과에 따라 해당 멀티미디어 콘텐츠를 검색하는 단계를
    포함하는 것을 특징으로 하는 검색 방법.
  2. 제 1 항에 있어서,
    상기 지시자는
    상기 참조자가 상기 지시자를 참조할 때 사용되는 지시자 식별부호와,
    상기 지시자가 지시하는 영역에 대한 제한 조건을 기술하는 기술자를
    포함하는 것을 특징으로 하는 검색 방법.
  3. 제 2 항에 있어서,
    상기 지시자는 상기 지시자가 지시하는 영역의 최상위 노드를 지정하는 기술 자를 더 포함하는 것을 특징으로 하는 검색 방법.
  4. 제 1 항에 있어서,
    상기 사용자 질의의 표현 단계는 상기 사용자 질의를 XML 형식으로 기술하는 것을 특징으로 하는 검색 방법.
  5. 제 4 항에 있어서,
    상기 사용자 질의의 해석 단계는
    상기 사용자 질의를 XML 파서로 파싱하는 단계와,
    상기 파싱 결과를 기반으로 상기 지시자와 상기 참조자를 처리하는 단계와,
    상기 처리된 지시자와 참조자를 이용하여 상기 사용자 질의의 의미를 해석하는 단계를
    포함하는 것을 특징으로 하는 검색 방법.
  6. 제 5 항에 있어서,
    상기 지시자 및 참조자 처리 단계는 동일한 지시자를 참조하는 참조자들에 대해 동일한 영역의 내부의 값을 참조하는 것으로 처리하는 것을 특징으로 하는 검 색 방법.
  7. 멀티미디어 콘텐츠를 검색하기 위하여 사용자 질의를 처리하는 방법에 있어서,
    사용자로부터 멀티미디어 콘텐츠의 검색을 위한 질의를 입력받는 단계와,
    상기 사용자 질의를 MPEG-7 문서의 특정 영역을 지시하는 지시자와 상기 지시자를 참조하는 참조자로 표현하는 단계를
    포함하는 것을 특징으로 하는 처리 방법.
  8. 제 7 항에 있어서,
    상기 지시자는
    상기 참조자가 상기 지시자를 참조할 때 사용되는 지시자 식별부호와,
    상기 지시자가 지시하는 영역에 대한 제한 조건을 기술하는 기술자를
    포함하는 것을 특징으로 하는 처리 방법.
  9. 제 8 항에 있어서,
    상기 지시자는 상기 지시자가 지시하는 영역의 최상위 노드를 지정하는 기술 자를 더 포함하는 것을 특징으로 하는 처리 방법.
  10. 제 7 항에 있어서,
    상기 사용자 질의의 표현 단계는 상기 사용자 질의를 XML 형식으로 기술하는 것을 특징으로 하는 처리 방법.
  11. 멀티미디어 콘텐츠를 검색하는 장치에 있어서,
    사용자로부터 멀티미디어 콘텐츠의 검색을 위한 질의를 입력받는 질의 입력부와,
    상기 질의 입력부를 통해 입력된 사용자 질의를 MPEG-7 문서의 특정 영역을 지시하는 지시자와 상기 지시자를 참조하는 참조자를 이용하여 표현하는 질의 표현부와,
    상기 질의 표현부에서 상기 지시자와 상기 참조자를 이용하여 표현된 상기 사용자 질의의 의미를 해석하는 질의 해석부와,
    상기 질의 해석부에서의 해석 결과에 따라 해당 멀티미디어 콘텐츠를 검색하는 콘텐츠 검색부를
    포함하는 것을 특징으로 하는 검색 장치.
  12. 제 11 항에 있어서,
    상기 지시자는
    상기 참조자가 상기 지시자를 참조할 때 사용되는 지시자 식별부호와,
    상기 지시자가 지시하는 영역에 대한 제한 조건을 기술하는 기술자를
    포함하는 것을 특징으로 하는 검색 장치.
  13. 제 12 항에 있어서,
    상기 지시자는 상기 지시자가 지시하는 영역의 최상위 노드를 지정하는 기술자를 더 포함하는 것을 특징으로 하는 검색 장치.
  14. 제 11 항에 있어서,
    상기 사용자 질의의 표현은 상기 사용자 질의를 XML 형식으로 기술하는 것을 특징으로 하는 검색 장치.
  15. 제 14 항에 있어서,
    상기 질의 해석부는
    상기 사용자 질의를 파싱하는 XML 파서와,
    상기 XML 파서의 파싱 결과를 기반으로 상기 지시자와 상기 참조자를 처리하는 기술자 처리부와,
    상기 기술자 처리부에서 처리된 지시자와 참조자를 이용하여 상기 사용자 질의의 의미를 해석하는 의미 해석부를
    포함하는 것을 특징으로 하는 검색 장치.
  16. 멀티미디어 콘텐츠를 검색하기 위하여 사용자 질의를 표현하는 데이터 구조가 기록된 기록매체에 있어서, 상기 데이터 구조는
    MPEG-7 문서의 특정 영역을 지시하는 지시자와,
    상기 지시자를 참조하는 참조자를
    포함하는 것을 특징으로 하는 기록매체.
  17. 제 16 항에 있어서,
    상기 지시자는
    상기 참조자가 상기 지시자를 참조할 때 사용되는 지시자 식별부호와,
    상기 지시자가 지시하는 영역에 대한 제한 조건을 기술하는 기술자를
    포함하는 것을 특징으로 하는 기록매체.
  18. 제 17 항에 있어서,
    상기 지시자는 상기 지시자가 지시하는 영역의 최상위 노드를 지정하는 기술자를 더 포함하는 것을 특징으로 하는 기록매체.
  19. 제 16 항에 있어서,
    상기 데이터 구조는 XML 형식으로 기술되는 것을 특징으로 하는 기록매체.
KR1020080035896A 2007-04-23 2008-04-18 멀티미디어 콘텐츠를 검색하는 방법 및 장치 KR100961444B1 (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
US12/597,158 US8577919B2 (en) 2007-04-23 2008-04-23 Method and apparatus for retrieving multimedia contents
JP2010506044A JP5426533B2 (ja) 2007-04-23 2008-04-23 マルチメディアコンテンツを検索する方法及び装置
EP08753141A EP2143027A4 (en) 2007-04-23 2008-04-23 METHOD AND APPARATUS FOR EXTRACTING MULTIMEDIA CONTENT
PCT/KR2008/002285 WO2008130182A1 (en) 2007-04-23 2008-04-23 Method and apparatus for retrieving multimedia contents
CN2008800173376A CN101720462B (zh) 2007-04-23 2008-04-23 用于检索多媒体内容的方法和设备

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR20070039475 2007-04-23
KR1020070039475 2007-04-23

Publications (2)

Publication Number Publication Date
KR20080095180A KR20080095180A (ko) 2008-10-28
KR100961444B1 true KR100961444B1 (ko) 2010-06-09

Family

ID=40154958

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080035896A KR100961444B1 (ko) 2007-04-23 2008-04-18 멀티미디어 콘텐츠를 검색하는 방법 및 장치

Country Status (6)

Country Link
US (1) US8577919B2 (ko)
EP (1) EP2143027A4 (ko)
JP (1) JP5426533B2 (ko)
KR (1) KR100961444B1 (ko)
CN (1) CN101720462B (ko)
WO (1) WO2008130182A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10235410B2 (en) 2015-02-11 2019-03-19 Electronics And Telecommunications Research Institute Query input apparatus and method

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102479026B1 (ko) * 2017-09-27 2022-12-20 한국전자통신연구원 MPEG IoMT 환경에서의 질의응답 시스템 및 방법
CN109582763B (zh) * 2017-09-27 2023-08-22 韩国电子通信研究院 运动图像专家组媒体物联网环境中的答疑系统及方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005501343A (ja) 2001-08-28 2005-01-13 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ マルチメディアコンテンツにおけるユーザ選択からの自動的質問構築

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6070167A (en) * 1997-09-29 2000-05-30 Sharp Laboratories Of America, Inc. Hierarchical method and system for object-based audiovisual descriptive tagging of images for information retrieval, editing, and manipulation
EP1125245B1 (en) 1998-11-06 2012-01-04 The Trustees of Columbia University in the City of New York Image description system and method
US6490370B1 (en) * 1999-01-28 2002-12-03 Koninklijke Philips Electronics N.V. System and method for describing multimedia content
US6593936B1 (en) * 1999-02-01 2003-07-15 At&T Corp. Synthetic audiovisual description scheme, method and system for MPEG-7
US6411724B1 (en) * 1999-07-02 2002-06-25 Koninklijke Philips Electronics N.V. Using meta-descriptors to represent multimedia information
US6629088B1 (en) * 1999-11-30 2003-09-30 Sony Corporation Method and apparatus for measuring the quality of descriptors and description schemes
KR100739031B1 (ko) 2000-03-27 2007-07-25 주식회사 큐론 멀티미디어 검색시스템에서 mpeg-7 표준 메타데이터의 은닉 및 검출 방법과 이를 이용한 멀티미디어 데이터의 검색 방법
JP3784289B2 (ja) * 2000-09-12 2006-06-07 松下電器産業株式会社 メディア編集方法及びその装置
KR100413679B1 (ko) * 2000-10-21 2003-12-31 삼성전자주식회사 형상 기술자 추출방법
US20030009472A1 (en) 2001-07-09 2003-01-09 Tomohiro Azami Method related to structured metadata
US7231394B2 (en) * 2001-07-17 2007-06-12 Sony Corporation Incremental bottom-up construction of data documents
US7664830B2 (en) * 2002-03-29 2010-02-16 Sony Corporation Method and system for utilizing embedded MPEG-7 content descriptions
US7284188B2 (en) * 2002-03-29 2007-10-16 Sony Corporation Method and system for embedding MPEG-7 header data to improve digital content queries
AU2002330478A1 (en) * 2002-09-03 2004-03-29 Fujitsu Limited Search system, search server, client, search method, program, and recording medium
CN1768480B (zh) * 2003-02-03 2012-03-14 夏普株式会社 编码装置和方法、解码装置和方法
US20040267720A1 (en) * 2003-06-27 2004-12-30 Peiya Liu Query system for structured multimedia content retrieval
KR100558881B1 (ko) 2003-12-27 2006-03-10 한국전자통신연구원 멀티미디어 컨텐츠 검색 및 브라우징 지원 장치 및 그 방법
JP2005332274A (ja) * 2004-05-20 2005-12-02 Toshiba Corp 動画像中のオブジェクトに関するメタデータストリームのデータ構造、検索方法及び再生方法
DE602005022069D1 (de) * 2004-06-23 2010-08-12 Oracle Int Corp Effiziente auswertung von abfragen mittels übersetzung
JP4179262B2 (ja) 2004-10-06 2008-11-12 ソニー株式会社 情報処理装置および方法、並びにプログラム
KR100780786B1 (ko) 2005-02-04 2007-11-29 후지쯔 가부시끼가이샤 검색 처리 시스템, 그 검색 서버, 클라이언트, 검색 처리 방법, 및 기록 매체
US7698262B2 (en) * 2006-03-29 2010-04-13 Electronics And Telecommunications Research Institute Apparatus and method for searching multimedia data based on metadata
US8805868B2 (en) * 2007-08-03 2014-08-12 Electronics And Telecommunications Research Institute Apparatus and method for a query express

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005501343A (ja) 2001-08-28 2005-01-13 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ マルチメディアコンテンツにおけるユーザ選択からの自動的質問構築

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10235410B2 (en) 2015-02-11 2019-03-19 Electronics And Telecommunications Research Institute Query input apparatus and method

Also Published As

Publication number Publication date
CN101720462B (zh) 2012-11-07
EP2143027A4 (en) 2010-05-05
WO2008130182A1 (en) 2008-10-30
EP2143027A1 (en) 2010-01-13
US20100131557A1 (en) 2010-05-27
US8577919B2 (en) 2013-11-05
JP2010528347A (ja) 2010-08-19
JP5426533B2 (ja) 2014-02-26
KR20080095180A (ko) 2008-10-28
CN101720462A (zh) 2010-06-02

Similar Documents

Publication Publication Date Title
US7162691B1 (en) Methods and apparatus for indexing and searching of multi-media web pages
JP4028410B2 (ja) 関係型データベースにおいて正規経路式質疑を処理するxmlインデックス方法と資料構造
EP2901318B1 (en) Evaluating xml full text search
US7747629B2 (en) System and method for positional representation of content for efficient indexing, search, retrieval, and compression
US7953592B2 (en) Semantic analysis apparatus, semantic analysis method and semantic analysis program
US20090019015A1 (en) Mathematical expression structured language object search system and search method
US20060136452A1 (en) Method of generating database schema to provide integrated view of dispersed data and data integrating system
KR100961444B1 (ko) 멀티미디어 콘텐츠를 검색하는 방법 및 장치
US20110270862A1 (en) Information processing apparatus and information processing method
KR100941971B1 (ko) 멀티미디어 검색을 위한 질의 표현 장치 및 방법
Kaushal et al. Collection Management of Electronic Theses and Dissertations (CME) CS5604 Fall 2019
Yaginuma et al. Design of metadata elements for digital news articles in the Omnipaper project
Yaginuma et al. Metadata elements for digital news resource description
Fan et al. Semantic Annotation of Office Documents
Hatano et al. Extraction of partial XML documents using IR-based structure and contents analysis
KR100904890B1 (ko) 임베디드 멀티미디어 기기에 적합한 mpeg-7메타-데이터 저장 방법
Zheng et al. An MPEG-7 compatible video retrieval system with support for semantic queries
KR20000037782A (ko) 중간언어를 이용한 내용기반 동영상 질의어 생성 방법
Kaushal et al. CS5604: Information Storage and Retrieval Collection Management of Electronic Theses and Dissertations
Lehtonen Indexing heterogeneous XML for full-text search
JP2003281160A (ja) メタデータ作成システム、メタデータ作成方法、メタデータ作成プログラムおよび記録媒体
Harrathi et al. A query graph for visual querying structured documents
Lyu et al. Techniques for Information Searching and Retrieval of Web based Multimedia Digital Library
Lounela Anatomy of an XML-based text corpus server
Arotaritei Data mining in metadata repositories

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130424

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20140430

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20150427

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20160427

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20170427

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20180426

Year of fee payment: 9

LAPS Lapse due to unpaid annual fee