KR20040054901A - 동영상 검색 시스템 및 방법 - Google Patents
동영상 검색 시스템 및 방법 Download PDFInfo
- Publication number
- KR20040054901A KR20040054901A KR1020020081234A KR20020081234A KR20040054901A KR 20040054901 A KR20040054901 A KR 20040054901A KR 1020020081234 A KR1020020081234 A KR 1020020081234A KR 20020081234 A KR20020081234 A KR 20020081234A KR 20040054901 A KR20040054901 A KR 20040054901A
- Authority
- KR
- South Korea
- Prior art keywords
- image
- search
- information
- annotation
- video
- Prior art date
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
- G06F16/71—Indexing; Data structures therefor; Storage structures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
- G06F16/73—Querying
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
- G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/783—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
- G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/7867—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, title and artist information, manually generated time, location and usage information, user ratings
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Library & Information Science (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Software Systems (AREA)
- Computational Linguistics (AREA)
Abstract
Description
Claims (13)
- 이미지 검색 방법과 텍스트 검색 방법을 복합적으로 사용하여 동영상을 검색할 수 있는 동영상 검색 시스템에 있어서,동영상을 분석하여 이미지를 검출해내는 장면 검출기; 및 상기 검출된 이미지에 주석 정보를 기입하는 주석기;를 포함하는 동영상 저작부;상기 주석 정보가 기입된 이미지 및 각 이미지에 대한 색상, 형태, 질감 정보를 추출하여 저장하는 서버;상기 서버에 저장된 주석 정보가 기입된 이미지를 입력받아 주석 정보와 이미지로 분리하는 입력 처리기; 상기 입력 처리기에서 분리된 주석 정보를 색인하는 주석 기반 검색 엔진; 상기 입력 처리기에서 분리된 이미지를 색인하는 이미지 검색 엔진; 및 사용자로부터 검색을 원하는 텍스트, 이미지, 이미지 검색 방식을 입력받아 유사도 검색을 통하여 상기 색인된 주석 정보 및 이미지와 유사도 검색을 하여 결과 셋을 얻어내는 질의 처리기;를 포함하는 동영상 검색부;로 이루어지는 것을 특징으로 하는 동영상 검색 시스템.
- 제 1 항에 있어서,상기 장면 검출기가 검출해내는 이미지는 장면변환이 있는 이미지이거나 지정된 시간마다 강제적으로 추출한 이미지인 것을 특징으로 하는 동영상 검색 시스템.
- 제 1 항에 있어서,상기 동영상 검색부에는 상기 색인된 주석 정보와 이미지를 최근 입력 시간 순서로 정렬하는 랭커를 추가로 포함하는 것을 특징으로 하는 동영상 검색 시스템.
- 제 1 항에 있어서,상기 동영상 검색부의 이미지 검색엔진은 상기 입력 처리기에서 분리된 이미지에 대하여 색상 정보에 대한 벡터열을 만들어 이를 인덱스 Ix에 색인하는 것을 특징으로 하는 동영상 검색 시스템.
- 제 1 항에 있어서,상기 동영상 검색부의 이미지 검색엔진은 상기 입력 처리기에서 분리된 이미지에 대하여 형태 정보에 대한 벡터열을 만들어 이를 인덱스 Iy에 색인하는 것을 특징으로 하는 동영상 검색 시스템.
- 제 1 항에 있어서,상기 동영상 검색부의 이미지 검색엔진은 상기 입력 처리기에서 분리된 이미지에 대하여 질감 정보에 대한 벡터열을 만들어 이를 인덱스 Iz에 색인하는 것을 특징으로 하는 동영상 검색 시스템.
- 제 1 항에 있어서,상기 동영상 검색부의 이미지 검색엔진은 상기 입력 처리기에서 분리된 이미지에 대하여 색상, 형태, 질감 정보에 대한 각각의 벡터열을 조합하여 통합 속성 정보에 대한 벡터열을 만들어 이를 인덱스 It에 색인하는 것을 특징으로 하는 동영상 검색 시스템.
- 제 1 항에 있어서,상기 동영상 검색부의 질의 처리기가 입력받는 이미지 검색 방식은 색상 정보 비교, 형태 정보 비교, 질감 정보 비교 또는 상기 3가지 정보의 통합 속성 정보 비교 방식 중의 어느 하나인 것을 특징으로 하는 동영상 검색 시스템.
- 이미지 검색 방법과 텍스트 검색 방법을 복합적으로 사용하여 동영상을 검색할 수 있는 동영상 검색 방법에 있어서,상기 장면 검출기에 의하여 동영상을 분석하여 이미지를 검출하는 제 1 단계;상기 주석기에 의하여 상기 검출된 이미지에 주석 정보를 기입하는 제 2 단계;상기 주석 정보가 기입된 이미지를 서버에 저장하는 제 3 단계;상기 입력 처리기에 의하여 상기 서버에 저장된 주석 정보가 기입된 이미지를 주석 정보와 이미지로 분리하는 제 4 단계;상기 분리된 주석 정보를 상기 주석기반 검색엔진에서 색인하는 제 5 단계;상기 분리된 이미지에 대한 색상, 형태, 질감 정보로부터 색상, 형태, 질감 또는 이들의 통합 속성 정보에 대한 벡터열을 만드는 방식으로 상기 이미지 검색엔진에서 이미지를 색인하는 제 6 단계;상기 질의 처리기에 의하여 사용자가 검색을 원하는 이미지를 입력하였는지를 판단하는 제 7 단계;상기 제 7 단계에서 이미지가 입력되었다면 색상, 형태, 질감 또는 통합 속성 중 사용자에 의하여 체크된 항목에 대하여 상기 색인된 정보와 유사도 검색을 하는 제 8 단계;상기 제 8 단계에서 행한 유사도 검색에 의하여 이미지 결과 셋을 구성하는 제 9 단계;상기 질의 처리기에 의하여 사용자가 검색을 원하는 텍스트를 입력하였는지를 판단하여 텍스트가 입력되었다면 주석기반 결과 셋을 구성하는 제 10 단계; 및제 9 단계와 제 10 단계에서 구성된 양 결과 셋을 상호 비교하여 양 결과 셋에 모두 포함되는 것들로 구성된 최종 결과 셋을 사용자에게 전송하는 제 11 단계;를 포함하는 것을 특징으로 하는 동영상 검색 방법.
- 제 9 항에 있어서,상기 제 8 단계의 색상에 대한 유사도 검색은 사용자가 입력한 이미지에서 추출된 색상 벡터 정보와 상기 색상 인덱스 Ix에 색인되어 있는 색상 벡터 정보간의 유사도 검색인 것을 특징으로 하는 동영상 검색 방법.
- 제 9 항에 있어서,상기 제 8 단계의 형태에 대한 유사도 검색은 사용자가 입력한 이미지에서 추출된 형태 벡터 정보와 상기 형태 인덱스 Iy에 색인되어 있는 형태 벡터 정보간의 유사도 검색인 것을 특징으로 하는 동영상 검색 방법.
- 제 9 항에 있어서,상기 제 8 단계의 질감에 대한 유사도 검색은 사용자가 입력한 이미지에서 추출된 질감 벡터 정보와 상기 질감 인덱스 Iz에 색인되어 있는 질감 벡터 정보간의 유사도 검색인 것을 특징으로 하는 동영상 검색 방법.
- 제 9 항에 있어서,상기 제 8 단계의 통합 속성에 대한 유사도 검색은 사용자가 입력한 이미지에서 추출된 통합 속성 벡터 정보와 상기 통합 속성 인덱스 It에 색인되어 있는 통합 속성 벡터 정보간의 유사도 검색인 것을 특징으로 하는 동영상 검색 방법.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR20020081234A KR100644016B1 (ko) | 2002-12-18 | 2002-12-18 | 동영상 검색 시스템 및 방법 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR20020081234A KR100644016B1 (ko) | 2002-12-18 | 2002-12-18 | 동영상 검색 시스템 및 방법 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20040054901A true KR20040054901A (ko) | 2004-06-26 |
KR100644016B1 KR100644016B1 (ko) | 2006-11-10 |
Family
ID=37347645
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR20020081234A KR100644016B1 (ko) | 2002-12-18 | 2002-12-18 | 동영상 검색 시스템 및 방법 |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR100644016B1 (ko) |
Cited By (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100703705B1 (ko) * | 2005-11-18 | 2007-04-06 | 삼성전자주식회사 | 동영상을 위한 멀티 미디어 코멘트 처리 장치 및 방법 |
KR100729660B1 (ko) * | 2005-12-09 | 2007-06-18 | 한국전자통신연구원 | 장면 전환 길이를 이용한 디지털 비디오 인식 시스템 및 방법 |
WO2008140193A1 (en) * | 2007-05-09 | 2008-11-20 | Jong Ok Ko | Method to store and search personal information using color |
KR20120036649A (ko) * | 2010-10-08 | 2012-04-18 | 엘지전자 주식회사 | 단말기의 드로잉을 이용한 검색 방법 및 그 단말기 |
US8341112B2 (en) | 2006-05-19 | 2012-12-25 | Microsoft Corporation | Annotation by search |
US8559682B2 (en) | 2010-11-09 | 2013-10-15 | Microsoft Corporation | Building a person profile database |
US8620107B2 (en) | 2008-03-18 | 2013-12-31 | Electronics And Telecommunications Research Institute | Apparatus and method for extracting features of video, and system and method for identifying videos using same |
US8903798B2 (en) | 2010-05-28 | 2014-12-02 | Microsoft Corporation | Real-time annotation and enrichment of captured video |
KR20150067899A (ko) * | 2013-12-10 | 2015-06-19 | 한국전자통신연구원 | 시각언어 기반의 영상주석 자동 생성 장치 및 방법 |
US9239848B2 (en) | 2012-02-06 | 2016-01-19 | Microsoft Technology Licensing, Llc | System and method for semantically annotating images |
KR101648965B1 (ko) * | 2016-03-08 | 2016-08-18 | 충남대학교산학협력단 | 비주얼 검색을 위한 클라이언트 장치 및 서버 장치, 이를 이용한 비주얼 검색 방법 |
US9678992B2 (en) | 2011-05-18 | 2017-06-13 | Microsoft Technology Licensing, Llc | Text to image translation |
US9703782B2 (en) | 2010-05-28 | 2017-07-11 | Microsoft Technology Licensing, Llc | Associating media with metadata of near-duplicates |
KR102151408B1 (ko) * | 2019-08-31 | 2020-10-26 | 한화시스템 주식회사 | 부합율 판단에 의한 텍스트/이미지 검색 장치 및 방법 |
-
2002
- 2002-12-18 KR KR20020081234A patent/KR100644016B1/ko active IP Right Grant
Cited By (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100703705B1 (ko) * | 2005-11-18 | 2007-04-06 | 삼성전자주식회사 | 동영상을 위한 멀티 미디어 코멘트 처리 장치 및 방법 |
KR100729660B1 (ko) * | 2005-12-09 | 2007-06-18 | 한국전자통신연구원 | 장면 전환 길이를 이용한 디지털 비디오 인식 시스템 및 방법 |
US8341112B2 (en) | 2006-05-19 | 2012-12-25 | Microsoft Corporation | Annotation by search |
WO2008140193A1 (en) * | 2007-05-09 | 2008-11-20 | Jong Ok Ko | Method to store and search personal information using color |
KR100897511B1 (ko) * | 2007-05-09 | 2009-05-15 | 고종옥 | 컬러를 이용한 개인정보 저장 및 추출방법 |
US8620107B2 (en) | 2008-03-18 | 2013-12-31 | Electronics And Telecommunications Research Institute | Apparatus and method for extracting features of video, and system and method for identifying videos using same |
US9652444B2 (en) | 2010-05-28 | 2017-05-16 | Microsoft Technology Licensing, Llc | Real-time annotation and enrichment of captured video |
US8903798B2 (en) | 2010-05-28 | 2014-12-02 | Microsoft Corporation | Real-time annotation and enrichment of captured video |
US9703782B2 (en) | 2010-05-28 | 2017-07-11 | Microsoft Technology Licensing, Llc | Associating media with metadata of near-duplicates |
KR20120036649A (ko) * | 2010-10-08 | 2012-04-18 | 엘지전자 주식회사 | 단말기의 드로잉을 이용한 검색 방법 및 그 단말기 |
US8559682B2 (en) | 2010-11-09 | 2013-10-15 | Microsoft Corporation | Building a person profile database |
US9678992B2 (en) | 2011-05-18 | 2017-06-13 | Microsoft Technology Licensing, Llc | Text to image translation |
US9239848B2 (en) | 2012-02-06 | 2016-01-19 | Microsoft Technology Licensing, Llc | System and method for semantically annotating images |
KR20150067899A (ko) * | 2013-12-10 | 2015-06-19 | 한국전자통신연구원 | 시각언어 기반의 영상주석 자동 생성 장치 및 방법 |
KR101648965B1 (ko) * | 2016-03-08 | 2016-08-18 | 충남대학교산학협력단 | 비주얼 검색을 위한 클라이언트 장치 및 서버 장치, 이를 이용한 비주얼 검색 방법 |
KR102151408B1 (ko) * | 2019-08-31 | 2020-10-26 | 한화시스템 주식회사 | 부합율 판단에 의한 텍스트/이미지 검색 장치 및 방법 |
Also Published As
Publication number | Publication date |
---|---|
KR100644016B1 (ko) | 2006-11-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101659097B1 (ko) | 복수의 저장된 디지털 이미지들을 탐색하기 위한 방법 및 장치 | |
US9244923B2 (en) | Hypervideo browsing using links generated based on user-specified content features | |
Chen et al. | A novel video summarization based on mining the story-structure and semantic relations among concept entities | |
JP5309155B2 (ja) | イメージ検索における対話型概念学習 | |
JP6278893B2 (ja) | 対話型マルチモード画像検索 | |
JP4540970B2 (ja) | 情報検索装置及びその方法 | |
US8135739B2 (en) | Online relevance engine | |
KR100644016B1 (ko) | 동영상 검색 시스템 및 방법 | |
US20090119274A1 (en) | Named entity extracting apparatus, method, and program | |
CN109918555B (zh) | 用于提供搜索建议的方法、装置、设备和介质 | |
KR20010058515A (ko) | 멀티미디어 세그먼트와 의미요소의 개별 중요도 정의 및표현을 위한 구조와 멀티미디어 브라우징 방법 | |
JP2007513413A (ja) | 強調画像を選択するための内容認識 | |
CN104798068A (zh) | 视频检索方法和装置 | |
US20120162244A1 (en) | Image search color sketch filtering | |
JP2004178604A (ja) | 情報検索装置及びその方法 | |
US11709881B2 (en) | Visual menu | |
CN113596601A (zh) | 一种视频画面的定位方法、相关装置、设备及存储介质 | |
JP2002007413A (ja) | 画像検索装置 | |
Bonnel et al. | Effective organization and visualization of web search results | |
WO2008130501A1 (en) | Unstructured and semistructured document processing and searching and generation of value-based information | |
KR100512275B1 (ko) | 멀티미디어 객체의 특징 기술정보 생성방법 | |
KR102281266B1 (ko) | 영상 내 자막 키워드 추출 및 순위 산정 시스템 및 방법 | |
Kitamura et al. | Tourist spot recommendation applying generic object recognition with travel photos | |
JP2005202939A (ja) | Xmlファイルの作成方法 | |
JP2005236546A (ja) | 部分コンテンツ作成方法及び装置及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E601 | Decision to refuse application | ||
J201 | Request for trial against refusal decision | ||
S901 | Examination by remand of revocation | ||
GRNO | Decision to grant (after opposition) | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20120906 Year of fee payment: 7 |
|
FPAY | Annual fee payment |
Payment date: 20131004 Year of fee payment: 8 |
|
FPAY | Annual fee payment |
Payment date: 20140904 Year of fee payment: 9 |
|
FPAY | Annual fee payment |
Payment date: 20150930 Year of fee payment: 10 |
|
FPAY | Annual fee payment |
Payment date: 20160920 Year of fee payment: 11 |
|
FPAY | Annual fee payment |
Payment date: 20170928 Year of fee payment: 12 |
|
FPAY | Annual fee payment |
Payment date: 20180927 Year of fee payment: 13 |