KR20020082489A - 화상 검색 분배 시스템 및 화상 검색 분배 방법 - Google Patents

화상 검색 분배 시스템 및 화상 검색 분배 방법 Download PDF

Info

Publication number
KR20020082489A
KR20020082489A KR1020027012537A KR20027012537A KR20020082489A KR 20020082489 A KR20020082489 A KR 20020082489A KR 1020027012537 A KR1020027012537 A KR 1020027012537A KR 20027012537 A KR20027012537 A KR 20027012537A KR 20020082489 A KR20020082489 A KR 20020082489A
Authority
KR
South Korea
Prior art keywords
image
search result
content
retrieval
user
Prior art date
Application number
KR1020027012537A
Other languages
English (en)
Other versions
KR100523684B1 (ko
Inventor
모리야요시미
니시카와히로후미
야마다요시히사
오가와후미노부
아사이코타로
Original Assignee
미쓰비시덴키 가부시키가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 미쓰비시덴키 가부시키가이샤 filed Critical 미쓰비시덴키 가부시키가이샤
Publication of KR20020082489A publication Critical patent/KR20020082489A/ko
Application granted granted Critical
Publication of KR100523684B1 publication Critical patent/KR100523684B1/ko

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5838—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/94—Hardware or software architectures specially adapted for image or video understanding
    • G06V10/95—Hardware or software architectures specially adapted for image or video understanding structured as a network, e.g. client-server architectures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/48—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/56—Information retrieval; Database structures therefor; File system structures therefor of still image data having vectorial format
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5854—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using shape and object relationship
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5862—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using texture
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/73—Querying
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/73—Querying
    • G06F16/732—Query formulation
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S707/00—Data processing: database and file management or data structures
    • Y10S707/912—Applications of a database
    • Y10S707/913—Multimedia
    • Y10S707/915—Image
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S707/00—Data processing: database and file management or data structures
    • Y10S707/99931—Database or file accessing
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S707/00—Data processing: database and file management or data structures
    • Y10S707/99931—Database or file accessing
    • Y10S707/99937—Sorting

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Library & Information Science (AREA)
  • Multimedia (AREA)
  • Computational Linguistics (AREA)
  • Software Systems (AREA)
  • Mathematical Physics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Processing Or Creating Images (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

본 발명은 동화상 및 정지 화상을 포함하는 화상을, 그 특징을 기술한 특징 기술자와 함께 등록하는 데이터베이스로부터, 사용자 입력에 의한 검색 조건에 근거하여 특징 기술자를 검색하고, 검색 조건에 합치하는 검색 결과를 얻고, 검색 결과를 수신하는 사용자 단말로부터 얻어지는 분배 조건에 근거하여 검색 결과를 편집 처리하는 화상 검색 분배 시스템 및 화상 검색 분배 방법에 관한 것이다.

Description

화상 검색 분배 시스템 및 화상 검색 분배 방법{Image retrieval/ distribution system and image retrieval/distribution method}
종래의 네트워크상의 화상 검색 분배 시스템으로서, 예를 들면, 「네트워크형 멀티미디어 정보의 매개를 목표로 한 공개형 화상 데이터베이스 GIRLS」(신학기보 HI67-6 1996년)에 기재된 시스템이 있다. 이 시스템은 인터넷상에서의 정보 제공 시스템인 WWW(World Wide Web)로부터 인터넷상에 산재하는 화상 데이터를 수집하여, 자동적으로 데이터베이스를 구축하고, 구축한 데이터베이스로부터 원하는 화상을 검색하는 시스템이다.
우선, WWW에 대해서 설명하면, WWW에서는 HTML(Hyper Text Markup Language)라고 하는 언어에 의해 기술된 하이퍼 텍스트 파일(이하, HTML 파일이라고 함)에 의해 문서 표현이 행하여진다. 또한, 이 HTML은 다른 HTML 파일이나 화상 데이터와의 링크 정보가 URL(Universal Resource Locator)이라고 하는 네트워크 어드레스에 의해 기술(記述)된다. 이 URL을 지정하면 그 네트워크 어드레스에 위치하는 정보를 HTTP(Hyper Text Transfer Protocol)라고 하는 프로토콜에 근거하여 비동기 전송할 수 있다.
여기서, 상술한 종래의 화상 검색 분배 시스템의 설명으로 돌아가면, 종래의 시스템은 데이터베이스 구축부 및 데이터베이스 검색부로 구성되어 있다. 우선, 데이터베이스 구축부는 어떤 URL로부터 순차로 링크 정보를 더듬어 정보를 수집하여 자동적으로 데이터베이스를 구축한다. 구체적으로 설명하면, URL에 대응한 HTML 파일에 따른 화상 데이터가 HTTP를 사용하여 데이터베이스 구축부에 전송된다. 이것에 의해, 데이터베이스 구축부는 HTML 파일에 따른 화상 데이터를 해석하고, 화상 및 다른 HTML 파일로의 링크를 빼낸다. 다음으로, 데이터베이스 구축부는 취득한 화상을 화상 처리하여 특징량의 추출을 행하고, 화상의 URL이 기술되어 있던 HTML 파일로부터 보조 정보를 추출한다. 여기서, 상술한 보조 정보는, 예를 들면, 화상의 URL 등을 가리킨다. 이렇게 하여 추출된 화상의 특징, 보조 정보, 및 화상 데이터의 축소 화상은 데이터베이스 구축부에 의해 데이터베이스에 등록된다.
또한, 데이터베이스 검색부는 상술한 데이터베이스에 등록되어 있는 화상의 특징에 근거하여, 사용자의 요구에 가까운 화상 데이터를 검색한다. 이렇게 하여 검색된 화상 데이터는 HTML 파일로 변환되어, WWW 브라우저를 사용하여 사용자가 열람할 수 있다.
종래의 화상 검색 분배 시스템은 이상과 같이 구성되어 있기 때문에, 검색 결과 화상 데이터가 분배되는 클라이언트의 단말이, 인터넷상에 접속된 PC나 워크스테이션 등, 거의 동일한 처리 능력을 갖고 있는 것으로서, 어떤 정해진 포맷으로 밖에 검색 결과 화상 데이터가 분배되지 않는다. 이 때문에, 처리 능력이 낮은 단말에서는 화상 검색 분배 시스템을 이용할 수 없다고 하는 과제가 있었다.
본 발명은 상기한 바와 같은 과제를 해결하기 위해서 이루어진 것으로, 무선 등의 각종의 네트워크를 통하여, 또한, 각종 단말(예를 들면, 휴대전화, 텔레비전 전화, 또는 PC(Personal Computer) 등)의 처리 능력에 따른 포맷으로, 검색 결과 화상 데이터를 분배할 수 있는 화상 검색 분배 시스템 및 화상 검색 분배 방법을 얻는 것을 목적으로 한다.
본 발명은 아날로그 또는 디지털로 기록된 영상, 정지 화상 등의 화상 데이터로부터 특징량이나 포맷 정보를 추출하고, 추출한 특징량을 이용하여 화상 데이터의 검색을 행하고, 검색 결과 화상 데이터를 수신하는 사용자 단말의 처리 능력에 따라 포맷을 변환하여 분배하는 화상 검색 분배 시스템 및 화상 검색 분배 방법에 관한 것이다.
도 1은 본 발명에 의한 화상 검색 분배 시스템의 전체 구성을 도시하는 도면.
도 2는 본 발명의 실시예 1에 의한 화상 검색 분배 시스템의 서버의 구성을도시하는 도면.
도 3은 본 발명의 실시예 1에 의한 화상 검색 분배 시스템의 입력 데이터 등록부에 의한 데이터베이스 등록 동작을 도시하는 흐름도.
도 4는 본 발명의 실시예 1에 의한 화상 검색 분배 시스템에 있어서의 화상 검색 분배부의 처리 동작을 도시하는 흐름도.
도 5는 본 발명의 실시예 1에 의한 화상 검색 분배 시스템의 클라이언트측 단말에 있어서의 검색 결과의 표시예를 도시하는 도면.
도 6은 본 발명의 실시예 1에 의한 화상 검색 분배 시스템에 사용하는 클라이언트측의 단말의 구성예를 도시하는 도면.
도 7은 본 발명의 실시예 6에 의한 화상 검색 분배 시스템의 클라이언트의 구성을 도시하는 도면.
본 발명에 따른 화상 검색 분배 시스템은, 동화상 및 정지 화상을 포함하는 화상을, 그 특징을 기술한 특징 기술자(記述子)와 함께 등록하는 데이터베이스와, 사용자 입력에 의한 검색 조건에 근거하여 데이터베이스에 등록된 특징 기술자를 검색하고, 검색 조건에 합치하는 검색 결과를 얻는 화상 검색 수단과, 검색 결과를 수신하는 사용자 단말측으로부터 얻어지는 분배 조건에 근거하여 검색 결과를 편집 처리하는 콘텐츠 부가 서비스 수단을 구비하는 것으로, 사용자 단말측의 분배 조건에 따라 검색 결과의 출력 형태나 출력 화상의 포맷을 편집 처리하기 때문에, 처리 능력이 다른 각종 단말에서 검색 결과를 용이하게 표시할 수 있다.
본 발명에 따른 화상 검색 분배 시스템은, 분배 조건으로서 사용자 단말의단말 정보를 취득하는 단말 정보 취득 수단을 콘텐츠 부가 서비스 수단이 구비한 것을 특징으로 하는 것으로, 사용자 단말의 처리 능력에 따라서, 검색 결과의 출력 형태나 출력 화상의 포맷을 편집 처리하기 때문에, 처리 능력이 다른 각종 단말에서 검색 결과를 용이하게 표시할 수 있다.
본 발명에 따른 화상 검색 분배 시스템은, 사용자가 지정하는 분배 조건에 근거하여 사용자 단말이 수신 가능한 검색 결과에 따른 데이터를 콘텐츠 부가 서비스 수단이 생성하고, 검색 결과에 앞서 사용자 단말에 송신하는 것을 특징으로 하는 것으로, 여러가지 종류의 검색 결과의 화상 중에서 사용자가 원하는 화상을 용이하게 검색할 수 있다.
본 발명에 따른 화상 검색 분배 시스템은, 입력 화상의 특징량 및 포맷 정보를 추출하여 특징 기술자를 생성하는 콘텐츠 기술 메타 데이터 생성 수단과, 이 콘텐츠 기술 메타 데이터 생성 수단이 생성한 특징 기술자와 입력 화상을 데이터베이스에 등록하는 데이터 축적 수단을 구비하기 때문에, 처리 능력이 다른 각종 단말로부터 얻어지는 분배 조건과 용이하게 비교할 수 있는 특징 기술자를 갖는 데이터베이스를 작성할 수 있다.
본 발명에 따른 화상 검색 분배 시스템은, 사용자 단말의 단말 정보에 합치하도록 검색 결과의 화상의 화상 포맷 및 출력 형식을 변환하는 변환 수단, 단말 정보에 합치하지 않는 검색 결과를 송신하지 않는 필터 수단, 및 단말 정보에 합치하지 않는 검색 결과를 단말 정보에 합치하는 다른 대체 데이터로 바꾸는 치환 수단 중 적어도 하나를 콘텐츠 부가 서비스 수단이 구비하기 때문에, 처리 능력이 다른 각종 단말에서 검색 결과를 용이하게 표시할 수 있다.
본 발명에 따른 화상 검색 분배 시스템은, 콘텐츠 부가 서비스 수단이 사용자 단말의 단말 정보에 근거하여 검색 결과를 편집 처리하였을 때에, 편집 처리 전의 검색 결과를 사용자가 미리 지정한 다른 단말에 송신하기 때문에, 처리 능력이 다른 각종 단말에 검색 결과를 용이하게 표시할 수 있다.
본 발명에 따른 화상 검색 분배 시스템은, 콘텐츠 부가 서비스 수단이 사용자 단말의 단말 정보에 합치하지 않는 검색 결과를 편집 처리하는 편집 수단을 복수 구비하고, 복수의 편집 수단이 화상 검색을 요구하는 측, 화상 검색을 행하는 측 및 데이터베이스에 화상을 등록하는 콘텐츠 공급측 중 어느 하나로부터 적절히 선택할 수 있기 때문에, 화상 검색을 요구하는 측, 화상 검색을 행하는 측, 또는 데이터베이스에 화상을 등록하는 콘텐츠 공급측의 의도를 반영하여 검색할 수 있다.
본 발명에 따른 화상 검색 분배 시스템은, 화상 포맷이 검색 결과의 화상의 부호화 방식, 비트 레이트, 프레임 레이트, 해상도, 및 파일 사이즈 중 적어도 하나를 포함하여 이루어지는 것을 특징으로 하기 때문에, 처리 능력이 다른 각종 단말에서 검색 결과를 용이하게 표시할 수 있다.
본 발명에 따른 화상 검색 분배 시스템은, 검색 결과의 화상의 저작권 정보 및/또는 반포 조건에 근거하여 사용자 단말이 수신 가능한 검색 결과에 따른 데이터를 콘텐츠 부가 서비스 수단이 생성하기 때문에, 여러가지 종류의 검색 결과의 화상 중에서 사용자가 원하는 화상을 용이하게 검색할 수 있다.
본 발명에 따른 화상 검색 분배 시스템은, 동화상 및 정지 화상을 포함하는 화상을, 그 특징을 기술한 특징 기술자와 함께 등록하는 데이터베이스와, 사용자 입력에 의한 검색 조건에 근거하여 데이터베이스에 등록한 특징 기술자를 검색하고, 검색 조건에 합치하는 검색 결과를 얻는 화상 검색 수단과, 검색 결과와 이것에 따른 특징 기술자를 사용자의 단말에 송신하는 출력 제어 수단과, 사용자 단말에 설치되고, 출력 제어 수단으로부터 송신되는 특징 기술자를 해석하여 검색 결과를 수신할지의 여부를 결정하는 콘텐츠 기술 메타 데이터 해석 수단을 구비하기 때문에, 사용자가 검색 결과의 화상의 특징이나 포맷을 기술한 메타 데이터의 해석을 행하고 판별할 수 있는 것으로부터, 처리 능력이 다른 각종 단말에서 용이하게 검색 결과를 표시할 수 있다.
본 발명에 따른 화상 검색 분배 방법은, 사용자 입력에 의한 검색 조건에 근거하여 데이터베이스에 등록된 화상의 특징 기술자를 검색하고, 검색 조건에 합치하는 검색 결과를 얻는 화상 검색 단계와, 검색 결과를 수신하는 사용자 단말측으로부터 얻어지는 분배 조건에 근거하여 검색 결과를 편집 처리하는 콘텐츠 부가 서비스 단계를 포함하기 때문에, 사용자 단말측의 분배 조건에 따라 검색 결과의 출력 형태나 출력 화상의 포맷을 편집 처리하기 때문에, 처리 능력이 다른 각종 단말에서 검색 결과를 용이하게 표시할 수 있다.
본 발명에 따른 화상 검색 분배 방법은, 콘텐츠 부가 서비스 단계에서 분배 조건으로서 사용자 단말의 단말 정보를 취득하는 것을 특징으로 하기 때문에, 사용자 단말의 처리 능력에 따라서, 검색 결과의 출력 형태나 출력 화상의 포맷을 편집처리하기 때문에, 처리 능력이 다른 각종 단말에서 검색 결과를 용이하게 표시할 수 있다.
본 발명에 따른 화상 검색 분배 방법은, 콘텐츠 부가 서비스 단계에서 사용자가 지정하는 분배 조건에 근거하여 사용자 단말이 수신 가능한 검색 결과에 따른 데이터를 생성하고, 검색 결과에 앞서 사용자 단말에 송신하는 것을 특징으로 하기 때문에, 여러가지 종류의 검색 결과의 화상 중에서 사용자가 원하는 화상을 용이하게 검색할 수 있다.
본 발명에 따른 화상 검색 분배 방법은, 화상이 입력되면, 이 화상의 특징량 및 포맷 정보를 추출하여 특징 기술자를 생성하는 콘텐츠 기술 메타 데이터 생성 단계와, 이 콘텐츠 기술 메타 데이터 생성 단계에서 생성된 특징 기술자와 입력된 화상을 데이터베이스에 등록하는 데이터 축적 단계를 포함하기 때문에, 처리 능력이 다른 각종 단말로부터 얻어지는 분배 조건과 용이하게 비교할 수 있는 특징 기술자를 갖는 데이터베이스를 작성할 수 있다.
본 발명에 따른 화상 검색 분배 방법은, 사용자 단말의 단말 정보에 합치하도록 검색 결과의 화상의 화상 포맷 및 출력 형식을 변환하는 변환 단계, 단말 정보에 합치하지 않는 검색 결과를 송신하지 않는 필터 단계, 및 단말 정보에 합치하지 않는 검색 결과를 단말 정보에 합치하는 다른 대체 데이터에 바꾸는 치환 단계 중 적어도 하나를 콘텐츠 부가 서비스 단계가 포함하는 것을 특징으로 하기 때문에, 처리 능력이 다른 각종 단말에서 검색 결과를 용이하게 표시할 수 있다.
본 발명에 따른 화상 검색 분배 방법은, 콘텐츠 부가 서비스 단계에서 사용자 단말의 단말 정보에 근거하여 검색 결과를 편집 처리하였을 때에, 편집 처리 전의 검색 결과를 사용자가 미리 지정한 다른 단말에 송신하는 것을 특징으로 하기 때문에, 처리 능력이 다른 각종 단말에서 검색 결과를 용이하게 표시할 수 있다.
본 발명에 따른 화상 검색 분배 방법은, 콘텐츠 부가 서비스 단계에서 검색 결과의 화상의 저작권 정보 및/또는 반포 조건에 근거하여 사용자 단말이 수신 가능한 검색 결과에 따른 데이터를 생성하는 것을 특징으로 하기 때문에, 여러가지 종류의 검색 결과의 화상 중에서 사용자가 원하는 화상을 용이하게 검색할 수 있다.
본 발명에 따른 화상 검색 분배 방법은, 사용자 입력에 의한 검색 조건에 근거하여 데이터베이스에 등록된 화상의 특징 기술자를 검색하고, 검색 조건에 합치하는 검색 결과를 얻는 화상 검색 단계와, 검색 결과와 이것에 따른 특징 기술자를 사용자의 단말에 송신하는 출력 제어 단계와, 이 출력 제어 단계에서 송신된 특징 기술자를 해석하여 검색 결과를 수신할지의 여부를 사용자 단말측에서 결정하는 콘텐츠 기술 메타 데이터 해석 단계를 포함하기 때문에, 사용자가 검색 결과의 화상의 특징이나 포맷을 기술한 메타 데이터의 해석을 행하고 판별할 수 있는 것으로부터, 처리 능력이 다른 각종 단말에서 용이하게 검색 결과를 표시할 수 있다.
이하, 본 발명을 더욱 상세하게 설명하기 위해서, 본 발명을 실시하기 위한 실시예에 대해서, 첨부한 도면에 따라 이것을 설명한다.
실시예 1
도 1은 본 발명에 의한 화상 검색 분배 시스템의 전체 구성을 도시하는 도면이다. 도면과 같이, 화상 검색 분배 시스템을 이용하여 검색 결과 화상 데이터가 분배되는 클라이언트는 PC, 휴대전화, 휴대 정보 단말, 또는 디지털 텔레비전 등의 처리 능력이 다른 각종 단말이며, 이들을 통해서 사용자가 화상 검색 분배 시스템을 이용할 수 있다. 이들 클라이언트측의 각종 단말은 각각 다른 네트워크에 액세스한다. 예를 들면, 어떤 PC는 IP 베이스의 네트워크에 직접 접속하고, 별도의 PC는 ISDN 등의 기존의 전화 회선을 통해 인터넷에 접속한다. 휴대전화나 휴대 정보 단말은 무선 시스템의 네트워크(IMT-2000 등)에 접속한다. 디지털 텔레비전은 전용 케이블, 지상파 또는 위성 TV 방송망에 접속하고 있다.
도 2는 본 발명의 실시예 1에 의한 화상 검색 분배 시스템의 서버의 구성을 도시하는 도면이다. 도면에 있어서, 1은 입력 화상을 수신하여 데이터베이스에 등록하는 입력 데이터 등록부이며, 입력 제어부(2) 및 콘텐츠 기술 메타 데이터 생성부(3)로 구성된다. 2는 입력 화상을 수신하는 입력 제어부이며, 3은 입력 제어부(2)로부터의 입력 화상을 화상 처리하여 특징량을 추출하고, 특징량을 기술한 메타 데이터를 생성하는 콘텐츠 기술 메타 데이터 생성부이다. 4는 콘텐츠 기술 메타 데이터 생성부(3)에서 기술된 메타 데이터나 입력 화상을 축적하는 데이터베이스인 데이터 축적부, 5는 데이터 축적부(4)로부터 사용자의 요구에 맞는 화상 데이터를 검색하여, 사용자가 사용하는 단말에 검색 결과 화상 데이터를 분배하는 화상 검색 분배부, 6은 사용자가 사용하는 단말로부터 출력된 검색 요구를 수신하는 입력 제어부, 7은 데이터 축적부(4)로부터 특징량 등을 기술한 메타 데이터를 사용하여 사용자의 요구에 맞는 화상 데이터를 검색하는 화상 검색부, 8은 사용자가 사용하는 수신 단말의 정보를 취득하는 단말 정보 취득부, 9는 화상 검색부(7)에 의한 화상 데이터의 검색 결과를, 사용자가 사용하는 단말의 처리 능력에 적합한 정보로 변환하는 등의 부가적인 서비스를 행하는 콘텐츠 부가 서비스부, 10은 화상 검색부(7) 및 콘텐츠 부가 서비스부(9)로부터 출력되는 검색 결과 화상 데이터를 사용자의 수신 단말로 분배하는 출력 제어부이다.
다음에 동작에 대해서 상술한다.
우선, 입력 데이터 등록부의 처리 동작에 대해서 상술한다.
도 3은 본 발명의 실시예 1에 의한 화상 검색 분배 시스템에 있어서의 입력 데이터 등록부의 신규 입력 화상을 데이터베이스에 등록하는 동작을 도시하는 흐름도이다. 여기서, 신규의 입력 화상은 클라이언트측의 단말로부터 네트워크를 통해 송신되는 경우와 입력 데이터 등록부를 갖는 서버에 직접 입력되는 경우가 있다. 클라이언트측의 단말로부터 네트워크를 통해 송신되는 경우로서는, 예를 들면, 카메라를 갖는 휴대전화로 찍은 화상이나 비디오 메일로 수신한 화상을 서버에 등록하는 경우 등을 고려할 수 있다. 이와 같이 입력 제어부(2)는 네트워크를 통해 화상을 수신하는 인터페이스 및 직접 입력의 인터페이스를 갖는다.
단계 ST1에서 입력 제어부(2)는 신규로 등록해야 할 입력 화상을 수신하고, 이것을 콘텐츠 기술 메타 데이터 생성부(3)에 출력한다.
콘텐츠 기술 메타 데이터 생성부(3)는 입력 화상을 입력하면, 이 입력 화상에 대하여 화상 처리를 실시하고, 특징량을 추출한다(단계 ST2). 여기서, 추출되는 특징량으로서는, 예를 들면, 입력 화상의 색, 텍스처, 움직임, 또는 형상 등이 있다. 이 특징량의 추출은 상기한 바와 같은 입력 화상의 특징량을 추출할 수 있는 종래의 화상 특징의 추출 기술을 사용하여도 좋다.
이 후, 콘텐츠 기술 메타 데이터 생성부(3)는 입력 화상의 특징을 기술한 키워드나 입력 화상에 대한 부가적인 정보를 추출한다(단계 ST3). 여기서, 추출되는부가적인 정보로서는, 예를 들면, 입력 화상의 부호화 형식(MPEG-1, MPEG-2, MPEG-4, JPEG 등), 비트 레이트, 프레임 레이트, 해상도, 파일 사이즈 등 입력 화상의 포맷에 관한 정보, 입력 화상의 저작권에 관한 정보, 또는 입력 화상의 콘텐츠의 반포 조건(유상/무상 등) 등에 관한 정보가 있다.
다음으로, 콘텐츠 기술 메타 데이터 생성부(3)는 추출한 입력 화상의 특징량 및 부가 정보를 미리 정의된 포맷에 따라서 기술하여, 콘텐츠 기술 메타 데이터(특징 기술자)를 생성한다(단계 ST4).
마지막으로, 콘텐츠 기술 메타 데이터 생성부(3)는 입력 화상 및 단계 ST4에서 생성된 콘텐츠 기술 메타 데이터를 데이터 축적부(4)에 축적한다(단계 ST5). 이것에 의해, 데이터 축적부(4)의 데이터베이스에 신규 입력 화상을 등록할 수 있다.
다음으로 화상 검색 분배부(5)의 처리 동작에 대해서 상술한다.
도 4는 본 발명의 실시예 1에 의한 화상 검색 분배 시스템에 있어서의 화상 검색 분배부의 처리 동작을 도시하는 흐름도이다.
우선, 입력 제어부(6)가 네트워크를 통해 사용자로부터의 화상의 검색 요구 및 검색 조건을 수신(단계 ST10)하여, 사용자로부터의 검색 조건을 화상 검색부(7)에 출력한다. 여기서, 사용자가 지정하는 검색 조건으로서는, 예를 들면, 검색해야 할 화상을 단적으로 나타내는 키워드, 검색해야 할 화상의 특징량을 기술한 메타 데이터, 또는 샘플 화상 등이 있다.
화상 검색부(7)는 입력 제어부(6)로부터 입력된 검색 조건이 샘플 화상인지의 여부를 판정하고, 샘플 화상이 아니면 단계 ST13으로 진행하여 데이터 축적부(4)의 메타 데이터와의 매칭(matching) 처리를 행하고, 샘플 화상이면 단계 ST12로 진행하여 샘플 화상의 특징량의 추출 동작을 행한다(단계 ST11).
단계 ST11에 있어서 검색 조건이 샘플 화상이면, 화상 검색부(7)는 샘플 화상의 색, 텍스처, 움직임, 또는 형상 등의 특징량을 추출하여, 이들을 기술한 메타 데이터를 생성한다(단계 ST12).
이 후, 화상 검색부(7)는 검색 조건의 키워드나 특징량과 데이터 축적부(4)에 포함되는 콘텐츠 기술 메타 데이터에 기술되어 있는 키워드나 특징량의 매칭 처리를 행하고, 사용자가 요구하는 화상 데이터의 검색 결과를 얻는다(단계 ST13).
다음으로, 단말 정보 취득부(8)는 검색 결과 화상 데이터를 수신하는 사용자 단말의 정보를 취득한다(단계 ST14). 이 단말 정보는 사용자가 검색 조건을 송신할 때에 동시에 송신되어, 입력 제어부(6)를 통해서 화상 검색 분배부(5)에 취득된다. 또한, 이 외에는 사용자 등록 기능을 갖는 서버이면, 사용자 등록 시에 미리 사용자가 자신의 단말 정보를 등록하여 두고, 검색 시에 서버에 등록되어 있는 단말 정보를 화상 검색 분배부(5)가 취득하도록 하여도 좋다.
단말 정보 취득부(8)는 단말 정보를 취득하면, 콘텐츠 부가 서비스부(9)에 출력한다. 콘텐츠 부가 서비스부(9)는 사용자의 단말 정보를 받으면, 단계 ST13에서 얻은 검색 결과 화상 데이터가 사용자 단말에서 수신 가능한지의 여부를 판정하고, 수신 가능하면 단계 ST15로 진행하여, 검색 결과 화상 데이터를 사용자 단말에 송신하는 처리를 행하고, 수신 가능하지 않으면 단계 ST16으로 진행하여 검색 결과화상 데이터의 변환 처리를 행한다(단계 ST15). 이와 같이, 사용자 단말의 단말 정보는 검색 결과를 분배하기 위한 분배 조건으로서 이용된다.
단계 ST15에서 사용자 단말이 검색 결과 화상 데이터를 수신할 수 있다고 판단하면, 콘텐츠 부가 서비스부(9)는 화상 검색부(7)를 제어하고, 출력 제어부(10)를 통해 검색 결과 화상 데이터를 사용자 단말에 송신시킨다(단계 ST17).
또한, 단계 ST15에서 사용자 단말이 검색 결과 화상 데이터를 수신할 수 없다고 판단하면, 화상 검색부(7)는 검색 결과 화상 데이터를 콘텐츠 부가 서비스부(9)에 출력한다. 콘텐츠 부가 서비스부(9)는 검색 결과 화상 데이터를 받으면, 이 출력 형식을 사용자 단말의 처리 능력이나 네트워크 형태에 따라 변환한다(단계 ST16).
여기서, 이 실시예 1에 의한 화상 검색 분배부(5)의 동작에 대해서 구체적인 예를 들어 상세하게 설명한다. 예를 들면, 디지털 비디오 카메라 등으로 촬영한 물고기의 화상으로부터, 그 물고기의 이름이나 생태를 조사하기 위해서, 멀티미디어 도감(圖鑑)이 있는 서버에 액세스하여 검색을 하는 경우를 생각하면, 이 검색에 사용하는 검색 조건은 촬영한 물고기의 화상이다. 이 촬영한 물고기의 화상을 휴대전화로 송신하고, 그 검색 결과를 휴대전화로 수신하는 경우, 입력 화상인 물고기의 화상은 휴대전화로 송수신 가능한 데이터 형식(MPEG-4 등)으로 변환되어 송신된다. 입력 화상인 물고기의 화상은 입력 제어부(6)를 통해 화상 검색부(7)에 입력된다. 화상 검색부(7)는 입력 화상인 물고기의 화상으로부터, 물고기의 형상, 색, 움직임, 또는 텍스처 등의 특징량을 추출한다. 추출된 특징량은 데이터 축적부(4)에 축적되어 있는 콘텐츠 기술 메타 데이터에 기술되어 있는 특징량과의 매칭 처리가 실시되어, 유사한 특징을 갖는 물고기의 화상 데이터를 얻을 수 있다.
도 5는 실시예 1에 의한 화상 검색 분배 시스템에 사용되는 클라이언트측 단말에서의 검색 결과 화상 데이터의 표시예를 도시하는 도면으로, 도 5a는 클라이언트측의 단말이 PC인 경우, 도 5b는 클라이언트측의 단말이 휴대전화인 경우를 도시하고 있다. 도 5a에 도시하는 바와 같이 PC 등의 화상의 표시 처리 능력이 충분히 있는 달말에 송신할 때, 입력 화상과 유사한 특징을 갖는 복수의 물고기에 대한 화상(검색 결과 1의 영상, 검색 결과 2의 영상, 검색 결과 3의 영상)과, 그 물고기에 관한 데이터(예를 들면, 물고기의 이름, 생태에 관한 텍스트 정보)로 이루어지는 화상 데이터를 송신하면 좋다.
한편, 도 5b에 도시하는 바와 같이 휴대전화 등 표시 화면이 작고, 또는 많은 정보를 다운로드하면 기능상의 부하가 큰 단말에 송신할 때에는 물고기에 관한 데이터(텍스트 정보)와 그 물고기의 영상으로의 링크 정보(물고기의 화상이 있는 서버의 로케이션 정보)만으로 이루어지는 화상 데이터를 송신하고, 사용자가 선택한 경우에만, 물고기의 화상이 다운로드되어 표시되도록 한다(도 5b의 예에서는「화상 표시 버튼」이 눌려진 경우에만, 링크 정보에 근거하여 검색 결과 화상 데이터를 다운로드할 수 있다).
또한, 콘텐츠 부가 서비스부(9)는 송신하는 화상에 대해서도 포맷 변환 등의 처리를 행하여, 수신 단말의 처리 능력에 적합한 포맷으로 변환한다. 예를 들면, 상술한 멀티미디어 도감이 있는 서버에 있어서 화상의 부호화 방식이 MPEG-1으로해상도가 352×240 화소라고 하자. 이 때, 휴대전화에서 수신할 수 있는 부호화 형식이 MPEG-4, 화면의 표시 사이즈가 176×144 화소인 경우, 콘텐츠 부가 서비스부(9)는 화상의 부호화 방식을 변환하는 동시에 해상도 변환도 행하여, 휴대전화가 수신할 수 있는 화상 포맷으로 변환한다.
여기서, 부호화 방식과 해상도를 예로 설명하였지만, 콘텐츠 부가 서비스부(9)에서 변환되는 포맷으로서는 상기한 것 외에 비트 레이트, 프레임 레이트 등도 있다.
또한, 사용자 단말에 다운로드되는 콘텐츠(화상 데이터)의 파일 사이즈가 예를 들면 사용자가 설정하는 상한보다도 큰 경우에는 콘텐츠의 일부분만을 송신하는 등의 처리를 행한다.
이렇게 하여, 콘텐츠 부가 서비스부(9)에서 변환된 콘텐츠는 출력 제어부(10)를 통해서 사용자에게 송신된다.
또, 상기 실시예 1에서 설명한 입력 데이터 등록부(1)와 화상 검색 분배부(5)는 다른 서버에 있어도 된다. 또한, 상술한 바와 같이 입력 데이터 등록부(1)에서 콘텐츠 기술 메타 데이터를 작성하는 것은 아니고, 콘텐츠 제작자가 개별로 작성한 콘텐츠 기술 메타 데이터를 화상과 함께 등록하여도 좋다. 또한, 화상의 특징량을 기술한 메타 데이터는 콘텐츠 제작자가 작성하고, 반포 조건 등을 기술한 메타 데이터는 콘텐츠를 분배하는 서버에서 작성하여도 좋다.
다음으로 클라이언트측의 단말에 대해서 설명한다.
도 6은 본 발명의 실시예 1에 의한 화상 검색 분배 시스템에 사용하는 클라이언트측의 단말의 구성예를 도시하는 도면이다. 도면에 있어서, 11은 사용자가 검색 조건을 입력하는 검색 조건 입력부, 12는 카메라 등으로부터 화상을 넣은 화상 입력부이며, 13은 화상 입력부(12)에서 넣은 화상을 네트워크에 송신할 수 있는 형식으로 부호화하는 콘텐츠 부호화부이다. 14는 화상 입력부(12)에서 넣은 화상으로부터 특징량을 추출하고, 추출한 특징량을 기술한 메타 데이터를 생성하는 콘텐츠 기술 메타 데이터 생성부, 15는 사용자가 입력한 검색 조건, 입력 화상, 또는 입력 화상의 특징량을 기술한 메타 데이터를 서버에 송신하는 출력 제어부, 16은 서버로부터의 검색 결과를 수신하는 입력 제어부, 17은 검색 결과를 표시하는 검색 결과 표시부이다.
다음에 각부의 처리에 대해서 설명한다.
샘플 화상을 검색 조건으로 하여, 샘플 화상에 유사한 화상을 검색하는 경우를 예로 설명한다.
화상 입력부(12)가 샘플 화상으로서 사용자가 카메라 등으로 촬영한 화상을 넣는다. 넣은 화상을 서버에 송신하는 경우, 화상 입력부(12)는 입력 화상을 콘텐츠 부호화부(13)에 출력한다. 콘텐츠 부호화부(13)는 입력 화상을 네트워크로 송신할 수 있는 형식으로 부호화한다. 예를 들면, 송신 단말이 휴대전화로 무선을 통하여 송신하는 경우, MPEG-4 부호화 방식으로 입력 화상을 부호화한다. 부호화된 화상은 출력 제어부(15)를 통해 서버에 송신된다.
또한, 넣은 화상을 직접 서버로 송신하는 것은 아니고, 클라이언트측에서 특징량을 추출하여, 이 특징량을 기술한 메타 데이터를 서버에 송신하는 경우, 화상입력부(12)는 입력 화상을 콘텐츠 기술 메타 데이터 생성부(14)에 출력한다. 콘텐츠 기술 메타 데이터 생성부(14)는 입력 화상의 특징량을 추출하고, 이 특징량을 기술한 메타 데이터를 생성한다. 이렇게 하여 생성된 특징량을 기술한 메타 데이터는 출력 제어부(15)를 통해 서버에 송신된다.
사용자에 의해 검색 조건 입력부(11)에 키워드 등의 텍스트 베이스의 검색 조건이 입력되면, 검색 조건 입력부(11)는 출력 제어부(15)를 통해 서버에 검색 조건을 송신한다.
이것에 의해, 서버가 검색을 행하여 클라이언트에게 송신된 검색 결과는 입력 제어부(16)를 통해 수신하여 검색 결과 표시부(17)에서 표시된다.
또, 샘플 화상의 특징량이 다른 단말에서 추출되어 있는 경우에는, 검색 조건 입력부(11)에 특징량을 기술한 메타 데이터를 입력하여도 좋다.
또한, 서버측에서 입력 화상의 특징량을 추출하고, 이 특징량을 기술한 메타 데이터를 생성하는 경우는, 콘텐츠 기술 메타 데이터 생성부(14)를 생략할 수도 있다.
또한, 화상 입력부(12), 콘텐츠 부호화부(13), 및 콘텐츠 기술 메타 데이터 생성부(14)는 송신하는 단말(서버)의 처리 능력에 따른 처리를 행하지 않아도 좋다.
이상과 같이, 이 실시예 1에 의하면, 클라이언트로부터의 검색 요구에 대하여 서버측이 수신 단말의 처리 능력에 따라서, 검색 결과의 출력 형태나 출력 화상의 포맷을 변환할 수 있기 때문에, 처리 능력이 다른 각종 단말에서 검색 결과를용이하게 표시할 수 있다.
실시예 2
상기 실시예 1에서는 검색 결과를 사용자 단말이 표시할 수 없는 경우, 콘텐츠 부가 서비스부가 사용자 단말에 표시할 수 있도록 출력 화상의 포맷을 변환하여 출력한 예를 나타내었지만, 이 실시예 2는 콘텐츠 부가 서비스부가 사용자 단말에서 표시할 수 없는 검색 결과에 대해서는 출력 결과로부터 제외하는 것이다.
이 실시예 2에 있어서의 화상 검색 분배 시스템은 기본적으로 상기 실시예 1에 의한 것과 동일한 구성을 하고 있지만, 화상 검색부(7) 및 콘텐츠 부가 서비스부(9)의 동작이 다르다. 그래서, 이들 화상 검색부(7) 및 콘텐츠 부가 서비스부(9)의 동작에 대해서 설명한다.
예를 들면, 검색 결과 화상 데이터를 휴대전화에 송신하는 경우를 고려할 수 있다. 여기서, 휴대전화에서 수신할 수 있는 화상의 부호화 방식은 MPEG-4인 것으로 한다(여기서는, 검색 요구의 송신과 동시에 서버측에 분배 조건인 단말 정보가 송신되고 있는 것으로 한다). 화상 검색부(7)는 상기 실시예 1과 같이 하여 사용자로부터의 검색 조건에 따라 데이터 축적부(4)의 화상 데이터를 검색하고, 그 결과로서 콘텐츠와 그 콘텐츠의 부가 정보를 기술한 메타 데이터로 이루어지는 화상 데이터를 콘텐츠 부가 서비스부(9)에 출력한다. 콘텐츠 부가 서비스부(9)는 상기 화상 데이터를 받으면, 부가 정보를 기술한 메타 데이터를 해석하고, 콘텐츠의 부호화 방식이 MPEG-4인 것만을 추출한다. 추출된 검색 결과 화상 데이터는 출력 제어부(10)를 통해 클라이언트의 사용자 단말에 송신된다.
콘텐츠의 부호화 방식이 수신 단말의 처리 능력에 적합하지 않기 때문에, 검색 결과로부터 제외된 콘텐츠에 대해서는 그 콘텐츠를 설명한 텍스트 정보 등이 부가 정보에 있으면, 이 텍스트 정보를 화상 대신에 송신하여도 좋다.
상기에서는 부호화 방식을 예로 설명하였지만, 그 밖의 화상 포맷에 대해서도 동일하다.
이상과 같이, 이 실시예 2에 의하면, 클라이언트로부터의 검색 요구에 대하여 수신 단말에서 수신할 수 없는 검색 결과에 대해서는 서버측에서 제외하거나, 또는 텍스트 정보 등의 대체 콘텐츠를 송신하도록 하였기 때문에, 처리 능력이 다른 각종 단말에서 검색 결과를 용이하게 표시할 수 있다.
실시예 3
상기 실시예 1 또는 상기 실시예 2에서는, 화상 검색부(7)의 검색 결과 콘텐츠가 클라이언트의 수신 단말에서 표시할 수 없는 포맷인 경우, 콘텐츠 부가 서비스부에서 포맷 변환을 행하거나, 송신할 검색 결과로부터 제외하거나 또는 텍스트 정보 등의 대체 콘텐츠를 송신하는 예를 개시하였지만, 이 실시예 3은 사용자가 지정하는 별도의 단말에 검색 결과 콘텐츠를 송신하는 기능을 콘텐츠 부가 서비스부가 갖는 것이다.
이 실시예 3에 있어서의 화상 검색 분배 시스템은 기본적으로 상기 실시예 1에 의한 것과 동일한 구성을 하고 있지만, 콘텐츠 부가 서비스부의 동작이 다르다.여기서는 이 콘텐츠 부가 서비스부의 동작에 대해서 설명한다.
예를 들면, 서버의 콘텐츠 부가 서비스부(9)가 휴대전화에 검색 결과 콘텐츠를 송신하기 위해서, 부호화 형식이 MPEG-2인 서버의 콘텐츠를 MPEG-4로 변환하여 송신하였다고 하자. 이 때, 콘텐츠 부가 서비스부(9)는 원래의 MPEG-2의 콘텐츠를 수신하는 것이 가능한 사용자가 지정한 단말(예를 들면, PC 단말 등)에도 상기 MPEG-2의 콘텐츠를 동시에 송신하여 둔다. 또한, 원래의 MPEG-2의 콘텐츠를 수신할 수 있는 단말에 송신할지의 여부는 사용자가 지정하도록 하여도 좋다.
이상과 같이, 이 실시예 3에 의하면, 클라이언트로부터의 검색 요구에 대하여 수신 단말에서 수신할 수 없는 검색 결과에 대해서, 서버측에서 포맷을 변환하거나, 제외하거나, 또는 대체 콘텐츠를 송신한 경우, 원래의 검색 결과 콘텐츠를 사용자로부터의 지시에 의해 지정한 단말로 송신할 수 있는 것으로부터, 처리 능력이 다른 각종 단말에서 검색 결과를 용이하게 표시할 수 있다.
실시예 4
상기 실시예 1 또는 상기 실시예 2에서는, 화상 검색부(7)에 의한 검색 결과 콘텐츠가 클라이언트의 수신 단말에서 표시할 수 없는 포맷인 경우, 콘텐츠 부가 서비스부(9)에서 포맷을 변환하거나, 송신할 검색 결과로부터 제외하거나, 또는 텍스트 정보 등의 대체 콘텐츠를 송신하도록 한 예를 나타내었지만, 이 실시예 4는 화상 검색부(7)에 의한 검색 결과 콘텐츠를 사용자가 수신할 수 없는 경우에 대체 처리를 선택할 수 있거나, 또는 미리 콘텐츠마다 대체 처리를 정하여 두거나, 또는 서버에 의해서 대체 처리를 지정하여 둔 것이다.
개요에 대해서 설명한다. 우선, 화상 검색부(7)에 의한 검색 결과 콘텐츠를 사용자가 수신할 수 없는 경우에 대체 처리를 선택할 수 있도록 하는 경우에는, 예를 들면, 화상 검색부(7)의 검색 결과를 송신하기 전에, 콘텐츠 부가 서비스부(9)에서 대체 처리를 선택 대상으로 하는 항목을 기술한 텍스트 정보를 생성하고, 이것과 상기 실시예 1에서 나타낸 검색 결과 화상에 관한 콘텐츠 기술 메타 데이터를 출력 제어부(10)를 통해 사용자 단말에 송신한다. 이것에 의해, 사용자는 콘텐츠 기술 메타 데이터로부터 검색 결과 화상 데이터를 수신할 수 없다고 판단하여, 대체 처리의 항목을 기술한 텍스트 정보로부터 원하는 처리를 선택한다.
다음으로, 미리 콘텐츠마다 대체 처리를 정하여 두는 경우에는, 예를 들면, 콘텐츠의 제작자가 콘텐츠의 부호 형식이나 파일 사이즈 등에 따라 콘텐츠마다 대체 처리를 기술한 정보도 콘텐츠 기술 메타 데이터로서 데이터 축적부(4)에 축적하여 둔다. 이것에 의해, 상기 콘텐츠가 검색되고, 사용자가 이것을 수신할 수 없으면, 콘텐츠 부가 서비스부(9)는 데이터 축적부(4)에 축적하여 둔 상기 콘텐츠의 대체 처리에 따른 정보에 근거하여 대체 처리를 행한다.
서버에 의해서 대체 처리를 지정하여 둔 경우는, 예를 들면, 어떤 서버의 데이터 축적부(4)에 대체 처리를 기억시켜 두고, 사용자가 이 서버에 대하여 검색 요구를 행하였을 때에 그 검색 결과를 수신할 수 없으면, 콘텐츠 부가 서비스부(9)는 상기 대체 처리를 행하도록 한다.
또, 사용자가 지정하는 경우에는 선택된 대체 처리에 대해서 사용자의 단말 또는 서버에 사용자 영역이 있는 경우에는 사용자 영역에 보유하고 두고, 다음번 이후의 검색시에는 보유되어 있는 조건을 반영하도록 하여도 좋다. 이것에 의해, 사용자의 기호에 맞는 검색이 가능해진다. 또한, 사용자가 지정하는 다른 검색 조건에 대해서도 마찬가지이다.
이상과 같이, 이 실시예 4에 의하면, 사용자의 수신 단말에서 검색 결과를 수신할 수 없는 경우의 대체 처리를 사용자, 서버, 또는 콘텐츠마다 지정할 수 있는 것으로부터, 사용자, 서버, 또는 콘텐츠 제작자의 의도를 반영하여 검색할 수 있다.
실시예 5
이 실시예 5에서는 콘텐츠 기술 메타 데이터에 콘텐츠의 저작권 정보나 반포 조건(유상/무상 등) 등이 기술되어 있는 경우에, 이들의 정보를 사용한 검색·분배를 행하도록 한 것이다.
이 실시예 5에 의한 화상 검색 분배 시스템의 서버 및 클라이언트의 구성은 도 1, 도 6과 같고, 콘텐츠 부가 서비스부(9)의 처리 동작이 다르기 때문에, 이 콘텐츠 부가 서비스부(9)의 처리에 대해서 상세하게 설명한다.
예를 들면, 사용자로부터의 지정 조건에 의해 「무상으로 저작권 프리의 콘텐츠만을 검색한다」라는 조건이 지정되어 있는 경우, 콘텐츠 부가 서비스부(9)는 화상 검색부(7)의 검색 결과에 대하여 검색 결과 콘텐츠에 부수(附隨)하는 콘텐츠 기술 메타 데이터를 해석하여 무상으로 저작권 프리의 콘텐츠만을 추출한다. 추출한 콘텐츠는 출력 제어부(10)를 통해 사용자에게 송신한다.
또한, 유상 콘텐츠를 검색하는 경우는, 검색 결과로서 콘텐츠 그 자체를 분배하는 것은 아니고, 콘텐츠의 광고에 상당하는 콘텐츠를 송신한다. 여기서, 콘텐츠의 광고에 상당하는 콘텐츠는, 예를 들면, 콘텐츠가 「영화」이면, 「영화의 예고편」과 같이 대표적인 신(scene)을 모은 콘텐츠 등이다. 이들의 콘텐츠는 출력 제어부(10)를 통해 사용자 단말에 송신되어, 사용자가 광고의 콘텐츠를 보고, 구입하는 것을 결정하면 서버에 구입 지시를 내리고, 콘텐츠를 수신할 수 있다. 이 때, 광고의 콘텐츠를 수신하는 단말과 구입한 콘텐츠를 수신하는 단말을 사용자가 지정할 수 있도록 하여도 좋다. 예를 들면, 광고의 콘텐츠를 휴대전화로 수신하여, 사용자가 지정하는 PC 단말에 구입한 콘텐츠를 송신할 수도 있다.
이상과 같이, 이 실시예 5에 의하면, 콘텐츠에 부수하는 콘텐츠 기술 메타 데이터에 기술되어 있는 저작권 정보나 반포 조건을 사용하여 검색할 수 있는 것으로부터, 여러가지 종류의 콘텐츠 중에서 사용자가 원하는 콘텐츠를 용이하게 검색할 수 있다.
실시예 6
상기 실시예 1 내지 실시예 4에서는, 서버측에서 콘텐츠에 부수하는 콘텐츠 기술 메타 데이터를 해석하고, 사용자의 검색 조건이나 수신하는 단말의 처리 능력에 따라서, 콘텐츠의 포맷 변환이나 검색 결과의 필터링을 행하는 예를 나타내었지만, 이 실시예 6은 서버측이 콘텐츠와 콘텐츠 기술 메타 데이터를 송신하고, 클라이언트측에서 콘텐츠 기술 메타 데이터의 해석을 행하여, 수신 단말의 능력을 넘거나, 사용자의 검색 조건에 적합하지 않은 콘텐츠는 수신하지 않는 등의 처리를 클라이언트측이 행하는 것이다.
도 7은 본 발명의 실시예 6에 의한 화상 검색 분배 시스템의 클라이언트의 구성을 도시하는 도면이다. 도면에 있어서, 18은 콘텐츠 기술 메타 데이터의 해석을 행하는 콘텐츠 기술 메타 데이터 해석부이다. 또, 도 6과 동일 구성요소에는 동일 부호를 붙이고 중복되는 설명을 생략한다.
다음에 개요에 대해서 설명한다.
클라이언트의 사용자 단말은 서버로부터 검색 결과 콘텐츠의 특징 등을 기술한 콘텐츠 기술 메타 데이터를 수신한다. 수신한 콘텐츠 기술 메타 데이터는 콘텐츠 기술 메타 데이터 해석부(18)에 입력되고, 검색 결과 콘텐츠의 포맷 등을 조사한다. 이들의 포맷이 사용자 단말에서 수신할 수 있는 포맷인 경우에는 클라이언트의 사용자 단말이 콘텐츠의 송신 요구를 서버에 보내어 콘텐츠의 수신을 행하고, 사용자 단말에서 수신할 수 없는 경우에는 콘텐츠의 수신을 행하지 않도록 한다.
또, 사용자 단말에서 수신할 수 없는 경우에, 상기 실시예 4와 같이 사용자가 대체 처리를 선택할 수 있도록 하여도 좋다.
이상과 같이, 이 실시예 6에 의하면, 클라이언트의 단말에서 콘텐츠를 수신할 수 있는지의 여부를, 클라이언트가 콘텐츠의 특징이나 포맷을 기술한 메타 데이터의 해석을 행하고 판별할 수 있는 것으로부터, 처리 능력이 다른 각종 단말에서 용이하게 검색 결과를 표시할 수 있다.
이상과 같이, 본 발명에 따른 화상 검색 분배 시스템 및 화상 검색 분배 방법은 무선 등의 각종 네트워크를 통하여, 또한, 각종 단말(예를 들면, 휴대전화, 텔레비전 전화, 또는 PC(Personal Computer) 등)의 처리 능력에 따른 포맷으로, 검색 결과 화상 데이터를 분배할 수 있는 것이다.

Claims (18)

  1. 동화상 및 정지 화상을 포함하는 화상을, 그 특징을 기술한 특징 기술자와 함께 등록하는 데이터베이스와,
    사용자 입력에 의한 검색 조건에 근거하여 상기 데이터베이스에 등록한 상기 특징 기술자를 검색하고, 상기 검색 조건에 합치하는 검색 결과를 얻는 화상 검색 수단과,
    상기 검색 결과를 수신하는 사용자 단말측으로부터 얻어지는 분배 조건에 근거하여 상기 검색 결과를 편집 처리하는 콘텐츠 부가 서비스 수단을 구비하는, 화상 검색 분배 시스템.
  2. 제 1 항에 있어서,
    콘텐츠 부가 서비스 수단은 분배 조건으로서 사용자 단말의 단말 정보를 취득하는 단말 정보 취득 수단을 구비하는 것을 특징으로 하는, 화상 검색 분배 시스템.
  3. 제 1 항에 있어서,
    콘텐츠 부가 서비스 수단은, 사용자가 지정하는 분배 조건에 근거하여 사용자 단말이 수신 가능한 검색 결과에 따른 데이터를 생성하고, 상기 검색 결과에 앞서 상기 사용자 단말에 송신하는 것을 특징으로 하는, 화상 검색 분배 시스템.
  4. 제 1 항에 있어서,
    입력 화상의 특징량 및 포맷 정보를 추출하여 특징 기술자를 생성하는 콘텐츠 기술 메타 데이터 생성 수단과,
    이 콘텐츠 기술 메타 데이터 생성 수단이 생성한 상기 특징 기술자와 상기 입력 화상을 데이터베이스에 등록하는 데이터 축적 수단을 구비하는 것을 특징으로 하는, 화상 검색 분배 시스템.
  5. 제 2 항에 있어서,
    콘텐츠 부가 서비스 수단은, 사용자 단말의 단말 정보에 합치하도록 검색 결과 화상의 화상 포맷 및 출력 형식을 변환하는 변환 수단, 상기 단말 정보에 합치하지 않는 검색 결과를 송신하지 않는 필터 수단, 및 상기 단말 정보에 합치하지 않는 검색 결과를 상기 단말 정보에 합치하는 다른 대체 데이터로 바꾸는 치환 수단 중 적어도 하나를 구비하는 것을 특징으로 하는, 화상 검색 분배 시스템.
  6. 제 2 항에 있어서,
    콘텐츠 부가 서비스 수단은, 사용자 단말의 단말 정보에 근거하여 검색 결과를 편집 처리하였을 때에, 편집 처리 전의 상기 검색 결과를, 사용자가 미리 지정한 다른 단말에 송신하는 것을 특징으로 하는, 화상 검색 분배 시스템.
  7. 제 5 항에 있어서,
    콘텐츠 부가 서비스 수단은 사용자 단말의 단말 정보에 합치하지 않는 검색 결과를 편집 처리하는 편집 수단을 복수 구비하고,
    상기 복수의 편집 수단은, 화상 검색을 요구하는 측, 화상 검색을 행하는 측, 및 데이터베이스에 화상을 등록하는 콘텐츠 공급측 중 어느 하나로부터 적절히 선택할 수 있는 것을 특징으로 하는, 화상 검색 분배 시스템.
  8. 제 5 항에 있어서,
    화상 포맷은 검색 결과 화상의 부호화 방식, 비트 레이트, 프레임 레이트, 해상도, 및 파일 사이즈 중 적어도 하나를 포함하여 이루어지는 것을 특징으로 하는, 화상 검색 분배 시스템.
  9. 제 3 항에 있어서,
    콘텐츠 부가 서비스 수단은 검색 결과 화상의 저작권 정보 및/또는 반포 조건에 근거하여 사용자 단말이 수신 가능한 상기 검색 결과에 따른 데이터를 생성하는 것을 특징으로 하는, 화상 검색 분배 시스템.
  10. 동화상 및 정지 화상을 포함하는 화상을, 그 특징을 기술한 특징 기술자와 함께 등록하는 데이터베이스와,
    사용자 입력에 의한 검색 조건에 근거하여 상기 데이터베이스에 등록한 상기특징 기술자를 검색하고, 상기 검색 조건에 합치하는 검색 결과를 얻는 화상 검색 수단과,
    상기 검색 결과와 이것에 따른 특징 기술자를 사용자의 단말에 송신하는 출력 제어 수단과,
    상기 사용자 단말에 설치되고, 상기 출력 제어 수단으로부터 송신되는 특징 기술자를 해석하여 상기 검색 결과를 수신할지의 여부를 결정하는 콘텐츠 기술 메타 데이터 해석 수단을 구비하는, 화상 검색 분배 시스템.
  11. 사용자 입력에 의한 검색 조건에 근거하여 데이터베이스에 등록한 화상의 특징 기술자를 검색하고, 상기 검색 조건에 합치하는 검색 결과를 얻는 화상 검색 단계와,
    상기 검색 결과를 수신하는 사용자 단말측으로부터 얻어지는 분배 조건에 근거하여 상기 검색 결과를 편집 처리하는 콘텐츠 부가 서비스 단계를 포함하는, 화상 검색 분배 방법.
  12. 제 11 항에 있어서,
    콘텐츠 부가 서비스 단계는 분배 조건으로서 사용자 단말의 단말 정보를 취득하는 것을 특징으로 하는, 화상 검색 분배 방법.
  13. 제 11 항에 있어서,
    콘텐츠 부가 서비스 단계는, 사용자가 지정하는 분배 조건에 근거하여 사용자 단말이 수신 가능한 검색 결과에 따른 데이터를 생성하고, 상기 검색 결과에 앞서 상기 사용자 단말에 송신하는 것을 특징으로 하는, 화상 검색 분배 방법.
  14. 제 11 항에 있어서,
    화상이 입력되면, 이 화상의 특징량 및 포맷 정보를 추출하여 특징 기술자를 생성하는 콘텐츠 기술 메타 데이터 생성 단계와,
    이 콘텐츠 기술 메타 데이터 생성 단계에서 생성한 상기 특징 기술자와 입력된 화상을 데이터베이스에 등록하는 데이터 축적 단계를 포함하는 것을 특징으로 하는, 화상 검색 분배 방법.
  15. 제 12 항에 있어서,
    콘텐츠 부가 서비스 단계는, 사용자 단말의 단말 정보에 합치하도록 검색 결과 화상의 화상 포맷 및 출력 형식을 변환하는 변환 단계, 상기 단말 정보에 합치하지 않는 검색 결과를 송신하지 않는 필터 단계, 및 상기 단말 정보에 합치하지 않는 검색 결과를 상기 단말 정보에 합치하는 다른 대체 데이터로 바꾸는 치환 단계 중 적어도 하나를 포함하는 것을 특징으로 하는, 화상 검색 분배 방법.
  16. 제 12 항에 있어서,
    콘텐츠 부가 서비스 단계는, 사용자 단말의 단말 정보에 근거하여 검색 결과를 편집 처리하였을 때에, 편집 처리 전의 상기 검색 결과를, 사용자가 미리 지정한 다른 단말에 송신하는 것을 특징으로 하는, 화상 검색 분배 방법.
  17. 제 13 항에 있어서,
    콘텐츠 부가 서비스 단계는 검색 결과 화상 저작권 정보 및/또는 반포 조건에 근거하여 사용자 단말이 수신 가능한 상기 검색 결과에 따른 데이터를 생성하는 것을 특징으로 하는, 화상 검색 분배 방법.
  18. 사용자 입력에 의한 검색 조건에 근거하여 데이터베이스에 등록한 화상의 특징 기술자를 검색하고, 상기 검색 조건에 합치하는 검색 결과를 얻는 화상 검색 단계와,
    상기 검색 결과와 이것에 따른 특징 기술자를 사용자의 단말에 송신하는 출력 제어 단계와,
    이 출력 제어 단계에서 송신된 특징 기술자를 해석하여 상기 검색 결과를 수신할지의 여부를 상기 사용자 단말측에서 결정하는 콘텐츠 기술 메타 데이터 해석 단계를 포함하는, 화상 검색 분배 방법.
KR10-2002-7012537A 2000-03-23 2000-03-23 화상 검색 분배 시스템 및 화상 검색 분배 방법 KR100523684B1 (ko)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2000/001789 WO2001071558A1 (fr) 2000-03-23 2000-03-23 Systeme et procede d'extraction/de distribution d'images

Publications (2)

Publication Number Publication Date
KR20020082489A true KR20020082489A (ko) 2002-10-31
KR100523684B1 KR100523684B1 (ko) 2005-10-26

Family

ID=11735821

Family Applications (1)

Application Number Title Priority Date Filing Date
KR10-2002-7012537A KR100523684B1 (ko) 2000-03-23 2000-03-23 화상 검색 분배 시스템 및 화상 검색 분배 방법

Country Status (6)

Country Link
US (1) US7031965B1 (ko)
EP (1) EP1267275A4 (ko)
KR (1) KR100523684B1 (ko)
CN (1) CN100409234C (ko)
AU (1) AU2000233265A1 (ko)
WO (1) WO2001071558A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101223137B1 (ko) * 2010-12-14 2013-02-05 모젼스랩(주) 수요자 기반 메타데이터를 이용한 창작 지원 시스템 및 이의 정보 제공 방법

Families Citing this family (93)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001357008A (ja) * 2000-06-14 2001-12-26 Mitsubishi Electric Corp コンテンツ検索配信装置およびコンテンツ検索配信方法
EP1172741A3 (en) * 2000-07-13 2004-09-01 Sony Corporation On-demand image delivery server, image resource database, client terminal, and method of displaying retrieval result
JP2002132663A (ja) * 2000-10-20 2002-05-10 Nec Corp 情報通信システムとその通信方法、及び通信プログラムを記録した記録媒体
TW542949B (en) * 2000-11-27 2003-07-21 Matsushita Electric Ind Co Ltd A method for supplying information, a system for supplying information, a device for playing and recording, and recording media
US7253919B2 (en) * 2000-11-30 2007-08-07 Ricoh Co., Ltd. Printer with embedded retrieval and publishing interface
JP2002202985A (ja) * 2000-12-28 2002-07-19 Pioneer Electronic Corp Ａｖ情報配信装置及び配信方法、ａｖ情報検索装置及び検索方法、ａｖ情報配信検索システム並びに情報記録媒体
US7093277B2 (en) * 2001-05-30 2006-08-15 Digeo, Inc. System and method for improved multi-stream multimedia transmission and processing
US7269303B2 (en) * 2001-06-04 2007-09-11 Hewlett-Packard Development Company, L.P. Remote digital image enhancement system and method
EP1309181A1 (en) * 2001-11-06 2003-05-07 Thomson Licensing S.A. Device, method and system for multimedia content adaption
US7415670B2 (en) * 2001-11-19 2008-08-19 Ricoh Co., Ltd. Printer with audio/video localization
US7747655B2 (en) * 2001-11-19 2010-06-29 Ricoh Co. Ltd. Printable representations for time-based media
US7424129B2 (en) * 2001-11-19 2008-09-09 Ricoh Company, Ltd Printing system with embedded audio/video content recognition and processing
US7861169B2 (en) * 2001-11-19 2010-12-28 Ricoh Co. Ltd. Multimedia print driver dialog interfaces
US7314994B2 (en) * 2001-11-19 2008-01-01 Ricoh Company, Ltd. Music processing printer
FR2832887B1 (fr) * 2001-11-28 2005-09-16 Medialive Methode pour acceder aux courriers electroniques video et multimedia
JP2003209783A (ja) * 2002-01-15 2003-07-25 Canon Inc ファイル送信装置およびファイル送信方法
JP2003308277A (ja) * 2002-04-17 2003-10-31 Sony Corp 端末装置、データ送信装置、データ送受信システム及びデータ送受信方法
JP2004234613A (ja) * 2002-12-02 2004-08-19 Nec Corp 映像記述システムおよび方法、映像識別システムおよび方法
JP4336813B2 (ja) * 2002-12-06 2009-09-30 日本電気株式会社 画像記述システムおよび方法
JP3941700B2 (ja) * 2003-01-28 2007-07-04 ソニー株式会社 情報処理装置、および情報処理方法、並びにコンピュータ・プログラム
US7509569B2 (en) * 2003-03-31 2009-03-24 Ricoh Co., Ltd. Action stickers for nested collections
US7757162B2 (en) * 2003-03-31 2010-07-13 Ricoh Co. Ltd. Document collection manipulation
US7536638B2 (en) * 2003-03-31 2009-05-19 Ricoh Co., Ltd. Action stickers for identifying and processing stored documents
US7703002B2 (en) * 2003-03-31 2010-04-20 Ricoh Company, Ltd. Method and apparatus for composing multimedia documents
US7739583B2 (en) 2003-03-31 2010-06-15 Ricoh Company, Ltd. Multimedia document sharing method and apparatus
WO2004095794A1 (en) * 2003-04-23 2004-11-04 Telecom Italia S.P.A. A client-server system and method thereof for providing multimedia and interactive services to mobile terminals
US7275159B2 (en) * 2003-08-11 2007-09-25 Ricoh Company, Ltd. Multimedia output device having embedded encryption functionality
US7573593B2 (en) * 2003-09-25 2009-08-11 Ricoh Company, Ltd. Printer with hardware and software interfaces for media devices
US7864352B2 (en) * 2003-09-25 2011-01-04 Ricoh Co. Ltd. Printer with multimedia server
US7570380B2 (en) * 2003-09-25 2009-08-04 Ricoh Company, Ltd. Printer user interface
US7505163B2 (en) * 2003-09-25 2009-03-17 Ricoh Co., Ltd. User interface for networked printer
US20050071746A1 (en) * 2003-09-25 2005-03-31 Hart Peter E. Networked printer with hardware and software interfaces for peripheral devices
US7528976B2 (en) * 2003-09-25 2009-05-05 Ricoh Co., Ltd. Stand alone printer with hardware/software interfaces for sharing multimedia processing
US20050068573A1 (en) * 2003-09-25 2005-03-31 Hart Peter E. Networked printing system having embedded functionality for printing time-based media
JP2005108230A (ja) * 2003-09-25 2005-04-21 Ricoh Co Ltd オーディオ／ビデオコンテンツ認識・処理機能内蔵印刷システム
US8077341B2 (en) * 2003-09-25 2011-12-13 Ricoh Co., Ltd. Printer with audio or video receiver, recorder, and real-time content-based processing logic
US7528977B2 (en) * 2003-09-25 2009-05-05 Ricoh Co., Ltd. Printer with hardware and software interfaces for peripheral devices
US7508535B2 (en) * 2003-09-25 2009-03-24 Ricoh Co., Ltd. Stand alone multimedia printer with user interface for allocating processing
US7440126B2 (en) * 2003-09-25 2008-10-21 Ricoh Co., Ltd Printer with document-triggered processing
US20050071763A1 (en) * 2003-09-25 2005-03-31 Hart Peter E. Stand alone multimedia printer capable of sharing media processing tasks
US7511846B2 (en) * 2003-09-25 2009-03-31 Ricoh Co., Ltd. Printer having embedded functionality for printing time-based media
US8274666B2 (en) * 2004-03-30 2012-09-25 Ricoh Co., Ltd. Projector/printer for displaying or printing of documents
US7603615B2 (en) * 2004-03-30 2009-10-13 Ricoh Co., Ltd. Multimedia projector-printer
EP1776638B1 (en) * 2004-08-12 2008-11-19 Telecom Italia S.p.A. A system, a method and a device for updating a data set through a communication network
US8385589B2 (en) 2008-05-15 2013-02-26 Berna Erol Web-based content detection in images, extraction and recognition
US8838591B2 (en) 2005-08-23 2014-09-16 Ricoh Co., Ltd. Embedding hot spots in electronic documents
US8144921B2 (en) 2007-07-11 2012-03-27 Ricoh Co., Ltd. Information retrieval using invisible junctions and geometric constraints
US8856108B2 (en) 2006-07-31 2014-10-07 Ricoh Co., Ltd. Combining results of image retrieval processes
US8195659B2 (en) 2005-08-23 2012-06-05 Ricoh Co. Ltd. Integration and use of mixed media documents
US10192279B1 (en) 2007-07-11 2019-01-29 Ricoh Co., Ltd. Indexed document modification sharing with mixed media reality
US9171202B2 (en) 2005-08-23 2015-10-27 Ricoh Co., Ltd. Data organization and access for mixed media document system
US8176054B2 (en) 2007-07-12 2012-05-08 Ricoh Co. Ltd Retrieving electronic documents by converting them to synthetic text
US7702673B2 (en) 2004-10-01 2010-04-20 Ricoh Co., Ltd. System and methods for creation and use of a mixed media environment
US8332401B2 (en) 2004-10-01 2012-12-11 Ricoh Co., Ltd Method and system for position-based image matching in a mixed media environment
US8600989B2 (en) 2004-10-01 2013-12-03 Ricoh Co., Ltd. Method and system for image matching in a mixed media environment
US8868555B2 (en) 2006-07-31 2014-10-21 Ricoh Co., Ltd. Computation of a recongnizability score (quality predictor) for image retrieval
US8156427B2 (en) 2005-08-23 2012-04-10 Ricoh Co. Ltd. User interface for mixed media reality
US9373029B2 (en) 2007-07-11 2016-06-21 Ricoh Co., Ltd. Invisible junction feature recognition for document security or annotation
US8184155B2 (en) 2007-07-11 2012-05-22 Ricoh Co. Ltd. Recognition and tracking using invisible junctions
US8521737B2 (en) 2004-10-01 2013-08-27 Ricoh Co., Ltd. Method and system for multi-tier image matching in a mixed media environment
US7812986B2 (en) * 2005-08-23 2010-10-12 Ricoh Co. Ltd. System and methods for use of voice mail and email in a mixed media environment
US9530050B1 (en) 2007-07-11 2016-12-27 Ricoh Co., Ltd. Document annotation sharing
US8335789B2 (en) 2004-10-01 2012-12-18 Ricoh Co., Ltd. Method and system for document fingerprint matching in a mixed media environment
US9384619B2 (en) 2006-07-31 2016-07-05 Ricoh Co., Ltd. Searching media content for objects specified using identifiers
US9405751B2 (en) 2005-08-23 2016-08-02 Ricoh Co., Ltd. Database for mixed media document system
US7970171B2 (en) 2007-01-18 2011-06-28 Ricoh Co., Ltd. Synthetic image and video generation from ground truth data
US8825682B2 (en) * 2006-07-31 2014-09-02 Ricoh Co., Ltd. Architecture for mixed media reality retrieval of locations and registration of images
US8276088B2 (en) 2007-07-11 2012-09-25 Ricoh Co., Ltd. User interface for three-dimensional navigation
US8510283B2 (en) 2006-07-31 2013-08-13 Ricoh Co., Ltd. Automatic adaption of an image recognition system to image capture devices
US8369655B2 (en) 2006-07-31 2013-02-05 Ricoh Co., Ltd. Mixed media reality recognition using multiple specialized indexes
US8086038B2 (en) 2007-07-11 2011-12-27 Ricoh Co., Ltd. Invisible junction features for patch recognition
US8156116B2 (en) 2006-07-31 2012-04-10 Ricoh Co., Ltd Dynamic presentation of targeted information in a mixed media reality recognition system
US8949287B2 (en) 2005-08-23 2015-02-03 Ricoh Co., Ltd. Embedding hot spots in imaged documents
CN101010695A (zh) * 2005-06-30 2007-08-01 奥林巴斯株式会社 检索系统和检索方法
US20070067403A1 (en) * 2005-07-20 2007-03-22 Grant Holmes Data Delivery System
US9176984B2 (en) 2006-07-31 2015-11-03 Ricoh Co., Ltd Mixed media reality retrieval of differentially-weighted links
US9063952B2 (en) 2006-07-31 2015-06-23 Ricoh Co., Ltd. Mixed media reality recognition with image tracking
US8201076B2 (en) 2006-07-31 2012-06-12 Ricoh Co., Ltd. Capturing symbolic information from documents upon printing
US9020966B2 (en) 2006-07-31 2015-04-28 Ricoh Co., Ltd. Client device for interacting with a mixed media reality recognition system
US8073263B2 (en) * 2006-07-31 2011-12-06 Ricoh Co., Ltd. Multi-classifier selection and monitoring for MMR-based image recognition
US8676810B2 (en) 2006-07-31 2014-03-18 Ricoh Co., Ltd. Multiple index mixed media reality recognition using unequal priority indexes
US8489987B2 (en) * 2006-07-31 2013-07-16 Ricoh Co., Ltd. Monitoring and analyzing creation and usage of visual content using image and hotspot interaction
KR101330637B1 (ko) * 2007-05-15 2013-11-18 삼성전자주식회사 영상 및 영상 정보 검색 장치 및 방법, 그리고 그 시스템
CN101622869B (zh) * 2007-12-18 2012-03-07 松下电器产业株式会社 图像再现装置、图像再现方法及图像再现程序
US20090216734A1 (en) * 2008-02-21 2009-08-27 Microsoft Corporation Search based on document associations
JP2010093342A (ja) * 2008-10-03 2010-04-22 Canon Inc 映像サーバ装置、映像クライアント装置、映像送受信システム及び情報処理方法
US8385660B2 (en) 2009-06-24 2013-02-26 Ricoh Co., Ltd. Mixed media reality indexing and retrieval for repeated content
US8977639B2 (en) 2009-12-02 2015-03-10 Google Inc. Actionable search results for visual queries
US9058331B2 (en) 2011-07-27 2015-06-16 Ricoh Co., Ltd. Generating a conversation in a social network based on visual search results
JP5655916B2 (ja) * 2013-09-17 2015-01-21 株式会社リコー 画像検索システム
CN106909603A (zh) 2016-08-31 2017-06-30 阿里巴巴集团控股有限公司 搜索信息处理方法及装置
US11341207B2 (en) 2018-12-10 2022-05-24 Ebay Inc. Generating app or web pages via extracting interest from images
CN110020981A (zh) * 2019-03-27 2019-07-16 阿里巴巴集团控股有限公司 一种图像信息处理方法、装置及电子设备

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6340455A (ja) * 1986-08-05 1988-02-20 Sanyo Electric Co Ltd 情報フアイル装置
JPH0219972A (ja) * 1988-07-08 1990-01-23 Nippon Telegr & Teleph Corp <Ntt> データベースの検索結果情報出力方式
JP2846103B2 (ja) * 1990-11-13 1999-01-13 株式会社日立製作所 データベース検索通信制御装置
US5838967A (en) * 1992-04-23 1998-11-17 Teac Corporation Image filing apparatus and method for storing image data and directory information
JP3544557B2 (ja) * 1994-04-08 2004-07-21 オリンパス株式会社 画像ファイル装置
JPH0926965A (ja) * 1995-07-10 1997-01-28 Nippon Telegr & Teleph Corp <Ntt> 映像情報検索方法及びシステム
EP0782324A1 (en) * 1995-07-17 1997-07-02 Matsushita Electric Industrial Co., Ltd. Receiver, transmission/reception method, information storage, television receiver, and information storing method
JPH1011570A (ja) * 1996-06-26 1998-01-16 Ricoh Co Ltd 電子ファイリング装置
JPH10171731A (ja) * 1996-12-13 1998-06-26 Mitsubishi Electric Corp 情報閲覧システム及び情報閲覧方法
JPH10222527A (ja) * 1997-02-07 1998-08-21 Casio Comput Co Ltd 情報出力システム
US6070167A (en) * 1997-09-29 2000-05-30 Sharp Laboratories Of America, Inc. Hierarchical method and system for object-based audiovisual descriptive tagging of images for information retrieval, editing, and manipulation
US6216157B1 (en) * 1997-11-14 2001-04-10 Yahoo! Inc. Method and apparatus for a client-server system with heterogeneous clients
US6504990B1 (en) * 1998-11-12 2003-01-07 Max Abecassis Randomly and continuously playing fragments of a video segment
US6411724B1 (en) * 1999-07-02 2002-06-25 Koninklijke Philips Electronics N.V. Using meta-descriptors to represent multimedia information

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101223137B1 (ko) * 2010-12-14 2013-02-05 모젼스랩(주) 수요자 기반 메타데이터를 이용한 창작 지원 시스템 및 이의 정보 제공 방법

Also Published As

Publication number Publication date
AU2000233265A1 (en) 2001-10-03
KR100523684B1 (ko) 2005-10-26
CN1451127A (zh) 2003-10-22
CN100409234C (zh) 2008-08-06
EP1267275A4 (en) 2006-08-23
US7031965B1 (en) 2006-04-18
WO2001071558A1 (fr) 2001-09-27
EP1267275A1 (en) 2002-12-18

Similar Documents

Publication Publication Date Title
KR100523684B1 (ko) 화상 검색 분배 시스템 및 화상 검색 분배 방법
US7310628B2 (en) Content searching/distributing device and content searching/distributing method
JP4352653B2 (ja) 映像コンテンツ管理運用システム
US9276984B2 (en) Distributed on-demand media transcoding system and method
KR100922263B1 (ko) 인텔리전트 멀티미디어 서비스
US6684239B1 (en) System and method for automatically publishing electronic mail messages on the internet
US7242324B2 (en) Distributed on-demand media transcoding system and method
US7941553B2 (en) Method and device for streaming a media file over a distributed information system
US20100281042A1 (en) Method and System for Transforming and Delivering Video File Content for Mobile Devices
US20030097301A1 (en) Method for exchange information based on computer network
US8185577B2 (en) Content management apparatus, web server, network system, content management method, content information management method, and program
KR100862354B1 (ko) 비동기 검색 환경을 지원하는 멀티미디어 검색 방법
KR20010111380A (ko) 인터넷 서비스 장치 및 서비스 방법
US20120113985A1 (en) Application service and sharing methods in home network system
EP1244309A1 (en) A method and microprocessor system for forming an output data stream comprising metadata
US20120117561A1 (en) Method and server for application service in home network system
US7319470B2 (en) Content delivery system, content server, and content delivery method
JP3578091B2 (ja) コンテンツ取得方法及びコンテンツ提供方法及びコンテンツ取得装置及びコンテンツ提供装置及びコンテンツ取得プログラム及びコンテンツ提供プログラム
WO2010062761A1 (en) Method and system for transforming and delivering video file content for mobile devices
US10148984B2 (en) Terminal device, server device, data management system, and recording medium on which program is recorded
KR100943447B1 (ko) 복구되고 있는 멀티미디어 콘텐트에 관한 검색을 수행하기 위한 멀티미디어콘텐트 복구 장치와 이용되는 인터페이스 장치
Hellwagner et al. MuMiVA: a multimedia delivery platform using format-agnostic, XML-driven content adaptation
EP1286516A2 (en) Digest transmission system for mobile telephones
Viana et al. A distributed television studio system
JP2005208685A (ja) プレゼンスとメタデータを利用した情報自動通知方法並びに同システムおよびそれに用いるプレゼンス・サブシステムおよびメタデータ・サブシステム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20081010

Year of fee payment: 4

LAPS Lapse due to unpaid annual fee