JP5843831B2 - マルチメディアデータを整理するためのプロセス - Google Patents

マルチメディアデータを整理するためのプロセス Download PDF

Info

Publication number
JP5843831B2
JP5843831B2 JP2013196019A JP2013196019A JP5843831B2 JP 5843831 B2 JP5843831 B2 JP 5843831B2 JP 2013196019 A JP2013196019 A JP 2013196019A JP 2013196019 A JP2013196019 A JP 2013196019A JP 5843831 B2 JP5843831 B2 JP 5843831B2
Authority
JP
Japan
Prior art keywords
individual
individuals
ontology
generic
rule
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2013196019A
Other languages
English (en)
Other versions
JP2014038641A (ja
Inventor
ジーン−マリエ バウ
ジーン−マリエ バウ
シエリ リビヘン
シエリ リビヘン
クリストフ エドモンド マウリス パピン
クリストフ エドモンド マウリス パピン
オリビア マルク アントイン リガウルト
オリビア マルク アントイン リガウルト
エリク マセラ
エリク マセラ
Original Assignee
インテレクチュアル ベンチャーズ ファンド 83 エルエルシー
インテレクチュアル ベンチャーズ ファンド 83 エルエルシー
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by インテレクチュアル ベンチャーズ ファンド 83 エルエルシー, インテレクチュアル ベンチャーズ ファンド 83 エルエルシー filed Critical インテレクチュアル ベンチャーズ ファンド 83 エルエルシー
Publication of JP2014038641A publication Critical patent/JP2014038641A/ja
Application granted granted Critical
Publication of JP5843831B2 publication Critical patent/JP5843831B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/435Filtering based on additional data, e.g. user or group profiles
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/438Presentation of query results
    • G06F16/4387Presentation of query results by the use of playlists
    • G06F16/4393Multimedia presentations, e.g. slide shows, multimedia albums
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/48Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3204Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to a user, sender, addressee, machine or electronic recording medium
    • H04N2201/3205Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to a user, sender, addressee, machine or electronic recording medium of identification information, e.g. name or ID code
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3225Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document
    • H04N2201/3247Data linking a set of images to one another, e.g. sequence, burst or continuous capture mode

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Library & Information Science (AREA)
  • Processing Or Creating Images (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Description

本発明は、オントロジ(存在論:ontology)、つまり知識を表現する一連の概念を構造化したものを利用する、マルチメディアデータを整理するためのプロセスに関する。
本発明には、マルチメディアデータ、特にデジタル写真データを整理するという家庭向け応用分野がある。また、共有マルチメディアデータの整理をカスタマイズするという応用分野もある。本発明の利用分野は、マルチメディアコンテンツへのオンデマンドでの公共アクセスの実現に及ぶ。
この整理システムに取り入れられるマルチメディアデータとしては、画像関連データ、画像シーケンス、音、テキストまたはこれらのデータセットのあらゆる組み合わせ等がある。
現在市販されているさまざまなマルチメディアデータの読取りおよび再生機器により、使用者はこのような機器を使って以前より格段に多くのデータにアクセスし、これを共有できるようになった。特に、デジタルカメラのメモリが大容量化したことから、1つのイベントでより多くの写真が撮影されている。
提示されるデータが大量であるため、これらのデータを選別し、整理しなければならない。どのように選別するかは、そのマルチメディアデータが誰を対象とするものかだけでなく、データを提示するための媒体によっても異なるかもしれない。
たとえば、デジタル写真データは、プリントされたプルーフのスライドショーまたはアルバムを制作するように整理することができる。同一のイベントに関する複数のアルバムには、そのアルバムが誰のためのものかに応じて、異なる写真が含まれているかもしれない。
ビデオクリップデータ、音データ、テキストデータまたはマルチメディアデータのあらゆる組み合わせについても同じことがいえる。
出来上がった提示は楽しいものであるかもしれないが、使用者はしばしば、データを選別、分類、整理するステップを踏まなければならないことを面倒に感じる。
下記の技術文献1,2に、画像生成およびアルバム制作に関する各種の技術が開示されている。
米国特許第6,636,648号明細書 米国特許出願第2003/0147558号明細書
異なる人々を対象として、異なる提示媒体用に、異なる提示物を制作することは、マルチメディアデータの分類または検索にどの方法を用いるか、また使用者が各データ提示物の制作にどのツールを使えるかに関係なく、一般的に面倒な作業である。
本明細書では、結婚写真を提示する場合を例にとって説明する。提示用として選ばれる写真の選択は、理想的には、その提示物を誰に見せようとしているか、つまり新婚の夫婦か、両親か、友人か、立会人その他か、およびどの提示媒体を用いるか、つまりスライドショーか、フォトアルバムか、娯楽用品か、3Dオブジェクトその他かによって決定されるべきである。
本発明の目的は、少なくともある数のコンテキストにおいて、デジタルデータの整理をはるかに容易にする方法を提供することである。
本発明の別の目的は、使用者が同じマルチメディアデータ集合を、誰をターゲットとするかによって異なる手段で整理し、しかもはるかに少ない労力でこれを行うことができるようにすることである。
上記の目標を達成するために、本発明はマルチメディアデータを整理するためのプロセスを目的物としており、このプロセスでは、マルチメディアデータが、包括的個体(generic individuals)と個体間の意味論上のリンクその他を含むインスタンス化されたオントロジの随伴的個体(contingent individuals)によって表現される。
このプロセスは、ソフトウェアを実行するパーソナルコンピュータやサーバ等のコンピュータを用いて遂行できる。
このプロセスはまた、カメラ等の特定のマルチメディアデバイスやデジタルフォトフレームのプロセッサを用いても遂行できる。
このプロセスはさらに、特定用途向け集積回路を備えるデバイスでも遂行できる。
その方法は、
−使用者に、インスタンス化されたオントロジからの少なくとも1つの個体を選択させるステップと、使用者に行わせた選択に応答して、
−少なくとも1つの選択および/または、使用者が選んだ個体および関連する意味論上のリンクに関する(engage)整理ルールにしたがって、インスタンス化されたオントロジの随伴的個体に対応するマルチメディアデータのサブセットを選択し、整理するステップと、
を含む。
選択は自動的に実行され、使用者が何らかの入力を追加で行う必要はない。
マルチメディアデータに画像データが含まれる場合、このプロセスはさらに、選択されたデータサブセットを使ってフォトアルバムおよび/またはスライドショーを制作するステップを含む。
「個体」という用語は、オントロジの概念化された基本要素を指す。これらの個体は、包括的個体または随伴的個体に分けられる。
包括的個体群全部と関連のある意味論上のリンクとで1つまたは複数の包括的オントロジを構築することができる。包括的オントロジは、マルチメディアデータを整理するための基本構造として用いられる。マルチメディアデータは随伴的個体によって表現され、随伴的個体は意味論上のリンクを通じて包括的オントロジの中の個体に関連付けられる。包括的オントロジと包括的個体は、好ましくは、このプロセスを実行する使用者によって生成または変更されないものである。
これに対して、随伴的個体は、実際に使用者の知識の内容に関連付けられる。随伴的個体の例としては、既存のマルチメディアデータまたは、使用者により読み取られるデータを指し示すポインタが挙げられる。
「ポインタ」という用語は、マルチメディアデータを特定し、位置付け、または探すことを可能にするアドレスその他の情報を指す。オントロジの1つの個体があるマルチメディアデータオブジェクトを指し示すポインタを有していれば必ず、そのマルチメディアはその個体に関連付けられているとみなされる。
包括的オントロジと、意味論上のリンクによってそれに関連付けられる随伴的個体によって形成されるグループは、「インスタンス化されたオントロジ」と呼ばれる。
インスタンス化されたオントロジは、1つまたは好ましくはいくつかの選択および整理ルールに関連付けて使用される。ルールとインスタンス化されたオントロジとの関連付けによって、提示用に設計されたマルチメディアデータ、特に写真に焦点を当てた整理システムが形成される。
本発明によれば、データ、特にデジタル写真を、写真にラベル付けせずに、また意味的内容を分析せずに整理することができる。
提示を目的としたマルチメディアデータの選択と整理は基本的に、使用者により選択される1つまたは複数の個体によって異なる。使用者に提供される個体の集合には、包括的個体、随伴的個体、あるいはこれら2つの組み合わせが含まれている可能性がある。
本発明の好ましい実施例において、使用者に提供される選択肢の集合は包括的個体を含む。
整理ルールまたは整理ルールセットは、不変かつ固有とすることができる。また、いくつかのルールセットを使用者が直接選択するか、あるいは使用者が求める提示の形態に応じて選択できるようにすることも可能である。たとえば、データ整理がフォトアルバムの制作を目的として行われる場合に適用されるルールセットと、データ整理がビデオクリップまたはスライドショーの制作を目的として行われる場合のための別のルールセットを用意することができる。
この方法の単純な実施例では、統計情報による分類ルール(parametric rule)または統計情報以外による分類ルール(non-parametric rule)を1つ用いることができる。この種のルールの例としては、オントロジの中の、使用者が選択した個体との直接的な意味論上のリンクを示す個体に関連付けられるマルチメディアデータを選択すること等がある。
包括的個体を、共通の特徴を有する個体のクラスに再分配することが可能であり、この場合、セクションルール(section rule)にはクラスも含めることができる。
このように、使用者が選択した個体(複数の場合もある)に応じて、または使用者が選択した個体(複数の場合もある)のクラス集合に応じて、あるルールセットから1つのルールを選択でき、この場合、ルールの数は、たとえばオントロジの中の包括的個体の数と同じとすることができる。1つのルールは、たとえば個々の包括的個体および/または個々の個体クラスに関連付けられる。
本発明によるプロセスは、使用者に与えられたインスタンス化されたオントロジに基づいて実行される。しかしながら、その方法には、有利な形態として、包括的オントロジに基づいてインスタンス化されたオントロジを支援付きで構築することを含む予備ステップを含めることもできる。この場合、使用者には1つのオントロジまたは複数の包括的オントロジたけを提供すればよい。
使用者が利用できる支援付きの構築方法には、好適な選別手段を提供することが含まれていてもよい。これは、たとえば使用者が選択した包括的オントロジに応じてデータ読取機器のインタフェースを構成することであり、この場合、構成ステップでは使用者に具体的なマルチメディアデータ選別オプションが提供されることになる。
たとえば、使用者が包括的オントロジを選択した場合、ディスプレイアイコンおよび/またはコントロールキーをそのオントロジの中の個々の包括的個体に関連付けることができる。インタフェースとしてマウスを備えるPCを使用するのであれば、選別は、マルチメディアデータを表すアイコンとその包括的オントロジの中の個体を表すアイコンの間のドラッグ・アンド・ドロップによって行うことができる。
使用者が行う選別によって、意味論上のリンクが出来上がる。このプロセスは実際に、マルチメディアデータに関連付けられる随伴的個体と、使用者がそのマルチメディアデータを割り当てる選別カテゴリを表す選択されたオントロジの中の包括的個体との間の意味論上のリンクを作るという過程を含む。したがって、意味論上のリンクは使用者が実行する選別(sort-through)の機能(function)として作成される。
本発明のその他の特徴や利点は、付属の図面に関する以下の説明から明らかとなるであろう。この説明はあくまでも一例にすぎず、この例に限定されない。
本発明によるプロセスの実行に使用できるタイプのインスタンス化されたオントロジを説明する概略図である。 本発明を実行するマルチメディアデータ整理プロセスの主要ステップを示すフローチャートである。
図1は、包括的オントロジ12と特定の数の随伴的個体14を含むインスタンス化されたオントロジ10の概略図である。
包括的オントロジは2つの個体クラス16a,16bからなり、各クラスに特定の数の包括的個体18が含まれる。
例として、図面の説明は、結婚式に関するデジタルデータを整理するために設計された包括的オントロジについて行う。
したがって、第一の個体クラス16aには、ある結婚式において発生したエピソードに関する個体が含まれる。図のエピソードは、民事婚または宗教婚の結婚式における誓いの言葉の交換EV(EC)、乾杯T(C)および披露宴WR(F)に対応する。
オントロジの中には、各エピソードについて1つの包括的個体がある。
個体クラス16bでは、個体は結婚式の中の代表的な役割を表す。例として、図面では新郎B(M)、立会人W(T)、友人F(A)が特に示されている。
包括的オントロジにはまた、特定の数の包括的意味論上のリンクも含まれている。意味論上のリンク「それに続いて」は参照記号sで示され、エピソードのクラス16aの中の個体を結びつける。以上のことから、包括的オントロジは、結婚の誓いに続いて乾杯が行われ、それに続いて披露宴が行われるという知識を含んでいる。
同様に、包括的意味論上のリンク「にとって重要」は参照記号iで示され、エピソードのクラス16aに含まれる個体を結婚式での役割のクラス16bに含まれる個体と結びつけ、また結婚式での役割のクラスの中の個体同士を結びつける。したがって、図の例において、包括的オントロジは、誓いの言葉の交換と披露宴は新郎にとって重要な時間である、誓いの言葉の交換と乾杯は立会人にとって重要な時間である、等々の知識を含んでいる。
随伴的個体14は、マルチメディアデータのポインタまたはアドレスまたは識別子であり、またはこれを含む。説明を単純化するために、ポインタとアドレスと識別子を、それぞれが表すマルチメディアデータとして扱う。したがって、以下の説明において、本出願人は言葉の意味を広げ、随伴的個体を「マルチメディアデータ」と呼ぶことにする。
図の例において、マルチメディアデータには、デジタル写真ファイル14a,14b,14c,14dと、使用者がそれ以前に入力したテキストを含むかもしれないテキストファイル14e,14fが含まれる。
マルチメディアデータ14は、参照記号rで示される「により表される」という意味論上のリンクによって包括的オントロジ12の包括的個体に関連付けられる。したがって、誓いの言葉の交換は写真集合14aによって表され、新郎は写真集合14dによって表される。意味リ論上のリンクrは、今度は「随伴的意味論上のリンク」と呼ばれる。
図をわかりやすいものにするという明白な目的のために、図には描かれていないが、同じ写真、ひいては同じ随伴的個体14が、これを包括的オントロジの中の異なる包括的個体に結びつける意味論上のリンクを有することもありうる。
図2は、本発明を実行するための別の例を示す。まず、予備選別ステップ100から説明する。このステップは、厳密には、整理の方法そのものの不可欠な部分ではなく、また必ずしも、データを提示のために整理しようとしている使用者と同じ使用者によって行われるとはかぎらない。選別ステップは、インスタンス化されたオントロジを構築することに対応する。しかしながら、本発明の方法は、既存のインスタンス化されたオントロジを使っても実行できる。
予備段階の最初のステップ101では、包括的オントロジが選択される。図の例では、この包括的オントロジは結婚式に関するオントロジである。同様に、誕生日、休日等、他のイベントに関する他の包括的オントロジを構築することもできる。個々のケースにおいて、包括的個体は、イベント、場所、人、状況、そしてより一般的には、ターゲットとなるコンテキストの中で通常遭遇すると予想され、かつこれに関連するマルチメディアデータが作られる可能性のある、あらゆる対象に対応できる。
包括的オントロジが選択されると、ステップ102で、その包括的オントロジを選別プロセスに最もよく適合させるように設計された選別インタフェースが自動的に構成される。図の例では、スクリーンの表示を、オントロジの中の各包括的個体にアイコン118を対応させるように構成することができる。図には、少数のアイコンだけを示す。同じ方法によって、選択された包括的オントロジの中の包括的個体の各々にコントロールキーを割り当てることもできる。
したがって、使用者は、マウスとドラッグ・アンド・ドロップによるコマンドを使って、マルチメディアデータを表すアイコン114を、包括的個体を表すアイコンとマッチさせることができる。この選別ステップには、図1のテキストデータ14e,14fに対応するテキストの入力を含めることできる。このテキスト入力ステップは参照番号103で示される。同様に、データは音声による解説や音楽の形態でも入力できる。
使用者のコマンドは、次のステップ104で、随伴的意味論上のリンクを作成し、それによってインスタンス化されたオントロジを構築するのに使用される。随伴的意味論上のリンクは、図1においてrで示される意味論上のリンクである。これらは、マルチメディアデータを包括的オントロジの中の包括的個体に結びつける。
このようにして、インスタンス化されたオントロジが構築されると予備ステップが完了する。
データ整理プロセスそのものである120は、ステップ104で構築されたインスタンス化されたオントロジまたは、マルチメディアデータを含む同じタイプの別のインスタンス化されたオントロジを使用できる。
最初のステップ122は、インスタンス化されたオントロジを選択するステップである。これは、マルタメディアデータセット、たとえばデジタル写真の集合と、このデータセットに関する知識の集合を同時に選択することである。この知識は特に、インスタンス化されたオントロジの中の個体を相互に結びつける包括的および随伴的リンクの中に保存される。
オントロジが選択されたら、126において、使用者にはまた別の選択のオプション、つまり1つまたは複数の個体を選択する機会が与えられる。この選択の前に、124において、選択されたインスタンス化されたオントロジの中の個体に関係する特定の数のアイコンがスクリーンに表示されてもよい。この選択ステップはまた、キーボードまたはその他のアドホックインタフェースを構成することによっても実行できる。
使用者に与えられる選択は、包括的個体に限定することができ、または、随伴的個体を含んでいてもよい。あるいは、その選択の選択肢とされる個体を、これに付けられる意味論上のリンクの数に応じて限定してもよい。
この選択ステップでは、選択肢とされる個体の中から1つまたは複数を使用者が選択する。
たとえば、選択できる個体は、図1の中の個体EV,C,WR,B,W,Fであってもよい。したがって、使用者は個体C(セレモニー)を選択するかもしれない。
128で、使用者にさらに別の選択を行わせてもよい。これは、データを提示するための媒体またはモードの選択である。たとえば、マルチメディアデータが主として写真に関連するものである場合、使用者は、マルチメディアデータをスライドショーによる提示用にあてるか、フォトアルバムによる提示用にあてるかを選択できる。
その後、ステップ130で、マルチメディアデータのサブセットの選択と整理が行われる。このステップでは132におけるルールセットが必要となり、このルールセットは、必要に応じて、128での第二の選択の間に選択された提示フォーマットに応じて選択してもよい。
これらのルールは事前に決められ、随伴的または意味的個体に関係付けることができるのと同様に、随伴的または包括的意味論上のリンクに関係付けることができる。これらのルールにより、使用者の選択(複数の場合もある)を考慮して選択しなければならないマルチメディアデータが決まる。
いくつかの例を挙げることができる。
−(a)使用者がある包括的個体を選択した場合、その包括的個体に関係するすべてのマルチメディアデータ(随伴的個体)を選択する。
−(b)使用者が選択したマルチメディアデータ(随伴的個体)が関連付けられる包括的個体に関係するすべてのマルチメディアデータをとる。
−(c)使用者が選択した個体に、Xの下の連続する多数のリンクによって関連付けられるすべてのマルチメディアデータをとる。
−(d)使用者が選択した個体に関連付けられるマルチメディアデータの中のxパーセントと、y個より少ない連続する「それに続いて」のリンクによってその個体に関連付けられるマルチメディアデータの100−xパーセントをランダムに選択する。
これらの例は、ルールをどのように包括的個体または個体クラスに固有のものとすることができるかを明確にしている。また、たとえば多数のリンクを考えることにより、ルール自体が包括的であってもよい。
ルールはまた、データの整理と、それがどのように提示されるかにも適用できる。たとえば、使用者がデータをフォトアルバムとして提示することを選択した場合、たとえば、アルバムに入れる1枚の写真のプリントフォーマットは、この写真を表す随伴的個体を包括的個体に結びつける意味論上のリンクの数によって決まるというルールを設けることができる。たとえば、リンクが1つであれば小さな提示フォーマットとなり、リンクが2つであれば中規模のフォーマットとなり、リンクが3つ以上であれば大きなフォーマットとなる。
本発明による方法は、有利な点として、ターゲットとなる受取手のために特に設計されたマルチメディア提示物を制作するのに使用できる。
再びフォトアルバムを制作する場合を例にとると、個体選択ステップ126で、使用者に対し、オントロジの中の個体集合をカバーする、より広い選択肢か、あるいはより限定的な選択肢を与えることが可能である。たとえば、この選択肢を1つのクラス内の個体に限定することができる。
したがって、図1の結婚式の役割のクラス16bに注目すると、使用者は、新郎B(M)、立会人W(T)または友人F(A)をより明確なターゲットとした構成を選択できる。
たとえば、3つ未満の連続するリンクによって、選択された個体(W)に関係する写真を選択するというルールがある場合、フォトアルバムには主として、新郎、誓いの言葉の交換の儀式、そして乾杯の写真が含まれるであろう。写真は、リンクiとrだけで立会人Wに関連付けられる。しかしながら、この例で立会人が受け取るのは、少なくとも3つの連続するリンク、たとえば14TからWR、WRから1T、TからWを想定する披露宴WRまたは友人Fの写真だけであろう。
意味論上のリンクs「それに続いて」に関するルールは、選択された写真を時系列で並べるのに使用できる。
最も制限的なルールから最も制限的でないルールへの順序で適用される一連の条件付きルールを含めることが可能である。より制限的なルールを使用する際の条件となるのは、そのルールによって、提示フォーマットとその提示物に含める必要のあるマルチメディアオブジェクトの数を考慮して十分な数のマルチメディアオブジェクトを生成できることである。このオプションは、ステップ128で使用者に与えることができる。
マルチメディアコンテンツのオンデマンド配信システムの場合、包括的オントロジは、オンデマンド配信サービス事業者によって管理されるサーバ上に保存でき、上述のような使用者による選択は通信ネットワークを介して遠隔的に行うことができる。
なお、上記の実施形態について、次の付記を記す。
(付記1)包括的個体(EV,T,WR,B,W,F)と個体間の意味論上のリンクを含むインスタンス化されたオントロジの中にさらに含まれる随伴的個体(14a,14b,14c,14d,14e,14f)によって表されるマルチメディアデータを整理するプロセスであって、
前記インスタンス化されたオントロジから少なくとも1つの個体の選択オプションを使用者に与えるステップ(122)と、使用者に行わせた選択に応答して、
前記インスタンス化されたオントロジの随伴的個体に対応するマルチメディアデータのサブセットを、前記使用者が選択した個体およびこれに関連する意味論上のリンクに関する少なくとも1つの選択および/または整理ルールに応じて選択し、整理するステップ(130)と、
を含むことを特徴とするプロセス。
(付記2)付記1に記載のプロセスであって、
前記包括的個体は共通の特徴を有する個体クラス(16a,16b)に再分配され、前記選択および整理ルールはまた、これらのクラスに関係することを特徴とするプロセス。
(付記3)付記1に記載のプロセスであって、
前記随伴的個体は、マルチメディアデータを指し示すポインタであることを特徴とするプロセス。
(付記4)付記1に記載のプロセスであって、
前記選択ルールは、使用者が選択したデータ提示フォーマットに応じて機能するルールセットの一部であることを特徴とするプロセス。
(付記5)付記1に記載のプロセスであって、
一連のルールを使用し、その中の少なくとも1つのルールが前記オントロジの中の個々の包括的個体に関連付けられることを特徴とするプロセス。
(付記6)付記2に記載のプロセスであって、
一連のルールを使用し、その中の少なくとも1つのルールが各クラスに関連付けられることを特徴とするプロセス。
(付記7)付記1に記載のプロセスであって、
包括的個体を含む包括的オントロジに基づいて、前記インスタンス化されたオントロジを支援付きで構築する予備ステップ(100)をさらに含むことを特徴とするプロセス。
(付記8)付記7に記載のプロセスであって、
使用者が選択した包括的オントロジにしたがってデータ読取ハードウェアインタフェースを構成するステップ(102)を含み、前記構成ステップでは、使用者に対して、前記マルチメディアデータを選別するオプションが与えられることを特徴とするプロセス。
(付記9)付記8に記載のプロセスであって、
前記マルチメディアデーに関連付けられる随伴的個体と前記選択されたオントロジの包括的個体の間の意味論上のリンクを作るステップを含み、前記意味論上のリンクを作るステップは、前記使用者が実行する前記選別にしたがって実行されることを特徴とするプロセス。
(付記10)フォトアルバムおよび/またはスライドショーを制作するために、上記付記のいずれかに記載のプロセスを使用すること。
12 包括的オントロジ、14 随伴的個体、16 個体クラス、18 包括的個体。

Claims (6)

  1. 少なくとも1つのプロセッサにより実行されると、前記プロセッサに:
    (i)包括的個体と、(ii)前記包括的個体間の包括的意味論上のリンクと、(ii)随伴的個体及び随伴的意味論上のリンクとを含む単一のインスタンス化されたオントロジを設けるステップであって前記包括的個体と前記包括的個体間の包括的意味論上のリンクとは基本的整理構造を形成し、各随伴的意味論上のリンクはそれぞれ随伴的個体と包括的個体とをリンクし、各随伴的個体はマルチメディアデータを表すステップと、
    選択された少なくとも一個体の選択を受け取るステップであって、前記選択された少なくとも一個体は、前記インスタンス化されたオントロジの一包括的個体、前記インスタンス化されたオントロジの一随伴的個体、または前記インスタンス化されたオントロジの一包括的個体と一随伴的個体の組合せのうちの一以上である、ステップと、
    前記選択の受け取りに応じて、選択ルールまたは整理ルールの少なくとも一方の機能として、前記インスタンス化されたオントロジの随伴的個体に対応するマルチメディアデータのサブセットを選択し整理するステップであって、前記選択ルールまたは整理ルールの少なくとも一方は、前記選択された少なくとも一個体と、前記選択された少なくとも一個体に関する意味論上のリンクとに関するステップと
    を実行させるプログラム命令を記憶した、コンピュータ読み取り可能媒体。
  2. 二またはそれ以上の包括的個体は、共通の特徴を有する個体クラスに分配され、前記選択および整理ルールは、前記個体クラスに関係する、請求項1に記載のコンピュータ読み取り可能媒体。
  3. 前記随伴的個体は、マルチメディアデータを指し示すポインタである、請求項1に記載のコンピュータ読み取り可能媒体。
  4. 前記選択ルールと前記整理ルールは、前記オントロジの各包括的個体に関連する一ルールを含むルールセットの一部である、請求項1に記載のコンピュータ読み取り可能媒体。
  5. 前記選択ルールは、使用者が選択したデータ提示フォーマットに応じて機能するルールセットの一部である、請求項1に記載のコンピュータ読み取り可能媒体。
  6. マルチメディアデータを整理するシステムであって、
    プロセッサと、
    単一のインスタンス化されたオントロジの選択された少なくとも一個体の選択を受け取るように構成された通信インタフェースであって、前記選択された少なくとも一個体は、前記インスタンス化されたオントロジの一包括的個体、前記インスタンス化されたオントロジの一随伴的個体、または前記インスタンス化されたオントロジの一包括的個体と一随伴的個体の組合せのうちの一以上である、通信インタフェースと、
    少なくとも一プロセッサにより実行されると、前記システムに:
    (i)包括的個体と、(ii)前記包括的個体間の包括的意味論上のリンクと、(ii)随伴的個体及び随伴的意味論上のリンクとを含む前記インスタンス化されたオントロジを設けるステップであって、前記包括的個体と前記包括的個体間の包括的意味論上のリンクとは基本的整理構造を形成し、各随伴的意味論上のリンクはそれぞれ随伴的個体と包括的個体とをリンクし、各随伴的個体はマルチメディアデータを表すステップと、
    前記通信インタフェースを介した前記選択の受け取りに応じて、選択ルールまたは整理ルールの少なくとも一方の機能として、前記インスタンス化されたオントロジの随伴的個体に対応するマルチメディアデータのサブセットを選択し整理するステップであって、前記選択ルールまたは整理ルールの少なくとも一方は、前記選択された少なくとも一個体と、前記選択された少なくとも一個体に関する意味論上のリンクとに関するステップと
    を実行させる、プログラム命令を記憶した、コンピュータ読み取り可能媒体と
    を有するシステム。
JP2013196019A 2007-11-02 2013-09-20 マルチメディアデータを整理するためのプロセス Expired - Fee Related JP5843831B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FR0707681A FR2923307B1 (fr) 2007-11-02 2007-11-02 Procede d'organisation de donnees multimedia
FR0707681 2007-11-02

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2010531485A Division JP5406201B2 (ja) 2007-11-02 2008-10-13 マルチメディアデータを整理するためのプロセス

Publications (2)

Publication Number Publication Date
JP2014038641A JP2014038641A (ja) 2014-02-27
JP5843831B2 true JP5843831B2 (ja) 2016-01-13

Family

ID=39387463

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2010531485A Expired - Fee Related JP5406201B2 (ja) 2007-11-02 2008-10-13 マルチメディアデータを整理するためのプロセス
JP2013196019A Expired - Fee Related JP5843831B2 (ja) 2007-11-02 2013-09-20 マルチメディアデータを整理するためのプロセス

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2010531485A Expired - Fee Related JP5406201B2 (ja) 2007-11-02 2008-10-13 マルチメディアデータを整理するためのプロセス

Country Status (5)

Country Link
US (1) US8762414B2 (ja)
EP (1) EP2208150A1 (ja)
JP (2) JP5406201B2 (ja)
FR (1) FR2923307B1 (ja)
WO (1) WO2009056437A1 (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011099108A1 (ja) * 2010-02-10 2011-08-18 パナソニック株式会社 画像評価装置、画像評価方法、プログラム、集積回路
US9588992B2 (en) 2010-09-30 2017-03-07 Microsoft Technology Licensing, Llc Displaying images interesting to a user
US20120166920A1 (en) * 2010-12-22 2012-06-28 Canon Kabushiki Kaisha Creation of customized multimedia experiences based on future occasions
CN118737132A (zh) * 2018-07-13 2024-10-01 谷歌有限责任公司 端到端流关键词检出
US11113322B2 (en) 2020-01-07 2021-09-07 Bank Of America Corporation Dynamically generating strategic planning datasets based on collecting, aggregating, and filtering distributed data collections

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6636648B2 (en) 1999-07-02 2003-10-21 Eastman Kodak Company Albuming method with automatic page layout
US7039239B2 (en) 2002-02-07 2006-05-02 Eastman Kodak Company Method for image region classification using unsupervised and supervised learning
US7711689B2 (en) * 2003-01-17 2010-05-04 The Board Of Trustees Of The Leland Stanford Junior University Methods and apparatus for storing, organizing, sharing and rating multimedia objects and documents
JP4870903B2 (ja) * 2003-11-19 2012-02-08 日本電信電話株式会社 コンテンツ分類処理装置、および同装置におけるディレクトリのリスティング方法ならびにその処理プログラム
JP2005316699A (ja) * 2004-04-28 2005-11-10 Hitachi Ltd コンテンツ公開システム、コンテンツ公開方法、及びコンテンツ公開プログラム
EP1844411A2 (en) * 2005-01-28 2007-10-17 Koninklijke Philips Electronics N.V. Dynamic photo collage
US7818350B2 (en) * 2005-02-28 2010-10-19 Yahoo! Inc. System and method for creating a collaborative playlist
US8180770B2 (en) * 2005-02-28 2012-05-15 Yahoo! Inc. System and method for creating a playlist
JP4762731B2 (ja) * 2005-10-18 2011-08-31 富士フイルム株式会社 アルバム作成装置、アルバム作成方法、およびアルバム作成プログラム

Also Published As

Publication number Publication date
WO2009056437A1 (en) 2009-05-07
US8762414B2 (en) 2014-06-24
JP2014038641A (ja) 2014-02-27
FR2923307A1 (fr) 2009-05-08
EP2208150A1 (en) 2010-07-21
US20100250544A1 (en) 2010-09-30
JP5406201B2 (ja) 2014-02-05
JP2011503693A (ja) 2011-01-27
FR2923307B1 (fr) 2012-11-16

Similar Documents

Publication Publication Date Title
US9538019B2 (en) Proactive creation of photo products
US20190026313A1 (en) Device, method, and user interface for managing and interacting with media content
JP5710804B2 (ja) 意味分類装置を利用した自動的なストーリー生成
US8639722B2 (en) Ordering content in social networking applications
JP4756209B2 (ja) デジタル・ファイルを自動的に記憶および共有するためのフォトシェアリング・サーバ・フィルタおよびコンピュータ読み取り可能媒体
CN103620545B (zh) 媒体集合的分级、可缩放呈现
US9244941B2 (en) Proactive creation of image-based products
CN101568969B (zh) 故事共享自动化
JP5843831B2 (ja) マルチメディアデータを整理するためのプロセス
WO2008014408A1 (en) Method and system for displaying multimedia content
KR20150132074A (ko) 콘텐트를 구성하는 방법
US9886787B2 (en) Proactive creation of photo products
TW200849044A (en) Database files-management system, integration module and browsing interface of database files-management system, database files-management method
US20080086475A1 (en) Internet memory website
JP5582157B2 (ja) ソーシャル・ネットワーク・サービスシステム、画像表示方法、並びにプログラム
US20100257030A1 (en) Method and system for conducting a contest
US20170262477A1 (en) Computerized Content Management System
JP5954364B2 (ja) 画像表示装置、画像表示方法、プログラム
Fageth et al. Image selection: no longer a dilemma?

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20140625

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140708

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20150407

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150807

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20150814

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20151020

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20151117

R150 Certificate of patent or registration of utility model

Ref document number: 5843831

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees