JP2022109138A - 情報処理装置、情報処理方法、及びプログラム - Google Patents

Abstract

【課題】時間連続的に表示する画像データの表示順と表示時間とを効率的な方法で記述するＨＥＩＦ方式のファイルを作成する。【解決手段】ＩＳＯ／ＩＥＣ２３００８Ｐａｒｔ１２で定義されるＨＥＩＦフォーマットに従った、複数の画像を含む画像ファイルを作成する。複数の画像の表示順、及び、複数の画像それぞれの表示される時間の長さを設定する。設定に従い、複数の画像の表示順を示す情報、複数の画像それぞれの表示される時間の長さの情報、及び、複数の画像から、ＨＥＩＦフォーマットに従った画像ファイルを作成する。備えることを特徴とする【選択図】図３

Description

本発明は、情報処理装置、情報処理方法、及びプログラムに関する。

近年、カメラやスマートフォンなどの画像生成装置は様々な機能を有しており、撮像画像に関する多くの情報を生成可能になっている。ＨＥＩＦ（Ｈｉｇｈ Ｅｆｆｉｃｉｅｎｃｙ Ｉｍａｇｅ Ｆｉｌｅ Ｆｏｒｍａｔ）のファイルは、撮像時の被写体やシーンを識別する情報又は撮像設定情報などの、各種の画像データに関する情報をメタデータとして、画像データと一緒にファイルに格納することができる。特許文献１には、ＨＥＩＦに準拠した画像ファイルに派生画像を格納することが記載されている。

米国特許出願公開第２０１６／３７１２６５号公報

一方で、複数の画像を順番に切り替えながら表示するスライドショー機能を有するアプリケーションにおいて、ＨＥＩＦ方式のファイルでは、ファイル内に格納される複数の静止画それぞれについて表示順及び表示時間を適切に記述することが困難であった。

本発明は、時間連続的に表示する画像データの表示順と表示時間とを効率的な方法で記述するＨＥＩＦ方式のファイルを作成することを目的とする。

本発明の目的を達成するために、例えば、一実施形態に係る情報処理装置は以下の構成を備える。すなわち、ＩＳＯ／ＩＥＣ２３００８Ｐａｒｔ１２で定義されるＨＥＩＦフォーマットに従った、複数の画像を含む画像ファイルを作成する情報処理装置であって、前記複数の画像の表示順、及び、前記複数の画像それぞれの表示される時間の長さを設定する設定手段と、前記設定手段による設定に従い、前記複数の画像の表示順を示す情報、前記複数の画像それぞれの表示される時間の長さの情報、及び、前記複数の画像から、前記ＨＥＩＦフォーマットに従った画像ファイルを作成する作成手段と、備えることを特徴とする。

時間連続的に表示する画像データの表示順と表示時間とを効率的な方法で記述するＨＥＩＦ方式のファイルを作成する。

実施形態１に係る情報処理装置のハードウェア及び機能構成の一例を示す図。 実施形態１に係る情報処理方法の処理の一例を示すフローチャート。 実施形態１に係るスライドショー設定処理の一例を示すフローチャート。 実施形態１に係るＩｍａｇｅｓｌｉｄｅＳｈｏｗ構造の一例を示す図。 実施形態１に係る画像ファイルのファイルフォーマットの一例を示す図。 実施形態２に係る情報処理方法の処理の一例を示すフローチャート。 実施形態２に係るＳｌｉｄｅｓｈｏｗＧｒｏｕｐＢｏｘ構造の一例を示す図。 実施形態２に係る画像データの表示時間を定義する構造の一例を示す図。 実施形態２に係る画像ファイルのファイルフォーマットの一例を示す図。 実施形態３に係るＰｒｉｍａｒｙＩｔｅｍＢｏｘ構造の一例を示す図。 実施形態３に係るＰｒｉｍａｒｙＩｔｅｍＢｏｘ構造の一例を示す図。 実施形態１に係る処理で作成される画像ファイルの記述の一例を示す図。 実施形態１に係る情報処理装置が表示するＧＵＩの一例を示す図。

以下、添付図面を参照して実施形態を詳しく説明する。なお、以下の実施形態は特許請求の範囲に係る発明を限定するものではない。実施形態には複数の特徴が記載されているが、これらの複数の特徴の全てが発明に必須のものとは限らず、また、複数の特徴は任意に組み合わせられてもよい。さらに、添付図面においては、同一若しくは同様の構成に同一の参照番号を付し、重複した説明は省略する。

［実施形態１］
ＭＰＥＧ（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅｓ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）では、単一の静止画像、複数の静止画像、又は画像シーケンス（静止画像のバースト等）を１つのファイルに格納することのできる規格を開発している。以下、本実施形態において処理が行われる静止画像及びその符号化されたデータを「画像データ」と表現する。そのような規格であるＨＥＩＦは、画像と画像シーケンスとの交換、編集、及び表示を可能とする。ＨＥＩＦフォーマットは、ＩＳＯベースメディアファイルフォーマット（ＩＳＯＢＭＦＦ：ＩＳＯ Ｂａｓｅ Ｍｅｄｉａ Ｆｉｌｅ Ｆｏｒｍａｔ）で定められるツールを元に拡張された格納フォーマットである。また、ＨＥＩＦは、ＩＳＯ／ＩＥＣ２３００８Ｐａｒｔ１２において「Ｉｍａｇｅ Ｆｉｌｅ Ｆｏｒｍａｔ」という名称で標準化が進行している。ＨＥＩＦはメタデータを含む規範的な構造を定めており、メタデータと画像データとを関連付ける方法や、特定の形式のメタデータの構成について定めることができる。また、本実施形態においては画像データがＨＥＶＣ（Ｈｉｇｈ Ｅｆｆｉｃｉｅｎｃｙ Ｖｉｄｅｏ Ｃｏｄｅｃ）で符号化され、後述する図５におけるｍｄａｔ５１１に格納され、ｍｅｔａ５０２に格納された各メタデータと関連付けられる。なお、本実施形態に係るＨＥＩＦファイルに格納される画像データはＨＥＶＣで符号化されているものとして説明を行う。以下、「画像ファイル」との記載はＨＥＩＦファイルを指すものとする。ＨＥＩＦファイルの拡張子は、例えばｈｅｉｆ、ｈｅｉｃ、又はａｖｃｉである。

［ハードウェア構成］
図１は、本実施形態に係る情報処理装置のハードウェア構成の一例を示すブロック図である。情報処理装置１００は、システムバス１０１、ＣＰＵ１０２、ＲＡＭ１０３、ＲＯＭ１０４、処理部１０５、処理部１０６、処理部１０７、表示部１０８、ユーザインタフェース（ＵＩ）部１０９、及び通信制御部１１０を備える。システムバス１０１はこれらの各機能部を接続し、データの伝達を行う。ＲＯＭ１０４はシステムプログラムとアプリケーションプログラムとを格納し、それらはＲＡＭ１０３によって読み出され、ＣＰＵ１０２によって実行される。また、ＲＡＭ１０３は、後述する処理における画像ファイルの作成処理のデータバッファ、又は画像ファイルに格納するうデータの出力先としても機能する。

ＣＰＵ１０２は情報処理装置１００の制御部であり、ＲＯＭ１０４に格納されるプログラムを実行する。ＣＰＵ１０２は、ＯＳ（オペレーティングシステム）、ドライバ、又はアプリケーションなどを実行することができる。ＣＰＵ１０２は、例えばＵＩ部１０９を介したユーザ入力に応じて、処理部１０５～１０７における処理を実行してもよく、表示部１０８への表示制御を行ってもよく、通信制御部１１０への通信指示を行ってもよい。

処理部１０５は、画像データの符号化処理及び復号処理を行う。処理部１０５は例えば、Ｈ．２６５（ＨＥＶＣ）、Ｈ．２６４（ＡＶＣ）、若しくはＪＰＥＧなどの画像データの符号化及び復号処理を行うビデオコーデックである。本実施形態において処理対象となる画像データは予め格納されているものとして説明を行うが、情報処理装置１００が撮像部（不図示）を備えて画像データを取得してもよく、外部の装置から画像データを取得してもよい。また、外部の装置から符号化済みの画像データを取得し、処理部１０５による符号化処理が省略されてもよい。画像データの符号化処理及び復号処理はどのように行われてもよいが、本実施形態においては公知の処理が用いられるため詳細な説明は省略する。本実施形態において処理部１０５が行う処理については図２及び図３を参照して後述する。

処理部１０６は画像データに格納されるメタデータの解析処理を行う。また、処理部１０６は、画像データに関する情報を生成してメタデータとして画像ファイル内に格納し、所定のファイルフォーマット（本実施形態においてはＨＥＩＦ）に準拠した、複数の画像データを含む画像ファイルを作成する。本実施形態においては、処理部１０６は、処理部１０５から符号化データに関するパラメータ情報の取得を行い、４文字の識別コードを付したメタデータとして画像ファイル内に格納する処理を実行する。処理部１０６が行う処理については図５を参照して後述する。

情報処理装置１００が作成する画像ファイルは、複数の画像データを格納し、スライドショーの機能を有するアプリケーションにおいて参照された場合に、格納する画像データを順番に表示する。そのために、本実施形態に係る処理部１０６は、複数の画像データと、その画像データそれぞれに対する表示順及び表示時間を示す情報とを画像ファイル内に格納する。そのために、画像ファイル内のオブジェクト構成は図５に示されるように作成される。なお、スライドショーとは、複数の画像を時間連続的に表示していく機能のことを指すものとする。

処理部１０７は、処理部１０５及び１０６による処理の対象となる画像データを選択する。処理部１０７は、例えば複数の画像データ群の内から、後述する図２に示される処理の対象となる画像データを選択してもよい。また例えば処理部１０７は、図２に示される処理の対象として選択された画像データの内から、図３に示される処理の対象となる画像データをさらに選択してもよい。本実施形態においては、処理部１０７は、ＲＡＭ１０３及びＲＯＭ１０４に格納された画像データの内から図２に示される処理の対象となる画像データを選択するものとする。

表示部１０８は、例えば液晶ディスプレイなどの、情報処理装置１００のアプリケーションを表示する画面である。表示部１０８は、例えば画面タッチセンサを備え、ＧＵＩを介したユーザによるアプリケーション操作を可能にしてもよい。ＵＩ部１０９は、例えばボタン又はスイッチなどの物理的な操作用インタフェースであり、ユーザ操作を取得して情報処理装置１００を動作させる。

通信制御部１１０は、ネットワークに接続して伝送フレームの送受信を行うネットワークインタフェースである。通信制御部１１０は、例えば有線ＬＡＮのイーサネット（登録商標）のＰＨＹ及びＭＡＣ（伝送メディア制御処理を行うデバイス）であってもよい。また、情報処理装置１００が無線ＬＡＮに接続可能である場合に通信制御部１１０は、ＩＥＥＥ８０２、若しくは１１ａ／ｂ／ｇ／ｎ／ａｃなどの無線ＬＡＮ制御を実行するコントローラ、ＲＦ回路、又はアンテナを含むことができる。

以下、本実施形態に係る情報処理装置１００が作成する画像ファイルと、処理部１０５及び１０６が行う処理とについて、図５を参照して説明を行う。図５は、本実施形態に係る画像ファイル作成処理によって作成されるＨＥＩＦ形式の画像ファイル内部のオブジェクト構造を示している。図５に示される画像ファイルは、ユーザ操作に応じて情報処理装置１００の各処理部が動作することによって作成される。ＨＥＩＦファイル５００（以下、単にファイル５００と記載する）は識別子によって識別される複数のボックスによって構成されており、ボックスとしてｆｔｙｐ５０１、ｍｅｔａ５０２、ｍｄａｔ５１１を含んでいる。以下、画像ファイルに含まれる各ボックスは、そのボックスの識別子となる４文字によって（上述のｆｔｙｐ５０１のように）表されるものとする。また、例えば画像データを識別するためのアイテムＩＤなどの同一のメタデータが複数のボックス内に含まれていてもよい。

ｆｔｙｐ（ＦｉｌｅＴｙｐｅＢｏｘ）５０１はファイル５００の種類を識別するための、ｂｒａｎｄと呼ばれる４文字の識別子を有する。ｆｔｙｐ５０１は、ファイル５００を表すための識別子として、例えばｍｉｆ１、ｍｓｆ１、ｈｅｉｃ、ｈｅｉｘ、ｈｅｖｃ、又はｈｅｖｘなどのｂｒａｎｄを有していてもよい。

ｍｅｔａ（ＭｅｔａＤａｔａＢｏｘ）５０２はメタデータを格納するボックスであり、メディアデータの符号化に関する情報と、その画像ファイルへの格納方法に関する情報と、などの情報を格納する。ｍｅｔａ５０２は、内部にｈｄｌｒ５０３、ｐｉｔｍ５０４、ｉｌｏｃ５０５、ｉｉｎｆ５０６、ｉｒｅｆ５０７、及びｉｐｒｐ５０８の各ボックスを含んでいる。処理部１０６は、これらのボックスいずれかに格納されるメタデータを設定し、対応するボックス内に格納する。

ｈｄｌｒ（ＨａｎｄｌｅｒＲｅｆｅｒｅｎｃｅＢｏｘ）５０３は、ｍｅｔａ５０２内に含まれるコンテンツの構造及びフォーマットを識別するためのハンドラタイプの情報を格納する。本実施形態においては、ｈｄｌｒ５０３のハンドラタイプとして‘ｐｉｃｔ’という４文字の識別コードが指定される。

ｐｉｔｍ（ＰｒｉｍａｒｙＩｔｅｍＢｏｘ）５０４は主要画像アイテム情報のメタデータを格納する。主要画像アイテム情報とは、ファイル５００に含まれる画像データのうちの代表となる画像データに関する情報であり、例えばその代表となる画像データを指定するアイテムＩＤ（識別情報）である。ここで代表となる画像データは、表示部１０８上でファイル５００のサムネイル画像として表示されるなど、所望の表現のために使用することができる。

ｉｌｏｃ（ＩｔｅｍＬｏｃａｔｉｏｎＢｏｘ）５０５は、ファイル５００内の画像及びその符号化データなどの各アイテムのＩＤ（すなわち、各画像の識別情報）及び格納場所（ロケーション）を示す情報を格納する。情報処理装置１００が行う各処理においては、ファイル５００内で定義されたアイテムのデータがどこに存在するかを示す情報は、ｉｌｏｃ５０５を参照することにより取得することができる。ｉｉｎｆ（ＩｔｅｍＩｎｆｏｒｍａｔｉｏｎＢｏｘ）５０６はファイル５００内の画像データの画像アイテム情報を格納する。画像アイテム情報とは、ファイル５００内の各アイテムのＩＤと、そのアイテムの種別（ここでは、ＨＥＶＣで符号化された画像であること）を示すアイテムタイプと、アイテムの名称と、を示す情報である。

ｉｒｅｆ（ＩｔｅｍＲｅｆｅｒｅｎｃｅＢｏｘ）５０７は、ファイル５００内の画像データの画像参照情報を格納する。画像参照情報とは、ファイル５００内の参照関係にあるアイテムの、どのような参照が行われるのかなどアイテム間の関連付けに関する情報である。本実施形態においては、画像参照情報は、スライドショーで表示する画像データを指定するための情報である。本実施形態においては、ｉｒｅｆ５０７は、画像参照情報として、派生画像（Ｄｅｒｉｖｅｄ Ｉｍａｇｅ）として格納されるスライドショーのアイテムＩＤから参照される画像データのアイテムＩＤをリスト形式で格納する。ここで格納されるアイテムＩＤのリストは、後述するステップＳ３０２で決定する表示順に応じたリスト形式でユーザに記載される。また、処理部１０６は、例えば画像ファイル内に格納している画像データの内に、撮像画像とそのサムネイル画像のような関連性を有する画像データが含まれている場合に、それらの関連付けを示す情報をｉｒｅｆ５０７に格納してもよい。処理部１０６は、例えば後述するステップＳ２１２においてスライドショーの設定が格納されないと判定された場合に、そのような関連性を有する画像の関連付けを示す情報をｉｒｅｆ５０７に格納することができる。ｉｒｅｆ５０７では、画像参照情報に、そのデータが派生画像であることを示す‘ｄｉｍｇ’の識別コードが付与される。図１２には、本実施形態に係る情報処理装置１００が作成する画像ファイル内部の記述の一例が示されている。図１２の１２０１には、スライドショーにおいて表示される画像を表示される順序で羅列するリストを備えた‘ｄｉｍｇ’がｉｒｅｆ５０７に格納されている。

一般にＨＥＩＦ方式のファイルにおける派生画像とは、回転、グリッド、又はオーバーレイの情報に基づいて、編集の度に作成されファイル内に格納される編集履歴のデータである。一方で本実施形態においては、スライドショーにおいて表示される画像データが格納されるデータ（スライドショー）が、派生画像として画像ファイル内に格納される。以下、派生画像とはそのようなスライドショーを指すものとして説明を行う。

ｉｐｒｐ（ＩｔｅｍＰｒｏｐｅｒｔｙＢｏｘ）５０８は、ファイル５００内の画像データの画像属性情報を格納する。そのために、ｉｐｒｐ５０８は、ｉｐｃｏ５０９、ｉｐｍａ５１０、及びｉｄａｔ５１６の各ボックスを含んでいる。画像属性情報とは、画像の幅及び高さ、並びに色コンポーネントの個数及びビット長など、画像データの表示に関する情報である。ｉｐｃｏ（ＩｍａｇｅＰｒｏｐｅｒｔｙＣｏｎｔａｉｎｅｒＢｏｘ）５０９は、ＨＥＶＣのパラメータのセットを示す情報と、画像データの幅及び高さを示す情報と、を格納する。ｉｐｍａ（ＩｔｅｍＰｒｏｐｅｒｔｙＡｓｓｏｃｉａｔｉｏｎＢｏｘ）５１０は、ｉｐｃｏ５０９に格納されている情報とアイテムＩＤとの関連付けを示す情報を格納する。図１２においては、ｉｐｃｏ５０９で画像データの幅及び高さを示す‘ｈｖｃＣ’と‘ｉｓｐｅ’とが定義され、ｉｐｍａ５１０内にそれらのパラメータと画像データとの関連付けを示す情報が格納されている（１２０２）。ｉｄａｔ（ＩｔｅｍＤａｔａＢｏｘ）５１１はスライドショーの派生画像記述情報を格納するが、ｉｄａｔに格納される情報については図３及び図４を参照して後述する。

ｍｄａｔ（ＭｅｄｉａＤａｔａＢｏｘ）５１１は符号化した画像データを格納する。本実施形態においては、処理部１０５が、処理対象となる画像データをＨＥＶＣで符号化し、ｍｄａｔ５１１へと格納する。ここで処理対象となる画像データは、ＲＡＭ１０３及びＲＯＭ１０４に格納されたデータのうちからのユーザの選択を取得部１０７が取得することによって決定される（後述するステップＳ２０２）。

［画像ファイル作成処理］
本実施形態に係る情報処理装置が行う画像ファイル作成処理の流れについて、図２～図５を参照して説明を行う。

図２は、本実施形態に係る情報処理装置が行う画像ファイル作成処理の一例を示すフローチャートである。本実施形態においては、ＨＥＩＦファイルフォーマットに従って、１つ以上の静止画像を格納する画像ファイルが作成される。図２に示される処理は、画像ファイルを作成するためのユーザ操作に応じて開始される。また、図２に示される各処理は、処理部１０５、処理部１０６、及び処理部１０７によって実行されるものとして説明を行うが、各処理がＣＰＵ１０２によって行われる形式であってもよい。本実施形態においては、ユーザがＵＩ部１０９を介して表示部１０８上に表示されている画像データに関する操作を行うことにより、以下に説明する各処理が進行するものとして説明を行う。

ステップＳ２０１で処理が開始される。ステップＳ２０２で処理部１０７は、ＲＡＭ１０３又はＲＯＭ１０４に格納されている画像データの中から、画像ファイルに格納する画像データを選択する。本実施形態においては、ここで選択される画像データは、静止画像が１つ格納されたＨＥＩＦファイルであってもよく、静止画像のファイル（ＪＰＥＧなど）であってもよい。また、画像データとして選択されるこのデータは静止画像であればよく、例えばファイルとしては格納されていないデータであってもよい。本実施形態においては、画像データの一覧の中から、画像ファイルに格納する画像をユーザが選択する。

ステップＳ２０３で処理部１０７は、ステップＳ２０２で選択した画像データがＨＥＩＦファイルであるか否かを判定する。ＨＥＩＦファイルであれば処理はステップＳ２０７へと進み、そうでなければ処理はステップＳ２０４へと進む。以下、ステップＳ２０２で選択した画像データを単に「選択した画像データ」と呼ぶ。

ステップＳ２０４で処理部１０５は、選択した画像データが符号化されている場合には、その画像データを復号する。選択した画像データが静止画像のファイルである場合には、処理部１０５はそのファイル内の画像の符号化データを復号する。ステップＳ２０５で処理部１０５は、復号した画像データを解析してその画像データの属性情報を取得する。本実施形態においては、属性情報は、画像の幅及び高さ、並びに色コンポーネントの個数及びビット長など、画像の構造に関する情報であり特にこれらに限定はされない。ステップＳ２０６で処理部１０５は、ステップＳ２０４で復号した画像データをＨＥＶＣで符号化し、処理をステップＳ２０７へと進める。

ステップＳ２０７で処理部１０６は、ステップＳ２０２で選択した画像データのパラメータのセットを取得する。処理部１０６は、選択した画像データがＨＥＩＦファイルでなかった場合には、ステップＳ２０６で符号化したＨＥＶＣファイルの復号処理に必要なパラメータを取得する。ここで取得されるパラメータは、例えばビデオパラメータセット（ＶＰＳ）、シーケンスパラメータセット（ＳＰＳ）、ピクチャパラメータセット（ＰＰＳ）である。また処理部１０６は、選択した画像データがＨＥＩＦファイルであった場合には、ＨＥＩＦファイル内の画像データから同様にパラメータを取得する。

ステップＳ２０８で処理部１０５は、ＨＥＶＣの符号化データを、後述する図５のＭｅｄｉａＤａｔａＢｏｘ（ｍｄａｔ）５１１に格納する符号化データの１つとしてＲＡＭ１０３上の出力バッファに格納する。ステップＳ２０３において、ステップＳ２０２で選択した画像データがＨＥＩＦファイルであると判定された場合には、処理部１０５は選択したＨＥＩＦファイル内のＨＥＶＣ符号化データを同様に格納する。

ステップＳ２０９で処理部１０６は、ステップＳ２０２で選択した画像データに関するメタデータを作成しバッファに格納する。ステップＳ２０９では、処理部１０６が作成するメタデータは、画像データの画像アイテム情報及び画像属性情報であり、それぞれｉｉｎｆ５０６及びｉｐｒｐ５０８（ｉｐｃｏ５０９及びｉｐｍａ５１０）にステップＳ２１４で格納される。本実施形態では、ｉｐｃｏ５０９は、ステップＳ２０７で取得したＨＥＶＣのパラメータのセットを示す情報と、選択した画像の幅及び高さを示す情報とを格納する。また本実施形態では、ｉｐｍａ５１０は、上述のようにｉｐｃｏ５０９に格納されている情報とアイテムＩＤとの関連付けを示す情報を格納する。この時点では、これらの画像属性情報のデータは、ｍｅｔａ５０２に格納されるメタデータの一部として、ＲＡＭ１０３上の出力バッファに格納しておく。

ステップＳ２１０でＣＰＵ１０２は、ステップＳ２０２で選択した画像データの他に格納する画像データがないかを確認する。他に格納する画像データがある場合には処理がステップＳ２０２に戻り、そうでない場合には処理はステップＳ２１１へと進む。本実施形態においては、処理部１０６は、ユーザが選択した画像が全て処理されているかどうかを確認する。

ステップＳ２１１でＣＰＵ１０２は、選択した画像データを格納する画像ファイルがスライドショーの設定を格納するか否かを判定する。格納する場合には処理がステップＳ２１２へと進み、そうでない場合には処理はステップＳ２１３へと進む。ステップＳ２１２ではスライドショーのメタデータが作成されるが、ここで行われる処理は図３を参照して後述する。ステップＳ２１２に次いで処理はステップＳ２１３へと進む。本実施形態においては、作成する画像ファイルにスライドショーの設定を格納するか否かのＧＵＩ（不図示）が表示部１０８上に表示され、そのＧＵＩ上でのユーザの入力に基づいてステップＳ２１１における判定が行われる。

ステップＳ２１３で処理部１０６は、ステップＳ２０２で選択した画像の内から、この画像ファイルの代表となる画像を決定し、主要画像アイテム情報のメタデータを作成する。ここで作成されるメタデータは単純に代表とする画像データのアイテムＩＤを指定するものであり、ｐｉｔｍ５０４に格納される。この時点では、作成したメタデータはＲＡＭ１０３上の出力バッファに格納しておく。本実施形態においては、表示部１０８上にステップＳ２０２で選択した画像の一覧が表示され、ユーザがその内から代表となる画像を選択するが、例えばステップＳ２０２における選択の際に代表となる画像も併せて選択されていてもよい。

ステップＳ２１４で処理部１０６は、ｆｔｙｐ５０１及びｈｄｌｒ５０３に格納するメタデータを作成する。本実施形態においては上述のように、ｈｄｌｒ５０３に指定されるｍｅｔａ５０２のハンドラタイプは‘ｐｉｃｔ’である。次いで処理部１０６は、ｆｔｙｐ５０１及びｈｄｌｒ５０３に格納するメタデータと、ＲＡＭ１０３に格納しておいたメタデータと、ｍｄａｔに格納しておいた符号化データとを結合し、図５に示すような構造の画像ファイルを生成する。ステップＳ２１５で処理が終了する。なお、ステップＳ２１４で生成される画像ファイルは、ＣＰＵ１０２によってＲＡＭ１０３からＲＯＭ１０４に書き込まれて格納される。

なお、ステップＳ２１１において画像ファイルがスライドショーの設定を格納しないと判定された場合には、ステップＳ２１２（後述するステップ３０５）におけるｉｒｅｆ５０７に格納されるメタデータの作成処理が行われない。このような場合処理部１０６は、格納する画像データの中の、例えば撮像画像とそのサムネイル画像とのような関連性のある画像データを関連付ける情報を作成し、ｉｒｅｆ５０７に格納することができる。このような処理によれば、スライドショーの設定を作成して画像ファイルに格納しない場合であっても、最終的に作成される画像ファイルのｉｒｅｆ５０７に画像参照情報のメタデータを格納することができる。

［スライドショーのメタデータ作成処理］
ステップＳ２１２で行われるスライドショーのメタデータの作成処理について、図３～図５を参照して説明を行う。本実施形態では、複数の画像データを表示するスライドショーが派生画像として画像ファイルに格納される。図３は、本実施形態に係る情報処理装置１００が行うスライドショーのメタデータの作成処理の一例を示すフローチャートである。

ステップＳ３０１で処理が開始される。ステップＳ３０２で処理部１０７は、画像ファイルに格納する画像データの内から、スライドショーで表示する１つ以上の画像データを選択し、それぞれの表示順を決定する。ステップＳ３０３で処理部１０７は、ステップＳ３０２で選択した画像データの表示時間を決定する。処理部１０７は、選択した画像データそれぞれに対して表示時間を決定してもよく、全ての画像データに対して一律に表示時間を決定してもよい。本実施形態においては、画像データの表示順及び表示時間は、表示部１０８上に表示される画像データの一覧に対してユーザが選択と入力とをすることによって決定される。なお、これらの表示順及び表示時間は、ユーザが情報処理装置１００上で動作するアプリケーションを使用して予め設定しておく構成であってもよい。

ステップＳ３０４で処理部１０６は、選択された画像について、派生画像アイテム情報を作成する。派生画像アイテム情報はｉｉｎｆ５０６に格納される。派生画像アイテム情報とは、スライドショーのアイテムＩＤとして作成される画像アイテム情報であり、ステップＳ２０９の画像アイテム情報と同様に作成される。ステップＳ３０４で作成される派生画像アイテム情報が指定するアイテムＩＤは、ステップＳ２０９で作成された画像アイテム情報が指定するアイテムＩＤとは重複しないように作成される。また、派生画像アイテム情報においては、アイテムタイプとして、スライドショーであることを示す‘ｓｌｉｄ’が指定される（図１２における１２０３）。ステップＳ３０５で処理部１０６は、上述したような画像参照情報を作成する。画像参照情報はｉｒｅｆ５０７に格納される。

ステップＳ３０６で処理部１０６は、ステップＳ３０２及びステップＳ３０３で決定した情報に基づいて、選択された画像について派生画像記述情報を設定する。派生画像記述情報はｉｄａｔ５１６に格納される。派生画像記述情報は、スライドショーにおける画像データの表示順と表示する時間の長さとを設定する情報である。図４は、本実施形態において設定される派生画像記述情報を示すフォーマットの一例である。図４に示されるように、画像データの表示時間は、全画像データにおいて一律に設定されるｄｕｒａｔｉｏｎパラメータ４０１として記載されてもよく、画像データごとに設定されるｄｕｒａｔｉｏｎパラメータ４０２として記載されてもよい。表示時間が画像データごとに設定される場合には、ｄｕｒａｔｉｏｎパラメータのリストに、スライドショーにおいて画像データが表示される順番に時間を指定する。表示時間として設定される時間の単位は時間を指定できるのであれば特に限定されず、例えば秒又はミリ秒であってもよい。

ステップＳ３０７で処理部１０６は、派生画像属性情報を設定する。派生画像属性情報はｉｐｒｐ５０８に格納される。派生画像属性情報は、スライドショーの表示に関わる情報である。本実施形態においては、派生画像属性情報は、例えばスライドショーを表示するスクリーンの幅及び高さを示す情報であるが特にその内容は限定はされず、また必ずしも設定されなくともよい。派生画像属性情報が設定されない場合には、処理はそのままステップＳ３０８へと進んで終了する。派生画像属性情報が設定される場合には、ステップＳ２０９における画像属性情報の生成及び格納処理と同様に、派生画像属性情報及びその情報とアイテムＩＤとの関連付けを示す情報がｉｐｃｏ５０９とｉｐｍａ５１０とに格納される。次いでステップＳ３０８で処理は終了し、ステップＳ２１３へと移行する。派生画像属性情報は自動で読み込まれてもよく、ユーザの入力に基づいて取得されてもよい。

なお、ステップＳ３０４～ステップＳ３０７で作成されたメタデータは、ｍｅｔａ５０２の対応するボックスに格納されるメタデータの一部としてＲＡＭ１０３上の出力バッファに格納され、ステップＳ２１４においてｍｅｔａ５０２内に格納される。また、ステップＳ２１３において代表とする画像データのアイテムＩＤを指定する際に、処理部１０６は、ステップＳ３０４で作成されたアイテムＩＤを用いて指定を行ってもよい。

図１３は、本実施形態に係る画像ファイルの作成処理において、表示部１０８上に表示されるＧＵＩの一例である。ＧＵＩ１３０１には、ステップＳ２０２～Ｓ２１０でメタデータを出力バッファに格納された画像データの一覧が表示され、図３に示される各処理におけるユーザ操作を受け付ける入力フォームが表示されている。図１３の例では、画像データの一覧として画像に対応するサムネイル１３０２～１３０７が表示されており、これらのうちから画像ファイルに格納される画像データがユーザによって選択され、さらに表示順と表示時間が決定される。図１３の例では、各画像の下部に表示される、画像に対応した枠１３０８などのチェックボックスがチェックされることによって画像ファイルに格納される画像データが選択され、ユーザによって画像１３０２、１３０４、及び１３０５が選択されている。さらにユーザは、選択した画像に対して、各画像の上部に表示される、画像に対応した枠１３０９及び１３１０の入力フレームに、画像それぞれの表示順と表示時間とを入力する。図１３の例では、枠１３０９には表示順が、枠１３１０には表示時間が入力される。すなわち、画像１３０２、１３０４、１３０５の順番に、それぞれ２秒、１秒、２秒間表示するようユーザによって入力がなされている。情報処理装置１００は、ステップＳ３０２及びＳ３０３においてこれらの入力を受け付け、ユーザが決定ボタン１３１１を操作することに応じて画像データそれぞれの表示順及び表示時間が決定される。次いで処理部１０６は、ステップＳ３０４～Ｓ３０５で選択された画像について設定を行い、ステップＳ３０７で枠１３０９及び枠１３１０に基づいて派生画像記述情報を設定する。また、ステップＳ２０２における画像データの選択処理も同様のＧＵＩ上で行われるものとするが、異なるＧＵＩが表示されてユーザの選択を受け付けてもよい。

ユーザ操作を受け付けるＧＵＩは、ユーザが各画像を選択して表示順と表示時間とを決定できるのであれば、特に図１３に示されるようには限定はされない。例えば、枠１３０８ではなく画像のサムネイル自体を選択し、選択した画像の枠を強調表示する形式であってもよい。また例えば、枠１３０９及び枠１３１０のような枠は常時表示せず、選択した画像についてのみ表示する、又は選択した画像に関する表示順及び表示時間を入力するための別ウィンドウを表示する形式であってもよい。表示時間が一律に設定される場合には、共通の時間を設定するために別の入力枠が備えられていてもよい。

なお、本実施形態に係るファイル５００は、ボックスとしてｆｔｙｐ５０１、ｍｅｔａ５０２、及びｍｄａｔ５１１を含み、静止画像を扱うものとして説明を行った。しかしながら扱う画像データはこれには限定されず、例えばファイル５００がｍｏｏｖボックス（ＭｏｖｉｅＢｏｘ）（不図示）を更に含み、ｍｄａｔ５１１に動画のデータを追加で格納してもよい。ｍｏｏｖは動画のデータに関するメタデータを格納するボックスであり、一般的なファイルの作成処理によって作成される。

このような構成によれば、複数の画像データを表示するスライドショーの情報をｍｅｔａの中に格納した画像ファイルを作成することができる。したがって、ユーザが任意の複数の画像を選択してそれらの表示順及び表示時間を決定するスライドショーの設定を有するＨＥＩＦフォーマットに従った画像ファイルの作成を効率的に行うことができる。

［実施形態２］
実施形態２に係る情報処理装置は、実施形態１と同様にスライドショーを格納する画像ファイルを作成するが、スライドショーにおいて表示される画像データをグループ化する情報を画像ファイル内に格納する。そのために、本実施形態に係る情報処理装置は、図１の情報処理装置１００と同様の構成を有し、ステップＳ２１２における処理の内容を除いて図２に示されるフローチャートの処理と同様の処理を行うため、重複する説明は省略する。

図９は、本実施形態に係る画像ファイル作成処理によって作成されるＨＥＩＦフォーマットの画像ファイル内部のオブジェクト構造を示している。図９においては、ｉｄａｔ５１６が含まれず、ボックスとして新たにｇｒｐｌ（ＧｒｏｕｐＬｉｓｔＢｏｘ）９０１を含んでいることを除き図５におけるファイル５００と同様の構成を有する。

ｇｒｐｌ９０１はｍｅｔａ５０２に含まれるボックスであり、スライドショーで表示する画像データをグループ化する情報９０２を格納する。情報９０２は処理部１０６によって作成され、ｇｒｐｌ９０１に格納されるメタデータである。本実施形態においては、ｇｒｐｌ９０１は、情報９０２として、図７に示されるフォーマットであるＳｌｉｄｅｓｈｏｗＧｒｏｕｐＢｏｘの形式のデータを作成及び格納する。ＳｌｉｄｅｓｈｏｗＧｒｏｕｐＢｏｘのグループタイプは‘ｓｌｉｄ’であり、スライドショーにおいて表示されるアイテムのグループであることを示す。図７において、ｇｒｏｕｐ＿ｉｄ７０１はグループを識別するグループＩＤを示し、ｎｕｍ＿ｅｎｔｒｉｅｓ＿ｉｎ＿ｇｒｏｕｐ７０２はグループに含むアイテムの個数を指定する。また、グループ内の画像データのスライドショーにおける表示時間は一律に設定されてもよく、画像データごとに設定されてもよい。表示時間が画像データごとに設定される場合には、図７の７０３に示される箇所に、画像データが表示される順番に表示時間が指定される。表示時間が一律に設定される場合には、表示時間が図７のｄｕｒａｔｉｏｎパラメータ７０４として記載される。

図６は、本実施形態に係るステップＳ２１２におけるスライドショーのメタデータの作成処理の一例を示すフローチャートである。ステップＳ６０１で処理が開始される。ステップＳ６０２及びステップＳ６０３においては、処理部１０７は、実施形態１のステップＳ３０２及びステップＳ３０３と同様に、スライドショーで表示する画像データを選択し、それぞれの表示順と表示時間とを決定する。

ステップＳ６０４で処理部１０６は、スライドショーで表示する画像データをグループ化する情報を作成し、そのメタデータをＲＡＭ１０３上の出力バッファに格納する。ステップＳ６０５で処理部１０６は、スライドショーで表示する画像データそれぞれの表示時間が一定であるか否かを判定する。一定である場合には処理はステップＳ６０６へと進み、一定でない場合には処理がステップＳ６０７へと進む。ステップＳ６０６で処理部１０６は、ステップＳ６０４で作成したＳｌｉｄｅｓｈｏｗＧｒｏｕｐＢｏｘのデータのｄｕｒａｔｉｏｎパラメータ７０４を設定し、処理がステップＳ６０８へと進んで終了する。

ステップＳ６０７で処理部１０６は、グループ画像属性情報を設定する。グループ画像属性情報はｉｐｒｐ５０８に格納される。グループ画像属性情報は、グループに含まれる画像のスライドショーによる表示に関わる情報である。例えば、処理部１０６は、画像データそれぞれの表示時間を示すデータを作成し、ｉｐｃｏ５０９に格納する。図８は、ここで作成される画像データそれぞれの表示時間を示すデータの一例である。図８に示すＩｍａｇｅＤｕｒａｔｉｏｎＰｒｏｐｅｒｔｙは、表示時間を設定するためのパラメータを有するデータ形式である。図８に示されるＩｍａｇｅＤｕｒａｔｉｏｎＰｒｏｐｅｒｔｙでは、表示時間はｉｍａｇｅ＿ｄｕｒａｔｉｏｎパラメータ８０１として記載される。処理部１０６は、表示する画像データそれぞれに対応する（画像データと同数の）ＩｍａｇｅＤｕｒａｔｉｏｎＰｒｏｐｅｒｔｙを作成し、ｉｐｃｏ５０９へと格納する。また、処理部１０６は、画像データそれぞれの表示時間を指定するために、作成したＩｍａｇｅＤｕｒａｔｉｏｎＰｒｏｐｅｒｔｙに画像データのアイテムＩＤを関連付ける情報を作成し、ｉｐｍａ５１０に格納する。ステップＳ６０７で作成されたグループ画像属性情報のメタデータはＲＡＭ１０３上に出力しておき、ステップＳ２１４で各ボックスに格納される。ステップＳ６０７の処理の後、処理はステップＳ６０８へと進んで終了する。

このような処理によれば、実施形態１においてはスライドショーのアイテムＩＤとして作成された派生画像アイテム情報が省略される。また、このような処理によれば、実施形態１のステップＳ３０７における派生画像属性情報は作成されず、代わってグループ画像属性情報がｉｐｒｐ５０８の各ボックスに格納される。

［実施形態３］
実施形態３に係る情報処理装置は、実施形態１と同様にスライドショーを格納する画像ファイルを作成するが、スライドショーにおいて表示される画像データを指定する情報を、主要画像アイテム情報のメタデータとしてｐｉｔｍ５０４に格納する。そのために、本実施形態に係る情報処理装置は、図１の情報処理装置１００と同様の構成を有し、ステップＳ２１２及びステップＳ２１３における処理の内容を除いて図２に示されるフローチャートの処理と同様の処理を行うため、重複する説明は省略する。また、本実施形態においては、実施形態１の図５に示されるファイル５００と同様のオブジェクト構成を有する画像ファイルが作成される。さらに、上述のようにｐｉｔｍ５０４には、スライドショーで表示される複数の画像データを指定する情報が主要画像アイテム情報のメタデータとして格納される。

図１０は、一般的なｐｉｔｍのボックスフォーマットの一例である。本実施形態に係る処理部１０６は、図１０に示されるｐｉｔｍの仕様を拡張し、図１１に示されるデータフォーマットのメタデータを作成する。図１１に示されるような記載によれば、主要画像アイテム情報として、複数の画像データを指定することができるようになる。

本実施形態に係る処理部１０６は、ステップＳ３０３～Ｓ３０７の間の任意のタイミングで行われるステップＳ３０９（不図示）で、主要画像アイテム情報として複数の画像データを指定するための、画像データに付与されるアイテムＩＤのリストを作成する。本実施形態に係るステップＳ２１３で処理部１０６は、ステップＳ３０９で作成したリストに基づいて、図１１に示される１１０１の箇所にリストの順番通りにアイテムＩＤを格納し、格納したアイテムＩＤの個数をｉｔｅｍ＿ｃｏｕｎｔパラメータにセットする。また、本実施形態においては画像データそれぞれの表示時間は個別に設定されるが、例えば実施形態２のステップＳ６０７と同様に、画像データごとに対応するＩｍａｇｅＤｕｒａｔｉｏｎＰｒｏｐｅｒｔｙが作成及び格納されてもよい。

複数の画像データを表示するスライドショーの情報をｐｉｔｍの中に格納した画像ファイルを作成することができる。したがって、ユーザが任意の複数の画像を選択してそれらの表示順及び表示時間を決定するスライドショーの設定を有するＨＥＩＦフォーマットに従った画像ファイルの作成を効率的に行うことができる。

（その他の実施例）
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

発明は上記実施形態に制限されるものではなく、発明の精神及び範囲から離脱することなく、様々な変更及び変形が可能である。従って、発明の範囲を公にするために請求項を添付する。

１００：情報処理装置、１０１：システムバス、１０２：ＣＰＵ、１０３：ＲＡＭ、１０４：ＲＯＭ、１０５：処理部、１０６：処理部、１０７：処理部、１０８：表示部、１０９：ＵＩ部、１１０：通信制御部

Claims (11)

1. ＩＳＯ／ＩＥＣ２３００８Ｐａｒｔ１２で定義されるＨＥＩＦフォーマットに従った、複数の画像を含む画像ファイルを作成する情報処理装置であって、
   前記複数の画像の表示順、及び、前記複数の画像それぞれの表示される時間の長さを設定する設定手段と、
   前記設定手段による設定に従い、前記複数の画像の表示順を示す情報、前記複数の画像それぞれの表示される時間の長さの情報、及び、前記複数の画像から、前記ＨＥＩＦフォーマットに従った画像ファイルを作成する作成手段と、
   備えることを特徴とする、情報処理装置。
2. 前記複数の画像は、前記画像ファイル内に派生画像として含まれることを特徴とする、請求項１に記載の情報処理装置。
3. 前記設定手段は、前記複数の画像の表示順を示す情報と、前記複数の画像それぞれの表示される時間の長さの情報と、を前記派生画像に関する情報として設定することを特徴とする、請求項２に記載の情報処理装置。
4. 前記設定手段は、前記複数の画像をグループ化する情報をさらに設定し、
   前記複数の画像の表示順を、前記複数の画像のグループ化される順番として設定することを特徴とする、請求項１乃至３の何れか一項に記載の情報処理装置。
5. 前記設定手段は、前記複数の画像それぞれの表示される時間の長さの情報を、前記画像ファイルのＩｔｅｍＰｒｏｐｅｒｔｙＢｏｘの中に格納することを特徴とする、請求項４に記載の情報処理装置。
6. 前記設定手段は、前記複数の画像の表示順を示す情報を、前記画像ファイルのＰｒｉｍａｒｙＩｔｅｍＢｏｘの中に格納することを特徴とする、請求項１乃至５の何れか一項に記載の情報処理装置。
7. 前記複数の画像それぞれの表示される時間の長さが、前記複数の画像ごとに設定されることを特徴とする、請求項１乃至６の何れか一項に記載の情報処理装置。
8. 前記複数の画像それぞれの表示される時間の長さが、前記複数の画像に対して一律に設定されることを特徴とする、請求項１乃至７の何れか一項に記載の情報処理装置。
9. 前記複数の画像が、スライドショーの機能を有するアプリケーションによって時間連続的に表示されることを特徴とする、請求項１乃至８の何れか一項に記載の情報処理装置。
10. ＩＳＯ／ＩＥＣ２３００８Ｐａｒｔ１２で定義されるＨＥＩＦフォーマットに従った、複数の画像を含む画像ファイルを作成する情報処理方法であって、
    前記複数の画像の表示順、及び、前記複数の画像それぞれの表示される時間の長さを設定する工程と、
    前記複数の画像の表示順を示す情報、前記複数の画像それぞれの表示される時間の長さの情報、及び、前記複数の画像から、前記ＨＥＩＦフォーマットに従った画像ファイルを作成する工程と、
    備えることを特徴とする、情報処理方法。
11. コンピュータを、請求項１乃至９の何れか一項に記載の情報処理装置の各手段として機能させるためのプログラム。

Images