JP6191727B1 - 造形用画像管理システム、造形用画像管理装置、造形用画像管理プログラム - Google Patents

Abstract

【課題】造形物を作製するための素材となる画像情報を、手作業で抽出する場合に比べて、作業効率を向上する。【解決手段】例えば、デジタルカメラによって撮影された大量のイメージ画像から、特定の人物を識別情報（ＩＤ）に基づいて抽出し（第１抽出）、さらに、造形要件情報に基づいて、第１抽出で抽出されたイメージ画像の中から注目画像を抽出し（第２抽出）、第２抽出で抽出された注目画像によって三次元造形が可能である場合に、モデリング処理を実行し、三次元造形物を作製するための設計情報を三次元造形装置３６に送出するようにした。【選択図】図３

Description

本発明は、造形用画像管理システム、造形用画像管理装置、造形用画像管理プログラムに関する。

三次元造形物を作製する技術に関連するものとして、シート状のレンチキュラレンズを用いて、見る角度によって絵柄が変化したり、立体感が得られたりする印刷物を作製することが知られている（特許文献１参照）。特許文献１には、３Ｄプリンタの分野において、視方向の異なる複数の画像情報を３次元プリンタ部に入力することで、造形を行う。

より具体的には、レンチキュラレンズ板の特性を利用して必要な画像のみ抽出し、符号化してファクシミリ通信を行い、受信側で復号化して、レンチキュラレンズ板を用いた立体画像を印刷するようにしている
また、特許文献２には、立体物を表示する三つの二次元データ、例えば、正面図、左側面図及び平面図に基づいて、容易に立体図である三次元データを作成することができる三次元データ作成システムが記載されている。この特許文献２では、三つの二次元デーダを、表示装置に表示される三次元座標系上に対応する各平面に配置して表示し、少なくとも二つの二次元データにおいて共通する点の位置が指示されたときに、その指示された少なくとも二つの点の情報に基づいて、かかる共通する点に対応する三次元座標系上の位置を算出し、表示する。

特開平９−１３９８２９号公報 特開平１１−６６１１３号公報

造形物を作製するための素材となる画像は、異なる視点からの画像が必要である。例えば、デジタルカメラ等で撮影した画像の中から、手作業で造形物を作製するための素材となる画像を抽出することは煩雑である。

本発明は、造形物を作製するための素材となる画像情報を、手作業で抽出する場合に比べて、作業効率を向上することができる造形用画像管理システム、造形用画像管理装置、造形用画像管理プログラムを得ることが目的である。

請求項１に記載の発明は、取り込んだイメージ画像情報の中から、解析処理によって当該イメージ画像情報に含まれる被写体を判別し、当該イメージ画像情報と、前記判別した被写体を識別可能な識別情報と、を関連付けておき、三次元造形物の候補となる特定の被写体の前記識別情報に基づき、イメージ画像情報の中から、特定の被写体が含まれるイメージ画像情報を抽出すると共に、抽出したイメージ画像情報の中から、前記特定の被写体であり、かつ、異なる撮影視点で撮影された複数の注目画像情報を抽出して、三次元造形装置で造形する設計情報を作成し、前記三次元造形装置へ出力する造形用画像管理システムである。

請求項２に記載の発明は、前記請求項１に記載の発明において、予めポージングが決まっている原型モデルに対して前記注目画像情報を当てはめることで、前記設計情報を作成する。

請求項３に記載の発明は、前記請求項１又は請求項２に記載の発明において、前記注目画像情報に基づいて、三次元造形が可能か否かを判断して報知する。

請求項４に記載の発明は、イメージ画像情報を取り込む取込手段と、前記取込手段で取り込んだ各イメージ画像情報の中から、解析処理によって、当該イメージ画像情報に含まれる被写体を判別し、三次元造形物の候補となる被写体が撮影されたイメージ画像情報と、前記判別した被写体を識別可能な識別情報と、を関連付けて格納する格納手段と、前記識別情報、及び、三次元造形物に反映させるための前記被写体の造形要件報を受け付ける受付手段と、前記受付手段で受け付けた識別情報に対応する被写体が含まれるイメージ画像情報を、前記格納手段から抽出する第１抽出手段と、前記第１抽出手段で抽出したイメージ画像情報の中から、前記受付手段で受け付けた造形要件情報に適合する被写体であり、かつ、異なる撮影視点で撮影された複数の注目画像情報を抽出する第２抽出手段と、前記第２抽出手段で抽出した注目画像情報を三次元造形装置で造形する設計情報を作成する作成手段と、を有する造形用画像管理装置である。

請求項５に記載の発明は、前記請求項４に記載の発明において、三次元造形物の原型モデルとなるひな形情報が格納された原型モデル格納手段をさらに有し、前記受付手段が、前記ひな形情報受け付けることで、前記作成手段が、前記第２抽出手段で抽出した注目画像情報を、前記ひな形情報に当てはめて前記設計情報を作成する。

請求項６に記載の発明は、前記請求項４又は請求項５に記載の発明において、前記第２抽出手段で抽出した注目画像情報に基づいて、三次元造形が可能か否かを判断する判断手段と、判断手段の判断結果を報知する報知手段と、をさらに有する。

請求項７に記載の発明は、コンピュータを、請求項４〜請求項６の何れか１項記載の造形用画像管理装置として機能させる、造形用画像管理プログラムである。

請求項１に記載の発明によれば、造形物を作製するための素材となる画像情報を、手作業で抽出する場合に比べて、作業効率を向上することができる。

請求項２に記載の発明によれば、原型モデルがないのに比べ、三次元造形のための設計が容易となる。

請求項３に記載の発明によれば、抽出した注目画像情報により三次元造形が可能か否かを把握することができる。

請求項４に記載の発明によれば、形物を作製するための素材となる画像情報を、手作業で抽出する場合に比べて、作業効率を向上することができる。

請求項５に記載の発明によれば、原型モデルがないのに比べ、三次元造形のための設計が容易となる。

請求項６に記載の発明によれば、抽出した注目画像情報により三次元造形が可能か否かを把握することができる。

請求項７に記載の発明によれば、形物を作製するための素材となる画像情報を、手作業で抽出する場合に比べて、作業効率を向上することができる。

本実施の形態に係る造形用画像管理システムの全体を示す概略図である。 本実施の形態に係る造形用画像管理制御装置の構成を示すブロック図である。 本実施の形態に係る造形用画像管理制御装置の、第１の機能部、第２の機能部、及び第３の機能部のそれぞれの処理を詳細に示す機能ブロック図である。 第２抽出された注目画像に基づいて作成される相対表の一例を示す正面図である。 本実施の形態に係る造形用画像管理制御装置で実行される造形システムメインルーチンを示す制御フローチャートである。 本実施の形態に係る造形用画像管理制御装置の第１の機能部で実行されるイメージ画像格納処理ルーチンを示す制御フローチャートである。 本実施の形態に係る造形用画像管理制御装置の第２の機能部で実行される造形用画像抽出処理ルーチンを示す制御フローチャートである。 本実施の形態に係る造形用画像管理制御装置の第３の機能部で実行される設計情報出力処理ルーチンを示す制御フローチャートである。 本実施の形態の実施例に係り、造形用画像管理制御装置を用い、例えば、デジタルカメラ等で撮影されたイメージ画像から、三次元造形に必要な注目画像を抽出するまでの流れを示し、（Ａ）は受け付けたイメージ画像の正面図、（Ｂ）は第１抽出されたイメージ画像の正面図、（Ｃ）は第２抽出された注目画像の正面図である。 本実施の形態の変形例に係り、ひな形を用いた三次元造形のために、予めひな形を格納した原型モデルデータベースの格納状態を示す概略図である。

図１は、本実施の形態に係る造形用画像管理システムの全体を示す概略図である。

通信回線網１０には、ネットワークＩ／Ｆ１２を介して、造形用画像管理制御装置１４が接続されている。

通信回線網１０は、例えば、ＬＡＮ（ローカル・エリア・ネットワーク）又はインターネット回線であり、複数のＬＡＮが、ＷＡＮ（ワールド・エリア・ネットワーク）によって相互に接続されていてもよい。また、通信回線網１０を含む全ての通信回線網は、それぞれ有線接続である必要はない。すなわち、一部又は全部が無線によって情報を送受信する無線通信回線網であってもよい。

造形用画像管理画像制御装置１４は、本体１６と、受付手段としてのＵＩ（ユーザーインターフェイス）１８とを有している。ＵＩ１８は、表示部としてのモニタ２０と、入力操作部としてのキーボード２２及びマウス２４を備える。

また、本体１６には、画像情報の入力源として機能する、取込手段としてのメディアリーダー２６と、画像読取装置２８とが接続されている。

メディアリーダー２６には、例えばＳＤメモリカード等の記録メディア３０が挿入可能なスロット部が設けられ、挿入された記録メディアに記録されたイメージ画像データが読み取られ、本体１６へ送出される。

また、画像読取装置２８は、例えば、原稿３２を位置決めする原稿台と、原稿台に置かれた原稿３２の画像を走査して光を照射する走査駆動系と、走査駆動系の走査により反射又は透過する光を受光して電気信号に変換するＣＣＤ等の光電変換素子と、が設けられている。

ここで、原稿台にイメージ画像が形成された原稿３２が位置決めされ、走査駆動系が動作することで、光電変換素子によってイメージ画像が読み取られ、本体１６へ送出される。

なお、イメージ画像は、通信回線網１０から取込手段として機能するネットワークＩ／Ｆ１２を介して、受信する場合もある。

図２に示される如く、造形用画像管理制御装置１４の本体１６は、ＣＰＵ１６Ａ、ＲＡＭ１６Ｂ、ＲＯＭ１６Ｃ、入出部１６Ｄ（Ｉ／Ｏ１６Ｄ）、及びこれらを接続するデータバスやコントロールバス等のバス１６Ｅを備えている。

Ｉ／Ｏ１６Ｄには、前述したように、ネットワークＩ／Ｆ１２、ＵＩ１８（モニタ２０、キーボード２２及びマウス２４）、メディアリーダー２６、及び画像読取装置２８が接続されている。

また、Ｉ／Ｏ１６Ｄには、大規模記録媒体としてのハードディスク３４が接続されており、後述する素材データベース５４、一時格納部６６、注目画像格納部６８、及び設計情報格納部７８（それぞれ、図３参照）として機能する。

ＲＯＭ１６Ｃには、造形用画像管理制御のためのプログラムが記録されており、造形用画像管理制御装置１４が起動すると、ＲＯＭ１６Ｃから当該プログラムが読み出され、ＣＰＵ１６Ａによって実行される。なお、造形用画像管理制御プログラムは、ＲＯＭ１６Ｃの他、ハードディスク３４や他の記録媒体に記録しておいてもよい。

図１及び図２に示される如く、通信回線網１０には、三次元造形装置３６（以下、「３Ｄプリンタ３６」という場合がある。）が接続されている。なお、三次元造形装置３６は、造形用画像管理制御装置１４に、専用の信号線を介して、直接接続してもよい。

三次元造形装置３６は、造形物の造形方式が異なる複数種類の三次元造形装置が存在する。造形方式としては、液層光重合方式、結合剤噴射方式、材料押出方式、材料噴射方式、シート積層方式、粉末床溶融結合方式、及び指向性エネルギー堆積方式等がある。

図１では、三次元造形装置３６の外観の一例を示しているが、三次元造形装置３６は、造形方式、造形し得る造形物の大きさの範囲、及び適用する材料（フィラメント）の種類を含む要素によって、その外観及び大きさが様々である。

また、図１及び図２では、単一の三次元造形装置３６を図示しているが、複数種類の三次元造形装置３６を接続し、造形する対象によって、選択可能としてもよい。

三次元造形装置３６では、それぞれの造形方式の種類によって、造形するときの適応し得る材質（材料）が異なる。

以下に、造形方式の種類とそれぞれの造形方式の適応材質の関係の一例を示す（造形方式・・・適用材質）。
（１）液層光重合方式・・・ＵＶ硬化樹脂
（２）結合剤噴射方式・・・石膏、セラミックス、砂、カルシウム、プラスティック
（３）材料押出方式・・・ＡＢＳ（アクリニトリル・ブタジエン・スチレン樹脂）、ＰＬＡ（ポリ乳酸）、ナイロン１２、ＰＣ（ポリカーボネイト）、ＰＰＳＦ（ポリフェニルスルホン）
（４）材料噴射方式・・・ＵＵＶ硬化樹脂、脂、ワックス、ハンダ
（５）シート積層方式・・・紙、樹脂シート、アルミシート
（６）粉末床溶融結合方式・・・エンジニアリングプラスティック、ナイロン、金属
（７）指向性エネルギー堆積方式・・・金属
ところで、三次元造形物を作製する場合、例えば、三次元造形物を作製する業務を行っている事業者の指定する撮影スタジオに出向き、対象物の凹凸を感知して３Ｄデータとして取り込む専用の３Ｄスキャナによって撮影する場合は問題無いが、依頼者が、三次元造形物を作製するための素材となるイメージ画像を送る場合、依頼者自身が必要なイメージ画像を作成する必要がある。

しかし、例えば、デジタルカメラで撮影した画像データの中から、三次元造形物を作製するための必要最小限の画像を抽出するのは、困難を強いられる。特に、現状では、デジタルカメラ又は記録メディアに保存される画像データ数は、数１００枚〜数１０００枚におよぶ場合があり、手作業での抽出は煩雑な作業となる。

そこで、本実施の形態の造形用画像管理制御装置１４では、三次元造形装置３６によって三次元造形物を作成するための要素となるイメージ画像を取り込む機能（図３に示す、第１の機能部３８）、取り込んだイメージ画像の中から、三次元造形物として作製したい対象物（注目画像）を抽出し、抽出した注目画像に基づいて、三次元造形物を作製するための設計情報を作成するモデリング機能（図３に示す第２の機能部４０）、及び造形指示に基づいて、前記モデリング機能で設計した設計情報を特定の三次元造形装置３６へ出力する機能（図３に示す第３の機能部４２）を持たせた。

図３は、本実施の形態に係る造形用画像管理制御装置１４の、第１の機能部３８、第２の機能部４０、及び第３の機能部４２のそれぞれの処理を詳細に示す機能ブロック図である。なお、図３は、造形用画像管理制御装置１４のハード構成を限定するものではない。

（第１の機能部３８）
図３に示される如く、ネットワークＩ／Ｆ１２、メディアリーダー２６、及び画像読取装置２８は、それぞれ取込手段としての受付部４４に接続されている。

受付部４４では、ネットワークＩ／Ｆ１２を介して受信したイメージ画像データ、メディアリーダー２６のスロットに挿入された記録メディア３０（図１参照）から読み取ったイメージ画像データ、及び画像読取装置２８の原稿台に位置決めされた原稿３２（図１参照）から読み取ったイメージ画像データをそれぞれ受け付ける。

受付部４４は、解析処理部４６に接続されており、受け付けたイメージ画像データは、この解析処理部４６へ送出される。

解析処理部４６には、パターン認識部４８及び色スペクトル分析部５０が接続されており、受付部４４から受け付けたイメージ画像に対して、パターン認識処理及び色スペクトル分析処理が実行される。

すなわち、パターン認識処理の一例としては、予め記憶したパターンに一致する画像を抽出する。例えば、人、動物、植物、静物、食材、乗り物、建築物等のジャンルの何れに属するかを判定し、さらに、種類を細分化する。

また、色スペクトル分析処理の一例としては、パターン認識された画像の色の配分を解析することで、例えば、同様体格の人間が、着用している衣服の色によって、同一人物か否かを判別する。

解析処理部４６は、識別処理部５２に接続されている。解析処理部４６において、１枚のイメージ画像の中からパターン認識された注目画像を分類すると共に、複数枚のイメージ画像の間で、撮影視点、大きさに関係なく、同一注目画像同士として紐付けした状態で、識別処理部５２へ送出する。識別処理部５２では、紐付けされた同一の注目画素のそれぞれに識別情報（ＩＤ）を付与し、一括りとして格納手段である素材データベース５４に格納する。ＩＤ−注目画像を関連付けて素材データベース５４へ格納するまでが、造形用画像管理制御装置１４の第１の機能部３８となる。

（第２の機能部４０）
図３に示される如く、ＵＩ１８は、情報仕分部５６に接続されている。ＵＩ１８には、ユーザーが第１抽出情報と、第２抽出情報を入力する。

第１抽出情報とは、三次元造形を希望する被写体を特定するための識別情報（ＩＤ）を特定するＩＤ特定情報であり、例えば、人物であれば、予め識別情報（ＩＤ）と関連付けて登録した氏名が挙げられる。

第２抽出情報とは、三次元造形物を作製するときの要件を特定する造形要件情報であり、例えば、造形の精密度、大きさ（尺度）を含む外観的特徴が挙げられる。この造形要件に基づいて、イメージ画像から抽出する被写体の撮影視点が特定される。撮影視点は、所謂六面図（正面、背面、右面、左面、上面、下面）が標準となるが、この６箇所の撮影視点撮影された画像が必ずしも全て揃うことが必要ではなく、不足分を補う図面（拡大図、斜視図、俯瞰図等）があれば、撮影視点数は６箇所未満でもよい。

例えば、造形要件情報として、人であれば、顔が精密であれば、胴体は粗雑でもよいといった要件の場合は、顔部分の画像を抽出し、胴体は予め設定したひな形を用いるようにしてもよい。

さらに、イメージ画像全体面積に対する注目画像の占有面積（例えば、１０％以上）を予め定めてもよい。

情報仕分部５６は、識別情報特定部５８、及び、第２抽出手段としての第２抽出部６０に接続されている。ここで、情報仕分部５６で仕分けられた情報の内、前記第１抽出情報は、識別情報特定部５８に送出され、前記第２抽出情報は、第２抽出部６０に送出される。

識別情報特定部５８には、第１抽出情報−識別情報（ＩＤ）テーブル記憶部６２が接続されている。ここで、識別情報特定部５８では、第１抽出情報を受け付けると、第１抽出情報−識別情報（ＩＤ）テーブル記憶部６２に記憶された第１抽出情報−識別情報（ＩＤ）テーブルに基づいて、第１抽出情報に対応する識別情報（ＩＤ）を特定する。

識別情報特定部５８は、第１抽出手段としての第１抽出部６４に接続されており、前記特定した識別情報（ＩＤ）をこの第１抽出部６４へ送出する。

第１抽出部６４は、素材データベース５４に接続されている。第１抽出部６４では、識別情報（ＩＤ）を受け付けると、素材データベース５４から当該識別情報（ＩＤ）が付与された被写体（注目画像）が撮影されたイメージ画像を抽出し、一時格納部６６へ格納する。

素材データベース５４には、複数のイメージ画像がデータベース化されており、複数のイメージ画像が抽出されることになる。この第１抽出部６４では、注目画像の状態（向き、大きさ等）は無関係に、識別情報（ＩＤ）が付与された注目画像を網羅するため、同じ向きや同じ大きさの注目画像が撮影されたイメージ画像や、画角に対して極端に小さい状態（例えば、１０％未満の占有面積）で注目画像が撮影されたイメージ画像を含むことになる。

前記第２抽出部６０は、第２抽出情報に基づいて、一時格納部６６から注目画像を抽出する。すなわち、外観的特徴を表現するために必要な撮影視点及び大きさで撮影された注目画像であり、必要最小限の撮影視点箇所で撮影された複数の注目画像を抽出し、注目画像格納部６８へ送出する。

注目画像格納部６８では、第２抽出部６２から全ての注目画像を受け付けると、当該注目画像を相対表作成部７０へ送出する。

相対表作成部７０では、図４に示される如く、各画像の撮影情報一覧表が作成されるようになっている。

図４に示される如く、相対表は、注目画像を特定する画像番号（Ｎｏ．)、撮影視点、詳細情報の項目に分類されている。例えば、画像ＡＡＡ（Ｎｏ．００１２)は、撮影視点が正面であり、詳細情報として傾斜各が仰角θ°であり、撮影時にストロボが使用され、ピント状態が良好（○）な状態であることがわかる。

ここで、撮影視点は、予め定めた許容範囲の広角をもって設定すればよく、例えば、正面が厳密に被写体に正対する必要ない。

また、傾斜角は、例えば、撮影したデジタルカメラに内蔵されている傾斜計の情報（水平を０°として、上向きが仰角、下向きが俯角）を取り込むことが可能である。

さらに、ピント状態は、最良（◎）、良好（○）、普通（△）、ずれあり（×）の４段階程度としたが、特に段階は限定されるものではない。

なお、詳細情報として、三次元造形物の作製に有用な情報があれば追記すればよい。

図３に示される如く、相対表作成部７０において相対表（図４参照）が作成されると、相対表に関する情報が造形可否判定部７２へ送出される。

造形可否判定部７２では、作成された相対表から三次元造形物の作製が可能であるか否かの判定を行う。

すなわち、図４の相対表のように、抽出した画像の撮影視点数が必要最小限の数だけ揃っていれば、三次元造形の作製として情報が十分であり、造形可能の判定となる。

一方、図４の相対表とは異なり、抽出した画像の撮影視点数が少ない場合（例えば、画像ＡＡＡ、画像ＡＡＦ、画像ＡＡＨの３箇所の撮影視点の場合）は、三次元造形の作製として情報が欠如しており、造形不可の判定となる。

造形可否判定部７２の判定結果は、可否情報出力部７４、及び、作成手段としての設計部７６へ送出されるようになっている。

可否情報出力部７４では、ＵＩ１８に対して造形可否を報知するためのメッセージ情報を送出することで、メッセージがＵＩ１８（図１に示すモニタ２０）に表示される。

例えば、モニタ２０には、「三次元造形に必要な設計図を作成します」又は、「三次元造形に必要な画像が不足しています。もう一度やり直すかイメージ画像を追加して下さい。」等のメッセージが表示される。なお、報知は表示に限らず、警告音、音声、色信号等の他の報知手段でもよい。

造形可否判定部７２から設計部７６に造形不可判定の情報が入力されると、設計は実行されない。一方、造形可否判定部７２から設計部７６に造形可能判定の情報が入力されると、設計部７６では、注目画像格納部６８に格納された注目画像を取り込み、三次元造形用の設計（モデリング処理）を実行する。

設計部７６において実行したモデリング処理による設計情報は、設計情報格納部７８に格納される。

（第３の機能部４２）
図３に示される如く、ＵＩ１８は、設計情報読出部８０に接続されている。

設計情報読出部８０では、ＵＩ１８から造形指示を受け付けると、造形指示で指示された識別情報（ＩＤ）に基づいて、設計情報格納部７８から設計情報を読み出す。

設計情報読出部８０で読み出した設計情報は、出力部８２を介して、特定の三次元造形装置３６へ送出される。

三次元造形装置３６では、受け付けた設計情報に基づいて、三次元造形物の作製が実行される。

以下に本実施の形態の作用を図５〜図８のフローチャートに従い説明する。

図５は、造形用画像管理制御装置１４で実行される造形システムメインルーチンを示す制御フローチャートである。

ステップ１００では、ネットワークＩ／Ｆ１２、メディアリーダー２６、又は画像読取装置２８から、イメージ画像を受け付けたか否かが判断され、肯定判定されると、ステップ１０２へ移行して、イメージ画像格納処理（図６参照、詳細後述）が実行されて、ステップ１０４へ移行する。また、ステップ１００で否定判定されると、ステップ１０４へ移行する。

なお、イメージ画像格納処理は、本実施の形態の第１の機能部３８での処理に相当する。

ステップ１０４では、ＵＩ１８によって造形情報が入力されたか否かが判断され、肯定判定されると、ステップ１０６へ移行して、造形用画像抽出処理（図７参照、詳細後述）が実行されて、ステップ１０８へ移行する。また、ステップ１０４で否定判定されると、ステップ１０８へ移行する。

なお、造形用画像抽出処理は、本実施の形態の第２の機能部４０での処理に相当する。

ステップ１０８では、ＵＩ１８によって造形指示が入力されたか否かが判断され、肯定判定されると、ステップ１１０へ移行して、設計情報出力処理（図８参照、詳細後述）が実行されて、このルーチンは終了する。また、ステップ１０８で否定判定されると、このルーチンは終了する。

（イメージ画像格納処理）
図６は、造形用画像管理制御装置１４の第１の機能部３８で実行されるイメージ画像格納処理ルーチンを示す制御フローチャートである。

ステップ１２０では、受付部４４で受け付けたイメージ画像数を認識し、次いでステップ１２２へ移行して受付順にイメージ画像の解析処理を実行する。

解析処理は、主として、パターン認識（顔認識を含む）と色スペクトル分析が実行される。

次のステップ１２４では、前記解析処理の解析結果に基づいて、イメージ画像に撮影されている複数の被写体を分別し、注目画像を選出する。選出する注目画像は、単一の場合、複数の場合がある。

次のステップ１２６では、選出した単一又は複数の注目画素に対して、それぞれ識別情報（ＩＤ）を付与して、ステップ１２８へ移行する。

ステップ１２８では、識別情報（ＩＤ）と注目画像とを関連付けた状態で、素材データベース５４へイメージ画像を格納し、ステップ１３０へ移行する。

ステップ１３０では、注目画像を選出したイメージ画像が、受付画像数に到達したか否かが判断され、否定判定された場合は、注目画像の選出がなされていないイメージ画像が存在すると判断し、ステップ１２２へ移行して、上記工程を繰り返す。

また、ステップ１３０で肯定判定された場合は、受け付けた全てのイメージ画像において、注目画像の選出が終了したと判断し、このルーチンは終了する。なお、１つのイメージ画像に対する注目画像の選出が終了する毎に、メインルーチン（図１０参照）に戻るようにしてもよい。

（造形用画像抽出処理）
図７は、造形用画像管理制御装置１４の第２の機能部４０で実行される造形用画像抽出処理ルーチンを示す制御フローチャートである。

ステップ１４０では、入力された造形情報を第１抽出情報と第２抽出情報とに仕分ける。

次のステップ１４２では、識別情報特定部５８において第１抽出情報−識別情報テーブルを読み出し、次いでステップ１４４へ移行して、第１抽出情報に基づき、識別情報（ＩＤ）を特定する。

次のステップ１４６では、特定した識別情報（ＩＤ）に該当する注目画像が記憶されたイメージ画像を、素材データベース５４から抽出し（第１抽出）、ステップ１４８へ移行する。

ステップ１４８では、第１抽出部６４で抽出したイメージ画像を一時格納部６６へ一時的に格納し、次いで、ステップ１５０へ移行して、第２抽出情報から造形要件情報を解析する。造形要件情報としては、例えば、所定の大きさで記録されている注目画像、必要最小限の撮影視点を特定、といった情報がある。

次のステップ１５２では、造形要件情報に基づき、一時格納部６６に一時的に格納されていたイメージ画像の中から注目画像を抽出し（第２抽出）、ステップ１５４へ移行する。

ステップ１５４では、第２抽出部６０で抽出した注目画像を三次元造形用として、注目画像格納部６８へ格納する。

次のステップ１５６では、注目画像格納部６８に格納された注目画像に基づいて、相対表（図４参照）を作成し、次いでステップ１５８へ移行して、作成した相対表に基づいて、造形の可否を判定し、次いでステップ１６０へ移行して、ＵＩ１８に対して造形の可否を報知し、ステップ１６２へ移行する。

ステップ１６２では、造形が可能か否かが判断され、肯定判定されると、ステップ１６４へ移行して、三次元造形用の設計情報を作成（モデリング処理）し、ステップ１６６へ移行して設計情報を設計情報格納部７８へ格納して、このルーチンは終了する。また、ステップ１６２で否定判定された場合は、このルーチンは終了する。

モデリング処理は、例えば、二次元デーダを、三次元座標系上に対応する各平面に配置して、少なくとも二つの二次元データにおいて共通する点の位置が指示されたときに、その指示された少なくとも二つの点の情報に基づいて、かかる共通する点に対応する三次元座標系上の位置を算出する。

（設計情報出力処理）
図８は、造形用画像管理制御装置１４の第３の機能部４２で実行される設計情報出力処理ルーチンを示す制御フローチャートである。

ステップ１７０では、設計情報読出部８０が、ＵＩ１８から造形指示を受けると、設計情報格納部７８から、指示された三次元造形用の設計情報を読み出す。

次のステップ１７２では、読み出した設計情報を、出力部８２によって、三次元造形装置３６へ出力し、このルーチンは終了する。

図９は、本実施の形態に係る造形用画像管理制御装置１４を用い、例えば、デジタルカメラ等で撮影されたイメージ画像から、三次元造形に必要な注目画像を抽出するまでの流れの実施例を説明する。

本実施例では、特定の人物Ｈの三次元造形物を作製することを目的とする。

図９の（Ａ）に示される如く、複数枚の撮影画像の中に、人物Ｈが点在している。

人物Ｈは、第１の機能部３８において、予め素材データベース５４（図３参照）に格納されている。

ここで、ＵＩ１８で入力された第１抽出情報に基づき、人物Ｈの識別情報（ＩＤ）が特定され、図９（Ｂ）に示される如く、人物Ｈが撮影されているイメージ画像が抽出される（第１抽出）。

第１抽出では、予め定めた大きさで人物Ｈが撮影された全てのイメージ画像が抽出されるため、例えば、暗い、ピントが合っていない、他の人物と被っている、向きが不明等といった、必要以上のイメージ画像が存在する場合がある。

一方、ＵＩ１８で入力された第２抽出情報に基づき、造形要件として必要な撮影視点を定め、図９（Ｂ）に示される、第１抽出で抽出されたイメージ画像の中から、注目画像を抽出する（第２抽出）。

ここでは、図９（Ｃ）に示される如く、撮影視点として、正面、背面、右面、左面、上面、下面の６箇所の撮影視点で撮影された６種類の注目画像が抽出される。

図９（Ｃ）に示される如く、所謂六面図（６箇所の撮影視点）があれば、モデリング処理が実行され、ＵＩ１８からの造形指示に基づいて、設計情報が、三次元造形装置３６（図１参照）へ送出される。

（変形例）
なお、本実施の形態（実施例を含む）では、例えば、デジタルカメラによって撮影された大量のイメージ画像から、特定の人物を識別情報（ＩＤ）に基づいて抽出し（第１抽出）、さらに、造形要件情報に基づいて、第１抽出で抽出されたイメージ画像の中から注目画像を抽出し（第２抽出）、第２抽出で抽出された注目画像によって三次元造形が可能である場合に、モデリング処理を実行し、三次元造形物を作製するための設計情報を三次元造形装置３６に送出するようにした。

変形例では、図２のハードディスク３４の一部の記憶領域として、図１０に示される如く、原型モデル格納手段としての原型モデルデータベース８４を備えるようにした。

原型モデルデータベース８４には、予め、三次元造形物の種類、形状、姿勢別に、複数のひな形が登録されている。

例えば、ひな形番号がＮｏ．０００１−０００１は、人物が歩行しているひな形Ｓであり、三次元造形物を作製するにあたり、このひな形を選択する。

一方、造形用管理画像制御装置１４では、ＵＩ１８から入力された第１抽出情報と第２抽出情報とに基づいて、最終的に、図９（Ｃ）に示されるような注目画像を抽出する。

このとき、図９（Ｃ）の注目画像は、静止（立っている）している人物、歩行している人物、寝ている人物が存在する。

そこで、前記選択したひな形を基本形として、当該ひな形に注目画像を当てはめたモデリング処理を実行する。

これにより、注目画像の状態に関わらず、人物Ｈ（図９（Ａ）参照）が歩行している三次元造形物を作製することが可能となる。

なお、本実施の形態（実施例、及び変形例を含む）では、デジタルカメラやスマートホン等で撮影された静止画を対象としたが、対象イメージ画像は、動画やイラスト画であってもよい。また、個人で楽しむ場合等、著作権等の保護権利を侵害しない場合は、一般公共電波や通信回線網から入手した画像であってもよい。

（識別処理の簡略化）
また、本実施の形態では、解析処理部４６、パターン認識部４８及び色スペクトル分析部５０により、撮影されている画像の中から三次元造形用の被写体を特定して、識別情報を付与する識別処理を実行したが、以下のような識別処理の簡略化が可能である。

「簡略化１」 １枚のイメージ画像に三次元造形の対象となる単一の被写体を撮影するような場合、被写体と共に、撮影領域内に識別情報が暗号化された識別符号（バーコード等）を撮影することで、バーコードを復号化して、識別情報を得るようにしてもよい。

「簡略化２」 撮影機器（デジタルカメラ等）側で、異なる焦点深度の複数の被写体を対象としてピント合わせが可能であり、基本は１回の撮影であるが、潜在的に複数回の撮影を実行し、被写体毎に合焦した（ピントがあった）状態の複数のイメージ画像情報を記録可能な場合、当該撮影機器側で、ピント合わせした被写体毎に識別符号を付与するようにしてもよい。

「簡略化３」 特定の集団を撮影する場合に、当該集団に属する人物の衣服等に、無線タグを付加するようにしてもよい。この場合、撮影するとき、無線タグからの情報を人物と関連付けておけば、１枚のイメージ画像の中に複数の人物が撮影されても、それぞれをバーコードで識別することができる。

１０ 通信回線網
１２ ネットワークＩ／Ｆ
１４ 造形用画像管理制御装置
１６ 本体
１８ ＵＩ
２０ モニタ
２２ キーボード
２４ マウス
２６ メディアリーダー
２８ 画像読取装置
３０ 記録メディア
３２ 原稿
１６Ａ ＣＰＵ
１６Ｂ ＲＡＭ
１６Ｃ ＲＯＭ
１６Ｄ 入出部（Ｉ／Ｏ）
１６Ｅ バス
３４ ハードディスク
３６ 三次元造形装置
３８ 第１の機能部
４０ 第２の機能部
４２ 第３の機能部
４４ 受付部
４６ 解析処理部
４８ パターン認識部
５０ 色スペクトル分析部
５２ 識別処理部
５４ 素材データベース
５６ 情報仕分部
５８ 識別情報特定部
６０ 第２抽出部
６２ 第１抽出情報−識別情報（ＩＤ）テーブル記憶部
６４ 第１抽出部
６６ 一時格納部
６８ 注目画像格納部
７０ 相対表作成部
７２ 造形可否判定部
７４ 可否情報出力部
７６ 設計部
７８ 設計情報格納部
８０ 設計情報読出部
８２ 出力部
８４ 原型モデルデータベース

Claims (7)

1. 取り込んだイメージ画像情報の中から、解析処理によって当該イメージ画像情報に含まれる被写体を判別し、当該イメージ画像情報と、前記判別した被写体を識別可能な識別情報と、を関連付けておき、
   三次元造形物の候補となる特定の被写体の前記識別情報に基づき、イメージ画像情報の中から、特定の被写体が含まれるイメージ画像情報を抽出すると共に、抽出したイメージ画像情報の中から、前記特定の被写体であり、かつ、異なる撮影視点で撮影された複数の注目画像情報を抽出して、三次元造形装置で造形する設計情報を作成し、前記三次元造形装置へ出力する造形用画像管理システム。
2. 予めポージングが決まっている原型モデルに対して前記注目画像情報を当てはめることで、前記設計情報を作成する、請求項１記載の造形用画像管理システム。
3. 前記注目画像情報に基づいて、三次元造形が可能か否かを判断して報知する、請求項１又は請求項２記載の造形用画像管理システム。
4. イメージ画像情報を取り込む取込手段と、
   前記取込手段で取り込んだ各イメージ画像情報の中から、解析処理によって、当該イメージ画像情報に含まれる被写体を判別し、三次元造形物の候補となる被写体が撮影されたイメージ画像情報と、前記判別した被写体を識別可能な識別情報と、を関連付けて格納する格納手段と、
   前記識別情報、及び、三次元造形物に反映させるための前記被写体の造形要件報を受け付ける受付手段と、
   前記受付手段で受け付けた識別情報に対応する被写体が含まれるイメージ画像情報を、前記格納手段から抽出する第１抽出手段と、
   前記第１抽出手段で抽出したイメージ画像情報の中から、前記受付手段で受け付けた造形要件情報に適合する被写体であり、かつ、異なる撮影視点で撮影された複数の注目画像情報を抽出する第２抽出手段と、
   前記第２抽出手段で抽出した注目画像情報を三次元造形装置で造形する設計情報を作成する作成手段と、
   を有する造形用画像管理装置。
5. 三次元造形物の原型モデルとなるひな形情報が格納された原型モデル格納手段をさらに有し、
   前記受付手段が、前記ひな形情報受け付けることで、前記作成手段が、前記第２抽出手段で抽出した注目画像情報を、前記ひな形情報に当てはめて前記設計情報を作成する請求項４記載の造形用画像管理装置。
6. 前記第２抽出手段で抽出した注目画像情報に基づいて、三次元造形が可能か否かを判断する判断手段と、
   判断手段の判断結果を報知する報知手段と、
   をさらに有する請求項４又は請求項５記載の造形用画像管理装置。
7. コンピュータを、
   請求項４〜請求項６の何れか１項記載の造形用画像管理装置として機能させる、
   造形用画像管理プログラム。

Images