JP5909615B2 - クラウド型三次元モデル構築システム及びその構築方法 - Google Patents

クラウド型三次元モデル構築システム及びその構築方法 Download PDF

Info

Publication number
JP5909615B2
JP5909615B2 JP2014077686A JP2014077686A JP5909615B2 JP 5909615 B2 JP5909615 B2 JP 5909615B2 JP 2014077686 A JP2014077686 A JP 2014077686A JP 2014077686 A JP2014077686 A JP 2014077686A JP 5909615 B2 JP5909615 B2 JP 5909615B2
Authority
JP
Japan
Prior art keywords
model
dimensional
client device
image
cloud
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014077686A
Other languages
English (en)
Other versions
JP2015079482A (ja
Inventor
憲 聰 蔡
憲 聰 蔡
Original Assignee
啓雲科技股▲分▼有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 啓雲科技股▲分▼有限公司 filed Critical 啓雲科技股▲分▼有限公司
Publication of JP2015079482A publication Critical patent/JP2015079482A/ja
Application granted granted Critical
Publication of JP5909615B2 publication Critical patent/JP5909615B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B29WORKING OF PLASTICS; WORKING OF SUBSTANCES IN A PLASTIC STATE IN GENERAL
    • B29CSHAPING OR JOINING OF PLASTICS; SHAPING OF MATERIAL IN A PLASTIC STATE, NOT OTHERWISE PROVIDED FOR; AFTER-TREATMENT OF THE SHAPED PRODUCTS, e.g. REPAIRING
    • B29C64/00Additive manufacturing, i.e. manufacturing of three-dimensional [3D] objects by additive deposition, additive agglomeration or additive layering, e.g. by 3D printing, stereolithography or selective laser sintering
    • B29C64/30Auxiliary operations or equipment
    • B29C64/386Data acquisition or data processing for additive manufacturing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F30/00Computer-aided design [CAD]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B33ADDITIVE MANUFACTURING TECHNOLOGY
    • B33YADDITIVE MANUFACTURING, i.e. MANUFACTURING OF THREE-DIMENSIONAL [3-D] OBJECTS BY ADDITIVE DEPOSITION, ADDITIVE AGGLOMERATION OR ADDITIVE LAYERING, e.g. BY 3-D PRINTING, STEREOLITHOGRAPHY OR SELECTIVE LASER SINTERING
    • B33Y50/00Data acquisition or data processing for additive manufacturing
    • B33Y50/02Data acquisition or data processing for additive manufacturing for controlling or regulating additive manufacturing processes

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Materials Engineering (AREA)
  • Geometry (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Computer Graphics (AREA)
  • Manufacturing & Machinery (AREA)
  • Mechanical Engineering (AREA)
  • Optics & Photonics (AREA)
  • Computer Hardware Design (AREA)
  • Evolutionary Computation (AREA)
  • General Engineering & Computer Science (AREA)
  • Processing Or Creating Images (AREA)
  • Information Transfer Between Computers (AREA)
  • Architecture (AREA)

Description

本発明は、三次元(3D)モデル構築の技術に関し、より詳しくは、リアルタイムに送信するクラウド型三次元モデル構築システム及びその構築方法に関するものである。
科学技術の進歩に伴い、従来の二次元(2D)走査及びプリントでは、ユーザの要求を満たすことができなくなっている。現在、新たに登場した三次元走査及びプリントでは、立体オブジェクトを走査分析することにより対応する三次元モデルを生成し、その後、三次元オブジェクト構築装置により、立体オブジェクトと同様または類似の三次元オブジェクトを生成することができる。
従来の三次元モデル構築技術において、立体オブジェクトを走査して得られたデータをローカル側の三次元モデル構築装置に送信し、分析・演算を行うことで、三次元モデルを構築し、最後に、走査された立体オブジェクトを当該三次元モデルに基づいて改めて具体的に表現する。より詳しくは、従来の三次元モデル構築技術において、ユーザは、通常まず立体オブジェクトに対して走査を行い、その後、解析して当該立体オブジェクトに対応する複数のオブジェクトデータを生成する。それらのオブジェクトデータが三次元モデル構築装置に送信された後、当該三次元モデル構築装置は、三次元モデルの構築や後続の三次元オブジェクトの再構築を行う。ここで、三次元モデルが構築された後に、ユーザは、不十分なまたは補完すべき箇所があることに気付いた場合、さらに走査を行い、当該三次元モデルを再構築することができる。従って、従来の技術では、オブジェクトデータが三次元モデル構築装置に送信されなければ三次元モデルの構築を行うことができず、しかも、三次元モデルに不十分なまたは補強すべき箇所がないことを確認する際に初めて三次元オブジェクトの再構築が行われる。このように、ユーザは、より長い構築時間を必要とするのみならず、三次元モデルの構築状態をリアルタイムに知ることができず、ユーザにとって使用上の不便があった。
さらに、従来の三次元走査は、立体オブジェクトを三次元プリントすることにより、立体オブジェクトに合致する三次元オブジェクトを生成することを目的とする。しかしながら、生成された三次元オブジェクトがその他の応用と組み合わせることができるものであれば、三次元オブジェクトに多大な効果をもたらすことが可能となり、三次元走査及びプリント技術がより広範に利用されるようになる。
上記のように、従来の三次元モデル構築技術には三次元モデルのリアルタイム送信が重要であり、しかも、構築過程においてユーザが三次元モデルの構築中の状態を観察することができれば、三次元モデルが実体オブジェクトと同一であるか否かをユーザが理解するのに資することができる。従って、三次元モデル構築に対する上記各要求は、実際にこの分野における技術者が求める目標になっている。
上記の従来技術の欠点を解決するために、本発明は、クラウド型三次元モデルの構築技術を提供し、ユーザ側とクラウド型三次元モデルプラットフォームとの間のリアルタイム送信及びフィードバックにより、リアルタイム的かつ多用途のクラウド型三次元モデル構築システムを提供することを目的とする。
上記の目的を達成するために、本発明は、実体オブジェクトの三次元オブジェクトデータをリアルタイムに送信するためのクライアント装置と、クライアント装置にネットワーク接続されるクラウド型三次元モデルプラットフォームであって、前記クライアント装置からの三次元オブジェクトデータを受信するための受信ユニットと、前記実体オブジェクトに対応する三次元モデルを生成するために、前記三次元オブジェクトデータに基づいて、構築中三次元モデルを構築するとともに、前記構築中三次元モデルをリアルタイムに更新することで前記構築中三次元モデルを持続的に構築するための処理ユニットと、前記クライアント装置が前記構築中三次元モデルの平面画像をリアルタイムに観察できるように、前記構築中三次元モデルの平面画像を前記クライアント装置にリアルタイムに送信するためのフィードバックユニットとを含むクラウド型三次元モデルプラットフォームを備えることを特徴とするクラウド型三次元モデル構築システムを提供する。
一つの実施形態において、前記クライアント装置は、内蔵イメージキャプチャーまたは外部に接続される携帯型三次元スキャナーにより前記三次元オブジェクトデータを取得する。
他の実施形態において、クラウド型三次元モデル構築システムは、前記クラウド型三次元モデルプラットフォームに接続されたソーシャルプラットフォームをさらに備え、前記クラウド型三次元モデルプラットフォームの前記三次元モデルは、画像と組み合わされることで三次元マッピングモデルが生成され、さらに前記三次元マッピングモデルの平面画像が生成されることで、前記三次元マッピングモデルの平面画像が前記ソーシャルプラットフォームに送信される。
さらに他の実施形態において、前記クライアント装置は、前記クラウド型三次元モデルプラットフォームに接続されることで前記三次元マッピングモデルの平面画像を観察し、インタラクティブインターフェースを介して前記三次元マッピングモデルの拡大縮小または視点変更を制御する。
また、本発明は、クラウド型三次元モデルプラットフォームにおいて三次元モデルの構築を行うためのクラウド型三次元モデル構築方法であって、クライアント装置からの実体オブジェクトの三次元オブジェクトデータをリアルタイムに受信する工程と、前記三次元オブジェクトデータに基づいて、構築中三次元モデルを構築するとともに、前記構築中三次元モデルの平面画像を前記クライアント装置にリアルタイムに送信する工程と、前記実体オブジェクトに対応する三次元モデルを生成するために、前記構築中三次元モデルをリアルタイムに更新することで前記構築中三次元モデルを持続的に構築する工程と、を備えることを特徴とするクラウド型三次元モデル構築方法をさらに提供する。
一つの実施形態において、前記クラウド型三次元モデル構築方法におけるクライアント装置は、内蔵イメージキャプチャーまたは外部に接続される携帯型三次元スキャナーにより前記三次元オブジェクトデータを取得する。
また、他の実施形態において、前記三次元モデルが画像と組み合わされることで三次元マッピングモデルが生成され、さらに前記三次元マッピングモデルの平面画像が生成されることで、前記三次元マッピングモデルの平面画像がソーシャルプラットフォームに送信される。
従来技術と比較すると、本発明に係るクラウド型三次元モデル構築システム及びその構築方法では、クライアント装置が、三次元スキャナーによって走査された内容をクラウド型三次元モデルプラットフォームにリアルタイムに送信することで三次元モデルの構築を行うことができ、クラウド型三次元モデルプラットフォームも、三次元モデルの構築状態をクライアント装置にリアルタイムに送信することができるため、ユーザは、現在の構築状況を十分に把握することができる。このように、三次元モデルの構築に対して、ユーザは、受動的に待つのではなく積極的に観察し、必要な場合に設定をリアルタイムに変更することができるため、リアルタイム性や参加意識が大幅に向上する。さらに、本発明に係るクラウド型三次元モデル構築システムは、ソーシャルプラットフォームとの相互接続を行うことができる。即ち、ソーシャルプラットフォームにおいて格納されまたはキャプチャーされたキャラクタイメージ画像をクラウド型三次元モデル構築システムによって構築された三次元モデルにマッピングすることにより、キャラクタイメージを有する三次元マッピングモデルを完成させる。従って、個人観察用にも商業用にも極めて有利である。
本発明に係るクラウド型三次元モデル構築システムを模式的に示した図である。 本発明に係るクラウド型三次元モデル構築システムの他の具体的な実施形態を模式的に示した図である。 本発明に係るクラウド型三次元モデル構築システムにおけるクライアント装置の具体的な実施形態を模式的に示した図である。 本発明に係るクラウド型三次元モデル構築方法のフローを示す。 本発明に係るクラウド型三次元モデル構築方法における三次元モデル構築のフローを示す。 本発明に係るクラウド型三次元モデル構築方法におけるソーシャルプラットフォームとの双方向処理のフローを示す。 本発明に係るクラウド型三次元モデル構築システムが三次元マッピングと組み合わせられた模式図を示す。
以下、具体的な実施例を用いて本発明の実施形態を説明する。この技術分野に精通した者は、本明細書の記載内容によって簡単に本発明のその他の利点や効果を理解できる。本発明は、その他の異なる実施例によって応用を加えることが可能である。
図1は、本発明に係るクラウド型三次元モデル構築システムを模式的に示した図である。図1に示すように、本発明に係るクラウド型三次元モデル構築システム1において、クライアント装置10とクラウド型三次元モデルプラットフォーム11とは、インターネット12を介してネットワーク接続され、クライアント装置10は、実体オブジェクト13の三次元情報を取り出し、クラウド型三次元モデルプラットフォーム11に送信するとともに分析を行うことで、実体オブジェクト13に対応する三次元モデルを構築する。
クライアント装置10は、実体オブジェクト13の三次元オブジェクトデータをリアルタイムに送信するためのものである。具体的には、クライアント装置10は、内蔵イメージキャプチャー(例えば写真撮影機能を有するクライアント装置10)または外部に接続される携帯型三次元スキャナーにより三次元オブジェクトデータを取得することができる。当該三次元オブジェクトデータは、実体オブジェクト13について例えば三次元スキャナーにより実世界での実体や環境を検知分析して得られた幾何構造または外観、例えば色、形状または表面曲線等を表すものであり、取得されたデータが三次元構築/再構築計算に用いられることにより、バーチャル環境において実体の三次元デジタルモデルが確立される。
上述したように、三次元オブジェクトデータは、実体オブジェクト13の外形を表すものであり、複数の方法で取得することができる。例えば、三次元グラフィックデザイナーによって製図された三次元画像、若しくは三次元走査により取得された実体オブジェクト13の一部のビットまたはオブジェクトブロックは、例えば実体オブジェクト13に対応する実際の外形のオブジェクトコードを予め設計し、関連する画像またはデータを取得し判断を行ってから、該オブジェクトコードを用いて対応する三次元モデルが何であるかを探し出してもよい。一つの例を挙げると、鉛筆に対応する実際の外形のオブジェクトコードを予め0105として設計したとすると、当該鉛筆の画像を取得しオブジェクトコードが0105であると判断した後、当該オブジェクトコードを用いてデータベースから対応する三次元モデルである当該鉛筆を探し出す。
クラウド型三次元モデルプラットフォーム11は、インターネット12を介してクライアント装置10とネットワーク接続されることが可能であり、受信ユニット111と、格納ユニット112と、処理ユニット113と、フィードバックユニット114とを含む。
受信ユニット111は、クライアント装置10からの三次元オブジェクトデータを受信するためのものである。それらの三次元オブジェクトデータは、後続の三次元モデルが構築されるまで格納ユニット112に格納される。
処理ユニット113は、各クライアント装置10及び実体オブジェクト13からの三次元オブジェクトデータに基づいて構築することで構築中三次元モデルを形成する。また、複数のクライアント装置10がその取得した三次元オブジェクトデータをクラウド型三次元モデルプラットフォーム11にアップロードする可能性があるため、処理ユニット113は、異なるクライアント装置10及び各クライアント装置10によってアップロードされた実体オブジェクト13の複数の三次元オブジェクトデータを分類・格納することで、三次元モデルを構築する。
三次元オブジェクトデータが所定の数量に達すると、処理ユニット113は、三次元オブジェクトデータがすべてアップロードされるのを待つことなく、構築を開始することができる。従って、処理ユニット113は、一部の三次元オブジェクトデータを用いることで構築中三次元モデルを形成することができる。上記構築中三次元モデルは、リアルタイムに更新することで新たに送信されてきた三次元オブジェクトデータに対して構築を持続的に行い、三次元オブジェクトデータがすべてアップロードされた後に、実体オブジェクト13に対応する三次元モデルを生成することができる。
フィードバックユニット114は、構築中三次元モデルの平面画像をクライアント装置10にリアルタイムに送信することができる。これにより、ユーザは、クライアント装置10を介して構築中三次元モデルの平面画像、即ち三次元モデルの構築状態をリアルタイムに観察することができる。言い換えれば、ユーザは、構築中三次元モデル自体ではなく、構築中三次元モデルのある特定平面画像をクライアント装置10を介してリアルタイムに観察することができる。従って、三次元モデル構築の処理に影響を及ぼすことはなく、特定平面画像が正しいか否かをリアルタイムに確認することができる。
上記方法により、クラウド型三次元モデルプラットフォーム11では、全ての三次元オブジェクトデータ収集の完了を待つことなく、構築を開始することができるため、三次元モデル構築のスケジュールを早めることができる。また、フィードバックユニット114が構築中三次元モデルの平面画像をクライアント装置10に送信することができるため、ユーザは、三次元モデル全体の完成を待つことなく観察することができる。このため、ユーザが三次元モデル全体の構築を全面的に理解するのに役立ち、三次元モデル構築過程に不具合がある場合には構築を直ちに停止または補正することができ、資源や時間の無駄を回避することができる。
図2は、本発明に係るクラウド型三次元モデル構築システムの他の具体的な実施形態を模式的に示した図である。図2に示すように、この実施形態において、クラウド型三次元モデル構築システム1の完全な組成及びクラウド型三次元モデルプラットフォーム11において生成された三次元モデルの応用を説明する。ソーシャルプラットフォーム14とクラウド型三次元モデルプラットフォーム11とは、インターネットを介して接続することができるとともに、ユーザも、クライアント装置10を介してソーシャルプラットフォーム14と接続されることができる。また、ソーシャルプラットフォーム14は、特に限定されないが、クラウド型三次元モデルプラットフォーム11と同一のシステムに構築することができる。
上述したように、クライアント装置10は、複数の方法で実体オブジェクト13の三次元オブジェクトデータを取得し、その後、三次元オブジェクトデータをクラウド型三次元モデルプラットフォーム11に送信し、三次元モデルの構築を行うことができる。三次元モデルは、実体オブジェクト13に対応しており、クラウド型三次元モデルプラットフォーム11は、構築中三次元モデルの平面画像または構築が完了した三次元モデルの画像をクライアント装置10にリアルタイムに送信することができる。
クラウド型三次元モデルプラットフォーム11によって構築された三次元モデルは、三次元プリント装置17により直接プリントすることができ、それによって実体オブジェクト13と同様または類似の物品を生成することができる。三次元プリントの応用は、例えば人体器官、家具等広範である。また、三次元モデルは、三次元ゲームにおける三次元キャラクタまたは三次元物体の形態として、三次元ゲーム/三次元動画15に応用することができ、若しくは三次元動画作成のための素材にも用いることができる。
また、三次元モデルは、さらに特定の製造メーカにおいて、三次元モデル広告ラベル16と組み合わせるように応用されることができる。簡単に言えば、画像またはイメージのような広告ラベルを三次元モデルに貼着することにより広告ラベル付き三次元モデルを生成することができる。広告メーカは、この三次元モデルを用いてプリントを行うことで三次元オブジェクトを生成したり、この三次元モデルを広告に応用したり、若しくはこの三次元モデルを三次元ゲーム/三次元動画15に応用することができ、これにより広告効果を達成することができる。
ソーシャルプラットフォーム14は、ソーシャルプラットフォーム14内の画像または写真(或いは外部の画像または写真)をクラウド型三次元モデルプラットフォーム11に送信するとともに、三次元モデルと組み合わせることで三次元マッピングモデルを生成し、さらに三次元マッピングモデルの平面画像を生成するとともに、三次元マッピングモデルの平面画像をソーシャルプラットフォーム14に送信することができる。より具体的に言えば、三次元モデルは、簡単なものに過ぎない可能性があるが、個人要素が加えられれば、より多くの応用を為すことができる。三次元モデルが三次元人形であることを例に挙げると、ソーシャルプラットフォーム14内におけるユーザの顔写真を三次元人形の顔にマッピングした場合、三次元人形の画像は、ソーシャルウェブサイトの双方向処理に利用することができる。以下、このマッピングの実施形態を具体的に説明する。
また、ソーシャルプラットフォーム14は、三次元マッピングモデルの平面画像を外部リンクと組み合わせる。この外部リンクは、クラウド型三次元モデルプラットフォーム11の三次元マッピングモデルまたはその他の広告ウェブサイト等に接続することができる。さらに、クライアント装置10は、ソーシャルプラットフォーム14に接続することができる。これにより、ユーザは、ソーシャルプラットフォーム14から、外部リンクと組み合わされた三次元マッピングモデルの平面画像をクライアント装置10にダウンロードすることで、外部リンクを介してクラウド型三次元モデルプラットフォーム11に接続することができる。または、クライアント装置10は、クラウド型三次元モデルプラットフォーム11に直接接続することにより三次元マッピングモデルの平面画像を観察することができ、ユーザは、クライアント装置10のインタラクティブインターフェースを介して三次元マッピングモデルの拡大縮小及び/または視点変更等を制御することができる。これにより、ソーシャルプラットフォーム14またはクラウド型三次元モデルプラットフォーム11は、変更された三次元マッピングモデルの平面画像をクライアント装置10に送信することができる。
図3は、本発明に係るクラウド型三次元モデル構築システムにおけるクライアント装置10の具体的な実施形態を模式的に示した図である。この実施形態は、主としてクライアント装置10の具体的な実施内容を説明するものである。図3に示すように、クライアント装置10にはイメージキャプチャー101が内蔵されるとともに、それぞれクラウド型三次元モデルプラットフォーム11及びソーシャルプラットフォーム14との接続や双方向処理を行うための三次元モデルアプリケーション102及びソーシャルアプリケーション103が設けられている。また、三次元モデルアプリケーション102及びソーシャルアプリケーション103は、特に限定されないが、一つのアプリケーションに組み込むことができる。
ユーザは、三次元モデルを構築しようとする場合に、クライアント装置10の三次元モデルアプリケーション102を起動することができる。この場合、三次元モデルアプリケーション102は、イメージキャプチャー101または外部に接続された携帯型三次元スキャナー18を駆動することで実体オブジェクトのイメージまたは三次元オブジェクトデータを取得することができる。その後、三次元モデルアプリケーション102は、それらのデータをクラウド型三次元モデルプラットフォーム11にアップロードすることで三次元モデルの構築を行うとともに、三次元モデルのイメージをクライアント装置10に返送する。
三次元モデルが生成された後、ユーザは、ソーシャルアプリケーション103を起動しソーシャルプラットフォーム14に接続することができる。この場合、ソーシャルプラットフォーム14は、ソーシャルプラットフォーム14における画像または写真(或いは外部の画像または写真)をクラウド型三次元モデルプラットフォーム11に送信するとともに、三次元モデルと組み合わせることで三次元マッピングモデルを生成し、さらに三次元マッピングモデルの平面画像を取得するとともに三次元マッピングモデルの平面画像をソーシャルプラットフォーム14に送信することができる。その後、三次元マッピングモデルの平面画像は、クライアント装置10に返送することができる。このように、ユーザは、クラウド型三次元モデルプラットフォーム11に直接接続し、三次元マッピングモデルの平面画像を直接観察することができ、観察過程において、クライアント装置10を介して三次元マッピングモデルに対して反転または拡大縮小を行うことができる。また、ユーザは、ソーシャルプラットフォーム14から三次元マッピングモデルの平面画像をダウンロードすることもできる。若しくは、ソーシャルプラットフォーム14は、ユーザがダウンロードして使用できるように、三次元マッピングモデルの平面画像を外部リンクと組み合わせることができる。これにより、ユーザは、三次元モデルの平面画像または三次元マッピングモデルの平面画像または三次元プリント装置17によってプリントされた三次元オブジェクトのみを所有することができ、三次元モデルまたは三次元マッピングモデルを所有するこができない。このため、原著者の知的財産権を保護することができる。
図4は、本発明に係るクラウド型三次元モデル構築方法のフローを模式的に示した図である。図4に示すように、ステップS401において、クライアント装置からの実体オブジェクトの三次元オブジェクトデータをリアルタイムに受信する。具体的には、クライアント装置は、内蔵イメージキャプチャーまたは外部に接続された携帯型三次元スキャナーにより、実体オブジェクトの三次元オブジェクトデータまたはイメージを取得することができる。次に、ステップS402に進む。
ステップS402において、三次元オブジェクトデータに基づいて構築を行うことで構築中三次元モデルを形成するとともに、構築中三次元モデルの平面画像をクライアント装置にリアルタイムに送信する。簡単に言えば、受信された三次元オブジェクトデータを構築することで、構築中三次元モデルを形成する。ここで説明しておくが、本発明は、全ての三次元オブジェクトデータが揃ってからモデル構築を行う必要はなく、三次元オブジェクトデータが所定の数量に達すれば、三次元モデルの構築を開始することができる。従って、構築中三次元モデル(即ち完全な三次元モデルではない)が形成され、構築中三次元モデルの平面画像がクライアント装置にリアルタイムに送信され、クライアント装置側にあるユーザは、構築中三次元モデルの平面画像、即ち三次元モデルの構築状態を観察することができる。次に、ステップS403に進む。
ステップS403において、実体オブジェクトに対応する三次元モデルを生成するために、構築中三次元モデルをリアルタイムに更新することで構築中三次元モデルを持続的に構築する。より詳しくは、新たな三次元オブジェクトデータが受信された後、新たな構築中三次元モデルを生成するために、前記構築中三次元モデルとの更新及び組み合わせがリアルタイムに行われ、この過程は、三次元モデル全体が完成されるまで繰り返される。また、三次元モデルは、その前の寸法比例に基づいて実体オブジェクトと類似するように設定することができる。
また、三次元モデルが完成された後、この三次元モデルがソーシャルプラットフォームにおける写真または画像(或いは外部の写真または画像)と組み合わされることで三次元マッピングモデルが生成され、さらに三次元マッピングモデルの平面画像が生成されるとともに、三次元マッピングモデルの平面画像がソーシャルプラットフォームに送信されることができる。ユーザは、三次元マッピングモデルの平面画像を観察するために、クライアント装置を介して三次元マッピングモデルの平面画像をダウンロードすることができ、またはクライアント装置のインタラクティブインターフェースを介して三次元マッピングモデルの拡大縮小及び/または視点変更等を制御することができる。
図5は、本発明に係るクラウド型三次元モデル構築方法における三次元モデル構築のフローを説明する図である。図5に示すように、ステップS501において、クライアント装置内における三次元モデルアプリケーションを起動し、設定を入力及び/または選択するとともに三次元スキャナーまたは内蔵イメージキャプチャーに接続する。このステップでは、三次元モデル構築を行おうとする場合、クライアント装置内における三次元モデルアプリケーションを起動し、例えば低多辺形表示/高多辺形表示/髪型/完全なオブジェクト走査/一部のオブジェクト走査といった関連する設定を予め入力することができ、その後、外部の三次元スキャナーまたは内蔵イメージキャプチャーに接続することで走査を行うことができる。次に、ステップS502、S503に進む。
ステップS502において、三次元スキャナーは、走査情報をクライアント装置に送信する。即ち、三次元スキャナーは、実体オブジェクトに対して三次元走査を行うことで走査情報を取得し、走査情報を持続的にクライアント装置に返送することができる。走査情報は、座標(coordinate)/織地/色/一部走査に対応するオブジェクトコード(例えば髪型)等を含んでもよい。
また、ステップS503において、クライアント装置は、その内蔵イメージキャプチャーによって取得された写真または三次元スキャナーによって取得された走査情報を受信し、3G/WiFi/ADSL/LTE等の有線または無線ネットワークにより写真または走査情報をクラウド型三次元モデルプラットフォームに送信する。次に、ステップS504に進む。
ステップS504において、アプリケーションに基づいてレンダリング(rendering)の実行を設定するとともに、レンダリング状態/三次元モデルイメージをクライアント装置に返送し、クライアント装置が表示を行う。このステップでは、三次元モデルが構築され、イメージがユーザ側のクライアント装置に返送される。ステップS504の後、ステップS505に進み、即ち、ユーザからの停止指令を受信したか否かを判断し、否である場合は、持続的に走査し、ステップS502に戻り、即ち新たな三次元オブジェクトデータ(取得された実体オブジェクトの一部のデータ)を取得し、その後、ステップS504において三次元モデルの構築が持続的に行われる。逆に、ユーザからの停止指令を受信した場合は、ステップS506に進み、この構築方法のフローが完了する。
上記のステップにより、実体オブジェクトに対してイメージまたは三次元オブジェクトデータを取得するとともに、設定に基づいて三次元モデルレンダリングを完了することができる。これにより三次元モデルを生成することができる。
図6は、本発明に係るクラウド型三次元モデル構築方法におけるソーシャルプラットフォームとの双方向処理のフローを示す。図6に示すように、ステップS601において、クライアント装置内のソーシャルアプリケーションを起動し、マッピングシリーズを予約購入または選択し、スキャナーに接続することで人の像を走査しまたは予め格納された人の像を直接選択する。具体的には、ユーザは、クライアント装置内におけるソーシャルアプリケーションを起動し、予約購入することまたは生成されたマッピングを選択することができ、予約購入である場合には、スキャナーに接続することで人の像の走査を行うことができ、マッピングが既に存在している場合には、それを選択して使用することができる。次に、ステップS602に進む。
ステップS602において、ソーシャルプラットフォームは、マッピングを作成し、完成後にプレビュー及び選択購入を提供し、ユーザは、選択した後、ダウンロードして代金を支払う。ソーシャルプラットフォームは、ユーザの予約購入または選択に基づいてマッピング製造を行い、完成後には、ユーザがプレビューまたは選択購入し、ダウンロードして代金を支払うことができるように、ソーシャルプラットフォームに置くことができる。次に、ステップS603に進む。
ステップS603において、ユーザは、自分の画像を用いて三次元モデルと組み合わせることで三次元マッピング人形画像を生成し、または三次元プリント装置により自分の三次元マッピング人形をプリントアウトする。この前のステップにおいて、ユーザは、所要のマッピングを取得することができる。その後、ユーザは、それらのマッピング及び三次元モデル(例えば人形)を用いて組み合わせることで三次元マッピング人形の平面画像を生成し、または外付けの三次元プリント装置に接続することで自己の三次元マッピング人形をプリントアウトすることができる。
また、ユーザは、ソーシャルプラットフォームにおいてビデオファイルを送信しようとする場合も、上記技術を用いて三次元マッピング人形の平面画像によりユーザのビデオファイルに対する特殊な感情または表情(例えば喜怒哀楽等)を表すことができ、ユーザ間の双方向処理をより豊かにすることができる。
図7は、本発明に係るクラウド型三次元モデル構築システムと三次元マッピングとの組み合わせ応用を模式的に示した図である。図7に示すように、クラウド型三次元モデルプラットフォーム11は、構築された三次元モデル(例えば人形)を三次元モデル広告ラベル16の製造メーカに応用することができる。この場合、製造メーカは、三次元モデル広告ラベル16をクラウド型三次元モデルプラットフォーム11に送信して三次元モデル115とラベル画像161とを組み合わせることで、ラベル画像を有する三次元人形115’を形成することができる。このように、広告業者は、この人形を用いて平面広告、立体実物を生成し、または電子フォーマットでアナログまたはデジタルの広告に組み込むことができる。このように、三次元モデルが広告ラベルと組み合わせられたマッピングは、より大きな効果を奏する。また、上記三次元人形115’を三次元ゲーム/三次元動画15に応用することもできる。
上述したように、本発明に係るクラウド型三次元モデル構築システム及びその構築方法によれば、クライアント装置は、走査された内容をクラウド型三次元モデルプラットフォームにリアルタイムに送信することで三次元モデルの構築を行うことができ、また、クラウド型三次元モデルプラットフォームも、三次元モデルの構築状態をクライアント装置にリアルタイムに返送することができる。このため、ユーザは、現在の構築状況を知ることができる。従来技術では、走査内容がアップロードされなければ構築や後続作業を行うことができなかったが、本発明では、全体の時間を短縮することができるのみならず、ユーザは構築過程において構築内容を能動的に観察することができる。このように、構築時間の無駄を回避することができるとともに、ユーザの参加意識を高めることができる。また、クラウド型三次元モデル構築システムは、ソーシャルプラットフォームと組み合わせることで有用な応用を提供することができる。例えば、ソーシャルプラットフォームにおいて格納されまたはリアルタイムに取得されたキャラクタイメージを用いて、それらを三次元モデルにマッピングすることによりキャラクタイメージを有する三次元モデルを完成させることができる。従って、三次元モデルに複数の異なる応用を提供することができる。
上記の実施形態は本発明の原理および効果・機能を例示的に説明するものに過ぎず、本発明は、これらによって限定されるものではない。本発明は、この技術分野に精通した者により本発明の主旨を逸脱しない範囲で種々の修正や変更を行なうことが可能であり、そうした修正や変更は、本発明の特許請求の範囲に入るものである。
1 クラウド型三次元モデル構築システム
10 クライアント装置
101 イメージキャプチャー
102 三次元モデルアプリケーション
103 ソーシャルアプリケーション
11 クラウド型三次元モデルプラットフォーム
111 受信ユニット
112 格納ユニット
113 処理ユニット
114 フィードバックユニット
115 三次元モデル
115’ 三次元人形
12 インターネット
13 実体オブジェクト
14 ソーシャルプラットフォーム
15 三次元ゲーム/三次元動画
16 三次元モデル広告ラベル
161 ラベル画像
17 三次元プリント装置
18 携帯型三次元スキャナー
S401〜S403 ステップ
S501〜S506 ステップ
S601〜S603 ステップ

Claims (10)

  1. 実体オブジェクトの三次元オブジェクトデータをリアルタイムに送信するためのクライアント装置と、
    前記クライアント装置にネットワークで接続されるクラウド型三次元モデルプラットフォームであって、前記クライアント装置からの前記三次元オブジェクトデータを受信するための受信ユニットと、
    前記実体オブジェクトに対応する三次元モデルを生成するために、前記三次元オブジェクトデータに基づいて構築中三次元モデルを構築するとともに、前記構築中三次元モデルをリアルタイムに更新することで前記構築中三次元モデルを持続的に構築するための処理ユニットと、
    前記クライアント装置が前記構築中三次元モデルの平面画像をリアルタイムに観察することができるように、前記構築中三次元モデルの平面画像を前記クライアント装置にリアルタイムに送信するためのフィードバックユニットとを含むクラウド型三次元モデルプラットフォームと、
    を備えることを特徴とするクラウド型三次元モデル構築システム。
  2. 前記三次元オブジェクトデータは、三次元画像、オブジェクトビット、オブジェクトブロックまたはオブジェクトコードを含むことを特徴とする請求項1に記載のクラウド型三次元モデル構築システム。
  3. 前記クライアント装置は、内蔵イメージキャプチャーまたは外部に接続される携帯型三次元スキャナーにより前記三次元オブジェクトデータを取得することを特徴とする請求項1に記載のクラウド型三次元モデル構築システム。
  4. 前記クラウド型三次元モデルプラットフォームに接続されたソーシャルプラットフォームをさらに備え、前記クラウド型三次元モデルプラットフォームの前記三次元モデルが画像と組み合わされることで三次元マッピングモデルが生成され、さらに前記三次元マッピングモデルの平面画像が生成されることで、前記三次元マッピングモデルの平面画像が前記ソーシャルプラットフォームに送信されることを特徴とする請求項1に記載のクラウド型三次元モデル構築システム。
  5. 前記ソーシャルプラットフォームが前記三次元マッピングモデルの平面画像を外部リンクと組み合わせ、さらに前記クライアント装置に接続することで、前記クライアント装置は、前記外部リンクに組み合わされた前記三次元マッピングモデルの平面画像を前記ソーシャルプラットフォームからダウンロードすることを特徴とする請求項4に記載のクラウド型三次元モデル構築システム。
  6. 前記クライアント装置は、前記クラウド型三次元モデルプラットフォームに接続されることで前記三次元マッピングモデルの平面画像を観察し、インタラクティブインターフェースを介して前記三次元マッピングモデルの拡大縮小または視点変更を制御することを特徴とする請求項4に記載のクラウド型三次元モデル構築システム。
  7. クライアント装置からの実体オブジェクトの三次元オブジェクトデータをリアルタイムに受信する工程と、
    前記三次元オブジェクトデータに基づいて構築中三次元モデルを構築するとともに、前記構築中三次元モデルの平面画像を前記クライアント装置にリアルタイムに送信する工程と、
    前記実体オブジェクトに対応する三次元モデルを生成するために、前記構築中三次元モデルをリアルタイムに更新することで前記構築中三次元モデルを持続的に構築する工程と、
    を備えることを特徴とするクラウド型三次元モデル構築方法。
  8. 前記クライアント装置は、内蔵イメージキャプチャーまたは外部に接続される携帯型三次元スキャナーにより前記三次元オブジェクトデータを取得することを特徴とする請求項7に記載のクラウド型三次元モデル構築方法。
  9. 前記三次元モデルを画像と組み合わせることで三次元マッピングモデルを生成し、さらに前記三次元マッピングモデルの平面画像を生成することで、前記三次元マッピングモデルの平面画像をソーシャルプラットフォームに送信することを特徴とする請求項7に記載のクラウド型三次元モデル構築方法。
  10. 前記クライアント装置は、前記クライアント装置のインタラクティブインターフェースを介して前記三次元マッピングモデルの拡大縮小または視点変更を制御することを特徴とする請求項9に記載のクラウド型三次元モデル構築方法。
JP2014077686A 2013-10-16 2014-04-04 クラウド型三次元モデル構築システム及びその構築方法 Active JP5909615B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
TW102137272 2013-10-16
TW102137272A TWI625699B (zh) 2013-10-16 2013-10-16 雲端三維模型建構系統及其建構方法

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2015249688A Division JP2016103279A (ja) 2013-10-16 2015-12-22 クラウド型三次元モデル構築システム及びその構築方法

Publications (2)

Publication Number Publication Date
JP2015079482A JP2015079482A (ja) 2015-04-23
JP5909615B2 true JP5909615B2 (ja) 2016-04-27

Family

ID=49876511

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2014077686A Active JP5909615B2 (ja) 2013-10-16 2014-04-04 クラウド型三次元モデル構築システム及びその構築方法
JP2015249688A Pending JP2016103279A (ja) 2013-10-16 2015-12-22 クラウド型三次元モデル構築システム及びその構築方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2015249688A Pending JP2016103279A (ja) 2013-10-16 2015-12-22 クラウド型三次元モデル構築システム及びその構築方法

Country Status (5)

Country Link
US (1) US20150105889A1 (ja)
EP (1) EP2863364A1 (ja)
JP (2) JP5909615B2 (ja)
CN (1) CN104574499B (ja)
TW (1) TWI625699B (ja)

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150375455A1 (en) * 2014-06-27 2015-12-31 Amazon Technologies, Inc. Three-dimensional scanning watermark
CN105426590B (zh) * 2015-11-04 2021-06-29 中国电子科技集团公司第三十八研究所 一种机加工艺特征树及其构建方法
DE102015119806A1 (de) * 2015-11-16 2017-05-18 Grob-Werke Gmbh & Co. Kg Verfahren zur Darstellung der Bearbeitung in einer Werkzeugmaschine
CN105447913A (zh) * 2015-12-31 2016-03-30 青岛爱维互动信息技术有限公司 一种实体图纸和线上3d模型结合的互动系统
CN105643942A (zh) * 2016-03-21 2016-06-08 中广核研究院有限公司 基于三维扫描和3d打印的屏蔽材料制造方法及其系统
CN107305479A (zh) * 2016-04-21 2017-10-31 厦门三维天空信息科技有限公司 三维全彩在线打印扫描系统及其方法
US20180122134A1 (en) * 2016-11-02 2018-05-03 Htc Corporation Three-dimensional model construction system and three-dimensional model construction method
US10754323B2 (en) 2016-12-20 2020-08-25 General Electric Company Methods and systems for implementing distributed ledger manufacturing history
CN106934855B (zh) * 2017-03-20 2021-05-07 王凯 建筑3d模型构建方法及装置
SG10201913851QA (en) 2017-06-09 2020-03-30 Structo Pte Ltd Method and device for decentralised automated additive manufacturing
CN107256572A (zh) * 2017-06-26 2017-10-17 广州天翌云信息科技有限公司 一种三维动画制作方法
US11027535B2 (en) 2017-06-30 2021-06-08 General Electric Company Systems and method for advanced additive manufacturing
US10747202B2 (en) 2017-06-30 2020-08-18 General Electric Company Systems and method for advanced additive manufacturing
US10753955B2 (en) 2017-06-30 2020-08-25 General Electric Company Systems and method for advanced additive manufacturing
US11526150B2 (en) 2017-07-10 2022-12-13 Hewlett-Packard Development Company, L.P. Inferring object attributes
CN110832552A (zh) 2017-07-10 2020-02-21 惠普发展公司,有限责任合伙企业 转换对象数据模型以散布对象属性
US11969946B2 (en) 2018-02-12 2024-04-30 Structo Pte. Ltd. Automated additive manufacturing device and method
CN111161409B (zh) * 2019-12-27 2023-10-13 中国航空工业集团公司沈阳飞机设计研究所 一种飞机保障设备验证系统
CN112367514B (zh) 2020-10-30 2022-12-09 京东方科技集团股份有限公司 三维场景构建方法、装置、系统和存储介质
CN114581608B (zh) * 2022-03-02 2023-04-28 山东翰林科技有限公司 基于云平台的三维模型智能构建系统及方法

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002083318A (ja) * 2000-09-07 2002-03-22 Sony Corp 画像処理装置および方法、並びに記録媒体
US7747067B2 (en) * 2003-10-08 2010-06-29 Purdue Research Foundation System and method for three dimensional modeling
KR20070084277A (ko) * 2004-10-22 2007-08-24 비디에이터 엔터프라이즈 인크 모바일 3d그래피컬 메시징을 위한 시스템 및 방법
CN100547594C (zh) * 2007-06-27 2009-10-07 中国科学院遥感应用研究所 一种数字地球原型系统
JP5228565B2 (ja) * 2008-03-25 2013-07-03 マツダ株式会社 Cadシステム
US20120229449A1 (en) * 2010-11-08 2012-09-13 Eyelead Sa File structure and management in 3d authoring system
GB201102794D0 (en) * 2011-02-17 2011-03-30 Metail Ltd Online retail system
US8675049B2 (en) * 2011-06-09 2014-03-18 Microsoft Corporation Navigation model to render centered objects using images
US9083961B2 (en) * 2012-09-28 2015-07-14 Raytheon Company System for correcting RPC camera model pointing errors using 2 sets of stereo image pairs and probabilistic 3-dimensional models
US9437045B2 (en) * 2013-07-03 2016-09-06 Fuji Xerox Co., Ltd. Real-time mobile capture and application of photographic images as textures in three-dimensional models

Also Published As

Publication number Publication date
JP2015079482A (ja) 2015-04-23
TW201516959A (zh) 2015-05-01
JP2016103279A (ja) 2016-06-02
CN104574499A (zh) 2015-04-29
EP2863364A1 (en) 2015-04-22
CN104574499B (zh) 2018-05-18
TWI625699B (zh) 2018-06-01
US20150105889A1 (en) 2015-04-16

Similar Documents

Publication Publication Date Title
JP5909615B2 (ja) クラウド型三次元モデル構築システム及びその構築方法
CN109448099B (zh) 画面的渲染方法、装置、存储介质及电子装置
CN1489750A (zh) 景物的基于图象的数字表示
US11836866B2 (en) Deforming real-world object using an external mesh
US20150190970A1 (en) Texturing of 3d medical images
WO2022182660A1 (en) Whole body visual effects
CN114758108A (zh) 虚拟对象驱动方法、装置、存储介质及计算机设备
WO2022183175A1 (en) Whole body segmentation
US11973730B2 (en) External messaging function for an interaction system
WO2023230423A1 (en) Combining content in a preview state
CN109377553A (zh) 一种智能类生物对象的云控制方法和系统
JP2024014682A (ja) ブロックオブジェクトの設計図を出力する方法
JP6275759B2 (ja) 三次元コンテンツの生成方法、プログラム、及びクライアント装置
KR101751178B1 (ko) 스케치 서비스 제공 시스템 및 그 제공 방법
JP2009072274A (ja) 映像配信システム、サーバシステム、クライアントシステム、映像配信方法、及びプログラム
JP2007026088A (ja) モデル生成装置
TWI505176B (zh) 動畫製作之方法及裝置
JP7411294B1 (ja) ブロックオブジェクトの設計図を出力する方法
US20230177789A1 (en) Computer vision tools for creating augmented reality (ar) models
JP4859148B2 (ja) 3d文字メールシステム
KR20180089760A (ko) 3d 스케치 서비스 제공 시스템 및 그 제공 방법
WO2014108214A1 (en) Client-server system for a web-based furniture shop
JP2004102751A (ja) 3dデータ生成システム
Jovanova et al. Auto-production 3D Graphics Content for Mobile Communication
JP2018018485A (ja) 画像処理装置、表示システムおよびプログラム

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150727

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150811

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20151105

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20151124

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20151222

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20151222

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20151225

R150 Certificate of patent or registration of utility model

Ref document number: 5909615

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250