JP4161426B2 - 画像印刷装置及び画像印刷方法 - Google Patents
画像印刷装置及び画像印刷方法 Download PDFInfo
- Publication number
- JP4161426B2 JP4161426B2 JP27359598A JP27359598A JP4161426B2 JP 4161426 B2 JP4161426 B2 JP 4161426B2 JP 27359598 A JP27359598 A JP 27359598A JP 27359598 A JP27359598 A JP 27359598A JP 4161426 B2 JP4161426 B2 JP 4161426B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- parallax
- printing apparatus
- interpolated
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
- 238000007639 printing Methods 0.000 title claims description 252
- 238000000034 method Methods 0.000 title claims description 118
- 230000008859 change Effects 0.000 claims description 56
- 238000004891 communication Methods 0.000 claims description 33
- 238000003384 imaging method Methods 0.000 claims description 17
- 239000000463 material Substances 0.000 claims description 11
- 230000005540 biological transmission Effects 0.000 claims description 8
- 238000012545 processing Methods 0.000 description 90
- 230000008569 process Effects 0.000 description 63
- 238000010586 diagram Methods 0.000 description 30
- 230000003287 optical effect Effects 0.000 description 30
- 238000006243 chemical reaction Methods 0.000 description 16
- 238000000605 extraction Methods 0.000 description 16
- 230000007246 mechanism Effects 0.000 description 15
- 230000006870 function Effects 0.000 description 14
- 238000012790 confirmation Methods 0.000 description 12
- 239000004973 liquid crystal related substance Substances 0.000 description 11
- 238000005286 illumination Methods 0.000 description 7
- 239000002131 composite material Substances 0.000 description 6
- 230000015572 biosynthetic process Effects 0.000 description 5
- 238000004364 calculation method Methods 0.000 description 5
- 238000007599 discharging Methods 0.000 description 5
- 238000003786 synthesis reaction Methods 0.000 description 5
- 230000002194 synthesizing effect Effects 0.000 description 5
- 230000005236 sound signal Effects 0.000 description 3
- 238000013461 design Methods 0.000 description 2
- 238000011049 filling Methods 0.000 description 2
- 239000010408 film Substances 0.000 description 2
- 238000003780 insertion Methods 0.000 description 2
- 230000037431 insertion Effects 0.000 description 2
- 238000003672 processing method Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- XKRFYHLGVUSROY-UHFFFAOYSA-N argon Substances [Ar] XKRFYHLGVUSROY-UHFFFAOYSA-N 0.000 description 1
- 229910052786 argon Inorganic materials 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 230000004069 differentiation Effects 0.000 description 1
- 210000005069 ears Anatomy 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 210000001508 eye Anatomy 0.000 description 1
- 210000004709 eyebrow Anatomy 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 229910052743 krypton Inorganic materials 0.000 description 1
- DNNSSWSSYDEUBZ-UHFFFAOYSA-N krypton atom Chemical compound [Kr] DNNSSWSSYDEUBZ-UHFFFAOYSA-N 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000002156 mixing Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 210000000214 mouth Anatomy 0.000 description 1
- 210000001331 nose Anatomy 0.000 description 1
- 238000011017 operating method Methods 0.000 description 1
- 230000001737 promoting effect Effects 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 238000000859 sublimation Methods 0.000 description 1
- 230000008022 sublimation Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 239000010409 thin film Substances 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
- 239000013598 vector Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F15/00—Digital computers in general; Data processing equipment in general
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
- G03H1/00—Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
- G03H1/26—Processes or apparatus specially adapted to produce multiple sub- holograms or to obtain images from them, e.g. multicolour technique
- G03H1/268—Holographic stereogram
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/18—Image warping, e.g. rearranging pixels individually
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/207—Image signal generators using stereoscopic image cameras using a single 2D image sensor
- H04N13/211—Image signal generators using stereoscopic image cameras using a single 2D image sensor using temporal multiplexing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/296—Synchronisation thereof; Control thereof
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
- G03H1/00—Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
- G03H1/26—Processes or apparatus specially adapted to produce multiple sub- holograms or to obtain images from them, e.g. multicolour technique
- G03H1/268—Holographic stereogram
- G03H2001/2685—One step recording process
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
- G03H1/00—Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
- G03H1/26—Processes or apparatus specially adapted to produce multiple sub- holograms or to obtain images from them, e.g. multicolour technique
- G03H1/268—Holographic stereogram
- G03H2001/2695—Dedicated printer
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
- G03H2210/00—Object characteristics
- G03H2210/40—Synthetic representation, i.e. digital or optical object decomposition
- G03H2210/44—Digital representation
- G03H2210/441—Numerical processing applied to the object data other than numerical propagation
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
- G03H2210/00—Object characteristics
- G03H2210/50—Nature of the object
- G03H2210/54—For individualisation of product
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Computer Hardware Design (AREA)
- Image Processing (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Image Analysis (AREA)
- Stereoscopic And Panoramic Photography (AREA)
- Processing Or Creating Images (AREA)
Description
【発明の属する技術分野】
本発明は、複数の視差画像を記録媒体に記録して3次元像を再現する画像印刷装置及び画像印刷方法に関し、特に視差画像間の形状変化を補間して記録する画像印刷装置及び画像印刷方法に関する。
【0002】
【従来の技術】
画像印刷装置には、撮影した被写体の画像情報と文字や図形等の情報とを合成して得られる2次元画像情報を、モニタにより視認し、所望とする構図が定まったときの2次元画像情報を印刷物に印刷するものがある。このような画像印刷装置としては、例えば登録実用新案第3014733号公報に記載の映像プリント供給装置がある。
【0003】
このような画像印刷装置は、例えば図30に示すような構成からなり、筐体306の内部に、被写体を撮影する撮影装置301と、撮影装置301によって撮影された画像を記録して印刷する印刷装置302と、撮影装置301によって撮影された画像をハーフミラー303を介して表示する表示装置304と、撮影装置301によって撮影された画像に合成するタイトル等の情報を記憶する記憶部305等を備えている。
【0004】
この画像印刷装置300は、撮影装置301によって撮影した被写体の2次元画像を、1枚のシール又は例えば16枚の同じ絵柄に分割した複数枚のシールとして、1枚のシートに印刷して出力することができる。
【0005】
【発明が解決しようとする課題】
ところで、上述した従来の画像印刷装置300においては、撮影装置301によって1回又は連続撮影した2次元画像を、印刷装置302によってそのまま印刷することから、出力されたシールが同じ絵柄ばかりになってしまうといった問題があり、娯楽性を低下させる要因となっていた。
【0006】
また、従来の画像印刷装置300においては、撮影装置301によって複数回の連続撮影を行うことで、複数の絵柄の2次元画像が得られるように構成されているものもあるが、画像間の相関性が少なく、例えば時系列に並べても娯楽性が少なかった。
【0007】
さらに、従来の画像印刷装置300においては、印刷の待ち時間の間、出力される画像が表示装置304に映し出され、使用者がシールの出来上がりを予想することができる。しかしながら、画像印刷装置300においては、この表示される画像が同一の静止画であることから、使用者に対して、印刷の待ち時間中の娯楽を十分に提供することができなかった。
【0008】
さらにまた、従来の画像印刷装置300は、2次元画像を、シール等に2次元情報として印刷するものであり、この画像印刷装置300のように手軽に利用することができるシステムとして、3次元情報を記録するようなものは存在していなかった。
【0009】
本発明は、このような実情に鑑みてなされたものであり、従来の画像印刷装置300の娯楽性を低下させる要因を解決して、より娯楽性の高い画像印刷装置及び画像印刷方法を提供することを目的とするものである。
【0010】
【課題を解決するための手段】
上述した目的を達成する本発明にかかる画像印刷装置は、物体を互いに異なる複数の視点から捉えた複数枚の視差画像からなる視差画像列から、3次元像が再現される印刷物を作成する画像印刷装置である。本発明にかかる画像印刷装置は、複数組の視差画像列を構成する画像間の形状変化を補間して補間画像を生成し、これらの補間画像を含みかつ視差情報を有する補間視差画像列を生成する補間手段と、この補間手段により生成された補間視差画像列を構成する各画像を記録媒体に記録することにより、3次元像が再現される印刷物を作成する印刷手段とを備えることを特徴としている。
【0011】
以上のように構成された本発明にかかる画像印刷装置は、複数組の視差画像列を構成する画像間の形状変化を補間して、得られた補間視差画像列に基づく3次元像が再現される印刷物を作成する。
【0012】
また、本発明にかかる画像印刷装置は、物体の互いに異なる複数の視点からの撮影を複数回行って、物体を互いに異なる複数の視点から撮影した複数枚の視差画像からなる視差画像列を複数組生成する撮影手段を備えることを特徴としている。
【0013】
以上のように構成された本発明にかかる画像印刷装置は、物体を複数回撮影して、得られた複数組の視差画像列を構成する画像間の形状変化を補間する。
【0014】
さらに、本発明にかかる画像印刷装置は、補間手段による補間に必要な情報を入力するための入力手段と、画像を表示する表示手段とを備え、入力手段は、アナログ量が入力可能であり、補間手段は、補間の度合いを変化させた複数組の補間視差画像列を生成可能であり、表示手段は、入力手段により入力された情報に応じて視差画像列を構成する画像間の形状変化の補間の度合いを変化させて得られた補間画像を表示することを特徴としている。
【0015】
以上のように構成された本発明にかかる画像印刷装置は、入力された情報に応じて補間の度合いを変化させた補間画像を表示することができる。
【0016】
さらにまた、本発明にかかる画像印刷装置は、物体を撮影する撮影手段と、視差画像列が記憶された記憶手段とを備え、補間手段は、補間視差画像列のもととなる複数組の視差画像列として、撮影手段により物体を互いに異なる複数の視点から撮影することによって得られた複数枚の視差画像からなる視差画像列と、記憶手段に記憶されている視差画像列とを用いることを特徴としている。
【0017】
以上のように構成された本発明にかかる画像印刷装置は、物体を撮影して得られた視差画像列ばかりでなく、記憶された視差画像列に対しても形状変化を補間する。
【0020】
さらに、本発明にかかる画像印刷装置は、物体を撮影する撮影手段と、画像を表示する表示手段とを備え、補間手段による補間の対象となる視差画像列のうちの少なくとも1つは、撮影手段により物体を互いに異なる複数の視点から撮影することによって得られた複数枚の視差画像からなる視差画像列であり、表示手段は、撮影手段による物体の撮影に先立って、物体を配すべき位置を案内する撮影目安画像を表示することを特徴としている。
【0021】
以上のように構成された本発明にかかる画像印刷装置は、撮影目安画像を表示することによって、画像間の物体の位置や、各画像に映る物体の大きさをそろえることができる。
【0022】
本発明にかかる画像印刷方法は、物体を互いに異なる複数の視点から捉えた複数枚の視差画像からなる視差画像列から、3次元像が再現される印刷物を作成する画像印刷方法である。本発明にかかる画像印刷方法は、複数組の視差画像列を構成する画像間の形状変化を補間して補間画像を生成し、これらの補間画像を含みかつ視差情報を有する補間視差画像列を生成し、この補間視差画像列を構成する各画像を記録媒体に記録することにより、3次元像が再現される印刷物を作成することを特徴としている。
【0023】
以上のような本発明にかかる画像印刷方法は、複数組の視差画像列を構成する画像間の形状変化を補間して、得られた補間視差画像列に基づいて3次元像を再現する印刷物を作成する。
【0024】
また、本発明にかかる画像印刷方法は、物体の互いに異なる複数の視点からの撮影を複数回行い、物体を互いに異なる複数の視点から撮影した複数枚の視差画像からなる視差画像列を複数組生成することを特徴としている。
【0025】
以上のような本発明にかかる画像印刷方法は、物体を複数回撮影し、得られた複数組の視差画像列を構成する画像間の形状変化を補間する。
【0026】
さらに、本発明にかかる画像印刷方法は、補間の度合いを変化させた複数組の補間視差画像列を生成し、外部から入力された情報に応じて視差画像列を構成する画像間の形状変化の補間の度合いを変化させて得られた補間画像を表示手段に表示することを特徴としている。
【0027】
以上のような本発明にかかる画像印刷方法は、外部から入力された情報に応じて補間の度合いを変化させた補間画像を表示手段に表示することができる。
【0028】
さらにまた、本発明にかかる画像印刷方法は、補間視差画像列のもととなる複数組の視差画像列として、物体を互いに異なる複数の視点から撮影することによって得られた複数枚の視差画像からなる視差画像列と、記憶手段に記憶されている視差画像列とを用いることを特徴としている。
【0029】
以上のような本発明にかかる画像印刷方法は、物体を撮影して得られた視差画像列同士のみではなく、記憶手段に記憶された視差画像列に対しても形状変化を補間する。
【0032】
さらに、本発明にかかる画像印刷方法は、補間の対象となる視差画像列のうちの少なくとも1つは、物体を互いに異なる複数の視点から撮影することによって得られた複数枚の視差画像からなる視差画像列であり、物体の撮影に先立って、物体を配すべき位置を案内する撮影目安画像を表示手段に表示することを特徴としている。
【0033】
以上のような本発明にかかる画像印刷方法は、撮影目安画像を表示手段に表示することによって、画像間の物体の位置や、各画像に映る物体の大きさをそろえることができる。
【0034】
【発明の実施の形態】
以下、本発明を適用した具体的な実施の形態について図面を参照しながら詳細に説明する。
【0035】
本発明を適用した実施の形態は、複数の画像間の形状変化を補間する技術として、画像の加工技術の1つであるモーフィング技術を利用するものである。そこで、このモーフィング技術について説明する。
【0036】
モーフィング(morphing)は、ある画像が別の画像へと変化する際に、これらの画像間の空白を埋めることによって、画像が徐々に変化するように見せる技術である。すなわち、モーフィングは、例えば、図1(A)に示すように、六角形を表す画像が三角形を表す画像に変化する場合において、図1(B)に示すように、六角形と三角形との間の形状を補間して、形状の変化が少しずつ進行するように見せるものである。
【0037】
また、このモーフィングに類似した技術として、トウィーニング技術がある。このトウィーニング(tweening)は、ある画像の一部又は全部が回転・並進移動して画像が変化する際に、これらの画像間の空白を埋めることによって、徐々に移動しているように見せる技術である。すなわち、トウィーニングは、例えば、図2(A)に示すように、三角形が時計方向に90゜回転する場合において、図2(B)に示すように、回転途中の三角形を補間して、移動が少しずつ進行するように見せるものである。このトウィーニングを、上述したモーフィングに含めて、モーフィングと称することもある。
【0038】
つぎに、モーフィング技術のより具体的な説明として、カメラ等により撮影して得られた2枚のラスタ画像に対するモーフィング技術について説明する。
【0039】
2枚のラスタ画像に対するモーフィング処理は、2枚の画像を、要素となる複数の領域に分割して行われる。このモーフィング処理においては、ワープ(warping)と呼ばれる、対応する領域間での幾何形状変換と、ディゾルブ(dissolve)と呼ばれる、重み付け加算による画像の演算とを行うことで、複数の画像が融合したように見える中間の画像を生成することができる。
【0040】
この例として、2枚の画像からのモーフィング処理について、図3乃至図6を用いて説明する。
【0041】
モーフィング処理は、例えば、図3(A)及び図3(B)に示すような2枚の画像を対象として行う。まず、モーフィング処理においては、この対象となる2枚の画像の間で、対応する特徴点を与え、この特徴点をモーフィング処理における幾何形状変換や重み付け加算等の変化の起点及び終点とする。この特徴点のデータの表示方法としては、コントロール線(制御線)と呼ばれる特徴点を線分で結ぶ方法、特徴点を結んで生成される三角形や四角形等の多角形からなる領域として示す方法等がある。
【0042】
また、対象となる画像からの特徴点の抽出方法としては、使用者が画像を見ながら指示する方法、予め固定されたコントロール線や領域を用意しておく方法、対象となる画像に画像処理を行って特徴点を抽出する方法等がある。画像処理を行って特徴点を抽出する方法の例としては、対象となる画像に微分処理や輪郭抽出処理、テンプレートとの相関処理、ハフ変換処理、重心計算処理等の画像処理を組み合わせることがある。さらに、対象画像が人間の顔面であるといった限定を与えることにより、眉、目、鼻、口、耳、髪型、顔型等を基本要素として、特徴点を抽出することができる。
【0043】
図3に示した2枚の画像の特徴点のデータを、多角形からなる領域として表示した例として、図4を示す。特徴点は、図4(B)及び図4(D)に示すように、例えば三角形からなる複数の領域として表示されるとともに、図4(A)及び図4(C)に示すように、目や口等の画像における特徴を表す点を抽出したものになっている。
【0044】
そして、モーフィング処理においては、図4に示すような2枚の画像のそれぞれに与えられた対応する特徴点を、起点及び終点として、幾何形状変換と画像データの重み付け加算を行うことで、2枚の画像の中間となる画像が得られる。このとき、2枚の画像の起点と終点の状態を、変化率における0状態と1状態として、この変化率を幾何形状変換と画像データの重み付け加算における重み付けとすることで、2枚の画像の混合比率を与えることができる。
【0045】
すなわち、モーフィング処理においては、例えば、図5に示すように、三角形の頂点となっている特徴点について、図5(A)及び図5(C)に示す2枚の画像間での移動ベクトルに変化率を掛けることによって、幾何形状変換への重み付けを行い、中間の画像を得ることができる。また同様に、モーフィング処理においては、図5(A)及び図5(C)に示す2枚の画像間での画像データの重み付け加算を行うことによって、図5(B)に示す変化率0.5の画像を得ることができる。
【0046】
このように、モーフィング処理においては、2枚の画像の中間画像を生成することができる。
【0047】
また、モーフィング処理においては、変化率を変化させることによって、複数の変化率を有する画像列を得ることができる。例えば、図6に示すように、2枚の平面画像である原画像Aと原画像Bとのモーフィング処理において、変化率を0乃至1の間で変化させることによって、複数枚の画像からなる画像列Pを生成することができる。ここで、画像P1及びP2は、それぞれ変化率が0の場合と1の場合とに等しく、原画像A及びBと同一のものであるとする。この画像列Pの諸画像を、例えば、後述するホログラフィックステレオグラムを作成する要領で、記録媒体に記録することにより、見る方向によってモーフィングが変化する平面画像を観察することができ、この平面画像は、例えば、左から観察すると、原画像Aが観察され、右へ移動していくにつれ形状が変化していき、右から観察すると、原画像Bが観察される。
【0048】
このようにして、モーフィング処理においては、2枚の画像から複数の中間画像からなる画像列を生成することができる。
【0049】
つぎに、3次元像の場合のモーフィング処理について、図7乃至図9を参照して説明する。この場合のモーフィング処理については、視差画像列である原画像列を構成する原画像の数と、処理結果となる画像の数とに応じて、3種類の処理方法が考えられる。
【0050】
まず、図7に示すように、原画像列が2組ある場合について説明する。これらの原画像列A及びBは、3次元像を再現するためのもととなる視差画像列であり、水平視差又は垂直視差を与えるものである。この場合は、2組の原画像列A及びBの、対応する画像毎に変化率を変化させながらモーフィング処理を行うことにより、モーフィング処理を加えられた視差画像列Pが生成される。例えば、n枚の視差画像A1,A2,・・・,An、B1,B2,・・・,Bnからなる2組の原画像列A及びBの各視差画像1対毎に、0乃至1のいずれかの変化率を順次割り当てて、n枚の視差画像列Pを生成する。そして、この視差画像列Pをもとに3次元像を再現することにより、例えば、左から観察すると原画像列Aから再現される3次元像が観察され、右から観察すと原画像列Bから再現される3次元像が観察されるように、観察する方向によってモーフィングが変化する3次元像を観察することができる。
【0051】
続いて、図8に示すように、視差画像列である原画像列が2組あり、それらの原画像列が水平視差又は垂直視差を与えるものであり、それらをもとにして再現した3次元像が水平視差及び垂直視差の両方を有するものである場合について説明する。この場合も、2組の原画像列A及びBの、対応する画像毎に変化率を変化させながらモーフィング処理を行うことにより、モーフィング処理を加えられた視差画像列Pが生成される。例えば、n枚の視差画像A1,A2,・・・,An、B1,B2,・・・,Bnからなる2組の原画像列A及びBの各視差画像1対毎に、0乃至1の変化率をm枚分だけ割り当てて、m×n枚の視差画像列Pを生成する。そして、この視差画像列Pをもとに3次元像を再現することにより、例えば、水平方向に動くと単なる3次元像が観察されるが、上下方向に動くと原画像列Aと原画像列Bとのモーフィングされた3次元像が観察されるといったように、観察する方向によってモーフィングが変化する3次元像を観察することができる。
【0052】
第3の処理方法として、図9に示すように、水平視差及び垂直視差の両方を有する原画像列が2組あり、それらをもとに再現した3次元像が水平視差及び垂直視差の両方を再現可能な場合について説明する。この場合も上述した2つの方法の場合と同様に、2組の原画像列A及びBの、対応する画像毎に変化率を変化させながらモーフィング処理を行うことにより、モーフィング処理を加えられた視差画像列Pが生成される。例えば、m×n枚の視差画像A11,A12,・・・,Amn、B11,B12,・・・,Bmnからなる2組の原画像列A及びBの各視差画像1対毎に、0乃至1の変化率を水平又は垂直又は斜め方向に順次割り当てて、m×n枚の視差画像列Pを生成する。そして、この視差画像列Pをもとに3次元像を再現することにより、例えば、左上から観察すると原画像列Aの3次元像が観察され、右下から観察すると原画像列Bの3次元像が観察されるといった具合に、観察する方向によってモーフィングが変化するような3次元像を観察することができる。
【0053】
以上のような処理を行うことによって、モーフィング処理においては、3次元像の形状変化をも補間することができる。
【0054】
また、モーフィング処理は、2枚の画像間だけでなく、3枚以上の画像で連続して変化するような中間画像を生成することもできる。すなわち、モーフィング処理は、例えば、図10に示すように、A,B,C,Dの4枚の画像から、連続して変化する中間画像AB,BC,CDを生成することができる。このような連続モーフィング処理においては、順序づけられた4枚の画像間で順番に変化率を0から1に変化させることによって、中間画像を生成する。
【0055】
以上に説明したようなモーフィング技術を利用した第1の実施の形態として図11に示す画像印刷装置1は、装置の制御全般を行う制御部10と、被写体を撮影する撮影部30と、画像を表示する表示部40と、画像を記録媒体に記録して印刷物を作成する印刷部50と、被写体を照明する照明部60と、支払われた対価を受収する料金受収部70と、画像データを記憶する外部記憶部80と、外部機器との通信を行う通信部90と、装置の操作を行う操作部100等を備える。これらのうち制御部10と、撮影部30と、表示部40と、印刷部50と、料金受収部70とは、筐体110の内部に収納されており、外部記憶部80は、制御部10とユニット化されている。
【0056】
制御部10は、図示しない装置制御部と画像処理部とを備える。装置制御部は、画像印刷装置1における他の部分との間で制御信号を入出力して、画像印刷装置1全体の制御を行う。一方、画像処理部は、後述する撮影部30によって撮影して得た画像データや、画像処理部内に備えられるメモリ等の記憶部又は後述する外部記憶部80に保存されている画像データや、プログラム等の描画手続きにより描画された画像データ等に、合成処理やモーフィング処理を施す。また、画像処理部は、上述した各画像データが視差画像列データを構成する場合には、後述するように、この視差画像列データから3次元像を再現するのに適した画像データに変換するためのいわゆる視点変換処理を行う。画像処理部は、これらの画像データを後述する撮影部30、表示部40、印刷部50、通信部90等との間で入出力する。
【0057】
撮影部30は、ハーフミラー等によって構成される表示撮影光学系部111を介して、撮影窓112に臨む被写体の画像を撮影する。この撮影部30は、カメラ等を移動させる送り台等により構成される視差撮影機構32を備えており、被写体の視差画像を撮影することができる。撮影部30によって撮影された画像は、上述した画像処理部又は後述する表示部40へと送信される。
【0058】
表示部40は、撮影部30によって撮影した画像や、上述した画像処理部によって合成処理又は描画処理された画像を表示する。使用者は、表示部40により表示された画像を、表示撮影光学系部111を介して、若しくは、表示部40に備えられる後述するCRTモニタ42の表示面から直接見ることができる。また、表示部40は、制御部10より出力される音声信号を音として発生する機能を備えている。したがって、画像印刷装置1においては、使用者が表示部40により表示される画像以外にも、音声により情報を得ることができる。
【0059】
印刷部50は、画像処理部によって、合成処理や描画処理、モーフィング処理された画像を視点変換処理して得られた画像を、記録媒体に記録する。画像印刷装置1においては、この印刷部50より排出された印刷物を、使用者が受け取ることができる。
【0060】
照明部60は、被写体の画像を撮影するために必要となる被写体の照明を行う機能を備える。
【0061】
料金受収部70は、画像印刷装置1を使用するために支払われた対価を受収するものである。この料金受収部70は、装置制御部の制御のもとに、紙幣や硬貨等の貨幣や、貨幣に代わるコイン、キャッシュカード又はクレジットカード、プリペイドカード、通信ネットワークを介した電子マネー等の信用貨幣を受け付けて、料金の受収を行い、釣り銭やカードの返却を行う。また、料金受収部70は、貨幣を回収するまでの保管機能も備えている。
【0062】
外部記憶部80は、例えばハードディスク等の記憶装置から構成され、画像データを保存する機能を備える。外部記憶部80は、画像処理部によって処理される又は処理された画像データを保存する。
【0063】
通信部90は、制御部10との間で信号を入出力して、外部機器との通信を行う。
【0064】
操作部100は、画像印刷装置1を使用するために操作する部分であり、各種の操作装置を備えている。
【0065】
上述した機能を備える画像印刷装置1について、図12を用いてより詳細に説明する。
【0066】
画像印刷装置1においては、図12に示すように、上述した各部が構成されている。
【0067】
制御部10において、CPU11は、汎用コンピュータに搭載されているものと同様な機能を有するものである。CPU11は、装置全体の制御とモーフィング処理や視点変換処理を含む画像データの演算処理を行う。画像印刷装置1においては、このようにCPU11を備えることによって、上述した装置制御部と画像処理部との機能を、1つの制御部10に備えることができる。
【0068】
メモリ12は、CPU11若しくは後述するシステムコントローラ14の指示により、情報の書き込み・読み出しを行う記憶部分であって、例えばDRAM(Dynamic Random Access Memory)等を用いる。そして、メモリ12は、システムコントローラ14を通じてCPU11や、後述するホストバス15やPCIバス16等のコンピュータバス上の各種資源に接続されて、情報を記憶することができる。勿論、メモリ12は、画像データを記憶することも可能である。
【0069】
キャッシュ13は、CPU11が頻繁にアクセスするメモリ12内の情報を記憶する高速の記憶部であり、ホストバス15を介してCPU11と直接情報を授受することにより、システムの高速化を図ることができるものである。
【0070】
システムコントローラ14は、CPU11と、メモリ12、キャッシュ13、ホストバス15やPCIバス16等のコンピュータバスのタイミング調整等を行うものである。
【0071】
ホストバス15は、CPU11に直接接続された情報の伝達手段であって、キャッシュ13、システムコントローラ14等と高速に情報授受ができるようになっている。
【0072】
PCIバス16は、ホストバス15と分離された情報の伝達手段であって、システムコントローラ14に接続されている。CPU11は、このシステムコントローラ14を介して、PCIバス16に接続された各種資源にアクセスできるようになっている。
【0073】
画像取込制御部17は、PCIバス16と撮影部30との間に接続される。画像取込制御部17は、撮影部30によって撮影した視差画像を制御部10で処理可能とするために、CPU11等の指示に基づいて、画像データとして取り込む。この画像取込制御部17は、例えば撮影部30から出力されたNTSC信号をY/C分離した後、RGB信号に変換し、このRGB信号をA/D変換することにより画像データとして取り込む。また、画像取込制御部17は、撮影部30においてデジタル信号化された画像データを、例えば、RS−232Cやセントロニクス準拠のパラレル信号、SCSI等のインターフェースを介して取り込む。
【0074】
撮影部制御部18は、PCIバス16と撮影部30との間に接続される。撮影部制御部18は、CPU11等の指示に基づいて、撮影開始や視差画像撮影のためのカメラの移動等の撮影部30への動作指示の制御信号を送るとともに、カメラの絞りや移動量等の撮影部30からの動作状況の制御信号を受け取る。
【0075】
ビデオコントローラ19は、PCIバス16と表示部40との間に接続され、CPU11等の指示に基づいて、画像、図形、文字等の情報を、内部の図示しないビデオメモリ上に描画し、その内容を表示部40へ出力する。勿論、ビデオコントローラ19は、内部のビデオメモリに画像データを記憶することも可能である。また、ビデオコントローラ19は、表示部40のCRTモニタ42との間で、例えばVESA DDC(Display Data Channel)規格のように信号線の一部を用いて、CRTモニタ42が記憶しているデバイスの特性情報等を授受することができる。
【0076】
表示部制御部20は、PCIバス16と表示部40との間に接続され、CPU11等の指示に基づいて、表示開始や入力切り換え等の表示部40への動作指示の制御信号を送るとともに、CRTモニタ42のデバイスの特性情報等の表示部40からの動作状況の制御信号を受け取る。
【0077】
音声出力制御部21は、PCIバス16と表示部40との間に接続され、CPU11等の指示に基づいて、音声の情報を発音可能な音声信号として表示部40に出力する。音声出力制御部21は、例えば32kHzでサンプリングされた8ビットの音声データを、D/A変換してアナログ信号として出力する。
【0078】
画像出力制御部22は、PCIバス16と印刷部50との間に接続され、CPU11等の指示に基づいて、撮影部30によって撮影して得た視差画像列データや、制御部10においてモーフィング処理や視点変換処理がなされた視差画像列データを、3次元像を再現するための画像データに変換して印刷部50に出力する。画像出力制御部22は、例えば、後述するように、ホログラフィックステレオグラムとして画像データをホログラム用の記録媒体151に記録するときには、視点変換処理された画像データを、D/A変換することによりRGB信号に変換し、このRGB信号を、印刷部50の入力切換器51を介して、ホログラフィックステレオグラムを作成する装置に出力する。また、画像出力制御部22は、例えば、レンチキュラレンズによるステレオグラムや、フライアイレンズによるインテグラルフォトグラフィに用いる画像を記録する場合には、画像データを、例えば、セントロニクス準拠のパラレル信号、SCSI等のインターフェースを介してデジタル信号として印刷部50に出力する。
【0079】
印刷部制御部23は、PCIバス16と印刷部50との間に接続され、CPU11等の指示に基づいて、記録開始や入力切り換え、印刷の各ステップ開始等の印刷部50への動作指示の制御信号を送るとともに、記録の各ステップの動作状況や印刷完了等の印刷部50からの動作状況の制御信号を受け取る。
【0080】
照明部制御部24は、PCIバス16と照明部60との間に接続され、CPU11等の指示に基づいて、照明開始等の照明部60への動作指示の制御信号を送るとともに、照明器具の電流・電圧・電力量や、照明の明るさ・色合い等の照明部60からの動作状況の制御信号を受け取る。
【0081】
料金受収部制御部25は、PCIバス16と料金受収部70との間に接続され、PCIバス16を介した双方の情報アクセス要求に基づいて、料金受け入れ開始や信用貨幣カードの読み取り開始等の料金受収部70への動作指示の制御信号を送るとともに、受け入れた額面や信用貨幣カード内の情報、貨幣保管量等の料金受収部70からの動作状況の制御信号を受け取る。
【0082】
外部記憶部制御部26は、PCIバス16と外部記憶部80との間に接続され、CPU11等の指示に基づいて、例えばハードディスクや磁気テープ等の媒体内の所定の領域に対する情報の書き込み・読み出しの制御を行う。外部記憶部制御部26は、例えば、SCSIや、IEEE1394等により外部記憶部80と接続される。
【0083】
通信部制御部27は、PCIバス16と通信部90との間に接続され、装置内の各部からの情報アクセス要求や、通信相手の情報アクセス要求に基づいて、情報の送信、受信の制御を行う。勿論、通信部制御部27は、画像データ等のデータを送受信することが可能である。
【0084】
操作部制御部28は、PCIバス16と操作部100との間に接続され、CPU11等の指示に基づいて、例えば、使用者が操作した後述する押しボタン101、テンキー102、レバー103、ジョイスティック104、回転ボリウム105等の操作部100の状態を制御信号として受け取る。また、操作部制御部28は、操作部100が、例えば使用者に対して反発力等の感覚を体感させる機能を有する場合には、操作部100への動作指示の制御信号を送る。さらに、操作部制御部28には、操作部100が例えば押しボタン101のようにON−OFF等のデジタル量しか入力できないものであった場合に、その押しボタン101を押した回数や押している時間等の操作状態の情報が送られる。CPU11は、操作部制御部28より送信されたこの操作状態の情報に基づいて、アナログ量への変換のための演算を行う。なお、このアナログ量への変換のための演算は、操作部100によって行うようにしてもよい。
【0085】
以上のような機能を備える制御部10は、画像処理の演算や、以後説明する各部の制御等を行う。
【0086】
撮影部30は、CCD(Charge Coupled Device)撮像素子とそれによって撮影された画像を信号化する回路とを含むCCDカメラ31と、視差画像を撮影するためにCCDカメラ31を移動させる機構である視差撮影機構32とによって構成される。CCDカメラ31は、NTSC信号等のアナログ信号や、デジタル信号化された画像データを、例えば、RS−232Cやセントロニクス準拠のパラレル信号、SCSI等のインターフェースを介して出力する。また、視差撮影機構32は、例えば、図示しないステッピングモータ等により駆動される送り台等により構成され、この送り台に載置又は接続されたCCDカメラ31を移動させる。
【0087】
表示部40は、例えば、撮影部30によって得た画像をそのまま表示したり、装置内で生成された画像を表示したりする等、表示する画像の入力信号を切り換える入力切換器41と、入力された画像信号を表示面に表示するCRTモニタ42と、入力された音声信号を発音するスピーカ43とを備える。ここで、表示部40に入力される画像信号は、NTSC信号やRGB信号等のアナログ信号、GVIFやVESAのFPDI等のデジタル信号化されたものであってもよい。また、画像信号を表示する装置をCRTモニタ42として説明したが、例えば、直視型TFT液晶表示素子(Thin−Film Transistor−Liquid Crystal Display、TFT−LCD)やプラズマ映像表示素子(Plasma Display Panel、PDP)、LCDやDMD(Digital Micro−mirror Device)等を用いたプロジェクタ型表示装置、虚像型表示装置であってもよい。
【0088】
印刷部50は、印刷する画像の入力信号を切り換える入力切換器51と、入力された画像を記録媒体に記録する立体画像プリンタ52とを備える。印刷物50は、RGB信号等のアナログ信号、デジタル信号化された画像データを、例えば、セントロニクス準拠のパラレル信号、SCSI、IEEE1394、USB等のインターフェースを介して入力して記録媒体への記録を行う。ここで、立体画像プリンタ52としては、例えば、ホログラフィックステレオグラムを作成する場合には、図13及び図14に示すホログラフィックステレオグラム作成装置150が用いられる。ホログラフィックステレオグラム作成装置150には、視点変換処理された画像データがRGB信号として入力され、このRGB信号に基づく物体光をホログラム用の記録媒体151に要素ホログラムとして記録する。また、立体画像プリンタ52は、例えば、レンチキュラレンズによるステレオグラムや、フライアイレンズによるインテグラルフォトグラフィに用いる画像を記録する場合には、デジタル信号化された画像データを例えばセントロニクス準拠のパラレル信号によって入力し、昇華熱転写方式、熱バブルやピエゾ素子を用いたインクジェット方式、トナーを用いた電子写真方式等により印刷物を作成するものとなる。この場合、作成された印刷物には、レンチキュラレンズシートやフライアイレンズシートが貼り付けられる。
【0089】
照明部60は、被写体の照明に必要な蛍光灯61、白熱灯62等の照明器具と、必要に応じて、これら照明器具の発光状態(明るさ、色度等)を検知するための光センサ63とを備える。この照明部60において例えば蛍光灯61により被写体を照明する際に、蛍光灯61は、その駆動電源の駆動周波数が、上述したCCDカメラ31のシャッタスピードに同期したものになるか、若しくはインバータ等により高周波駆動される。また、照明部60は、必ずしも照明器具の発光状態を検知するための光センサ63を独立して備えなくてもよい。この場合、画像印刷装置1においては、光センサ63に代わる機能として、例えばCCDカメラ31によって撮影した画像の明るさが、照明器具の点灯指示信号の前後で変化するか否かをCCDカメラ31によって判別させるようにしてもよい。
【0090】
料金受収部70は、貨幣受入排出器71と貨幣選別器72と貨幣保管部73とを備え、その他、信用貨幣受入排出器74と信用貨幣選別器75とを備える。貨幣受入排出器71は、紙幣や硬貨等の貨幣又は貨幣に代わるコインが投入され、貨幣の投入を貨幣選別器72及び/又は料金受収部制御部25へ通知する。また、貨幣受入排出器71は、貨幣の返却及び釣り銭の返却も行う。貨幣選別器72は、受け入れた貨幣の額面を検知して、受け入れた額面等を料金受収部制御部25へ通知する。信用貨幣受入排出器74は、キャッシュカードやクレジットカード、プリペイドカード等の信用貨幣の受け入れ、排出を行う。信用貨幣受入排出器74は、信用貨幣の投入を信用貨幣選別器75及び/又は料金受収部制御部25へ通知する。また、信用貨幣受入排出器74は、信用貨幣の返却も行う。信用貨幣選別器75は、受け入れた信用貨幣の種別や信用貨幣に記録されているカード番号、残額等の記録情報を読み取り、料金受収部制御部25へ通知する。また、信用貨幣選別器75は、必要に応じて料金受収部制御部25からの信号により、信用貨幣に記録されている残額等の記録情報を書き換える。貨幣保管部73は、投入されて受け入れられた貨幣等を保管するものであり、保管された貨幣は、後で回収することができるように構成されている。
【0091】
外部記憶部80は、フロッピーディスクドライブ81やハードディスクドライブ82、CD−ROMドライブ83、光磁気ディスクドライブ84、磁気テープドライブ85等を備える。なお、この外部記憶部80は、画像印刷装置1に固定されて取り付けられるだけでなく、取り外し可能な媒体を用いるものであってもよい。このように取り外し可能な媒体を使用することにより、画像印刷装置1においては、画像データやプログラム等の装置の動作に必要なデータとして、装置内に記憶されたデータや、通信部90を介して受信したデータのみを使用するのではなく、媒体に格納されて可搬性が向上したデータを使用することができる。
【0092】
通信部90は、有線電話91、無線電話92、イーサネット93やFDDI(Fiber Distributed Data Interface、光ファイバ分散データ・インターフェース)、ATM(Asynchronous Transfer Mode、非同期転送モード)、IEEE1394等のネットワーク機器94、衛星又は地上波を用いた受信機95、衛星又は地上波を用いた送受信機96のいずれか、若しくは複数を備える。通信部90は、例えば有線電話91と図示しないモデムとによって、図示しない専用サーバや他の同様の装置等の外部機器に記憶されている画像データの送信又は受信、装置を動作させるためのプログラムの受信、信用貨幣のカード番号等の情報の送信と信用貨幣の認証情報等の受信とを行う。
【0093】
操作部100は、押しボタン101やテンキー102、レバー103、ジョイスティック104、回転ボリウム105、スライドボリウム106、トラックボール107、マウス108、タブレット109等を備える。また、操作部100は、必要に応じて、例えば使用者に対して反発力等の感覚を体感させる機能を備える。さらに、操作部100は、例えば回転ボリウム105のようにアナログ量を入力できる操作機器を備える。また、操作部100は、押しボタン101のようにON−OFF等のデジタル量しか入力できない操作機器であっても、その押しボタン101を押した回数や押している時間といった操作状態に基づいて、アナログ量への変換を行う機能を備える。操作部100は、例えば上下左右の4方向に指示可能なジョイスティック104と時間を計時する回路とを備え、ジョイスティック104が倒された方向とその状態が何秒持続しているかを操作部制御部28へ通知する。
【0094】
以上のように構成される画像印刷装置1は、制御部10をはじめとする各部が、CPU11のプログラム・ソフトウェアによって協調しながら動作する。
【0095】
つぎに、画像印刷装置1が、3次元像を再現する印刷物としてホログラフィックステレオグラムを作成する際に、上述した立体画像プリンタ52として、用いられるホログラフィックステレオグラム作成装置150について、図13及び図14を参照して説明する。
【0096】
図13に示すホログラフィックステレオグラム作成装置150は、上述した印刷部制御部23の制御に基づいて各機構が駆動し、後述するように、画像出力制御部22から出力された要素ホログラム画像データD1に基づく物体光L2と、参照光L3とを露光記録部P1に入射し、その干渉縞を短冊状又はドット状の多数個の要素ホログラムとしてホログラム用の記録媒体151にそのまま露光記録してホログラフィックステレオグラムを作成する装置である。記録媒体151は、例えば感光フィルムからなり、図示しないフィルムカートリッジ等に装填されている。
【0097】
ホログラフィックステレオグラム作成装置150は、ホログラフィックステレオグラム作成用の光学系160と、記録媒体151を間欠的に走行駆動する記録媒体送り機構180とを備える。
【0098】
光学系160は、図14に示すように、入射光学系160A、物体光学系160B及び参照光学系160Cとからなる。この物体光学系160Bと参照光学系160Cとは、物体光L2と参照光L3の干渉性を高めるために、物体光L2と参照光L3の露光記録部P1までのそれぞれの光路長がほぼ同一となるように構成されている。
【0099】
入射光学系160Aは、レーザ光L1を出射するレーザ光源161と、このレーザ光L1を透過又は遮断することによってレーザ光L1の出射、遮断を切り換えるシャッタ機構162と、レーザ光L1を物体光L2と参照光L3とに分割するハーフミラー163とから構成されている。
【0100】
レーザ光源161は、例えば、単一波長でかつ干渉性のよいレーザ光L1を出射する、半導体励起YAGレーザ装置や、空冷アルゴンイオンレーザ装置、空冷クリプトンレーザ装置等のレーザ装置によって構成される。
【0101】
シャッタ機構162は、要素ホログラム画像データD1が画像出力制御部22から出力されるタイミングに対応して、印刷部制御部23から出力された制御出力S1により開閉動作され、レーザ光L1を後段の光学系を介して露光記録部P1に位置する記録媒体151に入射させ、若しくはレーザ光L1の記録媒体151への入射を遮断する。
【0102】
ハーフミラー163は、入射されたレーザ光L1を、透過光と反射光とに分割する。レーザ光L1は、透過光が上述した物体光L2として用いられ、一方、反射光が参照光L3として用いられる。これらの物体光L2と参照光L3とは、それぞれ後段に設けられた物体光学系160Bと参照光学系160Cとに入射される。
【0103】
物体光学系160Bは、具体的には、全反射ミラー164と、第1のシリンドリカルレンズ165と、コリメータレンズ166と、投影レンズ167及び第2のシリンドリカルレンズ168等の光学部品によって構成される。これらの各光学部品は、物体光L2の光軸に沿って、上述した順序で配列される。
【0104】
第1のシリンドリカルレンズ165は、凸レンズとピンホールとが組み合わされてなり、ハーフミラー163を透過して全反射ミラー164によって反射された物体光L2を後述する透過型液晶表示器169の表示面幅に対応して一次元方向に拡散させる。
【0105】
コリメータレンズ166は、第1のシリンドリカルレンズ165によって拡散された物体光L2を、平行光にして透過型液晶表示器169へと導く。
【0106】
投影レンズ167は、物体光L2を第2のシリンドリカルレンズ168へと投影する。
【0107】
第2のシリンドリカルレンズ168は、平行光にされた物体光L2を、露光記録部P1において横方向に対して集光する。
【0108】
物体光学系160Bには、コリメータレンズ166と投影レンズ167との間に位置して透過型液晶表示器169が配設されている。透過型液晶表示器169には、画像出力制御部22から出力された要素ホログラム画像データD1に基づいて要素ホログラム画像が順次表示される。
【0109】
以上のように構成される物体光学系160Bにおいては、入射光学系160Aから分割されて入射される点光源状態の物体光L2が、第1のシリンドリカルレンズ165によって拡散されるとともに、コリメータレンズ166に入射することで平行光にされる。物体光学系160Bにおいては、コリメータレンズ166を介して透過型液晶表示器169に入射された物体光L2が、この透過型液晶表示器169に表示された要素ホログラム画像に応じて変調されるとともに、投影レンズ167を介して第2のシリンドリカルレンズ168へと入射される。物体光学系160Bは、シャッタ機構162が開放動作されている間、変調された物体光L2を露光記録部P1の記録媒体151に入射させる。
【0110】
参照光学系160Cは、具体的には、シリンドリカルレンズ170と、コリメータレンズ171と、全反射ミラー172とから構成される。これらの各光学部品は、参照光L3の光軸に沿って、上述した順序で配列される。
【0111】
シリンドリカルレンズ170は、上述した物体光学系160Bの第1のシリンドリカルレンズ165と同様に、凸レンズとピンホールとが組み合わされてなり、ハーフミラー163によって反射分割された参照光L3を所定幅、すなわち透過型液晶表示器169の表示面幅に対応して一次元方向に拡散させる。
【0112】
コリメータレンズ171は、シリンドリカルレンズ170によって拡散された参照光L3を平行光にする。
【0113】
全反射ミラー172は、参照光L3を反射させて、参照光L3を露光記録部P1の記録媒体151に対して後方から入射させる。
【0114】
一方、記録媒体送り機構180は、図示しないローラを備え、図14に示すように、記録媒体151を矢印aの方向へと1要素ホログラム分だけ間欠送りする。記録媒体送り機構180は、1要素ホログラム画像分の露光記録終了毎に、印刷部制御部23から送出される駆動出力S2に基づいて、記録媒体151を間欠的に走行駆動させ、露光記録部P1に未露光部位を対応位置させる。ホログラフィックステレオグラム作成装置150においては、この記録媒体送り機構30の動作に連動して印刷部制御部23から送出される制御出力S1に基づいて、上述したシャッタ機構162が動作されてレーザ光L1の光路を開放する。
【0115】
以上のように構成されるホログラフィックステレオグラム作成装置150は、上述した動作が順次行われることによって、画像出力制御部22から供給された要素ホログラム画像D1に基づく要素ホログラム画像を、短冊状又はドット状の要素ホログラムとして記録媒体151に露光記録し、ホログラフィックステレオグラムを作成する。
【0116】
上述した構成を備える画像印刷装置1は、図15乃至図17に示すような一連の処理を行うことによって、3次元像が再現される印刷物を作成する。ここでは、被写体を2回撮影して2組の視差画像列を得て、それらの画像列に対して上述したモーフィング処理を行い、観察する方向によって異なる変化率の3次元像を再現する印刷物を作成するまでの一連の処理について説明する。
【0117】
まず画像印刷装置1は、図15に示すように、ステップS1において、装置の初期化を行った後、ステップS2乃至ステップS4の待機動作シーケンスを行う。具体的には、画像印刷装置1は、ステップS2において、料金の投入があるか否かを判別する。ここで、画像印刷装置1は、料金が投入されたと判別した場合には、ステップS6へと移行する。また、料金が投入されていないと判別した場合には、ステップS3において、外部機器との通信要求があるか否かを判別する。画像印刷装置1は、外部機器との通信要求があると判別した場合には、後述するプログラム書換シーケンス、装置動作確認シーケンス又は画像通信シーケンスへと移行する。一方、画像印刷装置1は、外部機器との通信要求がないと判別した場合には、ステップS4において待機動作を終了するか否かを判別し、待機動作を終了する場合には、ステップS5における終了処理を行い、一連の処理を終了する。また、待機動作を継続する場合には、ステップS2からの処理を再び実行する。画像印刷装置1は、この待機動作シーケンスにおいて、制御信号による各部の動作確認の他、画像や音声を用いて広告や装置の案内等を表示部40により表示・発音する等の動作を行う。
【0118】
画像印刷装置1は、ステップS2において貨幣又は信用貨幣による料金の投入があったことを判別した後、ステップS6において、その料金やカードの額面等を確認する。そして、ステップS7において、料金の額面等の装置を使用する条件を満足することを確認した場合には、後述する撮影シーケンスへと移行し、条件が満たされなかった場合には、ステップS8における料金やカードの返却処理を行う。なお、画像印刷装置1においては、受け入れた額面等の貨幣の確認や信用貨幣の認証情報の確認に時間がかかる場合は、撮影中にわたって料金の確認動作を続けるようにしてもよい。
【0119】
画像印刷装置1は、料金の額面等の装置を使用する条件が満たされた場合には図16に示すように、ステップS9乃至ステップS12の撮影シーケンスを行う。画像印刷装置1は、この撮影シーケンスを開始すると、ステップS9において、1回目の撮影のガイダンスを表示部40によって表示又は発音した後、使用者の確認を得ながら、撮影部30によってステップS10における1回目の撮影を行う。この撮影は、撮影部制御部18からの制御信号によって開始され、視差撮影機構32の駆動にともない、CCDカメラ31が例えば水平移動することによって行われる。画像印刷装置1においては、この撮影により複数枚の視差画像からなる1組の視差画像列を得る。そして、ステップS11において、2回目の撮影のガイダンスを行った後、使用者の確認を得ながらステップS12における2回目の撮影を行う。この撮影により、画像印刷装置1においては、2組目の視差画像列を得る。ここで、撮影のガイダンスは、後述するように、使用者に対して操作部100による操作手順の案内や、撮影した視差画像に別の画像を合成するための画像合成を行うか否かの選択、撮影する際の被写体の位置を案内するための撮影目安画像の表示を行うか否かの選択等を、表示部40からの画像や音声による情報提供で行うものである。画像印刷装置1においては、使用者が、撮影ガイダンスにしたがって操作部100を操作し、撮影する際にも操作部100を介して撮影指示を与える。
【0120】
画像印刷装置1においては、この撮影シーケンスとほぼ並行してステップS13乃至ステップS19の画像処理シーケンスが行われる。画像印刷装置1は、ステップS10において撮影して得られた複数枚の視差画像からなる視差画像列データを、ステップS13において、外部記憶部80や、通信部90を介して外部機器に記憶し、ステップS14において、各視差画像に対する特徴点抽出のための画像処理を開始する。同様に、ステップS12における2回目の撮影によって得られた視差画像列についても、ステップS15において視差画像列データとして記憶され、ステップS16における特徴点抽出が行われる。
【0121】
このようにして視差画像列データと特徴点データとが生成された後、ステップS17において、上述したモーフィング処理を行う。画像印刷装置1は、後述するように、画像処理シーケンスに続く印刷・表示シーケンスの印刷物出力又は表示出力される視差画像列の枚数に応じて、モーフィングの変化率を変化させたモーフィング処理を行う。画像印刷装置1は、例えば、100枚の視差画像からなる2組の視差画像列に対して、1対の画像毎にモーフィング処理された視差画像列を得る場合には、モーフィングの変化率として、0/99、1/99、2/99、・・・、98/99、99/99の値を設定してモーフィング処理を行う。また、画像印刷装置1は、撮影して得られた視差画像列データの他にも、必要に応じて、ステップS18において外部記憶部80等に記憶されている視差画像列データや画像データを読み出し、モーフィング処理を行う。モーフィング処理されて得られた視差画像列データは、ステップS19において、印刷物出力用の視差画像列データとして外部記憶部80等に記憶される。
【0122】
以上のような画像処理シーケンスによる印刷出力用データの生成を受けて、画像印刷装置1は、ステップS20乃至ステップS23における印刷・表示シーケンスを開始する。
【0123】
この印刷・表示シーケンスでは、上述した処理によって撮影又は処理された視差画像列データを印刷部50により印刷対象物となる記録媒体に記録するとともに、画像処理と記録に時間がかかる場合には、使用者が時間待ちとなるため、広告や記録中の視差画像列のうちのある画像や音声を表示部40により表示又は発音する。画像印刷装置1は、まずステップS20において視差画像列データの記録媒体への記録及び画像表示のための準備動作をした後、ステップS21において、視差画像列データの印刷を行う装置の方式に沿った視点変換処理を行う。そして、画像印刷装置1は、ステップS22において、印刷動作として、視点変換処理された視差画像列を記録媒体に記録して、印刷物を作成するとともに、視差画像列のうちのある画像の表示動作を行う。画像印刷装置1は、印刷動作として、印刷対象物となる記録媒体に、視差画像列を必要な数だけ配置して記録し、印刷物を作成する。すなわち、上述したホログラフィックステレオグラム作成装置150を用いる場合には、例えば、ある3次元像を再現する視差画像列を記録媒体151上に複数組露光記録する際に、視差画像列を露光記録するために必要な領域(コマ)を使用者の任意の要求に応じて配置して生成した要素ホログラム画像を、透過型液晶表示器169に表示し、この要素ホログラム画像に基づいて、記録媒体151に露光記録することにより、ホログラフィックステレオグラムを作成する。画像印刷装置1は、この印刷動作において、任意の変化率に応じてモーフィング処理された視差画像列データによる視差画像列を記録媒体に記録することができる。一方、表示動作としては、広告や装置の案内等を表示・発音する等の動作を行うとともに、記録される視差画像列のうちのある画像、例えば、撮影部30により被写体を正面から撮影した2枚の画像を表示用に処理したモーフィング画像を時系列で表示する。また、画像印刷装置1は、このモーフィング画像を一定時間の時系列で表示するだけでなく、使用者が操作部100により任意に入力した内容に応じて、時系列画像データの表示速度や、表示順を変更して表示する。すなわち、画像印刷装置1は、使用者が例えば操作部100の回転ボリウム105やスライドボリウム106等を操作することによる、移動量や変化量等のアナログ量を検知して、そのアナログ量に応じて、被写体のモーフィング画像や、外部記憶部80等に記憶されている複数のモーフィング画像を時系列で表示する。なお、この表示動作としては、予め任意の変化率に応じた複数組のモーフィング処理された視差画像列を生成しておき、入力操作によって選択されたモーフィング画像を表示することもできる。
【0124】
このことにより、画像印刷装置1においては、モーフィング処理された3次元像を再現する印刷物を作成することができるとともに、印刷中の待ち時間に、使用者が画像間の絵柄の相関が高いモーフィング画像に対して、その画像変化を止めて見たり、ゆっくりと変化させてその変化を観察することができ、高い娯楽性を示すことができる。
【0125】
画像印刷装置1は、ステップS23において、上述した印刷動作が終了したか否かを判別し、印刷動作が終了したと判別した場合には、その直後又は終了後の一定時間の経過後に、上述した表示動作を終了する。そして、画像印刷装置1は、ステップS24において、印刷終了動作として、印刷物を作成した旨の案内等を、表示部40により表示又は発音し、再び待機動作シーケンスに戻る。
【0126】
また、画像印刷装置1は、上述した待機動作シーケンスにおけるステップS3において、通信部制御部27を介した外部機器との通信要求があった場合には、図17に示すように、ステップS25において通信相手と動作内容とを確認した後、プログラム書換シーケンス又は装置動作確認シーケンス又は画像通信シーケンスの動作が開始される。画像印刷装置1は、ステップS26において、プログラムの書き換えを行う要求があるか否かを判別する。ここで、プログラム書き換え要求があると判別した場合には、ステップS27におけるプログラム書換処理を行う。
【0127】
このプログラム書換処理は、外部からの指示によって、装置内のプログラムの書き換えを行うものである。画像印刷装置1は、この処理において、例えば、モーフィング処理等の画像処理プログラムや、装置各部の動作を制御するプログラム、広告や装置の案内等の表示・発音動作を制御するプログラム等を、改良や保守のために書き換える。画像印刷装置1は、例えば通信部制御部27を介して受信されたプログラムデータを、メモリ12等の記憶部や、外部記憶部80に保存した後、CPU11の制御によって、書き換えに該当するプログラムの一部若しくは全部を上書き又は追加する。このことにより、画像印刷装置1は、新しいプログラムを、CPU11によって実行する。
【0128】
画像印刷装置1は、ステップS26において、プログラムの書き換え要求がないと判別した場合には、ステップS28において、装置動作確認要求があるか否かを判別する。この要求があると判別した場合には、画像印刷装置1は、ステップS29において、ある時間周期又は外部からの指示によって、装置の動作状況の送信を行う。すなわち、画像印刷装置1は、例えば、受け入れた累計の金額や印刷した用紙の枚数、印刷用紙の残り枚数等の装置各部の動作状態の他、装置各部が正常に動作しているかどうかを通信する。
【0129】
画像印刷装置1は、ステップS28における要求がないと判別した場合には、ステップS30において、画像通信要求があるか否かを判別する。ここで、要求があると判別した場合には、画像印刷装置1は、ステップS31において、撮影シーケンス時の画像通信指示や、外部からの指示によって、使用する画像データの送受信を行う。すなわち、画像印刷装置1は、例えば外部の画像データサーバに通信接続し、画像データサーバ内にある画像データを検索或いは直接指定によって呼び出して、視差画像列データを含む画像データの受信を行う。そして、画像印刷装置1は、その画像データをメモリ12等の記憶部又は外部記憶部80に保存し、この画像データを、画像処理及び印刷物作成に用いる視差画像列データや、広告、装置の案内等の表示動作に用いる画像データ等として利用する。また、画像印刷装置1は、例えば、モーフィング処理を行い生成した視差画像列データを外部機器へと送信し、外部機器にこの視差画像列データを利用させることもできる。さらに、画像印刷装置1においては、撮影して得られた視差画像列データを外部の画像データサーバに送信して登録しておくこともできる。
【0130】
画像印刷装置1は、ステップS31における処理の終了後及びステップS30において画像通信要求がないと判別した場合には、再び待機動作シーケンスへと移行する。
【0131】
このように、画像印刷装置1においては、通信機能を備えることによって、装置のメインテナンス性が向上する。また、画像印刷装置1においては、撮影部30によって撮影して得られた視差画像列データのみではなく、通信回線を介して受信した視差画像列データを含む画像データとのモーフィング処理を行うことができるため、異なる被写体が同時に同じ場所に存在していない場合においても、それらの画像データのモーフィング処理を行い、印刷物を得ることができ、使用者の利便性が向上する。また、例えば有名人やアニメーションのキャラクタの視差画像列データとのモーフィング画像を提供することもでき、娯楽性を向上させることができる。
【0132】
つぎに、上述した撮影ガイダンスにおける処理について、より具体的に説明する。
【0133】
画像印刷装置1は、撮影ガイダンスにおける使用者の操作によって、処理内容が変更される。例えば、画像印刷装置1は、使用者が、被写体をそのまま処理するように、撮影のガイダンスにおいて何もしないことを選択した場合には、図18に示すように、被写体の撮影のみを行う。また、画像印刷装置1は、例えば、使用者が、視差を考慮して生成された画枠等を選択して画像合成することを選択した場合には、図19に示すように、撮影した被写体に対して、選択された画枠が重ね合わされ、合成された画像を生成する。この合成画像は、画枠のように被写体を覆い隠す状態となるものであってもよく、背景のように被写体によって覆い隠される状態となるものであってもよい。また、合成画像は、外部記憶部80等に予め記憶されている画像を合成して生成するだけではなく、操作部100により使用者が操作入力して描画された画像を合成したものであってもよい。この場合、例えば、テンキー102等からの文字や数字の入力を行うことで、合成画像を生成してもよく、マウス108やタブレット109等により、直接使用者が画像の描画指示を与えて合成画像を生成するようにしてもよい。
【0134】
このように、画像印刷装置1においては、撮影した画像と、画枠等の画像とを合成することができ、高い娯楽性を使用者に提供することができる。
【0135】
また、画像印刷装置1においては、被写体の位置を案内してモーフィング処理をよりよく行うための撮影目安画像を表示部40により表示することができる。画像印刷装置1は、撮影ガイダンス中に、使用者が撮影目安画像の表示を行うように選択した場合には、図20に示すように、撮影しようとする被写体に合わせて選択された撮影目安画像をCRTモニタ42に表示する。
【0136】
このことにより、画像印刷装置1においては、被写体がその撮影目安画像に合わせて位置して撮影することで、例えば画像中の被写体の頭の位置や大きさといった、画像中の被写体の位置や大きさができるだけそろった状態で撮影された画像を得ることができる。このようにして画像中の被写体の位置をできるだけ限定することで、画像印刷装置1においては、モーフィング処理における特徴点抽出の処理を行いやすくすることができる。すなわち、画像印刷装置1においては、特徴点の探索範囲の限定、抽出精度の向上、より簡便な抽出方法の使用、抽出処理の高速化等を行いやすくすることができる。また、画像印刷装置1においては、撮影目安画像に合わせた固定位置の特徴点のデータを予め記憶しておくことができ、その特徴点を使用することによって、撮影した被写体の画像からの特徴点抽出処理を省略することができる。
【0137】
さらに、画像印刷装置1においては、例えば画枠等を合成して得られる合成画像を生成する処理と撮影目安画像を表示して画像を生成する処理とを両方選択して行うこともできる。この場合、画像印刷装置1は、図21に示すように、使用者が、撮影ガイダンス中に撮影目安画像と画枠とを選択した後、撮影目安画像に合わせて撮影を行うことで、画像中の被写体の位置や大きさがそろった状態で画枠が重ね合わされ、合成画像を生成する。
【0138】
さらにまた、画像印刷装置1においては、撮影目安画像が1つの画像だけではなく、複数の画像が用意されており、これらの画像を選択することもできる。すなわち、画像印刷装置1においては、例えば、図20に示すように、被写体となる人間が1人写るような撮影目安画像だけではなく、図22に示すように、例えば、人間が2人写るような撮影目安画像を表示する。画像印刷装置1においては、これらの撮影目安画像を使用者が選択するだけではなく、撮影ガイダンス中に被写体を仮撮影し、複数の撮影目安画像の中から自動的に選択されるようにすることもでき、例えば、仮撮影によって、被写体となる人間が3人横並びの状態である画像を得た場合には、人間が3人横並びの状態に対応する撮影目安画像を自動的に選択することができる。
【0139】
また、画像印刷装置1においては、例えば、図23に示すように、1回目の撮影における撮影目安画像及び/又は画枠等の合成する画像と、2回目の撮影における撮影目安画像及び/又は画枠等の合成する画像とを異なるものにすることもできる。このように1回目と2回目とで画像を変えることで、モーフィング処理された画像に動き感が出て、より娯楽性の高い画像が得られる。
【0140】
さらに、画像印刷装置1においては、撮影ガイダンス中に使用者が入力操作することによって、撮影シーケンスにおいて撮影を行う代わりに、上述したように、外部記憶部80に記憶されている視差画像列データや、通信部90を介して専用サーバや他の同様の装置等の外部機器に記憶されている視差画像列データを選択して、それらの視差画像列データをモーフィング処理することができる。例えば、有名人やアニメーションのキャラクタの顔画像データを記憶しておき、その顔画像データの選択を1回目の撮影に対応させ、2回目の撮影のみを撮影部30により被写体を撮影するようにしたり、1回目の撮影と2回目の撮影との両方を記憶されている視差画像列データの選択として、モーフィング処理を行うこともできる。
【0141】
画像印刷装置1は、上述した一連の工程により、使用者の所望とする内容の印刷物を作成する。画像印刷装置1は、例えば、図24に示すように、1つの記録領域を作成し、この1コマにモーフィング処理を行った結果のみを記録した印刷物を作成する。また、図25に示すように、3コマ以上の複数コマであれば、モーフィング処理前のもとの視差画像列から再現される3次元像と、2組の視差画像列からモーフィング処理されて生成した視差画像列から再現される3次元像との両方を再現可能な印刷物を作成することもできる。この印刷物の内容は、上述した撮影ガイダンス中に使用者が入力操作することによって、任意に決定することができる。また、モーフィング処理された視差画像列を記録したものを、モーフィング処理前のもとの視差画像列の組数に比べて枚数を多くして記録することにより、2名以上の使用者が存在する場合にも、印刷結果を使用者の人数でわけることができる。
【0142】
つぎに、上述した画像印刷装置1の他の構成を図26乃至図29を参照して説明する。
【0143】
第2の実施の形態として図26及び図27に示す画像印刷装置200は、基本構成を図11及び図12に示した画像印刷装置1と同様とし、背景部210と被写体保持部220とを設けたことに特徴を有している。したがって、先に図11及び図12に示した画像印刷装置1と同様の構成については同一符号を付して詳細な説明を省略する。
【0144】
画像印刷装置200は、図26に示すように、上述した各部を備えるとともに、被写体の背景となる画像を表示する背景部210と、被写体を安定に保持する被写体保持部220とを備える。
【0145】
背景部210は、撮影窓112と対向して被写体が位置する背後に配置されており、背景を表示する。この背景部210により表示された画像は、撮影部30により被写体とともに撮影される。
【0146】
被写体保持部220は、被写体を安定に保持できるような、例えば椅子等により構成され、その高さや位置等を任意に調整できる。画像印刷装置200においては、この被写体保持部220に被写体を保持することで、被写体に対する2回以上の撮影にわたり、画像中の被写体の位置や大きさをそろえることができる。
【0147】
上述した機能を備える画像印刷装置200は、図27に示すように、先に図12に示した画像印刷装置1に、背景部210と背景部を制御する背景制御部29とを追加してブロック図が構成される。
【0148】
背景部制御部29は、PCIバス16と背景部210との間に接続され、CPU10等の指示に基づいて、背景の表示開始や背景切り換えといった背景部210への動作指示の制御信号を送る。
【0149】
背景部210は、例えば、灰色等の無彩色で一様な背景や、青色等の特定の色での一様な背景、アニメーションのキャラクタ等の特定の図案等を表示する。また、背景部210は、後述するように、回転式表示器211により複数の図案・画像の中から選択された背景や、平面型表示装置212や投射型表示装置213等の画像表示装置により表示された背景等を表示する。このように、背景部210は、固定又は可変の背景を表示する。画像印刷装置200においては、この背景部210として、青色等の特定の色の一様な背景を用いることで、クロマキー処理や輝度合成等により撮影画像に画像合成を行い、任意の画像を背景とすることができる。
【0150】
つぎに、背景部210として、例えば青色等の特定の色で一様な背景を用いてクロマキー処理や輝度合成等を行うことにより、被写体を撮影した画像と背景となる画像とを合成する一連の処理を図28を用いて説明する。なお、画像印刷装置200においては、この処理を上述した撮影シーケンスから画像処理シーケンスへ移行する段階で行うため、他の動作シーケンスについては説明を省略する。また、ここでは上述した第1の実施の形態と同様に、被写体を2回撮影して2組の視差画像列を得て、それらの画像列に対して上述したモーフィング処理を行い、観察する方向によって異なる変化率の3次元像を再現する印刷物を作成する場合について説明する。
【0151】
画像印刷装置200は、図28に示すように、ステップS41において、1回目の撮影のガイダンスを表示部40によって表示又は発音した後、使用者の確認を得ながら、撮影部30によってステップS42における1回目の撮影を行う。この撮影によって得られた視差画像列には、背景部210により表示された例えば青色が被写体とともに映し出される。そして、画像印刷装置200は、背景部210により表示された画像の色や輝度を判別して、撮影によって得られた視差画像のうち背景と判断された部分に、予め選択された画像を視差を考慮しながら合成する。画像印刷装置200においては、撮影部30から背景部210までの距離によって、撮影により得られた視差画像列に対応する視差量を求めることができる。背景が合成された視差画像列は、ステップS46において、視差画像列データとして外部記憶部80等に記憶され、ステップS47における特徴点抽出のための画像処理が開始される。
【0152】
また、画像印刷装置200は、ステップS43の2回目のガイダンスを行った後、使用者の確認を得ながらステップS44における2回目の撮影を行う。そして、画像印刷装置200は、1回目の撮影後と同様に、ステップS48において、背景となる画像を合成処理し、得られた視差画像列データをステップS49において記憶するとともに、ステップS50における特徴点抽出を行う。
【0153】
画像印刷装置200は、このようにして得られた背景が合成された視差画像列データに対して、必要に応じて、ステップS52において外部記憶部80等に記憶されている視差画像列データや画像データを読み出しながら、ステップS51において、モーフィング処理を施し、得られた視差画像列データをステップS53において記憶する。
【0154】
以上のように、画像印刷装置200においては、背景となる画像を合成して、得られた視差画像列にモーフィング処理を施すことができる。
【0155】
つぎに、背景部210として、回転表示器211や、平面型表示装置212、投射型表示装置213等の表示装置により表示される複数の背景となる画像の中から選択して背景画像を設定する一連の処理を図29を用いて説明する。なお、この処理は、上述した撮影シーケンス中で行うため、他の動作シーケンスについては説明を省略する。
【0156】
画像印刷装置200は、図29に示すように、ステップS61において、1回目の撮影のガイダンスを表示部40によって表示又は発音した後、ステップS62において、ガイダンス中に予め選択された画像にしたがって、背景部210が表示する画像を設定する。そして、使用者の確認を得ながら、撮影部30によってステップS63における1回目の撮影を行う。このようにして背景部210により表示されている画像とともに被写体が撮影されて得られた視差画像列データは、画像処理シーケンスにおいて、特徴点抽出等の処理がなされる。
【0157】
また、画像印刷装置200は、ステップS64において、2回目の撮影ガイダンスを行った後、1回目の撮影と同様に、ステップS65において、予め選択された画像にしたがって、背景部210により表示する画像を設定する。画像印刷装置200は、使用者の確認を得ながら、ステップS66において、2回目の撮影を行う。この得られた視差画像列データは、画像処理シーケンスにおいて、所定の画像処理がなされる。
【0158】
このようにして、画像印刷装置200においては、背景となる画像を任意に設定して被写体を撮影することができる。
【0159】
以上説明してきたように、本発明の実施の形態として示す画像印刷装置は、モーフィング処理が施された視差画像列からの3次元像を再現する印刷物を作成することができ、本発明は、非常に娯楽性に富む装置を提供するものである。
【0160】
なお、本発明は、上述した実施の形態に限定されるものではなく、例えば、上述した2つの実施の形態を組み合わせてもよく、本発明の趣旨を逸脱しない範囲で適宜変更が可能であることは勿論である。
【0161】
また、上述した画像印刷装置においては、被写体を2回撮影して、その2組の視差画像列に対して上述したモーフィング処理を行う場合について説明したが、3回以上の複数回の撮影を行ってもよく、また、上述したように、撮影は一度も行わず、予め記憶された視差画像列といった複数の視差画像列間でのモーフィング処理を行うことも可能である。
【0162】
さらに、画像印刷装置においては、例えば、画像処理シーケンスが撮影シーケンスとほぼ並行して行われるが、このように処理が進行するのは処理の高速化のためであり、処理が十分に高速であれば、全ての撮影シーケンスが終了した後、特徴点抽出処理等の画像処理シーケンスを開始するようにしてもよい。
【0163】
さらにまた、画像印刷装置においては、プログラム書換シーケンス、装置動作確認シーケンス、画像通信シーケンスを、他の動作シーケンスと同時並行して行うようにしてもよい。また、これらの動作シーケンスは、ある時間周期や他の動作シーケンスの処理での要求をきっかけとして外部機器との通信を行う場合に、使用することもできる。
【0164】
また、画像印刷装置においては、画枠や背景となる画像等を合成し、得られた視差画像列にモーフィング処理を施すようにしたが、モーフィング処理された視差画像列に別の画像を合成するようにしてもよい。
【0165】
さらに、画像印刷装置においては、視差のある画像を撮影するために視差撮影機構32を設けて、CCDカメラ31を移動させるように構成したが、CCDカメラ31を移動させるのではなく、複数のCCDカメラ31を設置し、並行同時に又は順次切り換えして画像信号を出力するようにしてもよい。
【0166】
【発明の効果】
以上詳細に説明したように、本発明にかかる画像印刷装置は、複数組の視差画像列を構成する画像間の形状変化を補間して、得られた補間視差画像列に基づく3次元像が再現される印刷物を作成することができる。したがって、本発明にかかる画像印刷装置は、高い娯楽性を備えた印刷物を作成することができる。
【0167】
また、本発明にかかる画像印刷装置は、物体を複数回撮影して、得られた複数組の視差画像列を構成する画像間の形状変化を補間する。したがって、本発明にかかる画像印刷装置は、使用者に高い娯楽性を与えることができ、同時に多人数の使用者を撮影する場合にも、各使用者に対して娯楽を与えることができる。
【0168】
さらに、本発明にかかる画像印刷装置は、入力された情報に応じて視差画像列を構成する画像間の形状変化の補間の度合いを変化させた補間画像を表示するため、印刷中にも使用者が娯楽を楽しむことができる。
【0169】
さらにまた、本発明にかかる画像印刷装置は、物体を撮影して得られた視差画像列ばかりでなく、記憶された視差画像列に対しても形状変化を補間することができ、物体を同時に同じ場所で撮影する必要がなく、使用者にとっての利便性・娯楽性が向上する。また、様々な画像との補間画像を作成でき、高い娯楽性を提供することができる。
【0170】
また、本発明にかかる画像印刷装置は、撮影した視差画像列と記憶されている画像とを合成して得られた合成視差画像列に基づいて3次元像を再現する印刷物を作成することができる。したがって、本発明にかかる画像印刷装置は、使用者の娯楽性を高めることができる。
【0171】
さらに、本発明にかかる画像印刷装置は、物体を配すべき位置を案内する撮影目安画像を表示することによって、画像間の物体の位置や、各画像に映る物体の大きさをそろえることができ、補間処理における特徴点抽出が行いやすく、特徴点抽出の精度、抽出処理の速度が向上するため、高品質の補間視差画像列を得ることができる。また、撮影毎に撮影目安画像を変化させることで、補間して生成した画像に動き感を与えることができ、娯楽性の高い画像を得ることができる。
【0172】
本発明にかかる画像印刷方法は、複数組の視差画像列を構成する画像間の形状変化を補間して、得られた補間視差画像列に基づいて3次元像を再現する印刷物を作成することができるため、娯楽性を向上させることができる。
【0173】
また、本発明にかかる画像印刷方法は、物体を複数回撮影し、得られた複数組の視差画像列を構成する画像間の形状変化を補間することによって、使用者に高い娯楽性を与えることができ、同時に多人数の使用者を撮影する場合にも、各使用者に対して娯楽を提供することができる。
【0174】
さらに、本発明にかかる画像印刷方法は、入力に応じて補間の度合いを変化させた補間画像を表示手段に表示することで、使用者に対して印刷待ち時間の娯楽を与えることができる。
【0175】
さらにまた、本発明にかかる画像印刷方法は、物体を撮影して得られた視差画像列同士のみではなく、記憶手段に記憶された視差画像列に対しても形状変化を補間することにより、物体を同時に同じ場所で撮影する必要がなく、使用者にとっての利便性・娯楽性が向上する。また、様々な画像との補間画像を作成できることから、高い娯楽性を提供することができる。
【0176】
また、本発明にかかる画像印刷方法は、撮影して得られた視差画像列と記憶手段に記憶されている画像とを合成して得られた合成視差画像列に基づく3次元像が再現される印刷物を作成することができる。したがって、本発明にかかる画像印刷方法は、使用者により高い娯楽性を与えることができる。
【0177】
さらに、本発明にかかる画像印刷方法は、物体を配すべき位置を案内する撮影目安画像を表示手段に表示することによって、画像間の物体の位置や、各画像に映る物体の大きさをそろえることができるため、補間処理における特徴点抽出が行いやすく、特徴点抽出の精度を向上させるとともに、抽出処理の高速化を図ることができる。また、撮影毎に撮影目安画像を変化させることによって、補間により生成した画像に動き感が生じ、娯楽性の高い画像を得ることができる。
【図面の簡単な説明】
【図1】モーフィング技術を概念的に説明する図である。
【図2】トウィーニング技術を概念的に説明する図である。
【図3】モーフィング処理の対象となる2枚の画像例を示す図である。
【図4】モーフィング処理における特徴点を説明する図である。
【図5】モーフィング処理の具体例を示す図であって、モーフィング処理が施されるもとの画像とモーフィング処理された画像とを示す図である。
【図6】モーフィング処理の具体例を示す図であって、2枚の原画像間のモーフィングの変化率を変化させることで、n枚のモーフィング処理された画像列を得る様子を説明する図である。
【図7】モーフィング処理の具体例を示す図であって、n枚の画像からなる2組の原画像列間のモーフィングの変化率を変化させることで、n枚の画像からなるモーフィング処理された視差画像列を得る様子を説明する図である。
【図8】モーフィング処理の具体例を示す図であって、n枚の画像からなる2組の原画像列間のモーフィングの変化率を変化させることで、m×n枚の画像からなるモーフィング処理された視差画像列を得る様子を説明する図である。
【図9】モーフィング処理の具体例を示す図であって、m×n枚の画像からなる2組の原画像列間のモーフィングの変化率を変化させることで、m×n枚の画像からなるモーフィング処理された視差画像列を得る様子を説明する図である。
【図10】3枚以上の画像に対するモーフィング処理を説明する図である。
【図11】本発明の第1の実施の形態として示す画像印刷装置の外観を説明する斜視図である。
【図12】同画像印刷装置の構成を説明するブロック図である。
【図13】同画像印刷装置の立体画像プリンタの一例であるホログラフィックステレオグラム作成装置の全体構成を模式的に説明した図である。
【図14】同ホログラフィックステレオグラム作成装置の光学系を模式的に説明した図である。
【図15】同画像印刷装置において、動作初期から待機動作シーケンス、及び料金を受収して撮影シーケンスへと移行するまでの一連の工程とを説明する図である。
【図16】同画像印刷装置において、撮影シーケンス、画像処理シーケンス、印刷・表示シーケンスを経て待機動作シーケンスへと戻るまでの一連の工程を説明する図である。
【図17】同画像印刷装置において、プログラム書換シーケンス、装置動作確認シーケンス、画像通信シーケンスを経て待機動作シーケンスへと戻るまでの一連の工程を説明する図である。
【図18】同画像印刷装置により撮影した被写体を説明する図である。
【図19】同画像印刷装置により合成した画像を説明する図である。
【図20】同画像印刷装置における撮影目安画像を説明する図である。
【図21】同画像印刷装置において、撮影目安画像を表示して、合成した画像を生成する様子を説明する図である。
【図22】同画像印刷装置において、2人の人間を被写体とする場合に、撮影目安画像を表示して、合成した画像を生成する様子を説明する図である。
【図23】同画像印刷装置における撮影目安画像を説明する図であって、1回目と2回目の撮影において、撮影目安画像を変化させる様子を説明する図である。
【図24】同画像印刷装置において作成された印刷物の例を示す図であって、1コマにモーフィング処理が施された結果のみを出力した様子を示す図である。
【図25】同画像印刷装置において作成された印刷物の例を示す図であって、4コマにモーフィング処理前のもとの視差画像列に基づく像と処理結果とを出力した様子を示す図である。
【図26】本発明の第2の実施の形態として示す画像印刷装置の外観を説明する斜視図である。
【図27】同画像印刷装置の構成を説明するブロック図である。
【図28】同画像印刷装置において、画像処理シーケンスで背景となる画像を合成して、印刷・表示シーケンスへと移行するまでの一連の工程を説明する図である。
【図29】同画像印刷装置において、撮影シーケンスで背景となる画像を設定して、画像処理シーケンスへと移行するまでの一連の工程を説明する図である。
【図30】従来の画像印刷装置の外観を説明する斜視図である。
【符号の説明】
1 画像印刷装置、 10 制御部、 30 撮影部、 40 表示部、 50 印刷部、 80 外部記憶部、 90 通信部、 100 操作部、 150 ホログラフィックステレオグラム作成装置、 200 画像印刷装置、 210 背景部
Claims (16)
- 物体を互いに異なる複数の視点から捉えた複数枚の視差画像からなる視差画像列から、3次元像が再現される印刷物を作成する画像印刷装置において、
複数組の視差画像列を構成する画像間の形状変化を補間して補間画像を生成し、これらの補間画像を含みかつ視差情報を有する補間視差画像列を生成する補間手段と、
上記補間手段により生成された補間視差画像列を構成する各画像を記録媒体に記録することにより、3次元像が再現される印刷物を作成する印刷手段と
を備える画像印刷装置。 - 上記物体の互いに異なる複数の視点からの撮影を複数回行い、上記物体を互いに異なる複数の視点から撮影した複数枚の視差画像からなる視差画像列を複数組生成する撮影手段を備える請求項1記載の画像印刷装置。
- 上記補間手段による補間に必要な情報を入力するための入力手段と、
画像を表示する表示手段とを備え、
上記入力手段は、アナログ量が入力可能であり、
上記補間手段は、補間の度合いを変化させた複数組の補間視差画像列を生成可能であり、
上記表示手段は、上記入力手段により入力された情報に応じて上記視差画像列を構成する画像間の形状変化の補間の度合いを変化させて得られた補間画像を表示する請求項1記載の画像印刷装置。 - 物体を撮影する撮影手段と、
視差画像列が記憶された記憶手段とを備え、
上記補間手段は、上記補間視差画像列のもととなる複数組の視差画像列として、上記撮影手段により上記物体を互いに異なる複数の視点から撮影することによって得られた複数枚の視差画像からなる視差画像列と、上記記憶手段に記憶されている視差画像列とを用いる請求項1記載の画像印刷装置。 - 画像を表示する表示手段を備え、
上記表示手段は、上記撮影手段により上記物体を互いに異なる複数の視点から撮影することによって得られた視差画像列を構成する画像と、上記記憶手段に記憶されている視差画像列を構成する画像との間の形状変化を補間して得られた補間画像を表示する請求項4記載の画像印刷装置。 - 外部機器との通信を行う通信手段を備え、
上記通信手段は、上記補間手段による補間の対象となる視差画像列又は上記補間視差画像列の外部機器からの受信、及び/又は、上記視差画像列又は上記補間手段により生成された補間視差画像列の外部機器への送信を行う請求項1記載の画像印刷装置。 - 物体を撮影する撮影手段と、
画像を表示する表示手段とを備え、
上記補間手段による補間の対象となる視差画像列のうちの少なくとも1つは、上記撮影手段により上記物体を互いに異なる複数の視点から撮影することによって得られた複数枚の視差画像からなる視差画像列であり、
上記表示手段は、上記撮影手段による上記物体の撮影に先立って、上記物体を配すべき位置を案内する撮影目安画像を表示する請求項1記載の画像印刷装置。 - 上記物体の背景となる画像を表示する背景画像表示手段を備え、
上記背景画像表示手段は、外部から入力された情報に応じて、表示する画像を変化させる請求項1記載の画像印刷装置。 - 物体を互いに異なる複数の視点から捉えた複数枚の視差画像からなる視差画像列から、3次元像が再現される印刷物を作成する画像印刷方法において、
複数組の視差画像列を構成する画像間の形状変化を補間して補間画像を生成し、
これらの補間画像を含みかつ視差情報を有する補間視差画像列を生成し、
この補間視差画像列を構成する各画像を記録媒体に記録することにより、3次元像が再現される印刷物を作成する画像印刷方法。 - 上記物体の互いに異なる複数の視点からの撮影を複数回行い、
上記物体を互いに異なる複数の視点から撮影した複数枚の視差画像からなる視差画像列を複数組生成する請求項9記載の画像印刷方法。 - 補間の度合いを変化させた複数組の補間視差画像列を生成し、
外部から入力された情報に応じて上記視差画像列を構成する画像間の形状変化の補間の度合いを変化させて得られた補間画像を表示手段に表示する請求項9記載の画像印刷方法。 - 上記補間視差画像列のもととなる複数組の視差画像列として、上記物体を互いに異なる複数の視点から撮影することによって得られた複数枚の視差画像からなる視差画像列と、記憶手段に記憶されている視差画像列とを用いる請求項9記載の画像印刷方法。
- 上記物体を互いに異なる複数の視点から撮影することによって得られた視差画像列を構成する画像と、上記記憶手段に記憶されている視差画像列を構成する画像との間の形状変化を補間して得られた補間画像を表示する請求項12記載の画像印刷方法。
- 外部機器から補間の対象となる視差画像列又は上記補間視差画像列を受信し、及び/又は、上記視差画像列又は上記補間視差画像列を外部機器へと送信する請求項9記載の画像印刷方法。
- 補間の対象となる視差画像列のうちの少なくとも1つは、上記物体を互いに異なる複数の視点から撮影することによって得られた複数枚の視差画像からなる視差画像列であり、
上記物体の撮影に先立って、上記物体を配すべき位置を案内する撮影目安画像を表示手段に表示する請求項9記載の画像印刷方法。 - 上記物体の背景となる画像を背景画像表示手段に表示し、
外部から入力された情報に応じて、上記背景画像表示手段に表示する画像を変化させる請求項9記載の画像印刷方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP27359598A JP4161426B2 (ja) | 1998-09-28 | 1998-09-28 | 画像印刷装置及び画像印刷方法 |
US09/404,803 US6683699B1 (en) | 1998-09-28 | 1999-09-24 | Image printing method and apparatus |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP27359598A JP4161426B2 (ja) | 1998-09-28 | 1998-09-28 | 画像印刷装置及び画像印刷方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2000106681A JP2000106681A (ja) | 2000-04-11 |
JP4161426B2 true JP4161426B2 (ja) | 2008-10-08 |
Family
ID=17529977
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP27359598A Expired - Lifetime JP4161426B2 (ja) | 1998-09-28 | 1998-09-28 | 画像印刷装置及び画像印刷方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US6683699B1 (ja) |
JP (1) | JP4161426B2 (ja) |
Families Citing this family (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4461203B2 (ja) * | 1999-09-21 | 2010-05-12 | ムラテックオートメーション株式会社 | ストッカ用ロボットの教示方法、ストッカ用ロボットの教示装置及び記録媒体 |
US7362331B2 (en) * | 2000-01-05 | 2008-04-22 | Apple Inc. | Time-based, non-constant translation of user interface objects between states |
JP4677661B2 (ja) * | 2000-10-16 | 2011-04-27 | ソニー株式会社 | 動画像受注システム及び方法 |
JP2002123159A (ja) * | 2000-10-16 | 2002-04-26 | Sony Corp | ホログラフィックステレオグラム印刷装置及び方法 |
JP2002176660A (ja) * | 2000-12-08 | 2002-06-21 | Univ Tokyo | 画像表示方法及び画像表示装置 |
WO2002063560A2 (en) * | 2001-02-06 | 2002-08-15 | Orasee Corp. | Method for scaling and interlacing multidimensional and motion images |
JP2002334150A (ja) * | 2001-03-02 | 2002-11-22 | Canon Inc | 印刷制御装置、データ処理方法及び制御プログラム |
US7209585B2 (en) * | 2001-06-14 | 2007-04-24 | Sony Corporation | Picture image generation and printed material production apparatus, and a method thereof |
JP4596227B2 (ja) | 2001-06-27 | 2010-12-08 | ソニー株式会社 | 通信装置および方法、通信システム、記録媒体、並びにプログラム |
JP2003018578A (ja) * | 2001-06-27 | 2003-01-17 | Sony Corp | 通信装置および方法、通信システム、記録媒体、並びにプログラム |
JP2003090714A (ja) * | 2001-09-18 | 2003-03-28 | Shigenori Tanaka | 画像処理装置、及び画像処理プログラム |
JP4143905B2 (ja) * | 2002-08-28 | 2008-09-03 | 富士ゼロックス株式会社 | 画像形成システムおよびその方法 |
JP2004333706A (ja) * | 2003-05-02 | 2004-11-25 | Graphimorph Co Ltd | 立体視画像生成装置および方法 |
JP4623657B2 (ja) * | 2003-05-28 | 2011-02-02 | 富士機械製造株式会社 | 電子部品実装機の撮像画像処理装置及び撮像画像処理方法 |
JP4665430B2 (ja) * | 2004-04-26 | 2011-04-06 | 富士ゼロックス株式会社 | 画像出力制御装置、画像出力制御方法及び画像出力制御プログラム並びにプリンタ装置 |
GB0518554D0 (en) * | 2005-09-12 | 2005-10-19 | Geola Technologies Ltd | An image capture system for digital holograms |
JP4820187B2 (ja) * | 2006-03-02 | 2011-11-24 | 日本放送協会 | 立体画像撮像表示システム、立体画像撮像装置および立体画像生成装置 |
JP6149344B2 (ja) * | 2012-04-04 | 2017-06-21 | セイコーエプソン株式会社 | 印刷装置および印刷方法 |
JP6931268B2 (ja) * | 2015-06-08 | 2021-09-01 | キヤノン株式会社 | 画像処理装置および画像処理方法 |
WO2016199381A1 (en) * | 2015-06-08 | 2016-12-15 | Canon Kabushiki Kaisha | Image processing apparatus and image processing method |
JP2018060133A (ja) * | 2016-10-07 | 2018-04-12 | 株式会社アーティエンス・ラボ | 画像表示媒体作成方法、画像表示媒体、画像表示媒体作成装置、情報認識方法、および、情報表示方法 |
US11016643B2 (en) | 2019-04-15 | 2021-05-25 | Apple Inc. | Movement of user interface object with user-specified content |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0822091A (ja) * | 1994-07-05 | 1996-01-23 | Canon Inc | 立体画像記録方法および装置ならびに立体画像形成体 |
-
1998
- 1998-09-28 JP JP27359598A patent/JP4161426B2/ja not_active Expired - Lifetime
-
1999
- 1999-09-24 US US09/404,803 patent/US6683699B1/en not_active Expired - Lifetime
Also Published As
Publication number | Publication date |
---|---|
JP2000106681A (ja) | 2000-04-11 |
US6683699B1 (en) | 2004-01-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4161426B2 (ja) | 画像印刷装置及び画像印刷方法 | |
JP4919031B2 (ja) | 写真シール作成装置および方法、並びにプログラム | |
JP6222294B2 (ja) | 写真シール作成装置 | |
JP6458460B2 (ja) | 画像生成装置および方法、並びにプログラム | |
JP5630675B2 (ja) | 写真シール機、写真シール機の処理方法、並びにプログラム | |
US6757086B1 (en) | Hologram forming apparatus and method, and hologram | |
KR100852009B1 (ko) | 홀로그래픽 스테레오그램 인쇄 장치 및 방법 | |
JP4607992B2 (ja) | 写真プリント提供装置および方法ならびにプログラム | |
JP3499862B1 (ja) | 写真プリント提供装置および方法ならびにプログラム | |
JP3564701B2 (ja) | 画像印刷装置および方法 | |
JP2004207780A (ja) | 写真撮影装置 | |
JP4672923B2 (ja) | 画像プリント作成装置および方法ならびにプログラム | |
JP3903870B2 (ja) | 写真プリント装置制御方法、写真プリント装置制御プログラム、写真プリント装置制御プログラムを記録した記録媒体、写真プリント装置、および、プリント媒体ユニット | |
JP2021182104A (ja) | 写真作成ゲーム機、編集方法、およびプログラム | |
JP6160470B2 (ja) | 写真シール機、写真シール機の処理方法、並びにプログラム | |
JP2003324672A (ja) | 画像印刷装置および方法、印刷媒体、並びに印刷媒体ユニット | |
EP0920198A1 (en) | Moving picture card producing apparatus and storage medium for the apparatus | |
JP5354257B2 (ja) | 写真シール作成装置および方法、並びに、プログラム | |
JP2000106662A (ja) | 画像印刷装置及び画像印刷方法 | |
JP2004320077A (ja) | 写真プリント提供装置および方法ならびにプリント用紙ユニット | |
JP2006197442A (ja) | 自動写真作成装置、自動写真作成方法、及び印刷媒体 | |
JP2023013787A (ja) | 画像処理装置、画像処理方法、およびプログラム | |
JP2001142383A (ja) | 画像記録装置及び方法 | |
JP2022172733A (ja) | 写真作成ゲーム機、画像処理方法、およびプログラム | |
JP2002218454A (ja) | 写真自販機 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050706 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20080327 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080401 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080602 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20080701 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20080714 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110801 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110801 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110801 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120801 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120801 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130801 Year of fee payment: 5 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
EXPY | Cancellation because of completion of term |