JP2023114496A - Hologram data generator, electronic holography display device, and program thereof - Google Patents

Hologram data generator, electronic holography display device, and program thereof Download PDF

Info

Publication number
JP2023114496A
JP2023114496A JP2022016807A JP2022016807A JP2023114496A JP 2023114496 A JP2023114496 A JP 2023114496A JP 2022016807 A JP2022016807 A JP 2022016807A JP 2022016807 A JP2022016807 A JP 2022016807A JP 2023114496 A JP2023114496 A JP 2023114496A
Authority
JP
Japan
Prior art keywords
data
hologram
hologram data
missing
pixels
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2022016807A
Other languages
Japanese (ja)
Inventor
諒 東田
Ryo Higashida
雅人 三浦
Masato Miura
祐太 山口
Yuta Yamaguchi
賢一 青島
Kenichi Aoshima
賢司 町田
Kenji Machida
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Japan Broadcasting Corp
Original Assignee
Nippon Hoso Kyokai NHK
Japan Broadcasting Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Hoso Kyokai NHK, Japan Broadcasting Corp filed Critical Nippon Hoso Kyokai NHK
Priority to JP2022016807A priority Critical patent/JP2023114496A/en
Publication of JP2023114496A publication Critical patent/JP2023114496A/en
Pending legal-status Critical Current

Links

Images

Abstract

To provide a hologram data generator which can generate hologram data with reduced information amount.SOLUTION: A hologram data generator 1 includes: phase addition means 10 for adding a phase to object target data and generating a complex amplitude distribution; propagation calculation means 11 for calculating the complex amplitude distribution of a hologram surface by a propagation calculation; hologram data calculation means 12 for calculating hologram data from the complex amplitude distribution of the hologram surface and the complex amplitude distribution of reference light; and hologram data thinning means 13 for thinning data in a preset missing pixel position from the hologram data calculated by the hologram data calculation means 12.SELECTED DRAWING: Figure 1

Description

本発明は、ホログラムデータ生成装置、電子ホログラフィ表示装置およびそれらのプログラムに関する。 The present invention relates to a hologram data generation device, an electronic holography display device, and programs thereof.

光の干渉と回折とを利用して、被写体から出る光の波面を忠実に再現することが可能な技術として、ホログラフィが存在する。このホログラフィは、輻輳調節矛盾のない理想的な3次元映像技術として知られている。また、ホログラフィの技術を用いて被写体の3次元情報を記録した媒体をホログラムという。このホログラムをデジタルデータとして扱い、電子デバイスである空間光変調器(SLM:Spatial light modulator)にホログラムデータを表示することで、動画として3次元映像を表示する技術を、電子ホログラフィという。 Holography is a technology capable of faithfully reproducing the wavefront of light emitted from a subject by utilizing interference and diffraction of light. This holography is known as an ideal three-dimensional image technology without vergence accommodation contradiction. A medium in which three-dimensional information of a subject is recorded using holographic technology is called a hologram. Electronic holography is a technique for displaying three-dimensional images as moving images by treating this hologram as digital data and displaying the hologram data on a spatial light modulator (SLM), which is an electronic device.

電子ホログラフィで再生した3次元映像を正しく観察可能な角度(視域角2θ)は、SLMの画素ピッチpと入射する光の波長λとに依存し、2θ=2sin-1[λ/(2p)]と表される。したがって、視域角を拡大するためには、SLMの狭画素ピッチ化が必要である。
一方で、SLMの幅方向の画素数をNx、SLMの高さ方向の画素数をNy、SLMの画素ピッチをpとしたとき、SLMの面積SはS=pNxNyとなるため、3次元映像の大画面化には、SLMの多画素化が必要である。
従来、このような3次元映像を大画面化する技術としては、複数枚のSLMを水平方向および垂直方向に配列してSLM全体で多画素化し、大画面化を実現する技術が存在する(特許文献1参照)。
The angle at which a three-dimensional image reproduced by electronic holography can be correctly observed (viewing zone angle 2θ) depends on the pixel pitch p of the SLM and the wavelength λ of incident light, 2θ=2sin −1 [λ/(2p) ]. Therefore, in order to expand the viewing angle, it is necessary to narrow the pixel pitch of the SLM.
On the other hand, when the number of pixels in the width direction of the SLM is Nx, the number of pixels in the height direction of the SLM is Ny, and the pixel pitch of the SLM is p, the area S of the SLM is S=p 2 NxNy. In order to enlarge the image screen, it is necessary to increase the number of pixels of the SLM.
Conventionally, as a technique for enlarging such a three-dimensional image, there is a technique for realizing a large screen by arranging a plurality of SLMs in the horizontal and vertical directions to increase the number of pixels in the entire SLM (Patent Reference 1).

特開2014-215332号公報JP 2014-215332 A

ホログラム再生において、例えば、波長532nmで視域角30°を得るには、画素ピッチが1μmのSLMが必要である。そして、例えば、10cmの大きさのSLMを用いた場合、100k×100k画素という莫大なホログラムデータを扱う必要がある。
このように、従来の手法では、3次元映像を大画面化する場合、ホログラムデータの情報量が膨大となり、ホログラムデータを記録媒体に記録する時間、ホログラムデータを表示装置に伝送する時間、ホログラムデータを表示装置に書き込む時間等が長くなってしまうという問題がある。
In hologram reproduction, for example, an SLM with a pixel pitch of 1 μm is required to obtain a viewing angle of 30° at a wavelength of 532 nm. For example, when using an SLM with a size of 10 cm 2 , it is necessary to handle huge hologram data of 100 k×100 k pixels.
As described above, in the conventional method, when a three-dimensional image is enlarged, the amount of information in the hologram data becomes enormous. There is a problem that it takes a long time to write to the display device.

本発明は、このような従来の問題点に鑑みてなされたもので、情報量を削減したホログラムデータを生成することが可能なホログラムデータ生成装置、情報量を削減したホログラムデータで再生像を表示することが可能な電子ホログラフィ表示装置、および、それらのプログラムを提供することを課題とする。 SUMMARY OF THE INVENTION The present invention has been made in view of such conventional problems. An object of the present invention is to provide an electronic holography display device and a program thereof.

前記課題を解決するため、本発明に係るホログラムデータ生成装置は、3次元データである被写体データから画素の一部を欠損させたホログラムデータを生成するホログラムデータ生成装置であって、位相付加手段と、伝播計算手段と、ホログラムデータ計算手段と、ホログラムデータ間引き手段と、を備える構成とした。 In order to solve the above-mentioned problems, a hologram data generation device according to the present invention is a hologram data generation device for generating hologram data in which some pixels are missing from subject data, which is three-dimensional data, and phase adding means and , propagation calculation means, hologram data calculation means, and hologram data thinning means.

かかる構成において、ホログラムデータ生成装置は、位相付加手段によって、被写体データに位相を付加して複素振幅分布を生成する。
そして、ホログラムデータ生成装置は、伝播計算手段によって、伝播計算により、被写体データの複素振幅分布からホログラム面の複素振幅分布を計算する。
そして、ホログラムデータ生成装置は、ホログラムデータ計算手段によって、ホログラム面の複素振幅分布と参照光の複素振幅分布とからホログラムデータを計算する。これによって、ホログラムデータが生成される。
In such a configuration, the hologram data generation device generates a complex amplitude distribution by adding a phase to the subject data using the phase addition means.
Then, the hologram data generating device calculates the complex amplitude distribution of the hologram plane from the complex amplitude distribution of the subject data by propagation calculation by the propagation calculation means.
Then, the hologram data generating device calculates hologram data from the complex amplitude distribution of the hologram plane and the complex amplitude distribution of the reference light by the hologram data calculation means. Hologram data is thus generated.

さらに、ホログラムデータ生成装置は、ホログラムデータ間引き手段によって、ホログラムデータ計算手段で計算されたホログラムデータから、予め設定された欠損画素位置のデータを間引く。これによって、ホログラムデータの情報量が削減されることになる。
このように、画素が間引かれたホログラムデータは、電子ホログラフィ表示装置で欠損画素を任意の画素値で補間されることで、被写体再生像として表示されることになる。この場合、ユーザは、ホログラム再生により、被写体再生像において欠損画素位置を認識することはない。
なお、ホログラムデータ生成装置は、コンピュータを、前記した各手段として機能させるためのホログラムデータ生成プログラムで動作させることができる。
Furthermore, the hologram data generation device thins out the data of the preset defective pixel position from the hologram data calculated by the hologram data calculation means by the hologram data thinning means. This reduces the information amount of the hologram data.
In this way, the hologram data in which the pixels are thinned out is displayed as a reconstructed image of the subject by interpolating the missing pixels with arbitrary pixel values in the electronic holography display device. In this case, the user does not recognize the position of the defective pixel in the reconstructed image of the subject due to the hologram reconstruction.
The hologram data generation device can operate with a hologram data generation program for causing a computer to function as each means described above.

また、前記課題を解決するため、本発明に係る電子ホログラフィ表示装置は、画素の一部を欠損した欠損ホログラムデータを入力し、被写体再生像を表示する電子ホログラフィ表示装置であって、欠損画素補間手段と、表示手段と、発光手段と、を備える構成とした。 Further, in order to solve the above problems, an electronic holography display device according to the present invention is an electronic holography display device for inputting defective hologram data in which a part of a pixel is missing and displaying a reconstructed image of a subject, wherein missing pixel interpolation is performed. means, display means, and light emitting means.

かかる構成において、電子ホログラフィ表示装置は、欠損画素補間手段によって、欠損ホログラムデータの欠損画素に画素を補間する。
そして、電子ホログラフィ表示装置は、表示手段によって、欠損画素補間手段で欠損画素が補間されたホログラムデータを表示する。この表示手段は、空間光変調器で構成することができる。
そして、電子ホログラフィ表示装置は、発光手段によって、表示手段である空間光変調器に対して、照明光を照射する。これによって、被写体再生像が表示されることになる。
なお、電子ホログラフィ表示装置は、コンピュータを、前記した各手段として機能させるための電子ホログラフィ表示プログラムで動作させることができる。
In such a configuration, the electronic holography display device interpolates pixels into the missing pixels of the missing hologram data by the missing pixel interpolating means.
Then, the electronic holography display device displays the hologram data in which the missing pixels are interpolated by the missing pixel interpolating means. The display means can consist of a spatial light modulator.
Then, the electronic holography display device irradiates the spatial light modulator, which is the display means, with illumination light by means of the light emitting means. As a result, the reconstructed image of the subject is displayed.
The electronic holographic display device can be operated with an electronic holographic display program for causing the computer to function as each means described above.

本発明は、以下に示す優れた効果を奏するものである。
本発明によれば、情報量を削減したホログラムデータを生成することができる。また、本発明によれば、情報量を削減したホログラムデータで再生像を表示することができる。
これによって、本発明は、ホログラムデータを記録する時間、伝送する時間、表示装置に書き込む時間を従来よりも短縮することができる。
ADVANTAGE OF THE INVENTION This invention has the outstanding effect shown below.
According to the present invention, it is possible to generate hologram data with a reduced amount of information. Further, according to the present invention, a reproduced image can be displayed using hologram data with a reduced amount of information.
As a result, the present invention can shorten the time for recording hologram data, the time for transmission, and the time for writing to the display device, compared to the conventional art.

本発明の実施形態に係るホログラムデータ生成装置の構成を示すブロック構成図である。1 is a block configuration diagram showing the configuration of a hologram data generation device according to an embodiment of the present invention; FIG. 図1の伝播計算手段が行う断層画像の複素振幅分布からホログラム面の複素振幅分布を計算する処理を説明するための説明図である。FIG. 2 is an explanatory diagram for explaining processing of calculating a complex amplitude distribution of a hologram plane from a complex amplitude distribution of a tomographic image, which is performed by the propagation calculation means of FIG. 1; 図1のホログラムデータ間引き手段において、行ごとにホログラムデータを間引く例を説明するための説明図である。2 is an explanatory diagram for explaining an example of thinning hologram data for each row in the hologram data thinning means of FIG. 1; FIG. 図1のホログラムデータ間引き手段において、列ごとにホログラムデータを間引く例を説明するための説明図である。2 is an explanatory diagram for explaining an example of thinning hologram data for each column in the hologram data thinning means of FIG. 1; FIG. 図1のホログラムデータ間引き手段において、ブロックごとにホログラムデータを間引く例を説明するための説明図である。2 is an explanatory diagram for explaining an example of thinning hologram data for each block in the hologram data thinning means of FIG. 1; FIG. 図1のホログラムデータ間引き手段において、ランダムにホログラムデータを間引く例を説明するための説明図である。2 is an explanatory diagram for explaining an example of randomly thinning out hologram data in the hologram data thinning means of FIG. 1; FIG. 本発明の実施形態に係るホログラムデータ生成装置の動作を示すフローチャートである。4 is a flow chart showing the operation of the hologram data generation device according to the embodiment of the present invention; 本発明の実施形態に係る電子ホログラフィ表示装置の構成を示すブロック構成図である。1 is a block configuration diagram showing the configuration of an electronic holography display device according to an embodiment of the present invention; FIG. 本発明の実施形態に係る電子ホログラフィ表示装置の動作を示すフローチャートである。4 is a flow chart showing the operation of the electronic holographic display device according to the embodiment of the present invention; 間引きにより欠損した画素を補間したホログラムデータをシミュレーション再生した画像と、元画像との画質評価を示すグラフであって、横軸は、全画素に対する欠損した画素の割合(欠損データ量〔%〕)、縦軸は、PSNR(最大信号対雑音比〔dB〕)を示す。Graph showing image quality evaluation between an image obtained by simulating reproduction of hologram data in which missing pixels are interpolated by thinning and the original image, where the horizontal axis represents the ratio of missing pixels to all pixels (missing data amount [%]). , the vertical axis indicates PSNR (maximum signal-to-noise ratio [dB]). 伝播計算にGSアルゴリズムを用いたホログラムデータ生成装置の変形例を示すブロック構成図である。FIG. 10 is a block configuration diagram showing a modification of the hologram data generation device using the GS algorithm for propagation calculation; 伝播計算にGSアルゴリズムを用い、間引きにより欠損した画素を補間したホログラムデータをシミュレーション再生した画像と、元画像との画質評価を示すグラフであって、横軸は、全画素に対する欠損した画素の割合(欠損データ量〔%〕)、縦軸は、PSNR(最大信号対雑音比〔dB〕)を示す。A graph showing image quality evaluation between an image obtained by simulating reproduction of hologram data in which missing pixels are interpolated by thinning using the GS algorithm for propagation calculation and the original image, and the horizontal axis is the ratio of missing pixels to all pixels. (missing data amount [%]), and the vertical axis indicates PSNR (maximum signal-to-noise ratio [dB]).

[ホログラムデータ生成装置の構成]
まず、図1を参照して、本発明の実施形態に係るホログラムデータ生成装置1の構成について説明する。
ホログラムデータ生成装置1は、3次元データである被写体データから画素の一部を欠損させたホログラムデータを生成するものである。
被写体データは、3次元データであればどのようなデータでもよい。ここでは、3次元データを距離別に構成された断層画像の例で説明する。
図1に示すように、ホログラムデータ生成装置1は、位相付加手段10と、伝播計算手段11と、ホログラムデータ計算手段12と、ホログラムデータ間引き手段13と、条件データ記憶手段14と、を備える。
[Configuration of hologram data generation device]
First, the configuration of a hologram data generation device 1 according to an embodiment of the present invention will be described with reference to FIG.
The hologram data generation device 1 generates hologram data in which some pixels are missing from subject data, which is three-dimensional data.
The subject data may be any data as long as it is three-dimensional data. Here, an example of a tomographic image in which three-dimensional data is configured for each distance will be described.
As shown in FIG. 1, the hologram data generation device 1 includes phase addition means 10, propagation calculation means 11, hologram data calculation means 12, hologram data thinning means 13, and condition data storage means .

位相付加手段10は、被写体データに位相を付加して複素振幅分布を生成するものである。
位相付加手段10は、図示を省略した入力手段を介して、被写体データを入力する。そして、位相付加手段10は、被写体データの各画素の値を振幅とし、各画素に初期位相(例えば、ランダム位相、等位相、線形位相等)を付加する。これによって、被写体データは、複素振幅分布となる。
位相付加手段10は、初期位相を付加することで生成した複素振幅分布を伝播計算手段11に出力する。
Phase adding means 10 adds a phase to object data to generate a complex amplitude distribution.
The phase addition means 10 inputs subject data through an input means (not shown). Then, the phase adding means 10 sets the value of each pixel of the object data as the amplitude, and adds an initial phase (for example, random phase, equal phase, linear phase, etc.) to each pixel. As a result, the subject data becomes a complex amplitude distribution.
The phase addition means 10 outputs the complex amplitude distribution generated by adding the initial phase to the propagation calculation means 11 .

伝播計算手段11は、伝播計算により、位相付加手段10で生成された被写体データの複素振幅分布から、予め定めたホログラム面の複素振幅分布を計算するものである。なお、伝播計算手段11における伝播計算は、角スペクトル法、フレネル伝播法等、特に限定するものではない。 The propagation calculation means 11 calculates a complex amplitude distribution of a predetermined hologram plane from the complex amplitude distribution of the subject data generated by the phase adding means 10 by propagation calculation. The propagation calculation in the propagation calculation means 11 is not particularly limited, and may be an angular spectrum method, a Fresnel propagation method, or the like.

ここで、図2を参照して、伝播計算手段11における伝播計算に角スペクトル法を用いた例を説明する。
伝播計算手段11は、空間光変調器(SLM100)の表示面をホログラム面Hとし、ホログラム面Hからの距離(z)ごとの複数の複素振幅分布U(x,y,z)から、ホログラム面Hにおける複素振幅分布U(x,y,0)を計算する。
具体的には、伝播計算手段11は、断層画像の奥行き方向のサンプリング数をN、zをi番目の断層画像のホログラム面Hまでの伝播距離としたとき、以下の式(1)により、ホログラム面H(z=0)における複素振幅分布U(x,y,0)を計算する。
Here, with reference to FIG. 2, an example in which the angular spectrum method is used for propagation calculation in the propagation calculation means 11 will be described.
Propagation calculation means 11 sets the display surface of the spatial light modulator (SLM 100) as a hologram surface H, and from a plurality of complex amplitude distributions U i (x, y, z i ) for each distance (z i ) from the hologram surface H, , the complex amplitude distribution U(x, y, 0) in the hologram plane H is calculated.
Specifically, the propagation calculation means 11 uses the following formula (1), where N z is the number of samplings in the depth direction of the tomographic image, and zi is the propagation distance to the hologram surface H of the i-th tomographic image. , the complex amplitude distribution U(x, y, 0) at the hologram plane H(z=0).

Figure 2023114496000002
Figure 2023114496000002

ここで、FTは高速フーリエ変換(FFT)、FT-1は逆高速フーリエ変換(IFFT)、x,yは空間座標、u,vはそれぞれx方向,y方向の空間周波数を表す。
このとき、伝播計算手段11は、条件データ記憶手段14に記憶されているホログラムデータの欠損対象となる位置の画素については、不定の値であってもよいし、特定の値(例えば“0”)を設定することとしてもよい。
図1に戻って、ホログラムデータ生成装置1の構成について説明を続ける。
Here, FT is Fast Fourier Transform (FFT), FT −1 is Inverse Fast Fourier Transform (IFFT), x and y are spatial coordinates, and u and v are spatial frequencies in the x and y directions, respectively.
At this time, the propagation calculation means 11 may have an indefinite value or a specific value (for example, "0") for the pixels at the positions where the hologram data stored in the condition data storage means 14 are to be lost. ) may be set.
Returning to FIG. 1, the description of the configuration of the hologram data generation device 1 is continued.

伝播計算手段11は、伝播計算によって計算されたホログラム面における複素振幅分布をホログラムデータ計算手段12に出力する。 The propagation calculation means 11 outputs the complex amplitude distribution on the hologram plane calculated by the propagation calculation to the hologram data calculation means 12 .

ホログラムデータ計算手段12は、伝播計算手段11で計算されたホログラム面の複素振幅分布と参照光の複素振幅分布とからホログラムデータを計算するものである。
ホログラムデータ計算手段12は、ホログラム面の複素振幅分布U(x,y,0)を、物体光の複素振幅分布として、予め準備した参照光の複素振幅分布により、ホログラムデータを計算する。
The hologram data calculation means 12 calculates hologram data from the complex amplitude distribution of the hologram plane calculated by the propagation calculation means 11 and the complex amplitude distribution of the reference light.
The hologram data calculation means 12 calculates hologram data using the complex amplitude distribution U(x, y, 0) of the hologram plane as the complex amplitude distribution of the object light and the complex amplitude distribution of the reference light prepared in advance.

参照光の複素振幅分布は、予め条件データ記憶手段14に記憶しておく。参照光の波面は、平面波、球面波等、任意の波面でよい。
また、ホログラムデータ計算手段12が計算により生成するホログラムデータは、振幅型、位相型、複素振幅型のいずれであっても構わない。
物体光の複素振幅分布と、参照光の複素振幅分布とからホログラムデータを生成する手法は一般的な手法を用いればよいため、ここでは、詳細な説明を省略する。
ホログラムデータ計算手段12は、計算によって得られたホログラムデータをホログラムデータ間引き手段13に出力する。
The complex amplitude distribution of the reference light is stored in the condition data storage means 14 in advance. The wavefront of the reference light may be an arbitrary wavefront such as a plane wave or a spherical wave.
Further, the hologram data generated by the calculation by the hologram data calculation means 12 may be of amplitude type, phase type, or complex amplitude type.
A general technique may be used for generating hologram data from the complex amplitude distribution of the object light and the complex amplitude distribution of the reference light, so detailed description is omitted here.
The hologram data calculation means 12 outputs the hologram data obtained by the calculation to the hologram data thinning means 13 .

ホログラムデータ間引き手段13は、ホログラムデータ計算手段12で計算されたホログラムデータから、予め設定された欠損画素位置のデータを間引くものである。
すなわち、ホログラムデータ間引き手段13は、予め設定された欠損画素位置のデータを間引くことで欠損ホログラムデータを生成する。
ここでは、欠損画素位置は予め条件データ記憶手段14に記憶されており、ホログラムデータ間引き手段13は、条件データ記憶手段14に設定されている欠損画素位置の画素を間引いて欠損ホログラムデータを生成する。
The hologram data thinning-out means 13 thins out the data of preset defective pixel positions from the hologram data calculated by the hologram data calculating means 12 .
That is, the hologram data thinning means 13 thins out the data of the preset defective pixel positions to generate the defective hologram data.
Here, the defective pixel positions are stored in advance in the condition data storage means 14, and the hologram data thinning means 13 thins out the pixels at the defective pixel positions set in the condition data storage means 14 to generate defective hologram data. .

ホログラムデータ間引き手段13は、図示を省略した送信手段を介して、欠損ホログラムデータを、電子ホログラフィ表示装置(図4参照)に送信する。あるいは、ホログラムデータ間引き手段13は、図示を省略した記録媒体に欠損ホログラムデータを記録し、電子ホログラフィ表示装置(図4参照)に読み込ませる。 The hologram data thinning means 13 transmits the missing hologram data to the electronic holography display device (see FIG. 4) via transmission means (not shown). Alternatively, the hologram data thinning means 13 records the defective hologram data in a recording medium (not shown) and causes the electronic holography display device (see FIG. 4) to read the data.

ここで、図3A~図3Dを参照して、欠損画素位置の例について説明する。なお、ここでは、ホログラムデータHDを横方向(x方向)16画素、縦方向(y方向)16画素のデータとし、通常画素(欠損させない画素)NPを白色、欠損画素TPを黒色で表している。 Examples of missing pixel positions will now be described with reference to FIGS. 3A to 3D. Here, the hologram data HD is data of 16 pixels in the horizontal direction (x direction) and 16 pixels in the vertical direction (y direction), normal pixels (non-defective pixels) NP are represented in white, and defective pixels TP are represented in black. .

図3Aは、ホログラムデータHDから行ごとに画素を欠損(間引き)させる例を示している。ここでは、4行ごとに欠損画素行としている。なお、欠損画素行は、1行である必要はなく、複数行であっても構わない。また、欠損画素行の間隔は等間隔でなくてもよい。 FIG. 3A shows an example of deleting (thinning) pixels from the hologram data HD for each row. Here, every fourth row is a missing pixel row. It should be noted that the number of defective pixel rows does not have to be one, and may be plural. Also, the intervals between defective pixel rows may not be equal.

図3Bは、ホログラムデータHDから列ごとに画素を欠損(間引き)させる例を示している。ここでは、4列ごとに欠損画素列としている。なお、欠損画素列は、1列である必要はなく、複数列であっても構わない。また、欠損画素列の間隔は等間隔でなくてもよい。 FIG. 3B shows an example of deleting (thinning) pixels from the hologram data HD for each column. Here, every 4th row is a defective pixel row. Note that the number of defective pixel columns does not have to be one, and may be plural. Also, the intervals between the defective pixel columns may not be equal.

図3Cは、ホログラムデータHDからブロックごとに画素を欠損(間引き)させる例を示している。ここでは、2×2画素の画素ブロックごとに欠損画素ブロックとしている。なお、欠損画素ブロックの横画素数および縦画素数が、2×2に限定されない。また、欠損画素ブロックの間隔は等間隔でなくてもよい。 FIG. 3C shows an example of deleting (thinning) pixels from the hologram data HD for each block. Here, each pixel block of 2×2 pixels is defined as a defective pixel block. Note that the number of horizontal pixels and the number of vertical pixels of the defective pixel block are not limited to 2×2. Also, the intervals between the defective pixel blocks may not be equal.

図3Dは、ホログラムデータHDからランダムな位置で画素を欠損(間引き)させる例を示している。ここでは、ホログラムデータHD全体でランダムな欠損画素を設定した例を示している。しかし、所定の大きさのブロック(例えば、8×8画素ブロック)の範囲内でランダムな欠損画素を設定し、そのブロックを横方向および縦方向に繰り返して設定してもよい。
図1に戻って、ホログラムデータ生成装置1の構成について説明を続ける。
FIG. 3D shows an example of missing (thinning) pixels at random positions from the hologram data HD. Here, an example is shown in which defective pixels are randomly set in the entire hologram data HD. However, it is also possible to randomly set defective pixels within a block of a predetermined size (eg, 8×8 pixel block) and set the block repeatedly in the horizontal and vertical directions.
Returning to FIG. 1, the description of the configuration of the hologram data generation device 1 is continued.

条件データ記憶手段14は、ホログラムデータを生成するための各種の条件データを記憶するものである。条件データ記憶手段14は、半導体メモリ等の一般的な記憶媒体で構成することができる。
条件データ記憶手段14は、条件データとして、伝播計算手段11およびホログラムデータ間引き手段13で使用する欠損画素の位置を示す欠損画素位置データ、階調数等を予め記憶しておく。また、条件データ記憶手段14は、条件データとして、ホログラムデータ計算手段12で使用する参照光の複素振幅分布を予め記憶しておく。
なお、条件データ記憶手段14には、さらに、ホログラムデータを生成するための各種条件、例えば、変調方式(位相変調型、振幅変調型、複素振幅変調型)、階調数、ホログラムの大きさ等が記憶されているものとする。
The condition data storage means 14 stores various condition data for generating hologram data. The condition data storage means 14 can be composed of a general storage medium such as a semiconductor memory.
The condition data storage means 14 preliminarily stores, as condition data, defective pixel position data indicating the positions of defective pixels used by the propagation calculation means 11 and the hologram data thinning means 13, the number of gradations, and the like. Moreover, the condition data storage means 14 stores in advance the complex amplitude distribution of the reference light used by the hologram data calculation means 12 as condition data.
The condition data storage means 14 further stores various conditions for generating hologram data, such as modulation method (phase modulation type, amplitude modulation type, complex amplitude modulation type), number of gradations, size of hologram, and the like. is stored.

以上説明したように、ホログラムデータ生成装置1は、ホログラムデータ間引き手段13によって、予め定めた欠損画素を間引いてホログラムデータを生成するため、表示する3次元映像を大画面化する場合、ホログラムデータの情報量を削減することができる。
なお、ホログラムデータ生成装置1は、図示を省略したコンピュータを、前記した各手段として機能させるためのホログラムデータ生成プログラムで動作させることができる。
As described above, the hologram data generation device 1 generates hologram data by thinning predetermined defective pixels by the hologram data thinning means 13. Therefore, when a three-dimensional image to be displayed is enlarged, the hologram data may be reduced. The amount of information can be reduced.
The hologram data generation device 1 can operate a computer (not shown) with a hologram data generation program for functioning as each means described above.

[ホログラムデータ生成装置の動作]
次に、図4を参照(構成については適宜図1参照)して、本発明の実施形態に係るホログラムデータ生成装置1の動作について説明する。なお、条件データ記憶手段14には、欠損ホログラムデータを生成するための各種条件データが予め記憶されているものとする。
[Operation of hologram data generation device]
Next, the operation of the hologram data generation device 1 according to the embodiment of the present invention will be described with reference to FIG. 4 (see also FIG. 1 for the configuration). It is assumed that the condition data storage means 14 stores in advance various condition data for generating missing hologram data.

ステップS1において、位相付加手段10は、図示を省略した入力手段を介して、3次元データである被写体データを入力する。
ステップS2において、位相付加手段10は、ステップS1で入力した被写体データの各画素の値を振幅とし、各画素に初期位相(例えば、ランダム位相)を付加する。これによって、被写体データは複素振幅分布となる。
ステップS3において、伝播計算手段11は、ステップS2で生成された被写体データの複素振幅分布から、角スペクトル法等の伝播計算により、予め定めたホログラム面の複素振幅分布を生成する。
In step S1, the phase adding means 10 inputs object data, which is three-dimensional data, through an input means (not shown).
In step S2, the phase adding means 10 sets the value of each pixel of the object data input in step S1 as an amplitude, and adds an initial phase (for example, random phase) to each pixel. As a result, the object data has a complex amplitude distribution.
In step S3, the propagation calculation means 11 generates a complex amplitude distribution of a predetermined hologram plane from the complex amplitude distribution of the object data generated in step S2 by propagation calculation such as the angular spectrum method.

ステップS4において、ホログラムデータ計算手段12は、ステップS3で生成されたホログラム面における複素振幅分布を物体光の複素振幅分布とし、予め準備した参照光の複素振幅分布により、ホログラムデータを生成する。
ステップS5において、ホログラムデータ間引き手段13は、ステップS4で生成されたホログラムデータから、欠損画素位置の画素を間引く。
これによって、ホログラムデータ生成装置1は、データ量を削減したホログラムデータ(欠損ホログラムデータ)を生成することができる。
In step S4, the hologram data calculation means 12 uses the complex amplitude distribution on the hologram plane generated in step S3 as the complex amplitude distribution of the object light, and generates hologram data from the previously prepared complex amplitude distribution of the reference light.
In step S5, the hologram data thinning means 13 thins out the pixels at the defective pixel positions from the hologram data generated in step S4.
As a result, the hologram data generation device 1 can generate hologram data (missing hologram data) with a reduced data amount.

[電子ホログラフィ表示装置の構成]
次に、図5を参照して、本発明の実施形態に係る電子ホログラフィ表示装置2の構成について説明する。
電子ホログラフィ表示装置2は、ホログラムデータ生成装置1(図1参照)で生成された欠損ホログラムデータから被写体の再生像を表示するものである。
図5に示すように、電子ホログラフィ表示装置2は、欠損データ記憶手段20と、欠損画素補間手段21と、表示手段22と、発光手段23と、を備える。
[Configuration of electronic holographic display device]
Next, the configuration of the electronic holography display device 2 according to the embodiment of the present invention will be described with reference to FIG.
The electronic holography display device 2 displays a reconstructed image of a subject from the defective hologram data generated by the hologram data generation device 1 (see FIG. 1).
As shown in FIG. 5 , the electronic holography display device 2 includes missing data storage means 20 , missing pixel interpolation means 21 , display means 22 and light emission means 23 .

欠損データ記憶手段20は、欠損ホログラムデータの欠損画素を補間するための欠損データ情報を予め記憶するものである。欠損データ記憶手段20は、半導体メモリ等の一般的な記憶媒体で構成することができる。
欠損データ記憶手段20は、欠損データ情報として、欠損画素の位置、階調数等を予め記憶しておく。なお、欠損データ情報には、すべての欠損画素に割り当てる一定の画素値を設定しておいてもよい。
The missing data storage means 20 pre-stores missing data information for interpolating missing pixels of missing hologram data. The missing data storage means 20 can be composed of a general storage medium such as a semiconductor memory.
The missing data storage means 20 stores in advance the positions of missing pixels, the number of gradations, etc. as missing data information. Note that a fixed pixel value to be assigned to all missing pixels may be set in the missing data information.

欠損画素補間手段21は、欠損ホログラムデータの欠損画素に画素を補間するものである。
欠損画素補間手段21は、図示を省略した入力手段を介して、ホログラムデータ生成装置1(図1参照)で生成された欠損ホログラムデータを入力する。そして、欠損画素補間手段21は、欠損ホログラムデータに対して、欠損データ記憶手段20に記憶されている欠損画素の位置に画素を挿入することで、欠損画素を補間する。このとき、補間する画素の値は、任意の値でも構わないし、欠損データ記憶手段20に記憶されている画素値を用いても構わない。
なお、欠損画素の位置は、予め欠損データ記憶手段20に記憶されている必要はなく、欠損ホログラムデータに対応付けられたデータとして外部から入力してもよい。
The missing pixel interpolating means 21 interpolates the missing pixels of the missing hologram data.
The missing pixel interpolating means 21 inputs the missing hologram data generated by the hologram data generating device 1 (see FIG. 1) through an input means (not shown). Then, the missing pixel interpolating means 21 interpolates missing pixels in the missing hologram data by inserting pixels into the missing pixel positions stored in the missing data storage means 20 . At this time, the value of the pixel to be interpolated may be any value, or the pixel value stored in the missing data storage means 20 may be used.
The position of the defective pixel need not be stored in advance in the defective data storage means 20, and may be input from the outside as data associated with the defective hologram data.

これによって、欠損画素補間手段21は、例えば、図3A~図3Dに示した欠損画素TPを補間してホログラムデータHDを生成することができる。
欠損画素補間手段21は、欠損画素を補間したホログラムデータを表示手段22に出力する。
Thereby, the defective pixel interpolating means 21 can generate the hologram data HD by interpolating the defective pixels TP shown in FIGS. 3A to 3D, for example.
The missing pixel interpolating means 21 outputs the hologram data obtained by interpolating the missing pixels to the display means 22 .

表示手段22は、欠損画素補間手段21で欠損画素が補間されたホログラムデータを表示するものである。なお、欠損画素のデータは、入力されたホログラムデータに依存しない。そのため、欠損画素補間手段21は、表示手段22に欠損画素のデータを毎フレーム書き込まなくてもよい。
表示手段22は、空間光変調器(SLM)で構成することができる。
空間光変調器が反射型液晶であれば、表示手段22は、前面から発光手段23が発光する光を照明光として照射されることで再生像を再生する。また、空間光変調器が透過型液晶であれば、表示手段22は、背面から発光手段23が発光する光を照明光として照射されることで再生像を再生する。
The display means 22 displays the hologram data in which the missing pixels are interpolated by the missing pixel interpolating means 21 . Note that the data of the missing pixels does not depend on the input hologram data. Therefore, the defective pixel interpolating means 21 does not have to write the data of the defective pixels to the display means 22 every frame.
The display means 22 may consist of a spatial light modulator (SLM).
If the spatial light modulator is a reflective liquid crystal, the display means 22 reproduces a reproduced image by being irradiated with light emitted from the light emitting means 23 from the front as illumination light. If the spatial light modulator is a transmissive liquid crystal, the display means 22 reproduces a reproduced image by being irradiated with the light emitted by the light emitting means 23 from the back as the illumination light.

発光手段23は、表示手段22に照明光を照射するものである。
発光手段23は、例えば、光源としてレーザー発光装置と、2つの凸レンズとを備え、レーザー発光装置が発光するレーザー光の径を第1の凸レンズにより拡大させ、第2の凸レンズにより平行光に変換して表示手段22に照射する。
The light emitting means 23 irradiates the display means 22 with illumination light.
The light emitting means 23 includes, for example, a laser light emitting device as a light source and two convex lenses. to irradiate the display means 22.

以上説明したように、電子ホログラフィ表示装置2は、欠損ホログラムデータの欠損画素を補間して、再生像を表示させることができる。
なお、電子ホログラフィ表示装置2は、図示を省略したコンピュータを、前記した各手段として機能させるための電子ホログラフィ表示プログラムで動作させることができる。
As described above, the electronic holography display device 2 can interpolate the missing pixels of the missing hologram data and display a reproduced image.
The electronic holography display device 2 can be operated by an electronic holography display program for causing a computer (not shown) to function as each means described above.

[電子ホログラフィ表示装置の動作]
次に、図6を参照(構成については適宜図5参照)して、本発明の実施形態に係る電子ホログラフィ表示装置2の動作について説明する。なお、欠損データ記憶手段20には、欠損ホログラムデータの欠損画素を補間するための欠損データ情報が予め記憶されているものとする。
[Operation of electronic holographic display device]
Next, the operation of the electronic holographic display device 2 according to the embodiment of the present invention will be described with reference to FIG. 6 (see also FIG. 5 for the configuration). It is assumed that missing data information for interpolating missing pixels of missing hologram data is stored in the missing data storage means 20 in advance.

ステップS10において、欠損画素補間手段21は、図示を省略した入力手段を介して、ホログラムデータ生成装置1(図1参照)で生成された欠損ホログラムデータを入力する。
ステップS11において、欠損画素補間手段21は、欠損ホログラムデータに対して、欠損データ記憶手段20に記憶されている欠損画素の位置に画素を挿入することで、欠損画素を補間したホログラムデータを生成する。
ステップS12において、表示手段22は、ステップS11で生成されたホログラムデータを表示する。このとき、表示手段22は、発光手段23から照明光を照射されることで、再生像を表示する。
これによって、電子ホログラフィ表示装置2は、欠損ホログラムデータから、3次元の被写体の再生像を表示することができる。
In step S10, the missing pixel interpolating means 21 inputs the missing hologram data generated by the hologram data generating device 1 (see FIG. 1) through an input means (not shown).
In step S11, the missing pixel interpolating means 21 generates hologram data in which missing pixels are interpolated by inserting pixels into the missing hologram data at the positions of missing pixels stored in the missing data storage means 20. .
At step S12, the display means 22 displays the hologram data generated at step S11. At this time, the display means 22 displays the reproduced image by being irradiated with illumination light from the light emitting means 23 .
As a result, the electronic holography display device 2 can display a three-dimensional reconstructed image of the object from the missing hologram data.

(欠損画素による画像品質について)
ここで、ホログラムデータに欠損画素を設けることによる再生像の品質をシミュレーションした結果について説明する。
ここでは、被写体データとして、簡易的に標準画像データベースで公開されているマンドリルの画像を用いた。表示対象となる表示手段22(SLM)の画素数は1024×1024画素である。被写体データの画像は512×512画素であるため、周囲をゼロで埋めることで1024×1024画素とした。表示装置22は位相変調型のSLMとした。階調数は8bit、画素ピッチは水平垂直とも1μmとした。また、初期位相としてランダム位相を付加した。なお、初期位相については、後記するGSアルゴリズムによって50回反復計算を行って最適化したものを用いた。参照光は表示装置22に垂直に入射する平面波とした。
(Regarding image quality due to missing pixels)
Here, the result of simulating the quality of a reproduced image by providing defective pixels in hologram data will be described.
Here, as subject data, an image of a mandrill published in a standard image database was simply used. The number of pixels of the display means 22 (SLM) to be displayed is 1024×1024 pixels. Since the image of the subject data is 512×512 pixels, it is made 1024×1024 pixels by padding the periphery with zeros. The display device 22 was a phase modulation type SLM. The number of gradations is 8 bits, and the pixel pitch is 1 μm both horizontally and vertically. A random phase was added as an initial phase. The initial phase was optimized by performing iterative calculation 50 times by the GS algorithm described later. A plane wave that vertically enters the display device 22 is used as the reference light.

被写体面とホログラム面(SLM)との距離zは、伝播計算に誤差がなく、再生像の面内解像度が最も高くなるz=Np/2tanθとした。ここで、NはSLMの一方向の画素数(ここでは、“1024”)、pは画素ピッチ(ここでは、“1”)、θは視域角の1/2(θ=sin-1[λ/(2p)],λは光の波長)とした。 The distance z between the object plane and the hologram plane (SLM) was set to z=Np/2 tan θ at which there is no error in the propagation calculation and the in-plane resolution of the reproduced image is the highest. Here, N is the number of pixels in one direction of the SLM (here, “1024”), p is the pixel pitch (here, “1”), θ is 1/2 of the viewing angle (θ=sin −1 [ λ/(2p)], where λ is the wavelength of light).

この条件の下で、被写体データから、ホログラムデータを生成し、データの一部をランダムに欠損(画素値“0”)させた後、逆伝播計算を行うことで、被写体データを再生成した。そして、元の被写体データ(元画像)と、再生成した被写体データ(再生画像)とを比較評価した。
ここで再生画像の画質評価には、客観画質評価指標であるPSNR(最大信号対雑音比)を用いた。なお、画質評価には、SSIM(構造的類似性度)等、他の客観画質評価指標や主観評価実験を用いってもよい。
Under these conditions, hologram data was generated from the object data, and after part of the data was randomly lost (pixel value "0"), the object data was regenerated by performing backpropagation calculation. Then, the original subject data (original image) and the regenerated subject data (reproduced image) were compared and evaluated.
PSNR (maximum signal-to-noise ratio), which is an objective image quality evaluation index, was used to evaluate the image quality of the reproduced image. For image quality evaluation, other objective image quality evaluation index such as SSIM (Structural Similarity) or subjective evaluation experiment may be used.

図7にシミュレーションの結果を示す。図7のグラフの横軸は、全画素に対する欠損した画素の割合(欠損データ量〔%〕)、縦軸は、PSNR(最大信号対雑音比〔dB〕)を示す。ここでは、データ欠損量を0.5%から50%までとした。
図7に示すように、欠損データ量が増えるにつれて画質(PSNR)は劣化する。この結果は、SLMと元画像の画素数の比が等しければ同様の結果となる。
ホログラムデータ生成装置1によってホログラムデータを欠損させても、再生画像は、欠損画素部分が欠けて見えるのではなく、画像全体の画質に影響を与える。
そのため、ホログラムデータ生成装置1は、ユーザが許容できる画質の範囲で欠損データ量を定めることができる。これによって、ホログラムデータを削減することができる。
FIG. 7 shows the simulation results. The horizontal axis of the graph in FIG. 7 indicates the ratio of defective pixels to all pixels (missing data amount [%]), and the vertical axis indicates PSNR (maximum signal-to-noise ratio [dB]). Here, the amount of missing data is set from 0.5% to 50%.
As shown in FIG. 7, the image quality (PSNR) deteriorates as the amount of missing data increases. This result will be the same if the ratio of the number of pixels of the SLM and the original image is the same.
Even if the hologram data is lost by the hologram data generation device 1, the reproduced image does not appear to have missing pixels, but the image quality of the entire image is affected.
Therefore, the hologram data generation device 1 can determine the amount of missing data within the range of image quality acceptable to the user. This makes it possible to reduce hologram data.

[ホログラムデータ生成装置の変形例]
次に図8を参照して、ホログラムデータ生成装置の変形例であるホログラムデータ生成装置1Bについて説明する。
[Modification of hologram data generation device]
Next, a hologram data generation device 1B, which is a modified example of the hologram data generation device, will be described with reference to FIG.

ホログラムデータ生成装置1Bは、3次元データである被写体データから画素の一部を欠損させたホログラムデータを生成するものであって、ホログラムデータ生成装置1(図1参照)と同じである。
図8に示すように、ホログラムデータ生成装置1Bは、位相付加手段10と、伝播計算手段11Bと、ホログラムデータ計算手段12と、ホログラムデータ間引き手段13と、条件データ記憶手段14と、を備える。
伝播計算手段11B以外の構成は、ホログラムデータ生成装置1(図1参照)と同じであるため、説明を省略する。
The hologram data generation device 1B generates hologram data in which some pixels are missing from subject data, which is three-dimensional data, and is the same as the hologram data generation device 1 (see FIG. 1).
As shown in FIG. 8, the hologram data generation device 1B includes phase addition means 10, propagation calculation means 11B, hologram data calculation means 12, hologram data thinning means 13, and condition data storage means 14.
Since the configuration other than the propagation calculation means 11B is the same as that of the hologram data generation device 1 (see FIG. 1), the description is omitted.

伝播計算手段11Bは、伝播計算により、位相付加手段10で生成された被写体データの複素振幅分布から、予め定めたホログラム面の複素振幅分布を計算するものである。
なお、図1に示した伝播計算手段11は、被写体面からホログラム面までの伝播計算を1回行っただけである。それに対し、伝播計算手段11Bは、GS(Gerchberg-Saxton)アルゴリズムによって、被写体面からホログラム面までの「伝播計算」と、ホログラム面から被写体面までの「逆伝播計算」を、両方の面で「拘束条件」(被写体面拘束条件,ホログラム面拘束条件)を与えて繰り返して行う。
The propagation calculation means 11B calculates a complex amplitude distribution of a predetermined hologram plane from the complex amplitude distribution of the subject data generated by the phase adding means 10 by propagation calculation.
The propagation calculation means 11 shown in FIG. 1 performs only one propagation calculation from the object plane to the hologram plane. On the other hand, the propagation calculation means 11B performs "propagation calculation" from the object plane to the hologram plane and "backpropagation calculation" from the hologram plane to the object plane by the GS (Gerchberg-Saxton) algorithm. Constraint conditions” (subject plane constraint conditions, hologram plane constraint conditions) are given and the process is repeated.

伝播計算手段11Bは、位相付加手段10で生成された複素振幅分布を、例えば、前記式(1)による伝播計算を行い、ホログラム面における複素振幅分布を計算する。
例えば、位相変調型のホログラムデータを作成する場合、伝播計算手段11Bは、ホログラム面拘束条件として、ホログラム面における複素振幅分布の位相のみを抽出する。このとき、伝播計算手段11Bは、欠損画素に対応する画素については、特定の値(例えば“0”)を与える。
そして、伝播計算手段11Bは、位相分布を前記式(1)に対応する逆伝播計算を行い、被写体面における複素振幅分布を計算する。
そして、伝播計算手段11Bは、被写体面拘束条件として、被写体面における複素振幅分布の振幅を元の被写体面の画素値(振幅)に置き換える。
Propagation calculation means 11B performs propagation calculation according to the above equation (1), for example, on the complex amplitude distribution generated by phase addition means 10 to calculate the complex amplitude distribution on the hologram plane.
For example, when creating phase-modulated hologram data, the propagation calculation means 11B extracts only the phase of the complex amplitude distribution on the hologram plane as the hologram plane constraint condition. At this time, the propagation calculation means 11B gives a specific value (for example, "0") to pixels corresponding to missing pixels.
Then, the propagation calculation means 11B performs back propagation calculation corresponding to the above equation (1) for the phase distribution, and calculates the complex amplitude distribution on the object plane.
Then, the propagation calculation means 11B replaces the amplitude of the complex amplitude distribution on the object plane with the pixel value (amplitude) of the original object plane as the object plane constraint condition.

伝播計算手段11Bは、GSアルゴリズムにより、拘束条件を与えて、伝播計算と逆伝播計算を繰り返すことで位相分布を最適化することができる。
なお、伝播計算手段11Bは、GSアルゴリズムによる繰り返し計算を予め定めた回数(例えば、50回)、あるいは、ホログラム面における複素振幅分布の変動量が閾値以下となった場合に、繰り返し計算を終了する。
伝播計算手段11Bは、GSアルゴリズムにより得られたホログラム面における複素振幅分布をホログラムデータ計算手段12に出力する。
The propagation calculation means 11B can optimize the phase distribution by giving a constraint condition and repeating the propagation calculation and the backpropagation calculation by the GS algorithm.
The propagation calculation means 11B terminates the iterative calculation when the GS algorithm repeats the calculation a predetermined number of times (for example, 50 times) or when the amount of variation in the complex amplitude distribution on the hologram plane becomes equal to or less than a threshold. .
The propagation calculation means 11B outputs to the hologram data calculation means 12 the complex amplitude distribution on the hologram plane obtained by the GS algorithm.

これによって、ホログラムデータ生成装置1Bは、ホログラムデータ生成装置1よりも画質のよいホログラムデータを生成することができる。
このホログラムデータ生成装置1Bで生成された欠損ホログラムデータは、電子ホログラフィ表示装置2(図5参照)によって、3次元の被写体再生像として再生することができる。
なお、ホログラムデータ生成装置1Bは、図示を省略したコンピュータを、前記した各手段として機能させるためのホログラムデータ生成プログラムで動作させることができる。
Thus, the hologram data generation device 1B can generate hologram data with better image quality than the hologram data generation device 1B.
The defective hologram data generated by the hologram data generation device 1B can be reproduced as a three-dimensional object reproduction image by the electronic holography display device 2 (see FIG. 5).
The hologram data generation device 1B can operate a computer (not shown) with a hologram data generation program for functioning as each means described above.

このホログラムデータ生成装置1Bの動作は、図4で説明したホログラムデータ生成装置1のステップS3の動作において、GSアルゴリズムを用いている点が異なっているだけであるため、説明を省略する。 The operation of this hologram data generation device 1B is different from the operation of step S3 of the hologram data generation device 1 described with reference to FIG. 4 only in that the GS algorithm is used, so description thereof will be omitted.

(GSアルゴリズムを用いた画像品質について)
ここで、GSアルゴリズムを用いてホログラムデータを生成し、ホログラムデータに欠損画素を設けることによる再生像の品質をシミュレーションした結果について説明する。
(Image quality using GS algorithm)
Here, the result of simulating the quality of a reproduced image by generating hologram data using the GS algorithm and providing defective pixels in the hologram data will be described.

図9にシミュレーションの結果を示す。図9のグラフの横軸は、全画素に対する欠損した画素の割合(欠損データ量〔%〕)、縦軸は、PSNR(最大信号対雑音比〔dB〕)を示す。なお、使用した被写体データ等、各種条件は、図7で説明したシミュレーションと同じである。
図7の結果と図9の結果とを比較すると、図9の結果、すなわち、GSアルゴリズムを用いた方が、画質の劣化を抑えることができる。例えば、欠損データ量を25%とした場合、GSアルゴリズムを用いることで、約4dBだけ画質を改善させることができる。
FIG. 9 shows the simulation results. The horizontal axis of the graph in FIG. 9 indicates the ratio of defective pixels to all pixels (missing data amount [%]), and the vertical axis indicates PSNR (maximum signal-to-noise ratio [dB]). Various conditions such as subject data used are the same as in the simulation described with reference to FIG.
Comparing the result of FIG. 7 with the result of FIG. 9, the result of FIG. 9, that is, the use of the GS algorithm can suppress deterioration of image quality. For example, when the missing data amount is 25%, the image quality can be improved by about 4 dB by using the GS algorithm.

以上、本発明の実施形態に係るホログラムデータ生成装置1,1B、電子ホログラフィ表示装置2の構成および動作について説明したが、本発明はこれらの実施形態に限定されるものではない。
例えば、ここでは、被写体データとして、断層画像を用いたが、点群データ、ポリゴンデータ、デプス画像、多視点画像群等を用いてもよい。
また、ここでは、図3A~図3Dの例で、ホログラムデータHD全体の画素に対する欠損画素の割合(欠損データ量)を25%の例で示したが、この割合は、ホログラム再生を行った場合の画質劣化がユーザに許容できる範囲であれば、任意の割合でよい。
The configurations and operations of the hologram data generation devices 1 and 1B and the electronic holography display device 2 according to the embodiments of the present invention have been described above, but the present invention is not limited to these embodiments.
For example, here, tomographic images are used as object data, but point group data, polygon data, depth images, multi-viewpoint image groups, etc. may be used.
Also, in the examples of FIGS. 3A to 3D, the ratio of defective pixels (missing data amount) to the pixels of the entire hologram data HD is shown as an example of 25%. Any ratio may be used as long as the image quality deterioration of is within a range acceptable to the user.

1,1B ホログラムデータ生成装置
10 位相付加手段
11,11B 伝播計算手段
12 ホログラムデータ計算手段
13 ホログラムデータ間引き手段
14 条件データ記憶手段
2 電子ホログラフィ表示装置
20 欠損データ記憶手段
21 欠損画素補間手段
22 表示手段(空間光変調器)
23 発光手段
Reference Signs List 1, 1B hologram data generation device 10 phase addition means 11, 11B propagation calculation means 12 hologram data calculation means 13 hologram data thinning means 14 condition data storage means 2 electronic holography display device 20 missing data storage means 21 missing pixel interpolation means 22 display means (spatial light modulator)
23 luminous means

Claims (7)

3次元データである被写体データから画素の一部を欠損させたホログラムデータを生成するホログラムデータ生成装置であって、
前記被写体データに位相を付加して複素振幅分布を生成する位相付加手段と、
伝播計算により、前記被写体データの複素振幅分布からホログラム面の複素振幅分布を計算する伝播計算手段と、
前記ホログラム面の複素振幅分布と参照光の複素振幅分布とからホログラムデータを計算するホログラムデータ計算手段と、
前記ホログラムデータ計算手段で計算されたホログラムデータから、予め設定された欠損画素位置のデータを間引くホログラムデータ間引き手段と、
を備えることを特徴とするホログラムデータ生成装置。
A hologram data generation device for generating hologram data in which some pixels are missing from subject data, which is three-dimensional data,
phase addition means for adding a phase to the object data to generate a complex amplitude distribution;
Propagation calculation means for calculating a complex amplitude distribution of the hologram plane from the complex amplitude distribution of the subject data by propagation calculation;
hologram data calculation means for calculating hologram data from the complex amplitude distribution of the hologram plane and the complex amplitude distribution of the reference light;
hologram data thinning means for thinning data at preset defective pixel positions from the hologram data calculated by the hologram data calculating means;
A hologram data generation device comprising:
前記ホログラムデータ間引き手段は、前記ホログラムデータから、前記欠損画素位置として、行ごと、列ごと、ブロックごと、または、ランダムにデータを間引くことを特徴とする請求項1に記載のホログラムデータ生成装置。 2. The hologram data generating apparatus according to claim 1, wherein said hologram data thinning means thins out data as said missing pixel positions from said hologram data for each row, each column, each block, or randomly. 前記伝播計算手段は、GSアルゴリズムによって、前記ホログラム面の複素振幅分布を計算することを特徴とする請求項1または請求項2に記載のホログラムデータ生成装置。 3. The hologram data generation apparatus according to claim 1, wherein said propagation calculation means calculates the complex amplitude distribution of said hologram plane by a GS algorithm. コンピュータを、請求項1から請求項3のいずれか一項に記載のホログラムデータ生成装置として機能させるためのホログラムデータ生成プログラム。 A hologram data generation program for causing a computer to function as the hologram data generation device according to any one of claims 1 to 3. 画素の一部を欠損した欠損ホログラムデータを入力し、被写体再生像を表示する電子ホログラフィ表示装置であって、
前記欠損ホログラムデータの欠損画素に画素を補間する欠損画素補間手段と、
前記欠損画素補間手段で欠損画素が補間されたホログラムデータを表示する空間光変調器で構成された表示手段と、
前記空間光変調器に対して、照明光を照射する発光手段と、
を備えることを特徴とする電子ホログラフィ表示装置。
An electronic holography display device for inputting missing hologram data in which a part of a pixel is missing and displaying a reproduced image of a subject,
defective pixel interpolation means for interpolating pixels into defective pixels of the defective hologram data;
display means comprising a spatial light modulator for displaying hologram data in which the defective pixels are interpolated by the defective pixel interpolating means;
light emitting means for irradiating the spatial light modulator with illumination light;
An electronic holographic display device comprising:
前記欠損画素補間手段は、前記ホログラムデータの欠損画素のデータについては前記空間光変調器への書き込みを行わないことを特徴とする請求項5に記載の電子ホログラフィ表示装置。 6. The electronic holographic display device according to claim 5, wherein said defective pixel interpolating means does not write data of defective pixels of said hologram data to said spatial light modulator. コンピュータを、請求項5または請求項6に記載の電子ホログラフィ表示装置として機能させるための電子ホログラフィ表示プログラム。 An electronic holography display program for causing a computer to function as the electronic holography display device according to claim 5 or 6.
JP2022016807A 2022-02-07 2022-02-07 Hologram data generator, electronic holography display device, and program thereof Pending JP2023114496A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2022016807A JP2023114496A (en) 2022-02-07 2022-02-07 Hologram data generator, electronic holography display device, and program thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2022016807A JP2023114496A (en) 2022-02-07 2022-02-07 Hologram data generator, electronic holography display device, and program thereof

Publications (1)

Publication Number Publication Date
JP2023114496A true JP2023114496A (en) 2023-08-18

Family

ID=87569803

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022016807A Pending JP2023114496A (en) 2022-02-07 2022-02-07 Hologram data generator, electronic holography display device, and program thereof

Country Status (1)

Country Link
JP (1) JP2023114496A (en)

Similar Documents

Publication Publication Date Title
Blinder et al. Signal processing challenges for digital holographic video display systems
Shi et al. End-to-end learning of 3d phase-only holograms for holographic display
JP4524708B2 (en) Playback device and playback method
JP4932490B2 (en) Holographic apparatus and method
US8873120B2 (en) Computer implemented method for generating binary holograms
JP5266223B2 (en) Method for generating computer video holograms in real time using propagation
US10663923B2 (en) Efficiently generating a high quality patterned-phase-only hologram for display on a single device
CN104952034B (en) Conversion of complex holograms to phase holograms
US9507321B2 (en) Converting complex holograms to phase holograms
CN101563659A (en) Computer generated hologram
WO2021216747A1 (en) Real-Time Photorealistic 3D Holography with Deep Neural Networks
US20230205133A1 (en) Real-time Photorealistic 3D Holography With Deep Neural Networks
GB2414887A (en) Three dimensional projection display
US20170060089A1 (en) Fast generation of digital holograms
US9823623B2 (en) Conversion of complex holograms to phase holograms
KR101021127B1 (en) Method for generating computer generated hologram using look-up table and spatial redundancy, and Apparatus thereof
CN111176094B (en) Laser holographic projection display method and device
JP2005338787A (en) Optical wavefront control pattern generating apparatus and optical wavefront control pattern generating method
US9323218B2 (en) Generating full-parallax digital holograms
KR20090011973A (en) Method for reproducing hologram 3d image by integral imaging scheme and apparatus thereof
Birnbaum et al. Object-based digital hologram segmentation and motion compensation
JP2023114496A (en) Hologram data generator, electronic holography display device, and program thereof
US9454131B2 (en) Method and apparatus for fast generation of hologram
JP5019541B2 (en) Lens functional member array, hologram generating apparatus, and hologram generating program
KR102144473B1 (en) APPARATUS AND METHOD FOR PRODUCING 3-Dimension HOLOGRAM IMAGE