JP7404030B2 - Enhanced image model creation system - Google Patents

Enhanced image model creation system Download PDF

Info

Publication number
JP7404030B2
JP7404030B2 JP2019195000A JP2019195000A JP7404030B2 JP 7404030 B2 JP7404030 B2 JP 7404030B2 JP 2019195000 A JP2019195000 A JP 2019195000A JP 2019195000 A JP2019195000 A JP 2019195000A JP 7404030 B2 JP7404030 B2 JP 7404030B2
Authority
JP
Japan
Prior art keywords
line
image model
color information
pixel
sight distance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019195000A
Other languages
Japanese (ja)
Other versions
JP2021068349A (en
Inventor
栄 向山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kokusai Kogyo Co Ltd
Original Assignee
Kokusai Kogyo Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kokusai Kogyo Co Ltd filed Critical Kokusai Kogyo Co Ltd
Priority to JP2019195000A priority Critical patent/JP7404030B2/en
Publication of JP2021068349A publication Critical patent/JP2021068349A/en
Application granted granted Critical
Publication of JP7404030B2 publication Critical patent/JP7404030B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本願発明は、地形を表現する技術に関するものであり、より具体的には、例えば視点からの距離に応じて明るさを強調した画像を作成するための強調画像モデル作成システムに関するものである。 The present invention relates to a technique for expressing topography, and more specifically, to an enhanced image model creation system for creating an image whose brightness is emphasized depending on the distance from a viewpoint, for example.

我が国は地震が頻発する国として知られ、近年では、東北地方太平洋沖地震をはじめ、兵庫県南部地震、北海道胆振東部地震など大きな地震が発生し、そのたびに甚大な被害を被ってきた。例えば、兵庫県南部地震では強い直下型地震による衝撃が原因で多くの家屋が倒壊し、また東日本大震災では津波によって夥しい数の家屋が壊滅的な被害を受けた。 Japan is known as a country where earthquakes occur frequently, and in recent years major earthquakes have occurred, including the Tohoku Pacific Coast Earthquake, the Southern Hyogo Prefecture Earthquake, and the Eastern Hokkaido Iburi Earthquake, each of which has caused significant damage. For example, in the Hyogo Prefecture Southern Earthquake, many houses collapsed due to the impact of a strong direct earthquake, and in the Great East Japan Earthquake, a large number of houses were devastated by the tsunami.

我が国の陸域には、およそ2000の活断層が存在するといわれているが、すべての活断層の位置が明確になっているわけではなく、現在も文部科学省をはじめとする各機関で鋭意調査が進められている。活断層の調査手法には、地形観察、実施測量、トレンチ調査、弾性波探査といった物理探査など現地で行う調査と、空中写真判読などの机上調査があるが、一般的には、まず机上調査で活断層と疑われるいわば活断層候補を把握し、その後に特定の活断層候補に対して詳細な現地調査を行っている。 It is said that there are approximately 2,000 active faults in the land area of Japan, but the locations of all active faults are not clear, and various organizations including the Ministry of Education, Culture, Sports, Science and Technology are currently conducting intensive investigations. is in progress. Investigation methods for active faults include on-site investigations such as topographical observation, field surveying, trench surveys, and geophysical surveys such as elastic wave surveys, as well as desk investigations such as aerial photo interpretation.In general, desk investigations are first carried out. We identify potential active faults that are suspected to be active faults, and then conduct detailed on-site surveys of specific active fault candidates.

従来、机上調査として行われてきた空中写真判読は、航空機などで地形を撮影した2枚の空中写真を並べ、人が立体視することによって地形の起伏などを読み取り、活断層の存在を把握するものである。この空中写真判読には熟練を要するため誰でも実施できるものではなく、また立体視した状態の画像を他人に示すことが極めて困難な手法である。 Aerial photo interpretation, which has traditionally been carried out as a desk survey, involves arranging two aerial photographs taken of the topography by an aircraft, and using 3D viewing to read the undulations of the topography and determine the presence of active faults. It is something. This aerial photo interpretation requires skill, so it cannot be performed by anyone, and it is extremely difficult to show a stereoscopic image to someone else.

一方、コンピュータの性能や情報化技術の高度化に伴い、近年では地形を3次元の地形モデル(以下、「数値標高モデル」という。)として取り扱うケースが増えてきた。この数値標高モデルとしては、地表面を覆う樹木や建造物など(以下、「被覆物」という。)を地形モデルとして含む数値表層モデル(DSM:DigitalSurfaceModel)や、被覆物を除く純粋な地表面を表す数値標高モデル(DEM:DigitalElevationModel)などを例示することができる。いずれにしろ数値標高モデルは、コンピュータによる処理が可能なものであり、立体的な表現を可能にするものである。 On the other hand, with the advancement of computer performance and information technology, in recent years there has been an increasing number of cases in which terrain is treated as a three-dimensional terrain model (hereinafter referred to as a "digital elevation model"). This digital elevation model includes a digital surface model (DSM) that includes trees and buildings covering the ground surface (hereinafter referred to as "coverings") as a topographic model, and a digital surface model (DSM) that includes the pure ground surface excluding coverings. An example of this is a digital elevation model (DEM). In any case, the digital elevation model can be processed by a computer and enables three-dimensional expression.

数値標高モデルを利用して地形を立体的に表現する手法としては、陰影図や傾斜量図、標高段彩図といった正射影画像を作成する手法、あるいは起伏や地物の奥行などが理解しやすい鳥瞰図を作成する手法などが知られている。また本願の出願人が本願に先立って出願した特許文献1では、航空レーザー計測で取得した点群データからDEMを作成し、DEMの各メッシュに傾斜量や標高値などの地形量を付与し、この地形量に基づいてカラー標高図(標高段彩図)やグレースケール傾斜図を作成し、さらにこのカラー標高図とグレースケール傾斜図を合成したカラー標高傾斜図を作成するシステムを提案している。 Methods to express terrain three-dimensionally using digital elevation models include creating orthogonal projection images such as shaded maps, slope maps, and elevation maps, or bird's-eye views that make it easy to understand the relief and depth of features. There are known methods for creating it. Further, in Patent Document 1, which was filed by the applicant of the present application prior to this application, a DEM is created from point cloud data obtained by aerial laser measurement, and topographical quantities such as slope amount and elevation value are assigned to each mesh of the DEM, We are proposing a system that creates a color elevation map (elevation graded map) and a grayscale slope map based on this topographical amount, and then creates a color elevation slope map by combining the color elevation map and the grayscale slope map.

特開2007-48185JP2007-48185

ところで、人が薄暗闇の中で周囲を見たとき、その景色は距離感が把握しづらいうえに立体的に感得することが難しい。一方、懐中電灯などでその薄暗闇を照らすと、人の視線方向における距離感が把握できるようになり、しかも立体的かつ鮮明に周囲を見ることができるようになる。しかしながら地形を立体的に表現する手法に関し、このように光を照らした効果(以下、「ヘッドライト効果」という。)を発揮するような手法が採られることはなかった。すなわち、従来手法である陰影図や傾斜量図、標高段彩図、鳥瞰図、あるいは特許文献1によるカラー標高傾斜図などは、ヘッドライト効果を奏することがなく、つまり人の肉眼に近い表現を実現するものではなかった。 By the way, when people look at their surroundings in dim darkness, it is difficult to grasp the sense of distance, and it is also difficult to perceive the scenery in three dimensions. On the other hand, by illuminating the dim darkness with a flashlight, it becomes possible to grasp the sense of distance in the direction of the person's line of sight, and it becomes possible to see the surroundings three-dimensionally and clearly. However, regarding the method of expressing the terrain three-dimensionally, a method that produces the effect of illuminating light (hereinafter referred to as the "headlight effect") has not been adopted. In other words, conventional methods such as shading maps, slope maps, elevation maps, bird's-eye views, or color elevation slope maps according to Patent Document 1 do not produce a headlight effect, and in other words, realize expressions close to those seen by the human eye. It wasn't.

本願発明の課題は、従来技術が抱える問題を解決することであり、すなわちヘッドライト効果が期待できる地形の立体的表現を可能にする強調画像モデル作成システムを提供することである。 An object of the present invention is to solve the problems faced by the prior art, that is, to provide an enhanced image model creation system that enables three-dimensional representation of terrain in which a headlight effect can be expected.

本願発明は、例えば視点からの距離に応じて画素ごとに明度を調整する、という点に着目したものであり、従来にはなかった発想に基づいてなされた発明である。 The present invention focuses on adjusting the brightness of each pixel according to the distance from the viewpoint, for example, and is an invention based on an idea that did not exist in the past.

本願発明の強調画像モデル作成システムは、複数の画素(平面位置情報を有する画素)で構成された「基礎画像モデル」を用いて「強調画像モデル」を作成するシステムであり、視線距離算出手段と強調色情報設定手段を備えたものである。なお、基礎画像モデルを構成するそれぞれの画素には、明度を含む色情報が付与されている。視線距離算出手段は、基礎画像モデルを読み出すとともに、あらかじめ設定された基準点から画素までの直線距離である「視線距離」を画素ごとに求める手段である。また強調色情報設定手段は、色情報のうちの明度を視線距離に応じて変更した「強調色情報」を画素ごとに設定する手段であり、視線距離が短いほど明るくなるように強調色情報を設定する。そして、それぞれの画素に対して強調色情報を付与することによって強調画像モデルを作成する。 The enhanced image model creation system of the present invention is a system that creates an "enhanced image model" using a "basic image model" composed of a plurality of pixels (pixels having plane position information), and includes line-of-sight distance calculation means. It is equipped with emphasis color information setting means. Note that color information including brightness is given to each pixel constituting the basic image model. The line-of-sight distance calculation means is a means for reading out the basic image model and calculating a "line-of-sight distance" for each pixel, which is a straight-line distance from a preset reference point to the pixel. The emphasis color information setting means sets "emphasis color information" in which the brightness of the color information is changed according to the line-of-sight distance for each pixel, and the emphasis color information is set so that the shorter the line-of-sight distance, the brighter it becomes. Set. Then, an emphasized image model is created by assigning emphasized color information to each pixel.

本願発明の強調画像モデル作成システムは、あらかじめ設定された2以上の基準点に基づいて強調画像モデルを作成するものとすることもできる。この場合、視線距離算出手段は、それぞれ2以上の基準点に係る視線距離を画素ごとに求め、強調色情報設定手段は、2以上の視線距離に基づいて強調色情報を画素ごとに設定する。 The enhanced image model creation system of the present invention can also create an enhanced image model based on two or more preset reference points. In this case, the line-of-sight distance calculation means calculates line-of-sight distances for each pixel with respect to two or more reference points, and the emphasis color information setting means sets emphasis color information for each pixel based on the two or more line-of-sight distances.

本願発明の強調画像モデル作成システムは、基準点移動手段と描画手段をさらに備えたものとすることもできる。基準点移動手段は、基準点を移動させる手段であり、描画手段は、画素ごとに強調色情報を出力した画像を描画する手段である。この場合、視線距離算出手段は、基準点の移動に伴って視線距離を画素ごとに求め、強調色情報設定手段は、基準点の移動に伴って強調色情報を画素ごとに設定し、そして描画手段は、基準点の移動に伴って画像を描画する。 The enhanced image model creation system of the present invention may further include a reference point moving means and a drawing means. The reference point moving means is means for moving the reference point, and the drawing means is means for drawing an image in which emphasized color information is output for each pixel. In this case, the line-of-sight distance calculation means calculates the line-of-sight distance for each pixel as the reference point moves, and the emphasis color information setting means sets emphasis color information for each pixel as the reference point moves, and then draws The means draws an image as the reference point moves.

本願発明の強調画像モデル作成システムは、(基準点に代えて)基準平面に基づいて強調画像モデルを作成するものとすることもできる。この場合、視線距離算出手段は、あらかじめ設定された基準平面から画素までの最短距離である視線距離を画素ごとに求める。 The enhanced image model creation system of the present invention can also create an enhanced image model based on a reference plane (instead of a reference point). In this case, the line-of-sight distance calculation means calculates the line-of-sight distance, which is the shortest distance from a preset reference plane to the pixel, for each pixel.

本願発明の強調画像モデル作成システムは、それぞれの画素が高さ情報を有する基礎画像モデルに基づいて、強調画像モデルを作成するものとすることもできる。この場合、視線距離算出手段は、画素の平面位置情報及び高さ情報に基づいて視線距離を求める。 The enhanced image model creation system of the present invention can also create an enhanced image model based on a basic image model in which each pixel has height information. In this case, the line-of-sight distance calculation means calculates the line-of-sight distance based on the plane position information and height information of the pixel.

本願発明の強調画像モデル作成システムは、視線距離に応じて明度係数を求めるとともに、この明度係数を明度に乗ずることによって強調色情報を設定するものとすることもできる。この場合、前記視線距離の2乗に応じて明度係数を求めることもできる。 The enhanced image model creation system of the present invention can also determine the brightness coefficient according to the line-of-sight distance and set the emphasized color information by multiplying the brightness by this brightness coefficient. In this case, the brightness coefficient can also be determined according to the square of the line-of-sight distance.

本願発明の強調画像モデル作成システムには、次のような効果がある。
(1)本願発明による強調画像モデルに基づいて描画された画像は、ヘッドライト効果によってより実感的に(人の肉眼に近い状態で)地形を立体的に把握することができる。
(2)既製の画像モデル(基礎画像モデル)を利用することができることから、比較的容易かつ低コストの強調画像モデルを作成することができる。
The enhanced image model creation system of the present invention has the following effects.
(1) The image drawn based on the enhanced image model according to the present invention allows a three-dimensional understanding of the terrain more realistically (in a state close to that seen by the human eye) due to the headlight effect.
(2) Since a ready-made image model (basic image model) can be used, an enhanced image model can be created relatively easily and at low cost.

(a)は基礎画像モデルに基づいて描画された地形画像、(b)は強調画像モデルに基づいて描画された地形画像。(a) is a topographical image drawn based on the basic image model, and (b) is a topographical image drawn based on the enhanced image model. 基礎画像モデルを模式的に示すモデル図。A model diagram schematically showing a basic image model. 本願発明の強調画像モデル作成システムの主な構成を示すブロック図。FIG. 1 is a block diagram showing the main configuration of the enhanced image model creation system of the present invention. 本願発明の強調画像モデル作成システムの主な処理の流れを示すフロー図。FIG. 2 is a flowchart showing the main processing flow of the enhanced image model creation system of the present invention. 平面座標のみを有する画素における基準点からの視線距離を模式的に示すモデル図。FIG. 3 is a model diagram schematically showing the line-of-sight distance from a reference point in a pixel having only plane coordinates. 3次元座標を有する画素における基準点からの視線距離を模式的に示すモデル図。FIG. 3 is a model diagram schematically showing the line-of-sight distance from a reference point in a pixel having three-dimensional coordinates. 2つの基準点が設定された場合の視線距離を模式的に示すモデル図。FIG. 3 is a model diagram schematically showing line-of-sight distance when two reference points are set. 基準点を移動させる場合の強調画像モデル作成システムの主な処理の流れを示すフロー図。FIG. 3 is a flowchart showing the main processing flow of the enhanced image model creation system when moving the reference point. 平面座標のみを有する画素における基準平面からの視線距離を模式的に示すモデル図。FIG. 2 is a model diagram schematically showing the line-of-sight distance from a reference plane for pixels having only plane coordinates. 3次元座標を有する画素における基準平面からの視線距離を模式的に示すモデル図。FIG. 3 is a model diagram schematically showing the line-of-sight distance from a reference plane at a pixel having three-dimensional coordinates.

本願発明の強調画像モデル作成システムの実施形態の一例を、図に基づいて説明する。 An example of an embodiment of the enhanced image model creation system of the present invention will be described based on the drawings.

1.全体概要
本願発明は、陰影図や傾斜量図、標高段彩図、あるいは鳥瞰図を作成するための基礎となるいわばモデル(以下、「基礎画像モデル」という。)を利用して、明度が強調された画像を作成するためのモデル(以下、「強調画像モデル」という。)を作成することをひとつの特徴としている。図1(a)に基礎画像モデルに基づいて描画された地形画像(以下、単に「基礎画像」という。)を示し、図1(b)に強調画像モデルに基づいて描画された地形画像(以下、単に「強調画像」という。)を示す。図1(a)と図1(b)を見比べると、基礎画像より基礎画像の方が、ヘッドライト効果によって実感的に(人の肉眼に近い状態で)地形を立体的に把握することができることが理解できる。
1. Overall Overview The present invention utilizes a model (hereinafter referred to as "basic image model") that is the basis for creating a shaded map, slope map, elevation map, or bird's-eye view map, to create an image with enhanced brightness. One of its features is that it creates a model for creating (hereinafter referred to as an "enhanced image model"). Figure 1(a) shows a topographical image drawn based on the basic image model (hereinafter simply referred to as "basic image"), and Fig. 1(b) shows a topographical image drawn based on the enhanced image model (hereinafter simply referred to as "basic image"). , simply referred to as "enhanced image"). Comparing Figures 1(a) and 1(b), we can see that the basic image allows for a more realistic three-dimensional understanding of the terrain (in a state similar to the human eye) due to the headlight effect than the basic image. I can understand.

ここで基礎画像モデル200は、図2に示すように対象範囲を分割した複数の小領域(画素PX)で構成されるものである。また基礎画像モデル200を構成するそれぞれの画素PXは、少なくとも平面位置情報(平面座標)を有しており、あるいは平面位置情報に加え高さ情報(つまり3次元座標)を具備することもできる。さらに基礎画像モデル200の各画素PXには、明度を含む色情報が付与されている。 Here, the basic image model 200 is composed of a plurality of small regions (pixels PX) obtained by dividing the target range, as shown in FIG. Further, each pixel PX constituting the basic image model 200 has at least plane position information (plane coordinates), or can also have height information (that is, three-dimensional coordinates) in addition to plane position information. Furthermore, each pixel PX of the basic image model 200 is given color information including brightness.

本来、色は人の視覚で認識するものであり、個人差が伴うものであるが、近年この色をコンピュータで取り扱うべくモデル化されるようになった。色をモデル化する手法にも種々あり、赤(Red)・緑(Green)・青(Blue)の3色を基本色とするRGB、シアン(Cyan)・マゼンタ(Magenta)・イエロー(Yellow)・ブラック(Keycolor)の4色を基本色とするCMYK、黄・赤・青・緑・黒・白の6色を基本色とするNCSやオストワルト表色系などが知られている。ここでいう色情報とは、RGBや、CMYK、NCS、オストワルト表色系といった色のモデル化によって規定される、「色を特定するための値」を指す。例えばRGBを採用した場合、純色の赤の色情報は(255、0、0)であり、純色の緑の色情報は(0、255、0)、純色の青の色情報は(0、0、255)となる。 Originally, colors are perceived visually by humans and are subject to individual differences, but in recent years, colors have been modeled to be handled by computers. There are various methods for modeling colors, including RGB, which has the three basic colors of red, green, and blue; cyan, magenta, yellow; CMYK, which has the four basic colors of black (keycolor), and NCS and Ostwald color system, which have six basic colors of yellow, red, blue, green, black, and white, are known. The color information here refers to "values for specifying colors" defined by color modeling such as RGB, CMYK, NCS, and Ostwald color system. For example, when RGB is used, the color information for pure red is (255, 0, 0), the color information for pure green is (0, 255, 0), and the color information for pure blue is (0, 0). , 255).

またここでいう色情報には、いわば明度のみからなるグレースケールも含まれる。グレースケールとは白から黒まで複数の段階に分けるモデルであり、これによって規定される「濃淡の程度を特定する値」がグレースケール値である。例えば、白から黒まで256段階に分けたとすると、白を255というグレースケール値で表し、黒を0というグレースケール値で表すことができる。もちろんグレースケールは、無次元である0~1の範囲で表すことも、0~100%の百分率で表すこともできる。 Furthermore, the color information referred to here also includes a gray scale consisting only of brightness. Grayscale is a model that divides objects into multiple stages from white to black, and the "values that specify the degree of shading" defined by this model are grayscale values. For example, if there are 256 levels from white to black, white can be represented by a gray scale value of 255, and black can be represented by a gray scale value of 0. Of course, the gray scale can be expressed as a dimensionless range of 0 to 1, or as a percentage of 0 to 100%.

強調画像は、基礎画像モデルの各画素PXが有する色情報のうち特に明度を強調した画像であり、強調画像モデルは、この強調画像を作成するためのモデルである。より詳しくは、光源点や視点としての基準点(あるいは基準平面)を設定したうえで、この基準点や基準平面から各画素PXまでの距離(以下、「視線距離」という。)を求め、さらに視線距離に応じて基礎画像モデルの画素PXの明度を調整することによって新たな色情報(以下、「強調色情報」という。)を設定し、そして強調色情報を各画素PXに付与することで強調画像モデルは作成される。すなわち強調画像モデルは、基礎画像モデルの各画素PXによって構成される(つまり、強調画像モデルと基礎画像モデルを構成する各画素PXは共通する)わけである。なお、視線距離が短いほど明るくなるように強調色情報は設定される。 The emphasized image is an image in which the brightness is particularly emphasized among the color information possessed by each pixel PX of the basic image model, and the emphasized image model is a model for creating this emphasized image. More specifically, after setting a reference point (or reference plane) as a light source point or viewpoint, calculate the distance from this reference point or reference plane to each pixel PX (hereinafter referred to as "line-of-sight distance"), and then New color information (hereinafter referred to as "emphasis color information") is set by adjusting the brightness of the pixel PX of the basic image model according to the line-of-sight distance, and by adding the emphasis color information to each pixel PX. An enhanced image model is created. That is, the emphasized image model is constituted by each pixel PX of the basic image model (that is, each pixel PX constituting the emphasized image model and the basic image model is common). Note that the emphasis color information is set so that the shorter the line-of-sight distance, the brighter the color becomes.

2.強調画像モデル作成システム
図3は、本願発明の強調画像モデル作成システム100の主な構成を示すブロック図である。この図に示すように強調画像モデル作成システム100は、視線距離算出手段101と強調色情報設定手段102を含んで構成され、さらに基準点移動手段103や描画手段104、基準設定手段105、ディスプレイなどの表示手段106、基礎画像モデル記憶手段107、強調画像モデル記憶手段108を含んで構成することもできる。
2. Enhanced Image Model Creation System FIG. 3 is a block diagram showing the main configuration of the enhanced image model creation system 100 of the present invention. As shown in this figure, the enhanced image model creation system 100 includes a line-of-sight distance calculation means 101 and an emphasis color information setting means 102, and further includes a reference point moving means 103, a drawing means 104, a reference setting means 105, a display, etc. It can also be configured to include display means 106, basic image model storage means 107, and enhanced image model storage means 108.

強調画像モデル作成システム100を構成する視線距離算出手段101と強調色情報設定手段102、基準点移動手段103、描画手段104、基準設定手段105は、専用のものとして製造することもできるし、汎用的なコンピュータ装置を利用することもできる。このコンピュータ装置は、パーソナルコンピュータ(PC)や、iPad(登録商標)といったタブレット型PC、スマートフォンを含む携帯端末などによって構成することができる。コンピュータ装置は、CPU等のプロセッサ、ROMやRAMといったメモリを具備しており、さらにマウスやキーボード等の入力手段やディスプレイを含むものもある。表示手段106は、このコンピュータ装置のディスプレイを利用するとよい。 The line-of-sight distance calculation means 101, emphasis color information setting means 102, reference point moving means 103, drawing means 104, and reference setting means 105 that constitute the emphasized image model creation system 100 can be manufactured as dedicated ones, or can be manufactured as general-purpose ones. Other computer equipment may also be used. This computer device can be configured by a personal computer (PC), a tablet PC such as an iPad (registered trademark), a mobile terminal including a smartphone, or the like. A computer device includes a processor such as a CPU, a memory such as a ROM or a RAM, and some devices further include input means such as a mouse and a keyboard, and a display. The display means 106 is preferably a display of this computer device.

また基礎画像モデル記憶手段107と強調画像モデル記憶手段108は、汎用的コンピュータの記憶装置を利用することもできるし、そのほかデータベースサーバに構築することもでき、この場合、ローカルなネットワーク(LAN:LocalAreaNetwork)に置くこともできるし、インターネット経由(つまり無線通信)で保存するクラウドサーバとすることもできる。 Furthermore, the basic image model storage means 107 and the enhanced image model storage means 108 can be stored in a general-purpose computer, or can be constructed in a database server. ), or it can be a cloud server that stores it via the Internet (that is, wireless communication).

以下、図4を参照しながら本願発明の強調画像モデル作成システム100の主な処理について詳しく説明する。図4は、本願発明の強調画像モデル作成システム100の主な処理の流れを示すフロー図である。なおこれらのフロー図では、中央の列に実施する行為を示し、左列にはその行為に必要なものを、右列にはその行為から生ずるものを示している。 Hereinafter, the main processing of the enhanced image model creation system 100 of the present invention will be explained in detail with reference to FIG. FIG. 4 is a flow diagram showing the main processing flow of the enhanced image model creation system 100 of the present invention. In these flowcharts, the middle column shows the action to be performed, the left column shows what is required for the action, and the right column shows what results from the action.

まず、基準設定手段105(図3)を用いて基準点を設定する(図4のStep101)。例えばオペレータが、マウス等のポインティングデバイスやキーボードを利用して基準点を入力することができる。なお基準点310は、図5や図6に示すように1点のみ設定する仕様とすることもできるし、図7に示すように2点あるいは3点以上の設定が可能な仕様とすることもできる。また基準点310は、例えば基礎画像モデル200が対象とする地形から高い位置(つまり上方)に設定するとよく、そのため3次元空間に配置する(3次元座標を有する)ように設定するとよい。 First, a reference point is set using the reference setting means 105 (FIG. 3) (Step 101 in FIG. 4). For example, an operator can input a reference point using a pointing device such as a mouse or a keyboard. Note that the reference point 310 can be designed to have only one point set as shown in FIGS. 5 and 6, or can be set to two or three or more points as shown in FIG. can. Further, the reference point 310 is preferably set, for example, at a high position (that is, above) the topography targeted by the basic image model 200, and is therefore preferably set to be located in a three-dimensional space (having three-dimensional coordinates).

基準点310が設定されると、基礎画像モデル記憶手段107(図3)から基礎画像モデル200が読み出され(図4のStep102)、この基礎画像モデル200と基準点310に基づいて視線距離算出手段101(図3)が「視線距離」を算出する(図4のStep103)。この視線距離400は、基準点310から各画素PXまでの距離であり、特に基準点310から画素PXまでの直線距離として求められる。したがって視線距離400は、画素PXの数だけ算出されるわけである。 When the reference point 310 is set, the basic image model 200 is read out from the basic image model storage means 107 (FIG. 3) (Step 102 in FIG. 4), and the line of sight distance is calculated based on this basic image model 200 and the reference point 310. The means 101 (FIG. 3) calculates the "line of sight distance" (Step 103 in FIG. 4). This line-of-sight distance 400 is the distance from the reference point 310 to each pixel PX, and is particularly determined as the straight-line distance from the reference point 310 to the pixel PX. Therefore, the line-of-sight distance 400 is calculated by the number of pixels PX.

既述したとおり基礎画像モデル200は、平面位置情報(平面座標)のみを有する(つまり高さ情報がない)画素PXで構成することもできるし、3次元座標を具備する画素PXで構成することもできる。平面座標のみを有する画素PXで構成された基礎画像モデル200を利用する場合、図5に示すように基礎画像モデル200(つまり各画素PX)に所定の「基準高さ(例えば、海抜0mなど)」を与えたうえで視線距離400を算出することができる。具体的には、各画素PXが具備する平面座標と基準高さからなる3次元座標と、基準点310が具備する3次元座標に基づいて、基準点310から画素PXまでの直線距離である視線距離400を算出する。 As mentioned above, the basic image model 200 can be composed of pixels PX having only plane position information (plane coordinates) (that is, without height information), or can be composed of pixels PX having three-dimensional coordinates. You can also do it. When using a basic image model 200 composed of pixels PX having only plane coordinates, as shown in FIG. ” and then the line-of-sight distance 400 can be calculated. Specifically, the line of sight, which is the straight-line distance from the reference point 310 to the pixel PX, is determined based on the three-dimensional coordinates that each pixel PX has and the reference height, and the three-dimensional coordinates that the reference point 310 has. Calculate the distance 400.

一方、3次元座標を具備する画素PXで構成された基礎画像モデル200を利用する場合は、図6に示すように基礎画像モデル200を構成する各画素PXにあらかじめ高さ情報が与えられていることから、各画素PXが具備する3次元座標と基準点310が具備する3次元座標に基づいて、基準点310から画素PXまでの直線距離である視線距離400を算出するとよい。 On the other hand, when using the basic image model 200 made up of pixels PX having three-dimensional coordinates, height information is given in advance to each pixel PX making up the basic image model 200, as shown in FIG. Therefore, the line-of-sight distance 400, which is the straight-line distance from the reference point 310 to the pixel PX, may be calculated based on the three-dimensional coordinates of each pixel PX and the three-dimensional coordinates of the reference point 310.

また2以上の基準点310を設定することもできると説明したが、この場合における視線距離400は、設定した基準点310ごとに求められる。例えば図7に示すケースでは、基準点311と基準点312の2つの基準点310が設定されており、1の画素PXに着目すると、基準点311に係る視線距離401が求められ、さらに基準点312に係る視線距離402が求められるわけである。すなわち、複数の基準点310が設定される場合、視線距離400は、基準点310の数(図7では2つ)と画素PXの数の積(基準点数×画素数)だけ求められることとなる。 Furthermore, although it has been explained that two or more reference points 310 can be set, the line-of-sight distance 400 in this case is determined for each set reference point 310. For example, in the case shown in FIG. 7, two reference points 310, a reference point 311 and a reference point 312, are set, and focusing on one pixel PX, the line-of-sight distance 401 related to the reference point 311 is determined, and then the reference point The line of sight distance 402 related to 312 is calculated. In other words, when a plurality of reference points 310 are set, the line-of-sight distance 400 is determined by the product of the number of reference points 310 (two in FIG. 7) and the number of pixels PX (number of reference points x number of pixels). .

画素PXごとの視線距離400が算出されると、強調色情報設定手段102(図3)が「強調色情報」を設定する(図4のStep104)。この強調色情報は、基礎画像モデル200の各画素PXが有する明度(以下、「基礎明度」という。)を視線距離400に応じて調整した色情報であり、視線距離400が短いほど明るくなるように、視線距離400が長いほど暗くなるように設定される。 When the line-of-sight distance 400 for each pixel PX is calculated, the emphasis color information setting means 102 (FIG. 3) sets "emphasis color information" (Step 104 in FIG. 4). This emphasized color information is color information in which the brightness of each pixel PX of the basic image model 200 (hereinafter referred to as "basic brightness") is adjusted according to the line-of-sight distance 400, and the shorter the line-of-sight distance 400, the brighter it becomes. It is set so that the longer the line-of-sight distance 400, the darker the image becomes.

例えば強調色情報は、次式(1)により得られる明度(以下、「強調明度」という。)に基づいて算出することもできる。なお、式中のEは強調明度であり、dは視線距離400、F(d)は視線距離400の関数である「明度係数」、Eは基礎明度である。
=F(d)×E (1)
例えば、基礎画像モデル200の各画素PXに色情報としてグレースケール(0~255)が付与されている場合、明度係数F(d)を0~1の範囲で求めることとし、視線距離400が短いほど明度係数F(d)が1に近い値で、視線距離400が長いほど明度係数F(d)が0に近い値で算出されるよう、明度係数F(d)を設定するとよい。また明度係数F(d)は、視線距離400に応じて対象となる面積(例えば光源が照らす面積)が拡がっていくことを考えると、次式(2)に示すように視線距離400の2乗に反比例する関数とすることもできる。なお、式中のa(ただし、a>0)は任意の定数である。
F(d)=a÷d (2)
For example, the emphasis color information can also be calculated based on the brightness obtained by the following equation (1) (hereinafter referred to as "emphasis brightness"). Note that E d in the formula is emphasized brightness, d is line-of-sight distance 400, F(d) is a "brightness coefficient" that is a function of line-of-sight distance 400, and E is basic brightness.
E d =F(d)×E (1)
For example, if each pixel PX of the basic image model 200 is given a gray scale (0 to 255) as color information, the brightness coefficient F(d) is determined in the range of 0 to 1, and the line of sight distance 400 is short. It is preferable to set the brightness coefficient F(d) so that the brightness coefficient F(d) is calculated as a value closer to 1 as the line of sight distance 400 becomes longer, and the brightness coefficient F(d) is calculated as a value closer to 0 as the line of sight distance 400 becomes longer. In addition, considering that the target area (for example, the area illuminated by a light source) expands according to the line-of-sight distance 400, the brightness coefficient F(d) is calculated as the square of the line-of-sight distance 400, as shown in the following equation (2). It can also be a function that is inversely proportional to . Note that a in the formula (where a>0) is an arbitrary constant.
F(d)=a÷ d2 (2)

2以上の基準点310を設定した場合、つまり画素PXごとに2以上の視線距離400が得られた場合は、それぞれの視線距離400に基づいて強調色情報を設定するとよい。例えば、複数の視線距離400の統計値(平均値や中央値、最頻値、加重平均値など)をその画素PXにおける代表的な視線距離400とし、この代表的な視線距離400に基づいて強調色情報を設定することができる。 When two or more reference points 310 are set, that is, when two or more line-of-sight distances 400 are obtained for each pixel PX, emphasis color information may be set based on each line-of-sight distance 400. For example, the statistical values (average value, median value, mode, weighted average value, etc.) of multiple line-of-sight distances 400 are set as the representative line-of-sight distance 400 at that pixel PX, and the emphasis is based on this representative line-of-sight distance 400. Color information can be set.

画素PXごとに強調色情報が設定されると、この強調色情報をそれぞれの画素PXに対して付与することで強調画像モデルが作成され(図4のStep105)、強調画像モデル記憶手段108(図3)に記憶される。そして描画手段104(図3)が、各画素PXの強調色情報にしたがって強調画像モデルを描画することで、ディスプレイ等の表示手段106(図3)に強調画像を表示する(図4のStep106)。このとき、基準設定手段105(図3)によって基準点310を移動させながら強調画像を表示することもできる。具体的には図8に示すように、基準点310の移動に伴って(図8のStep107)、視線距離算出手段101が画素PXごとに視線距離400を求めるとともに、強調色情報設定手段102が画素PXごとに強調色情報を設定し、さらに描画手段104(図3)が描画して強調画像を表示する。つまり、基準点310が移動するたびに強調画像を表示することで、動画(静止画のコマ送り)として強調画像を表示するわけである。なお基準設定手段105は、オペレータによって基準点310を移動させる仕様とすることもできるし、あらかじめ定められた(あるいは入力された)軌跡にしたがって基準点310を移動させる仕様とすることもできる。 When emphasized color information is set for each pixel PX, an emphasized image model is created by assigning this emphasized color information to each pixel PX (Step 105 in FIG. 4), and the emphasized image model storage means 108 (see FIG. 3). Then, the drawing means 104 (FIG. 3) displays the emphasized image on the display means 106 (FIG. 3) such as a display by drawing the emphasized image model according to the emphasized color information of each pixel PX (Step 106 in FIG. 4). . At this time, it is also possible to display the emphasized image while moving the reference point 310 using the reference setting means 105 (FIG. 3). Specifically, as shown in FIG. 8, as the reference point 310 moves (Step 107 in FIG. 8), the line-of-sight distance calculation means 101 calculates the line-of-sight distance 400 for each pixel PX, and the emphasized color information setting means 102 calculates the line-of-sight distance 400 for each pixel PX. Emphasis color information is set for each pixel PX, and the drawing means 104 (FIG. 3) draws to display the emphasis image. That is, by displaying the emphasized image every time the reference point 310 moves, the emphasized image is displayed as a moving image (frame-by-frame still image). Note that the reference setting means 105 may be designed to move the reference point 310 by the operator, or may be designed to move the reference point 310 according to a predetermined (or input) trajectory.

ここまで基準点310が設定される場合で説明してきたが、本願発明の強調画像モデル作成システム100は基準点310に代えて基準平面を設定する(図4のStep101)こともできる。基準平面を設定する場合、視線距離400は基準平面から各画素PXまでの最短距離として求められる。例えば図9では基準平面310が水平に設定されており、各画素PXから基準平面320に対して垂直方向(つまり鉛直方向)に伸ばし、その結果得られる線分の長さが視線距離400として求められる。なお、図9に示す基礎画像モデル200は平面座標のみを有するものであり、図5と同様、所定の「基準高さ」が与えられている。これに対して図10に示すように3次元座標を具備する画素PXで構成された基礎画像モデル200を利用する場合は、各画素PXの3次元座標からやはり水平に設定された基準平面320に対して垂直方向(つまり鉛直方向)に伸ばし、その結果得られる線分の長さが視線距離400として求められる。 Although the case has been described so far in which the reference point 310 is set, the enhanced image model creation system 100 of the present invention can also set a reference plane instead of the reference point 310 (Step 101 in FIG. 4). When setting a reference plane, the line-of-sight distance 400 is determined as the shortest distance from the reference plane to each pixel PX. For example, in FIG. 9, the reference plane 310 is set horizontally, and each pixel PX is extended in the perpendicular direction (that is, the vertical direction) to the reference plane 320, and the length of the resulting line segment is determined as the line-of-sight distance 400. It will be done. Note that the basic image model 200 shown in FIG. 9 has only plane coordinates, and is given a predetermined "reference height" similarly to FIG. 5. On the other hand, when using a basic image model 200 composed of pixels PX having three-dimensional coordinates as shown in FIG. The line segment is then extended in the vertical direction (that is, the vertical direction), and the length of the line segment obtained as a result is determined as the line-of-sight distance 400.

各画素PXの視線距離400が得られると(図4のStep103)、基準点310を設定する場合と同様、画素PXごとに強調色情報を設定し(図4のStep104)、強調画像モデルを作成して(図4のStep105)、強調色画像を描画することができる(図4のStep106)。 When the line-of-sight distance 400 of each pixel PX is obtained (Step 103 in FIG. 4), emphasis color information is set for each pixel PX (Step 104 in FIG. 4), similar to setting the reference point 310, to create an emphasis image model. (Step 105 in FIG. 4), and a highlighted color image can be drawn (Step 106 in FIG. 4).

本願発明の強調画像モデル作成システムは、山地部の地形をより実感的に閲覧するために利用できるほか、市街地や観光地など様々な地形を閲覧するために利用することができる。 The enhanced image model creation system of the present invention can be used to more realistically view the topography of mountainous areas, and can also be used to view various topography such as urban areas and tourist spots.

100 本願発明の強調画像モデル作成システム
101 (強調画像モデル作成システムの)視線距離算出手段
102 (強調画像モデル作成システムの)強調色情報設定手段
103 (強調画像モデル作成システムの)基準点移動手段
104 (強調画像モデル作成システムの)描画手段
105 (強調画像モデル作成システムの)基準設定手段
106 (強調画像モデル作成システムの)表示手段
107 (強調画像モデル作成システムの)基礎画像モデル記憶手段
108 (強調画像モデル作成システムの)強調画像モデル記憶手段
200 基礎画像モデル
310 基準点
320 基準平面
400 視線距離
PX 画素
100 Emphasized image model creation system of the present invention 101 Line of sight distance calculation means (of the emphasis image model creation system) 102 Emphasis color information setting means (of the emphasis image model creation system) 103 Reference point moving means (of the emphasis image model creation system) 104 Drawing means (of the emphasized image model creation system) 105 Standard setting means (of the emphasized image model creation system) 106 Display means (of the emphasized image model creation system) 107 Basic image model storage means (of the emphasized image model creation system) 108 (Emphasis Enhanced image model storage means (of the image model creation system) 200 Basic image model 310 Reference point 320 Reference plane 400 Line-of-sight distance PX pixels

Claims (5)

平面位置情報を有する複数の画素で構成された基礎画像モデルを用いて、強調画像モデルを作成するシステムにおいて、
前記基礎画像モデルを構成するそれぞれの前記画素には、明度を含む色情報が付与され、
前記基礎画像モデルを読み出すとともに、あらかじめ設定された2以上の基準点から前記画素までの直線距離である視線距離を、該画素ごとに求める視線距離算出手段と、
前記色情報のうちの明度を前記視線距離に応じて変更した強調色情報を、前記画素ごとに設定する強調色情報設定手段と、を備え、
前記視線距離算出手段は、それぞれの前記基準点に係る前記視線距離を前記画素ごとに求め、
前記強調色情報設定手段は、前記視線距離が短いほど明るくなるように前記強調色情報を設定するとともに、2以上の前記基準点に係る該視線距離に基づいて該強調色情報を前記画素ごとに設定し、
それぞれの前記画素に対して前記強調色情報を付与することによって、前記強調画像モデルを作成する、
ことを特徴とする強調画像モデル作成システム。
In a system that creates an enhanced image model using a basic image model composed of a plurality of pixels having planar position information,
Each pixel constituting the basic image model is given color information including brightness,
a line-of-sight distance calculation means that reads the basic image model and calculates a line-of-sight distance, which is a straight-line distance from two or more preset reference points to the pixel, for each pixel;
Emphasis color information setting means for setting emphasis color information for each pixel, the brightness of the color information being changed according to the line-of-sight distance;
The line-of-sight distance calculation means calculates the line-of-sight distance for each of the reference points for each pixel;
The emphasis color information setting means sets the emphasis color information so that the shorter the line-of-sight distance is, the brighter it becomes, and sets the emphasis color information for each pixel based on the line-of-sight distance regarding two or more of the reference points. Set,
creating the emphasized image model by assigning the emphasized color information to each of the pixels;
An enhanced image model creation system characterized by:
前記基準点を移動させる基準点移動手段と、
前記画素ごとに前記強調色情報を出力した画像を描画する描画手段と、をさらに備え、
前記視線距離算出手段は、前記基準点の移動に伴って前記視線距離を前記画素ごとに求め、
前記強調色情報設定手段は、前記基準点の移動に伴って前記強調色情報を前記画素ごとに設定し、
前記描画手段は、前記基準点の移動に伴って前記画像を描画する、
ことを特徴とする請求項1記載の強調画像モデル作成システム。
Reference point moving means for moving the reference point;
Further comprising a drawing means for drawing an image in which the emphasized color information is output for each pixel,
The line-of-sight distance calculation means calculates the line-of-sight distance for each pixel as the reference point moves;
The emphasis color information setting means sets the emphasis color information for each pixel as the reference point moves;
The drawing means draws the image as the reference point moves.
2. The enhanced image model creation system according to claim 1.
前記基礎画像モデルを構成するそれぞれの前記画素は、高さ情報を有し、
前記視線距離算出手段は、前記画素の平面位置情報及び高さ情報に基づいて前記視線距離を求める、
ことを特徴とする請求項1又は請求項2記載の強調画像モデル作成システム。
Each of the pixels constituting the basic image model has height information,
The line-of-sight distance calculation means calculates the line-of-sight distance based on planar position information and height information of the pixel.
3. The enhanced image model creation system according to claim 1 or claim 2.
前記強調色情報設定手段は、前記視線距離に応じて明度係数を求めるとともに、該明度係数を明度に乗ずることによって前記強調色情報を設定する、
ことを特徴とする請求項1乃至請求項3のいずれかに記載の強調画像モデル作成システム。
The emphasis color information setting means determines a brightness coefficient according to the line-of-sight distance, and sets the emphasis color information by multiplying the brightness by the brightness coefficient.
The enhanced image model creation system according to any one of claims 1 to 3, characterized in that:
前記強調色情報設定手段は、前記視線距離の2乗に応じて前記明度係数を求める、
ことを特徴とする請求項4記載の強調画像モデル作成システム。
The emphasis color information setting means calculates the brightness coefficient according to the square of the line-of-sight distance.
5. The enhanced image model creation system according to claim 4.
JP2019195000A 2019-10-28 2019-10-28 Enhanced image model creation system Active JP7404030B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019195000A JP7404030B2 (en) 2019-10-28 2019-10-28 Enhanced image model creation system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019195000A JP7404030B2 (en) 2019-10-28 2019-10-28 Enhanced image model creation system

Publications (2)

Publication Number Publication Date
JP2021068349A JP2021068349A (en) 2021-04-30
JP7404030B2 true JP7404030B2 (en) 2023-12-25

Family

ID=75637351

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019195000A Active JP7404030B2 (en) 2019-10-28 2019-10-28 Enhanced image model creation system

Country Status (1)

Country Link
JP (1) JP7404030B2 (en)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005124691A1 (en) 2004-06-16 2005-12-29 Techno Dream 21 Co., Ltd. Method of real-time rendering performed by sampling reflection characteristics on an object surface and method for converting the texture size
JP2011133952A (en) 2009-12-22 2011-07-07 Kokusai Kogyo Co Ltd Producing method of transparent color shaded relief map, producing program, and transparent color shaded relief map

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2571079B2 (en) * 1987-11-17 1997-01-16 株式会社日立製作所 3D topographic map display device
JPH07210704A (en) * 1994-01-18 1995-08-11 Hitachi Medical Corp Method for constituting three-dimensional image

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005124691A1 (en) 2004-06-16 2005-12-29 Techno Dream 21 Co., Ltd. Method of real-time rendering performed by sampling reflection characteristics on an object surface and method for converting the texture size
JP2011133952A (en) 2009-12-22 2011-07-07 Kokusai Kogyo Co Ltd Producing method of transparent color shaded relief map, producing program, and transparent color shaded relief map

Also Published As

Publication number Publication date
JP2021068349A (en) 2021-04-30

Similar Documents

Publication Publication Date Title
TWI526985B (en) Raster image three-dimensional processing device, raster image three-dimensional method and raster image three-dimensional program
AU2018381377B2 (en) Feature height-based colored image generating apparatus and feature height-based colored image generating program
WO2019111956A1 (en) Feature/ground height color-differentiated image generation device and feature height color-differentiated image generation program
Halik et al. Geovisualisation of relief in a virtual reality system on the basis of low-level aerial imagery
Zhao et al. Mapping 3D visibility in an urban street environment from mobile LiDAR point clouds
US20180239514A1 (en) Interactive 3d map with vibrant street view
TW201537533A (en) Three-dimensional map display system
Ruzickova et al. A new GIS-compatible methodology for visibility analysis in digital surface models of earth sites
Ramsey Virtual Wolverhampton: Recreating the historic city in virtual reality
KR20130071100A (en) Apparatus and method for projection image into three-dimensional model
JP7404030B2 (en) Enhanced image model creation system
Bergen et al. Data-driven simulation, dimensional accuracy and realism in a landscape visualization tool
US20230162432A1 (en) System and method for translating a 2d image to a 3d image
Singla Virtual reality based novel use case in remote sensing and GIS
Wang et al. A Web3D forest geo-visualization and user interface evaluation
CN114053708B (en) Map generation method and device, computer equipment and computer readable storage medium
Mironova Virtual modeling in geoinformation technologies
GB2416884A (en) Material coded imagery for simulated terrain and computer generated forces
Praschl et al. Utilization of geographic data for the creation of occlusion models in the context of mixed reality applications
Dedkova et al. Virtual 3D restoration of an extinct village and its eye-tracking assessment
Lovett et al. GIS-based landscape visualization—The state of the art
JP6145196B1 (en) Map creating apparatus and map creating method
Stridbar et al. Subjective Evaluation of Marker-Based and Marker-Less AR for an Exhibition of a Digitally Recreated Swedish Warship
Rautji et al. Immersive 3D Visualization of remote sensing data
Flórez et al. OVERLAYING DIGITAL TERRAIN MODELS AND SATELLITE IMAGES IN AUGMENTED REALITY ENVIRONMENTS

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220804

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230821

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230926

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231109

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20231205

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20231213

R150 Certificate of patent or registration of utility model

Ref document number: 7404030

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150