JP6444826B2 - 3D line graph viewpoint control device and 3D line graph viewpoint control program - Google Patents

3D line graph viewpoint control device and 3D line graph viewpoint control program Download PDF

Info

Publication number
JP6444826B2
JP6444826B2 JP2015144518A JP2015144518A JP6444826B2 JP 6444826 B2 JP6444826 B2 JP 6444826B2 JP 2015144518 A JP2015144518 A JP 2015144518A JP 2015144518 A JP2015144518 A JP 2015144518A JP 6444826 B2 JP6444826 B2 JP 6444826B2
Authority
JP
Japan
Prior art keywords
viewpoint
line graph
series
dimensional
dimensional line
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2015144518A
Other languages
Japanese (ja)
Other versions
JP2017026786A (en
Inventor
連秀 梁
連秀 梁
アンキット シャラマ
アンキット シャラマ
アルマン シモン アリ ジリエ
アルマン シモン アリ ジリエ
暢康 中島
暢康 中島
浩志 野末
浩志 野末
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Toshiba Digital Solutions Corp
Original Assignee
Toshiba Corp
Toshiba Digital Solutions Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp, Toshiba Digital Solutions Corp filed Critical Toshiba Corp
Priority to JP2015144518A priority Critical patent/JP6444826B2/en
Publication of JP2017026786A publication Critical patent/JP2017026786A/en
Application granted granted Critical
Publication of JP6444826B2 publication Critical patent/JP6444826B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明の実施形態は、3次元折れ線グラフ視点制御装置および3次元折れ線グラフ視点制御プログラムに関する。   Embodiments described herein relate generally to a three-dimensional line graph viewpoint control device and a three-dimensional line graph viewpoint control program.

モデリングされた3次元形状に対して、例えば、写実性を高める等の観点から、視点と光源の位置や向きを考慮して、2次元スクリーンに描画するレンダリング処理が施されている。   For the modeled three-dimensional shape, for example, rendering processing for rendering on a two-dimensional screen is performed in consideration of the position and orientation of the viewpoint and the light source from the viewpoint of enhancing the realism.

3次元モデルのうち、物体については、レンダリングの際にその可視面積を表す情報量を最大化する最適な視点を算出するアルゴリズムが提案されている。   Among the three-dimensional models, an algorithm has been proposed that calculates an optimal viewpoint that maximizes the amount of information representing the visible area when rendering an object.

しかしながら、3次元折れ線グラフについては、3次元グラフのデータがプロットされている様子が手前の系列で重なってしまう場合があり、当該アルゴリズムをそのまま適用することはできなかった。   However, with regard to the three-dimensional line graph, the state in which the data of the three-dimensional graph is plotted may overlap with the previous series, and the algorithm cannot be applied as it is.

3次元折れ線グラフは物体と異なり、真上から見ても殆ど意味をなさないように、最適な視点を求めるために全方位で視点を回転する必要がない。このことは、3次元折れ線グラフを見やすく描画するには、視点を管理しユーザ操作による回転範囲を限定する仕組みが必要であることを意味している。   Unlike an object, a three-dimensional line graph does not need to rotate the viewpoint in all directions to obtain an optimal viewpoint so that it makes little sense when viewed from directly above. This means that in order to draw a three-dimensional line graph in an easy-to-view manner, a mechanism for managing the viewpoint and limiting the rotation range by the user operation is necessary.

「Automatic View Selection Using Viewpoint Entropy and its Application to Image-Based Modelling」Pere-Pau Vazquez, Miquel Feixas, Mateu Sbert and Wolfgang Heidrich COMPUTER GRAPHICS Forum Volume 22, Issue 4, pages 689-700, December 2003`` Automatic View Selection Using Viewpoint Entropy and its Application to Image-Based Modeling '' Pere-Pau Vazquez, Miquel Feixas, Mateu Sbert and Wolfgang Heidrich COMPUTER GRAPHICS Forum Volume 22, Issue 4, pages 689-700, December 2003 「Previewing Volume Decomposition Through Optimal Viewpoints」S. Takahashi, I. Fujishiro, Y. Takeshima, and C. Bi, Dagstuhl Follow-Up Seminar Book "Scientific Visualization: Interactions, Features, Metaphors", in Scientific Visualization: Interactions, Features, Metaphors 2011, (H. Hagen ed.) Dagstuhl Follow-Ups Series, Vol. 2, Schloss Dagstuhl--Leibniz-Zentrum fuer Informatik, pp. 346-359, November, 2011."Previewing Volume Decomposition Through Optimal Viewpoints" S. Takahashi, I. Fujishiro, Y. Takeshima, and C. Bi, Dagstuhl Follow-Up Seminar Book "Scientific Visualization: Interactions, Features, Metaphors", in Scientific Visualization: Interactions, Features, Metaphors 2011, (H. Hagen ed.) Dagstuhl Follow-Ups Series, Vol. 2, Schloss Dagstuhl--Leibniz-Zentrum fuer Informatik, pp. 346-359, November, 2011.

特開平9−81774号公報JP-A-9-81774 特開2004−361112号公報JP 2004-361112 A

本発明が解決しようとする課題は、3次元空間にプロットした情報をもつ折れ線グラフを2次元画面の表示領域上に描画させるのに最適な視点と視角を算出することのできる3次元折れ線グラフ視点制御装置および3次元折れ線グラフ視点制御プログラムを提供することである。   The problem to be solved by the present invention is a three-dimensional line graph viewpoint capable of calculating an optimum viewpoint and viewing angle for drawing a line graph having information plotted in a three-dimensional space on a display area of a two-dimensional screen. It is to provide a control device and a three-dimensional line graph viewpoint control program.

実施形態の3次元折れ線グラフ視点制御装置は、3次元空間を2次元画面の表示領域上に設定し、その表示領域上に3次元折れ線グラフを表示する3次元折れ線グラフ視点制御装置であって、視点および視点距離の初期値の入力を受け付ける入力部と、前記3次元折れ線グラフを描画するためのデータを格納するデータ格納部と、前記入力部から視点および視点距離の初期値のデータを、前記データ格納部から前記3次元折れ線グラフのデータをそれぞれ取り込み、初期値として与えられた任意の視点の座標と視角を用いて前記3次元折れ線グラフが視認できる量を表す情報量を数値化したものである視点のエントロピー式を用いて前記情報量が最大となる視点の座標と視角を算出する演算部と、前記演算部によって算出された視点の座標と視角に基づいて前記3次元折れ線グラフを表示する表示部とを備える。 The 3D line graph viewpoint control device of the embodiment is a 3D line graph viewpoint control device that sets a 3D space on a display area of a 2D screen and displays a 3D line graph on the display area. An input unit that accepts input of initial values of viewpoints and viewpoint distances, a data storage unit that stores data for drawing the three-dimensional line graph, and data of initial values of viewpoints and viewpoint distances from the input units, Each of the three-dimensional line graph data is fetched from the data storage unit, and the information amount representing the amount that the three-dimensional line graph can be visually recognized using the coordinates and the viewing angle of an arbitrary viewpoint given as an initial value is quantified. a calculation unit in which the information amount using the entropy equation of one viewpoint to calculate the coordinates and viewing angles of the viewpoint becomes maximum, the coordinate of the viewpoint calculated by the arithmetic unit And a display unit for displaying the 3-dimensional line graph based on the corner.

実施形態の3次元折れ線グラフ視点制御プログラムは、3次元空間を2次元画面の表示領域上に設定し、その表示領域上に3次元折れ線グラフを表示する3次元折れ線グラフ視点制御装置に、視点および視点距離の初期値の入力を受け付ける機能と、前記3次元折れ線グラフを描画するためのデータを取り込む機能と、前記視点および視点距離の初期値のデータ、前記3次元折れ線グラフのデータに基づいて、初期値として与えられた任意の視点の座標と視角を用いて前記3次元折れ線グラフが視認できる量を表す情報量を数値化したものである視点のエントロピー式を用いて前記情報量が最大となる視点の座標と視角を算出する機能と、前記算出された視点の座標と視角に基づいて前記3次元折れ線グラフを前記表示領域上に表示させる機能とを実現させる。 The three-dimensional line graph viewpoint control program of the embodiment sets a three-dimensional space on a display area of a two-dimensional screen and displays a three-dimensional line graph on the display area. Based on the function of accepting the input of the initial value of the viewpoint distance, the function of capturing the data for drawing the three-dimensional line graph, the data of the initial value of the viewpoint and the viewpoint distance, the data of the three-dimensional line graph, The amount of information is maximized by using an entropy formula for the viewpoint, which is a numerical value of the amount of information representing the amount that the three-dimensional line graph can be viewed using the coordinates and viewing angle of an arbitrary viewpoint given as an initial value. A function for calculating the coordinates and viewing angle of the viewpoint, and a function for displaying the three-dimensional line graph on the display area based on the calculated coordinates and viewing angle of the viewpoint To realize the door.

本発明の実施形態に係る3次元折れ線グラフ視点制御装置の概略構成を示すブロック図である。It is a block diagram which shows schematic structure of the three-dimensional line graph viewpoint control apparatus which concerns on embodiment of this invention. 3次元折れ線グラフと視点との関係を説明する図である。It is a figure explaining the relationship between a three-dimensional line graph and a viewpoint. 単一の視点を選択する処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the process which selects a single viewpoint. 複数の視点を選択する処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the process which selects a some viewpoint. 視点とグラフ領域空間の中心点の関係を説明する図である。It is a figure explaining the relationship between a viewpoint and the center point of graph area space. 視点とグラフ中心点間の距離の調整を説明する図である。It is a figure explaining adjustment of the distance between a viewpoint and a graph center point. 視点の移動を説明する図である。It is a figure explaining the movement of a viewpoint. 回転する視点を説明する図である。It is a figure explaining the viewpoint to rotate.

以下、本発明の一実施の形態について、図面を参照して説明する。尚、各図において同一箇所については同一の符号を付すとともに、重複した説明は省略する。   Hereinafter, an embodiment of the present invention will be described with reference to the drawings. In the drawings, the same portions are denoted by the same reference numerals, and redundant description is omitted.

まず、本実施形態で用いる主要な用語について説明する。   First, main terms used in the present embodiment will be described.

「表示領域」とは、画面内で3次元空間を表示している2次元領域をいう。表示領域には、3次元空間を空間中のある視点から見た目を2次元平面に投影した内容が描画される。どのような投影方法で2次元平面に投影するのかは、アプリケーションによって異なる。   “Display area” refers to a two-dimensional area displaying a three-dimensional space on the screen. In the display area, the content of a three-dimensional space projected from a certain viewpoint in the space onto a two-dimensional plane is drawn. Which projection method is used to project onto a two-dimensional plane differs depending on the application.

「投影面」とは、3次元モデル(グラフ)を画面に投影する2次元の平面をいう。   “Projection plane” refers to a two-dimensional plane on which a three-dimensional model (graph) is projected onto a screen.

「視点」とは、空間をどの位置でどの方向に見るかを決めるものをいう。視点の位置と視点の方向(視線方向)を変えると、3次元空間にある物体を異なる角度から見ることができる。視点は、視点の座標(x、y、z)および視線方向(vx、vy、vz、θ)で定義される。視線方向(視線軸)は、基準視線(0、0、−1)を任意の回転軸(vx、vy、vz)の周りにθラジアン回転させたものである。(1、0、0、θ)は上下方向の視線移動、(0、1、0、θ)は左右方向の視線移動、(0、0、1、θ)は視軸を回転させることを表す。視点は、3次元空間内に複数個設定することができる。   “Viewpoint” means what determines where and in what direction the space is viewed. By changing the position of the viewpoint and the direction of the viewpoint (gaze direction), an object in the three-dimensional space can be viewed from different angles. The viewpoint is defined by the coordinates (x, y, z) of the viewpoint and the line-of-sight direction (vx, vy, vz, θ). The line-of-sight direction (line-of-sight axis) is obtained by rotating the reference line-of-sight (0, 0, −1) by θ radians around arbitrary rotation axes (vx, vy, vz). (1, 0, 0, θ) represents vertical line-of-sight movement, (0, 1, 0, θ) represents horizontal line-of-sight movement, and (0, 0, 1, θ) represents rotation of the visual axis. . A plurality of viewpoints can be set in the three-dimensional space.

「視角(FOV :Field of View)」とは、視点と投影面の端を結んだ二つの直線からなる角度をいう。水平視角と垂直視角がある。本実施形態では、垂直視角を用いる。   “Field of view (FOV)” refers to an angle formed by two straight lines connecting the viewpoint and the end of the projection plane. There are horizontal viewing angles and vertical viewing angles. In this embodiment, a vertical viewing angle is used.

「3次元折れ線グラフ」とは、X, Y, Z軸で表示される3次元空間のなかで、3種類の情報を持つ一連のデータをプロットし、線で繋いだ結果をいう。   A “three-dimensional line graph” refers to a result of plotting a series of data having three types of information in a three-dimensional space displayed on the X, Y, and Z axes and connecting them with lines.

「系列」とは、一つの軸方向へ繋がる2又は3種類の情報を持つ一連のデータをいう。   “Series” refers to a series of data having two or three types of information connected in one axial direction.

「グラフ中心点」とは、グラフ領域空間の中心に相当する座標値をいう。   The “graph center point” refers to a coordinate value corresponding to the center of the graph area space.

本実施形態においては、3次元折れ線グラフを2次元画面の表示領域(投影面)上に描画するのに最適な視点と視角(又は視線とグラフ中心点間の距離)を求める。ここで、視点は、3次元折れ線グラフ表示のZ軸の視線方向を指し示すものであり、3次元折れ線グラフが視認できる(見えている)量を表す情報量が最大化になる座標と視線方向とで特定される。また、視角(又は視線とグラフ中心点間の距離)は、3次元折れ線グラフが投影面のなかに収まる範囲の視角である。本実施形態においては、3次元折れ線グラフの形状、例えばグラフ間の並び具合(間隔等)を考慮して、情報量が多い視点を算出する。   In the present embodiment, an optimal viewpoint and viewing angle (or a distance between the line of sight and the graph center point) for drawing a three-dimensional line graph on the display area (projection plane) of the two-dimensional screen are obtained. Here, the viewpoint indicates the line-of-sight direction of the Z-axis of the three-dimensional line graph display, and coordinates and line-of-sight directions that maximize the amount of information representing the amount that the three-dimensional line graph can be seen (viewed). Specified by Further, the viewing angle (or the distance between the line of sight and the graph center point) is a viewing angle within a range in which the three-dimensional line graph is within the projection plane. In the present embodiment, a viewpoint with a large amount of information is calculated in consideration of the shape of a three-dimensional line graph, for example, the degree of alignment (intervals) between the graphs.

図1は、本発明の実施形態に係る3次元折れ線グラフ視点制御装置の概略構成を示すブロック図である。この装置は汎用のコンピュータ(例えばパーソナルコンピュータ(PC)等)と、同コンピュータ上で動作するソフトウェアおよびクラウド又はWeb上で動作するソフトウェアとを用いて実現される。コンピュータとしては、CAD(Computer Aided Design)やCAE(Computer Aided Engineering)に好適なエンジニアリングワークステーション(EWS)等も含む。本実施形態はこのようなコンピュータにおいて、3次元空間を2次元画面の表示領域上に設定し、その表示領域上に3次元折れ線グラフを表示する3次元折れ線グラフ視点制御装置に、視点および視点距離の初期値の入力を受け付ける機能と、3次元折れ線グラフを描画するためのデータを取り込む機能と、視点および視点距離の初期値のデータ、3次元折れ線グラフのデータに基づいて、3次元折れ線グラフが視認できる量を表す情報量を数値化したものである視点のエントロピー式を用いて視点の座標と視角を算出する機能と、算出された視点の座標と視角に基づいて3次元折れ線グラフを表示領域上に表示させる機能とを実現させるプログラムとして実施することもできる。   FIG. 1 is a block diagram showing a schematic configuration of a three-dimensional line graph viewpoint control apparatus according to an embodiment of the present invention. This apparatus is realized using a general-purpose computer (for example, a personal computer (PC) or the like), software that operates on the computer, and software that operates on the cloud or the Web. The computer includes an engineering workstation (EWS) suitable for CAD (Computer Aided Design) and CAE (Computer Aided Engineering). In the computer according to this embodiment, a viewpoint and a viewpoint distance are set in a three-dimensional line graph viewpoint control device that sets a three-dimensional space on a display area of a two-dimensional screen and displays a three-dimensional line graph on the display area. 3D line graph based on the function of accepting the initial value input, the function of fetching data for drawing the 3D line graph, the initial value data of the viewpoint and viewpoint distance, and the data of the 3D line graph A function that calculates the coordinates and viewing angle of the viewpoint using the entropy formula of the viewpoint, which is a numerical value of the amount of information that represents the amount that can be viewed, and a display area that displays a three-dimensional line graph based on the calculated coordinates and viewing angle of the viewpoint It can also be implemented as a program that realizes the function displayed above.

図1に示すように、本実施形態に係る3次元折れ線グラフ視点制御装置1は、主として、入力部10と、演算処理部20と、表示部30と、データ格納部40から構成されている。   As shown in FIG. 1, the three-dimensional line graph viewpoint control device 1 according to the present embodiment mainly includes an input unit 10, an arithmetic processing unit 20, a display unit 30, and a data storage unit 40.

入力部10は、視点や視点距離の初期値の入力を受け付けるものである。入力した視点や視点距離の初期値は、演算処理部20に送られる。   The input unit 10 receives an initial value of a viewpoint or a viewpoint distance. The initial values of the input viewpoint and viewpoint distance are sent to the arithmetic processing unit 20.

データ格納部40は、3次元折れ線グラフを描画するためのデータを格納するものである。3次元折れ線グラフは、X, Y, Z軸上の3種の情報を持つ一連のデータをプロットし、線で繋いだ結果である。3次元折れ線グラフは複数の系列、例えばm個の系列から成っている。系列は、X, Y, Z軸のいずれか一つの軸方向へ繋がる2又は3種の情報を持つ一連のデータである。   The data storage unit 40 stores data for drawing a three-dimensional line graph. A three-dimensional line graph is a result of plotting a series of data having three types of information on the X, Y, and Z axes and connecting them with lines. The three-dimensional line graph is composed of a plurality of series, for example, m series. The series is a series of data having two or three types of information connected in any one of the X, Y, and Z axes.

演算処理部20は、入力部10から視点や視点距離の初期値のデータを、データ格納部40からは3次元折れ線グラフのデータをそれぞれ取り込み、3次元折れ線グラフが見える(視認できる)量を表す情報量が最大となる最適な視点と視角を算出する。算出手法の詳細は、後述する。   The arithmetic processing unit 20 takes in the data of the initial values of the viewpoint and the viewpoint distance from the input unit 10 and the data of the three-dimensional line graph from the data storage unit 40, respectively, and represents the amount by which the three-dimensional line graph can be seen (viewed). The optimal viewpoint and viewing angle that maximize the amount of information are calculated. Details of the calculation method will be described later.

表示部30は、X, Y, Z軸で表示される3次元空間を、例えばX, Y軸で表示される2次元画面の表示領域上に設定し、その領域上に3次元折れ線グラフを表示するものである。本実施形態では、表示部30には、予め、データ格納部40にデータが格納されている3次元折れ線グラフが表示されている。表示部30は、演算処理部20で算出した最適な視点と視角に基づいた3次元折れ線グラフを表示する。   The display unit 30 sets a three-dimensional space displayed on the X, Y, and Z axes, for example, on a display area of a two-dimensional screen displayed on the X, Y axes, and displays a three-dimensional line graph on the area. To do. In the present embodiment, a three-dimensional line graph in which data is stored in the data storage unit 40 is displayed on the display unit 30 in advance. The display unit 30 displays a three-dimensional line graph based on the optimal viewpoint and viewing angle calculated by the arithmetic processing unit 20.

演算処理部20によって算出された最適な視点と視角を、ユーザに対して表示させる。   The optimal viewpoint and viewing angle calculated by the arithmetic processing unit 20 are displayed to the user.

次に、以上のように構成された3次元折れ線グラフ視点制御装置1における、最適な視点の算出処理について詳述する。   Next, the optimal viewpoint calculation processing in the three-dimensional line graph viewpoint control apparatus 1 configured as described above will be described in detail.

<最適な視点>
図2は、3次元折れ線グラフと視点との関係を説明する図である。図2に示すように、2次元表示領域を表すXY平行面枠に複数の系列が表示されている。
<Optimal viewpoint>
FIG. 2 is a diagram illustrating the relationship between the three-dimensional line graph and the viewpoint. As shown in FIG. 2, a plurality of series are displayed in an XY parallel plane frame representing a two-dimensional display area.

図2に示す例では、m個の系列が描画されている。Z軸方向に位置している視点からは、それぞれの形状を呈した複数の系列が等間隔あるいは異なる間隔で描画されていることから、全ての系列を見ることはできない。すなわち、ある系列は、視点から見て前方に位置している系列(これを、前方系列と呼ぶ)の形状によって、見え隠れする。   In the example shown in FIG. 2, m series are drawn. From the viewpoint located in the Z-axis direction, since a plurality of series having respective shapes are drawn at equal intervals or different intervals, it is not possible to see all the series. That is, a certain series is visible and hidden by the shape of a series (referred to as a forward series) that is positioned forward from the viewpoint.

本実施形態では、最適な視点の算出にあたり、3次元折れ線グラフが見える情報量を数値化したものである視点のエントロピー式を用いて算出する。図2に示す例では、系列iは、前方系列によって見え隠れしている。両者を重ね合わせた場合に、視点から見えている面積をプラス(+)、視点から見えていない面積をマイナス(−)とする。換言すれば、系列iが見えている情報量は、前方系列とXY平行面枠となる面積の和となる。

Figure 0006444826
In the present embodiment, when calculating the optimum viewpoint, the viewpoint is entropy calculated by quantifying the amount of information in which the three-dimensional line graph can be seen. In the example shown in FIG. 2, the sequence i is visible and hidden by the forward sequence. When both are overlapped, the area that is visible from the viewpoint is positive (+), and the area that is not visible from the viewpoint is negative (−). In other words, the amount of information in which the series i can be seen is the sum of the area of the front series and the XY parallel plane frame.
Figure 0006444826


ここで、
E:情報量
V:与える視点
Ai :系列iが見えている量
S:各系列の積分の和
m:系列数
である。上記のAiは、例えば、前方系列とXY平行面枠となる面積の和が好適である。

here,
E: Amount of information
V: Given perspective
Ai: Amount of visible series i
S: Sum of integrals of each series
m: Number of series. The above Ai is preferably the sum of the areas of the front series and the XY parallel plane frame, for example.

<単一視点選択>
図3は、単一の視点を選択する処理の流れを示すフローチャートである。
<Single viewpoint selection>
FIG. 3 is a flowchart showing a flow of processing for selecting a single viewpoint.

まず、初期視点、初期視点距離を設定する(ステップS31)。   First, an initial viewpoint and an initial viewpoint distance are set (step S31).

次に、3次元折れ線グラフの見える情報量の最大値をゼロとする(ステップS32)。   Next, the maximum value of the information amount that can be seen in the three-dimensional line graph is set to zero (step S32).

次に、視点をXZ平行円において、視点移動単位分移動させる(ステップS33)。ここで、視点の移動単位は、例えば、1度とか5度とかの単位で移動させても、情報量の増減はわずかである。そこで、180度=πラジアンとする弧度法単位で、例えばπ/12=15度とするのが好適である。さらに、視点移動の方向(向き)として、−Y方向への移動は、例えば、グラフ領域の高さ分の範囲内での移動とする。   Next, the viewpoint is moved by the viewpoint movement unit in the XZ parallel circle (step S33). Here, even if the viewpoint is moved in units of, for example, 1 degree or 5 degrees, the increase or decrease in the information amount is slight. Therefore, it is preferable to set π / 12 = 15 degrees, for example, in an arc degree unit where 180 degrees = π radians. Further, as the viewpoint movement direction (direction), the movement in the −Y direction is, for example, movement within the range of the height of the graph area.

続いて、3次元折れ線グラフの全体が表示されているか否かを判定する(ステップS34)。   Subsequently, it is determined whether or not the entire three-dimensional line graph is displayed (step S34).

3次元折れ線グラフの全体が表示されていなければ(ステップS34でNo)、視点とグラフ中心点との距離を延ばし(ステップS35)た後、ステップS34に戻る。   If the entire three-dimensional line graph is not displayed (No in step S34), the distance between the viewpoint and the graph center point is extended (step S35), and the process returns to step S34.

一方、3次元折れ線グラフの全体が表示されていれば(ステップS34でYes)、上述したエントロピーの式によりグラフ情報量を算出してEと置く(ステップS36)。   On the other hand, if the entire three-dimensional line graph is displayed (Yes in step S34), the graph information amount is calculated by the above-described entropy equation and set as E (step S36).

次に、グラフ情報量Eが最大値よりも大きいか否かを判定する(ステップS37)。   Next, it is determined whether or not the graph information amount E is larger than the maximum value (step S37).

グラフ情報量Eが最大値よりも大きければ(ステップS37でYes)、最大値=Eと置き(ステップS38)、移動距離が2πラジアンよりも大きいか否かを判定する(ステップS39)。   If the graph information amount E is larger than the maximum value (Yes in step S37), the maximum value = E is set (step S38), and it is determined whether or not the moving distance is larger than 2π radians (step S39).

一方、グラフ情報量Eが最大値よりも大きくなければ(ステップS37でNo)、ステップS39に移行する。   On the other hand, if the graph information amount E is not larger than the maximum value (No in step S37), the process proceeds to step S39.

次に、移動距離が2πラジアンよりも大きくなければ(ステップS39でNo)、ステップS33に戻る。   Next, if the moving distance is not greater than 2π radians (No in step S39), the process returns to step S33.

一方、移動距離が2πラジアンよりも大きければ(ステップS39でYes)、一回りしたことになるので、単一の視点を選択する処理を終了する。   On the other hand, if the movement distance is greater than 2π radians (Yes in step S39), the movement is completed, and the process of selecting a single viewpoint is terminated.

<複数視点選択>
次に、複数の視点を選択する処理について説明する。図4は、複数の視点を選択する処理の流れを示すフローチャートである。
<Multiple viewpoint selection>
Next, processing for selecting a plurality of viewpoints will be described. FIG. 4 is a flowchart showing a flow of processing for selecting a plurality of viewpoints.

まず、初期視点、初期視点距離を設定する(ステップS401)。   First, an initial viewpoint and an initial viewpoint distance are set (step S401).

次に、3次元折れ線グラフの見える情報量の最大値をゼロとする(ステップS402)。ここでは、2個の視点を選択する例として、一方の視点の情報量の最大値Max1、および他方の視点の情報量の最大値Max2をそれぞれゼロとする。   Next, the maximum value of the amount of information that can be seen in the three-dimensional line graph is set to zero (step S402). Here, as an example of selecting two viewpoints, the maximum value Max1 of the information amount of one viewpoint and the maximum value Max2 of the information amount of the other viewpoint are each set to zero.

次に、視点をXZ平行円において、視点移動単位分移動させる(ステップS403)。ここで、視点の移動単位は、例えば、π/12=15度とするのが好適である。さらに、視点移動の方向(向き)として、−Y方向への移動は、例えば、グラフ領域の高さ分の範囲内での移動とする。   Next, the viewpoint is moved by the viewpoint movement unit in the XZ parallel circle (step S403). Here, the viewpoint movement unit is preferably π / 12 = 15 degrees, for example. Further, as the viewpoint movement direction (direction), the movement in the −Y direction is, for example, movement within the range of the height of the graph area.

続いて、3次元折れ線グラフの全体が表示されているか否かを判定する(ステップS404)。   Subsequently, it is determined whether or not the entire three-dimensional line graph is displayed (step S404).

3次元折れ線グラフの全体が表示されていなければ(ステップS404でNo)、視点とグラフ中心点との距離を延ばし(ステップS405)た後、ステップS404に戻る。   If the entire three-dimensional line graph is not displayed (No in step S404), the distance between the viewpoint and the graph center point is extended (step S405), and the process returns to step S404.

一方、3次元折れ線グラフの全体が表示されていれば(ステップS404でYes)、上述したエントロピーの式によりグラフ情報量を算出してEと置く(ステップS406)。   On the other hand, if the entire three-dimensional line graph is displayed (Yes in step S404), the graph information amount is calculated by the above-described entropy formula and set as E (step S406).

次に、グラフ情報量Eが最大値Max1よりも大きいか否かを判定する(ステップS407)。   Next, it is determined whether or not the graph information amount E is larger than the maximum value Max1 (step S407).

グラフ情報量Eが最大値Max1よりも大きければ(ステップS407でYes)、最大値Max1=Eと置き(ステップS408)、ステップS411に移行する。   If the graph information amount E is larger than the maximum value Max1 (Yes in step S407), the maximum value Max1 = E is set (step S408), and the process proceeds to step S411.

グラフ情報量Eが最大値Max1よりも大きくなければ(ステップS407でNo)、グラフ情報量Eが最大値Max2よりも大きいか否かを判定する(ステップS409)。   If the graph information amount E is not larger than the maximum value Max1 (No in step S407), it is determined whether or not the graph information amount E is larger than the maximum value Max2 (step S409).

グラフ情報量Eが最大値Max2よりも大きければ(ステップS409でYes)、最大値Max2=Eと置く(ステップS410)。一方、グラフ情報量Eが最大値Max2よりも大きくなければ(ステップS409でNo)、ステップS411に移行する。   If the graph information amount E is larger than the maximum value Max2 (Yes in step S409), the maximum value Max2 = E is set (step S410). On the other hand, if the graph information amount E is not larger than the maximum value Max2 (No in step S409), the process proceeds to step S411.

続いて、移動距離が2πラジアンよりも大きいか否かを判定する(ステップS411)。   Subsequently, it is determined whether or not the moving distance is greater than 2π radians (step S411).

次に、移動距離が2πラジアンよりも大きくなければ(ステップS411でNo)、ステップS403に戻る。   Next, if the moving distance is not greater than 2π radians (No in step S411), the process returns to step S403.

一方、移動距離が2πラジアンよりも大きければ(ステップS411でYes)、一回りしたことになるので、複数の視点を選択する処理を終了する。   On the other hand, if the movement distance is larger than 2π radians (Yes in step S411), the movement is completed, and the process of selecting a plurality of viewpoints is terminated.

<視点・視線方向の初期値の設定>
視点・視線方向の初期値は、ユーザが任意に設定することができる。例えば、3次元コンピュータグラフィックスを表現するためのファイルフォーマットであるX3Dアプリケーションソフトによれば、以下のように初期値を記述することができる。
<Setting the initial values for the viewpoint and line-of-sight direction>
The initial values of the viewpoint and the line-of-sight direction can be arbitrarily set by the user. For example, according to X3D application software which is a file format for expressing three-dimensional computer graphics, initial values can be described as follows.

<Viewpoint position=“0 0 10” orientation=“0 0 0 1” field Of View=“π/4” >
<Transform translation=“…”>
また、グラフ領域空間の中心点(グラフ中心点)は、図5に示すように設定することができる。
<Viewpoint position = “0 0 10” orientation = “0 0 0 1” field Of View = “π / 4”>
<Transform translation = “…”>
Further, the center point of the graph area space (graph center point) can be set as shown in FIG.

X:n of X / 2
Y: Max(y(x,z)) /2
Z:n of Z /2
n : データの総数、 y(x,z)>0である。ここで、データは、X軸、Z軸の刻みを指し、例えば、X軸の刻みが24であれば、X軸のn=24、Z軸の刻みが12であれば、Z軸のn=12である。
X: n of X / 2
Y: Max (y (x, z)) / 2
Z: n of Z / 2
n: Total number of data, y (x, z)> 0. Here, the data indicates the increments of the X axis and the Z axis. For example, if the increment of the X axis is 24, n = 24 of the X axis, and if the increment of the Z axis is 12, the n axis of the Z axis is equal to n = 24. 12.

<視点とグラフ中心点間の距離>
図6は、視点とグラフ中心点間の距離の調整を説明する図である。図6に示すように、視点とグラフ中心点間の距離を延ばすには、視角を大きくすることによって同等の処理結果を得ることができる。
<Distance between viewpoint and graph center point>
FIG. 6 is a diagram for explaining adjustment of the distance between the viewpoint and the graph center point. As shown in FIG. 6, in order to extend the distance between the viewpoint and the graph center point, an equivalent processing result can be obtained by increasing the viewing angle.

<視点の移動>
図7は、視点の移動を説明する図である。図7に示す例では、視点はXZ平行円上を単位分移動する。平行円のYは グラフ中心点のYである。視点の最大移動距離は2πラジアンで、2πラジアン移動すると初期点に戻る。
<Moving the viewpoint>
FIG. 7 is a diagram for explaining the movement of the viewpoint. In the example shown in FIG. 7, the viewpoint moves on the XZ parallel circle by a unit. The Y of the parallel circle is the Y of the graph center point. The maximum movement distance of the viewpoint is 2π radians, and when the 2π radians are moved, the viewpoint returns to the initial point.

尚、XZ平行円をY軸に沿ってずらして複数設けることも可能である。   It is also possible to provide a plurality of XZ parallel circles by shifting along the Y axis.

<回転する視点>
図8は、回転する視点を説明する図である。例えば、ユーザによるキー操作(周知技術が適用できるので、ここでは詳述しない)の受け付けを可能とし、図8に示すように、XZ平行円上においてグラフ中心点に視線方向(視線軸)を合わせ、キー操作で選択された視点を変えることができる。
<Rotating viewpoint>
FIG. 8 is a diagram for explaining a rotating viewpoint. For example, it is possible to accept key operations by a user (a well-known technique can be applied and will not be described in detail here), and as shown in FIG. 8, the line-of-sight direction (line-of-sight axis) is aligned with the graph center point on the XZ parallel circle The viewpoint selected by key operation can be changed.

[実施例]
次に、本実施形態の実施例として、上記した情報量Eの計算例について説明する。ここでは、計算を容易にするため、系列数mを12、系列iが見えている量Aiを一律に30、各系列の積分の和Sを全部50とする。これらを上式にあてはめると、

Figure 0006444826
[Example]
Next, a calculation example of the information amount E described above will be described as an example of the present embodiment. Here, in order to facilitate the calculation, the number of series m is 12, the amount Ai that the series i is visible is uniformly 30, and the sum S of integrals of each series is 50. If these are applied to the above equation,
Figure 0006444826

Eは約1.597となる。 E is about 1.597.

(本実施形態の変形例1)
次に、本実施形態の変形例1について説明する。上記の視点を複数求めて、その複数の視点をユーザ操作で選択する。選択した視点から情報量が最大になるレイアウトに変更可能とし、3次元グラフの情報量が最大になる各軸のグリッド間隔とするのが好適である。
(Modification 1 of this embodiment)
Next, Modification 1 of the present embodiment will be described. A plurality of the above viewpoints are obtained, and the plurality of viewpoints are selected by a user operation. It is preferable to change the layout from the selected viewpoint to a layout that maximizes the amount of information, and to set the grid interval of each axis that maximizes the amount of information in the three-dimensional graph.

(本実施形態の変形例2)
次に、本実施形態の変形例2について説明する。図8に示す例において、各(1)〜(5)からの各視点に対して、左目と右目視差間の差分視点間を交互に表示するアニメーションにすることができる。このようにして、ユーザが3次元折れ線グラフとして認識するための視差を表示可能とすることもできる。
(Modification 2 of this embodiment)
Next, a second modification of the present embodiment will be described. In the example illustrated in FIG. 8, for each viewpoint from (1) to (5), an animation that alternately displays a difference viewpoint between the left eye and the right eye parallax can be provided. In this way, parallax for the user to recognize as a three-dimensional line graph can be displayed.

以上説明したように、本実施形態によれば、3次元折れ線グラフを描画する際に、視認することのできる情報量を最大化した最適な視点を求めることができる。また、情報量が大きい複数の視点を、ユーザの視点変更操作として用いることができる。   As described above, according to this embodiment, when drawing a three-dimensional line graph, it is possible to obtain an optimal viewpoint that maximizes the amount of information that can be visually recognized. In addition, a plurality of viewpoints with a large amount of information can be used as a user's viewpoint changing operation.

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。   Although several embodiments of the present invention have been described, these embodiments are presented by way of example and are not intended to limit the scope of the invention. These novel embodiments can be implemented in various other forms, and various omissions, replacements, and changes can be made without departing from the scope of the invention. These embodiments and modifications thereof are included in the scope and gist of the invention, and are included in the invention described in the claims and the equivalents thereof.

1・・・3次元折れ線グラフ視点制御装置
10・・・入力部
20・・・演算処理部
30・・・表示部
40・・・データ格納部
DESCRIPTION OF SYMBOLS 1 ... 3D line graph viewpoint control apparatus 10 ... Input part 20 ... Arithmetic processing part 30 ... Display part 40 ... Data storage part

Claims (9)

3次元空間を2次元画面の表示領域上に設定し、その表示領域上に3次元折れ線グラフを表示する3次元折れ線グラフ視点制御装置であって、
視点および視点距離の初期値の入力を受け付ける入力部と、
前記3次元折れ線グラフを描画するためのデータを格納するデータ格納部と、
前記入力部から視点および視点距離の初期値のデータを、前記データ格納部から前記3次元折れ線グラフのデータをそれぞれ取り込み、初期値として与えられた任意の視点の座標と視角を用いて前記3次元折れ線グラフが視認できる量を表す情報量を数値化したものである視点のエントロピー式を用いて前記情報量が最大となる視点の座標と視角を算出する演算部と、
前記演算部によって算出された視点の座標と視角に基づいて前記3次元折れ線グラフを表示する表示部とを
備える3次元折れ線グラフ視点制御装置。
A 3D line graph viewpoint control device that sets a 3D space on a display area of a 2D screen and displays a 3D line graph on the display area,
An input unit for receiving input of initial values of a viewpoint and a viewpoint distance;
A data storage unit for storing data for drawing the three-dimensional line graph;
Data of initial values of viewpoints and viewpoint distances from the input unit, and data of the three-dimensional line graph from the data storage unit, respectively, and the three-dimensional using the coordinates and viewing angles of arbitrary viewpoints given as initial values A calculation unit that calculates the coordinates and viewing angle of the viewpoint at which the information amount is maximized using an entropy formula of the viewpoint, which is a numerical value of the amount of information that represents the amount that the line graph can be visually recognized;
A three-dimensional line graph viewpoint control device comprising: a display unit configured to display the three-dimensional line graph based on viewpoint coordinates and a viewing angle calculated by the arithmetic unit.
前記3次元折れ線グラフが複数個の系列から成り、前記系列が一つの軸方向へ繋がる一連のデータから成り、
E:情報量
V:与える視点
Ai :前記複数個の系列が2次元画面の表示領域上に描画される際、前方系列により系列iが見えている量
S:各系列の積分の和
m:系列数
であるとき、
前記エントロピー式は、
Figure 0006444826
である請求項1に記載の3次元折れ線グラフ視点制御装置。
The three-dimensional line graph is composed of a plurality of series, and the series is composed of a series of data connected in one axial direction,
E: Amount of information
V: Given perspective
Ai: Amount by which the sequence i is visible by the forward sequence when the plurality of sequences are drawn on the display area of the two-dimensional screen
S: Sum of integrals of each series
m is the number of series
The entropy formula is
Figure 0006444826
The three-dimensional line graph viewpoint control device according to claim 1.
2次元領域の表示領域を表すXY平行面枠に表示される前記系列が、Z軸方向に位置する或る視点から見て前方に位置している前方系列によって見え隠れする場合に、或る視点から見えている面積と或る視点から見えていない面積に基づき、前記系列が見えている量を、前方系列とXY平行面枠となる面積の和とする請求項2に記載の3次元折れ線グラフ視点制御装置。   When the series displayed on the XY parallel plane frame representing the display area of the two-dimensional area is obscured by a forward series positioned forward when viewed from a certain viewpoint located in the Z-axis direction, from a certain viewpoint 3. The three-dimensional line graph viewpoint according to claim 2, wherein an amount of the series that is visible based on an area that is visible and an area that is not visible from a certain viewpoint is a sum of an area that forms a front series and an XY parallel plane frame. Control device. 視点の移動単位は、πラジアン/12とする請求項3に記載の3次元折れ線グラフ視点制御装置。   The three-dimensional line graph viewpoint control apparatus according to claim 3, wherein the viewpoint movement unit is π radians / 12. 視点の選択に際して、視点とグラフ中心点との距離を延ばして調整する請求項4に記載の3次元折れ線グラフ視点制御装置。   The three-dimensional line graph viewpoint control device according to claim 4, wherein, when selecting a viewpoint, the distance between the viewpoint and the graph center point is increased and adjusted. 前記グラフ中心点に視線方向を合わせて視点を平行円上で回転させる請求項5に記載の3次元折れ線グラフ視点制御装置。   The three-dimensional line graph viewpoint control device according to claim 5, wherein the viewpoint is rotated on a parallel circle with a line-of-sight direction aligned with the graph center point. 複数の視点が選択された場合に、ユーザによる選択を受け付け可能とする請求項6に記載の3次元折れ線グラフ視点制御装置。   The three-dimensional line graph viewpoint control apparatus according to claim 6, wherein when a plurality of viewpoints are selected, selection by a user can be accepted. 3次元空間を2次元画面の表示領域上に設定し、その表示領域上に3次元折れ線グラフを表示する3次元折れ線グラフ視点制御装置に、
視点および視点距離の初期値の入力を受け付ける機能と、
前記3次元折れ線グラフを描画するためのデータを取り込む機能と、
前記視点および視点距離の初期値のデータ、前記3次元折れ線グラフのデータに基づいて、初期値として与えられた任意の視点の座標と視角を用いて前記3次元折れ線グラフが視認できる量を表す情報量を数値化したものである視点のエントロピー式を用いて前記情報量が最大となる視点の座標と視角を算出する機能と、
前記算出された視点の座標と視角に基づいて前記3次元折れ線グラフを前記表示領域上に表示させる機能とを
を実現させるための3次元折れ線グラフ視点制御プログラム。
In a 3D line graph viewpoint control device that sets a 3D space on a display area of a 2D screen and displays a 3D line graph on the display area,
A function that accepts input of initial values of viewpoint and viewpoint distance;
A function of capturing data for drawing the three-dimensional line graph;
Information representing the amount that the three-dimensional line graph can be visually recognized using the coordinates and the viewing angle of an arbitrary viewpoint given as an initial value based on the data of the initial values of the viewpoint and the viewpoint distance and the data of the three-dimensional line graph A function for calculating the coordinates and viewing angle of the viewpoint that maximizes the information amount using an entropy formula of the viewpoint that is a numerical value of the amount;
A three-dimensional line graph viewpoint control program for realizing the function of displaying the three-dimensional line graph on the display area based on the calculated viewpoint coordinates and viewing angle.
前記3次元折れ線グラフが複数個の系列から成り、前記系列が一つの軸方向へ繋がる一連のデータから成り、
E:情報量
V:与える視点
Ai :前記複数個の系列が2次元画面の表示領域上に描画される際、前方系列により系列iが見えている量
S:各系列の積分の和
m:系列数
であるとき、
前記エントロピー式は、
Figure 0006444826
である請求項8に記載の3次元折れ線グラフ視点制御プログラム。
The three-dimensional line graph is composed of a plurality of series, and the series is composed of a series of data connected in one axial direction,
E: Amount of information
V: Given perspective
Ai: Amount by which the sequence i is visible by the forward sequence when the plurality of sequences are drawn on the display area of the two-dimensional screen
S: Sum of integrals of each series
m is the number of series
The entropy formula is
Figure 0006444826
The three-dimensional line graph viewpoint control program according to claim 8.
JP2015144518A 2015-07-22 2015-07-22 3D line graph viewpoint control device and 3D line graph viewpoint control program Active JP6444826B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2015144518A JP6444826B2 (en) 2015-07-22 2015-07-22 3D line graph viewpoint control device and 3D line graph viewpoint control program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015144518A JP6444826B2 (en) 2015-07-22 2015-07-22 3D line graph viewpoint control device and 3D line graph viewpoint control program

Publications (2)

Publication Number Publication Date
JP2017026786A JP2017026786A (en) 2017-02-02
JP6444826B2 true JP6444826B2 (en) 2018-12-26

Family

ID=57949569

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015144518A Active JP6444826B2 (en) 2015-07-22 2015-07-22 3D line graph viewpoint control device and 3D line graph viewpoint control program

Country Status (1)

Country Link
JP (1) JP6444826B2 (en)

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5230332A (en) * 1975-09-03 1977-03-08 Meidensha Electric Mfg Co Ltd Engine performance curve displaying method for a graphic display unit
JPH06259209A (en) * 1993-03-10 1994-09-16 Toshiba Corp Process executing condition display device
JPH0934850A (en) * 1995-07-21 1997-02-07 Hitachi Ltd Method for displaying performance data in parallel computer system
JP4077400B2 (en) * 2002-12-26 2008-04-16 株式会社東芝 GUIDE INFORMATION PROVIDING DEVICE, SERVER DEVICE, GUIDE INFORMATION PROVIDING METHOD, AND PROGRAM FOR CAUSING COMPUTER TO PROVIDE GUIDE INFORMATION PROVIDING
JP2005107862A (en) * 2003-09-30 2005-04-21 Casio Comput Co Ltd Graph display control apparatus and program
JP6143469B2 (en) * 2013-01-17 2017-06-07 キヤノン株式会社 Information processing apparatus, information processing method, and program

Also Published As

Publication number Publication date
JP2017026786A (en) 2017-02-02

Similar Documents

Publication Publication Date Title
JP6436628B2 (en) System and method for navigating a three-dimensional environment using a multi-input interface
KR102249577B1 (en) Hud object design and method
WO2019057190A1 (en) Method and apparatus for displaying knowledge graph, terminal device, and readable storage medium
JP5866177B2 (en) Image processing apparatus and image processing method
JP5167439B1 (en) Stereoscopic image display apparatus and stereoscopic image display method
US20160041630A1 (en) Operations in a Three Dimensional Display System
US8929628B2 (en) Measuring device and measuring method
JP6290754B2 (en) Virtual space display device, virtual space display method and program
JP2012252627A (en) Program, information storage medium, and image generation system
KR101732839B1 (en) Segmentation of content delivery
US20130215109A1 (en) Designating Real World Locations for Virtual World Control
TW201503050A (en) Three dimensional data visualization
JP2020052790A (en) Information processor, information processing method, and program
JP6017795B2 (en) GAME PROGRAM, GAME DEVICE, GAME SYSTEM, AND GAME IMAGE GENERATION METHOD
KR20110088995A (en) Method and system to visualize surveillance camera videos within 3d models, and program recording medium
JP2022058753A (en) Information processing apparatus, information processing method, and program
JP2004362218A (en) Three-dimensional object operating method
EP3594906B1 (en) Method and device for providing augmented reality, and computer program
JP6444826B2 (en) 3D line graph viewpoint control device and 3D line graph viewpoint control program
WO2013121468A1 (en) 3d image display device and 3d image display method
Pfeiffer et al. GPU-accelerated attention map generation for dynamic 3D scenes
US20220206669A1 (en) Information processing apparatus, information processing method, and program
Harish et al. Designing perspectively correct multiplanar displays
JP2020013390A (en) Information processing apparatus, information processing program, and information processing method
CN202887197U (en) Medical image work station with stereoscopic vision display

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20170829

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20170830

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20170829

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20170830

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170926

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20180625

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180703

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180831

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20181030

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20181128

R150 Certificate of patent or registration of utility model

Ref document number: 6444826

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150