JPWO2018229810A1 - Information presentation device, information presentation system, and information presentation method for behavior control - Google Patents
Information presentation device, information presentation system, and information presentation method for behavior control Download PDFInfo
- Publication number
- JPWO2018229810A1 JPWO2018229810A1 JP2019524548A JP2019524548A JPWO2018229810A1 JP WO2018229810 A1 JPWO2018229810 A1 JP WO2018229810A1 JP 2019524548 A JP2019524548 A JP 2019524548A JP 2019524548 A JP2019524548 A JP 2019524548A JP WO2018229810 A1 JPWO2018229810 A1 JP WO2018229810A1
- Authority
- JP
- Japan
- Prior art keywords
- information
- action
- behavior
- group
- information presentation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 31
- 230000009471 action Effects 0.000 claims abstract description 137
- 238000005259 measurement Methods 0.000 claims abstract description 40
- 230000000007 visual effect Effects 0.000 claims 1
- 230000000694 effects Effects 0.000 abstract description 8
- 230000006399 behavior Effects 0.000 description 70
- 230000008859 change Effects 0.000 description 9
- 230000006870 function Effects 0.000 description 7
- 230000008569 process Effects 0.000 description 7
- 238000010586 diagram Methods 0.000 description 5
- 230000007613 environmental effect Effects 0.000 description 5
- 238000001514 detection method Methods 0.000 description 4
- 230000000763 evoking effect Effects 0.000 description 3
- 230000003542 behavioural effect Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 230000003111 delayed effect Effects 0.000 description 2
- 239000006185 dispersion Substances 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 238000005457 optimization Methods 0.000 description 2
- 230000008901 benefit Effects 0.000 description 1
- 239000003795 chemical substances by application Substances 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000001939 inductive effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000001737 promoting effect Effects 0.000 description 1
- 230000002787 reinforcement Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Human Resources & Organizations (AREA)
- Economics (AREA)
- Strategic Management (AREA)
- Entrepreneurship & Innovation (AREA)
- Operations Research (AREA)
- Physics & Mathematics (AREA)
- Educational Administration (AREA)
- Marketing (AREA)
- Development Economics (AREA)
- Quality & Reliability (AREA)
- Tourism & Hospitality (AREA)
- Game Theory and Decision Science (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Image Analysis (AREA)
- Traffic Control Systems (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
空間に存在する人々を所望の状況に近づけるために行動制御を行う手段において、直接的な情報提示によって効果が低減される場合であっても、効率的に行動制御を可能とする行動制御のための情報提示装置を提供することを目的とする。モニタを含む計測領域内に存在する人物の行動を表す群行動情報と計測領域内に存在する特定の人物の行動を表す行動情報とを得る環境計測部と、計測領域内に存在する人物全員についてのシステム目標値と群行動情報との差分に応じて特定の人物の行動を制御するための行動制御パラメータを得る群行動制御部と、群行動制御部で求めた行動制御パラメータと行動情報との差分に応じて情報提示パラメータを得る行動制御部と、行動制御部で求めた情報提示パラメータに応じて情報提示コンテンツを得るとともに、モニタの表示内容を制御する情報提示部で構成されることを特徴とする。A means for performing behavior control to bring people in a space closer to a desired situation, for behavior control that enables efficient behavior control even when the effect is reduced by direct information presentation. It is an object of the present invention to provide the information presenting device. About the environment measurement unit that obtains group action information indicating the action of a person existing in the measurement region including the monitor and action information indicating the action of a specific person existing in the measurement region, and all the persons present in the measurement region Between the group action control unit that obtains the action control parameter for controlling the action of a specific person according to the difference between the system target value and the group action information, and the action control parameter and the action information obtained by the group action control unit. It is configured by an action control unit that obtains information presentation parameters according to the difference, and an information presentation unit that obtains information presentation content according to the information presentation parameters obtained by the action control unit and controls the display content of the monitor. And
Description
本発明は、環境内の人々の行動を制御するための情報提示装置、情報提示システム、および情報提示方法に関する。 The present invention relates to an information presentation device, an information presentation system, and an information presentation method for controlling the behavior of people in the environment.
従来より、現場の環境を計測しながら、所望の結果を得るために、人々の行動を促すようなアプリケーションがある。古くは、館内アナウンスのようなもので、情報を提供することで、その場にいる人の行動を変化させて、管理者の意図に沿った状況に近づけるものであり、流通小売店のタイムセールのようなものが分かりやすい。その他には、例えば、デジタルサイネージのような情報端末に特定の情報を提示して、その情報に基づいて人々の行動を変化させるようなものがこれに当たる。 2. Description of the Related Art Conventionally, there are applications that encourage people's actions in order to obtain a desired result while measuring the environment at the site. In the old days, it is like an announcement in the hall, and by providing information, it is possible to change the behavior of people on the spot and bring it closer to the situation in line with the intention of the administrator. It is easy to understand something like. In addition, for example, such as digital signage, which presents specific information to an information terminal and changes the behavior of people based on the information, corresponds to this.
これらの環境の情報を観察する手段としては、カメラシステムを活用して、カメラから取得した映像から画像処理により計測エリアに現れる人や車両などを認識する機能を有する映像監視システム等が提案されている。映像監視システムでは、検出結果を利用することで表示装置の警告アイコンの表示、またブザー等を鳴らして監視員の注意を促すことができ、これによって注意喚起するなど、犯罪や危険事象の抑制という意味では、行動の制御としての一形態であると言える。 As a means for observing information on these environments, an image monitoring system or the like having a function of recognizing a person or a vehicle appearing in a measurement area by image processing from an image acquired from a camera by utilizing a camera system has been proposed. There is. In the video surveillance system, the detection result can be used to display a warning icon on the display device or sound a buzzer to alert the surveillance staff. In a sense, it can be said to be a form of behavior control.
さらには、生活をサポートするロボットのようなシステムによって、事前に設定した指標に基づき情報を提示することで、例えば外出時間や就寝などの特定の行動を促すなど、生活をサポートする機能としての情報提示なども考えられる。 Furthermore, by presenting information based on a preset index by a system such as a robot that supports life, information as a function that supports life, such as urging specific behavior such as going out and going to bed Presentations are also possible.
ところが、情報を提示した際に、データを受け取るユーザ側にとって有用な情報でない限りは、行動の変化が得られないという課題がある。例えば、自信の嗜好に合ってない場合やタイムリーな情報でない場合などは、ユーザの行動を促すことに至らない場合がある。 However, when presenting the information, there is a problem that the behavior cannot be changed unless the information is useful to the user who receives the data. For example, if the user's preference is not met or the information is not timely information, the user's action may not be prompted.
以上のような課題に対して、特許文献1のような方法が提案されている。特許文献1においては、「利用者が提供する情報を広範囲、かつ、タイムリーに相手の嗜好に適した情報を配信することにより、他の利用者の外出を誘発する。」という課題の解決のために、「地域情報共有装置30は、利用者の行動パターンを取得する行動パターン情報取得手段34と、利用者の利用者端末10又は車両20から取得した撮影情報及び/又はコメント情報を含む地域情報を取得する地域情報取得手段33と、取得した地域情報と利用者の行動パターンと他の利用者の行動パターンの関連性を判定し、関連性を有する行動パターンの他の利用者を抽出する利用者抽出手段37と、利用者の行動が他の利用者の行動を誘発するか否かを判定する手段と、判定の結果に応じて、取得した地域情報を抽出した利用者が所持する利用者端末10又は利用者が利用中の車両20の車載端末に地域情報を配信する地域情報配信手段38と、を備える。」ように構成したものである。
A method as disclosed in Patent Document 1 has been proposed to solve the above problems. In Patent Document 1, the problem of "promoting other users to go out by distributing information provided by a user in a wide range and in a timely manner that is suitable for the taste of the other party" is solved. For this purpose, the “regional
特許文献1に記載の手法は要するに、ユーザの嗜好を事前に分析し、ユーザの好む情報を提示させることで、その興味を誘発して、外出を促すシステムである。さらに、複数ユーザの情報をアップロードする機能を持ち、その情報をデータベース化することで、特定ユーザ間での嗜好パタンの類似性(ペルソナとの一致度)から、行動に繋がりやすい情報を提示するものである。 In short, the method described in Patent Document 1 is a system in which the preference of the user is analyzed in advance and the information the user likes is presented, thereby inducing the interest and prompting the user to go out. Furthermore, it has a function to upload information of multiple users, and by presenting that information in a database, it is possible to present information that is easy to lead to actions based on the similarity of preference patterns among specific users (degree of coincidence with persona). Is.
然るに、特許文献1に記載の手法には、さらに解決すべき以下の課題がある。まず第1点として、ユーザに対してある行動を促そうとする場合に、直接的に情報を提示すると、ユーザにとって有効であるか否かという主観的な判断に頼らざるを得ないという問題が考えられる。具体的には、カーナビゲーションシステムに例えると、前方で渋滞が発生している場合に、渋滞を回避してください、と直接アナウンスすると、心理的リアクタンスと呼ばれるような意図したものと逆の動きを取る傾向がある心理的な現象が考えられ、その通りにユーザ行動が変遷しないという問題である。 However, the method described in Patent Document 1 has the following problems to be solved. First, when trying to prompt a user to take a certain action, if information is presented directly, there is a problem that the user must resort to subjective judgment as to whether or not it is effective for the user. Conceivable. Specifically, if you compare it to a car navigation system, if you directly announce that there is congestion in front of you and you want to avoid the congestion, the opposite behavior from what you intended, such as psychological reactance, is performed. The problem is that psychological phenomena that tend to be taken are considered, and user behavior does not change as it is.
また第2点として、情報提示によって行動変化を促す場合には、情報提示の初期段階ではある程度の確率で意図通りの行動となるが、時間経過とともに、ユーザに慣れが生じてしまい、そのために想定通りの動きとはならないことが考えられる。具体的には、注意喚起の電光掲示板表示のようなものも、繰り返し目にしていると注意行動に繋がらなくなることは、容易に考えられる。 In addition, as a second point, when prompting a behavior change by presenting information, the behavior will be as intended at a certain probability in the initial stage of presenting information, but the user becomes accustomed to it with the passage of time, and this is assumed. It is conceivable that it will not be a street movement. Specifically, it is easily conceivable that something like a warning bulletin board display will not lead to attention behavior if repeatedly viewed.
さらに第3点として、個人に対しての行動変化を検討することは、例えば情報端末への情報提示によって、一定の確率で制御することも可能である。しかしながら、情報端末を持った人物に限定される点や、交通量の多い施設など、大量の人物の行動を意図通りに誘導するには、個々人への緻密な対応を必要とする点など、困難であることが多い。 Furthermore, as a third point, it is possible to control the behavior change for an individual with a certain probability by, for example, presenting information to an information terminal. However, it is difficult, such as being limited to people with information terminals, and requiring precise attention to each individual in order to guide the behavior of a large number of people as intended, such as facilities with heavy traffic. Often
以上のことから本発明は、上記のような問題点を解決するためになされたものであって、管理側の意図した空間における人々の行動制御に対して、行動モデルと群行動モデルのように個の行動制御から群衆の行動制御を行うことで、ユーザ(空間にいる人物)にとっては、制御の意図を意識することなく、管理側は全体最適の目的を果たすことを可能とする、行動制御のための情報提示装置、情報提示システム、および情報提示方法を提供することを目的とする。 From the above, the present invention has been made in order to solve the problems as described above, and for the behavior control of people in the space intended by the management side, as in a behavior model and a group behavior model, By performing the behavior control of the crowd from the individual behavior control, the user (person in the space) does not have to be aware of the control intention, and the management side can fulfill the purpose of overall optimization. An information presenting device, an information presenting system, and an information presenting method are provided.
以上のことから本発明においては、「モニタを含む計測領域内に存在する人物の行動を表す群行動情報と計測領域内に存在する特定の人物の行動を表す行動情報とを得る環境計測部と、計測領域内に存在する人物全員についてのシステム目標値と群行動情報との差分に応じて特定の人物の行動を制御するための行動制御パラメータを得る群行動制御部と、群行動制御部で求めた行動制御パラメータと行動情報との差分に応じて情報提示パラメータを得る行動制御部と、行動制御部で求めた情報提示パラメータに応じて情報提示コンテンツを得るとともに、モニタの表示内容を制御する情報提示部で構成されることを特徴とする行動制御のための情報提示装置。」としたものである。 From the above, in the present invention, "an environment measurement unit that obtains group action information indicating the action of a person existing in a measurement region including a monitor and action information indicating the action of a specific person existing in the measurement region. , A group action control unit that obtains an action control parameter for controlling the action of a specific person according to the difference between the system target value and the group action information for all the persons existing in the measurement region, and the group action control unit. An action control unit that obtains information presentation parameters according to the difference between the obtained action control parameters and action information, and obtains information presentation content according to the information presentation parameters obtained by the action control unit and controls the display content of the monitor An information presenting device for behavior control, characterized by being configured by an information presenting unit. "
また本発明においては、「行動制御のための情報提示装置を含む情報提示システムであって、計測領域内に配置され、情報提示部により表示内容が制御されるモニタと、計測領域内を視野とする画像情報を環境計測部に与えるカメラとを含むことを特徴とする行動制御のための情報提示システム。」としたものである。 Further, in the present invention, "an information presenting system including an information presenting device for behavior control, a monitor arranged in a measurement region, the display content of which is controlled by an information presenting unit, and a field of view within the measurement region are provided. An information presenting system for action control, characterized in that it includes a camera for giving image information to the environment measuring unit. "
また本発明においては、「モニタを含む計測領域内に存在する人物の行動を表す群行動情報と計測領域内に存在する特定の人物の行動を表す行動情報とを得、計測領域内に存在する人物全員についてのシステム目標値と群行動情報との差分に応じて特定の人物の行動を制御するための行動制御パラメータを得、行動制御パラメータと行動情報との差分に応じて情報提示パラメータを得、情報提示パラメータに応じて情報提示コンテンツを定め、モニタの表示内容を制御することを特徴とする行動制御のための情報提示方法。」としたものである。 Further, in the present invention, "the group action information indicating the action of the person existing in the measurement region including the monitor and the action information indicating the action of the specific person existing in the measurement region are obtained and are present in the measurement region. Obtain the action control parameter for controlling the action of a specific person according to the difference between the system target value and the group action information for all the persons, and obtain the information presentation parameter according to the difference between the action control parameter and the action information , An information presentation method for behavior control, characterized in that the information presentation content is determined according to the information presentation parameter and the display content of the monitor is controlled. ”
本発明によれば、直接的な情報を提示することで、負の反応となる行動制御に対して、行動制御による群行動の制御によって、ユーザの心理的負担を生じずに、管理者の所望の制御を可能とする。 ADVANTAGE OF THE INVENTION According to this invention, by showing direct information, with respect to action control which becomes a negative reaction, control of group action by action control does not produce a user's psychological burden, but an administrator's desire. Control is possible.
さらに本発明の実施例によれば、時間経過とともに効果が低下する制御の問題に対して、動的にモデルを更新していくことによって、空間における行動制御の効果を持続的に実施することができ、環境の変化があった場合でも影響を少なくしながら、所定の行動制御を実行することを可能とする。 Further, according to the embodiment of the present invention, it is possible to continuously implement the effect of the behavior control in the space by dynamically updating the model with respect to the control problem in which the effect decreases with the passage of time. Even if there is a change in the environment, it is possible to execute predetermined action control while reducing the influence.
また本発明の実施例によれば、個人の行動をきっかけとして群行動を制御することから、個人ごとに端末を持たせて制御するなどの、直接的な効果を期待するものではなく、資産や人的リソースを有効に活用しながら、空間最適化のような効果を得られることが期待される。 Further, according to the embodiment of the present invention, the group behavior is controlled based on the behavior of the individual, so that it is not expected to have a direct effect such as controlling by having a terminal for each individual. It is expected that effects such as space optimization can be obtained while effectively utilizing human resources.
以下本発明の実施例について、図面を参照して説明する。 Embodiments of the present invention will be described below with reference to the drawings.
本発明は、ある空間に存在する人物の行動を制御するための、情報提示装置や、情報提示装置を用いた行動制御の方法に関するものである。制御のための環境の計測には様々な計測手段が考えられるが、本発明では、実施例としてカメラ等のセンサを活用した例を示す。さらに、情報提示の方法も、携帯端末に提示する方法や環境に組み込まれた情報端末に表示するもの、音声などのガイダンスで提示するものなど、ある空間にいる人物に対する情報の提示方法であればいずれの方法でもよい。ここでは、デジタルサイネージのようなモニタでの情報提示を例として説明する。 The present invention relates to an information presentation device for controlling the behavior of a person existing in a space, and a method of behavior control using the information presentation device. Although various measuring means can be considered for measuring the environment for control, the present invention shows an example in which a sensor such as a camera is used as an embodiment. Furthermore, the method of presenting information is not limited as long as it is a method of presenting information to a person in a certain space, such as a method of presenting on a mobile terminal, a method of displaying on an information terminal incorporated in the environment, a method of presenting with guidance such as voice. Either method may be used. Here, information presentation on a monitor such as digital signage will be described as an example.
図1は、本発明の実施例に係る情報提示システムの構成を示すブロック図である。 FIG. 1 is a block diagram showing the configuration of the information presentation system according to the embodiment of the present invention.
図1の情報提示システム1は、測定対象環境の環境情報を入手する環境情報入手手段としての例えばカメラ10、測定対象環境内に存在する人物に対して行動喚起情報を提示する情報提示手段としての例えばモニタ90、環境情報から行動喚起情報を作成する情報提示装置100により構成されている。
The information presenting system 1 of FIG. 1 is, for example, a
このうち、環境情報入手手段である例えばカメラ10としては、様々な機器が適用できる。カメラ10は、レンズとカメラセンサなどで構成されており、所定の画像が取得できる。画像センサは、CMOS(Complementary Metal Oxide Semiconductor)やCCD(Charge Coupled Device)などの撮像素子(いずれも図示せず)を含む機構である。このようなカメラ10から取得した画像および映像を用いることで、人物などの環境内の状況をセンシングすることが出来る。
Of these, various devices can be applied as the environmental information acquisition means, for example, the
また情報提示手段が提示する情報については、端末装置等を用いて映像表現として提示することもできる。例えば、液晶表示装置やCRT(Cathode Ray Tube)表示装置などを用いる。処理結果自体は、RGB(Red−Green−Blue)モニタ出力、または、携帯端末の画面への情報提示などを行うように構成してもよい。 Further, the information presented by the information presenting means can be presented as a video representation using a terminal device or the like. For example, a liquid crystal display device, a CRT (Cathode Ray Tube) display device, or the like is used. The processing result itself may be configured to be output to an RGB (Red-Green-Blue) monitor, or to be presented with information on the screen of the mobile terminal.
環境情報から行動喚起情報を作成する情報提示装置100は、多くの場合に計算機により実現されることになる。計算機は演算プログラムを格納するメモリと、各種データを記憶するデータベースDBと演算部などにより構成されているが、図1では計算機内の演算部における処理機能と演算部での処理に使用されるデータを保持するデータベースDBを記述している。
The
このうちデータベースDBとしては、群行動モデルデータベースDB1、行動モデルデータベースDB2、情報データデータベースDB3等を備える。 Among these, the database DB includes a group behavior model database DB1, a behavior model database DB2, an information data database DB3 and the like.
また演算部内の処理機能は、環境測定部20、群行動制御部30、行動制御部5情報提示部70であり、これらの処理機能は計算機のメモリ内に格納された演算処理のためのプログラムとして把握することができる。
The processing functions in the arithmetic unit are the
図1に示す情報提示装置100内の概略の処理内容について説明する。ここでは、環境測定部20で取得した人物の行動情報などのデータ(41、42、43及び61、62)は、群行動制御部30と行動制御部50に入力される。群行動制御部30では、行動情報などのデータ41、42、43を参照して群行動モデルDB1で予め構築したモデルについてのパラメータ44を読み出し、群を制御するためのパラメータ44を選択、出力して行動制御部50に入力する。さらに行動制御部50では、行動情報などのデータ61、62を参照して行動モデルDB2から、所定の行動モデルについてのパラメータ63を取り出し、個を制御するためのパラメータ63を選択、出力して情報提示部70に入力し、情報提示部70でユーザに提示する情報データデータベースDB3のデータを表示する。
The outline of the processing contents in the
以上の処理によれば、環境計測部20で計測した情報を所望の目標値に近づけるため、群行動制御部30で、人物の集団を群としてとらえて制御するための群行動パラメータ44を決定し、その群行動パラメータ44に基づいて、特定人物の行動を行動制御部50でどのような情報を提示することで可能かという行動パラメータ63を決定し、情報提示部70で情報提示することで、所定の空間での行動制御を可能とする。
According to the above processing, in order to bring the information measured by the
本発明の実施例における以下の説明では、通路の人物の通行について、情報提示としてモニタに所定の情報を提示することで、通行量を制御し、例えば渋滞などの問題を解決することを例として考える。ここでは、通行量を制御するために、「ゆっくり歩いてください」「迂回してください」というような直接的な情報提示ではなく、間接的に、つまりユーザは管理者側の意図を感じることなく、行動を変化させ、管理者側は所定の目標値に近づけることを可能とする処理について、以下順を追って説明する。 In the following description of the embodiment of the present invention, regarding the passage of a person in an aisle, by presenting predetermined information to a monitor as information presentation, the amount of traffic is controlled, and a problem such as traffic congestion is solved as an example. Think Here, in order to control the traffic volume, it is not a direct information presentation such as "please walk slowly" or "take a detour", but indirectly, that is, the user does not feel the intention of the administrator side. The process of changing the behavior and allowing the administrator to bring the action closer to the predetermined target value will be described step by step below.
図2は環境計測部20の処理について説明した処理フロー図である。環境計測部20の最初の処理ステップS21では、カメラ10からカメラ画像の情報を取得する。図8はカメラ画像P(P1、P2、P3)の一例を3種類示している。いずれの画像Pもカメラ10により計測領域Aを監視して得られた画像であり、この計測領域Aが測定対象環境に相当しており、この領域内に存在する人物Mに対して行動喚起情報を提示する情報提示手段としての例えばモニタ90が設置されており、画像P内に把握されている。
FIG. 2 is a process flow diagram explaining the process of the
なお図8において、画像P1ではモニタ90は非表示であり、通行中の人物Mはモニタ90からの何らの情報も得ておらず、従ってモニタ90により何らかの行動を触発される状態にはない。画像P2はモニタ90を表示した直後の状態であり、モニタ90の近傍には立ち止まってモニタ表示内容に関心を示す人物M1が現れ始めた状態を示している。画像P3はさらにその後の状態を示しており、モニタ90の回りには人だかりaが形成されている。人だかりaの中には、最初に表示内容に関心を示した人物M1ばかりでなく、人物M1がモニタ90を見ていることに触発されて何を見ているのかという興味で集まってくる、群集心理に基づいて行動する人物M2も存在し始める。こういった光景は、お祭りの売店でさくら(M1)が関心を示すふりをすると、何があるのか集まってくる人(M2)が増えてくるといった場面で経験されるものである。
In FIG. 8, the
図2の環境計測部20における次の処理ステップS22では、取得した映像を元に、図8の人物Mの検出や人物の追跡処理を実行する。人物の検出や追跡については、画像識別による人物検出手法や、時系列の画像における人物の位置の変位から人物の移動を推定し追跡する手法など、様々に公開されている公知例によって実現するものとして、本実施例では説明を省略する。処理ステップS22の処理により画像内の人物についての行動が記憶、監視される。
In the next processing step S22 in the
処理ステップS22の処理結果を参照し、次には処理ステップS23側の処理と、処理ステップS26側の処理を双方実施する。まず処理ステップS26側の処理について説明する。処理ステップS26側の処理は、画像内の全員Mを対象として、個々の人物Mの移動する速度41、流量(総人数)42、速度や流量についての分散値43などを処理ステップS26、処理ステップS27、処理ステップS28において求め、これを処理ステップS29において群行動制御部30に対する群行動情報(41、42、43)として出力する。
With reference to the processing result of the processing step S22, next, the processing on the processing step S23 side and the processing on the processing step S26 side are both performed. First, the processing on the processing step S26 side will be described. In the processing on the processing step S26 side, the moving
処理ステップS23側の処理では、図8の人だかりaを形成する人物M1、M2についての情報を把握する。これらは表示内容に関心を示す人物M1、M2の滞在時間61であり、関心を示す人物M1、M2の人数の計測値62であり、これを処理ステップS23、処理ステップS24において求め、これを処理ステップS25において行動制御部50に対する行動情報(61、62)として出力する。
In the processing on the processing step S23 side, the information about the persons M1 and M2 forming the crowd a of FIG. 8 is grasped. These are the
続いて、図3を用いて、群行動制御部30の処理フローについて説明する。図3の最初の処理ステップS31では、予め定めたシステム目標値32に対して、環境計測部20より取得した観測値である群行動情報(41、42、43)との差分値を抽出する。システム目標値32は、上記の事例では、群行動情報(41、42、43)についての目標値であり、速度41、流量(総人数)42、分散値43についての目標とすべき値が予め設定されている。
Subsequently, a processing flow of the group
次の処理ステップS32では、群行動情報(41、42、43)の差分値46に基づいて群行動モデルDB1から行動制御パラメータ44を選択する。処理ステップS33では、処理ステップS32で取得した行動制御パラメータ44を行動制御部50に出力する。
In the next process step S32, the
図4は、群行動モデルデータベースDB1のデータ構造例をしめしている。群行動モデルデータベースDB1はマトリクス状にデータベースを形成している。この横軸項目は、群行動情報である速度41、流量(総人数)42、分散値43、及び行動制御パラメータ44であり、このデータベースの横軸項目の速度41、流量(総人数)42、分散値43は前述の差分値である。
FIG. 4 shows an example of the data structure of the group behavior model database DB1. The group behavior model database DB1 forms a database in a matrix. The horizontal axis items are
図4のデータベースの構成例によれば、処理ステップS32で決定された群行動情報(41、42、43)の差分値46が46aであるとき、46aの内容(速度41が5、流量(総人数)42が20、分散値43が5)に合致する行動制御パラメータ44として(61a1、62a2)が抽出される。同様に群行動情報(41、42、43)の差分値46が46bであるとき、46bの内容(速度41が10、流量(総人数)42が20、分散値43が5)に合致する行動制御パラメータ44として(61a2、62a2)が抽出される。このように群行動モデルデータベースDB1では、それぞれの差分値に対して、事前に決定したテーブルに基づいて行動制御パラメータ44が構成されている。この行動制御パラメータ44に基づいて、次に説明する、個人の行動の制御を実行することとなる。
According to the configuration example of the database in FIG. 4, when the
ここで、行動制御パラメータ44として抽出された情報(61a2、62a2)は、環境計測部20の処理ステップS23、S24で求めた特定の人物M1、M2についての滞在時間61と人数62の目標値とすべき値を意味している。
Here, the information (61a2, 62a2) extracted as the
以上説明した群行動制御部30における処理内容を極く平易に述べると、計測環境内に例えば100人が存在することを希望している状態で現在の滞在数が70人であるとしたとき、70人の内20人をモニタの周囲に集めたいという情報を得たものということができる。
The processing content of the group
図5は行動制御部50の処理フローを示す。行動制御部50の最初の処理である処理ステップS51では、環境計測部20の処理ステップS23、S24で求めた特定の人物M1、M2についての滞在時間61と人数62の観測値と、行動制御パラメータ52に設定されている特定の人物M1、M2についての滞在時間62と人数61の目標値(61a、62a)との差分64を求める。なお、行動制御パラメータ52には、群行動制御部30で求めた行動制御パラメータ44として、滞在時間61と人数62の目標値(61a、62a)が設定されている。
FIG. 5 shows a processing flow of the
次の処理ステップS52では、その差分値64に基づいて、事前に取得した行動モデルデータベースDB2から情報提示パラメータ63を選択する。処理ステップS53では、情報提示パラメータ63を情報提示部に出力する。この処理は、次に情報提示するための情報提示パラメータを選択するもので、情報提示部70ではこの結果をもとに、空間上で設置された情報提示端末で情報を提示する。
In the next processing step S52, the
図6は、行動モデルデータベースDB2の構造例をしめす図である。図6を用いて、行動モデルデータベースDB2の構造について簡単に説明する。行動モデルデータベースDB2はマトリクス状にデータベースを形成している。この横軸項目は、行動情報(モニタ90前に滞留させる人数61、その滞留時間62)、及び情報提示パラメータ63であり、このデータベースの横軸項目の人数61、滞留時間62は前述の差分値である。
FIG. 6 is a diagram showing a structural example of the behavior model database DB2. The structure of the behavior model database DB2 will be briefly described with reference to FIG. The behavior model database DB2 forms a database in a matrix. This horizontal axis item is the action information (the number of
図6のデータベースの構成例によれば、処理ステップS51で決定された行動情報(61、62)の差分値64が64aであるとき、64aの内容(人数61が5、滞在時間62が10、分散値43が5)に合致する情報提示パラメータ63として(a1、a2、a3)が抽出される。同様に行動情報(61、62)の差分値64が64bであるとき、64bの内容(人数61が2、滞在時間62が100)に合致する情報提示パラメータ63として(b1、b2、b3)が抽出される。このように行動モデルデータベースDB2では、それぞれの差分値に対して、事前に決定したテーブルに基づいて情報提示パラメータ63が構成されている。この情報提示パラメータ63に基づいて、次に説明する、情報提示のためのコンテンツが選ばれることになる。
According to the configuration example of the database in FIG. 6, when the
具体的に差分値64aにならって説明すると、モニタ前に滞留をさせたい人数は5人であり、一人当たりの滞留時間を10秒とする。これを実現するための情報提示用のパラメータは63にあるように(a1、a2、a3)などと、一意に決めることができる。一方で差分値64cのように10名について滞留時間を1秒とするというように、人数を多く短時間惹きつけたいような場合のパラメータとしては(c1、c2、c3)などのような、情報提示のためのコンテンツが選ばれることになる。
More specifically, the
図7は、図1に示す情報データベースDB3内のデータ例を示す図である。図7を用いて情報提示部70での情報提示方法について説明する。図7の情報データベースDB3の横軸項目は、図5の処理ステップS52で行動モデルデータベースDB2を参照して定めた情報提示パラメータ63と情報提示コンテンツ72である。また情報提示パラメータ63である(a1、a2、a3)、(b1、b2、b3)、(c1、c2、c3)について、先頭項目a1、b1、c1はコンテンツ内容を表し、第2項目a2、b2、c2は表示時間を表し、第3項目a3、b3、c3は表示順番を例えば表している。例えば、モニタ前に滞留をさせたい人数が5人であり、一人当たりの滞留時間を10秒としたいときの情報提示パラメータ63の内容が(a1、a2、a3)である時には、コンテンツA1、A2、A3がこの順番で3秒間隔で、それぞれ表示される。また10名について滞留時間を1秒とするというように、人数を多く短時間惹きつけたいような場合のコンテンツ(c1、c2、c3)であるときには、コンテンツC1、C2、C3がこの順番で0.5秒間隔で、それぞれ表示される。
FIG. 7 is a diagram showing an example of data in the information database DB3 shown in FIG. An information presentation method in the
このように、情報提示部70では、前述の行動制御部50から取得した情報提示パラメータ63から、情報提示コンテンツ72を決める。情報提示コンテンツは情報提示パラメータ63aに対して、コンテンツA1〜A3のような情報コンテンツ72aで構成される。例えば、長く引き留めたい場合は、ストーリーとして長いコンテンツであったり、長時間視聴しても飽きの来ないコンテンツである。逆に短時間でも多人数を滞留させたい場合は、短時間でインパクトのある映像というようになる。
In this way, the
次に図8を用いて、本発明による現象の変化を、事例を基に説明する。図8の画像P1、P2、P3はある空間での人物Mの移動を示しており、画像P1では50人/分の流量で人物Mが移動しており、モニタ90に情報は未提示の状態である。次にこの状態を環境計測部20で計測し、通行速度を10人/分まで低下させる例とする。その場合の目標値に対して、群行動制御部30等で処理した結果、情報提示コンテンツをONとしている。画像P2ではその直後に、2名(M1)がモニタ90前に滞留している様子を示している。次に、一定時間を経過したものを画像P3に示している。ここでは、当初より滞留していた人物M1に誘引されて周囲に人物M2が滞留している様子を示しており、点線丸で囲う部分でその現象がみられる。その結果周囲の人物も移動の遅延が起こり、結果として10人/分となり、全体の目標値に近づいていることを示している。
Next, the change of the phenomenon according to the present invention will be described based on an example with reference to FIG. Images P1, P2, and P3 in FIG. 8 show movement of the person M in a certain space. In the image P1, the person M is moving at a flow rate of 50 persons / minute, and information is not presented on the
次にこれらの制御の結果として現れた通行量の変化について図9のグラフを用いて示す。ここでは、縦軸に通行量(人/分)、横軸に時間tを表す。点線で示す折れ線の結果91は行動制御部50のみを活用したものである。これに対し、本実施例の群行動制御部30を具備する行動制御のための情報提示装置1を構成した場合での結果については結果92で示す。なお縦軸の通行量(人/分)は、興味をもって足を止める人についての値であり、従って値が大きいということは関心を持ってくれる人が少ない状態を意味している。ここでは関心をもって足を止めてくれる人の目標人数を10人としている。
Next, the change in traffic volume that appears as a result of these controls will be shown using the graph in FIG. Here, the vertical axis represents traffic (persons / minute), and the horizontal axis represents time t. The
なお図9において、時刻taは、モニタ90に興味あるコンテンツを表示開始した時刻であり、結果91、結果92ともに通行量が減り関心を示す人が増えてきた傾向を示す。但し、ある程度の時間が経過すると、それ以上の関心の上昇は発生せず、行き詰ってしまう傾向を示す。そこで本発明では群行動制御部30を具備する行動制御のための情報提示装置1を時刻tbから機能させてみたところ、再度関心を示す人が増え時刻tcでは目標人数の10人に到達した。このように、結果91では、個人の行動制御のみのため目標値に対して達成せず、一定値で収束していることが分かる。それに対して結果92では、結果91に対して2段階で人数が変化していることが分かる。これは、個人の行動の結果(時刻tb)にてモニタ付近に人物が滞留したのに、さらに時刻tc周囲の群(人物)が行動制御されて滞留している様子を示す。このように、本発明による群行動制御のための行動制御を実施した場合には時間遅れの反応を示す。
Note that in FIG. 9, time ta is the time when the content of interest is started to be displayed on the
一方で、情報提示コンテンツも提示から時間がたつにつれて、情報の新鮮さなどが薄れることや、通行する人物の属性や時間帯などによって刻一刻と変化する場合がある。この問題を解決するために、動的に群制御モデルデータベースDB1や群制御モデルデータベースDB2のパラメータを変更させる方法について説明する。 On the other hand, the information presentation content may change from moment to moment depending on the time elapsed from the time of presentation, such that the freshness of the information may fade, the attributes of the passing person, the time zone, and the like. In order to solve this problem, a method of dynamically changing the parameters of the group control model database DB1 and the group control model database DB2 will be described.
これは、いわゆる機械学習の一つである強化学習と言われるもので、ある状態に対して状態観測値から、次に取るべき行動(制御)をどうするかを決定する問題を解決する。その一例としてQ学習(Q−Learning)があり、参考文献として、Watkins、 C.J.C.H. (1989). Learning from Delayed Rewards. PhD thesis、 Cambridge University、 Cambridge、 England.を上げる。これは、あるエージェントの状態をStとした際に、それに応じて行動aを出力し、次の時間であるSt+1の変位に応じて報酬rを能える。この報酬を最大化する問題を解くことに等しい。 This is what is called reinforcement learning, which is one of so-called machine learning, and solves the problem of deciding what action to take next (control) from a state observation value for a certain state. One example is Q-learning, and as a reference, Watkins, C., et al. J. C. H. (1989). Learning from Delayed Rewards. PhD thesis, Cambridge University, Cambridge, England. Raise. When the state of a certain agent is set to St, the action a is output accordingly, and the reward r can be enhanced according to the displacement of St + 1 which is the next time. Equivalent to solving the problem of maximizing this reward.
図10を用いて、本発明における動的なモデル更新について説明する。図10の例ではシステム目標値が32として与えられた場合に、ある時刻の計測結果(状態)は環境計測部20から出力され、その差分を群行動制御部30で求める。この差分に応じて、群行動モデル更新101を行う。つまり前時刻に与えた選択の効果を加味してモデルを更新する手続きとなる。群行動制御部30で出力した差分値に応じて、行動制御部DB1で情報提示することは前述と同じである。これに対して、環境計測部20との差分値から、行動モデル更新102にて行動モデルDB2を更新する。
Dynamic model updating in the present invention will be described with reference to FIG. In the example of FIG. 10, when the system target value is given as 32, the measurement result (state) at a certain time is output from the
上位の群行動制御に対して、下位の行動制御を接続し、それぞれの観測値との差分によって行動モデルデータベースDB2の内容を選択し、その結果から情報提示部70によって、実空間へのフィードバックを実行する。その結果を環境計測部20により計測し、選択した行動モデルの効果を最大化するようにモデルを動的に変更していく。
The lower group behavior control is connected to the upper group group behavior control, and the content of the behavior model database DB2 is selected according to the difference between each observation value and the result is fed back to the real space by the
この処理によって、一時的に効果があり途中で効果が低くなるようなコンテンツや、課題として難しい空間の行動制御に対して、繰り返し実行することによって、現場の状況に応じた行動制御を実行することを可能とする。 By this process, it is possible to perform action control according to the situation of the site by repeatedly executing content that is temporarily effective and less effective midway, or action control in a difficult space as a task. Is possible.
10:カメラ、20:環境計測部、30:群行動制御部、DB1:群行動モデルデータベース、50:行動制御部:DB2:行動モデルデータベース、70:情報提示部、90:モニタ 10: camera, 20: environment measurement unit, 30: group action control unit, DB1: group action model database, 50: action control unit: DB2: action model database, 70: information presentation unit, 90: monitor
Claims (8)
前記群行動情報は、前記計測領域内に存在する人物の行動として人物の移動速度及び人物の流量の情報を含むことを特徴とする行動制御のための情報提示装置。An information presentation device for behavior control according to claim 1,
The information presenting apparatus for action control, wherein the group action information includes information on a person's moving speed and a person's flow rate as actions of a person existing in the measurement area.
前記行動情報は、前記計測領域内に存在する特定の人物の行動として特定の人物の滞在時間及び人数の情報を含むことを特徴とする行動制御のための情報提示装置。An information presenting apparatus for behavior control according to claim 1 or 2,
The information presenting apparatus for behavior control, wherein the behavior information includes information on a staying time and the number of persons of a specific person as the behavior of a specific person existing in the measurement area.
前記特定の人物とは、前記モニタ近傍に立ち止まる人物であることを特徴とする行動制御のための情報提示装置。An information presentation device for behavior control according to any one of claims 1 to 3,
The information presenting apparatus for behavior control, wherein the specific person is a person who stops near the monitor.
前記群行動情報と前記行動制御パラメータを対応付けて記憶する群行動モデルデータベースを備え、前記群行動制御部は、前記計測領域内に存在する人物全員についてのシステム目標値と前記群行動情報との差分に応じて前記群行動モデルデータベースを参照して特定の人物の行動を制御するための行動制御パラメータを得るとともに、
前記計測領域内に存在する人物全員についてのシステム目標値と前記群行動情報との差分に応じて前記群行動モデルデータベースの記憶内容を更新することを特徴とする行動制御のための情報提示装置。An information presentation device for behavior control according to any one of claims 1 to 4,
A group behavior model database that stores the group behavior information and the behavior control parameters in association with each other is provided, and the group behavior control unit is a system target value for all persons existing in the measurement area and the group behavior information. While obtaining an action control parameter for controlling the action of a specific person by referring to the group action model database according to the difference,
An information presentation device for action control, characterized in that the stored contents of the group action model database are updated according to the difference between the system target value and the group action information for all persons existing in the measurement area.
前記行動情報と前記情報提示パラメータを対応付けて記憶する行動モデルデータベースを備え、前記行動制御部は、前記行動制御パラメータと前記行動情報との差分に応じて前記行動モデルデータベースを参照して前記情報提示パラメータを得るとともに、
前記計測領域内に存在する人物全員についてのシステム目標値と前記群行動情報との差分に応じて前記行動モデルデータベースの記憶内容を更新することを特徴とする行動制御のための情報提示装置。An information presentation device for behavior control according to any one of claims 1 to 5,
An action model database that stores the action information and the information presentation parameter in association with each other is provided, and the action control unit refers to the action model database in accordance with a difference between the action control parameter and the action information to obtain the information. With the presentation parameters,
An information presentation device for action control, characterized in that the stored content of the action model database is updated according to the difference between the system target value and the group action information for all the persons existing in the measurement area.
前記計測領域内に配置され、前記情報提示部により表示内容が制御されるモニタと、前記計測領域内を視野とする画像情報を前記環境計測部に与えるカメラとを含むことを特徴とする行動制御のための情報提示システム。An information presentation system including the information presentation device for behavior control according to any one of claims 1 to 6,
Action control characterized by including a monitor arranged in the measurement area and whose display content is controlled by the information presenting section, and a camera for giving the environment measuring section image information having a visual field within the measurement area. Information presentation system for.
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2017/021562 WO2018229810A1 (en) | 2017-06-12 | 2017-06-12 | Information presentation device, information presentation system, and information presentation method for action control |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2018229810A1 true JPWO2018229810A1 (en) | 2020-05-21 |
JP6833032B2 JP6833032B2 (en) | 2021-02-24 |
Family
ID=64659014
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019524548A Active JP6833032B2 (en) | 2017-06-12 | 2017-06-12 | Information presentation device, information presentation system, and information presentation method for behavior control |
Country Status (3)
Country | Link |
---|---|
JP (1) | JP6833032B2 (en) |
CN (1) | CN110622183B (en) |
WO (1) | WO2018229810A1 (en) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005309537A (en) * | 2004-04-16 | 2005-11-04 | Fuji Xerox Co Ltd | Information providing device |
JP2013033363A (en) * | 2011-08-01 | 2013-02-14 | Nippon Telegr & Teleph Corp <Ntt> | Provided information selecting device, method, and program |
JP2016042277A (en) * | 2014-08-18 | 2016-03-31 | 日本電信電話株式会社 | Guidance system and guidance method for guidance system |
JP2016076259A (en) * | 2015-12-21 | 2016-05-12 | キヤノン株式会社 | Information processing apparatus, information processing method, and program |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8805418B2 (en) * | 2011-12-23 | 2014-08-12 | United Video Properties, Inc. | Methods and systems for performing actions based on location-based rules |
US20140344702A1 (en) * | 2013-05-20 | 2014-11-20 | Microsoft Corporation | Adaptive timing support for presentations |
-
2017
- 2017-06-12 JP JP2019524548A patent/JP6833032B2/en active Active
- 2017-06-12 CN CN201780090786.2A patent/CN110622183B/en active Active
- 2017-06-12 WO PCT/JP2017/021562 patent/WO2018229810A1/en active Application Filing
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005309537A (en) * | 2004-04-16 | 2005-11-04 | Fuji Xerox Co Ltd | Information providing device |
JP2013033363A (en) * | 2011-08-01 | 2013-02-14 | Nippon Telegr & Teleph Corp <Ntt> | Provided information selecting device, method, and program |
JP2016042277A (en) * | 2014-08-18 | 2016-03-31 | 日本電信電話株式会社 | Guidance system and guidance method for guidance system |
JP2016076259A (en) * | 2015-12-21 | 2016-05-12 | キヤノン株式会社 | Information processing apparatus, information processing method, and program |
Also Published As
Publication number | Publication date |
---|---|
WO2018229810A1 (en) | 2018-12-20 |
CN110622183B (en) | 2023-01-03 |
CN110622183A (en) | 2019-12-27 |
JP6833032B2 (en) | 2021-02-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11199899B2 (en) | System and method for dynamic content delivery based on gaze analytics | |
US9696799B2 (en) | Information display device that displays information on a screen | |
US10614586B2 (en) | Quantifying user engagement using pupil size measurements | |
CN109690621B (en) | Congestion detection device, congestion detection system, and congestion detection method | |
US20200356784A1 (en) | Image processing apparatus, monitoring system, image processing method, and program | |
JP6111932B2 (en) | Action support device, action support method, program, and storage medium | |
WO2018047726A1 (en) | Information processing device and information processing system | |
US11406788B2 (en) | Information processing apparatus and method | |
Bucker et al. | Distractors that signal reward attract the eyes | |
US20130121591A1 (en) | Systems and methods using observed emotional data | |
DE112017003382T5 (en) | DEVICE AND METHOD FOR MONITORING A DEVICE UTILIZATION | |
JP2017526078A5 (en) | ||
DE202016007875U1 (en) | Systems for the automatic monitoring of real-time activities in a location to determine waiting times using portable devices | |
CN107850443A (en) | Information processor, information processing method and program | |
JP2016513918A5 (en) | ||
Martens | Change detection in traffic: where do we look and what do we perceive? | |
JP5271612B2 (en) | Information presenting system, information presenting method, information presenting program and storage medium thereof | |
Miller et al. | The impact of facial emotional expressions and sex on interpersonal distancing as evaluated in a computerized stop-distance task. | |
Töniges et al. | An emerging decision authority: Adaptive cyber-physical system design for fair human-machine interaction and decision processes | |
Zhou et al. | Cognition-driven navigation assistive system for emergency indoor wayfinding (CogDNA): proof of concept and evidence | |
JP6833032B2 (en) | Information presentation device, information presentation system, and information presentation method for behavior control | |
JP2000339074A (en) | Preference detection device, its method and medium | |
Quintard et al. | Getting closer: synchronous interpersonal multisensory stimulation increases closeness and attraction toward an opposite-sex other in female participants | |
US20180039734A1 (en) | Method and system for providing medical advice about treatment of a condition of a user | |
JP2019017946A (en) | Feeling estimation system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191010 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20201215 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210108 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210126 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210202 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6833032 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |