JP6617013B2 - Robot advertising system, robot, robot advertising method and program - Google Patents

Robot advertising system, robot, robot advertising method and program Download PDF

Info

Publication number
JP6617013B2
JP6617013B2 JP2015230319A JP2015230319A JP6617013B2 JP 6617013 B2 JP6617013 B2 JP 6617013B2 JP 2015230319 A JP2015230319 A JP 2015230319A JP 2015230319 A JP2015230319 A JP 2015230319A JP 6617013 B2 JP6617013 B2 JP 6617013B2
Authority
JP
Japan
Prior art keywords
robot
advertisement
human
display importance
recognized
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2015230319A
Other languages
Japanese (ja)
Other versions
JP2017097207A (en
Inventor
義博 中橋
Original Assignee
ロボットスタート株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ロボットスタート株式会社 filed Critical ロボットスタート株式会社
Priority to JP2015230319A priority Critical patent/JP6617013B2/en
Publication of JP2017097207A publication Critical patent/JP2017097207A/en
Application granted granted Critical
Publication of JP6617013B2 publication Critical patent/JP6617013B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、ロボット広告システム、ロボット、ロボット広告方法及びプログラムに関する。   The present invention relates to a robot advertisement system, a robot, a robot advertisement method, and a program.

従来の広告は、ポスターや看板、壁面に描かれたものなどや、表示と通信にデジタル技術を活用して平面ディスプレイやプロジェクタなどによって映像や情報を表示するデジタルサイルージ等が知られている。   Conventional advertisements are known such as posters, billboards, and those drawn on walls, and digital silages that display images and information on a flat display or projector using digital technology for display and communication.

一方、近年、走行装置や歩行装置などの移動装置により自律的に移動して各種の作業を行うロボットの研究開発が盛んに行われており、ロボットを用いた広告の技術も提案されている(例えば、特許文献1)。   On the other hand, in recent years, research and development of robots that autonomously move by a moving device such as a traveling device and a walking device to perform various operations have been actively conducted, and advertising technology using the robot has also been proposed ( For example, Patent Document 1).

特許文献1は、予め決められた領域を自律的に移動して広告を行う自律移動ロボットであって、外部に配置された情報提供サーバにアクセスするための通信手段と、広告の内容を表示または発声する広告手段と、通信手段を介して情報提供サーバに蓄えられている広告情報を読み出して広告手段に対して出力する制御手段とを備えるロボットが記載されている。更に、特許文献1には、自律移動ロボットが、周囲の画像を取得する画像取得手段と、画像取得手段で取得した画像を解析することにより人間が存在するか否かを判断する画像解析手段と、画像解析手段の判断結果に基づいて、人間がより多く存在する領域に、ロボットを移動する行動計画手段とをさらに備えることが記載されている。これにより、人間がより多く存在する領域に、ロボットが自律的に移動し、効率良く広告を行うことができる。   Patent Document 1 is an autonomous mobile robot that autonomously moves in a predetermined area and performs an advertisement, and displays communication means for accessing an information providing server arranged outside, and the contents of the advertisement. A robot is described that includes an advertising unit that utters and a control unit that reads out advertisement information stored in an information providing server via a communication unit and outputs the information to the advertising unit. Further, Patent Document 1 discloses an image acquisition unit in which an autonomous mobile robot acquires surrounding images, and an image analysis unit that determines whether a human is present by analyzing an image acquired by the image acquisition unit. Further, it is described that the system further includes an action planning unit that moves the robot in an area where more humans exist based on the determination result of the image analysis unit. As a result, the robot autonomously moves to an area where more humans are present, and the advertisement can be performed efficiently.

特開2003−50559号公報JP 2003-50559 A

しかし、広告は、その広告を見る人数が多ければ良いものではなく、その広告に適した人間に提供しなければ、広告効果は上がらない。例えば、女性向けの化粧品の広告を、多数の男性の前で行っても、あまり意味がない。   However, an advertisement is not good as long as the number of people who view the advertisement is large, and if it is not provided to a person suitable for the advertisement, the advertisement effect will not be improved. For example, it does not make much sense to advertise cosmetics for women in front of many men.

特許文献1の技術は、人間がより多く存在する領域にロボットを移動させ、広告を行うため、上述のように、人間が多数いても、その広告に適合する属性を持つ人間が少ない場合、その広告を行っても、高い広告効果が得られない場合があった。   Since the technology of Patent Document 1 moves a robot to an area where more people are present and performs an advertisement, as described above, even if there are a large number of people, if there are few people who have attributes suitable for the advertisement, Even if an advertisement is performed, a high advertising effect may not be obtained.

そこで、本発明は上記課題に鑑みて発明されたものであって、その目的は高い広告効果が得られるロボット広告システム、ロボット、ロボット広告方法及びプログラムを提供することにある。   Accordingly, the present invention has been invented in view of the above problems, and an object thereof is to provide a robot advertising system, a robot, a robot advertising method, and a program that can obtain a high advertising effect.

本発明は、移動して広告を行うロボット広告システムであって、ロボットの周囲の画像を取得する画像取得手段と、前記画像取得手段で取得したロボットの周囲の周囲画像を解析し、前記ロボットの存在位置を中心として存在する人間を認識し、前記認識した人間に対する広告表示重要度を算出するためのパラメータを取得するパラメータ取得手段と、前記認識した人間毎のパラメータに対して重みづけを行い、前記認識した人間毎の広告表示重要度を算出する広告表示重要度算出手段と、前記周囲画像の所定範囲毎にその範囲内に存在すると認識された人間の表示重要度を加算し、その合計数に基づいて広告出力適切範囲を決定する広告出力適切範囲決定手段と、前記広告出力適切範囲の方向に向くように、前記ロボットを移動する移動手段と、前記移動手段による移動後に、広告を出力する広告出力手段とを有するロボット広告システムである。   The present invention relates to a robot advertisement system for moving and advertising, an image acquisition means for acquiring an image around the robot, and an analysis of the surrounding image of the robot acquired by the image acquisition means. Recognizing a person existing around the existing position, parameter acquisition means for acquiring a parameter for calculating the advertisement display importance for the recognized person, and weighting the parameter for each recognized person, The advertisement display importance calculation means for calculating the advertisement display importance for each recognized person, and the display importance of humans recognized to exist within the predetermined range of the surrounding image are added, and the total number Ad output appropriate range determining means for determining the appropriate ad output range based on the above, and a moving hand for moving the robot so as to face the direction of the appropriate ad output range If, after the movement by the moving means is a robotic advertising system and an advertisement output means for outputting an advertisement.

本発明は、ロボット広告システムであって、ロボットと、前記ロボットと通信可能な広告サーバとを有し、前記ロボットは、ロボットの周囲の画像を取得する画像取得手段と、前記画像取得手段が取得した画像を、前記広告サーバに送信する送信手段と、前記広告サーバに指示された広告出力適切範囲の方向に向くように、前記ロボットを移動する移動手段と、前記移動手段による移動後に、広告を出力する広告出力手段とを有し、前記広告サーバは、前記画像取得手段で取得したロボットの周囲の周囲画像を解析し、前記ロボットの存在位置を中心として存在する人間を認識し、前記認識した人間に対する広告表示重要度を算出するためのパラメータを取得するパラメータ取得手段と、前記認識した人間毎のパラメータに対して重みづけを行い、前記認識した人間毎の広告表示重要度を算出する広告表示重要度算出手段と、前記周囲画像の所定範囲毎にその範囲内に存在すると認識された人間の表示重要度を加算し、その合計数に基づいて広告出力適切範囲を決定し、前記広告出力適切範囲を前記ロボットに指示する広告出力適切範囲決定手段とを有するロボット広告システムである。   The present invention is a robot advertisement system, comprising a robot and an advertisement server capable of communicating with the robot, wherein the robot acquires an image acquisition unit that acquires an image around the robot, and the image acquisition unit acquires A transmission means for transmitting the image to the advertisement server, a movement means for moving the robot so as to face the direction of an appropriate advertisement output range instructed by the advertisement server, and an advertisement after the movement by the movement means. An advertisement output means for outputting, and the advertisement server analyzes a surrounding image of the robot acquired by the image acquisition means, recognizes a person existing around the position of the robot, and recognizes the recognized person. Parameter acquisition means for acquiring parameters for calculating the importance of advertising display for humans, and weighting for the recognized parameters for each human The advertisement display importance calculating means for calculating the advertisement display importance for each recognized human being, and adding the display importance of the human recognized to exist within the predetermined range of the surrounding image, The robot advertisement system includes an advertisement output appropriate range determining unit that determines an advertisement output appropriate range based on the total number and instructs the robot to specify the advertisement output appropriate range.

本発明は、移動して広告を行うロボットであって、ロボットの周囲の画像を取得する画像取得手段と、前記画像取得手段で取得したロボットの周囲の周囲画像を解析し、前記ロボットの存在位置を中心として存在する人間を認識し、前記認識した人間に対する広告表示重要度を算出するためのパラメータを取得するパラメータ取得手段と、前記認識した人間毎のパラメータに対して重みづけを行い、前記認識した人間毎の広告表示重要度を算出する広告表示重要度算出手段と、前記周囲画像の所定範囲毎にその範囲内に存在すると認識された人間の表示重要度を加算し、その合計数に基づいて広告出力適切範囲を決定する広告出力適切範囲決定手段と、前記広告出力適切範囲の方向に向くように、前記ロボットを移動する移動手段と、前記移動手段による移動後に、広告を出力する広告出力手段とを有するロボットである。   The present invention is a robot that moves and advertises, an image acquisition unit that acquires an image around the robot, an analysis of the surrounding image of the robot acquired by the image acquisition unit, and the presence position of the robot A parameter acquisition means for acquiring a parameter for calculating an advertisement display importance for the recognized human, weighting the recognized parameter for each human, and performing the recognition Based on the total number of the advertisement display importance calculation means for calculating the advertisement display importance for each person, and the human display importance recognized to exist within the predetermined range of the surrounding images. An advertisement output appropriate range determining means for determining the advertisement output appropriate range, a moving means for moving the robot so as to face the direction of the advertisement output appropriate range, and the transfer After movement by means, a robot having an advertisement output means for outputting an advertisement.

本発明は、移動して広告を行うロボットの広告方法であって、ロボットの周囲の画像を取得し、前記取得したロボットの周囲の周囲画像を解析し、前記ロボットの存在位置を中心として存在する人間を認識し、前記認識した人間に対する広告表示重要度を算出するためのパラメータを取得し、前記認識した人間毎のパラメータに対して重みづけを行い、前記認識した人間毎の広告表示重要度を算出し、前記周囲画像の所定範囲毎にその範囲内に存在すると認識された人間の表示重要度を加算し、その合計数に基づいて広告出力適切範囲を決定し、前記広告出力適切範囲の方向に向くように、前記ロボットを移動し、前記移動手段による移動後に、広告を出力するロボットの広告方法である。   The present invention is an advertising method for a robot that moves and advertises, acquires an image around the robot, analyzes the surrounding image around the acquired robot, and exists around the position where the robot exists. Recognizing humans, obtaining parameters for calculating the advertisement display importance for the recognized humans, weighting the parameters for each recognized human, and determining the advertisement display importance for each recognized human Calculating and adding the display importance of human beings recognized to be within the range for each predetermined range of the surrounding image, determining the appropriate range of advertisement output based on the total number, and the direction of the appropriate range of advertisement output The robot advertisement method outputs an advertisement after the robot is moved so as to be suitable for, and after the movement by the moving means.

本発明は、移動して広告を行うロボットの広告を行わせるプログラムであって、ロボットの周囲の画像を取得する処理と、前記取得したロボットの周囲の周囲画像を解析し、前記ロボットの存在位置を中心として存在する人間を認識し、前記認識した人間に対する広告表示重要度を算出するためのパラメータを取得する処理と、前記認識した人間毎のパラメータに対して重みづけを行い、前記認識した人間毎の広告表示重要度を算出する処理と、前記周囲画像の所定範囲毎にその範囲内に存在すると認識された人間の表示重要度を加算し、その合計数に基づいて広告出力適切範囲を決定する処理と、前記広告出力適切範囲の中心方向に向くように、前記ロボットを移動する処理と、前記移動手段による移動後に、広告を出力する処理とを、ロボットが有する情報処理装置に実行させるプログラムである。   The present invention is a program for advertising a robot that moves and advertises, and obtains a surrounding image of the robot, analyzes the surrounding image of the acquired robot, and locates the robot And a process for obtaining parameters for calculating the advertisement display importance for the recognized person, and weighting the parameters for each recognized person, and the recognized person The process of calculating the advertisement display importance for each and the human display importance recognized to exist within the predetermined range of the surrounding image are added, and the appropriate range of advertisement output is determined based on the total number A process of moving the robot so as to face the center direction of the advertisement output appropriate range, and a process of outputting an advertisement after the movement by the moving means. Is a program to be executed by an information processing apparatus having the Tsu bets.

本発明は、高い広告効果が得られる広告をロボットにより行うことができる。   The present invention can perform an advertisement with a high advertising effect by a robot.

図1は第1の実施の形態の構成図である。FIG. 1 is a configuration diagram of the first embodiment. 図2はロボット広告システムの動作フローチャートである。FIG. 2 is an operation flowchart of the robot advertisement system. 図3は第1の実施の形態を説明するための図である。FIG. 3 is a diagram for explaining the first embodiment. 図4は第1の実施の形態を説明するための図である。FIG. 4 is a diagram for explaining the first embodiment. 図5は第1の実施の形態を説明するための図である。FIG. 5 is a diagram for explaining the first embodiment. 図6は第1の実施の形態を説明するための図である。FIG. 6 is a diagram for explaining the first embodiment. 図7は第1の実施の形態を説明するための図である。FIG. 7 is a diagram for explaining the first embodiment. 図8は第1の実施の形態を説明するための図である。FIG. 8 is a diagram for explaining the first embodiment. 図9は第1の実施の形態を説明するための図である。FIG. 9 is a diagram for explaining the first embodiment. 図10は第1の実施の形態の変形例を説明するための図である。FIG. 10 is a diagram for explaining a modification of the first embodiment. 図11は第1の実施の形態の変形例を説明するための図である。FIG. 11 is a diagram for explaining a modification of the first embodiment. 図12は第3の実施の形態の構成図である。FIG. 12 is a configuration diagram of the third embodiment. 図13は本発明を情報処理装置で構成する場合の構成例を示す図である。FIG. 13 is a diagram showing a configuration example when the present invention is configured by an information processing apparatus.

本発明の第1の実施の形態を説明する。図1は、第1の実施の形態の構成図である。   A first embodiment of the present invention will be described. FIG. 1 is a configuration diagram of the first embodiment.

第1の実施の形態は、周辺状況を取得し、広告表現を行うロボット1と、ロボット1が取得した周辺画像に基づいて周辺状況を解析し、ロボット1を制御する広告サーバ2と、ロボット1と広告サーバ2とを接続するネットワーク3とを備えるロボット広告システムである。   In the first embodiment, a robot 1 that acquires a surrounding situation and performs advertisement expression, an advertisement server 2 that analyzes the surrounding situation based on a surrounding image acquired by the robot 1 and controls the robot 1, and a robot 1 And a network 3 that connects the advertisement server 2.

ロボット1は、画像取得部11と、移動部12と、広告出力部13と、制御部14とを備える。   The robot 1 includes an image acquisition unit 11, a moving unit 12, an advertisement output unit 13, and a control unit 14.

画像取得部11は、CCD又はCMOS等のカメラであり、移動部12によりロボットが回転することにより、ロボットの周囲(360度)の画像を取得する。また、対象物(人間)のロボットからの距離を取得したり、対象物(人間)の温度等を取得したりするために、赤外線センサを有しても良い。   The image acquisition unit 11 is a camera such as a CCD or a CMOS, and acquires an image around the robot (360 degrees) when the robot is rotated by the moving unit 12. Moreover, in order to acquire the distance of the target object (human) from the robot, or to acquire the temperature of the target object (human), an infrared sensor may be provided.

移動部12は、モータ等の駆動装置により、ロボット1を移動させるものである。移動には、ロボット1を所望の角度に回転させたり、所望の方向にロボット1を移動させたりする場合も含む。   The moving unit 12 moves the robot 1 by a driving device such as a motor. The movement includes a case where the robot 1 is rotated to a desired angle or the robot 1 is moved in a desired direction.

広告出力部13は、スピーカ、ディスプレイ等により、音声、映像を出力し、広告を行うものである。   The advertisement output unit 13 performs advertisement by outputting sound and video through a speaker, a display, or the like.

制御部14は、広告サーバ2からの指示等により、画像取得部11、移動部12及び広告出力部13を制御する。また、画像取得部11で取得した画像の送信、広告サーバ2からの広告データや指示等の受信を行う。   The control unit 14 controls the image acquisition unit 11, the movement unit 12, and the advertisement output unit 13 according to an instruction from the advertisement server 2. Further, the image acquisition unit 11 transmits an image acquired, and receives advertisement data and instructions from the advertisement server 2.

広告サーバ2は、パラメータ取得部21と、広告表示重要度算出部22と、広告出力範囲決定部23と、広告データベース24とを備える。   The advertisement server 2 includes a parameter acquisition unit 21, an advertisement display importance calculation unit 22, an advertisement output range determination unit 23, and an advertisement database 24.

パラメータ取得部21は、ロボット1の画像取得部11で取得したロボット1の周囲の周囲画像を解析し、ロボット1の存在位置を中心に存在する人間を画像認識し、認識した人間に対する広告表示重要度を算出するためのパラメータ(属性)を取得する。ここで、広告表示重要度とは、ある広告に対してロボット1の周辺に存在する人間がその広告にどの程度適合するかを数値化したものである。そして、広告表示重要度を算出するためのパラメータとして、例えば、人間とロボット1との間の距離、人間の年齢、性別、人間のロボット1に対する向き(ロボットに対して正面を向いているか、横を向いているか、背面か等)、人間の感情を表現する生体データ(例えば、画像認識できる顔の表現や、熱の程度等)があるが、これに限られない。これらの取得するパラメータの種別は、広告毎にその種類が規定されており、広告データベース24に格納されている。パラメータ取得部21は、ロボット1の画像取得部11で取得したロボット1の周囲の周囲画像を解析し、まず、ロボット1の周囲存在する人間を画像識別する。そして、識別した人間に対して適用される、広告のパラメータを取得する。例えば、パラメータが識別した人間とロボット1との間の距離、その人間の年齢、性別、ロボット1に対する向き、人間の顔の表情である場合、距離=2.0m、年齢=30代、性別=男性、ロボット1に対する向き=正面、人間の顔の表情=笑顔のように、画像認識した人間のパラメータを取得する。   The parameter acquisition unit 21 analyzes the surrounding image of the surroundings of the robot 1 acquired by the image acquisition unit 11 of the robot 1, recognizes an image of a person existing around the position where the robot 1 exists, and displays advertisements to the recognized person A parameter (attribute) for calculating the degree is acquired. Here, the advertisement display importance level is a numerical value representing how much a person existing around the robot 1 matches a certain advertisement. The parameters for calculating the advertisement display importance include, for example, the distance between the human and the robot 1, the age and sex of the human, the orientation of the human robot 1 (facing to the robot, Or biometric data representing human emotions (for example, facial expressions that can be recognized as images, the degree of heat, etc.), but is not limited thereto. The types of parameters to be acquired are defined for each advertisement and are stored in the advertisement database 24. The parameter acquisition unit 21 analyzes the surrounding image of the robot 1 acquired by the image acquisition unit 11 of the robot 1, and first identifies the person existing around the robot 1. And the parameter of an advertisement applied with respect to the identified person is acquired. For example, when the parameter is the distance between the identified human and the robot 1, the age and sex of the human, the orientation with respect to the robot 1, and the facial expression of the human, distance = 2.0m, age = 30s, gender = The parameters of the image-recognized human are acquired such that the orientation with respect to the male robot 1 = front, the human facial expression = smile.

広告表示重要度算出部22は、パラメータ取得部21が取得した人間毎のパラメータに対して重みづけを行い、認識した人間毎の広告表示重要度を算出する。パラメータに対する重みづけの度合いは、広告毎に異なる。例えば、ロボット1が出力する広告が、30代の女性をターゲットにした広告である場合、認識した人間のうち30代の女性の広告表示重要度が最も高くなるように、パラメータに重みづけが行われ、その女性の広告表示重要度が算出される。   The advertisement display importance calculation unit 22 weights the parameters for each person acquired by the parameter acquisition unit 21, and calculates the advertisement display importance for each recognized person. The degree of weighting with respect to the parameter differs for each advertisement. For example, when the advertisement output by the robot 1 is an advertisement targeting a woman in their 30s, the parameters are weighted so that the advertisement display importance of the woman in their 30s among the recognized humans becomes the highest. Then, the advertisement display importance of the woman is calculated.

広告出力範囲決定部23は、画像取得部11で取得された周囲画像を所定の範囲(以下、視野角と記載する)に区切り、その視野角の範囲内の人間の広告表示重要度の合計値を算出する。そして、最も広告表示重要度の合計値が大きい視野角の範囲を、広告出力適切範囲として決定し、その広告出力適切範囲の中心方向の位置を示す情報を、ロボット1の移動部12に指示する。   The advertisement output range determination unit 23 divides the surrounding image acquired by the image acquisition unit 11 into a predetermined range (hereinafter referred to as a viewing angle), and the total value of human advertisement display importance within the range of the viewing angle Is calculated. Then, the range of the viewing angle with the largest total value of the advertisement display importance is determined as the appropriate advertisement output range, and information indicating the position in the center direction of the appropriate advertisement output range is instructed to the moving unit 12 of the robot 1. .

次に、上述した構成のロボット広告システムの動作を、具体例を用いて説明する。図2は、ロボット広告システムの動作フローチャートである。   Next, the operation of the robot advertisement system configured as described above will be described using a specific example. FIG. 2 is an operation flowchart of the robot advertisement system.

尚、以下の説明において、広告サーバ2の広告データベース24には、図3に示されるような広告と、各広告に対応したパラメータに対する重みづけが記憶されているものとする。尚、図3に示される広告データベース24は一例であり、広告毎にパラメータの種類や重みづけが異なっていても良い。また、ロボット1の周囲には、図4に示されるように、人間が存在するものとする。   In the following description, it is assumed that the advertisement database 24 of the advertisement server 2 stores advertisements as shown in FIG. 3 and weights for parameters corresponding to the advertisements. Note that the advertisement database 24 shown in FIG. 3 is an example, and the types and weights of parameters may be different for each advertisement. Further, it is assumed that a human is present around the robot 1 as shown in FIG.

まず、ロボット1は、周囲の画像の取得のため、移動部12により360度回転する。ロボット1の画像取得部11は、ロボット1の周囲の画像を取得する(Step100)。取得した周囲の画像は、制御部14により、ネットワーク3を介して、広告サーバ2に送信される(Step101)。   First, the robot 1 is rotated 360 degrees by the moving unit 12 in order to acquire surrounding images. The image acquisition unit 11 of the robot 1 acquires an image around the robot 1 (Step 100). The acquired surrounding image is transmitted to the advertisement server 2 by the control unit 14 via the network 3 (Step 101).

広告サーバ2のパラメータ取得部21は、ロボット1から周囲画像を取得する。取得した周囲画像の一例を、図5に示す。パラメータ取得部21は、ロボット1の画像取得部11で取得したロボット1の周囲の周囲画像を解析し、ロボット1の存在位置を中心として存在する人間を認識する(Step102)。図5では、識別子a〜nまでの人間が識別されている。以下、識別された各人間について、識別子a〜nを付与し、人間a〜nと記載する。   The parameter acquisition unit 21 of the advertisement server 2 acquires a surrounding image from the robot 1. An example of the acquired surrounding image is shown in FIG. The parameter acquisition unit 21 analyzes the surrounding image of the surroundings of the robot 1 acquired by the image acquisition unit 11 of the robot 1 and recognizes a human who exists around the position where the robot 1 exists (Step 102). In FIG. 5, humans having identifiers a to n are identified. Hereinafter, identifiers a to n are given to the identified humans and are described as humans a to n.

次に、人間a〜nのパラメータを取得する(Step103)。ここでは、ロボット1の出力する広告を広告XXXとし、広告XXXのための広告表示重要度の算出に必要なパラメータの種別を、広告データベース24から取得する。取得される広告XXXのパラメータの種別は、距離、年齢、性別、向き、感情(顔の表情)である。そして、周囲画像から取得された人間a〜nのパラメータの結果を、図6に示す。例えば、人間aから取得できたパラメータ(属性)は、距離=3m、年齢=20代、性別=女性、向き=正面、感情(顔の表情)=普通である。同様に、人間b〜nのパラメータが取得される。   Next, parameters of humans a to n are acquired (Step 103). Here, the advertisement output by the robot 1 is the advertisement XXX, and the parameter type necessary for calculating the advertisement display importance for the advertisement XXX is acquired from the advertisement database 24. The types of parameters of the acquired advertisement XXX are distance, age, sex, orientation, and emotion (facial expression). FIG. 6 shows the parameter results of the humans a to n acquired from the surrounding images. For example, the parameters (attributes) acquired from the person a are: distance = 3 m, age = 20s, gender = female, orientation = front, emotion (facial expression) = normal. Similarly, parameters of humans b to n are acquired.

広告表示重要度算出部22は、パラメータ取得部21が取得した人間毎のパラメータに対して重みづけを行い(Step104)、認識した人間毎の広告表示重要度を算出する(Step105)。ここでは、ロボット1の出力する広告は広告XXXであるので、その重みづけは、距離は10/距離が乗算される。また、年齢は10代の場合は3、それ以外は1が付与される。また、性別は男性の場合は1、女性の場合は2が付与される。また、向きは正面の場合は1、横の場合は0.5、背面は0が付与される。また、感情は、普通の場合は1、笑顔の場合は1が付与される。尚、不明の場合、0が付与される。そして、その合計値がその人間の広告表示重要度となる。   The advertisement display importance calculation unit 22 weights the parameters for each person acquired by the parameter acquisition unit 21 (Step 104), and calculates the advertisement display importance for each recognized person (Step 105). Here, since the advertisement output by the robot 1 is the advertisement XXX, the weight is multiplied by 10 / distance. Also, the age is 3 for teenagers, and 1 otherwise. The sex is 1 for males and 2 for females. Also, the direction is 1 for the front, 0.5 for the side, and 0 for the back. The emotion is assigned 1 for normal and 1 for smile. If unknown, 0 is given. The total value is the advertisement display importance of the person.

人間a〜nの広告表示重要度は以下のとおりである。
人間a=3.3(=10/3)+1+2+1+1=8.8
人間b=2.8(=10/2.8)+1+1+1+1=6.8
人間c=6.6(=10/1.5)+3+2+1+2=14.6
人間d=5(=10/2)+1+2+1+2=11
人間e=4(=10/2.5)+1+1+1+1=8
人間f=4(=10/2.5)+1+1+1+1=8
人間g=4(=10/2.5)+0+0+0+0=4
人間h=3.3(=10/3)+1+2+1+2=9.3
人間i=2(=10/5)+3+1+1+1=11
人間j=2.8(=10/3.5)+0+1+0.5+0=4.3
人間k=6.6(=10/1.5)+1+1+1+1=10.6
人間l=2.8(=10/3.5)+1+1+1+1=6.8
人間m=2.8(=10/3.5)+0+0+0+0=2.8
人間n=6.6(=10/1.5)+3+1+1+2=13.6
広告出力範囲決定部23は、画像取得部11で取得された周囲画像を所定の視野角A〜Dの範囲に区切り、その視野角の範囲内の人間の広告表示重要度の合計値を算出する(Step106)。ここでは、図7に示す通り、画像取得部11で取得された周囲画像を、ロボット1の視野角を90度に見立てて、4つの視野角A〜視野角Dに区分けする。そして、各視野角A〜視野角Dの範囲毎に、その範囲に属する人間の広告表示重要度の合計値を算出する。各視野角A〜視野角Dの範囲に属する人間の広告表示重要度の合計値は以下のとおりである。
The advertisement display importance of the humans a to n is as follows.
Human a = 3.3 (= 10/3) + 1 + 2 + 1 + 1 = 8.8
Human b = 2.8 (= 10 / 2.8) + 1 + 1 + 1 + 1 = 6.8
Human c = 6.6 (= 10 / 1.5) + 3 + 2 + 1 + 2 = 14.6
Human d = 5 (= 10/2) + 1 + 2 + 1 + 2 = 11
Human e = 4 (= 10 / 2.5) + 1 + 1 + 1 + 1 = 8
Human f = 4 (= 10 / 2.5) + 1 + 1 + 1 + 1 = 8
Human g = 4 (= 10 / 2.5) + 0 + 0 + 0 + 0 = 4
Human h = 3.3 (= 10/3) + 1 + 2 + 1 + 2 = 9.3
Human i = 2 (= 10/5) + 3 + 1 + 1 + 1 = 11
Human j = 2.8 (= 10 / 3.5) + 0 + 1 + 0.5 + 0 = 4.3
Human k = 6.6 (= 10 / 1.5) + 1 + 1 + 1 + 1 = 10.6
Human l = 2.8 (= 10 / 3.5) + 1 + 1 + 1 + 1 = 6.8
Human m = 2.8 (= 10 / 3.5) + 0 + 0 + 0 + 0 = 2.8
Human n = 6.6 (= 10 / 1.5) + 3 + 1 + 1 + 2 = 13.6
The advertisement output range determination unit 23 divides the surrounding image acquired by the image acquisition unit 11 into a range of predetermined viewing angles A to D, and calculates the total value of human advertisement display importance within the range of the viewing angle. (Step 106). Here, as shown in FIG. 7, the surrounding image acquired by the image acquisition unit 11 is divided into four viewing angles A to D, assuming that the viewing angle of the robot 1 is 90 degrees. Then, for each range of viewing angle A to viewing angle D, a total value of human advertisement display importance levels belonging to the range is calculated. The total value of the advertisement display importance of the human belonging to the range of each viewing angle A to viewing angle D is as follows.

視野角Aの広告表示重要度の合計値
=人間aの広告表示重要度+人間bの広告表示重要度+人間cの広告表示重要度+人間dの広告表示重要度
=8.8+6.8+14.6+11
=41.2
視野角Bの広告表示重要度の合計値
=人間eの広告表示重要度+人間fの広告表示重要度+人間gの広告表示重要度
=8+8+4
=20
視野角Cの広告表示重要度の合計値
=人間hの広告表示重要度+人間iの広告表示重要度
=9.3+11
=20.3
視野角Dの広告表示重要度の合計値
=人間jの広告表示重要度+人間kの広告表示重要度+人間lの広告表示重要度+人間nの広告表示重要度
=4.3+10.6+6.8+2.8+13.6
=38.1
広告出力範囲決定部23は、最も広告表示重要度の合計値が大きい視野角の範囲を、広告出力適切範囲として決定する(Step107)。本例では、図8に示す通り、視野角Aの広告表示重要度の合計値が41.2であり、最も広告表示重要度が大きい視野角の範囲である。そこで、視野角Aの範囲を広告出力適切範囲に決定する。そして、視野角Aの範囲の中心方向の位置を示す情報を、ロボット1の移動部12に指示する(Step108)。
Total value of advertisement display importance of viewing angle A = human a advertisement display importance + human b advertisement display importance + human c advertisement display importance + human d advertisement display importance = 8.8 + 6.8 + 14. 6 + 11
= 41.2
Total value of advertisement display importance of viewing angle B = advertising display importance of person e + advertising display importance of person f + advertising display importance of person g = 8 + 8 + 4
= 20
Total value of advertisement display importance of viewing angle C = advertising display importance of person h + advertising display importance of person i = 9.3 + 11
= 20.3
Total value of advertisement display importance of viewing angle D = human j advertisement display importance + human k advertisement display importance + human l advertisement display importance + human n advertisement display importance = 4.3 + 10.6 + 6. 8 + 2.8 + 13.6
= 38.1
The advertisement output range determination unit 23 determines the range of the viewing angle having the largest total value of the advertisement display importance as the advertisement output appropriate range (Step 107). In this example, as shown in FIG. 8, the total value of the advertisement display importance of the viewing angle A is 41.2, which is the range of the viewing angle having the highest advertisement display importance. Therefore, the range of the viewing angle A is determined as the appropriate range of advertisement output. Then, information indicating the position in the center direction of the range of the viewing angle A is instructed to the moving unit 12 of the robot 1 (Step 108).

移動部12は、広告出力範囲決定部23より、視野角Aの範囲の中心方向の位置を示す情報を受け、その位置方向にロボット1の正面が向くように回転させる(Step109)。本例では、図9のように、視野角Aの中心方向にロボット1の正面が向くように回転する。   The moving unit 12 receives information indicating the position in the center direction of the range of the viewing angle A from the advertisement output range determining unit 23, and rotates the robot 1 so that the front of the robot 1 faces the position direction (Step 109). In this example, as shown in FIG. 9, the robot 1 rotates so that the front of the robot 1 faces the center direction of the viewing angle A.

回転が終了すると、広告出力部13は、広告xxxの出力を開始する(Step110)。   When the rotation ends, the advertisement output unit 13 starts outputting the advertisement xxx (Step 110).

第1の実施の形態は、ロボットの周囲に存在する人間のパラメータを取得し、そのパラメータから、提供する広告に適した人間が多く存在する位置を解析し、ロボットがその位置の正面を向いて広告を行うようにしているので、広告効果が高い広告を行うことができる。   In the first embodiment, a parameter of a human existing around the robot is acquired, a position where there are many humans suitable for the advertisement to be provided is analyzed from the parameter, and the robot faces the front of the position. Since advertising is performed, it is possible to perform advertising with high advertising effectiveness.

尚、上述した実施の形態において、広告出力範囲決定部23は、画像取得部11で取得された周囲画像を所定の視野角の範囲に区切り、その範囲毎にその視野角の範囲内の人間の広告表示重要度の合計値を算出する構成とした。しかし、これに限られず、周囲画像を更に多くの範囲に区分けしても良い。例えば、周囲画像を、所定の視野角の範囲を所定の角度ずつずらし、広告表示重要度を算出する範囲を決定しても良い。図10は、視野角Aの範囲から30度ずらして、新たな視野角Bの範囲を決定し、これらを繰り返してより多くの広告表示重要度を算出する範囲を決定している例である。   In the above-described embodiment, the advertisement output range determination unit 23 divides the surrounding image acquired by the image acquisition unit 11 into a predetermined viewing angle range, and human beings within the viewing angle range for each range. The total value of the advertisement display importance is calculated. However, the present invention is not limited to this, and the surrounding image may be divided into more ranges. For example, the range for calculating the advertisement display importance may be determined by shifting the range of the predetermined viewing angle by a predetermined angle for the surrounding image. FIG. 10 is an example in which a range of a new viewing angle B is determined by shifting by 30 degrees from the range of the viewing angle A, and a range in which more advertisement display importance is calculated is determined by repeating these.

更に、広告出力範囲決定部23は、例えば、図11のように、決定した広告出力適切範囲の該中心方向に対してロボットを前後方向に移動させた場合に表示重要度の合計数が増加する場合、その位置を求め、その位置にロボットを移動させるようにしても良い。但し、人間にあまり近づきすぎると、その人間を害する場合があるので、人間とロボットとの最短距離を予め定めておき、その最短距離よりも短い距離には移動しないようにする。   Furthermore, the advertisement output range determination unit 23 increases the total number of display importance levels when the robot is moved in the front-rear direction with respect to the central direction of the determined advertisement output appropriate range as shown in FIG. In this case, the position may be obtained and the robot may be moved to that position. However, if it is too close to a human, the human may be harmed. Therefore, the shortest distance between the human and the robot is determined in advance so that the robot does not move to a distance shorter than the shortest distance.

また、上述した実施の形態では、ロボット1を視野角の範囲の中心方向に向かせたが、これ限られず、視野角の範囲内であれば良い。例えば、視野角の範囲内に存在する人間のうち、最も距離が近い人間の方に向けても良い。   In the above-described embodiment, the robot 1 is directed toward the center of the viewing angle range. However, the present invention is not limited to this, and it may be within the viewing angle range. For example, it may be directed to a person who is closest in the range of viewing angles.

本発明の第2の実施の形態を説明する。   A second embodiment of the present invention will be described.

第1の実施の形態では、ロボット1が出力する広告を予め決定し、その広告のパラメータや、そのパラメータに対する重みづけを用いて広告出力範囲を決定した。しかし、出力する広告は、ロボット1が存在する場所に集まる人間によって決定した方が、より広告効果が増す場合がある。そこで、第2の実施の形態では、ロボット1が出力する広告を予め決定せずに、ロボット1が存在する場所に最適な広告を選択して出力する例を説明する。   In the first embodiment, the advertisement output by the robot 1 is determined in advance, and the advertisement output range is determined using the parameter of the advertisement and the weighting for the parameter. However, if the advertisement to be output is determined by a person who gathers at the place where the robot 1 exists, the advertisement effect may be further increased. Therefore, in the second embodiment, an example will be described in which an advertisement that is optimal for a place where the robot 1 exists is selected and output without determining an advertisement output by the robot 1 in advance.

第2の実施の形態の構成は、第1の実施の形態の構成と基本的には同様であるため、構成が異なる部分を中心について説明する。尚、以下の説明において、第1の実施の形態と同様に、広告サーバ2の広告データベース24には、図3に示されるような広告と、各広告に対応したパラメータに対する重みづけが記憶されているものとする。また、ロボット1の周囲には、図4に示されるように、人間が存在するものとする。   Since the configuration of the second embodiment is basically the same as the configuration of the first embodiment, the description will focus on the parts that are different in configuration. In the following description, as in the first embodiment, the advertisement database 24 of the advertisement server 2 stores advertisements as shown in FIG. 3 and weights for parameters corresponding to the advertisements. It shall be. Further, it is assumed that a human is present around the robot 1 as shown in FIG.

まず、広告サーバ2のパラメータ取得部21は、ロボット1から周囲画像を取得する。取得した周囲画像の一例を、図5に示す。パラメータ取得部21は、ロボット1の画像取得部11で取得したロボット1の周囲の周囲画像を解析し、ロボット1の存在位置を中心として存在する人間を認識する
次に、人間a〜nのパラメータを取得する。ここでは、ロボット1の出力する広告を予め決定せず、広告データベース24に格納されている全て又は所定の複数の広告のための広告表示重要度に必要なパラメータの種別を、広告データベース24から取得する。取得される広告のパラメータの種別は、距離、年齢、性別、向き、感情(顔の表情)である。そして、周囲画像から取得された人間a〜nのパラメータの結果は、第1の実施の形態と同様に、図6の内容である。
First, the parameter acquisition unit 21 of the advertisement server 2 acquires a surrounding image from the robot 1. An example of the acquired surrounding image is shown in FIG. The parameter acquisition unit 21 analyzes the surrounding image around the robot 1 acquired by the image acquisition unit 11 of the robot 1 and recognizes a person who exists around the position where the robot 1 exists. To get. Here, the advertisements output by the robot 1 are not determined in advance, and the types of parameters necessary for the advertisement display importance for all or predetermined plural advertisements stored in the advertisement database 24 are acquired from the advertisement database 24. To do. The types of advertisement parameters to be acquired are distance, age, sex, orientation, and emotion (facial expression). Then, the results of the parameters of the persons a to n acquired from the surrounding images are the contents of FIG. 6 as in the first embodiment.

広告表示重要度算出部22は、パラメータ取得部21が取得した人間毎のパラメータに対して重みづけを行い、認識した人間毎の広告表示重要度を算出する。各広告の人間a〜nの広告表示重要度は以下のとおりである。   The advertisement display importance calculation unit 22 weights the parameters for each person acquired by the parameter acquisition unit 21, and calculates the advertisement display importance for each recognized person. The advertisement display importance levels of the persons a to n of each advertisement are as follows.

1.広告xxxの広告表示重要度
人間a=3.3(=10/3)+1+2+1+1=8.8
人間b=2.8(=10/2.8)+1+1+1+1=6.8
人間c=6.6(=10/1.5)+3+2+1+2=14.6
人間d=5(=10/2)+1+2+1+2=11
人間e=4(=10/2.5)+1+1+1+1=8
人間f=4(=10/2.5)+1+1+1+1=8
人間g=4(=10/2.5)+0+0+0+0=4
人間h=3.3(=10/3)+1+2+1+2=9.3
人間i=2(=10/5)+3+1+1+1=11
人間j=2.8(=10/3.5)+0+1+0.5+0=4.3
人間k=6.6(=10/1.5)+1+1+1+1=10.6
人間l=2.8(=10/3.5)+1+1+1+1=6.8
人間m=2.8(=10/3.5)+0+0+0+0=2.8
人間n=6.6(=10/1.5)+3+1+1+2=13.6
2.広告yyyの広告表示重要度
人間a=3.3(=10/3)+2+2+1+1=9.8
人間b=2.8(=10/2.8)+2+1+1+1=7.8
人間c=6.6(=10/1.5)+1+2+1+2=12.6
人間d=5(=10/2)+3+2+1+2=13
人間e=4(=10/2.5)+1+1+1+1=8
人間f=4(=10/2.5)+1+1+1+1=8
人間g=4(=10/2.5)+0+0+0+0=4
人間h=3.3(=10/3)+2+2+1+2=10.3
人間i=2(=10/5)+1+1+1+1=11
人間j=2.8(=10/3.5)+0+1+0.5+0=4.3
人間k=6.6(=10/1.5)+1+1+1+1=10.6
人間l=2.8(=10/3.5)+1+1+1+1=6.8
人間m=2.8(=10/3.5)+0+0+0+0=2.8
人間n=6.6(=10/1.5)+3+1+1+2=13.6
3.広告zzzの広告表示重要度
人間a=3.3(=10/3)+1+1+1+1=7.8
人間b=2.8(=10/2.8)+1+2+1+1=7.8
人間c=6.6(=10/1.5)+1+1+1+2=11.6
人間d=5(=10/2)+1+1+1+2=10
人間e=4(=10/2.5)+2+2+1+1=10
人間f=4(=10/2.5)+1+2+1+1=9
人間g=4(=10/2.5)+0+0+0+0=4
人間h=3.3(=10/3)+1+1+1+2=8.3
人間i=2(=10/5)+1+2+1+1=12
人間j=2.8(=10/3.5)+0+2+0.5+0=5.3
人間k=6.6(=10/1.5)+1+2+1+1=11.6
人間l=2.8(=10/3.5)+1+2+1+1=7.8
人間m=2.8(=10/3.5)+0+0+0+0=2.8
人間n=6.6(=10/1.5)+1+2+1+2=12.6
次に、広告出力範囲決定部23は、画像取得部11で取得された周囲画像を所定の視野角の範囲に区切り、その視野角の範囲内の人間の広告表示重要度の合計値を算出する。各広告における各視野角A〜視野角Dの範囲に属する人間の広告表示重要度の合計値は以下のとおりである。
1. Advertisement display importance of advertisement xxx Human a = 3.3 (= 10/3) + 1 + 2 + 1 + 1 = 8.8
Human b = 2.8 (= 10 / 2.8) + 1 + 1 + 1 + 1 = 6.8
Human c = 6.6 (= 10 / 1.5) + 3 + 2 + 1 + 2 = 14.6
Human d = 5 (= 10/2) + 1 + 2 + 1 + 2 = 11
Human e = 4 (= 10 / 2.5) + 1 + 1 + 1 + 1 = 8
Human f = 4 (= 10 / 2.5) + 1 + 1 + 1 + 1 = 8
Human g = 4 (= 10 / 2.5) + 0 + 0 + 0 + 0 = 4
Human h = 3.3 (= 10/3) + 1 + 2 + 1 + 2 = 9.3
Human i = 2 (= 10/5) + 3 + 1 + 1 + 1 = 11
Human j = 2.8 (= 10 / 3.5) + 0 + 1 + 0.5 + 0 = 4.3
Human k = 6.6 (= 10 / 1.5) + 1 + 1 + 1 + 1 = 10.6
Human l = 2.8 (= 10 / 3.5) + 1 + 1 + 1 + 1 = 6.8
Human m = 2.8 (= 10 / 3.5) + 0 + 0 + 0 + 0 = 2.8
Human n = 6.6 (= 10 / 1.5) + 3 + 1 + 1 + 2 = 13.6
2. Advertisement display importance of advertisement yyy human a = 3.3 (= 10/3) + 2 + 2 + 1 + 1 = 9.8
Human b = 2.8 (= 10 / 2.8) + 2 + 1 + 1 + 1 = 7.8
Human c = 6.6 (= 10 / 1.5) + 1 + 2 + 1 + 2 = 12.6
Human d = 5 (= 10/2) + 3 + 2 ++ 1 + 2 = 13
Human e = 4 (= 10 / 2.5) + 1 + 1 + 1 + 1 = 8
Human f = 4 (= 10 / 2.5) + 1 + 1 + 1 + 1 = 8
Human g = 4 (= 10 / 2.5) + 0 + 0 + 0 + 0 = 4
Human h = 3.3 (= 10/3) + 2 + 2 ++ 1 + 2 = 10.3
Human i = 2 (= 10/5) + 1 + 1 + 1 + 1 = 11
Human j = 2.8 (= 10 / 3.5) + 0 + 1 + 0.5 + 0 = 4.3
Human k = 6.6 (= 10 / 1.5) + 1 + 1 + 1 + 1 = 10.6
Human l = 2.8 (= 10 / 3.5) + 1 + 1 + 1 + 1 = 6.8
Human m = 2.8 (= 10 / 3.5) + 0 + 0 + 0 + 0 = 2.8
Human n = 6.6 (= 10 / 1.5) + 3 + 1 + 1 + 2 = 13.6
3. Advertisement display importance of advertisement zzz human a = 3.3 (= 10/3) + 1 + 1 + 1 + 1 = 7.8
Human b = 2.8 (= 10 / 2.8) + 1 + 2 + 1 + 1 = 7.8
Human c = 6.6 (= 10 / 1.5) + 1 + 1 + 1 + 2 = 11.6
Human d = 5 (= 10/2) + 1 + 1 + 1 + 2 = 10
Human e = 4 (= 10 / 2.5) + 2 + 2 + 1 + 1 = 10
Human f = 4 (= 10 / 2.5) + 1 + 2 + 1 + 1 = 9
Human g = 4 (= 10 / 2.5) + 0 + 0 + 0 + 0 = 4
Human h = 3.3 (= 10/3) + 1 + 1 + 1 + 2 = 8.3
Human i = 2 (= 10/5) + 1 + 2 + 1 + 1 = 12
Human j = 2.8 (= 10 / 3.5) + 0 + 2 + 0.5 + 0 = 5.3
Human k = 6.6 (= 10 / 1.5) + 1 + 2 + 1 + 1 = 11.6
Human l = 2.8 (= 10 / 3.5) + 1 + 2 + 1 + 1 = 7.8
Human m = 2.8 (= 10 / 3.5) + 0 + 0 + 0 + 0 = 2.8
Human n = 6.6 (= 10 / 1.5) + 1 + 2 + 1 + 2 = 12.6
Next, the advertisement output range determination unit 23 divides the surrounding image acquired by the image acquisition unit 11 into a predetermined viewing angle range, and calculates a total value of human advertisement display importance within the viewing angle range. . The total value of the advertisement display importance of humans belonging to the range of the viewing angle A to the viewing angle D in each advertisement is as follows.

1.広告xxxの各視野角A〜視野角Dの範囲に属する人間の広告表示重要度の合計値
(1)視野角Aの広告表示重要度の合計値=41.2
(2)視野角Bの広告表示重要度の合計値=20
(3)視野角Cの広告表示重要度の合計値=20.3
(4)視野角Dの広告表示重要度の合計値=38.1
2.広告yyyの各視野角A〜視野角Dの範囲に属する人間の広告表示重要度の合計値
(1)視野角Aの広告表示重要度の合計値=43.2
(2)視野角Bの広告表示重要度の合計値=20
(3)視野角Cの広告表示重要度の合計値=21.3
(4)視野角Dの広告表示重要度の合計値=38.1
3.広告zzzの各視野角A〜視野角Dの範囲に属する人間の広告表示重要度の合計値
(1)視野角Aの広告表示重要度の合計値=37.2
(2)視野角Bの広告表示重要度の合計値=23
(3)視野角Cの広告表示重要度の合計値=20.3
(4)視野角Dの広告表示重要度の合計値=40.1
上記した各広告の視野角A〜視野角Dの範囲に属する人間の広告表示重要度の合計値の中で、最も広告表示重要度の合計値が大きいのは、広告yyyの視野角Aの広告表示重要度の合計値=43.2である。
1. Total value of advertisement display importance of human belonging to the range of each viewing angle A to viewing angle D of advertisement xxx (1) Total value of advertisement display importance of viewing angle A = 41.2
(2) Total value of advertisement display importance of viewing angle B = 20
(3) Total value of advertisement display importance of viewing angle C = 20.3
(4) Total value of advertisement display importance of viewing angle D = 38.1
2. Total value of advertisement display importance of human belonging to the range of each viewing angle A to viewing angle D of advertisement yyy (1) Total value of advertisement display importance of viewing angle A = 43.2
(2) Total value of advertisement display importance of viewing angle B = 20
(3) Total value of advertisement display importance of viewing angle C = 21.3
(4) Total value of advertisement display importance of viewing angle D = 38.1
3. Total value of advertisement display importance of human belonging to the range of each viewing angle A to viewing angle D of advertisement zzz (1) Total value of advertisement display importance of viewing angle A = 37.2
(2) Total value of advertisement display importance of viewing angle B = 23
(3) Total value of advertisement display importance of viewing angle C = 20.3
(4) Total value of advertisement display importance of viewing angle D = 40.1
Among the above-mentioned total values of the advertisement display importance levels of the human belonging to the range of the viewing angle A to the viewing angle D of each advertisement, the advertisement value of the advertisement display importance level is the largest in the advertisement angle y of the advertisement yyy. Total value of display importance = 43.2.

そこで、広告出力範囲決定部23は、視野角Aの範囲を広告yyyの広告出力適切範囲に決定する。そして、ロボット1が出力する広告として「広告yyy」のデータと、視野角Aの範囲の中心方向の位置を示す情報とを、ロボット1の移動部12に指示する。   Therefore, the advertisement output range determination unit 23 determines the range of the viewing angle A as the advertisement output appropriate range of the advertisement yyy. Then, the data of “advertisement yyy” as an advertisement output by the robot 1 and information indicating the position in the center direction of the range of the viewing angle A are instructed to the moving unit 12 of the robot 1.

移動部12は、広告出力範囲決定部23より、視野角Aの範囲の中心方向の位置を示す情報を受け、その位置方向にロボット1の正面が向くように回転させる。   The moving unit 12 receives information indicating the position in the center direction of the range of the viewing angle A from the advertisement output range determining unit 23, and rotates it so that the front of the robot 1 faces the position direction.

回転が終了すると、広告出力部13は、広告yyyの出力を開始する。   When the rotation ends, the advertisement output unit 13 starts outputting the advertisement yyy.

第2の実施の形態は、ロボット1が出力する広告を予め決定せずに、ロボット1の周囲に存在する人間に適した広告を選択して出力するようにしているので、より高い広告効果が高い広告を行うことができる。   In the second embodiment, since advertisements output by the robot 1 are not determined in advance, advertisements suitable for humans existing around the robot 1 are selected and output. High advertising can be done.

第3の実施の形態を説明する。   A third embodiment will be described.

上述した第1及び第2の実施の形態は、ロボット1と広告サーバ2とが連携して広告を行う例を説明した。しかし、広告サーバ2の機能をロボット1が備え、ロボット1が自律的に広告の提供を行うことも可能である。そこで、第3の実施の形態は、ロボット1が自律的に広告の提供を行う例を説明する。   In the first and second embodiments described above, an example has been described in which the robot 1 and the advertisement server 2 cooperate to perform an advertisement. However, it is also possible for the robot 1 to have the function of the advertisement server 2 and the robot 1 autonomously provide advertisements. Therefore, in the third embodiment, an example in which the robot 1 autonomously provides advertisements will be described.

図12は第3の実施の形態の構成図である。図12に示す通り、広告サーバ2の構成部であるパラメータ取得部21と、広告表示重要度算出部22と、広告出力範囲決定部23と、広告データベース24とを、ロボット1が備えている。   FIG. 12 is a configuration diagram of the third embodiment. As illustrated in FIG. 12, the robot 1 includes a parameter acquisition unit 21, an advertisement display importance calculation unit 22, an advertisement output range determination unit 23, and an advertisement database 24 that are components of the advertisement server 2.

各構成部の動作は、上述した第1及び第2の実施の形態の動作と同様なものなので、詳細な説明は省略する。   Since the operation of each component is the same as that of the first and second embodiments described above, detailed description thereof is omitted.

また、上述した実施の形態では、各部をハードウェアで構成したが、上述した動作の処理を情報処理装置(CPU)に行わせるプログラムによっても構成できる。   In the above-described embodiment, each unit is configured by hardware, but may be configured by a program that causes the information processing apparatus (CPU) to perform the above-described operation processing.

例えば、ロボット1及び広告サーバ2の全部又は一部は、図13に示す如く、メモリ300,400と、CPU301,402と、通信部302,402とから構成されるコンピュータシステムによって実現可能である。   For example, all or part of the robot 1 and the advertisement server 2 can be realized by a computer system including memories 300 and 400, CPUs 301 and 402, and communication units 302 and 402 as shown in FIG.

この場合、メモリ300には、上述した画像取得部11と、移動部12と、広告出力部13とに対応する処理を行うプログラムが格納されている。そして、CPU301がメモリ300に格納されているプログラムを実行することで、通信装置302、撮影装置303、広告出力部304及び駆動装置305を制御することで、上述したロボット1と同様な機能が実現される。   In this case, the memory 300 stores a program for performing processing corresponding to the image acquisition unit 11, the movement unit 12, and the advertisement output unit 13 described above. The CPU 301 executes a program stored in the memory 300 to control the communication device 302, the photographing device 303, the advertisement output unit 304, and the driving device 305, thereby realizing the same function as the robot 1 described above. Is done.

また、メモリ400には、上述したパラメータ取得部21と、広告表示重要度算出部22と、広告出力範囲決定部23とに対応する処理を行うプログラムが格納されている。そして、CPU401がメモリ400に格納されているプログラムを実行することで、上述した広告サーバ2と同様な機能が実現される。   The memory 400 stores a program for performing processing corresponding to the parameter acquisition unit 21, the advertisement display importance calculation unit 22, and the advertisement output range determination unit 23 described above. Then, when the CPU 401 executes the program stored in the memory 400, the same function as that of the advertisement server 2 described above is realized.

以上好ましい実施の形態をあげて本発明を説明したが、本発明は必ずしも上記実施の形態に限定されるものではなく、その技術的思想の範囲内において様々に変形し実施することが出来る。   Although the present invention has been described with reference to the preferred embodiments, the present invention is not necessarily limited to the above-described embodiments, and various modifications can be made within the scope of the technical idea.

1 ロボット
2 広告サーバ
3 ネットワーク
11 画像取得部
12 移動部
13 広告出力部
14 制御部
21 パラメータ取得部
22 広告表示重要度算出部
23 広告出力範囲決定部
24 広告データベース
300 メモリ
301 CPU
302 通信装置
303 撮影装置
304 広告出力部
305 駆動装置
400 メモリ400
401 CPU
402 通信部
DESCRIPTION OF SYMBOLS 1 Robot 2 Advertisement server 3 Network 11 Image acquisition part 12 Movement part 13 Advertisement output part 14 Control part 21 Parameter acquisition part 22 Advertisement display importance calculation part 23 Advertisement output range determination part 24 Advertisement database 300 Memory 301 CPU
302 Communication Device 303 Imaging Device 304 Advertisement Output Unit 305 Drive Device 400 Memory 400
401 CPU
402 Communication unit

Claims (15)

移動して広告を行うロボット広告システムであって、
ロボットの周囲の画像を取得する画像取得手段と、
前記画像取得手段で取得したロボットの周囲の周囲画像を解析し、前記ロボットの存在位置を中心として存在する人間を認識し、前記認識した人間に対する広告表示重要度を算出するためのパラメータを取得するパラメータ取得手段と、
前記認識した人間毎のパラメータに対して重みづけを行い、前記認識した人間毎の広告表示重要度を算出する広告表示重要度算出手段と、
前記周囲画像の所定範囲毎にその範囲内に存在すると認識された人間の表示重要度を加算し、その合計数に基づいて広告出力適切範囲を決定する広告出力適切範囲決定手段と、
前記広告出力適切範囲の方向に向くように、前記ロボットを移動する移動手段と、
前記移動手段による移動後に、広告を出力する広告出力手段と
を有するロボット広告システム。
A robot advertising system that moves and advertises,
Image acquisition means for acquiring an image around the robot;
Analyzing the surrounding image of the robot acquired by the image acquisition means, recognizing a person existing around the position of the robot, and acquiring parameters for calculating the advertisement display importance for the recognized person Parameter acquisition means;
An advertisement display importance calculating means for weighting the recognized parameters for each person and calculating the advertisement display importance for each recognized person;
An advertisement output appropriate range determining means for adding a display importance level of a human being recognized to be present in the predetermined range of the surrounding image and determining an advertisement output appropriate range based on the total number;
Moving means for moving the robot so as to face the direction of the appropriate range of advertisement output;
A robot advertisement system comprising an advertisement output means for outputting an advertisement after movement by the moving means.
前記広告出力適切範囲決定手段は、前記広告出力適切範囲の該中心方向に対してロボットを前後方向に移動した場合において、前記表示重要度の合計数が増加する位置を求め、
前記移動手段は、前記増加する位置に、ロボットを移動する
請求項1に記載のロボット。
The advertisement output appropriate range determining means obtains a position where the total number of display importance levels increases when the robot is moved in the front-rear direction with respect to the central direction of the advertisement output appropriate range,
The robot according to claim 1, wherein the moving unit moves the robot to the increasing position.
前記パラメータは、ロボットと人間との距離、人間の性別、人間の年齢、人間の生体データの少なくともいずれかである
請求項1又は請求項2に記載のロボット広告システム。
The robot advertisement system according to claim 1, wherein the parameter is at least one of a distance between the robot and a human, a human gender, a human age, and human biometric data.
前記広告表示重要度算出手段は、ロボットと人間との距離が近いほど、広告表示重要度が高くなるように重みづけを行う
請求項3に記載のロボット広告システム。
The robot advertisement system according to claim 3, wherein the advertisement display importance level calculation unit performs weighting so that the advertisement display importance level increases as the distance between the robot and the person is shorter.
前記広告表示重要度算出手段は、出力する広告のメタデータに基づいて、人間の性別、人間の年齢、人間の生体データに対して重みづけを行う
請求項3に記載のロボット広告システム。
The robot advertisement system according to claim 3, wherein the advertisement display importance degree calculation unit weights human gender, human age, and human biometric data based on the advertisement metadata to be output.
取得したパラメータに基づく広告表示重要度に基づいて、前記広告出力手段が出力する広告を選択する広告選択手段を有する
請求項1から請求項5のいずかれに記載のロボット広告システム。
The robot advertisement system according to any one of claims 1 to 5, further comprising an advertisement selection unit that selects an advertisement output by the advertisement output unit based on an advertisement display importance level based on the acquired parameter.
ロボット広告システムであって、
ロボットと、前記ロボットと通信可能な広告サーバとを有し、
前記ロボットは、
ロボットの周囲の画像を取得する画像取得手段と、
前記画像取得手段が取得した画像を、前記広告サーバに送信する送信手段と、
前記広告サーバに指示された広告出力適切範囲の方向に向くように、前記ロボットを移動する移動手段と、
前記移動手段による移動後に、広告を出力する広告出力手段と
を有し、
前記広告サーバは、
前記画像取得手段で取得したロボットの周囲の周囲画像を解析し、前記ロボットの存在位置を中心として存在する人間を認識し、前記認識した人間に対する広告表示重要度を算出するためのパラメータを取得するパラメータ取得手段と、
前記認識した人間毎のパラメータに対して重みづけを行い、前記認識した人間毎の広告表示重要度を算出する広告表示重要度算出手段と、
前記周囲画像の所定範囲毎にその範囲内に存在すると認識された人間の表示重要度を加算し、その合計数に基づいて広告出力適切範囲を決定し、前記広告出力適切範囲を前記ロボットに指示する広告出力適切範囲決定手段と
を有するロボット広告システム。
A robot advertising system,
A robot and an advertisement server capable of communicating with the robot;
The robot is
Image acquisition means for acquiring an image around the robot;
Transmitting means for transmitting the image acquired by the image acquiring means to the advertisement server;
Moving means for moving the robot so as to face the direction of the appropriate advertisement output range instructed by the advertisement server;
Advertisement output means for outputting an advertisement after movement by the movement means;
The advertising server
Analyzing the surrounding image of the robot acquired by the image acquisition means, recognizing a person existing around the position of the robot, and acquiring parameters for calculating the advertisement display importance for the recognized person Parameter acquisition means;
An advertisement display importance calculating means for weighting the recognized parameters for each person and calculating the advertisement display importance for each recognized person;
For each predetermined range of the surrounding image, the display importance level of the human being recognized as existing within the range is added, the advertisement output appropriate range is determined based on the total number, and the advertisement output appropriate range is instructed to the robot A robot advertisement system having advertisement output appropriate range determining means for
移動して広告を行うロボットであって、
ロボットの周囲の画像を取得する画像取得手段と、
前記画像取得手段で取得したロボットの周囲の周囲画像を解析し、前記ロボットの存在位置を中心として存在する人間を認識し、前記認識した人間に対する広告表示重要度を算出するためのパラメータを取得するパラメータ取得手段と、
前記認識した人間毎のパラメータに対して重みづけを行い、前記認識した人間毎の広告表示重要度を算出する広告表示重要度算出手段と、
前記周囲画像の所定範囲毎にその範囲内に存在すると認識された人間の表示重要度を加算し、その合計数に基づいて広告出力適切範囲を決定する広告出力適切範囲決定手段と、
前記広告出力適切範囲の方向に向くように、前記ロボットを移動する移動手段と、
前記移動手段による移動後に、広告を出力する広告出力手段と
を有するロボット。
A robot that moves and advertises,
Image acquisition means for acquiring an image around the robot;
Analyzing the surrounding image of the robot acquired by the image acquisition means, recognizing a person existing around the position of the robot, and acquiring parameters for calculating the advertisement display importance for the recognized person Parameter acquisition means;
An advertisement display importance calculating means for weighting the recognized parameters for each person and calculating the advertisement display importance for each recognized person;
An advertisement output appropriate range determining means for adding a display importance level of a human being recognized to be present in the predetermined range of the surrounding image and determining an advertisement output appropriate range based on the total number;
Moving means for moving the robot so as to face the direction of the appropriate range of advertisement output;
A robot having advertisement output means for outputting an advertisement after movement by the moving means.
移動して広告を行うロボットの広告方法であって、
ロボットの周囲の画像を取得し、
前記取得したロボットの周囲の周囲画像を解析し、前記ロボットの存在位置を中心として存在する人間を認識し、前記認識した人間に対する広告表示重要度を算出するためのパラメータを取得し、
前記認識した人間毎のパラメータに対して重みづけを行い、前記認識した人間毎の広告表示重要度を算出し、
前記周囲画像の所定範囲毎にその範囲内に存在すると認識された人間の表示重要度を加算し、その合計数に基づいて広告出力適切範囲を決定し、
前記広告出力適切範囲の方向に向くように、前記ロボットを移動し、
前記移動手段による移動後に、広告を出力する
ロボットの広告方法。
An advertising method for a robot that moves and advertises,
Get an image around the robot,
Analyzing the surrounding image around the acquired robot, recognizing a human present around the robot's existing position, obtaining a parameter for calculating the advertisement display importance for the recognized human,
Weighting the recognized parameters for each person, calculating the advertisement display importance for each recognized person,
For each predetermined range of the surrounding image, add the human display importance recognized to be within that range, determine the appropriate range of advertisement output based on the total number,
Move the robot to face the direction of the appropriate range of advertisement output,
A robot advertising method for outputting an advertisement after movement by the moving means.
前記広告出力適切範囲の該中心方向に対してロボットを前後方向に移動した場合において、前記表示重要度の合計数が増加する位置を求め、
前記増加する位置に、ロボットを移動する
請求項9に記載のロボットの広告方法。
When the robot is moved in the front-rear direction with respect to the center direction of the advertisement output appropriate range, a position where the total number of the display importance levels increases is obtained
The robot advertisement method according to claim 9, wherein the robot is moved to the increasing position.
前記パラメータは、ロボットと人間との距離、人間の性別、人間の年齢、人間の生体データの少なくともいずれかである
請求項9又は請求項10に記載のロボットの広告方法。
The robot advertising method according to claim 9 or 10, wherein the parameter is at least one of a distance between the robot and a human, a human gender, a human age, and a human biometric data.
ロボットと人間との距離が近いほど、広告表示重要度が高くなるように重みづけを行う
請求項11に記載のロボットの広告方法。
The robot advertisement method according to claim 11, wherein weighting is performed so that the advertisement display importance becomes higher as the distance between the robot and the person is shorter.
出力する広告のメタデータに基づいて、人間の性別、人間の年齢、人間の生体データに対して重みづけを行う
請求項11に記載のロボットの広告方法。
The robot advertisement method according to claim 11, wherein weighting is performed on human gender, human age, and human biometric data based on the metadata of the advertisement to be output.
取得したパラメータに基づく広告表示重要度に基づいて、出力する広告を選択する
請求項9から請求項13のいずかれに記載のロボットの広告方法。
Select ads to output based on the importance of displaying ads based on the acquired parameters
The robot advertising method according to any one of claims 9 to 13.
移動して広告を行うロボットの広告を行わせるプログラムであって、
ロボットの周囲の画像を取得する処理と、
前記取得したロボットの周囲の周囲画像を解析し、前記ロボットの存在位置を中心として存在する人間を認識し、前記認識した人間に対する広告表示重要度を算出するためのパラメータを取得する処理と、
前記認識した人間毎のパラメータに対して重みづけを行い、前記認識した人間毎の広告表示重要度を算出する処理と、
前記周囲画像の所定範囲毎にその範囲内に存在すると認識された人間の表示重要度を加算し、その合計数に基づいて広告出力適切範囲を決定する処理と、
前記広告出力適切範囲の方向に向くように、前記ロボットを移動する処理と、
前記移動手段による移動後に、広告を出力する処理と
を、ロボットが有する情報処理装置に実行させるプログラム。
A program for advertising a robot that moves and advertises,
Processing to acquire images around the robot;
A process of analyzing a surrounding image of the acquired robot, recognizing a person existing around the position of the robot, and acquiring a parameter for calculating an advertisement display importance for the recognized person;
Processing for weighting the recognized parameters for each person and calculating the advertisement display importance for each recognized person;
A process of adding the display importance of human beings recognized to be present in each predetermined range of the surrounding image and determining an appropriate range of advertisement output based on the total number;
A process of moving the robot so as to face the direction of the advertisement output appropriate range;
A program for causing an information processing apparatus included in a robot to execute processing for outputting an advertisement after movement by the moving means.
JP2015230319A 2015-11-26 2015-11-26 Robot advertising system, robot, robot advertising method and program Active JP6617013B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2015230319A JP6617013B2 (en) 2015-11-26 2015-11-26 Robot advertising system, robot, robot advertising method and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015230319A JP6617013B2 (en) 2015-11-26 2015-11-26 Robot advertising system, robot, robot advertising method and program

Publications (2)

Publication Number Publication Date
JP2017097207A JP2017097207A (en) 2017-06-01
JP6617013B2 true JP6617013B2 (en) 2019-12-04

Family

ID=58816773

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015230319A Active JP6617013B2 (en) 2015-11-26 2015-11-26 Robot advertising system, robot, robot advertising method and program

Country Status (1)

Country Link
JP (1) JP6617013B2 (en)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3338963B1 (en) 2016-12-23 2022-02-02 LG Electronics Inc. Guide robot
EP3338964B1 (en) 2016-12-23 2021-02-17 LG Electronics Inc. -1- Guide robot
EP3563981B1 (en) 2016-12-23 2023-04-19 LG Electronics Inc. Guide robot
KR102348041B1 (en) 2017-03-28 2022-01-05 엘지전자 주식회사 Control method of robot system including a plurality of moving robots
KR20190003122A (en) * 2017-06-30 2019-01-09 엘지전자 주식회사 Method for operating moving robot
JP6393377B1 (en) * 2017-07-24 2018-09-19 ユニティガードシステム株式会社 Robot, information providing method and information providing system
JP6824146B2 (en) * 2017-12-08 2021-02-03 日本電信電話株式会社 Evaluation device, method and program
KR102068402B1 (en) * 2018-02-14 2020-01-20 주식회사 제너럴 네트 Advertising service method using household robot
US20210023704A1 (en) * 2018-04-10 2021-01-28 Sony Corporation Information processing apparatus, information processing method, and robot apparatus
CN109746929A (en) * 2019-01-31 2019-05-14 邓传聪 A kind of intelligent advertisement dispensing robot
CN110276649A (en) * 2019-06-28 2019-09-24 北京金山安全软件有限公司 information display method and device
WO2021016965A1 (en) * 2019-07-31 2021-02-04 中新智擎科技有限公司 Method, device, and advertising robot for delivering advertisement
JP7332491B2 (en) * 2020-01-23 2023-08-23 トヨタ自動車株式会社 Information processing device, information processing system and information processing method
KR102288870B1 (en) * 2021-02-19 2021-08-12 주식회사 튠미디어 Advertising system using ai robot and server controlling ai robot

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4642287B2 (en) * 2001-08-07 2011-03-02 本田技研工業株式会社 Autonomous mobile robot
US20080172781A1 (en) * 2006-12-15 2008-07-24 Terrance Popowich System and method for obtaining and using advertising information
WO2012043291A1 (en) * 2010-09-30 2012-04-05 日本電気株式会社 Device for specifying person to whom advertisement is to be distributed, and advertisement distribution device
JP2014120888A (en) * 2012-12-14 2014-06-30 Sharp Corp Content distribution server and content distribution method

Also Published As

Publication number Publication date
JP2017097207A (en) 2017-06-01

Similar Documents

Publication Publication Date Title
JP6617013B2 (en) Robot advertising system, robot, robot advertising method and program
US11089985B2 (en) Systems and methods for using mobile and wearable video capture and feedback plat-forms for therapy of mental disorders
US11636524B2 (en) Computer vision, user segment, and missing item determination
US11861873B2 (en) Event camera-based gaze tracking using neural networks
JP6921768B2 (en) Virtual fitting system, virtual fitting method, virtual fitting program, and information processing device
US9852358B2 (en) Information processing device, information processing method, and information processing system
US20190384967A1 (en) Facial expression detection method, device and system, facial expression driving method, device and system, and storage medium
JP6482172B2 (en) RECOMMENDATION DEVICE, RECOMMENDATION METHOD, AND PROGRAM
KR102236904B1 (en) Method and apparatus for compositing images
US11407106B2 (en) Electronic device capable of moving and operating method thereof
KR20170095817A (en) Avatar selection mechanism
JP2015064513A (en) Display device, content display method, and program
US20180279004A1 (en) Information processing apparatus, information processing method, and program
JP2019179390A (en) Gaze point estimation processing device, gaze point estimation model generation device, gaze point estimation processing system, gaze point estimation processing method, program, and gaze point estimation model
Mocanu et al. Deep-see face: A mobile face recognition system dedicated to visually impaired people
JP7030078B2 (en) Information generation methods and devices applied to terminal devices
JP2020057111A (en) Facial expression determination system, program and facial expression determination method
US11967018B2 (en) Inferred shading
WO2019193781A1 (en) Emotion inference device, emotion inference method, and program
JP2022540070A (en) Systems and methods for determining actions performed by objects in images
US20140005806A1 (en) Information processing device, information display apparatus, information processing method, and computer program product
US20230334907A1 (en) Emotion Detection
CN112257645B (en) Method and device for positioning key points of face, storage medium and electronic device
JP2021124977A (en) Terminal device, function recommendation method, program, and server device
KR20230043741A (en) Feedback using coverage for object scanning

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20181120

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190710

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190712

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190829

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190918

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20191111

R150 Certificate of patent or registration of utility model

Ref document number: 6617013

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250