JP2021056638A - Information processor, information processing system, information processing method, and program - Google Patents

Information processor, information processing system, information processing method, and program Download PDF

Info

Publication number
JP2021056638A
JP2021056638A JP2019177502A JP2019177502A JP2021056638A JP 2021056638 A JP2021056638 A JP 2021056638A JP 2019177502 A JP2019177502 A JP 2019177502A JP 2019177502 A JP2019177502 A JP 2019177502A JP 2021056638 A JP2021056638 A JP 2021056638A
Authority
JP
Japan
Prior art keywords
information
rule
location
information processing
terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019177502A
Other languages
Japanese (ja)
Other versions
JP7388097B2 (en
Inventor
浩二 松藤
Koji Matsufuji
浩二 松藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP2019177502A priority Critical patent/JP7388097B2/en
Publication of JP2021056638A publication Critical patent/JP2021056638A/en
Application granted granted Critical
Publication of JP7388097B2 publication Critical patent/JP7388097B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Emergency Alarm Devices (AREA)
  • Telephonic Communication Services (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

To provide an information processors, etc., capable of notifying a target person of location-specific information on laws and etiquette.SOLUTION: An information processor according to one aspect of the present disclosure comprises a rule information detection means for detecting information on a rule using information on a location identified based on photographic data generated by an information terminal possessed by a subject and location information of the information terminal from a database that stores information on rules defined according to a location associated with information on the location and a notification means for notifying the subject of detected information on the rule.SELECTED DRAWING: Figure 2

Description

本開示は、情報を通知する技術に関する。 The present disclosure relates to a technique for notifying information.

様々な場所において、法規及びマナーを含む規則が定められている。そのような規則を順守させるための技術が存在する。 In various places, rules including laws and manners are established. There are techniques for adhering to such rules.

特許文献1では、禁煙エリアで喫煙しているマナー違反者を、煙を検知するセンサやカメラを用いて特定し、管理者に通知、または、マナー違反者に注意を促す技術が開示されている。 Patent Document 1 discloses a technique for identifying a manner violator smoking in a non-smoking area by using a sensor or a camera that detects smoke, notifying the administrator, or calling attention to the manner violator. ..

特開2007−274156号公報Japanese Unexamined Patent Publication No. 2007-274156

規則は、様々な国または都市等の地域ごとに定められている。さらに、様々な状況に応じて、多種多用な規則が存在する。そのため、例えば、他所からの滞在者が、そのような規則をすべて認知することは困難である。このような場合、他所からの滞在者が、意図せず、規則に違反する行動をとる虞がある。 Regulations are set for each region such as various countries or cities. In addition, there are a wide variety of rules for different situations. Therefore, for example, it is difficult for residents from other places to recognize all such rules. In such a case, a resident from another place may unintentionally act in violation of the rules.

特許文献1では、煙を検知するセンサ等を用いて喫煙に関するマナー違反を注意喚起することは記載されているものの、状況に応じて、多様な法規及びマナー等の違反に関して注意喚起することは記載されていない。 Patent Document 1 describes that a sensor or the like that detects smoke is used to call attention to violations of manners related to smoking, but it is stated that cautions are given regarding violations of various laws and manners depending on the situation. It has not been.

本開示は、上記課題を鑑みてなされたものであり、対象の人物に、場所に応じた法規やマナーに関する情報の通知を行うことが可能な情報処理装置等を提供することを主要な目的とする。 The present disclosure has been made in view of the above problems, and its main purpose is to provide an information processing device or the like capable of notifying the target person of information on laws and manners according to the location. To do.

本開示の一態様にかかる情報処理装置は、場所に応じて定められた規則に関する情報と、前記場所の情報とを関連付けて格納するデータベースから、対象者が所持する情報端末により生成された撮影データと、前記情報端末の位置情報とに基づいて特定された場所の情報を利用して、前記規則に関する情報を検出する規則情報検出手段と、検出された前記規則に関する情報を、前記対象者に向けて通知する通知手段と、を備える。 The information processing apparatus according to one aspect of the present disclosure is photographed data generated by an information terminal possessed by the subject from a database that stores information on rules determined according to the location in association with the information on the location. And, the rule information detecting means for detecting the information about the rule by using the information of the place specified based on the position information of the information terminal, and the detected information about the rule are directed to the target person. It is provided with a notification means for notifying the information.

本発明の一態様にかかる情報処理システムは、上記の情報処理装置と、情報端末とを備え、前記情報端末は、前記撮影データを生成する撮影手段と、前記位置情報を取得する位置情報取得手段と、前記規則に関する情報を提示する提示手段と、を有する。 The information processing system according to one aspect of the present invention includes the above-mentioned information processing device and an information terminal, and the information terminal includes a photographing means for generating the photographing data and a position information acquiring means for acquiring the position information. And a presentation means for presenting information about the rule.

本開示の一態様にかかる情報処理方法は、場所に応じて定められた規則に関する情報と、前記場所の情報とを関連付けて格納するデータベースから、対象者が所持する情報端末により生成された撮影データと、前記情報端末の位置情報とに基づいて特定された場所の情報を利用して、前記規則に関する情報を検出し、検出した前記規則に関する情報を、前記対象者に向けて通知する。 The information processing method according to one aspect of the present disclosure is the photographing data generated by the information terminal possessed by the subject from the database that stores the information on the rules determined according to the location in association with the information on the location. And, using the information of the place specified based on the position information of the information terminal, the information about the rule is detected, and the detected information about the rule is notified to the target person.

本開示の一態様にかかるプログラムは、場所に応じて定められた規則に関する情報と、前記場所の情報とを関連付けて格納するデータベースから、対象者が所持する情報端末により生成された撮影データと、前記情報端末の位置情報とに基づいて特定された場所の情報を利用して、前記規則に関する情報を検出する処理と、検出した前記規則に関する情報を、前記対象者に向けて通知する処理と、をコンピュータに実行させる。 The program according to one aspect of the present disclosure includes shooting data generated by an information terminal possessed by the subject from a database that stores information on rules determined according to the location in association with the information on the location. A process of detecting information on the rule by using the information of the location specified based on the position information of the information terminal, a process of notifying the detected information on the rule to the target person, and a process of notifying the target person of the detected information on the rule. To the computer.

本開示によれば、対象の人物に、場所に応じた法規やマナーに関する情報の通知を行うことが可能になるという効果が得られる。 According to the present disclosure, it is possible to obtain the effect that it is possible to notify the target person of information on laws and manners according to the location.

第1の実施形態にかかる情報処理システムの構成の一例を示すブロック図である。It is a block diagram which shows an example of the structure of the information processing system which concerns on 1st Embodiment. 第1の実施形態にかかる情報処理装置の機能構成の一例を示すブロック図である。It is a block diagram which shows an example of the functional structure of the information processing apparatus which concerns on 1st Embodiment. 第1の実施形態にかかる情報処理装置の動作を説明するフローチャートである。It is a flowchart explaining the operation of the information processing apparatus which concerns on 1st Embodiment. 第2の実施形態にかかる情報処理システムの構成の一例を模式的に示す図である。It is a figure which shows typically an example of the structure of the information processing system which concerns on 2nd Embodiment. 第2の実施形態にかかる情報処理システムの機能構成の一例を示すブロック図である。It is a block diagram which shows an example of the functional structure of the information processing system which concerns on 2nd Embodiment. 第2の実施形態にかかる情報処理装置の機能構成の一例を示すブロック図である。It is a block diagram which shows an example of the functional structure of the information processing apparatus which concerns on 2nd Embodiment. 第2の実施形態にかかる規則情報データベースの一例を示す図である。It is a figure which shows an example of the rule information database which concerns on 2nd Embodiment. 第2の実施形態にかかる情報処理システムの動作を説明する図である。It is a figure explaining the operation of the information processing system which concerns on 2nd Embodiment. 第2の実施形態にかかる情報処理装置の動作を説明するフローチャートである。It is a flowchart explaining the operation of the information processing apparatus which concerns on 2nd Embodiment. 第2の実施形態にかかる情報端末の提示部が注意喚起情報を提示する一例を示す図である。It is a figure which shows an example which the presenting part of the information terminal which concerns on 2nd Embodiment presents alert information. 第3の実施形態にかかる情報処理システムの機能構成の一例を示すブロック図である。It is a block diagram which shows an example of the functional structure of the information processing system which concerns on 3rd Embodiment. 第3の実施形態にかかる情報処理装置の機能構成の一例を示すブロック図である。It is a block diagram which shows an example of the functional structure of the information processing apparatus which concerns on 3rd Embodiment. 第3の実施形態にかかる規則情報データベースの一例を示す図である。It is a figure which shows an example of the rule information database which concerns on 3rd Embodiment. 第3の実施形態にかかる情報処理装置の動作を説明するフローチャートである。It is a flowchart explaining the operation of the information processing apparatus which concerns on 3rd Embodiment. 第3の実施形態にかかる情報端末の提示部が注意喚起情報を提示する一例を示す図である。It is a figure which shows an example which the presenting part of the information terminal which concerns on 3rd Embodiment presents alert information. 変形例1にかかる情報処理システムの機能構成の一例を示す図である。It is a figure which shows an example of the functional structure of the information processing system which concerns on modification 1. FIG. 第1、第2及び第3の実施形態における情報処理装置を実現するコンピュータ装置のハードウェア構成の一例を示すブロック図である。It is a block diagram which shows an example of the hardware composition of the computer apparatus which realizes the information processing apparatus in the 1st, 2nd and 3rd Embodiment.

<第1の実施形態>
次に、第1の実施形態にかかる情報処理装置を含む情報処理システムの概要について説明する。
<First Embodiment>
Next, an outline of the information processing system including the information processing device according to the first embodiment will be described.

図1は、情報処理システム1000の構成の一例を示すブロック図である。図1に示すように、情報処理システム1000は、情報処理装置100と、データベースサーバ200と、情報端末300とを備える。情報処理システム1000は、情報処理装置100が検出した情報を、人物に通知するシステムである。 FIG. 1 is a block diagram showing an example of the configuration of the information processing system 1000. As shown in FIG. 1, the information processing system 1000 includes an information processing device 100, a database server 200, and an information terminal 300. The information processing system 1000 is a system that notifies a person of information detected by the information processing device 100.

情報端末300は、人物によって所持されている。情報端末300を所持している人物は、情報処理装置100により検出された情報が通知される対象者である。以降、情報端末300を所持している人物を対象者とも称する。 The information terminal 300 is owned by a person. The person who possesses the information terminal 300 is the target person to whom the information detected by the information processing device 100 is notified. Hereinafter, the person who possesses the information terminal 300 is also referred to as a target person.

情報端末300は、カメラを備え、当該カメラにより対象者の周囲を撮影し、撮影データを生成する。また、情報端末300は、情報端末300の位置情報を取得する。さらに、情報端末300は、情報処理装置100から受け取った情報を対象者に提示する。情報を提示する方法としては、情報端末300が、情報端末300が有するディスプレイに受け取った情報を表示してもよいが、この例に限らない。例えば、情報端末300は、スピーカ、光源装置、またはバイブレータを備え、受け取った情報を音、光または振動に変換し、情報端末300から発信するよう制御してもよい。また、情報処理装置100と通信可能な装置であって、情報端末300とは異なる装置が、対象者に情報を提示するようにしてもよい。 The information terminal 300 is provided with a camera, and the camera captures the surroundings of the target person to generate shooting data. Further, the information terminal 300 acquires the position information of the information terminal 300. Further, the information terminal 300 presents the information received from the information processing device 100 to the target person. As a method of presenting information, the information terminal 300 may display the received information on the display of the information terminal 300, but the present invention is not limited to this example. For example, the information terminal 300 may include a speaker, a light source device, or a vibrator, and may control the received information to be converted into sound, light, or vibration and transmitted from the information terminal 300. Further, a device capable of communicating with the information processing device 100 and different from the information terminal 300 may present information to the target person.

データベースサーバ200は、場所に応じて定められた規則に関する情報と場所の情報とを関連付けて記憶する規則情報データベースを格納している(以降、データベースをDBとも称し、データベースサーバをDBサーバとも称する)。場所の情報には、例えば、国及び都市等の地域が示されてもよいし、レストラン、図書館及び百貨店等の施設が示されてもよいし、森林、海及び路上等の風景が示されてもよい。規則は、例えば、マナーであってもよいし、憲法、法律及び条例等を含む法規であってもよい。規則に関する情報には、例えば、規則そのままの情報が示されていてもよいし、規則に関係する注意喚起の文章の情報が示されていてもよい。規則に関係する注意喚起の文章の情報は、例えば、対象者に規則を遵守させるように注意喚起する情報である。 The database server 200 stores a rule information database that stores information about rules determined according to a location in association with location information (hereinafter, the database is also referred to as a DB, and the database server is also referred to as a DB server). .. The location information may indicate, for example, areas such as countries and cities, facilities such as restaurants, libraries and department stores, and landscapes such as forests, seas and streets. May be good. The rules may be, for example, manners or regulations including constitutions, laws and ordinances. The information about the rule may include, for example, the information of the rule as it is, or the information of the warning text related to the rule. The information in the alert text related to the rules is, for example, information that alerts the subject to comply with the rules.

情報処理装置100は、情報端末300から、撮影データと位置情報とを取得すると、取得した撮影データと位置情報とに基づいて、DBサーバ200から規則に関する情報を検出する。また、情報処理装置100は、DBサーバ200から検出した規則に関する情報を、対象者に向けて通知する。 When the information processing apparatus 100 acquires the shooting data and the position information from the information terminal 300, the information processing apparatus 100 detects the information related to the rules from the DB server 200 based on the acquired shooting data and the position information. In addition, the information processing device 100 notifies the target person of information regarding the rules detected from the DB server 200.

[情報処理装置100の詳細]
図2は、情報処理装置100の機能構成の一例を示すブロック図である。図2に示すように、情報処理装置100は、規則情報検出部110と、通知部120とを備える。情報処理装置100は、情報端末300と、DBサーバ200と通信可能に接続されている。
[Details of Information Processing Device 100]
FIG. 2 is a block diagram showing an example of the functional configuration of the information processing apparatus 100. As shown in FIG. 2, the information processing apparatus 100 includes a rule information detection unit 110 and a notification unit 120. The information processing device 100 is communicably connected to the information terminal 300 and the DB server 200.

規則情報検出部110は、情報端末300から取得した情報に基づいて、DBサーバ200から規則に関する情報を検出する。具体的には、情報処理装置100が、情報端末300から、撮影データと位置情報とを取得する。ここで、取得した位置情報と撮影データとに基づいて情報端末300が存在する場所が特定される。規則情報検出部110は、特定された場所の情報に関連付けられた規則に関する情報を、DBサーバ200から検出する。 The rule information detection unit 110 detects information about the rule from the DB server 200 based on the information acquired from the information terminal 300. Specifically, the information processing device 100 acquires shooting data and position information from the information terminal 300. Here, the place where the information terminal 300 exists is specified based on the acquired position information and the shooting data. The rule information detection unit 110 detects information about the rule associated with the information of the specified location from the DB server 200.

通知部120は、検出された規則に関する情報を、対象者に向けて通知する。例えば、通知部120は、情報端末300に規則に関する情報を送り、情報端末300を介して、規則に関する情報を対象者に通知する。また、通知部120は、対象者に情報を提示する機能を有する図示しない装置に、規則に関する情報を通知し、当該装置を介して、規則に関する情報を対象者に通知してもよい。 The notification unit 120 notifies the target person of the information regarding the detected rule. For example, the notification unit 120 sends information about the rule to the information terminal 300, and notifies the target person of the information about the rule via the information terminal 300. Further, the notification unit 120 may notify the information about the rule to a device (not shown) having a function of presenting the information to the target person, and notify the target person of the information about the rule via the device.

このように、規則情報検出部110は、場所に応じて定められた規則に関する情報と場所の情報とを関連付けて格納するデータベースから、対象者が所持する情報端末により生成された撮影データと情報端末の位置情報とに基づいて特定された場所の情報を利用して、規則に関する情報を検出する。規則情報検出部110は、規則情報検出手段の一例である。また、通知部120は、検出された規則に関する情報を、対象者に向けて通知する。通知部120は、通知手段の一例である。 In this way, the rule information detection unit 110 uses the shooting data and the information terminal generated by the information terminal possessed by the target person from the database that stores the information related to the rules determined according to the location and the information of the location in association with each other. Detect information about the rule by using the location information identified based on the location information of. The rule information detection unit 110 is an example of the rule information detection means. In addition, the notification unit 120 notifies the target person of the information regarding the detected rule. The notification unit 120 is an example of notification means.

[情報処理装置100の動作]
次に、情報処理装置100の動作を説明する。以下に、情報処理装置100の動作を、図3のフローチャートを用いて説明する。なお、本明細書において、フローチャートの各ステップを「S101」のように、それぞれのステップに付した番号を用いて表現する。
[Operation of information processing device 100]
Next, the operation of the information processing device 100 will be described. The operation of the information processing apparatus 100 will be described below with reference to the flowchart of FIG. In this specification, each step of the flowchart is expressed by using a number assigned to each step, such as “S101”.

規則情報検出部110は、情報端末300が生成した撮影データと情報端末300の位置情報とに基づいて特定された場所の情報を利用して、DBサーバ200から規則に関する情報を検出する(S101)。 The rule information detection unit 110 detects information about the rule from the DB server 200 by using the information of the location specified based on the shooting data generated by the information terminal 300 and the position information of the information terminal 300 (S101). ..

通知部120は、規則情報検出部110が検出した規則に関する情報を、対象者に向けて通知する(S102)。 The notification unit 120 notifies the target person of information about the rule detected by the rule information detection unit 110 (S102).

以上のように、第1の実施形態にかかる情報処理装置100は、場所に応じて定められた規則に関する情報と場所の情報とを関連付けて格納するデータベースから、対象者が所持する情報端末により生成された撮影データと情報端末の位置情報とに基づいて特定された場所の情報を利用して、規則に関する情報を検出する。そして、情報処理装置100は、検出された規則に関する情報を、対象者に向けて通知する。この構成により、情報処理装置100は、情報端末300を所持する人物、すなわち対象者に、対象者が存在する場所で定められた規則に関する情報を知らせることができる。したがって、第1の実施形態にかかる情報処理装置100は、対象の人物に、場所に応じた法規やマナーに関する情報の通知を行うことが可能になるという効果が得られる。 As described above, the information processing apparatus 100 according to the first embodiment is generated by the information terminal possessed by the target person from the database that stores the information on the rules determined according to the location and the information on the location in association with each other. Information on the rule is detected by using the information of the location specified based on the captured shooting data and the location information of the information terminal. Then, the information processing device 100 notifies the target person of the information regarding the detected rule. With this configuration, the information processing apparatus 100 can inform the person who owns the information terminal 300, that is, the target person, about the information regarding the rules determined in the place where the target person exists. Therefore, the information processing device 100 according to the first embodiment has an effect that it is possible to notify the target person of information on laws and manners according to the place.

<第2の実施形態>
次に、第2の実施形態にかかる情報処理装置を含む情報処理システムについて説明する。
<Second embodiment>
Next, an information processing system including the information processing device according to the second embodiment will be described.

図4は、第2の実施形態にかかる情報処理システム1001の構成の一例を模式的に示す図である。図5は、情報処理システム1001の機能構成の一例を示すブロック図である。図4及び図5に示す情報処理システム1001は、第1の実施形態における情報処理装置100に代わり、情報処理装置101を備え、それ以外については、第1の実施形態で説明した情報処理システム1000と同様である。つまり、情報処理システム1001は、情報処理装置101と、DBサーバ200と、情報端末300とを備える。 FIG. 4 is a diagram schematically showing an example of the configuration of the information processing system 1001 according to the second embodiment. FIG. 5 is a block diagram showing an example of the functional configuration of the information processing system 1001. The information processing system 1001 shown in FIGS. 4 and 5 includes an information processing device 101 instead of the information processing device 100 in the first embodiment, and other than that, the information processing system 1000 described in the first embodiment. Is similar to. That is, the information processing system 1001 includes an information processing device 101, a DB server 200, and an information terminal 300.

また、図4の例では、以下のような状況において設置された情報処理システム1001を示している。人物(すなわち対象者)は、眼鏡型の情報端末300を装着している。情報端末300は、情報端末300が有するカメラを用いて対象者の周囲を撮影し、撮影データを生成する。また、情報端末300は、対象者の位置情報を取得する。情報処理装置101は、情報端末300から受け取った撮影データと位置情報とに基づいて、DBサーバ200から規則に関する情報を検出する。そして、情報処理装置101は、検出した規則に関する情報を、情報端末300を介して人物に通知する。このとき、情報端末300は、眼鏡のレンズ部分が透過型のディスプレイ(すなわち、対象者がディスプレイ越しに周囲を視認可能なディスプレイ)であり、そのディスプレイに規則に関する情報を表示する。 Further, in the example of FIG. 4, the information processing system 1001 installed in the following situations is shown. The person (that is, the target person) is wearing a glasses-type information terminal 300. The information terminal 300 uses the camera of the information terminal 300 to take a picture of the surroundings of the target person and generate shooting data. In addition, the information terminal 300 acquires the position information of the target person. The information processing device 101 detects information about the rules from the DB server 200 based on the shooting data and the position information received from the information terminal 300. Then, the information processing device 101 notifies the person of the information regarding the detected rule via the information terminal 300. At this time, the information terminal 300 is a transmissive display (that is, a display in which the subject can see the surroundings through the display), and the information terminal 300 displays information on the rules on the display.

[情報端末300の詳細]
図5に示すように、情報端末300は、撮影部310と、位置情報取得部320と、提示部330とを備える。
[Details of Information Terminal 300]
As shown in FIG. 5, the information terminal 300 includes a photographing unit 310, a position information acquisition unit 320, and a presentation unit 330.

撮影部310は、対象者の周囲を撮影し、撮影データを生成する。撮影データは、動画像を構成する複数のフレームのそれぞれであってもよいし、静止画像であってもよい。撮影部310は、図4の例におけるカメラに相当する。撮影部310は、例えば、対象者の視線方向の一定範囲を撮影してもよいし、対象者の視界を超える範囲を撮影してもよい。また、図4の例では、情報端末300は、一つのカメラを備えているが、カメラは複数備えられていてもよい。すなわち撮影部310は、複数の方向を撮影してもよい。なお、撮影部310は、マイクを含み、音を録音してもよい。このとき撮影データには、映像とともに音が含まれる。また、撮影部310は、撮影データに、撮影した時刻の情報を付加してもよい。撮影部310は、撮影手段の一例である。 The photographing unit 310 photographs the surroundings of the subject and generates shooting data. The shooting data may be each of a plurality of frames constituting the moving image, or may be a still image. The photographing unit 310 corresponds to the camera in the example of FIG. The photographing unit 310 may, for example, photograph a certain range in the line-of-sight direction of the target person, or may photograph a range beyond the field of view of the target person. Further, in the example of FIG. 4, the information terminal 300 is provided with one camera, but a plurality of cameras may be provided. That is, the photographing unit 310 may photograph in a plurality of directions. The photographing unit 310 may include a microphone and record sound. At this time, the shooting data includes sound as well as video. Further, the shooting unit 310 may add information on the shooting time to the shooting data. The photographing unit 310 is an example of an imaging means.

位置情報取得部320は、情報端末300の位置情報を取得する。第2の実施形態において、位置情報は、情報端末300が存在する座標を示す情報である。位置情報取得部320は、例えば、GPS(Global Positioning System)を用いて位置情報を取得するが、これに限らない。位置情報取得部320は、他のGNSS(Global Navigation Satellite System)を用いて位置情報を取得してもよい。位置情報取得部320は、位置情報取得手段の一例である。 The position information acquisition unit 320 acquires the position information of the information terminal 300. In the second embodiment, the position information is information indicating the coordinates where the information terminal 300 exists. The position information acquisition unit 320 acquires position information using, for example, GPS (Global Positioning System), but is not limited to this. The position information acquisition unit 320 may acquire position information using another GNSS (Global Navigation Satellite System). The position information acquisition unit 320 is an example of the position information acquisition means.

提示部330は、情報処理装置101から受け取った情報を人物に提示する。提示部330は、図4の例におけるディスプレイに相当する。この場合、提示部330は、情報処理装置101から受け取った情報をディスプレイに表示する。なお、図4の例において、情報端末300は、眼鏡型またはゴーグル型の端末を示している。これに代えて、情報端末300は、例えばヘッドマウントディスプレイであってもよい。提示部330は、提示手段の一例である。 The presentation unit 330 presents the information received from the information processing device 101 to the person. The presentation unit 330 corresponds to the display in the example of FIG. In this case, the presentation unit 330 displays the information received from the information processing device 101 on the display. In the example of FIG. 4, the information terminal 300 shows a glasses-type or goggles-type terminal. Instead, the information terminal 300 may be, for example, a head-mounted display. The presentation unit 330 is an example of presentation means.

[情報処理装置101の詳細]
図6は、情報処理装置101の機能構成の一例を示すブロック図である。情報処理装置101は、規則情報検出部110と、通知部120と、抽出部130と、場所特定部140とを備える。
[Details of Information Processing Device 101]
FIG. 6 is a block diagram showing an example of the functional configuration of the information processing device 101. The information processing device 101 includes a rule information detection unit 110, a notification unit 120, an extraction unit 130, and a location identification unit 140.

抽出部130は、情報端末300の撮影部310によって生成された撮影データを受信し、当該撮影データに含まれる抽出対象を抽出する。抽出対象は予め定められており、物体及び風景を含む。抽出部130は、例えば、撮影データに含まれる人物、建物、家具、食器及び乗り物等の個々の物体を抽出対象として抽出してもよいし、海、山及び森等の自然の風景、または市街地等の街の風景を抽出対象として抽出してもよい。 The extraction unit 130 receives the shooting data generated by the shooting unit 310 of the information terminal 300, and extracts the extraction target included in the shooting data. The extraction target is predetermined and includes objects and landscapes. For example, the extraction unit 130 may extract individual objects such as people, buildings, furniture, tableware and vehicles included in the shooting data as extraction targets, natural landscapes such as the sea, mountains and forests, or urban areas. The scenery of the city such as, etc. may be extracted as the extraction target.

抽出部130は、例えば、撮影データから特徴量を取得し、取得した特徴量と抽出対象DBの抽出対象データとを利用して、抽出対象を抽出する。ここで、抽出対象データは、抽出対象を識別する情報と、抽出対象の特徴量とを関連付けたデータである。抽出対象データを格納する抽出対象DBは、DBサーバ200に格納されてもよいし、情報処理装置101が備える、図示しない記憶装置に格納されてもよい。また、この抽出対象の検出手法の例に限らず、抽出部130が、予め抽出対象の画像データを保持しておき、画像データを用いたテンプレートマッチングによって、撮影データに含まれる抽出対象を検出してもよい。抽出部130は、抽出手段の一例である。 For example, the extraction unit 130 acquires a feature amount from the shooting data, and extracts the extraction target by using the acquired feature amount and the extraction target data of the extraction target DB. Here, the extraction target data is data in which the information for identifying the extraction target is associated with the feature amount of the extraction target. The extraction target DB that stores the extraction target data may be stored in the DB server 200, or may be stored in a storage device (not shown) included in the information processing device 101. Further, not limited to the example of the extraction target detection method, the extraction unit 130 holds the image data of the extraction target in advance and detects the extraction target included in the shooting data by template matching using the image data. You may. The extraction unit 130 is an example of the extraction means.

場所特定部140は、対象者が所持する情報端末300が存在する場所を特定することによって、対象者が存在する場所を特定する。具体的には、場所特定部140は、情報端末300から位置情報を取得する。また、場所特定部140は、抽出部130によって抽出された抽出対象の情報を取得する。そして、場所特定部140は、取得した位置情報及び抽出対象の情報を用いて、情報端末300が存在する場所を特定する。例えば、場所特定部140は、位置情報に示される座標に基づいて、情報端末300が存在する国または都市を含む地域を特定する。さらに、場所特定部140は、抽出対象の情報に基づいて、情報端末300が存在する施設、または情報端末が存在する場所の風景を含む環境を特定する。例えば、場所特定部140は、抽出対象の情報として、車及び信号機が検出されていた場合に、情報端末300が路上に存在する、と特定してもよい。 The location specifying unit 140 identifies the location where the target person exists by specifying the location where the information terminal 300 possessed by the target person exists. Specifically, the location identification unit 140 acquires location information from the information terminal 300. In addition, the location specifying unit 140 acquires the information of the extraction target extracted by the extraction unit 130. Then, the location specifying unit 140 identifies the location where the information terminal 300 exists by using the acquired position information and the information to be extracted. For example, the location identification unit 140 identifies an area including a country or a city in which the information terminal 300 exists, based on the coordinates shown in the location information. Further, the location specifying unit 140 identifies an environment including a facility where the information terminal 300 exists or a landscape of a place where the information terminal exists, based on the information to be extracted. For example, the location specifying unit 140 may specify that the information terminal 300 exists on the road when a car or a traffic light is detected as the information to be extracted.

規則情報検出部110は、情報端末300から受信した撮影データに含まれる抽出対象の情報と、情報端末300の位置情報とに基づいて、DBサーバ200から規則に関する情報を検出する。具体的には、撮影データと位置情報とに基づいて場所特定部140が特定した、対象者が存在する場所の情報を、規則情報検出部110が取得する。規則情報検出部110は、DBサーバ200にアクセスし、取得した場所の情報を含む規則情報を、DBサーバ200に格納される規則情報DBから特定し、規則に関する情報を検出する。 The rule information detection unit 110 detects information about the rule from the DB server 200 based on the information to be extracted included in the shooting data received from the information terminal 300 and the position information of the information terminal 300. Specifically, the rule information detection unit 110 acquires information on the location where the target person exists, which is specified by the location identification unit 140 based on the shooting data and the position information. The rule information detection unit 110 accesses the DB server 200, identifies the rule information including the acquired location information from the rule information DB stored in the DB server 200, and detects the information related to the rule.

図7は、規則情報DBの一例を示す図である。規則情報DBには、「場所」と、「規則」と、「注意喚起情報」との情報が関連付けられている規則情報が格納されている。ここで、注意喚起情報は、情報処理装置101が、情報端末300を介して対象者に通知する、規則に関する情報である。また、図7に示すレコードの各行は、規則情報を示す。例えば、一行目のレコードの規則情報は、「A国」の「路上」には、「喫煙をしてはいけない」という規則が定められており、注意喚起情報として「禁煙指示」を表す情報が関連付けられていることが示されている。 FIG. 7 is a diagram showing an example of the rule information DB. The rule information DB stores rule information in which information of "location", "rule", and "warning information" is associated with each other. Here, the alert information is information related to the rules that the information processing device 101 notifies the target person via the information terminal 300. Further, each line of the record shown in FIG. 7 shows rule information. For example, as for the rule information of the record on the first line, the rule "Do not smoke" is stipulated on the "street" of "Country A", and the information indicating "No smoking instruction" is provided as warning information. It is shown to be associated.

規則情報検出部110は、場所特定部140が特定した場所の情報を含む規則情報が規則情報DBに格納されている場合、その規則情報に含まれる規則に関する情報を検出する。例えば、場所特定部140が特定した場所の情報に、「B国」及び「レストラン」を示す情報が含まれていた場合、規則情報検出部110は、図7に示す規則情報DBの四行目の規則に関する情報を検出する。 When the rule information including the information of the place specified by the place specifying unit 140 is stored in the rule information DB, the rule information detecting unit 110 detects the information about the rule included in the rule information. For example, when the information of the place specified by the place specifying unit 140 includes information indicating "Country B" and "restaurant", the rule information detecting unit 110 sets the fourth line of the rule information DB shown in FIG. Detect information about the rules of.

通知部120は、規則情報検出部110が検出した規則情報に含まれる規則に関する情報を、情報端末300に通知する。 The notification unit 120 notifies the information terminal 300 of information about the rules included in the rule information detected by the rule information detection unit 110.

[情報処理システム1001の動作]
次に、第2の実施形態における情報処理システム1001の動作を、図8及び図9を用いて説明する。なお、以下に説明する動作において、情報処理システム1001は、図4に示す状況において設置されているとする。すなわち、対象者となる人物が、眼鏡型の情報端末300を装着しているとする。また、DBサーバ200には、抽出対象を識別する情報と抽出対象の特徴量とを関連付けた抽出対象DBと、図7に示す規則情報DBとが格納されているとする。
[Operation of information processing system 1001]
Next, the operation of the information processing system 1001 in the second embodiment will be described with reference to FIGS. 8 and 9. In the operation described below, it is assumed that the information processing system 1001 is installed in the situation shown in FIG. That is, it is assumed that the target person is wearing the glasses-type information terminal 300. Further, it is assumed that the DB server 200 stores the extraction target DB in which the information for identifying the extraction target and the feature amount of the extraction target are associated with each other, and the rule information DB shown in FIG. 7.

図8は、情報処理システム1001の対象者への情報の通知に係る動作を説明する図である。まず、情報端末300の撮影部310は、対象者の視線方向の一定の範囲を撮影し、撮影データを生成する(S201)。位置情報取得部320は、情報端末300に備えられるGPSを用いて、情報端末300の位置情報、すなわち対象者の位置情報を取得する(S202)。情報端末300は、生成した撮影データと、取得した位置情報とを、情報処理装置101に送信する(S203)。 FIG. 8 is a diagram illustrating an operation related to notification of information to a target person of the information processing system 1001. First, the photographing unit 310 of the information terminal 300 photographs a certain range in the line-of-sight direction of the target person and generates shooting data (S201). The position information acquisition unit 320 acquires the position information of the information terminal 300, that is, the position information of the target person by using the GPS provided in the information terminal 300 (S202). The information terminal 300 transmits the generated shooting data and the acquired position information to the information processing device 101 (S203).

情報処理装置101は、情報端末300から撮影データと、位置情報とを受信する(S204)。そして、情報処理装置101は、規則情報取得処理を開始する(S205)。図9は、S205の処理における、情報処理装置101の動作を説明するフローチャートである。抽出部130は、DBサーバ200に格納された抽出対象DBを用いて、撮影データに含まれる抽出対象を抽出する(S301)。例えば、抽出部130は、抽出対象の情報として、料理、食器及びテーブルを検出したとする。抽出部130は、場所特定部140に、抽出した抽出対象の情報を送る。 The information processing device 101 receives the shooting data and the position information from the information terminal 300 (S204). Then, the information processing device 101 starts the rule information acquisition process (S205). FIG. 9 is a flowchart illustrating the operation of the information processing apparatus 101 in the process of S205. The extraction unit 130 uses the extraction target DB stored in the DB server 200 to extract the extraction target included in the shooting data (S301). For example, it is assumed that the extraction unit 130 detects dishes, tableware, and tables as information to be extracted. The extraction unit 130 sends the extracted information of the extraction target to the location identification unit 140.

場所特定部140は、情報端末300から取得した位置情報と、抽出部130から取得した抽出対象の情報とを用いて場所を特定する(S302)。ここでは、場所特定部140は、位置情報と、料理、食器及びテーブルを含む抽出対象の情報とに基づいて、情報端末300が「A国」の「レストラン」に存在すると特定したとする。場所特定部140は、特定した場所の情報を規則情報検出部110に送る。 The location specifying unit 140 specifies a location using the location information acquired from the information terminal 300 and the information of the extraction target acquired from the extraction unit 130 (S302). Here, it is assumed that the location specifying unit 140 identifies that the information terminal 300 exists in the "restaurant" of "Country A" based on the location information and the information of the extraction target including dishes, tableware, and tables. The location identification unit 140 sends information on the specified location to the rule information detection unit 110.

規則情報検出部110は、場所特定部140が特定した場所の情報が、DBサーバ200に格納された規則情報DBに存在するか否かを判定する(S303)。規則情報DBに、特定した場所の情報が存在する場合(S303の「Yes」)、規則情報検出部110は、その場所の情報を有する規則情報に含まれる規則に関する情報を検出する(S304)。例えば、情報端末300の存在する場所が「A国」及び「レストラン」と特定されていた場合、特定された場所の情報は、図7に示す規則情報DBにおいて二行目のレコードに示される規則情報の場所の情報と合致する。この場合、規則情報検出部110は、二行目の規則に関する情報を検出する。規則情報検出部110は、検出した規則に関する情報を通知部120に送る。 The rule information detection unit 110 determines whether or not the information of the location specified by the location identification unit 140 exists in the rule information DB stored in the DB server 200 (S303). When the information of the specified place exists in the rule information DB (“Yes” in S303), the rule information detection unit 110 detects the information about the rule included in the rule information having the information of the place (S304). For example, when the place where the information terminal 300 exists is specified as "Country A" and "Restaurant", the information of the specified place is the rule shown in the record of the second line in the rule information DB shown in FIG. Matches the information in the location of the information. In this case, the rule information detection unit 110 detects the information regarding the rule in the second line. The rule information detection unit 110 sends information regarding the detected rule to the notification unit 120.

通知部120は、規則情報検出部110が検出した規則に関する情報を、情報端末300に通知する(S305)。例えば、図7の規則情報DBにおける二行目の規則に関する情報が検出された場合、通知部120は、「音をたてないようにする指示」の情報を情報端末300に通知する。 The notification unit 120 notifies the information terminal 300 of the information regarding the rule detected by the rule information detection unit 110 (S305). For example, when the information regarding the rule of the second line in the rule information DB of FIG. 7 is detected, the notification unit 120 notifies the information terminal 300 of the information of "instruction to stop making a sound".

S303の処理において、場所特定部140が特定した場所の情報が、規則情報DBに存在しない場合、規則情報検出部110は、規則情報が検出されなかったことを示す情報を通知部120に送る。通知部120は、規則情報が検出されなかったことを示す情報を情報端末300に通知する(S306)。 In the process of S303, when the information of the place specified by the place specifying unit 140 does not exist in the rule information DB, the rule information detecting unit 110 sends information indicating that the rule information has not been detected to the notification unit 120. The notification unit 120 notifies the information terminal 300 of information indicating that the rule information has not been detected (S306).

図8に戻り、情報端末300の提示部330は、情報処理装置101が規則に関する情報を検出したか否かを判定する(S206)。情報処理装置101が規則に関する情報を検出した場合、すなわち、提示部330が情報処理装置101から注意喚起情報(規則に関する情報)を受信した場合(S206の「Yes」)、注意喚起情報を提示する。例えば、提示部330が「音をたてないようにする指示」の情報を受け取った場合、情報端末300のディスプレイに「音をたてないようにする指示」の情報を表示する。 Returning to FIG. 8, the presentation unit 330 of the information terminal 300 determines whether or not the information processing device 101 has detected information regarding the rule (S206). When the information processing device 101 detects information about the rule, that is, when the presenting unit 330 receives the alert information (information about the rule) from the information processing device 101 (“Yes” in S206), the alert information is presented. .. For example, when the presenting unit 330 receives the information of "instruction to stop making sound", the information of "instruction to stop making sound" is displayed on the display of the information terminal 300.

図10は、提示部330が注意喚起情報を提示する一例を示す図である。図10には、テーブルの上に置かれた料理と食器とが示されている。提示部330は、例えば図10に示すように、ディスプレイに「食事中に音をたててはいけません!」と文字を表示する。 FIG. 10 is a diagram showing an example in which the presentation unit 330 presents the alert information. FIG. 10 shows the dishes and tableware placed on the table. The presentation unit 330 displays the characters "Don't make noise during meals!" On the display, for example, as shown in FIG.

S206の処理において、提示部330は、規則情報が検出されなかったことを示す情報を情報処理装置101から受信した場合(S206の「No」)、S207の処理は行えないので、フローを終了する。 In the processing of S206, when the presentation unit 330 receives information indicating that the rule information has not been detected from the information processing device 101 (“No” in S206), the processing of S207 cannot be performed, so the flow is terminated. ..

なお、規則情報が検出されなかった場合、提示部330は、提示する注意喚起情報がないことを示す情報を提示してもよい。 If the rule information is not detected, the presentation unit 330 may present information indicating that there is no warning information to be presented.

また、図8に示す動作において、撮影データを生成する処理(S201)と、位置情報を取得する処理(S202)とは、行われる順番が入れ替えられてもよいし、同時に行われてもよい。 Further, in the operation shown in FIG. 8, the process of generating the shooting data (S201) and the process of acquiring the position information (S202) may be performed in the order in which they are performed, or may be performed at the same time.

以上のように、第2の実施形態にかかる情報処理装置101は、規則情報DBから、対象者が所持する情報端末300により生成された撮影データと情報端末300の位置情報とに基づいて特定された場所の情報を利用して規則に関する情報を検出する。そして、情報処理装置101は、検出された規則に関する情報を、対象者に向けて通知する。この構成により、情報処理装置101は、情報端末300を所持する対象者が存在する場所を特定し、特定された場所に応じた規則に関する情報を、例えば、情報端末300を介して対象者に通知することができる。すなわち、第2の実施形態にかかる情報処理装置101は、対象の人物に、場所に応じた法規やマナーに関する情報の通知を行うことが可能になるという効果が得られる。 As described above, the information processing device 101 according to the second embodiment is specified from the rule information DB based on the shooting data generated by the information terminal 300 possessed by the target person and the position information of the information terminal 300. Use the location information to detect information about the rule. Then, the information processing device 101 notifies the target person of the information regarding the detected rule. With this configuration, the information processing device 101 identifies the place where the target person who owns the information terminal 300 exists, and notifies the target person of information about the rules according to the specified place, for example, via the information terminal 300. can do. That is, the information processing device 101 according to the second embodiment has an effect that it is possible to notify the target person of information on laws and manners according to the place.

また、第2の実施形態にかかる情報処理装置101は、上述した構成により、対象者が規則に違反する行動をとらないように、対象者に注意喚起を行うことができる。 In addition, the information processing device 101 according to the second embodiment can alert the target person so that the target person does not act in violation of the rules by the above-described configuration.

<第3の実施形態>
次に、第3の実施形態にかかる情報処理装置を含む情報処理システムについて説明する。
<Third embodiment>
Next, an information processing system including the information processing device according to the third embodiment will be described.

図11は、第3の実施形態にかかる情報処理システム1002の機能構成の一例を示すブロック図である。図11に示すように、情報処理システム1002は、第2の実施形態における情報処理装置101に代わり、情報処理装置102を備え、それ以外については、第2の実施形態で説明した情報処理システム1001と同様である。つまり、情報処理システム1002は、情報処理装置102と、DBサーバ200と、情報端末300とを備える。第3の実施形態の説明では、図11に示す情報処理システム1002の構成及び動作が、第2の実施形態の説明と重複する内容については説明を省略する。 FIG. 11 is a block diagram showing an example of the functional configuration of the information processing system 1002 according to the third embodiment. As shown in FIG. 11, the information processing system 1002 includes an information processing device 102 instead of the information processing device 101 in the second embodiment, and other than that, the information processing system 1001 described in the second embodiment. Is similar to. That is, the information processing system 1002 includes an information processing device 102, a DB server 200, and an information terminal 300. In the description of the third embodiment, the description of the contents in which the configuration and operation of the information processing system 1002 shown in FIG. 11 overlaps with the description of the second embodiment will be omitted.

図12は、情報処理装置102の機能構成の一例を示すブロック図である。情報処理装置102は、規則情報検出部111と、通知部120と、抽出部130と、場所特定部140と、行動検出部150とを備える。 FIG. 12 is a block diagram showing an example of the functional configuration of the information processing device 102. The information processing device 102 includes a rule information detection unit 111, a notification unit 120, an extraction unit 130, a location identification unit 140, and an action detection unit 150.

行動検出部150は、撮影データに基づいて対象者の行動を検出する。具体的には、行動検出部150は、撮影データに含まれる対象者(すなわち、撮影データに映る対象者)の情報、または撮影データに含まれる音の情報に基づいて、対象者の行動を検出する。例えば、行動検出部150は、学習により得られた人物の行動パターンの情報を利用して、撮影データに含まれる対象者の動作に当てはまる行動パターンを検出することによって、対象者の行動を検出してもよい。また、行動検出部150は、音の特徴量と人物の行動とを関連付けたDBに基づいて、撮影データに含まれる音から抽出される特徴量を用いて、対象者が歌っていること、及び対象者が食事をしていること等の行動を検出してもよい。行動検出の手法は、撮影データから対象者の行動を検出できれば、いずれの手法を採用してもよく、上述した手法に限定されない。行動検出部150は、行動検出手段の一例である。 The behavior detection unit 150 detects the behavior of the subject based on the shooting data. Specifically, the behavior detection unit 150 detects the behavior of the target person based on the information of the target person (that is, the target person reflected in the shooting data) included in the shooting data or the sound information included in the shooting data. To do. For example, the behavior detection unit 150 detects the behavior of the target person by detecting the behavior pattern applicable to the behavior of the target person included in the shooting data by using the information of the behavior pattern of the person obtained by learning. You may. In addition, the action detection unit 150 uses the feature amount extracted from the sound included in the shooting data based on the DB that associates the feature amount of the sound with the behavior of the person, and that the subject is singing. Behaviors such as the subject eating may be detected. The behavior detection method may be any method as long as the behavior of the subject can be detected from the photographed data, and is not limited to the above-mentioned method. The behavior detection unit 150 is an example of the behavior detection means.

規則情報検出部111は、場所特定部140が特定した場所の情報と、行動検出部150が検出した行動の情報とを含む規則情報を、規則情報DBから検出する。 The rule information detection unit 111 detects the rule information including the information of the place specified by the place identification unit 140 and the information of the action detected by the action detection unit 150 from the rule information DB.

図13は、第3の実施形態にかかる規則情報DBの一例を示す図である。図13に示す規則情報DBにおける規則情報は、「場所」と、「行動」と、「規則」と、「注意喚起情報」との情報が関連付けられている情報である。ここで、「行動」は、人物の行動の情報を示す。 FIG. 13 is a diagram showing an example of the rule information DB according to the third embodiment. The rule information in the rule information DB shown in FIG. 13 is information in which information of "place", "action", "rule", and "warning information" is associated with each other. Here, "behavior" indicates information on the behavior of a person.

規則情報検出部111は、場所特定部140が特定した場所の情報と、行動検出部150が検出した行動の情報とを含む規則情報が、規則情報DBに存在する場合、その規則情報に含まれる規則に関する情報を検出する。例えば、場所特定部140が特定した場所の情報に「A国」及び「路上」を示す情報が含まれ、行動検出部150が検出した行動の情報に「たばこの所持」が含まれていた場合、規則情報検出部110は、図13に示す規則情報DBの一行目の規則に関する情報を検出する。 When the rule information including the information of the place specified by the place specifying unit 140 and the information of the action detected by the action detecting unit 150 exists in the rule information DB, the rule information detecting unit 111 is included in the rule information. Detect information about rules. For example, when the information on the location specified by the location identification unit 140 includes information indicating "Country A" and "on the street", and the information on the behavior detected by the behavior detection unit 150 includes "possession of cigarettes". , The rule information detection unit 110 detects the information regarding the rule in the first line of the rule information DB shown in FIG.

次に、第3の実施形態における情報処理システム1002の動作を説明する。情報処理システム1002は、規則情報取得処理(図8に示すS205の処理)として、情報処理装置102が図14のフローチャートに示す処理を行い、それ以外の動作は第2の実施形態における情報処理システム1001の動作と同様の動作を行う。なお、以下に説明する動作において、情報処理システム1002は、図4に示す状況において設置されているとする。すなわち、対象者となる人物が、眼鏡型の情報端末300を装着しているとする。また、DBサーバ200には、図13に示す規則情報DBが格納されているとする。 Next, the operation of the information processing system 1002 in the third embodiment will be described. In the information processing system 1002, the information processing apparatus 102 performs the processing shown in the flowchart of FIG. 14 as the rule information acquisition processing (processing of S205 shown in FIG. 8), and the other operations are the information processing system in the second embodiment. The operation similar to the operation of 1001 is performed. In the operation described below, it is assumed that the information processing system 1002 is installed in the situation shown in FIG. That is, it is assumed that the target person is wearing the glasses-type information terminal 300. Further, it is assumed that the rule information DB shown in FIG. 13 is stored in the DB server 200.

図14は、第3の実施形態にかかる規則情報取得処理における情報処理装置102の動作を説明するフローチャートである。抽出部130は、DBサーバ200に格納された抽出対象DBを用いて、撮影データに含まれる抽出対象を抽出する(S401)。場所特定部140は、情報端末300から取得した位置情報と、抽出部130から取得した抽出対象の情報とを用いて場所を特定する(S402)。ここでは、場所特定部140は、情報端末300が「A国」の「路上」に存在すると特定したとする。 FIG. 14 is a flowchart illustrating the operation of the information processing apparatus 102 in the rule information acquisition process according to the third embodiment. The extraction unit 130 uses the extraction target DB stored in the DB server 200 to extract the extraction target included in the shooting data (S401). The location specifying unit 140 specifies a location using the location information acquired from the information terminal 300 and the information of the extraction target acquired from the extraction unit 130 (S402). Here, it is assumed that the location specifying unit 140 identifies that the information terminal 300 exists on the "street" of "Country A".

行動検出部150は、撮影データに含まれる対象者の情報、または撮影データに含まれる音の情報に基づいて、対象者の行動を検出する(S403)。例えば、行動検出部150は、対象者の「たばこの所持」を検出したとする。 The behavior detection unit 150 detects the behavior of the target person based on the information of the target person included in the shooting data or the sound information included in the shooting data (S403). For example, it is assumed that the behavior detection unit 150 detects the subject's "possession of cigarettes".

規則情報検出部111は、場所特定部140が特定した場所の情報と、行動検出部150が検出した対象者の行動の情報との両方を含む規則情報が、DBサーバ200に格納された規則情報DBに存在するか否かを判定する(S404)。規則情報DBに、特定した場所の情報と検出した行動の情報とが存在する場合(S404の「Yes」)、規則情報検出部111は、その情報を有する規則情報に含まれる規則に関する情報を検出する(S405)。例えば、特定した場所の情報として「A国」及び「路上」が特定され、検出した対象者の行動の情報として「たばこの所持」が検出された場合、規則情報検出部111は、図13の規則情報DBにおいて一行目の規則に関する情報を検出する。 The rule information detection unit 111 stores the rule information including both the location information specified by the location identification unit 140 and the behavior information of the target person detected by the behavior detection unit 150 in the DB server 200. It is determined whether or not it exists in the DB (S404). When the rule information DB contains the information of the specified place and the information of the detected action (“Yes” in S404), the rule information detection unit 111 detects the information about the rule included in the rule information having the information. (S405). For example, when "Country A" and "on the street" are specified as the information of the specified place and "possession of cigarettes" is detected as the information of the behavior of the detected target person, the rule information detection unit 111 performs the rule information detection unit 111 in FIG. The information about the rule of the first line is detected in the rule information DB.

通知部120は、規則情報検出部111が検出した規則情報に含まれる注意喚起情報を、情報端末300に通知する(S406)。例えば、図13の規則情報DBにおける一行目の規則情報が検出された場合、通知部120は、「禁煙指示」を情報端末300に通知する。S404の処理において、特定した場所の情報と検出した対象者の行動とを含む規則情報が、規則情報DBに存在しない場合、規則情報検出部111は、規則情報が検出されなかったことを示す情報を通知部120に送る。通知部120は、規則情報が検出されなかったことを示す情報を情報端末300に送信する(S407)。 The notification unit 120 notifies the information terminal 300 of the alert information included in the rule information detected by the rule information detection unit 111 (S406). For example, when the rule information in the first line in the rule information DB of FIG. 13 is detected, the notification unit 120 notifies the information terminal 300 of the "smoking cessation instruction". In the process of S404, when the rule information including the information of the specified place and the detected behavior of the target person does not exist in the rule information DB, the rule information detection unit 111 indicates that the rule information has not been detected. Is sent to the notification unit 120. The notification unit 120 transmits information indicating that the rule information has not been detected to the information terminal 300 (S407).

情報端末300の提示部330は、情報処理装置101から注意喚起情報(規則に関する情報)を受信した場合、注意喚起情報を提示する。図15は、提示部330が注意喚起情報を提示する一例を示す図である。情報端末300が、図4に示すような眼鏡型の端末であり、眼鏡のレンズ部分が透過型のディスプレイである場合、例えば図15に示すように、提示部330は、ディスプレイに「路上で喫煙してはいけません!」と文字を表示する。また、提示部330は、図15に示すように、対象者の手付近に「×」の記号を表示する。このように提示部330は、文字のみでなく記号を用いて注意喚起情報を提示してもよい。 When the presentation unit 330 of the information terminal 300 receives the alert information (information about the rules) from the information processing device 101, the presenter unit 330 presents the alert information. FIG. 15 is a diagram showing an example in which the presentation unit 330 presents the alert information. When the information terminal 300 is a spectacle-shaped terminal as shown in FIG. 4, and the lens portion of the spectacles is a transmissive display, for example, as shown in FIG. 15, the presentation unit 330 displays on the display "smoking on the street." Do not do it! "Is displayed. Further, as shown in FIG. 15, the presentation unit 330 displays a symbol of “x” near the hand of the subject. In this way, the presentation unit 330 may present the alert information using not only characters but also symbols.

以上のように、第3の実施形態にかかる情報処理装置102は、撮影データに基づいて、対象者の行動をさらに検出し、検出された対象者の行動の情報と、対象者が存在する場所の情報とを用いて、規則に関する情報を検出する。この構成により、情報処理装置102は、対象者の行動を踏まえて、規則に関する情報を検出するので、対象者が存在する場所と、対象者の行動とに、より適合する規則に関する情報を対象者に通知することができる。すなわち、第3の実施形態にかかる情報処理装置102は、対象の人物に、場所に応じた法規やマナーに関する情報の通知を行うことが可能になるという効果が得られる。 As described above, the information processing device 102 according to the third embodiment further detects the behavior of the target person based on the shooting data, and the detected behavior information of the target person and the place where the target person exists. Use the information in to detect information about the rule. With this configuration, the information processing device 102 detects information about the rules based on the behavior of the target person, so that the target person can obtain information about the rules that are more suitable for the place where the target person exists and the behavior of the target person. Can be notified to. That is, the information processing device 102 according to the third embodiment has an effect that it is possible to notify the target person of information on laws and manners according to the place.

また、第3の実施形態にかかる情報処理装置102は、上述した構成により、対象者が規則に違反する行動をとった場合に、対象者に規則違反であることを通知することができる。また、情報処理装置102は、対象者が規則に違反すると予測される行動をとった場合に、対象者に注意喚起を行うことができる。 Further, the information processing apparatus 102 according to the third embodiment can notify the target person of the rule violation when the target person takes an action that violates the rule by the above-described configuration. In addition, the information processing device 102 can alert the target person when the target person takes an action that is predicted to violate the rules.

[変形例1]
情報端末は、情報処理装置と一体化されてもよい。
[Modification 1]
The information terminal may be integrated with the information processing device.

図16は、変形例1にかかる情報処理システム1002の構成の一例を示すブロック図である。図16に示すように、変形例1にかかる情報処理システム1002では、情報端末300に情報処理装置102が一体化されている。すなわち、変形例1にかかる情報端末300は、撮影部310、位置情報取得部320、及び提示部330に加え、規則情報検出部111、通知部120、抽出部130、場所特定部140及び行動検出部150をさらに備える。 FIG. 16 is a block diagram showing an example of the configuration of the information processing system 1002 according to the first modification. As shown in FIG. 16, in the information processing system 1002 according to the first modification, the information processing device 102 is integrated with the information terminal 300. That is, the information terminal 300 according to the first modification is the rule information detection unit 111, the notification unit 120, the extraction unit 130, the location identification unit 140, and the action detection unit, in addition to the photographing unit 310, the position information acquisition unit 320, and the presentation unit 330. A unit 150 is further provided.

変形例1にかかる情報処理システム1002の動作は、図14に示す規則情報取得処理の動作が、情報端末300内で行われることを除いて、第3の実施形態で説明した動作と同様である。 The operation of the information processing system 1002 according to the first modification is the same as the operation described in the third embodiment, except that the operation of the rule information acquisition process shown in FIG. 14 is performed in the information terminal 300. ..

変形例1にかかる情報端末300は、第3の実施形態において説明した情報処理装置102と同様の効果を奏する。 The information terminal 300 according to the first modification has the same effect as the information processing device 102 described in the third embodiment.

なお、変形例1にかかる情報端末300は、情報処理装置102に代わり、情報処理装置100、または情報処理装置101と一体化されてもよい。 The information terminal 300 according to the first modification may be integrated with the information processing device 100 or the information processing device 101 instead of the information processing device 102.

[変形例2]
第2及び第3の実施形態において、情報端末300は眼鏡型の端末であり、眼鏡のレンズ部分が透過型のディスプレイである例について説明したが、情報端末300は、非透過のディスプレイを有していてもよい。すなわち、情報端末300を装着した対象者が、ディスプレイ越しに周囲の状況を視認することができないディスプレイを、情報端末300は有していてもよい。
[Modification 2]
In the second and third embodiments, the example in which the information terminal 300 is a spectacle-type terminal and the lens portion of the spectacles is a transmissive display has been described, but the information terminal 300 has a non-transmissive display. You may be. That is, the information terminal 300 may have a display in which the target person wearing the information terminal 300 cannot visually recognize the surrounding situation through the display.

このとき、情報端末300が稼働している間、提示部330は、撮影部310で生成された撮影データを表示する。そして、S207の情報を提示する処理において、提示部330は、撮影データに重畳して注意喚起情報を表示する。 At this time, while the information terminal 300 is in operation, the presentation unit 330 displays the shooting data generated by the shooting unit 310. Then, in the process of presenting the information of S207, the presentation unit 330 superimposes the shooting data and displays the alert information.

[変形例3]
各実施形態において、情報端末300は、眼鏡型の端末でなくともよい。
[Modification 3]
In each embodiment, the information terminal 300 does not have to be a glasses-type terminal.

例えば、情報端末300は、携帯電話、スマートフォン及びタブレット等の携帯端末であってもよい。このとき、対象者は周囲を撮影できるように携帯端末を所持すればよい。 For example, the information terminal 300 may be a mobile terminal such as a mobile phone, a smartphone, or a tablet. At this time, the subject may carry a mobile terminal so that he / she can take a picture of the surroundings.

[変形例4]
各実施形態において、情報端末300における提示部330の注意喚起情報の提示方法は、ディスプレイに表示することに限られない。
[Modification example 4]
In each embodiment, the method of presenting the alert information of the presentation unit 330 in the information terminal 300 is not limited to displaying on the display.

例えば、情報端末300は、スピーカを備えており、注意喚起情報を、音を用いて提示してもよい。 For example, the information terminal 300 is provided with a speaker, and the alert information may be presented by using sound.

また、情報端末300は、光源装置を備えており、注意喚起情報を、光を用いて提示してもよい。このとき、対象者が規則に違反する行動をとった場合に光源装置を発光させるようにしてもよい。 Further, the information terminal 300 is provided with a light source device, and the alert information may be presented by using light. At this time, the light source device may be made to emit light when the subject acts in violation of the rules.

また、情報端末300は、バイブレータを備えており、注意喚起情報を、振動を用いて提示してもよい。このとき、対象者が規則に違反する行動をとった場合、または対象者が規則に違反する虞のある行動をとった場合に、情報端末300を振動させるようにしてもよい。 Further, the information terminal 300 is provided with a vibrator, and the alert information may be presented by using vibration. At this time, the information terminal 300 may be vibrated when the target person takes an action that violates the rule or when the target person takes an action that may violate the rule.

なお、注意喚起情報は、音、光または振動の情報として、規則情報DBに格納されていてもよいし、注意喚起情報を音、光または振動の情報に変換する機能を、情報端末300または、情報処理装置が備えてもよい。 The alert information may be stored in the rule information DB as sound, light, or vibration information, and the information terminal 300 or the information terminal 300 has a function of converting the alert information into sound, light, or vibration information. An information processing device may be provided.

このように、情報端末300は、カメラと、スピーカ、光源装置、またはバイブレータとを備えた端末であってもよい。 As described above, the information terminal 300 may be a terminal including a camera and a speaker, a light source device, or a vibrator.

[変形例5]
各実施形態において、位置情報取得部320及び提示部330は、情報端末300に備えられていなくともよい。すなわち、情報処置装置と通信可能な装置であって、図示しない装置が位置情報取得部320及び提示部330を備えていてもよい。また、位置情報取得部320及び提示部330を、それぞれ異なる装置が備えていてもよい。
[Modification 5]
In each embodiment, the position information acquisition unit 320 and the presentation unit 330 do not have to be provided in the information terminal 300. That is, a device that can communicate with the information treatment device and is not shown may include a position information acquisition unit 320 and a presentation unit 330. Further, the position information acquisition unit 320 and the presentation unit 330 may be provided by different devices.

位置情報取得部320はが、情報端末300とは異なる装置に備えられる場合、位置情報取得部320を備える装置は、当該装置の位置情報を、情報端末300が撮影データを情報処理装置に送るタイミングに応じて、情報処理装置に送る。この場合、当該装置は、対象者によって所持され、例えば、撮影データの送信に合わせた対象者からの指令によって位置情報が送信される。 When the position information acquisition unit 320 is provided in a device different from the information terminal 300, the device including the position information acquisition unit 320 sends the position information of the device to the information processing device at the timing when the information terminal 300 sends the shooting data to the information processing device. Depending on the situation, it is sent to the information processing device. In this case, the device is possessed by the target person, and for example, the position information is transmitted by a command from the target person in accordance with the transmission of the shooting data.

また、情報処理装置は、位置情報及び撮影データに基づいて検出した規則に関する情報を、提示部330を備える装置に送る。このように、情報処理装置が、情報端末300とは異なる装置を介して対象者に規則に関する情報を通知してもよい。 Further, the information processing device sends information about the rule detected based on the position information and the shooting data to the device including the presentation unit 330. In this way, the information processing device may notify the target person of the information regarding the rule via a device different from the information terminal 300.

<情報処理装置のハードウェアの構成例>
上述した第1、第2及び第3の実施形態にかかる情報処理装置を構成するハードウェアについて説明する。図17は、各実施形態における情報処理装置を実現するコンピュータ装置のハードウェア構成の一例を示すブロック図である。図17が示す各ブロックは、各実施形態における情報処理装置及び情報処理方法を実現するコンピュータ装置10と、ソフトウェアとの組み合わせにより実現できる。
<Example of hardware configuration of information processing device>
The hardware constituting the information processing apparatus according to the first, second, and third embodiments described above will be described. FIG. 17 is a block diagram showing an example of a hardware configuration of a computer device that realizes the information processing device in each embodiment. Each block shown in FIG. 17 can be realized by a combination of software and a computer device 10 that realizes the information processing device and the information processing method in each embodiment.

図17に示すように、コンピュータ装置10は、プロセッサ11、RAM(Random Access Memory)12、ROM(Read Only Memory)13、記憶装置14、入出力インタフェース15、バス16、及びドライブ装置17を備える。 As shown in FIG. 17, the computer device 10 includes a processor 11, a RAM (Random Access Memory) 12, a ROM (Read Only Memory) 13, a storage device 14, an input / output interface 15, a bus 16, and a drive device 17.

記憶装置14は、プログラム(コンピュータプログラム)18を格納する。プロセッサ11は、RAM12を用いて本情報処理装置にかかるプログラム18を実行する。具体的には、例えば、プログラム18は、図3、または図8、図9及び図14に示す処理をコンピュータに実行させるプログラムを含む。プロセッサ11が、プログラム18を実行することに応じて、本情報処理装置の各構成要素(上述した、規則情報検出部110、111及び通知部120等)の機能が実現される。プログラム18は、ROM13に記憶されていてもよい。また、プログラム18は、記録媒体20に記録され、ドライブ装置17を用いて読み出されてもよいし、図示しない外部装置から図示しないネットワークを介してコンピュータ装置10に送信されてもよい。 The storage device 14 stores a program (computer program) 18. The processor 11 uses the RAM 12 to execute the program 18 related to the information processing apparatus. Specifically, for example, the program 18 includes a program that causes a computer to execute the processes shown in FIG. 3, or FIGS. 8, 9, and 14. When the processor 11 executes the program 18, the functions of each component of the information processing apparatus (the above-mentioned rule information detection units 110, 111, notification unit 120, etc.) are realized. The program 18 may be stored in the ROM 13. Further, the program 18 may be recorded on the recording medium 20 and read out using the drive device 17, or may be transmitted from an external device (not shown) to the computer device 10 via a network (not shown).

入出力インタフェース15は、周辺機器(キーボード、マウス、表示装置など)19とデータをやり取りする。入出力インタフェース15は、データを取得または出力する手段として機能する。バス16は、各構成要素を接続する。 The input / output interface 15 exchanges data with peripheral devices (keyboard, mouse, display device, etc.) 19. The input / output interface 15 functions as a means for acquiring or outputting data. The bus 16 connects each component.

なお、情報処理装置の実現方法には様々な変形例がある。例えば、情報処理装置は、専用の装置として実現することができる。また、情報処理装置は、複数の装置の組み合わせに基づいて実現することができる。 There are various variations in the method of realizing the information processing device. For example, the information processing device can be realized as a dedicated device. Further, the information processing device can be realized based on a combination of a plurality of devices.

各実施形態の機能における各構成要素を実現するためのプログラムを記録媒体に記録させ、該記録媒体に記録されたプログラムをコードとして読み出し、コンピュータにおいて実行する処理方法も各実施形態の範疇に含まれる。すなわち、コンピュータ読取可能な記録媒体も各実施形態の範囲に含まれる。また、上述のプログラムが記録された記録媒体、及びそのプログラム自体も各実施形態に含まれる。 The category of each embodiment also includes a processing method in which a program for realizing each component in the function of each embodiment is recorded on a recording medium, the program recorded on the recording medium is read out as a code, and the program is executed by a computer. .. That is, a computer-readable recording medium is also included in the scope of each embodiment. In addition, a recording medium on which the above-mentioned program is recorded and the program itself are also included in each embodiment.

該記録媒体は、例えばフロッピー(登録商標)ディスク、ハードディスク、光ディスク、光磁気ディスク、CD(Compact Disc)−ROM、磁気テープ、不揮発性メモリカード、またはROMであるが、この例に限らない。また該記録媒体に記録されたプログラムは、単体で処理を実行しているプログラムに限らず、他のソフトウェア、拡張ボードの機能と共同して、OS(Operating System)上で動作して処理を実行するプログラムも各実施形態の範疇に含まれる。 The recording medium is, for example, a floppy (registered trademark) disk, a hard disk, an optical disk, a magneto-optical disk, a CD (Compact Disc) -ROM, a magnetic tape, a non-volatile memory card, or a ROM, but is not limited to this example. The program recorded on the recording medium is not limited to a program that executes processing by itself, but operates on an OS (Operating System) in cooperation with other software and expansion board functions to execute processing. Programs to be implemented are also included in the category of each embodiment.

以上、上述した実施形態を参照して本開示を説明した。しかしながら、本開示は、上述した実施形態には限定されない。即ち、本開示は、本開示のスコープ内において、種々の上記開示要素の多様な組み合わせ乃至選択等、当業者が理解し得る様々な態様を適用することができる。 The present disclosure has been described above with reference to the above-described embodiments. However, the present disclosure is not limited to the embodiments described above. That is, within the scope of the present disclosure, various aspects that can be understood by those skilled in the art, such as various combinations or selections of the various disclosure elements, can be applied.

上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。 Some or all of the above embodiments may also be described, but not limited to:

(付記1)
場所に応じて定められた規則に関する情報と前記場所の情報とを関連付けて格納するデータベースから、対象者が所持する情報端末により生成された撮影データと前記情報端末の位置情報とに基づいて特定された場所の情報を利用して、前記規則に関する情報を検出する規則情報検出手段と、
検出された前記規則に関する情報を、前記対象者に向けて通知する通知手段と、を備える、
情報処理装置。
(Appendix 1)
It is identified based on the shooting data generated by the information terminal possessed by the subject and the location information of the information terminal from the database that stores the information on the rules determined according to the location in association with the information of the location. Rule information detecting means for detecting information about the rule by using the information of the location
A notification means for notifying the target person of the detected information regarding the rule is provided.
Information processing device.

(付記2)
前記撮影データに含まれる抽出対象を抽出する抽出手段をさらに備え、
前記規則情報検出手段は、当該抽出された抽出対象の情報と前記位置情報とに基づいて特定された前記場所の情報を利用して、前記規則に関する情報を検出する、
付記1に記載の情報処理装置。
(Appendix 2)
Further provided with an extraction means for extracting the extraction target included in the shooting data,
The rule information detecting means detects information about the rule by using the information of the place specified based on the extracted information of the extraction target and the position information.
The information processing device according to Appendix 1.

(付記3)
前記撮影データに基づいて、前記対象者の行動を検出する行動検出手段をさらに備え、
前記データベースは、人物の行動の情報をさらに前記規則に関する情報に関連付けて格納し、
前記規則情報検出手段は、検出された前記対象者の行動の情報も利用して前記規則に関する情報を検出する、
付記1または2に記載の情報処理装置。
(Appendix 3)
A behavior detection means for detecting the behavior of the subject based on the shooting data is further provided.
The database stores information on the behavior of a person in association with information on the rule.
The rule information detecting means detects information about the rule by using the detected behavior information of the target person.
The information processing device according to Appendix 1 or 2.

(付記4)
前記データベースは、前記場所に関わる音の情報をさらに前記規則に関する情報に関連付けて格納し、
前記規則情報検出手段は、前記情報端末に備えられているマイクにより取得された音の情報も利用して前記規則に関する情報を検出する、
付記1乃至3のいずれか一項に記載の情報処理装置。
(Appendix 4)
The database further stores sound information relating to the location in association with information relating to the rule.
The rule information detecting means detects information about the rule by using sound information acquired by a microphone provided in the information terminal.
The information processing device according to any one of Supplementary note 1 to 3.

(付記5)
付記1乃至4のいずれか一項に記載の情報処理装置と、前記情報端末とを備え、
前記情報端末は、
前記撮影データを生成する撮影手段と、
前記位置情報を取得する位置情報取得手段と、
前記規則に関する情報を提示する提示手段と、
を有する、
情報処理システム。
(Appendix 5)
The information processing device according to any one of Supplementary note 1 to 4 and the information terminal are provided.
The information terminal is
A shooting means for generating the shooting data and
The position information acquisition means for acquiring the position information and
A means of presenting information about the rule and
Have,
Information processing system.

(付記6)
前記提示手段は、前記規則に関する情報を音、光、もしくは振動を用いて提示する、または前記規則に関する情報を表示して提示する、付記5に記載の情報処理システム。
(Appendix 6)
The information processing system according to Appendix 5, wherein the presentation means presents information about the rule using sound, light, or vibration, or displays and presents information about the rule.

(付記7)
場所に応じて定められた規則に関する情報と前記場所の情報とを関連付けて格納するデータベースから、対象者が所持する情報端末により生成された撮影データと前記情報端末の位置情報とに基づいて特定された場所の情報を利用して、前記規則に関する情報を検出し、
検出した前記規則に関する情報を、前記対象者に向けて通知する、
情報処理方法。
(Appendix 7)
It is identified based on the shooting data generated by the information terminal possessed by the subject and the location information of the information terminal from the database that stores the information on the rules determined according to the location in association with the information of the location. Use the location information to detect information about the rule
Notify the target person of the detected information regarding the rule,
Information processing method.

(付記8)
前記撮影データに含まれる抽出対象を抽出し、
当該抽出した抽出対象の情報と前記位置情報とに基づいて特定された前記場所の情報を利用して、前記規則に関する情報を検出する、
付記7に記載の情報処理方法。
(Appendix 8)
The extraction target included in the shooting data is extracted, and the extraction target is extracted.
Information on the rule is detected by using the information on the location specified based on the extracted information on the extraction target and the location information.
The information processing method according to Appendix 7.

(付記9)
前記撮影データに基づいて、前記対象者の行動を検出し、
前記データベースは、人物の行動の情報をさらに前記規則に関する情報に関連付けて格納し、
検出した前記対象者の行動の情報も利用して前記規則に関する情報を検出する、
付記7または8に記載の情報処理方法。
(Appendix 9)
Based on the shooting data, the behavior of the subject is detected.
The database stores information on the behavior of a person in association with information on the rule.
Information on the rule is detected by using the detected behavior information of the target person.
The information processing method according to Appendix 7 or 8.

(付記10)
前記データベースは、音の情報をさらに関連付けて格納し、
前記情報端末に備えられているマイクにより取得された音の情報も利用して前記規則に関する情報を検出する、
付記7乃至9のいずれか一項に記載の情報処理方法。
(Appendix 10)
The database further correlates and stores sound information.
Information on the rule is also detected by using the sound information acquired by the microphone provided in the information terminal.
The information processing method according to any one of Supplementary note 7 to 9.

(付記11)
前記撮影データを生成し、
前記位置情報を取得し、
前記規則に関する情報を提示する、
付記7乃至10のいずれか一項に記載の情報処理方法。
(Appendix 11)
Generate the shooting data and
Acquire the location information and
Presenting information about the rules,
The information processing method according to any one of Appendix 7 to 10.

(付記12)
前記規則に関する情報を音、光、もしくは振動を用いて提示する、または前記規則に関する情報を表示して提示する、付記11に記載の情報処理方法。
(Appendix 12)
The information processing method according to Appendix 11, wherein information on the rule is presented using sound, light, or vibration, or information on the rule is displayed and presented.

(付記13)
撮影データを生成する撮影手段と、
自端末の位置情報を取得する位置情報取得手段と、
場所に応じて定められた規則に関する情報と前記場所の情報とを関連付けて格納するデータベースから、対象者が所持する情報端末により生成された撮影データと前記情報端末の位置情報とに基づいて特定された場所の情報を利用して、前記規則に関する情報を検出する規則情報検出手段と、
検出された前記規則に関する情報を、前記対象者に向けて通知する通知手段と、
前記規則に関する情報を提示する提示手段と、を備える、
情報端末。
(Appendix 13)
Shooting means to generate shooting data and
Location information acquisition means to acquire the location information of your terminal,
It is identified based on the shooting data generated by the information terminal possessed by the subject and the location information of the information terminal from the database that stores the information on the rules determined according to the location in association with the information of the location. Rule information detecting means for detecting information about the rule by using the information of the location
A notification means for notifying the target person of the detected information regarding the rule, and
Provided with a presentation means for presenting information about the rule.
Information terminal.

(付記14)
場所に応じて定められた規則に関する情報と前記場所の情報とを関連付けて格納するデータベースから、対象者が所持する情報端末により生成された撮影データと前記情報端末の位置情報とに基づいて特定された場所の情報を利用して、前記規則に関する情報を検出する処理と、
検出した前記規則に関する情報を、前記対象者に向けて通知する処理と、をコンピュータに実行させる、
プログラム。
(Appendix 14)
It is identified based on the shooting data generated by the information terminal possessed by the subject and the location information of the information terminal from the database that stores the information on the rules determined according to the location in association with the information of the location. Processing to detect information about the rule by using the information of the location
A computer is made to execute a process of notifying the target person of the detected information about the rule.
program.

10 コンピュータ装置
11 プロセッサ
12 RAM
13 ROM
14 記憶装置
15 入出力インタフェース
16 バス
17 ドライブ装置
18 プログラム
19 周辺機器
20 記録媒体
100、101、102 情報処理装置
110、111 規則情報検出部
120 通知部
130 抽出部
140 場所特定部
150 行動検出部
200 データベースサーバ
300 情報端末
1000、1001、1002 情報処理システム
10 Computer equipment 11 Processor 12 RAM
13 ROM
14 Storage device 15 Input / output interface 16 Bus 17 Drive device 18 Program 19 Peripheral device 20 Recording medium 100, 101, 102 Information processing device 110, 111 Rule information detection unit 120 Notification unit 130 Extraction unit 140 Location identification unit 150 Behavior detection unit 200 Database server 300 Information terminal 1000, 1001, 1002 Information processing system

Claims (8)

場所に応じて定められた規則に関する情報と前記場所の情報とを関連付けて格納するデータベースから、対象者が所持する情報端末により生成された撮影データと前記情報端末の位置情報とに基づいて特定された場所の情報を利用して、前記規則に関する情報を検出する規則情報検出手段と、
検出された前記規則に関する情報を、前記対象者に向けて通知する通知手段と、を備える、
情報処理装置。
It is identified based on the shooting data generated by the information terminal possessed by the subject and the location information of the information terminal from the database that stores the information on the rules determined according to the location in association with the information of the location. Rule information detecting means for detecting information about the rule by using the information of the location
A notification means for notifying the target person of the detected information regarding the rule is provided.
Information processing device.
前記撮影データに含まれる抽出対象を抽出する抽出手段をさらに備え、
前記規則情報検出手段は、当該抽出された抽出対象の情報と前記位置情報とに基づいて特定された前記場所の情報を利用して、前記規則に関する情報を検出する、
請求項1に記載の情報処理装置。
Further provided with an extraction means for extracting the extraction target included in the shooting data,
The rule information detecting means detects information about the rule by using the information of the place specified based on the extracted information of the extraction target and the position information.
The information processing device according to claim 1.
前記撮影データに基づいて、前記対象者の行動を検出する行動検出手段をさらに備え、
前記データベースは、人物の行動の情報をさらに前記規則に関する情報に関連付けて格納し、
前記規則情報検出手段は、検出された前記対象者の行動の情報も利用して前記規則に関する情報を検出する、
請求項1または2に記載の情報処理装置。
A behavior detection means for detecting the behavior of the subject based on the shooting data is further provided.
The database stores information on the behavior of a person in association with information on the rule.
The rule information detecting means detects information about the rule by using the detected behavior information of the target person.
The information processing device according to claim 1 or 2.
前記データベースは、前記場所に関わる音の情報をさらに前記規則に関する情報に関連付けて格納し、
前記規則情報検出手段は、前記情報端末に備えられているマイクにより取得された音の情報も利用して前記規則に関する情報を検出する、
請求項1乃至3のいずれか一項に記載の情報処理装置。
The database further stores sound information relating to the location in association with information relating to the rule.
The rule information detecting means detects information about the rule by using sound information acquired by a microphone provided in the information terminal.
The information processing device according to any one of claims 1 to 3.
請求項1乃至4のいずれか一項に記載の情報処理装置と、前記情報端末とを備え、
前記情報端末は、
前記撮影データを生成する撮影手段と、
前記位置情報を取得する位置情報取得手段と、
前記規則に関する情報を提示する提示手段と、
を有する、
情報処理システム。
The information processing apparatus according to any one of claims 1 to 4 and the information terminal are provided.
The information terminal is
A shooting means for generating the shooting data and
The position information acquisition means for acquiring the position information and
A means of presenting information about the rule and
Have,
Information processing system.
前記提示手段は、前記規則に関する情報を音、光、もしくは振動を用いて提示する、または前記規則に関する情報を表示して提示する、請求項5に記載の情報処理システム。 The information processing system according to claim 5, wherein the presenting means presents information about the rule using sound, light, or vibration, or displays and presents information about the rule. 場所に応じて定められた規則に関する情報と前記場所の情報とを関連付けて格納するデータベースから、対象者が所持する情報端末により生成された撮影データと前記情報端末の位置情報とに基づいて特定された場所の情報を利用して、前記規則に関する情報を検出し、
検出した前記規則に関する情報を、前記対象者に向けて通知する、
情報処理方法。
It is identified based on the shooting data generated by the information terminal possessed by the subject and the location information of the information terminal from the database that stores the information on the rules determined according to the location in association with the information of the location. Use the location information to detect information about the rule
Notify the target person of the detected information regarding the rule,
Information processing method.
場所に応じて定められた規則に関する情報と前記場所の情報とを関連付けて格納するデータベースから、対象者が所持する情報端末により生成された撮影データと前記情報端末の位置情報とに基づいて特定された場所の情報を利用して、前記規則に関する情報を検出する処理と、
検出した前記規則に関する情報を、前記対象者に向けて通知する処理と、をコンピュータに実行させる、
プログラム。
It is identified based on the shooting data generated by the information terminal possessed by the subject and the location information of the information terminal from the database that stores the information on the rules determined according to the location in association with the information of the location. Processing to detect information about the rule by using the information of the location
A computer is made to execute a process of notifying the target person of the detected information about the rule.
program.
JP2019177502A 2019-09-27 2019-09-27 Information processing device, information processing system, information processing method, and program Active JP7388097B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019177502A JP7388097B2 (en) 2019-09-27 2019-09-27 Information processing device, information processing system, information processing method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019177502A JP7388097B2 (en) 2019-09-27 2019-09-27 Information processing device, information processing system, information processing method, and program

Publications (2)

Publication Number Publication Date
JP2021056638A true JP2021056638A (en) 2021-04-08
JP7388097B2 JP7388097B2 (en) 2023-11-29

Family

ID=75272530

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019177502A Active JP7388097B2 (en) 2019-09-27 2019-09-27 Information processing device, information processing system, information processing method, and program

Country Status (1)

Country Link
JP (1) JP7388097B2 (en)

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000099441A (en) * 1998-09-25 2000-04-07 Fujitsu Ltd Device and method for controlling and presenting information
JP2002232871A (en) * 2001-02-06 2002-08-16 Toshiba Corp System for detecting manner breach in public place, remote monitoring system of public place, manner breach detecting system for station yard and station business remote monitoring system
JP2004172673A (en) * 2002-11-15 2004-06-17 Mori Soken:Kk Mobile terminal control system and mobile terminal
JP2005065117A (en) * 2003-08-19 2005-03-10 Mizuho Bank Ltd Position information provision method and position information provision program
JP2006333166A (en) * 2005-05-27 2006-12-07 Mitsubishi Electric Corp Personal digital assistant operation setting system and method thereof, personal digital assistant, and server
JP2014016883A (en) * 2012-07-10 2014-01-30 Toyota Infotechnology Center Co Ltd System and method of dangerous place notification
JP2014093036A (en) * 2012-11-06 2014-05-19 Konica Minolta Inc Guide information display device
WO2017018015A1 (en) * 2015-07-28 2017-02-02 ソニー株式会社 Communication device, information processing system, recording medium, and information processing method
WO2017119170A1 (en) * 2016-01-06 2017-07-13 株式会社デンソー Driving assistance device
JP2017126892A (en) * 2016-01-14 2017-07-20 株式会社ニコン Electronic apparatus
WO2018193808A1 (en) * 2017-04-21 2018-10-25 ソニー株式会社 Information processing device, information processing method, and program
WO2018216299A1 (en) * 2017-05-26 2018-11-29 ソニー株式会社 Information processing device, information processing method and storage medium
JP2019148906A (en) * 2018-02-26 2019-09-05 大日本印刷株式会社 Content provision device and content provision method and program

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000099441A (en) * 1998-09-25 2000-04-07 Fujitsu Ltd Device and method for controlling and presenting information
JP2002232871A (en) * 2001-02-06 2002-08-16 Toshiba Corp System for detecting manner breach in public place, remote monitoring system of public place, manner breach detecting system for station yard and station business remote monitoring system
JP2004172673A (en) * 2002-11-15 2004-06-17 Mori Soken:Kk Mobile terminal control system and mobile terminal
JP2005065117A (en) * 2003-08-19 2005-03-10 Mizuho Bank Ltd Position information provision method and position information provision program
JP2006333166A (en) * 2005-05-27 2006-12-07 Mitsubishi Electric Corp Personal digital assistant operation setting system and method thereof, personal digital assistant, and server
JP2014016883A (en) * 2012-07-10 2014-01-30 Toyota Infotechnology Center Co Ltd System and method of dangerous place notification
JP2014093036A (en) * 2012-11-06 2014-05-19 Konica Minolta Inc Guide information display device
WO2017018015A1 (en) * 2015-07-28 2017-02-02 ソニー株式会社 Communication device, information processing system, recording medium, and information processing method
WO2017119170A1 (en) * 2016-01-06 2017-07-13 株式会社デンソー Driving assistance device
JP2017126892A (en) * 2016-01-14 2017-07-20 株式会社ニコン Electronic apparatus
WO2018193808A1 (en) * 2017-04-21 2018-10-25 ソニー株式会社 Information processing device, information processing method, and program
WO2018216299A1 (en) * 2017-05-26 2018-11-29 ソニー株式会社 Information processing device, information processing method and storage medium
JP2019148906A (en) * 2018-02-26 2019-09-05 大日本印刷株式会社 Content provision device and content provision method and program

Also Published As

Publication number Publication date
JP7388097B2 (en) 2023-11-29

Similar Documents

Publication Publication Date Title
CN109426333B (en) Information interaction method and device based on virtual space scene
US20190279432A1 (en) Method and device for editing virtual scene, and non-transitory computer-readable storage medium
US10636185B2 (en) Information processing apparatus and information processing method for guiding a user to a vicinity of a viewpoint
CN102216959B (en) For the technology of manipulating panoramas
US10475224B2 (en) Reality-augmented information display method and apparatus
CN108600632B (en) Photographing prompting method, intelligent glasses and computer readable storage medium
US10031718B2 (en) Location based audio filtering
US20150213362A1 (en) Information processing apparatus, information processing method and program
CN103871092A (en) Display control device, display control method and program
JP2012089133A (en) Apparatus and method for providing augmented reality utilizing mobile tag
US20160004723A1 (en) Providing Geographically Relevant Information to Users
JP2009176262A (en) Method and system for mapping photography, program, and recording medium
JP7287950B2 (en) COMMUNICATION METHOD, COMMUNICATION DEVICE, AND PROGRAM
US10447910B2 (en) Camera notification and filtering of content for restricted sites
CA3119609A1 (en) Augmented reality (ar) imprinting methods and systems
JP7388097B2 (en) Information processing device, information processing system, information processing method, and program
KR102013728B1 (en) Apparatus and method for sharing disaster situation information
JP6699709B2 (en) Information processing device and program
KR102268750B1 (en) Method and apparatus for connecting user terminals as a group and providing a service including content associated with the group
KR20130082755A (en) Service server and method by object recognition
JP2018137683A (en) Report support system, mobile terminal, report support method and program
KR20110119179A (en) Method for updating panoramic image and location search service using the same
JP6840567B2 (en) Report support system, mobile terminal, report support method and program
KR101762514B1 (en) Method and apparatus for providing information related to location of shooting based on map
KR20150124183A (en) Life Log Device Comprising Record-Preventing Function and Method thereof

Legal Events

Date Code Title Description
RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20211015

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220815

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230519

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230606

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230727

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20231017

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20231030

R151 Written notification of patent or utility model registration

Ref document number: 7388097

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151