JP6945149B2 - 通話システム、通話方法 - Google Patents
通話システム、通話方法 Download PDFInfo
- Publication number
- JP6945149B2 JP6945149B2 JP2019139077A JP2019139077A JP6945149B2 JP 6945149 B2 JP6945149 B2 JP 6945149B2 JP 2019139077 A JP2019139077 A JP 2019139077A JP 2019139077 A JP2019139077 A JP 2019139077A JP 6945149 B2 JP6945149 B2 JP 6945149B2
- Authority
- JP
- Japan
- Prior art keywords
- flight
- call
- voice data
- user terminal
- processing unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 10
- 238000012545 processing Methods 0.000 claims description 74
- 238000004891 communication Methods 0.000 claims description 28
- RZVHIXYEVGDQDX-UHFFFAOYSA-N 9,10-anthraquinone Chemical group C1=CC=C2C(=O)C3=CC=CC=C3C(=O)C2=C1 RZVHIXYEVGDQDX-UHFFFAOYSA-N 0.000 claims description 25
- 230000004044 response Effects 0.000 claims description 14
- 230000005540 biological transmission Effects 0.000 description 11
- 238000010586 diagram Methods 0.000 description 8
- 238000001514 detection method Methods 0.000 description 7
- 239000000284 extract Substances 0.000 description 4
- 230000033001 locomotion Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
Images
Landscapes
- Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
- Selective Calling Equipment (AREA)
- Telephone Function (AREA)
- Telephonic Communication Services (AREA)
Description
第1のマイクおよび第1のスピーカを有する携帯端末と、
第2のマイクおよび第2のスピーカを有する飛行装置と、
を備え、
前記携帯端末は、
通話相手の近傍まで前記飛行装置を飛行させるように制御する飛行制御部と、
前記第1のマイクが集音した第1の音声データを前記飛行装置に送信し、前記飛行装置から送信される第2の音声データを受信して前記第1のスピーカから出力する第1の通話処理部と、を備え、
前記飛行装置は、
前記第2のマイクが集音した前記第2の音声データを前記携帯端末に送信し、前記携帯端末から送信される前記第1の音声データを受信して前記第2のスピーカから出力する第2の通話処理部を備えること、
を特徴とする通話システム。
項目1に記載の通話システムであって、
前記飛行装置は、
カメラと、
前記カメラが撮影した画像を前記携帯端末に送信する画像送信部と、
をさらに備えることを特徴とする通話システム。
項目1に記載の通話システムであって、
前記第2の音声送信部は、前記第2の音声データから特徴量を抽出し、所定の前記特徴量を抽出できた場合に、前記携帯端末のユーザに対してメッセージを送信し、
前記第1の音声受信部は、前記メッセージに応じて前記携帯端末のユーザに対して注意喚起のための画像または音声を出力すること、
を特徴とする通話システム。
項目1に記載の通話システムであって、
前記携帯端末は、前記通話相手の呼出し用の前記第1の音声データである呼出し音声データを作成し、前記呼び出し音性データを前記飛行装置に送信する第1の呼出し処理部をさらに備え、
前記飛行装置は、前記呼出し音声データを受信し、受信した前記呼出し音声データを前記第2のスピーカから出力する第2の呼出し処理部をさらに備えること、
を特徴とする通話システム。
項目4に記載の通話システムであって、
前記飛行装置は、前記第2の音声データに基づいて前記通話相手の認証を行う認証処理部をさらに備えること、
を特徴とする通話システム。
項目5に記載の通話システムであって、
前記第2の呼出し処理部は、前記認証処理部が前記通話相手の認証に成功するまで、前記呼出し音声データを前記第2のスピーカから出力すること、
を特徴とする通話システム。
項目4に記載の通話システムであって、
前記飛行装置は、情報を表示する表示装置を備え、
前記第1の呼出し処理部は、前記通話相手の呼出し用の画像を前記飛行装置に送信し、
前記第2の呼出し処理部は、前記呼出し用の画像を受信し、受信した前記呼出し用の画像を前記表示装置に表示すること、
を特徴とする通話システム。
図1は、本発明の一実施形態に係る通話システムの全体構成を示す図である。
本実施形態の通話システムは、飛行装置10が備えるカメラ12を用いて監視者2が被監視者1を遠隔から監視するとともに、飛行装置10が備えるマイク15およびスピーカ16を用いて被監視者1と監視者2との間で通話を行うことができるようにしている。飛行装置10とユーザ端末20とは、例えば、WiFiやBlueTooth(登録商標)などのプロトコルに従う無線通信路30を介して互いに通信可能に接続される。
図2は、飛行装置10のハードウェア構成例を示す図である。飛行装置10は、プロペラ19と、プロペラ19にESC(Electronic Speed Controller)17を介して接続された推進機構(本実施形態ではモータ18を想定する。)と、これらを制御するフライトコントローラ11とを備える。
本実施形態では、通話開始コマンドには、被監視者1に対して呼びかけを行うための音声データ(以下、呼出し音声データという。)と、被監視者1の認証に用いる音声の特徴量(以下、認証特徴量という。)とが含まれる。呼出し音声データは、例えば、監視者2の音声を録音した音声データである。認証特徴量は、例えば、被監視者1の声の特徴量である。指示受信部111は、通話開始コマンドを受信した場合、呼出し音声データを呼出し音声記憶部152に登録し、後述する呼出し処理部114を呼び出す。
図4は、ユーザ端末20のハードウェア構成例を示す図である。ユーザ端末20は、CPU201、メモリ202、記憶装置203、通信装置204、GPSモジュール205、タッチパネルディスプレイ206、マイク207およびスピーカ208を備える。記憶装置203は、各種のデータやプログラムを記憶する、例えばハードディスクドライブやソリッドステートドライブ、フラッシュメモリなどである。通信装置204は、通信ネットワーク50を介して他の装置と通信を行う。通信装置204は、例えばイーサネット(登録商標)に接続するためのアダプタ、公衆電話回線網に接続するためのモデム、無線通信を行うための無線通信機、シリアル通信のためのUSB(Universal Serial Bus)コネクタやRS232Cコネクタなどを含んで構成される。GPSモジュール205は、GPS衛星からの信号を受信する。タッチパネルディスプレイ206は、データを入出力するインタフェースである。ユーザ1はタッチパネルディスプレイ206に表示された情報を閲覧し、タッチパネルディスプレイ206に触れることによりデータの入力を行うことができる。マイク207は音声の入力装置である。マイク207に入力された音声は音声データとして取得可能である。スピーカ208は音声の出力装置である。音声データをスピーカ208に与えることにより音声が再生される。
以下、本実施形態の通話システムにおける処理について説明する。
ユーザ端末20において飛行位置指定部212は、監視者2から飛行装置10の飛行先となる位置の指定を受け付ける(S301)。呼出し音声登録部213は、呼出し音声データとなる音声データの入力を受け付け、受け付けた音声データを呼出し音声記憶部252に呼出し音声データとして登録する(S302)。飛行位置指定部212は、飛行位置指定部212が受け付けた飛行先の位置と、呼出し音声記憶部252に記憶されている呼出し音声データと、認証特徴量記憶部253に登録されている認証特徴量とを設定した飛行操作コマンドを飛行装置10に送信する(S303)。
以上説明したように、本実施形態の通話システムによれば、監視者2は被監視者1のところまで飛行装置10を飛行させ、飛行装置10とユーザ端末20とを介して被監視者1と通話することができる。したがって、例えば、被監視者1が携帯電話等の通話装置を携帯していないような場合であっても、監視者2は被監視者1と直接音声にてコミュニケーションを取ることが可能となる。
(ビーコン)
本実施形態では、被監視者1の位置はユーザ端末20を用いて監視者2が指定するものとしたが、これに限らず、例えば、被監視者1にビーコンを携帯させ、被監視者1の活動範囲にビーコンの受信機を設置しておき、ビーコンからの信号を受信した受信機の位置を被監視者1の位置としてユーザ端末20が取得するようにしてもよい。
本実施形態では、飛行装置10はカメラ12を備え、飛行装置10が撮影した画像がユーザ端末20に送信されるものとしたが、飛行装置10はカメラ12を備えず、飛行装置10とユーザ端末20との間は音声データのやりとりだけが行われるようにしてもよい。
また、本実施形態では、飛行体10には1台のカメラが搭載されるものとしたが、これに限らず、被監視者1を撮影するカメラと、被監視者1の周囲を撮影するカメラを含む複数台のカメラが搭載されてもよい。
本実施形態では、飛行装置10にカメラ12を搭載し、ユーザ端末20において飛行装置10が撮影した映像を視聴するものとしたが、ユーザ端末20が備えるカメラが撮影した映像を飛行装置10に送信し、飛行装置10側においてユーザ端末20側の様子を表示するようにしてもよい。
本実施形態では、飛行装置10はユーザ端末20からの指示に応じてそのまま飛行するものとしたが、飛行するにあたり、被監視者1に対して物品を輸送してもよい。この場合、飛行装置10は、ユーザ端末20からの指示に応じて飛行する前に、荷物を積載する場所まで飛行し、荷物を積載してから被監視者1の近傍まで飛行するようにする。また、飛行装置10は、被監視者1の近傍まで飛行したのち、被監視者1から輸送して欲しい物品の指定を受け付け、指定された物品を積載するために荷物の積載場所まで移動し、荷物を積載したうえで被監視者1の位置まで戻るようにすることもできる。この場合、被監視者1は音声により物品を指定し、飛行装置10はマイク15が集音した音声データを解析して音声認識により積載する物品を特定することができる。
本実施形態では、ユーザ端末20から飛行装置10に対して送信される情報は音声データのみであるものとしたが、飛行装置10が表示装置を備えるようにして、ユーザ端末20から飛行装置10に画像を送信し、飛行装置10側に視覚に訴える情報を出力させるようにしてもよい。
20 ユーザ端末
11 フライトコントローラ
12 カメラ
13 ジンバル
14 送受信部
15 マイク
16 スピーカ
17 ESC
18 モータ
19 プロペラ
111 指示受信部
112 飛行制御部
113 現在位置取得部
114 呼出し処理部
115 トリガー検出部
116 撮影処理部
117 通話処理部
118 画像表示部
120 表示装置
151 現在位置記憶部
152 呼出し音声記憶部
153 認証特徴量記憶部
154 トリガー特徴量記憶部
211 現在位置取得部
212 開始位置指定部
213 呼出し音声登録部
214 飛行制御部
215 トリガー通知部
216 画像出力部
217 通話処理部
251 飛行位置記憶部
252 呼出し音声記憶部
253 認証特徴量記憶部
254 伝達画像記憶部
Claims (5)
- 第1のマイクおよび第1のスピーカを有するユーザ端末と、
第2のマイクおよび第2のスピーカを有する飛行装置と、を備え、
前記ユーザ端末は、
通話相手の現在位置または予定移動先の位置の指定を受け付ける飛行位置指定部と、
前記位置に飛行するように指示する飛行操作コマンドを前記飛行装置に送信する飛行制御部と、を備え、
前記飛行装置は、
前記位置まで飛行した場合に、呼出し音声データを前記第2のスピーカーから出力し、前記第2のマイクが集音した第2の音声データに基づいて前記通話相手から応答があったか否かを判断する呼出し処理部と、
前記呼出し処理部で前記通話相手から応答があったと判断した場合に、前記ユーザ端末と前記飛行装置の間で通話処理を開始する通話処理部と、を備えること、
を特徴とする通話システム。 - 請求項1に記載の通話システムであって、
前記飛行装置は、
呼出し音声データを受信し、受信した前記呼出し音声データを前記第2のスピーカから出力する呼出し処理部を備え、
前記呼出し処理部は、前記通話相手の認証ができない場合に、前記通話相手から応答があるまで繰り返し前記呼出し音声データを前記第2のスピーカから出力すること、
を特徴とする通話システム。 - 請求項2に記載の通話システムであって、
前記呼出し処理部は、
前記ユーザ端末のユーザの声を含む前記呼出し音声データを受信し、受信した前記呼出し音声データを前記第2のスピーカから出力すること、
を特徴とする通話システム。 - 請求項1乃至3のいずれかに記載の通話システムであって、
前記呼出し処理部は、予め記憶された通話相手の声の特徴量を、前記第2の音声データから抽出できた場合にした前記通話相手から応答されたと判断して、前記ユーザ端末と前記飛行装置の間で通話処理を開始すること、
を特徴とする通話システム。 - 第1のマイクおよび第1のスピーカを有するユーザ端末と、第2のマイクおよび第2のスピーカを有する飛行装置と、の間で通話を行う通話方法であって、
前記ユーザ端末は、
通話相手の現在位置または予定移動先の位置の指定を受け付ける飛行位置指定ステップと、
前記位置に飛行するように指示する飛行操作コマンドを前記ユーザ端末から前記飛行装置に送信するステップと、
前記位置まで飛行した場合に、呼出し音声データを前記第2のスピーカーから出力するステップと、
前記第2のマイクが集音した第2の音声データに基づいて前記通話相手から応答があったか否かを判断するステップと、
前記通話相手から応答があったと判断した場合に、前記ユーザ端末と前記飛行装置の間で通話処理を開始するステップと、を備えること、
を特徴とする通話方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019139077A JP6945149B2 (ja) | 2018-04-24 | 2019-07-29 | 通話システム、通話方法 |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018082789A JP6570002B1 (ja) | 2018-04-24 | 2018-04-24 | 通話システム |
JP2019139077A JP6945149B2 (ja) | 2018-04-24 | 2019-07-29 | 通話システム、通話方法 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018082789A Division JP6570002B1 (ja) | 2018-04-24 | 2018-04-24 | 通話システム |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2019216442A JP2019216442A (ja) | 2019-12-19 |
JP2019216442A5 JP2019216442A5 (ja) | 2021-06-10 |
JP6945149B2 true JP6945149B2 (ja) | 2021-10-06 |
Family
ID=68919207
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019139077A Active JP6945149B2 (ja) | 2018-04-24 | 2019-07-29 | 通話システム、通話方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6945149B2 (ja) |
-
2019
- 2019-07-29 JP JP2019139077A patent/JP6945149B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2019216442A (ja) | 2019-12-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6984768B2 (ja) | ロボット、制御方法及びプログラム | |
US10021339B2 (en) | Electronic device for generating video data | |
US20200394754A1 (en) | Course profiling and sharing | |
CN102681958B (zh) | 使用物理姿势传输数据 | |
EP3261405B1 (fr) | Réseau local pour l'échange simultané de données entre un drone et une pluralité de terminaux utilisateur, désignant un terminal utilisateur principal unique controlant le drone | |
KR20150125174A (ko) | 무인 항공기 제어 장치 및 방법 | |
EP3809161A1 (en) | Information processing device, information processing method and distance measurement system | |
JP2014033307A (ja) | データ記憶装置およびプログラム | |
WO2015164224A1 (en) | Wristband and application to allow one person to monitor another | |
JP6711565B2 (ja) | 通信装置、その制御方法、プログラム | |
CN102708120A (zh) | 生活流式传输 | |
KR101959366B1 (ko) | 무인기와 무선단말기 간의 상호 인식 방법 | |
WO2019041633A1 (zh) | 通信中继方法、中继飞行体、程序以及记录介质 | |
KR102190743B1 (ko) | 로봇과 인터랙션하는 증강현실 서비스 제공 장치 및 방법 | |
WO2019241970A1 (zh) | 无人机的扬声器控制方法和设备 | |
JP2022096600A (ja) | 自律システム終端支援技術 | |
JP6945149B2 (ja) | 通話システム、通話方法 | |
JP2020005147A (ja) | 情報処理装置、移動体、遠隔制御システム、情報処理方法およびプログラム | |
JP6570002B1 (ja) | 通話システム | |
WO2022091787A1 (ja) | コミュニケーションシステム、ロボット、及び記憶媒体 | |
US20220327941A1 (en) | Information processing apparatus, information processing system, information processing method, and program | |
JP2019191846A (ja) | 監視システム | |
CN113093915A (zh) | 多人互动的控制方法、装置、设备及存储介质 | |
JP6992365B2 (ja) | 端末装置、カメラシステムおよび制御方法 | |
CN110022398B (zh) | 通信设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191025 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210421 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210421 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20210421 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20210427 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210513 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210706 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210715 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210715 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210729 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210826 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6945149 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |