JP2019176433A - Information sharing system, and information sharing method - Google Patents
Information sharing system, and information sharing method Download PDFInfo
- Publication number
- JP2019176433A JP2019176433A JP2018065889A JP2018065889A JP2019176433A JP 2019176433 A JP2019176433 A JP 2019176433A JP 2018065889 A JP2018065889 A JP 2018065889A JP 2018065889 A JP2018065889 A JP 2018065889A JP 2019176433 A JP2019176433 A JP 2019176433A
- Authority
- JP
- Japan
- Prior art keywords
- function
- mobile terminal
- imaging
- sms
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Information Transfer Between Computers (AREA)
- Telephonic Communication Services (AREA)
Abstract
Description
本発明は、サービス受領者が現場で撮像した撮像データをサービス提供者側のオペレータとビデオ通話を介して音声データを交えて共有する情報共有システム、及び情報共有方法に関する。 The present invention relates to an information sharing system and an information sharing method for sharing image data captured by a service receiver on site with an operator on the service provider side through audio communication with audio data.
近年では、通話機能に加えて、インターネットやＥメール等の通信機能の他にカメラによる撮像機能が備わったいわゆるスマートフォン等の携帯端末の普及により、各種業界・分野において、撮像機能付きの携帯端末の撮像データを利用したサービス業務が行われるようになっている。例えば、特許文献１には、携帯端末と情報処理装置がネットワークを介して通信可能として、撮像範囲が広い写真や動画を容易に提供できるサービスシステムについて開示されている。 In recent years, in addition to communication functions such as the Internet and e-mail, in addition to communication functions such as the Internet, e-mail and so on, mobile terminals such as so-called smartphones equipped with an image capturing function by a camera have spread. Service work using imaging data is performed. For example, Patent Document 1 discloses a service system in which a mobile terminal and an information processing apparatus can communicate with each other via a network and can easily provide a photograph or a moving image with a wide imaging range.
また、特許文献２には、現場状況の映像を作業現場に設置したウェブカメラを介して遠隔地から見ることができるようにして、遠隔地からの現場作業の支援を可能にする現場映像配信システムについて開示されている。さらに、特許文献３には、撮像機能を備えたウェアラブル端末から送信される映像を通して、オペレータが救護者に的確で直感的なオペレーションを実施することができ、救護者がＡＥＤの操作に不慣れであっても的確に操作が行える様に支援を行うことができるシステムについて開示されている。 Further, Patent Document 2 discloses an on-site video distribution system that enables a site situation video to be viewed from a remote location through a web camera installed at the work site and enables support of the site work from a remote location. Is disclosed. Furthermore, in Patent Document 3, an operator can perform an accurate and intuitive operation for a rescuer through an image transmitted from a wearable terminal having an imaging function, and the rescuer is not accustomed to the operation of the AED. However, a system capable of providing support so that an operation can be performed accurately is disclosed.
しかしながら、携帯端末に備わるカメラによる現場の撮像データに基づいた現場情報をサービス提供者側のオペレータに通知する際に、サービス受領者にとっては、より簡単な操作で通知できることが望ましい。また、サービス提供者側のオペレータにとっても、現場にいるサービス受領者に適宜アドバイスや確認作業を行いながら、当該サービス受領者からの現場情報を効率よく受信できた方が的確で迅速なサービス対応が可能になるので好ましい。このため、サービス受領者が現場で撮像した撮像データをサービス提供者側のオペレータとビデオ通話を介して音声データを交えて通知する際に、サービス受領者とサービス提供者との間で撮像データと音声データを共有しながら、双方向側からリアルタイムで通信できることが望まれる。 However, it is desirable for the service recipient to be able to notify the operator of the site information based on the on-site imaging data from the camera provided in the portable terminal by a simpler operation. In addition, for service provider operators, it is more appropriate and quick to respond to services if they can efficiently receive on-site information from the service recipient while giving advice and confirmation work to the service recipient at the site. This is preferable because it becomes possible. For this reason, when notifying imaging data captured at the site by the service recipient through the video call with the operator on the service provider side along with the audio data, the imaging data between the service recipient and the service provider It is desirable to be able to communicate in real time from both sides while sharing audio data.
本発明は、上記課題に鑑みてなされたものであり、より簡単な操作でサービス受領者とサービス提供者との間でビデオ通話による撮像データと音声データの共有を図りながら、双方向側からリアルタイムで通信することの可能な、新規かつ改良された情報共有システム、及び情報共有方法を提供することを目的とする。 The present invention has been made in view of the above problems, and enables real-time communication from a bidirectional side while sharing imaging data and audio data through a video call between a service recipient and a service provider with a simpler operation. It is an object of the present invention to provide a new and improved information sharing system and information sharing method capable of communicating with each other.
本発明の一態様は、サービス受領者が現場で撮像した撮像データをサービス提供者側のオペレータとビデオ通話を介して音声データを交えて共有する情報共有システムであって、少なくとも前記オペレータと通話する通話機能、前記現場で被写体を撮像する撮像機能、及びネットワークを介してＳＭＳを送受信するＳＭＳ送受信機能を有する携帯端末と、少なくとも前記サービス受領者と通話する通話機能、前記オペレータを撮像する撮像機能、前記携帯端末から送信される前記撮像データを受信する撮像データ受信機能、受信した前記撮像データを画面表示する表示機能、及び前記ネットワークを介して前記ＳＭＳを送受信するＳＭＳ送受信機能を有する情報処理装置と、を備え、前記携帯端末と前記情報処理装置は、それぞれＷｅｂＲＴＣ（Web Real-Time Communication）に対応したブラウザを記憶しており、前記情報処理装置は、前記携帯端末に前記ＷｅｂＲＴＣへのアクセス先情報となるＵＲＬが記載されたＳＭＳを送信可能に構成され、前記携帯端末は、該ＳＭＳを受信してから前記ＵＲＬにアクセスすることによって、該携帯端末に備わる前記通話機能及び前記撮像機能を介して、前記撮像データを用いて前記情報処理装置と前記ビデオ通話が可能に構成されることを特徴とする。 One aspect of the present invention is an information sharing system for sharing image data captured by a service recipient on site with an operator on the service provider side through audio data and making a call with at least the operator. A call function, an imaging function for imaging a subject in the field, a mobile terminal having an SMS transmission / reception function for transmitting / receiving SMS via a network, a call function for calling at least the service recipient, an imaging function for imaging the operator, An information processing apparatus having an imaging data receiving function for receiving the imaging data transmitted from the portable terminal, a display function for displaying the received imaging data on a screen, and an SMS transmission / reception function for transmitting / receiving the SMS via the network; Each of the mobile terminal and the information processing device is WebRT A browser corresponding to (Web Real-Time Communication) is stored, and the information processing apparatus is configured to be capable of transmitting an SMS in which a URL serving as access destination information to the WebRTC is transmitted to the mobile terminal, When the mobile terminal receives the SMS and then accesses the URL, the video communication is performed between the information processing apparatus and the video call using the imaging data via the call function and the imaging function provided in the mobile terminal. It is configured to be possible.
本発明の一態様によれば、サービス受領者がサービス提供者側のオペレータから受信したＳＭＳに記載されたＵＲＬにアクセスすることによって、サービス受領者側の撮像データを絡めてＷｅｂＲＴＣに対応したブラウザでのリアルタイム通信が可能になるので、簡単な操作でサービス受領者とサービス提供者との間でビデオ通話による撮像データと音声データの共有が図れるようになる。 According to one aspect of the present invention, a browser that supports WebRTC with the image data on the service recipient side by accessing the URL described in the SMS received by the service recipient from the operator on the service provider side. Real-time communication becomes possible, and it becomes possible to share imaging data and audio data by video call between the service recipient and the service provider with a simple operation.
このとき、本発明の一態様では、前記情報処理装置は、少なくとも前記携帯端末の前記ＵＲＬへのアクセスの有無を判定する判定部と、少なくとも前記判定部で前記携帯端末が前記ＵＲＬにアクセスした旨を確認したら、該携帯端末の前記ＷｅｂＲＴＣに対応した前記ブラウザへの前記通話機能及び前記撮像機能の動作を許可する許可部と、少なくとも前記許可部で前記携帯端末の前記ＷｅｂＲＴＣに対応した前記ブラウザへの前記携帯端末及び前記情報処理装置の前記通話機能及び前記撮像機能の動作を許可したら、前記表示機能を有する表示部の画面表示を前記携帯端末で撮像された前記撮像データへの切り替えを設定する設定部と、を更に備えることとしてもよい。 At this time, according to one aspect of the present invention, the information processing apparatus determines that the portable terminal has accessed the URL by at least the determination unit that determines whether or not the URL of the portable terminal is accessed. Is confirmed, the permission unit that permits the operation of the call function and the imaging function to the browser corresponding to the WebRTC of the portable terminal, and at least the permission unit to the browser corresponding to the WebRTC of the portable terminal When the operation of the call function and the imaging function of the portable terminal and the information processing apparatus is permitted, the screen display of the display unit having the display function is set to be switched to the imaging data captured by the portable terminal. And a setting unit.
このようにすれば、サービス受領者がサービス提供者から受信したＳＭＳに記載されたＵＲＬにアクセスする簡単な操作をすることによって、サービス受領者側の撮像データを絡めてＷｅｂＲＴＣに対応したブラウザでのリアルタイム通信のビデオ通話による撮像データと音声データの共有が図れるようになる。 In this way, the service recipient can perform a simple operation to access the URL described in the SMS received from the service provider, and the WebRTC-compatible browser can be linked with the image data of the service recipient. It is possible to share imaging data and audio data by a video call of real-time communication.
また、本発明の一態様では、前記情報処理装置は、前記携帯端末に前記ＳＭＳを送信した際に、前記ＳＭＳが送信された場合に前記表示部が待機中画面に移行し、前記ＳＭＳが送信不能だった場合に前記表示部に送信エラーメッセージが表示されることとしてもよい。 In one embodiment of the present invention, when the SMS is transmitted to the mobile terminal, the information processing apparatus shifts to the standby screen when the SMS is transmitted, and the SMS transmits When it is impossible, a transmission error message may be displayed on the display unit.
このようにすれば、サービス提供者側の情報処理装置からサービス受領者の携帯端末へのＳＭＳの送信の可否を容易に判別できるようになる。 In this way, it becomes possible to easily determine whether SMS can be transmitted from the information processing device on the service provider side to the mobile terminal of the service recipient.
また、本発明の一態様では、前記携帯端末は、該携帯端末の位置情報を検知する機能を更に有し、前記情報処理装置は、前記判定部が前記携帯端末で検知された前記位置情報に基づいて前記サービス受領者の位置情報を判定することとしてもよい。 In the aspect of the invention, the mobile terminal further has a function of detecting the position information of the mobile terminal, and the information processing apparatus uses the position information detected by the mobile terminal. The location information of the service recipient may be determined based on the information.
このようにすれば、サービス提供者側のオペレータは、携帯端末から受信した位置情報に基づいてサービス受領者の位置情報を判定できるので、サービス受領者のいる現場での迅速な対応が可能になる。 In this way, since the operator on the service provider side can determine the location information of the service recipient based on the location information received from the mobile terminal, it is possible to quickly respond at the site where the service recipient is located. .
また、本発明の一態様では、前記情報処理装置の前記許可部は、前記サービス提供者側の前記オペレータへの前記サービス受領者との前記ビデオ通話を介した対応サービスへのアクセス許可を付与する機能も有することとしてもよい。 In one aspect of the present invention, the permission unit of the information processing apparatus grants access permission to the corresponding service via the video call with the service recipient to the operator on the service provider side. It is good also as having a function.
このようにすれば、サービス提供者側の特定のオペレータのみがサービス受領者とのビデオ通話が可能になるので、サービス受領者の個人情報等の漏洩を防止できる。 In this way, only a specific operator on the service provider side can make a video call with the service recipient, and thus leakage of personal information and the like of the service recipient can be prevented.
また、本発明の一態様では、前記設定部は、前記判定部で前記オペレータのオペレータ用ＵＲＬのアクセスがある旨を判定して、前記許可部で該オペレータへの前記対応サービスのアクセス許可が付与されたら、前記オペレータにログインＩＤ及びパスワードを入力させる機能を有することとしてもよい。 In the aspect of the invention, the setting unit may determine that the operator URL is accessed by the determination unit, and the permission unit may grant access permission for the corresponding service to the operator. Then, it may have a function of allowing the operator to input a login ID and a password.
このようにすれば、サービス提供者側の特定のオペレータのみがサービス受領者とのビデオ通話を介した対応サービスができるようになる。 In this way, only a specific operator on the service provider side can perform a corresponding service via a video call with the service recipient.
また、本発明の他の態様は、サービス受領者が現場で撮像した撮像データをサービス提供者側のオペレータとビデオ通話を介して音声データを交えて共有する情報共有方法であって、ＷｅｂＲＴＣに対応したブラウザをそれぞれ記憶した情報処理装置から携帯端末に前記ＷｅｂＲＴＣへのアクセス先情報となるＵＲＬが記載されたＳＭＳを送信する工程と、前記携帯端末の前記ＵＲＬへのアクセスの有無を確認する工程と、前記携帯端末の前記ＵＲＬへのアクセスがある旨を確認したら、該携帯端末の前記ＷｅｂＲＴＣに対応した前記ブラウザへの通話機能及び撮像機能の動作を許可する工程と、前記ブラウザへの前記通話機能及び前記撮像機能の動作が許可されたら、前記通話機能及び前記撮像機能を介して前記情報処理装置と前記ビデオ通話を開始する工程と、前記ビデオ通話が開始したら、前記携帯端末の表示部の画面表示を前記撮像データに切り替える工程と、を有することを特徴とする。 According to another aspect of the present invention, there is provided an information sharing method for sharing image data captured by a service recipient on site with an operator on the service provider side through a video call, and corresponding to WebRTC. Transmitting an SMS in which a URL serving as access destination information to the WebRTC is transmitted from the information processing apparatus storing each of the browsers to the mobile terminal, and confirming whether or not the mobile terminal has accessed the URL; And confirming that there is access to the URL of the mobile terminal, allowing the mobile terminal to allow the call function and imaging function of the mobile terminal corresponding to the WebRTC, and the call function to the browser When the operation of the imaging function is permitted, the information processing apparatus and the video are transmitted via the call function and the imaging function. A step of starting to talk, if the video call is initiated, characterized in that it and a step of switching the screen display of the display unit of the portable terminal to the imaging data.
本発明の他の態様によれば、サービス受領者がサービス提供者側のオペレータから受信したＳＭＳに記載されたＵＲＬにアクセスすることによって、サービス受領者側の撮像データを絡めてＷｅｂＲＴＣに対応したブラウザでのリアルタイム通信が可能になるので、簡単な操作でビデオ通話によってサービス受領者とサービス提供者との間で双方向側から撮像データと音声データの共有が図れるようになる。 According to another aspect of the present invention, a browser that supports WebRTC with the image data on the service recipient side by accessing the URL described in the SMS received by the service recipient from the operator on the service provider side. Thus, real-time communication can be performed on the mobile phone, and image data and audio data can be shared between the service recipient and the service provider from both sides by a video call with a simple operation.
以上説明したように本発明によれば、サービス受領者がサービス提供者側のオペレータから受信したＳＭＳに記載されたＵＲＬにアクセスするという簡単な操作によって、サービス受領者側の撮像データを絡めてＷｅｂＲＴＣに対応したブラウザでのリアルタイム通信が可能な状態に切り替えられる。このため、簡単な操作でサービス受領者とサービス提供者との間のビデオ通話による撮像データと音声データの共有が図れるようになる。 As described above, according to the present invention, the WebRTC entangles imaging data on the service recipient side by a simple operation in which the service recipient accesses the URL described in the SMS received from the operator on the service provider side. Can be switched to a state where real-time communication is possible with a browser that supports. For this reason, it is possible to share imaging data and audio data by a video call between the service recipient and the service provider with a simple operation.
以下、本発明の好適な実施の形態について詳細に説明する。なお、以下に説明する本実施形態は、特許請求の範囲に記載された本発明の内容を不当に限定するものではなく、本実施形態で説明される構成の全てが本発明の解決手段として必須であるとは限らない。 Hereinafter, preferred embodiments of the present invention will be described in detail. The present embodiment described below does not unduly limit the contents of the present invention described in the claims, and all the configurations described in the present embodiment are essential as means for solving the present invention. Not necessarily.
まず、本発明の一実施形態に係る情報共有システムの概略構成について、図面を使用しながら説明する。図１は、本発明の一実施形態に係る情報共有システムの概略構成を示すブロック図である。 First, a schematic configuration of an information sharing system according to an embodiment of the present invention will be described with reference to the drawings. FIG. 1 is a block diagram showing a schematic configuration of an information sharing system according to an embodiment of the present invention.
本発明の一実施形態に係る情報共有システム１００は、サービス受領者がスマートフォン等の携帯端末１３０を用いて現場で撮像した撮像データに基づいた現場情報をサービス提供者側のオペレータのＰＣ（Personal Computer）等の情報処理装置１１０に通知して、当該オペレータとビデオ通話を介して音声データを交えて共有する際に適用される。本実施形態では、情報共有システム１００は、サービス受領者側の携帯端末１３０と、オペレータ側の情報処理装置１１０、オペレータ側の通話用電話機１５０、及びサーバ１６０がインターネット等のネットワーク１０２を介して接続されている。なお、本実施形態におけるネットワーク１０２は、データ回線となるインターネット回線、通話回線となる電話回線、及びデータ回線と通話回線が重畳したＶｏＬＴＥ（Voice over LTE；Voice over Long Term Evolution）等の音声データや映像データ等を含む各種データの送受信が行われる通信回線を含むものとする。 The information sharing system 100 according to an embodiment of the present invention is configured to obtain on-site information based on imaging data captured at a site by a service recipient using a mobile terminal 130 such as a smartphone. ) And the like, and is applied when the voice data is shared with the operator through a video call. In this embodiment, in the information sharing system 100, the mobile terminal 130 on the service recipient side, the information processing device 110 on the operator side, the telephone 150 for call on the operator side, and the server 160 are connected via a network 102 such as the Internet. Has been. The network 102 in the present embodiment includes an Internet line serving as a data line, a telephone line serving as a call line, and voice data such as Voice over LTE (Voice over LTE; Voice over Long Term Evolution) in which the data line and the call line are superimposed. A communication line through which various data including video data and the like are transmitted and received is included.
本実施形態に係る情報共有システム１００では、携帯端末１３０は、少なくともオペレータと通話する通話機能、サービス受領者がいる現場で被写体を撮像する撮像機能、及びインターネット等のネットワーク１０２を介してＳＭＳ（Short Message Service）を送受信するＳＭＳ送受信機能を有する。一方、情報処理装置１１０は、少なくともオペレータがサービス受領者と通話する通話機能、オペレータ側の各種情報を撮像する撮像機能１１９、携帯端末１３０から送信される撮像データを受信する撮像データ受信機能、受信した撮像データを画面表示する表示機能、及びネットワーク１０２を介してＳＭＳを送受信するＳＭＳ送受信機能を有する。なお、本実施形態では、情報処理装置１１０は、ＳＭＳ送受信サーバとなるサーバ１６０を介して携帯端末１３０とＳＭＳを送受信可能に構成されているが、例えば、タッチパッド等のように、ＳＭＳ送受信機能を装置内に具備する場合には、サーバ１６０を介さないでネットワーク１０２を介して、携帯端末１３０と直接ＳＭＳを送受信できるようにしてもよい。 In the information sharing system 100 according to the present embodiment, the mobile terminal 130 includes at least a call function for making a call with an operator, an imaging function for imaging a subject at a site where a service recipient is present, and an SMS (Short) via a network 102 such as the Internet. It has an SMS transmission / reception function for transmitting and receiving (Message Service). On the other hand, the information processing apparatus 110 has at least a call function for an operator to talk to a service recipient, an imaging function 119 for imaging various information on the operator side, an imaging data receiving function for receiving imaging data transmitted from the mobile terminal 130, and reception. A display function for displaying the captured image data on the screen, and an SMS transmission / reception function for transmitting / receiving the SMS via the network 102. In this embodiment, the information processing apparatus 110 is configured to be able to send and receive SMS to and from the mobile terminal 130 via the server 160 serving as an SMS transmission / reception server. However, for example, an SMS transmission / reception function such as a touchpad is provided. In the apparatus, the SMS may be directly transmitted / received to / from the mobile terminal 130 via the network 102 without the server 160.
本実施形態では、携帯端末１３０と情報処理装置１１０は、ＷｅｂＲＴＣに対応したブラウザを記憶しており、ネットワーク１０２を介して当該ブラウザでのリアルタイム通信ができるようになっている。このため、本発明の一実施形態に係る情報共有システム１００は、携帯端末１３０と情報処理装置１１０との間で送受信されるＳＭＳを介して、ＷｅｂＲＴＣに対応したブラウザでのリアルタイム通信による現場にいる遠隔地の人とのコミュニケーションを簡単な操作により実現させることを特徴とする。具体的には、情報処理装置１１０は、携帯端末１３０にＷｅｂＲＴＣへのアクセス先情報となるＵＲＬが記載されたＳＭＳを送信可能に構成されており、携帯端末１３０は、ＳＭＳを受信してから当該ＳＭＳに記載されたＵＲＬにアクセスすることによって、携帯端末１３０に備わる通話機能及び撮像機能を介して撮像データを用いて音声データを交えて情報処理装置１１０とビデオ通話が可能に構成されている。 In the present embodiment, the mobile terminal 130 and the information processing apparatus 110 store a browser that supports WebRTC, and can perform real-time communication with the browser via the network 102. For this reason, the information sharing system 100 according to an embodiment of the present invention is in the field by real-time communication with a browser that supports WebRTC via SMS transmitted and received between the mobile terminal 130 and the information processing apparatus 110. It is characterized by realizing communication with a remote person by a simple operation. Specifically, the information processing apparatus 110 is configured to be able to transmit an SMS in which a URL serving as access destination information to the WebRTC is transmitted to the mobile terminal 130, and the mobile terminal 130 receives the SMS after receiving the SMS. By accessing the URL described in the SMS, a video call can be made with the information processing apparatus 110 using audio data using the imaging data via the call function and the imaging function provided in the mobile terminal 130.
次に、本発明の一実施形態に係る情報共有システムの詳細な機能構成について、図面を使用しながら説明する。図２は、本発明の一実施形態に係る情報共有システムの機能構成を示すブロック図である。 Next, a detailed functional configuration of the information sharing system according to the embodiment of the present invention will be described with reference to the drawings. FIG. 2 is a block diagram showing a functional configuration of the information sharing system according to the embodiment of the present invention.
本発明の一実施形態に係る本実施形態に係る情報共有システム１００は、ＷｅｂＲＴＣに対応したブラウザをそれぞれＲＯＭ１３７、１２０に記憶したコンピュータである携帯端末１３０と情報処理装置１１０に対して、図２に示すように、ネットワーク１０２を介して当該ブラウザ間での音声や動画等を交えたビデオ通話による双方向からのリアルタイム通信を実現させたものとなっている。そして、本実施形態の情報共有システム１００は、情報処理装置１１０と携帯端末１３０との間で行われるビデオ通話によって、サービス提供者とサービス受領者との間で交わされる撮像データと音声データをリアルタイム通信で共有できるようになっている。 The information sharing system 100 according to this embodiment according to the embodiment of the present invention is illustrated in FIG. 2 with respect to the portable terminal 130 and the information processing apparatus 110, which are computers that store browsers compatible with WebRTC in the ROMs 137 and 120, respectively. As shown in the figure, real-time communication in both directions by a video call using voice, video, etc. between the browsers via the network 102 is realized. Then, the information sharing system 100 according to the present embodiment performs real-time imaging data and audio data exchanged between the service provider and the service recipient by a video call performed between the information processing apparatus 110 and the mobile terminal 130. It can be shared by communication.
具体的には、本実施形態の情報共有システム１００は、サービス受領者がスマートフォン等の携帯端末１３０を用いて現場で撮像した相談・報告内容となる撮像データに基づいた現場情報を当該相談・報告内容に対応するサービス提供者側のオペレータのＰＣ等の情報処理装置１１０にビデオ通話によって音声データと動画や写真等の撮像データを介してリアルタイムに通知する。また、その際に、サービス提供者は、撮像データと音声データを絡めてビデオ通話によって、例えば、サービス受領者に対して適宜アドバイスや確認作業、操作説明や申請書の書き方の説明等を行いながら、対応サービスを行う。 Specifically, the information sharing system 100 according to the present embodiment provides on-site information based on imaging data, which is the content of consultation / report captured by the service recipient using the mobile terminal 130 such as a smartphone. The information processing device 110 such as a PC of the service provider operator corresponding to the content is notified in real time through audio data and imaging data such as a moving image and a photograph by a video call. At that time, the service provider, through video calls involving image data and audio data, for example, providing advice or confirmation work to the service recipient as appropriate, explaining operation instructions, and how to write application forms, etc. , Do the corresponding service.
なお、本明細書中において、「サービス受領者」とは、携帯端末１３０の撮像機能を用いて現場で撮像した撮像データに基づいた現場情報をサービス提供者側のオペレータに向けて通知する者をいう。具体的には、サービス提供者から受信したＳＭＳに記載されたＵＲＬからアクセスして、サービス提供者側のオペレータから問い合わせや商品の説明等のサービス業務を受ける者をいう。また、「サービス提供者」とは、サービス受領者から通知された現場情報に基づいて当該サービス受領者に対して各種サービスを提供する者をいう。さらに、「オペレータ」とは、サービス提供者のうち、サービス受領者からの問い合わせ等の受付や、オペレータ業務を行う者をいう。また、「コンピュータ」とは、例えば、スーパーコンピュータ、汎用コンピュータ、オフィスコンピュータ、制御用コンピュータ、パソコン、タッチパッド、及びスマートフォン等の携帯情報端末を含めた各種演算処理が可能な演算装置を備えた情報端末装置をいう。 In this specification, the “service recipient” refers to a person who notifies the operator on the service provider side of the site information based on the imaging data captured at the site using the imaging function of the mobile terminal 130. Say. Specifically, it means a person who accesses from a URL described in the SMS received from the service provider and receives a service operation such as an inquiry or product description from an operator on the service provider side. The “service provider” refers to a person who provides various services to the service receiver based on the field information notified from the service receiver. Further, the “operator” refers to a person who performs service such as reception of inquiries from service recipients and operator work among service providers. In addition, “computer” means, for example, a supercomputer, a general-purpose computer, an office computer, a control computer, a personal computer, a touch pad, and information including an arithmetic device capable of various arithmetic processing including a mobile information terminal such as a smartphone. A terminal device.
携帯端末１３０は、図２に示すように、ＣＰＵ（Central Processing Unit）１３１、表示部１３２、入力部１３３、通話部１３４、撮像部１３５、ＧＰＳセンサ１３６、ＲＯＭ（Read Only Memory）１３７、ＲＡＭ（Random access Memory）１３８、データ記憶部１３９、及び通信部１４０を備え、これらの構成要素が内部バス１４１を介して相互に電気的に接続されている。 As shown in FIG. 2, the mobile terminal 130 includes a CPU (Central Processing Unit) 131, a display unit 132, an input unit 133, a call unit 134, an imaging unit 135, a GPS sensor 136, a ROM (Read Only Memory) 137, a RAM ( Random access memory) 138, data storage unit 139, and communication unit 140, and these components are electrically connected to each other via an internal bus 141.
ＣＰＵ１３１は、ＲＯＭ１３７に記憶されている各種プログラムに従って、携帯端末１３０に備わる各構成要素の動作を制御する機能を有する。また、ＣＰＵ１３１は、これら各種処理を実行する際に、必要なデータ等を一時的に記憶するＲＡＭ１３８に適宜記憶させる機能を有する。このため、ＣＰＵ１３１による制御動作によって、データ記憶部１３９、ＲＯＭ１３７、ＲＡＭ１３８へのアクセス、液晶画面等からなる表示部１３２に対するデータの画面表示動作、各種操作ボタンや画面に表示されるアイコン等からなる入力部１３３に対する入力操作内容の確認動作、音声データを送受信する通話機能を有する通話部１３４に対する通話動作、カメラ等で被写体を撮像する撮像機能を有する撮像部１３５に対する撮像動作、ＧＰＳセンサ１３６に対する位置情報の検知動作、通信部１４０とネットワーク１０２を介して情報処理装置１１０等の外部端末装置と音声データ、写真データ、動画データ、テキストデータ等の各種データの送受信動作等を行えるようになる。 The CPU 131 has a function of controlling the operation of each component included in the mobile terminal 130 according to various programs stored in the ROM 137. Further, the CPU 131 has a function of appropriately storing necessary data and the like in the RAM 138 that temporarily stores necessary data when executing these various processes. Therefore, by the control operation by the CPU 131, access to the data storage unit 139, ROM 137, RAM 138, screen display operation of data on the display unit 132 including a liquid crystal screen, input including various operation buttons, icons displayed on the screen, and the like. Confirmation operation of input operation content to the unit 133, a call operation to the call unit 134 having a call function for transmitting and receiving voice data, an image pickup operation to the image pickup unit 135 having an image pickup function for picking up an object with a camera, etc., position information to the GPS sensor 136 And the transmission / reception operation of various data such as voice data, photo data, moving image data, and text data with the external terminal device such as the information processing device 110 via the communication unit 140 and the network 102.
特に、本実施形態では、携帯端末１３０は、通話部１３４による通話機能の他に、撮像部１３５によって現場情報を撮像する撮像機能、通信部１４０によってネットワーク１０２を介してＳＭＳを送受信するＳＭＳ送受信機能、及びＧＰＳセンサ１３６によって携帯端末１３０の位置情報を検知する機能を有することを特徴とする。このため、携帯端末１３０は、情報処理装置１１０から受信したＳＭＳに記載されたＷｅｂＲＴＣへのアクセス先情報となるＵＲＬをクリックしてアクセスすると、ＷｅｂＲＴＣに対応したブラウザが起動して、携帯端末１３０に備わる通話機能及び撮像機能を介して撮像データを用いて情報処理装置１１０とビデオ通話が可能になるように構成される。 In particular, in the present embodiment, the mobile terminal 130 has an imaging function for imaging field information by the imaging unit 135 in addition to a calling function by the calling unit 134, and an SMS transmission / reception function for transmitting and receiving SMS via the network 102 by the communication unit 140. And a function of detecting position information of the mobile terminal 130 by the GPS sensor 136. For this reason, when the mobile terminal 130 is accessed by clicking a URL that is access destination information to the WebRTC described in the SMS received from the information processing apparatus 110, a browser corresponding to the WebRTC is activated, and the mobile terminal 130 A video call can be made with the information processing apparatus 110 using the imaging data via the call function and the imaging function provided.
また、本実施形態では、携帯端末１３０は、表示部１３２に表示されるアイコンや画面のクリック等の操作によって、情報処理装置１１０に送信する動画や写真等の撮像データを拡大・縮小したり、撮像部１３５の撮像方向を切り替えたり、送信する撮像データを変更したり、表示部１３２の画面切替等の各種操作ができるようになっている。このため、サービス提供者側のオペレータからのアドバイスや説明、確認作業等に基づいて、適宜、送信する撮像データの拡大や変更等の操作をリアルタイムで行えるので、より容易に、かつ、確実にサービス受領者が現場で撮像した撮像データを用いて音声データを交えて現場情報を的確な内容でオペレータに通知することができる。 In the present embodiment, the mobile terminal 130 enlarges / reduces imaging data such as a moving image or a photo transmitted to the information processing apparatus 110 by an operation such as an icon displayed on the display unit 132 or a click on the screen. Various operations such as switching the imaging direction of the imaging unit 135, changing the imaging data to be transmitted, and switching the screen of the display unit 132 can be performed. For this reason, operations such as enlargement or change of image data to be transmitted can be performed in real time as appropriate based on advice, explanation, confirmation work, etc. from the operator on the service provider side, making service easier and more reliable. It is possible to notify the operator of the on-site information with accurate contents by using the imaging data picked up at the site by the recipient and using voice data.
一方、情報処理装置１１０は、図２に示すように、ＣＰＵ（Central Processing Unit）１１１、入力部１１５、表示部１１６、通信部１１７、通話部１１８、撮像部１１９、ＲＯＭ１２０、ＲＡＭ１２１、記憶媒体１２２、及びデータ記憶部１２３を備え、これらの構成要素がシステムバス１２４を介して相互に電気的に接続されている。入力部１１５は、各種データを入力する機能を有し、例えば、マウスやキーボード、タッチペン、タッチパネル等から構成される。表示部１１６は、ＣＰＵ１１１による演算結果やデータベースとなるデータ記憶部１２３の情報等を画面表示で出力する機能を有し、液晶画面等から構成される。通話部１１８は、音声データを送受信する通話機能を有し、撮像部１１９は、カメラ等で被写体を撮像する撮像機能を有する。 On the other hand, the information processing apparatus 110 includes a CPU (Central Processing Unit) 111, an input unit 115, a display unit 116, a communication unit 117, a call unit 118, an imaging unit 119, a ROM 120, a RAM 121, and a storage medium 122, as shown in FIG. And a data storage unit 123, and these components are electrically connected to each other via a system bus 124. The input unit 115 has a function of inputting various data, and includes, for example, a mouse, a keyboard, a touch pen, a touch panel, and the like. The display unit 116 has a function of outputting a calculation result by the CPU 111, information of the data storage unit 123 serving as a database, and the like on a screen display, and includes a liquid crystal screen or the like. The call unit 118 has a call function for transmitting and receiving audio data, and the image pickup unit 119 has an image pickup function for picking up an image of a subject with a camera or the like.
ＣＰＵ１１１は、ＲＯＭ１２０に記憶されている各種プログラムに従って、情報処理装置１１０に備わる各構成要素の動作を制御する機能を有する。また、ＣＰＵ１１１は、これら各種処理を実行する際に、必要なデータ等を一時的に記憶するＲＡＭ１２１に適宜記憶させる機能を有する。このため、ＣＰＵ１１１による制御動作によって、データ記憶部１２３、ＲＯＭ１２０、ＲＡＭ１２１、光ディスク（ＣＤ、ＤＶＤ）、ＨＤＤ、又はＵＳＢ等の各種メモリ等の記憶媒体１２２へのアクセス、表示部１１６に対するデータの画面表示動作、入力部１１５に対する入力操作内容の確認動作、外部通信とのインターフェースとなる通信部１１７を介したネットワーク１０２に対する各種情報の送受信動作、通話部１１８を介したサービス受領者との通話動作、撮像部１１９を介したオペレータ側の必要情報の撮像動作等を行えるようになる。 The CPU 111 has a function of controlling the operation of each component included in the information processing apparatus 110 according to various programs stored in the ROM 120. In addition, the CPU 111 has a function of appropriately storing necessary data and the like in the RAM 121 that temporarily stores these various processes. Therefore, by the control operation by the CPU 111, the data storage unit 123, the ROM 120, the RAM 121, the optical disk (CD, DVD), the access to the storage medium 122 such as various memories such as the HDD, or the USB, and the data display on the display unit 116 are displayed. Operation, confirmation operation of input operation content to input unit 115, transmission / reception operation of various information to / from network 102 via communication unit 117 serving as interface with external communication, call operation with service recipient via call unit 118, imaging The operator can perform an image capturing operation of necessary information via the unit 119.
本実施形態では、ＣＰＵ１１１は、図２に示すように、判定部１１２と、許可部１１３と、設定部１１４とを備える。判定部１１２は、情報処理装置１１０の各種動作を実行する際に必要となる判定動作をする機能を有する。具体的には、判定部１１２は、情報処理装置１１０の通信部１１７から携帯端末１３０に向けてＳＭＳが送信できたか否かを判定したり、ＳＭＳを携帯端末１３０に送信後にサービス受領者からＷｅｂＲＴＣへのアクセス先情報となるＵＲＬへのアクセスの有無を例えばＵＲＬへのクリックした回数のログを取得すること等によって判定する。また、本実施形態では、判定部１１２は、携帯端末１３０のＧＰＳセンサ１３６で検知された携帯端末１３０の位置情報に基づいて、サービス受領者の位置情報を判定する。さらに、本実施形態では、判定部１１２は、オペレータのオペレータ用ＵＲＬのアクセスがあるか否かの判定をする機能も有する。また、本実施形態では、判定部１１２は、送信先の携帯端末１３０にＳＭＳが到達したか否かの判定をする機能も有する。 In the present embodiment, the CPU 111 includes a determination unit 112, a permission unit 113, and a setting unit 114, as illustrated in FIG. The determination unit 112 has a function of performing a determination operation necessary when executing various operations of the information processing apparatus 110. Specifically, the determination unit 112 determines whether or not SMS can be transmitted from the communication unit 117 of the information processing apparatus 110 to the mobile terminal 130, or after transmitting the SMS to the mobile terminal 130, the service RTC receives a WebRTC from the service recipient. The presence or absence of access to the URL serving as the access destination information is determined by, for example, acquiring a log of the number of clicks on the URL. In the present embodiment, the determination unit 112 determines the location information of the service recipient based on the location information of the mobile terminal 130 detected by the GPS sensor 136 of the mobile terminal 130. Further, in the present embodiment, the determination unit 112 also has a function of determining whether or not there is access to the operator URL for the operator. In the present embodiment, the determination unit 112 also has a function of determining whether SMS has reached the destination mobile terminal 130.
許可部１１３は、情報処理装置１１０の各種動作を実行する際に必要となる許可動作をする機能を有する。具体的には、許可部１１３は、判定部１１２で携帯端末１３０がＵＲＬにアクセスした旨を確認したら、携帯端末１３０のＷｅｂＲＴＣに対応したブラウザへの通話機能及び撮像機能の動作を許可する機能を有する。また、本実施形態では、許可部１１３は、サービス提供者側のオペレータのうち担当者以外の者へのアクセス制限をしてサービス受領者の個人情報等の漏洩を防止するために、担当者となるオペレータへのサービス受領者とのビデオ通話を介した対応サービスへのアクセス許可を付与する機能も有する。 The permission unit 113 has a function of performing a permission operation necessary when executing various operations of the information processing apparatus 110. Specifically, when the determination unit 112 confirms that the mobile terminal 130 has accessed the URL, the permission unit 113 has a function of permitting a call function and an imaging function to the browser corresponding to the WebRTC of the mobile terminal 130. Have. Further, in this embodiment, the permission unit 113 restricts access to persons other than the person in charge among the operators on the service provider side to prevent leakage of personal information etc. of the service recipient. It also has a function of granting access permission to a corresponding service via a video call with a service recipient to the operator.
設定部１１４は、判定部１１２の判定内容や許可部１１３の許可内容に基づいて、情報処理装置１１０の各種動作を実行する際に必要となる指示動作をする機能を有する。具体的には、設定部１１４は、判定部１１２で情報処理装置１１０の通信部１１７から携帯端末１３０に向けてＳＭＳが送信されたと判定された場合に、表示部１１６が待機中画面に移行するように設定する。一方、設定部１１４は、判定部１１２で情報処理装置１１０の通信部１１７から携帯端末１３０に向けてＳＭＳが送信されなかったと判定された場合に、表示部１１６に送信エラーメッセージが表示されるように設定する。また、設定部１１４は、判定部１１２で情報処理装置１１０の通信部１１７から携帯端末１３０に向けて送信したＳＭＳが送信先の携帯端末１３０に到達しなかった判定された場合に、表示部１１６に送信エラーメッセージが表示されるように設定する。 The setting unit 114 has a function of performing an instruction operation necessary when executing various operations of the information processing apparatus 110 based on the determination content of the determination unit 112 and the permission content of the permission unit 113. Specifically, when the determination unit 112 determines that the SMS is transmitted from the communication unit 117 of the information processing apparatus 110 to the mobile terminal 130, the setting unit 114 shifts the display unit 116 to the standby screen. Set as follows. On the other hand, the setting unit 114 displays a transmission error message on the display unit 116 when the determination unit 112 determines that the SMS has not been transmitted from the communication unit 117 of the information processing apparatus 110 to the mobile terminal 130. Set to. The setting unit 114 also displays the display unit 116 when the determination unit 112 determines that the SMS transmitted from the communication unit 117 of the information processing apparatus 110 to the mobile terminal 130 has not reached the destination mobile terminal 130. Is set to display a transmission error message.
さらに、設定部１１４は、許可部１１３で携帯端末１３０のＷｅｂＲＴＣに対応したブラウザへの通話機能及び撮像機能の動作を許可したら、表示部１１６の画面表示を携帯端末１３０の撮像部１３５で撮像された撮像データへの切り替えを設定する。また、設定部１１４は、判定部１１２でオペレータのオペレータ用ＵＲＬのアクセスがある旨を判定して、許可部１１３でオペレータへの対応サービスのアクセス許可が付与されたら、担当する特定のオペレータのみがサービス受領者とのビデオ通話を介した対応サービスができるようにするために、オペレータにログインＩＤ及びパスワードを入力させる機能を有する。さらに、本実施形態では、設定部１１４は、オペレータ側の通話部１１８や撮像部１１９の動作のオンオフを切り替える操作をする機能を有し、ビデオ通話の際に、オペレータの影像をサービス受領者側の携帯端末１３０の表示部１３２に表示したり、非表示したり設定することもできる。 Further, when the setting unit 114 permits the call function to the browser corresponding to WebRTC of the mobile terminal 130 and the operation of the imaging function by the permission unit 113, the screen display of the display unit 116 is captured by the imaging unit 135 of the mobile terminal 130. Set the switch to the captured image data. The setting unit 114 determines that the operator URL is accessed by the determination unit 112, and when the permission unit 113 is granted access permission for the corresponding service, only the specific operator in charge is permitted. In order to enable a corresponding service via a video call with a service recipient, the operator has a function of inputting a login ID and a password. Further, in the present embodiment, the setting unit 114 has a function of switching on / off the operation of the call unit 118 and the imaging unit 119 on the operator side, and the image of the operator is displayed on the service receiver side during the video call. It can also be displayed or hidden on the display unit 132 of the portable terminal 130.
なお、本実施形態では、リアルタイムデータ転送をするために、データは、データトランスポート層セキュリティ（Datagram Transport Layer Security：ＤＴＬＳ）方式を使用しているので、盗聴や情報改ざんを防止することができる。また、本実施形態では、セキュアリアルタイムプロトコル（Secure Real-time Transport Protocol：ＳＲＴＰ）方式を介して、撮像データに含まれる動画データと音声データを暗号化しているので、権限のない第三者に情報を盗み見られたりすることがなく、情報の匿名性が高い通信を行うことができる。 In this embodiment, since data uses a data transport layer security (Datagram Transport Layer Security: DTLS) method for real-time data transfer, wiretapping and information tampering can be prevented. In the present embodiment, since the moving image data and audio data included in the imaging data are encrypted via the Secure Real-time Transport Protocol (SRTP) method, information is transmitted to an unauthorized third party. Can be communicated with high anonymity of information.
このように、本実施形態では、情報処理装置１１０は、携帯端末１３０から送信される撮像データを受信する撮像データ受信機能、受信した撮像データを画面表示する表示機能、及びネットワークを介してＳＭＳを送受信するＳＭＳ送受信機能を有することを特徴とする。このため、情報処理装置１１０は、携帯端末１３０に送信したＳＭＳに記載されたＷｅｂＲＴＣへのアクセス先情報となるＵＲＬへのサービス受領者のアクセスを確認すると、ＷｅｂＲＴＣに対応したブラウザが起動して、情報処理装置１１０に備わる通話機能及び撮像機能を介して携帯端末１３０と音声データや映像データを交えたビデオ通話が可能になるように構成される。 As described above, in the present embodiment, the information processing apparatus 110 performs the imaging data reception function for receiving the imaging data transmitted from the mobile terminal 130, the display function for displaying the received imaging data on the screen, and the SMS via the network. It has an SMS transmission / reception function for transmission / reception. For this reason, when the information processing apparatus 110 confirms the access of the service recipient to the URL serving as the access destination information to the WebRTC described in the SMS transmitted to the mobile terminal 130, the browser corresponding to the WebRTC is activated, Via the call function and the imaging function provided in the information processing apparatus 110, the mobile terminal 130 is configured to be able to make a video call using audio data and video data.
すなわち、本実施形態では、まず、オペレータが通信部１５２と通話部１５４を介して通話用電話機１５０でフリーダイヤル等によって、サービス受領者から電話を受けたら、オペレータは、サービス受領者の番号通知や問合せ等によって確認した電話番号データに基づいて、サービス受領者の携帯端末１３０にＷｅｂＲＴＣへのアクセス先情報となるＵＲＬが記載されたＳＭＳを送信する。そして、サービス受領者がサービス提供者側のオペレータから受信したＳＭＳに記載されたＵＲＬにクリックしてアクセスすることによって、サービス受領者側の撮像データを絡めてＷｅｂＲＴＣに対応したブラウザでのビデオ通話によるリアルタイム通信が可能になる。また、オペレータは、情報処理装置１１０に備わる通話機能と撮像機能を使用して、サービス受領者の携帯端末１３０と音声データ及び写真や動画を含む映像データを介して、適宜アドバイスや説明、確認作業を行いながら、サービス受領者とビデオ通話ができるようになる。 That is, in the present embodiment, first, when an operator receives a call from a service recipient by a toll-free number or the like on the telephone 150 for communication via the communication unit 152 and the call unit 154, the operator receives a number notification of the service recipient, Based on the telephone number data confirmed by the inquiry or the like, an SMS in which a URL serving as access destination information for WebRTC is described is transmitted to the mobile terminal 130 of the service recipient. Then, when the service recipient clicks and accesses the URL described in the SMS received from the operator on the service provider side, the image data on the service recipient side is entangled with the video call in the browser corresponding to WebRTC. Real-time communication is possible. In addition, the operator uses the call function and the imaging function provided in the information processing apparatus 110 to appropriately give advice, explanation, and confirmation work via the mobile terminal 130 of the service recipient and the video data including audio data and photos and videos. You will be able to make a video call with the service recipient.
このため、サービス受領者にとって手軽で簡単な操作によって、サービス受領者から現場情報をサービス提供者側のオペレータにリアルタイムでより正確に通知できるようになる。また、サービス提供者側のオペレータは、送信先としてサービス受領者の電話番号を入力することによってメッセージの送信が可能なＳＭＳでＷｅｂＲＴＣに対応したブラウザでのビデオ通話を開始するための手順をサービス受領者に送信できる。これによって、サービス提供者側のオペレータは、サービス受領者がＳＭＳに記載したＵＲＬにアクセスしたら、サービス受領者に適宜リアルタイムに現場情報に応じた的確なアドバイスや説明、確認作業等を行いながら、サービス受領者から送信された撮像データで現場情報を確認してから、当該現場情報に対してより的確に対応したサービス業務をサービス受領者に提供できるようになる。また、情報処理装置１１０を介してサービス受領者から撮像データを受信したオペレータは、サービス受領者から携帯端末１３０の位置情報を受信することによって、サービス受領者の位置情報を正確に判定することができるので、サービス受領者のいる現場でのトラブル等に対して迅速な対応が可能になる。 For this reason, it becomes possible to notify the site information from the service recipient to the operator on the service provider side in a more accurate manner in real time by an easy and simple operation for the service recipient. In addition, the operator on the service provider side receives a service procedure for starting a video call in a browser that supports WebRTC with SMS that can send a message by inputting the telephone number of the service recipient as a destination. Can be sent to As a result, when the service provider accesses the URL described in the SMS, the service provider operator provides the service recipient with appropriate advice, explanation, confirmation work, etc. according to the site information in real time as appropriate. After confirming the site information with the imaging data transmitted from the recipient, it is possible to provide the service recipient with a service operation more accurately corresponding to the site information. Further, the operator who has received the imaging data from the service recipient via the information processing apparatus 110 can accurately determine the location information of the service recipient by receiving the location information of the mobile terminal 130 from the service recipient. As a result, it is possible to promptly respond to troubles at the site where the service recipient is located.
すなわち、本実施形態の情報共有システム１００を適用することによって、簡単な操作でサービス受領者とサービス提供者との間でビデオ通話による撮像データと音声データの共有が図れるようになる。このため、サービス受領者からサービス提供者への現場情報の通知や、サービス提供者からサービス受領者への各種説明等のサービス業務の提供を的確に、かつ、迅速に行えるようになる。 That is, by applying the information sharing system 100 of the present embodiment, it is possible to share imaging data and audio data by video call between a service recipient and a service provider with a simple operation. For this reason, it is possible to accurately and promptly provide service work such as notification of field information from the service recipient to the service provider and various explanations from the service provider to the service recipient.
次に、本発明の一実施形態に係る情報共有システム１００を適用した情報共有方法について、図面を使用しながら説明する。図３は、本発明の一実施形態に係る情報共有方法の概略を示すフロー図である。 Next, an information sharing method to which the information sharing system 100 according to an embodiment of the present invention is applied will be described with reference to the drawings. FIG. 3 is a flowchart showing an outline of an information sharing method according to an embodiment of the present invention.
本発明の一実施形態に係る情報共有方法は、サービス受領者が現場で撮像した撮像データに基づいた現場情報をサービス提供者側のオペレータとビデオ通話を介して音声データを交えて共有する際に適用される。特に、本実施形態のビデオ通話方法は、ＷｅｂＲＴＣに対応したブラウザをそれぞれ記憶した携帯端末と情報処理装置がインターネット等のネットワークを介して当該ブラウザでのリアルタイム通信をできるようにしたシステムに適用される。 An information sharing method according to an embodiment of the present invention is a method for sharing on-site information based on image data captured by a service recipient on-site with an operator on the service provider side through a video call and sharing audio data. Applied. In particular, the video call method according to the present embodiment is applied to a system in which a mobile terminal and an information processing apparatus each storing a browser corresponding to WebRTC can perform real-time communication with the browser via a network such as the Internet. .
本発明の一実施形態に係る情報共有方法は、図３に示すフローに沿って行われる。具体的には、まず、サービス提供者側のオペレータは、情報処理装置の表示部に表示され、サービス受領者とのビデオ通話を行うアクセス先情報となるオペレータ用ＵＲＬにアクセスする（工程Ｓ１０）。本実施形態では、オペレータが情報処理装置の表示部に表示されるオペレータ用ＵＲＬにアクセスすると、担当オペレータ以外のアクセスを制限するために、図４に示すようなアクセス許可を与えられた担当オペレータのログインＩＤとパスワードを入力する画面が表示部１１６に表示されるので、画面の指定された欄にそれぞれ各オペレータに付与されたログインＩＤとパスワードを入力してログインする（工程Ｓ１１）。そして、オペレータは、サービス受領者とのビデオ通話によるサービス対応の準備をする。 The information sharing method according to an embodiment of the present invention is performed along the flow shown in FIG. Specifically, first, the operator on the service provider side accesses an operator URL that is displayed on the display unit of the information processing apparatus and serves as access destination information for performing a video call with the service recipient (step S10). In the present embodiment, when the operator accesses the operator URL displayed on the display unit of the information processing apparatus, in order to restrict access other than the operator in charge, the operator in charge who has been granted access permission as shown in FIG. Since a screen for entering the login ID and password is displayed on the display unit 116, login is performed by entering the login ID and password assigned to each operator in the designated column of the screen (step S11). Then, the operator prepares for service correspondence by video call with the service recipient.
その後、オペレータがサービス受領者からフリーダイヤル等でサービス提供者宛の電話を受信すると（工程Ｓ１２）、オペレータは、ＳＭＳ送信用画面の送信先入力欄にサービス受領者の番号通知や問合せ等によって確認したサービス受領者の電話番号を入力する（工程Ｓ１３）。そして、オペレータは、ＷｅｂＲＴＣに対応したブラウザをそれぞれ記憶した情報処理装置から携帯端末にＷｅｂＲＴＣへのアクセス先情報となるＵＲＬが記載されたＳＭＳをオペレータに電話してきたサービス受領者宛に送信する（工程Ｓ１４）。 After that, when the operator receives a call to the service provider from the service recipient by toll-free number or the like (step S12), the operator confirms the number by the service recipient in the transmission destination input column of the SMS transmission screen or by an inquiry. The telephone number of the received service recipient is input (step S13). Then, the operator transmits an SMS in which the URL serving as the access destination information to the WebRTC is transmitted to the mobile terminal from the information processing apparatus each storing the browser corresponding to the WebRTC to the service recipient who has called the operator (step) S14).
なお、ＳＭＳ内に記載されたＵＲＬは、サービス受領者とオペレータ以外の第三者がアクセスできないようにするために、例えば、ＳＭＳ送信後は、発行したＵＲＬが１回限りの接続に設定する等して、一度使用したＵＲＬは、再使用できないように設定されている。また、本実施形態では、オペレータがオペレータ用ＵＲＬにアクセスしてログインＩＤとパスワードを入力してサービス受領者とのビデオ通話によるサービス対応の準備をしてから、サービス受領者からの電話を受信しているが、サービス受領者からの電話を受信してから、当該ビデオ通話によるサービス対応の準備を行ってもよい。 Note that the URL described in the SMS is set to be a one-time connection after the SMS transmission, for example, so that the third party other than the service recipient and the operator cannot access the URL. The URL once used is set so that it cannot be reused. In this embodiment, the operator accesses the operator URL, inputs the login ID and password, prepares for the service correspondence by the video call with the service recipient, and then receives the call from the service recipient. However, after receiving a call from the service recipient, preparation for service correspondence by the video call may be made.
その後、オペレータは、サービス受領者宛にＳＭＳを送信した際に、ＳＭＳの送信の可否を確認する（工程Ｓ１５）。工程Ｓ１５でＳＭＳを送信できた場合には、情報処理装置の表示部が自動的に待機中画面に移行する（工程Ｓ１６）。一方、工程Ｓ１５でＳＭＳを送信できなかった場合には、情報処理装置の表示部に送信エラーメッセージが表示される（工程Ｓ２２）。このように、ＳＭＳの送信の可否によって情報処理装置の表示部の画面表示が切り替われば、サービス提供者側の情報処理装置からサービス受領者の携帯端末へのＳＭＳの送信の可否を容易に判別できるようになる。 Thereafter, when the operator transmits the SMS to the service recipient, the operator confirms whether or not the SMS can be transmitted (step S15). If the SMS can be transmitted in step S15, the display unit of the information processing apparatus automatically shifts to the standby screen (step S16). On the other hand, if the SMS cannot be transmitted in step S15, a transmission error message is displayed on the display unit of the information processing apparatus (step S22). Thus, if the screen display of the display unit of the information processing device is switched depending on whether SMS transmission is possible, it is easily determined whether SMS transmission from the information processing device on the service provider side to the mobile terminal of the service recipient is possible. become able to.
情報処理装置の表示部が自動的に待機中画面に移行した後には、ＳＭＳがサービス受領者の携帯端末に到達したか否かの確認をする（工程Ｓ１７）。ＳＭＳがサービス受領者の携帯端末に到達した旨を確認したら、サービス受領者による携帯端末のＵＲＬへのアクセスの有無を確認する（工程Ｓ１８）。本実施形態では、サービス提供者側の情報処理装置からサービス受領者の携帯端末にＳＭＳが送信されると、図５に示すように、携帯端末１３０の表示部１３２には、ＷｅｂＲＴＣへのアクセス先情報となるＵＲＬが記載されたＳＭＳが表示され、サービス受領者は、サービス提供者による各種サービスの適用を受けるために、ＵＲＬにアクセスするように誘導される。一方、工程Ｓ１７でＳＭＳが到達していない旨を確認した場合には、情報処理装置の表示部に送信エラーメッセージが表示される（工程Ｓ２２）。 After the display unit of the information processing apparatus automatically shifts to the standby screen, it is confirmed whether the SMS has reached the mobile terminal of the service recipient (step S17). When it is confirmed that the SMS has reached the mobile terminal of the service recipient, it is confirmed whether or not the service receiver has accessed the URL of the mobile terminal (step S18). In this embodiment, when the SMS is transmitted from the information processing apparatus on the service provider side to the mobile terminal of the service recipient, as shown in FIG. 5, the display unit 132 of the mobile terminal 130 has an access destination to WebRTC. An SMS in which the URL that serves as information is displayed is displayed, and the service recipient is guided to access the URL in order to receive application of various services by the service provider. On the other hand, if it is confirmed in step S17 that the SMS has not reached, a transmission error message is displayed on the display unit of the information processing apparatus (step S22).
工程Ｓ１８で携帯端末のＵＲＬへのアクセスがある旨を確認したら、当該携帯端末のＷｅｂＲＴＣに対応したブラウザへの通話機能及び撮像機能の動作を許可する（工程Ｓ１９）。そして、携帯端末のブラウザへの通話機能及び撮像機能の動作が許可されたら、ブラウザが起動してこれらの通話機能及び撮像機能を介して、図６に示すように、携帯端末１３０の表示部１３２と情報処理装置１１０の表示部１１６との間でビデオ通話が開始される（工程Ｓ２０）。ビデオ通話が開始されたら、携帯端末１３０の表示部１３２と情報処理装置１１０の表示部１１６の端部側には、それぞれ自分側を撮像したサブ表示画面１３２ａ、１１６ａと各種操作をする際の入力手段となるアイコン１３３ａ、１１５ａが表示される。また、ビデオ通話が開始されたら、サービス受領者は、必要に応じてアイコン１３３ａを操作して携帯端末１３０の表示部１３２の画面表示を撮像データに切り替える（工程Ｓ２１）。 If it is confirmed in step S18 that there is access to the URL of the mobile terminal, the operation of the call function and imaging function to the browser corresponding to WebRTC of the mobile terminal is permitted (step S19). Then, when the operation of the call function and the imaging function to the browser of the mobile terminal is permitted, the browser is activated and the display unit 132 of the mobile terminal 130 is connected via the call function and the image capture function as shown in FIG. And a video call is started between the display unit 116 of the information processing apparatus 110 (step S20). When the video call is started, the display unit 132 of the portable terminal 130 and the display unit 116 of the information processing apparatus 110 are input to the end portions of the display unit 116 and the sub display screens 132a and 116a, which are images of the own side, respectively. Icons 133a and 115a as means are displayed. When the video call is started, the service recipient operates the icon 133a as necessary to switch the screen display on the display unit 132 of the mobile terminal 130 to the imaging data (step S21).
このように、本発明の一実施形態に係る情報共有システム及び情報共有方法では、サービス受領者からの電話番号のみでメッセージが送信可能となるＳＭＳを活用することによって、ＷｅｂＲＴＣへのアクセス先情報となるＵＲＬが記載されたＳＭＳをサービス提供者側のオペレータからサービス受領者に送信できる。このため、サービス受領者は、受信したＳＭＳに記載されたＵＲＬにアクセスすることによって、手軽にオペレータとビデオ通話ができるようになる。すなわち、サービス受領者がサービス提供者側のオペレータから受信したＳＭＳに記載されたＵＲＬにアクセスすることによって、サービス受領者側の撮像データを絡めて音声データを交えながらＷｅｂＲＴＣに対応したブラウザでのリアルタイム通信が可能になる。 As described above, in the information sharing system and the information sharing method according to the embodiment of the present invention, the access destination information to the WebRTC can be obtained by utilizing the SMS that can transmit the message only by the telephone number from the service recipient. Can be transmitted from the service provider operator to the service recipient. Therefore, the service recipient can easily make a video call with the operator by accessing the URL described in the received SMS. That is, by accessing the URL described in the SMS received by the service recipient from the operator on the service provider side, real-time in a browser that supports WebRTC while mingling the imaging data on the service recipient side and exchanging voice data Communication is possible.
このため、サービス受領者は、簡単な操作によって携帯端末の撮像機能を用いて撮像した撮像データに基づいた現場情報をサービス提供者側のオペレータに確実に分かり易く直感的に通知できるようになる。一方、オペレータは、サービス受領者と音声データ及び写真や動画を含む映像データを介して、適宜アドバイスや説明、確認作業を行いながら、サービス受領者とビデオ通話ができるようになる。このように、本発明の一実施形態に係る情報共有システム及び情報共有方法は、サービス受領者がサービス提供者から受信したＳＭＳに記載されたＵＲＬにアクセスする簡単な操作によって、サービス受領者側の撮像データを絡めてビデオ通話による撮像データと音声データの共有がリアルタイム通信で図れるので、各種業界に適用可能となる。 For this reason, the service receiver can surely and intuitively notify the operator on the service provider side of the site information based on the imaging data imaged using the imaging function of the portable terminal by a simple operation. On the other hand, the operator can make a video call with the service recipient while performing advice, explanation, and confirmation work as appropriate through the voice data and video data including photos and videos with the service recipient. As described above, the information sharing system and the information sharing method according to the embodiment of the present invention allow the service receiver side to perform a simple operation of accessing the URL described in the SMS received from the service provider. Since it is possible to share imaging data and audio data by video communication with real-time communication with the imaging data, it can be applied to various industries.
例えば、本発明の一実施形態に係る情報共有システム１００及び情報共有方法を銀行やクレジットカード会社に適用した場合には、サービス提供者となる銀行やクレジットカード会社は、顧客となるサービス受領者の本人確認を容易に行えるようになる。具体的には、本実施形態の情報共有システム１００及び情報共有方法を適用して、サービス受領者は、携帯端末１３０の撮像機能による撮像データを用いて、図７に示すように、サービス提供者側のオペレータの情報処理装置１１０の表示部１１６にサービス受領者の現場情報となる運転免許証をビデオ通話によってリアルタイムで通知できる。 For example, when the information sharing system 100 and the information sharing method according to an embodiment of the present invention are applied to a bank or a credit card company, the bank or the credit card company serving as the service provider may have the service recipient serving as the customer. Identity verification can be performed easily. Specifically, by applying the information sharing system 100 and the information sharing method according to the present embodiment, the service receiver uses the imaging data obtained by the imaging function of the mobile terminal 130, as shown in FIG. The driver's license, which is the site information of the service recipient, can be notified in real time by video call on the display unit 116 of the information processing apparatus 110 of the side operator.
また、サービス提供者側のオペレータが必要に応じてサービス受領者の本人確認書類となる運転免許証の詳細を確認したい場合には、オペレータがビデオ通話でサービス受領者に現場情報となる運転免許証を拡大表示するように依頼すると、サービス受領者は、携帯端末１３０に備わるカメラを作動させることによって、運転免許証を拡大させて表示するように撮影しながらリアルタイムでオペレータに通知できる。その際に、サービス提供者側のオペレータは、表示部１１６の画面表示データを情報処理装置１１０のデータ記憶部１２３（図２参照）に適宜保存してもよい。 Also, if the operator of the service provider wants to confirm the details of the driver's license, which is the identity confirmation document for the service recipient, if necessary, the operator can use the driver's license as the site information to the service recipient through a video call. If the request is made to enlarge the display, the service receiver can notify the operator in real time while taking a picture so as to enlarge and display the driver's license by operating the camera provided in the mobile terminal 130. At that time, the operator on the service provider side may appropriately save the screen display data of the display unit 116 in the data storage unit 123 (see FIG. 2) of the information processing apparatus 110.
さらに、本発明の一実施形態に係る情報共有システム１００及び情報共有方法を自動車保険会社に適用した場合には、サービス提供者となる自動車保険会社は、顧客となるサービス受領者の交通事故の現場状況の確認をサービス受領者の撮像データを介して容易に行えるようになる。具体的には、本実施形態の情報共有システム１００及び情報共有方法を適用して、図８に示すように、携帯端末１３０の撮像機能による撮像データを用いて、サービス提供者側のオペレータの情報処理装置１１０の表示部１１６にサービス受領者の現場情報となる事故現場の状況をビデオ通話によってリアルタイムで通知できる。その際に、自動車保険会社は、オペレータが適宜サービス受領者から撮像データ等を介して事故状況等の確認作業や対応説明等を行いながら、事故内容を早急に確認した上で当該事故内容に応じた迅速な対応が可能になる。 Furthermore, when the information sharing system 100 and the information sharing method according to an embodiment of the present invention are applied to a car insurance company, the car insurance company serving as a service provider can provide a traffic accident site for a service recipient serving as a customer. The situation can be easily confirmed via the image data of the service recipient. Specifically, by applying the information sharing system 100 and the information sharing method of the present embodiment, as shown in FIG. 8, the information of the operator on the service provider side using the imaging data by the imaging function of the mobile terminal 130 is used. The situation of the accident site that is the site information of the service recipient can be notified to the display unit 116 of the processing device 110 in real time by a video call. At that time, the auto insurance company will promptly confirm the details of the accident and respond to the accident contents while the operator confirms the situation of the accident etc. from the service recipient via imaging data etc. Quick response is possible.
また、本発明の一実施形態に係る情報共有システム１００及び情報共有方法をメーカーに適用した場合には、サービス提供者となる各種装置を製造・販売するメーカーは、顧客となるサービス受領者に販売商品の使用方法の説明等を容易に行えるようになる。例えば、本実施形態の情報共有システム１００及び情報共有方法を適用して、図９に示すように、メーカー側のオペレータは、販売商品を自ら手に取って情報処理装置１１０に備わる撮像部１１９で撮像しながら、当該商品の使い方の説明等をサービス受領者にビデオ通話を介してリアルタイムで行える。このため、サービス提供者となるメーカーは、サービス受領者となる顧客に対して、ビデオ通話によるマンツーマンでの販売等に必要な説明を行えるようになる。 In addition, when the information sharing system 100 and the information sharing method according to an embodiment of the present invention are applied to a manufacturer, the manufacturer that manufactures and sells various devices as a service provider sells it to a service recipient as a customer. It will be possible to easily explain how to use the product. For example, by applying the information sharing system 100 and the information sharing method of the present embodiment, as shown in FIG. 9, the operator on the maker side picks up the sales product himself and uses the imaging unit 119 provided in the information processing apparatus 110. While taking an image, the service recipient can be explained in real time via a video call to the service recipient. For this reason, the manufacturer as a service provider can give explanations necessary for one-to-one sales by video call to the customer as a service recipient.
このように、本発明の一実施形態に係る情報共有システム及び情報共有方法では、サービス提供者側のオペレータから送信されるＳＭＳに記載されたＷｅｂＲＴＣへのＵＲＬにアクセスすることによって、サービス受領者とサービス提供者との間で撮像データと音声データの共有をリアルタイムで図りながら、ビデオ通話が行えるようになる。このため、サービス受領者は、サービス提供者側のオペレータにリアルタイム通信によるビデオ通話で現場情報を映像データと音声データを交えて容易に、かつ、正確に通知できるようになる。一方、サービス提供者側のオペレータは、ビデオ通話を介してサービス受領者に適宜アドバイスや確認作業、説明をリアルタイムで行えるようになる。 As described above, in the information sharing system and the information sharing method according to the embodiment of the present invention, by accessing the URL to the WebRTC described in the SMS transmitted from the operator on the service provider side, Video calls can be made while sharing imaging data and audio data with service providers in real time. For this reason, the service recipient can easily and accurately notify the operator on the service provider side of the site information through the video call by real-time communication with the video data and the audio data. On the other hand, the operator on the service provider side can appropriately give advice, confirmation work, and explanation to the service recipient in real time via the video call.
すなわち、本発明の一実施形態に係る情報共有システム及び情報共有方法を銀行やクレジットカード会社、保険会社、メーカー等の各種業界のサービス提供者に適用すると、サービス提供者は、より迅速かつ確実にサービス受領者からの各種トラブルや身元情報、相談内容等の対応サービスに必要な現場情報を確認することができるようになる。このため、サービス提供者は、より迅速にサービス受領者からの現場情報に対応する的確な対応サービスを確実に行うことができるようになる。 That is, when the information sharing system and the information sharing method according to an embodiment of the present invention are applied to service providers in various industries such as banks, credit card companies, insurance companies, and manufacturers, the service providers can more quickly and reliably. It will be possible to confirm on-site information necessary for the corresponding service such as various troubles from the service recipient, identity information, and consultation contents. For this reason, the service provider can surely perform an accurate response service corresponding to the field information from the service recipient more quickly.
また、従来からある「ＬＩＮＥ」、「Ｓｋｙｐｅ」、「Ｆａｃｅ Ｔｉｍｅ」等によるビデオ通話を利用するためには、予め専用のアプリケーションをダウンロードする必要があったが、本発明の一実施形態に係る情報共有システムは、ブラウザでのリアルタイム通信のため、専用のアプリケーションのダウンロードが不要となる。このため、専用アプリケーションの事前登録の煩わしい手続も不要となるので、サービス受領者にとって使い易いビデオ通話システムとなる。 In addition, in order to use a conventional video call using “LINE”, “Skype”, “Face Time”, etc., it is necessary to download a dedicated application in advance. The shared system eliminates the need for downloading a dedicated application because of real-time communication with a browser. For this reason, the troublesome procedure for pre-registration of the dedicated application is not required, and the video call system is easy to use for the service recipient.
そして、本発明の一実施形態に係る情報共有システム及び情報共有方法は、ＳＭＳとＷｅｂＲＴＣの技術を組み合わせることによって、より簡単な操作によってサービス受領者とサービス提供者側のオペレータとのビデオ通話を実現可能としている。すなわち、サービス提供者は、送信先の電話番号を入力することによって送信可能なＳＭＳによって、ＷｅｂＲＴＣに対応したブラウザを起動させるためのアクセス先情報となるＵＲＬの情報を送信するので、従来のＥメールのように送信先のＥメールアドレスを入力する作業の負担を軽減して、より容易な送信先入力作業で効率的にＷｅｂＲＴＣに対応したブラウザの起動に必要な情報をサービス受領者に送信できる。一方、サービス受領者は、サービス提供者側のオペレータから受信したＳＭＳに記載されたＷｅｂＲＴＣへのＵＲＬにアクセスするという簡単な操作によって、当該オペレータとのビデオ通話をリアルタイム通信で行うことによって、迅速に、かつ確実に現場で撮像した撮像データをサービス提供者と音声データを絡めて共有化が図れるので、極めて大きな工業的価値を有する。 The information sharing system and information sharing method according to an embodiment of the present invention realizes a video call between a service recipient and an operator on the service provider side by a simpler operation by combining SMS and WebRTC technologies. It is possible. That is, the service provider transmits URL information serving as access destination information for starting a browser corresponding to WebRTC by SMS that can be transmitted by inputting the telephone number of the transmission destination. As described above, it is possible to reduce the burden of inputting the e-mail address of the transmission destination, and to transmit information necessary for starting the browser corresponding to WebRTC to the service recipient efficiently by an easier transmission destination input operation. On the other hand, the service recipient can quickly perform a video call with the operator through real-time communication by a simple operation of accessing the URL to the WebRTC described in the SMS received from the operator on the service provider side. In addition, since the image data captured on site can be shared with the service provider in association with the audio data, it has extremely great industrial value.
なお、上記のように本発明の一実施形態について詳細に説明したが、本発明の新規事項及び効果から実体的に逸脱しない多くの変形が可能であることは、当業者には、容易に理解できるであろう。従って、このような変形例は、全て本発明の範囲に含まれるものとする。 Although one embodiment of the present invention has been described in detail as described above, it is easily understood by those skilled in the art that many modifications can be made without departing from the novel matters and effects of the present invention. It will be possible. Therefore, all such modifications are included in the scope of the present invention.
例えば、明細書又は図面において、少なくとも一度、より広義又は同義な異なる用語と共に記載された用語は、明細書又は図面のいかなる箇所においても、その異なる用語に置き換えることができる。また、情報共有システムの構成、動作も本発明の一実施形態で説明したものに限定されず、種々の変形実施が可能である。 For example, a term described with a different term having a broader meaning or the same meaning at least once in the specification or the drawings can be replaced with the different term in any part of the specification or the drawings. Further, the configuration and operation of the information sharing system are not limited to those described in the embodiment of the present invention, and various modifications can be made.
１００ 情報共有システム、１０２ ネットワーク、１１０ 情報処理装置、１１１ ＣＰＵ、１１２ 判定部、１１３ 許可部、１１４ 設定部、１１５ 入力部、１１６ 表示部（表示機能）、１１７ 通信部（ＳＭＳ送受信機能、撮像データ受信機能）、１１８ 通話部（通話機能）、１１９ 撮像部（撮像機能）、１２０ ＲＯＭ、１２１ ＲＡＭ、１２２ 記憶媒体、１２３ データ記憶部、１２４ システムバス、１３０ 携帯端末、１３１ ＣＰＵ、１３２ 表示部、１３３ 入力部、１３４ 通話部（通話機能）、１３５ 撮像部（撮像機能）、１３６ ＧＰＳセンサ、１３７ ＲＯＭ、１３８ ＲＡＭ、１３９ データ記憶部、１４０ 通信部（ＳＭＳ送受信機能）、１４１ 内部バス DESCRIPTION OF SYMBOLS 100 Information sharing system, 102 Network, 110 Information processing apparatus, 111 CPU, 112 Judgment part, 113 Authorization part, 114 Setting part, 115 Input part, 116 Display part (display function), 117 Communication part (SMS transmission / reception function, Imaging data) Reception function), 118 communication unit (call function), 119 imaging unit (imaging function), 120 ROM, 121 RAM, 122 storage medium, 123 data storage unit, 124 system bus, 130 portable terminal, 131 CPU, 132 display unit, 133 Input unit, 134 Calling unit (calling function), 135 Imaging unit (imaging function), 136 GPS sensor, 137 ROM, 138 RAM, 139 Data storage unit, 140 Communication unit (SMS transmission / reception function), 141 Internal bus
Claims (7)
少なくとも前記オペレータと通話する通話機能、前記現場で被写体を撮像する撮像機能、及びネットワークを介してＳＭＳを送受信するＳＭＳ送受信機能を有する携帯端末と、
少なくとも前記サービス受領者と通話する通話機能、前記オペレータを撮像する撮像機能、前記携帯端末から送信される前記撮像データを受信する撮像データ受信機能、受信した前記撮像データを画面表示する表示機能、及び前記ネットワークを介して前記ＳＭＳを送受信するＳＭＳ送受信機能を有する情報処理装置と、を備え、
前記携帯端末と前記情報処理装置は、それぞれＷｅｂＲＴＣ（Web Real-Time Communication）に対応したブラウザを記憶しており、
前記情報処理装置は、前記携帯端末に前記ＷｅｂＲＴＣへのアクセス先情報となるＵＲＬが記載されたＳＭＳを送信可能に構成され、
前記携帯端末は、該ＳＭＳを受信してから前記ＵＲＬにアクセスすることによって、該携帯端末に備わる前記通話機能及び前記撮像機能を介して、前記撮像データを用いて前記情報処理装置と前記ビデオ通話が可能に構成されることを特徴とする情報共有システム。 An information sharing system for sharing image data captured by a service recipient on site with an operator on the service provider side through audio communication with audio data,
A mobile terminal having at least a call function for making a call with the operator, an imaging function for taking an image of a subject in the field, and an SMS transmission / reception function for sending / receiving SMS via a network;
A call function for calling at least the service recipient, an imaging function for imaging the operator, an imaging data receiving function for receiving the imaging data transmitted from the mobile terminal, a display function for displaying the received imaging data on a screen, and An information processing apparatus having an SMS transmission / reception function for transmitting / receiving the SMS via the network;
Each of the portable terminal and the information processing apparatus stores a browser that supports WebRTC (Web Real-Time Communication),
The information processing apparatus is configured to be able to transmit an SMS in which a URL serving as access destination information to the WebRTC is described to the mobile terminal,
The mobile terminal receives the SMS and then accesses the URL, thereby using the imaging data and the video call via the call function and the imaging function provided in the mobile terminal. An information sharing system that is configured to be capable of
少なくとも前記携帯端末の前記ＵＲＬへのアクセスの有無を判定する判定部と、
少なくとも前記判定部で前記携帯端末が前記ＵＲＬにアクセスした旨を確認したら、該携帯端末の前記ＷｅｂＲＴＣに対応した前記ブラウザへの前記通話機能及び前記撮像機能の動作を許可する許可部と、
少なくとも前記許可部で前記携帯端末の前記ＷｅｂＲＴＣに対応した前記ブラウザへの前記携帯端末及び前記情報処理装置の前記通話機能及び前記撮像機能の動作を許可したら、前記表示機能を有する表示部の画面表示を前記携帯端末で撮像された前記撮像データへの切り替えを設定する設定部と、を更に備えることを特徴とする請求項１に記載の情報共有システム。 The information processing apparatus includes:
A determination unit that determines at least whether or not the URL of the mobile terminal is accessed;
When at least the determination unit confirms that the mobile terminal has accessed the URL, a permission unit that permits operation of the call function and the imaging function to the browser corresponding to the WebRTC of the mobile terminal;
When at least the permission unit permits the call function and the imaging function of the portable terminal and the information processing apparatus to the browser corresponding to the WebRTC of the portable terminal, the screen display of the display unit having the display function The information sharing system according to claim 1, further comprising: a setting unit configured to set switching to the imaging data captured by the portable terminal.
前記情報処理装置は、前記判定部が前記携帯端末で検知された前記位置情報に基づいて前記サービス受領者の位置情報を判定することを特徴とする請求項２又は３の何れか１項に記載の情報共有システム。 The mobile terminal further has a function of detecting position information of the mobile terminal,
4. The information processing apparatus according to claim 2, wherein the determination unit determines the position information of the service recipient based on the position information detected by the mobile terminal. 5. Information sharing system.
ＷｅｂＲＴＣに対応したブラウザをそれぞれ記憶した情報処理装置から携帯端末に前記ＷｅｂＲＴＣへのアクセス先情報となるＵＲＬが記載されたＳＭＳを送信する工程と、
前記携帯端末の前記ＵＲＬへのアクセスの有無を確認する工程と、
前記携帯端末の前記ＵＲＬへのアクセスがある旨を確認したら、該携帯端末の前記ＷｅｂＲＴＣに対応した前記ブラウザへの通話機能及び撮像機能の動作を許可する工程と、
前記ブラウザへの前記通話機能及び前記撮像機能の動作が許可されたら、前記通話機能及び前記撮像機能を介して前記情報処理装置と前記ビデオ通話を開始する工程と、
前記ビデオ通話が開始したら、前記携帯端末の表示部の画面表示を前記撮像データに切り替える工程と、を有することを特徴とする情報共有方法。 An information sharing method for sharing image data captured by a service recipient on site with an operator on the service provider side through audio communication with audio data,
Transmitting an SMS in which a URL serving as access destination information to the WebRTC is transmitted from an information processing apparatus each storing a browser corresponding to WebRTC to a mobile terminal;
Confirming the presence or absence of access to the URL of the mobile terminal;
If it is confirmed that there is access to the URL of the mobile terminal, the step of permitting the call function and imaging function to the browser corresponding to the WebRTC of the mobile terminal;
A step of starting the video call with the information processing apparatus via the call function and the imaging function when the operation of the call function and the imaging function to the browser is permitted;
And a step of switching the screen display of the display unit of the portable terminal to the imaging data when the video call is started.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018065889A JP2019176433A (en) | 2018-03-29 | 2018-03-29 | Information sharing system, and information sharing method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018065889A JP2019176433A (en) | 2018-03-29 | 2018-03-29 | Information sharing system, and information sharing method |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2019176433A true JP2019176433A (en) | 2019-10-10 |
Family
ID=68169768
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2018065889A Pending JP2019176433A (en) | 2018-03-29 | 2018-03-29 | Information sharing system, and information sharing method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2019176433A (en) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP6824457B1 (en) * | 2020-04-30 | 2021-02-03 | ベルフェイス株式会社 | Programs, mobile phone devices, information processing systems and information processing methods |
| JP2021106355A (en) * | 2019-12-27 | 2021-07-26 | キヤノンマーケティングジャパン株式会社 | Information processing apparatus, control method, and program |
| JP2021179653A (en) * | 2020-05-11 | 2021-11-18 | ベルフェイス株式会社 | Information processing device, information processing system, information processing method and program |
-
2018
- 2018-03-29 JP JP2018065889A patent/JP2019176433A/en active Pending
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2021106355A (en) * | 2019-12-27 | 2021-07-26 | キヤノンマーケティングジャパン株式会社 | Information processing apparatus, control method, and program |
| JP7017699B2 (en) | 2019-12-27 | 2022-02-09 | キヤノンマーケティングジャパン株式会社 | Information processing equipment, control methods, and programs |
| JP6824457B1 (en) * | 2020-04-30 | 2021-02-03 | ベルフェイス株式会社 | Programs, mobile phone devices, information processing systems and information processing methods |
| JP2021175155A (en) * | 2020-04-30 | 2021-11-01 | ベルフェイス株式会社 | Program, mobile phone device, information processing system, and information processing method |
| WO2021220863A1 (en) * | 2020-04-30 | 2021-11-04 | ベルフェイス株式会社 | Storage medium, mobile telephone device, information processing system, information processing method, and program |
| JP2021179653A (en) * | 2020-05-11 | 2021-11-18 | ベルフェイス株式会社 | Information processing device, information processing system, information processing method and program |
| WO2021230012A1 (en) * | 2020-05-11 | 2021-11-18 | ベルフェイス株式会社 | Information processing device, information processing system, information processing method, program, and recording medium |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6214812B2 (en) | Transfer processing method and apparatus | |
| KR101951973B1 (en) | Resource access authorization | |
| US8433780B2 (en) | Systems and methods for automatically configuring a client for remote use of a network-based service | |
| JP5216810B2 (en) | Method for executing remote screen sharing, user terminal, program and system | |
| CN106888202B (en) | Authorized login method and device | |
| WO2014026563A1 (en) | Method and device for securing information interaction process | |
| JP2013538384A (en) | Device communication | |
| JP2019176433A (en) | Information sharing system, and information sharing method | |
| US11122109B2 (en) | Method for sharing information, electronic device and non-transitory storage medium | |
| US20080160960A1 (en) | Remote processing device management | |
| KR20160131886A (en) | Terminal device and method for protecting information thereof | |
| US20130263228A1 (en) | Document browsing system, controlling method therefor, and data server | |
| US9800635B2 (en) | System for selectively displaying information in a secured manner and method thereof | |
| CN114218510A (en) | Service page display method, device and equipment | |
| EP3385853A1 (en) | Control system, communication control method, and program | |
| US20180241745A1 (en) | Method and system for validating website login and online information processing | |
| WO2015151251A1 (en) | Network service providing device, network service providing method, and program | |
| CN112804098B (en) | Domain name fault line switching method and device, terminal equipment and storage medium | |
| JP2018151825A (en) | Evidence data storage system and program | |
| JP2008217712A (en) | Mail server access method and electronic mail system | |
| JP2014102595A (en) | Image forming apparatus, upload program, and upload system | |
| JP4629024B2 (en) | Authentication server and authentication method | |
| JP5922394B2 (en) | Information management system | |
| JP5922393B2 (en) | Reading registration system | |
| JP2008003745A (en) | Authentication system and authentication method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180329 |
|
| A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20180420 |
|
| A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20180517 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180821 |
|
| RD07 | Notification of extinguishment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7427 Effective date: 20180911 |
|
| RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20180914 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20181002 |
|
| RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20181002 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20180914 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20181002 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190108 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20190702 |