JP2012119815A - Terminal device, communication control method, and communication control program - Google Patents
Terminal device, communication control method, and communication control program Download PDFInfo
- Publication number
- JP2012119815A JP2012119815A JP2010266163A JP2010266163A JP2012119815A JP 2012119815 A JP2012119815 A JP 2012119815A JP 2010266163 A JP2010266163 A JP 2010266163A JP 2010266163 A JP2010266163 A JP 2010266163A JP 2012119815 A JP2012119815 A JP 2012119815A
- Authority
- JP
- Japan
- Prior art keywords
- information
- imaging
- information processing
- processing apparatus
- terminal device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
Description
本発明は、端末装置、通信制御方法、及び通信制御プログラムに関し、詳細には、複数のプログラム情報を記憶する情報処理装置と通信手段を介して接続され、少なくとも撮像情報及び音声情報のいずれかの送受信を行う端末装置、通信制御方法、通信制御プログラムに関する。 The present invention relates to a terminal device, a communication control method, and a communication control program. More specifically, the present invention is connected to an information processing apparatus that stores a plurality of program information via communication means, and at least one of imaging information and audio information. The present invention relates to a terminal device that performs transmission and reception, a communication control method, and a communication control program.
従来、複数の拠点でネットワークを介して接続し、各拠点で取得された撮影画像と音声情報を双方向に送受信することにより、遠隔の地にある者同士の会議を実現するテレビ会議装置が知られている。 2. Description of the Related Art Conventionally, there has been known a video conference apparatus that realizes a conference between persons at remote locations by connecting via a network at multiple sites and bidirectionally transmitting and receiving captured images and audio information acquired at each site. It has been.
また、さらに会議ソフトウェアをインストールした外部記憶媒体をパーソナルコンピュータに接続するだけで、多地点会議を起動でき、予め会議ソフトウェアをインストールしておく必要のない会議システムも提案されている（特許文献１）。上記システムは、インターネット網を介して接続されている２台以上のＵＳＢインターフェースを具備するパーソナルコンピュータと、会議ソフトウェアがインストールされているＵＳＢインターフェースを具備する外部記憶媒体とで構成され、上記外部記憶媒体を上記パーソナルコンピュータにＵＳＢインターフェースを介して接続することのみにより、会議ソフトウェアが自動起動するようになっているものである。 Further, there has also been proposed a conference system in which a multipoint conference can be started simply by connecting an external storage medium in which conference software is installed to a personal computer, and no conference software needs to be installed in advance (Patent Document 1). . The system includes a personal computer having two or more USB interfaces connected via an Internet network, and an external storage medium having a USB interface in which conference software is installed. The conference software is automatically started only by connecting to the personal computer via the USB interface.
しかし、上記システムでは、会議ソフトウェアがインストールされている外部記憶媒体とＵＳＢインターフェースでパーソナルコンピュータと接続することで、会議ソフトウエアを自動起動できるようになっているが、テレビ会議システムに必要なカメラ、マイク、スピーカは別途用意する必要がある。また、上記会議システムを起動させた後で、使用者はカメラ、マイク、スピーカの作動条件の設定操作が必要になり、会議システムを開始するまでの操作が煩わしいという課題がある。また、上記システムでは、予めパーソナルコンピュータに上記会議ソフトウェアがインストールされている場合でも、外部記憶媒体の会議ソフトウェアが自動起動してしまう。よって、処理速度の優れているパーソナルコンピュータにインストールされている会議ソフトウェアを使用したい場合でも、上記システムでは、外部記憶媒体にインストールされている会議システムが自動起動してしまうという課題もある。 However, in the above system, the conference software can be automatically started by connecting to an external storage medium in which the conference software is installed and a personal computer through a USB interface. It is necessary to prepare a microphone and a speaker separately. In addition, after starting the conference system, the user needs to set operation conditions for the camera, microphone, and speaker, and there is a problem that the operation until the conference system is started is troublesome. Further, in the above system, even when the conference software is installed in a personal computer in advance, the conference software on the external storage medium is automatically started. Therefore, even when it is desired to use conference software installed on a personal computer having a high processing speed, the above system has a problem that the conference system installed on the external storage medium is automatically started.
そこで、本発明の目的は、端末装置、通信制御方法、及び通信制御プログラムに関し、詳細には、複数のプログラム情報を記憶する情報処理装置と通信手段を介して接続され、少なくとも撮像情報及び音声情報のいずれかの送受信を行う端末装置、通信制御方法、通信制御プログラムを提供することを目的とする。 Therefore, an object of the present invention relates to a terminal device, a communication control method, and a communication control program. Specifically, the information processing apparatus is connected to an information processing apparatus that stores a plurality of program information via communication means, and at least imaging information and audio information are stored. It is an object of the present invention to provide a terminal device, a communication control method, and a communication control program that perform any one of the transmission and reception.
上記目的を達成する為に、請求項１に記載の端末装置では、複数のプログラム情報を記憶する情報処理装置と通信手段を介して接続され、少なくとも撮像情報及び音声情報のいずれかの送受信を行う端末装置において、撮影した画像を前記撮像情報として生成する撮像手段と、音声を前記音声情報として入力する音声情報入力手段と、前記通信手段を介して前記情報処理装置から取得した音声情報を出力する音声情報出力手段と、前記情報処理装置に対して前記通信手段を介して通信接続する外部接続手段と、前記撮像情報、又は前記音声情報を、前記情報処理装置を介して他の情報処理装置と送受信する制御を行うための撮像音声制御プログラム情報を記憶するプログラム情報記憶手段と、前記外部接続手段により前記情報処理装置と接続した時に、前記情報処理装置から送信される設定情報に基づいて、前記撮像音声制御プログラム情報が前記情報処理装置に記憶されているかどうかを判断する記憶判断手段を備え、前記記憶判断手段により前記情報処理装置に前記撮像音声制御プログラム情報が記憶されていないと判断された場合、前記端末装置の前記プログラム情報記憶手段に記憶されている前記撮像音声制御プログラム情報を前記情報処理装置上で起動させるための制御信号を送信する起動制御手段を備えることを特徴とする。
In order to achieve the above object, the terminal device according to
請求項２に記載の端末装置では、請求項１に記載の構成に加え、前記撮像手段、前記音声情報入力手段、前記音声情報出力手段の各々に関する作動条件の履歴情報である作動履歴情報と、前記設定情報とを対応付けして前記プログラム情報記憶手段に記憶する作動履歴情報記憶手段をさらに備え、前記起動制御手段は、前記情報処理装置から送信される前記設定情報に対応した前記作動履歴情報が、前記作動履歴情報記憶手段により前記プログラム情報記憶手段に記憶されているかどうかを判断し、記憶されていると判断した場合、前回作動した前記撮像手段、前記音声情報入力手段、前記音声情報出力手段の作動条件と同じ条件で作動させるようにすることを特徴とする。
In the terminal device according to
請求項３に記載の端末装置では、請求項２に記載の構成に加え、前記撮像手段で撮像した前記撮像情報から、人の顔画像の検出処理を行う顔検出手段と、前記顔検出手段で検出されたすべての前記顔画像のサイズが所定値以上で撮像可能かどうかを判断する顔画像サイズ判断手段をさらに備え、前記作動履歴情報記憶手段は、前記情報処理装置から送信される前記設定情報に対応した前記作動履歴情報が、前記プログラム情報記憶手段に記憶されていないと判断し、さらに前記顔画像サイズ判断手段により所定値以上のサイズで撮像可能であると判断した場合は、前記顔画像のサイズが前記所定値以上になるよう前記撮像手段を作動させる条件を前記作動条件として記憶することを特徴とする。
In the terminal device according to
請求項４に記載の端末装置では、請求項３に記載の構成に加え、前記顔画像サイズ判断手段により前記所定値以上のサイズで撮像できないと判断した場合、前記起動制御手段は、前記設定情報に対応した前記情報処理装置に備えられている撮像手段も作動させるよう前記制御信号を送信することを特徴とする。
In the terminal device according to
請求項５に記載の端末装置では、請求項１乃至４のいずれかに記載の構成に加え、前記音声情報入力手段から入力される雑音の雑音レベルが所定値以上かどうかを判断する雑音レベル判断手段をさらに備え、雑音レベル判断手段により所定値以上の雑音レベルであると判断した場合は、前記起動制御手段は、前記情報処理装置に備えられている音声情報入力手段を作動させるよう前記制御信号を送信することを特徴とする。
In the terminal device according to
請求項６に記載の通信制御方法では、複数のプログラム情報を記憶する情報処理装置と通信手段を介して接続され、少なくとも撮像情報及び音声情報のいずれかの送受信を行う端末装置において処理する通信制御方法において、撮影した画像を前記撮像情報として生成する撮像ステップと、音声を前記音声情報として入力する音声情報入力ステップと、前記通信手段を介して前記情報処理装置から取得した音声情報を出力する音声情報出力ステップと、前記情報処理装置に対して前記通信手段を介して通信接続する外部接続ステップと、前記撮像情報、又は前記音声情報を、前記情報処理装置を介して他の情報処理装置と送受信する制御を行うための撮像音声制御プログラム情報を記憶するプログラム情報記憶ステップと、前記外部接続ステップにより前記情報処理装置と接続した時に、前記情報処理装置から送信される設定情報に基づいて、前記撮像音声制御プログラム情報が記憶されているかどうかを判断する記憶判断ステップを備え、前記記憶判断ステップにより前記情報処理装置に前記撮像音声制御プログラム情報が記憶されていないと判断された場合、前記端末装置の前記プログラム情報記憶ステップにて記憶されている前記撮像音声制御プログラム情報を前記情報処理装置上で起動させるための制御信号を送信する起動制御ステップを処理することを特徴とする。
The communication control method according to
請求項７に記載の通信制御プログラムでは、複数のプログラム情報を記憶する情報処理装置と通信手段を介して接続され、少なくとも撮像情報及び音声情報のいずれかの送受信を行う端末装置において実行する通信制御プログラムにおいて、撮影した画像を前記撮像情報として生成する撮像ステップと、音声を前記音声情報として入力する音声情報入力ステップと、前記通信手段を介して前記情報処理装置から取得した音声情報を出力する音声情報出力ステップと、前記情報処理装置に対して前記通信手段を介して通信接続する外部接続ステップと、前記撮像情報、又は前記音声情報を、前記情報処理装置を介して他の情報処理装置と送受信する制御を行うための撮像音声制御プログラム情報を記憶するプログラム情報記憶ステップと、前記外部接続ステップにより前記情報処理装置と接続した時に、前記情報処理装置から送信される設定情報に基づいて、前記撮像音声制御プログラム情報が記憶されているかどうかを判断する記憶判断ステップを備え、前記記憶判断ステップにより前記情報処理装置に前記撮像音声制御プログラム情報が記憶されていないと判断された場合、前記端末装置の前記プログラム情報記憶ステップにて記憶されている前記撮像音声制御プログラム情報を前記情報処理装置上で起動させるための制御信号を送信する起動制御ステップを前記端末装置で実行させることを特徴とする。
The communication control program according to
請求項１に記載の端末装置では、複数のプログラム情報を記憶する情報処理装置と通信手段を介して接続され、少なくとも撮像情報及び音声情報のいずれかの送受信を行う端末装置において、撮影した画像を撮像情報として生成する。また、音声を音声情報として入力する。さらに、通信手段を介して情報処理装置から取得した音声情報を出力する。また、情報処理装置に対して通信手段を介して通信接続し、撮像情報、又は音声情報を、情報処理装置を介して他の情報処理装置と送受信する制御を行うための撮像音声制御プログラム情報を記憶する。そして、情報処理装置と接続した時に、情報処理装置から送信される設定情報に基づいて、撮像音声制御プログラム情報が情報処理装置に記憶されているかどうかを判断する。情報処理装置に撮像音声制御プログラム情報が記憶されていないと判断された場合、端末装置に記憶されている撮像音声制御プログラム情報を情報処理装置上で起動させるための制御信号を送信する。よって、使用者は、情報処理装置に端末装置を接続した時に、情報処理装置側に会議を行うアプリケーションである撮像音声制御プログラム情報が記憶されているかを判断し、インストールされていないと判断された場合は端末装置に記憶されている撮像音声制御プログラム情報を自動起動させることができる。したがって、使用者は情報処理装置側に会議を行う撮像音声制御プログラム情報が記憶されていない場合は、端末装置の撮像音声制御プログラムを自動起動できる、また、情報処理装置側に撮像音声制御プログラム情報が記憶されている場合は、情報処理装置側で撮像音声制御プログラム情報を起動させることができる。よって、使用者は情報処理装置に、撮像手段であるカメラ、音声情報入力手段であるマイク、音声情報出力手段であるスピーカが一体になった端末装置を接続するだけで、簡単な操作で最適な状態のテレビ会議を行うことができる。
The terminal device according to
請求項２に記載の端末装置では、請求項１に記載の効果に加え、撮像、音声情報入力、音声情報出力の各々に関する作動条件の履歴情報である作動履歴情報と、設定情報とを対応付けして前記プログラム情報記憶手段に記憶する。そして情報処理装置から送信される設定情報に対応した作動履歴情報が記憶されているかどうかを判断し、記憶されていると判断した場合、前回作動した撮像、音声情報入力、音声情報出力の作動条件と同じ条件で作動させるようにすることができる。よって、使用者は、端末装置の接続相手の情報処理装置の使用履歴情報に基づいて、設定操作を行うこと無く最適な撮像、音声情報入力、音声情報出力の作動条件で会議を行うことができる。
In the terminal device according to
請求項３に記載の端末装置では、請求項２に記載の効果に加え、撮像した撮像情報から、人の顔画像の検出処理を行う。検出されたすべての顔画像のサイズが所定値以上で撮像可能かどうかを判断する。情報処理装置から送信される設定情報に対応した作動履歴情報が記憶されていないと判断し、さらにすべての顔画像のサイズが所定値以上のサイズで撮像可能であると判断した場合は、顔画像のサイズが前記所定値以上になるよう前記撮像手段を作動させる条件を作動条件として記憶する。よって、使用者は、前回の撮像の作動履歴情報が記憶されていない場合でも、撮像した撮像情報から会議に参加している人の顔画像が検出された場合、参加者すべての顔が最適なサイズで撮像できるような作動条件で会議を行うことができる。 In the terminal device according to a third aspect, in addition to the effect according to the second aspect, the human face image is detected from the captured image information. It is determined whether or not the size of all detected face images is greater than or equal to a predetermined value. If it is determined that the operation history information corresponding to the setting information transmitted from the information processing device is not stored, and if it is determined that all face images can be captured with a size equal to or larger than a predetermined value, the face image The condition for operating the imaging means so that the size of the image becomes equal to or larger than the predetermined value is stored as an operation condition. Therefore, even when the operation history information of the previous imaging is not stored, if the face image of the person participating in the conference is detected from the captured imaging information, the user's face of all the participants is optimal. Conferences can be held under operating conditions that allow imaging in size.
請求項４に記載の端末装置では、請求項３に記載の効果に加え、所定値以上のサイズで撮像できないと判断した場合、設定情報に対応した情報処理装置に備えられている撮像手段も作動させるようすることができる。よって、使用者は、端末装置の撮像手段で参加者の顔画像が適切なサイズで撮像できない場合は、情報処理装置に備えられている撮像手段も作動させることで、２台の撮像手段を用いて、使用者が望む適切な撮像状態に設定することができるようになる。
In the terminal device according to
請求項５に記載の端末装置では、請求項１乃至３のいずれかに記載の効果に加え、入力される雑音の雑音レベルが所定値以上かどうかを判断する。所定値以上の雑音レベルであると判断した場合は、情報処理装置に備えられている音声情報入力手段を作動させるようにすることができるようになる。よって、使用者は、端末装置での音声入力の雑音レベルが大きい場合は、情報処理装置側の音声情報入力手段を作動させて会議を行うことができる。
In the terminal device according to
請求項６に記載の通信制御方法では、複数のプログラム情報を記憶する情報処理装置と通信手段を介して接続され、少なくとも撮像情報及び音声情報のいずれかの送受信を行う端末装置において処理する通信制御方法において、撮影した画像を撮像情報として生成する。また、音声を音声情報として入力する。さらに、通信手段を介して情報処理装置から取得した音声情報を出力する。また、情報処理装置に対して通信手段を介して通信接続し、撮像情報、又は音声情報を、情報処理装置を介して他の情報処理装置と送受信する制御を行うための撮像音声制御プログラム情報を記憶する。そして、情報処理装置と接続した時に、情報処理装置から送信される設定情報に基づいて、撮像音声制御プログラム情報が情報処理装置に記憶されているかどうかを判断する。情報処理装置に撮像音声制御プログラム情報が記憶されていないと判断された場合、端末装置に記憶されている撮像音声制御プログラム情報を情報処理装置上で起動させるための制御信号を送信する。よって、使用者は、情報処理装置に端末装置を接続した時に、情報処理装置側に会議を行うアプリケーションである撮像音声制御プログラム情報が記憶されているかを判断し、インストールされていないと判断された場合は端末装置に記憶されている撮像音声制御プログラム情報を自動起動させることができる。したがって、使用者は情報処理装置側に会議を行う撮像音声制御プログラム情報が記憶されていない場合は、端末装置の撮像音声制御プログラムを自動起動でき、また、情報処理装置側に撮像音声制御プログラム情報が記憶されている場合は、情報処理装置側で適宜撮像音声制御プログラム情報を起動させることができる。よって、使用者は情報処理装置に、撮像手段であるカメラ、音声情報入力手段であるマイク、音声情報出力手段であるスピーカが一体になった端末装置を接続するだけで、簡単な操作で最適な状態のテレビ会議を行うことができる。
The communication control method according to
請求項７に記載の通信制御プログラムでは、複数のプログラム情報を記憶する情報処理装置と通信手段を介して接続され、少なくとも撮像情報及び音声情報のいずれかの送受信を行う端末装置において実行する通信制御プログラムにおいて、撮影した画像を撮像情報として生成する。また、音声を音声情報として入力する。さらに、通信手段を介して情報処理装置から取得した音声情報を出力する。また、情報処理装置に対して通信手段を介して通信接続し、撮像情報、又は音声情報を、情報処理装置を介して他の情報処理装置と送受信する制御を行うための撮像音声制御プログラム情報を記憶する。そして、情報処理装置と接続した時に、情報処理装置から送信される設定情報に基づいて、撮像音声制御プログラム情報が情報処理装置に記憶されているかどうかを判断する。情報処理装置に撮像音声制御プログラム情報が記憶されていないと判断された場合、端末装置に記憶されている撮像音声制御プログラム情報を情報処理装置上で起動させるための制御信号を送信する。よって、使用者は、情報処理装置に端末装置を接続した時に、情報処理装置側に会議を行うアプリケーションである撮像音声制御プログラム情報が記憶されているかを判断し、インストールされていないと判断された場合は端末装置に記憶されている撮像音声制御プログラム情報を自動起動させることができる。したがって、使用者は情報処理装置側に会議を行う撮像音声制御プログラム情報が記憶されていない場合は、端末装置の撮像音声制御プログラムを自動起動でき、また、情報処理装置側に撮像音声制御プログラム情報が記憶されている場合は、情報処理装置側で適宜撮像音声制御プログラム情報を起動させることができる。よって、使用者は情報処理装置に、撮像手段であるカメラ、音声情報入力手段であるマイク、音声情報出力手段であるスピーカが一体になった端末装置を接続するだけで、簡単な操作で最適な状態のテレビ会議を行うことができる。
The communication control program according to
以下、本発明を具体化した端末装置の実施の形態について、図面を参照して説明する。なお、これらの図面は、本発明が採用しうる技術的特徴を説明するために用いられるものであり、記載されている装置の構成、各種処理のフローチャートなどは、それのみに限定する趣旨ではなく、単なる説明例である。 Embodiments of a terminal device embodying the present invention will be described below with reference to the drawings. These drawings are used for explaining the technical features that can be adopted by the present invention, and the configuration of the apparatus and the flowcharts of various processes described are not intended to be limited to the drawings. This is just an illustrative example.
まず、図１〜図２を参照して、本実施形態のテレビ会議システム１００の概略構成、及び構成要素である端末装置１、情報処理装置１２０の電気的構成について、順に説明する。図１に示すように、テレビ会議システム１００は、各拠点（以後、１０Ａ、１０Ｂ、１０Ｃとする。）に設けられた、端末装置１、情報処理装置１２０を含み、これらはすべてネットワーク２００に接続されている。ネットワーク２００としては、例えば、ＩＰ（Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ）やＩＳＤＮ（Ｉｎｔｅｇｒａｔｅｄ Ｓｅｒｖｉｃｅｓ Ｄｉｇｉｔａｌ Ｎｅｔｗｏｒｋ）等のネットワークを採用することができる。図１では、拠点は３拠点しか図示されていないが、実際には複数が存在してもよい。また各拠点は、例えば、ある企業の同一サイト内に複数存在してもよいし、異なる事業所内や、異なる地域や国に点在して存在していてもよい。
First, the schematic configuration of the
情報処理装置１２０は、例えば、周知のパーソナルコンピュータであり、汎用型の装置である。情報処理装置１２０は、ネットワーク２００を介して接続された複数の拠点間で、使用者の撮像画像や音声情報を送受信することでＴＶ会議を行う為の通信機能等を備える。また、端末装置１は、テレビ会議使用者の撮像画像を取得するカメラ機器や、音声情報を取得するマイク機器、音声情報を出力するスピーカ機器を備える。また、端末装置１は、情報処理装置１２０と電気的な接続をすることにより、ネットワーク２００を介して他拠点とテレビ会議を行うための機器として機能するようになる。端末装置１、情報処理装置１２０についての詳細な説明は、後述する。
The
さらに、テレビ会議への参加を希望する使用者は、情報処理装置１２０のうちいずれかを操作し、使用者はＩＤ情報等を登録することによってテレビ会議にログインする。テレビ会議に参加した状態では、例えば端末装置１のカメラ（図３参照）によって会議に参加している使用者が撮像される。撮像された画像（以下「撮像情報」という。）は、端末装置１から情報処理装置１２０へ送信され、他拠点の情報処理装置１２０に対して送信される。撮像情報を受信した他拠点の情報処理装置１２０では、受信した撮像情報を自拠点で撮像した撮像情報と共に表示装置１２５に表示させる。撮像情報が複数存在する場合、個別のウィンドウ内に其々表示させる。これによってテレビ会議に参加する使用者は、各拠点で会議に参加する使用者の撮像情報を共有して視認することが可能となる。
Furthermore, the user who wishes to participate in the video conference operates one of the
次に、図２を参照して、端末装置１、情報処理装置１２０の電気的構成について説明する。端末装置１としては、ＣＰＵ１１１と、ＣＰＵ１１１に各々接続されたＲＯＭ１１２およびＲＡＭ１１３を備えている。ＣＰＵ１１１には、その他、入出力（Ｉ／Ｏ）インタフェイス１１４が接続されている。Ｉ／Ｏインタフェイス１１４には、カメラ６、マイク４、スピーカ１０、画像入力処理部１０６、音声入力処理部１０４、音声出力処理部１１０、記録装置１１５、外部接続装置１１６が接続されている。
Next, the electrical configurations of the
ＣＰＵ１１１は、端末装置１の全体の制御を司る。ＲＯＭ１１２は、ＢＩＯＳを含む、端末装置１を動作させるための各種のプログラムや、そのための設定値を記憶している。ＣＰＵ１１１は、ＲＯＭ１１２や、後述する記憶装置１１５に記憶されたプログラムに従って、端末装置１の動作を制御する。ＲＡＭ１１３は、各種データを一時的に記憶するための記憶装置である。
The CPU 111 governs overall control of the
画像入力処理部１０６、音声入力処理部１０４、音声出力処理部１１０には、それぞれ、カメラ６、マイク４、スピーカ１０が接続されている。カメラ６は、端末装置１が設置されている拠点を撮像する撮像機器であり、画像入力処理部１０６は、カメラ６からの撮像情報の入力を処理する機器である。マイク４は、端末装置１が設置されている拠点の音声情報を取得する機器であり、音声入力処理部１０４は、マイク４から入力された音声情報を処理する機器である。スピーカ１０は、他拠点の装置から送信された他拠点の音声情報を出力する機器であり、音声出力処理部１１０は、スピーカ１０へ音声情報の出力を処理する機器である。
The image
外部接続装置１１６は、汎用的なＵＳＢ機器等であり、情報処理装置１２０に接続することで撮像情報や音声情報データの送受信を行うための通信機器である。
The external connection device 116 is a general-purpose USB device or the like, and is a communication device for transmitting and receiving imaging information and audio information data by connecting to the
また、記憶装置１１５は、プログラム情報記憶エリア１１５１、作動履歴情報記憶エリア１１５２、を含む複数の記憶エリアを備えている。プログラム情報記憶エリア１１５１には、詳細は図示しないが、撮像情報、音声情報を情報処理装置との間で送受信することでテレビ会議を行うためのアプリケーション（以下、テレビ会議アプリと記す）を、端末装置１に実行させるための各種プログラムが記憶されている。作動履歴情報記憶エリア１１５２には、詳細な説明は後述するが、図４に示すような作動履歴情報データベース１１５３が記憶されている。
In addition, the
次に、情報処理装置１２０の電気的構成について説明をする。情報処理装置１２０としては、ＣＰＵ１２１と、ＣＰＵ１２１に各々接続されたＲＯＭ１２２およびＲＡＭ１２３を備えている。ＣＰＵ１２１には、その他、入出力（Ｉ／Ｏ）インタフェイス１２４が接続されている。Ｉ／Ｏインタフェイス１２４には、表示装置１２５、カメラ１２７、マイク１２９、スピーカ１３１、画像出力処理部１２６、画像入力処理部１２８、音声入力処理部１３０、音声出力処理部１３２、通信装置１３３、記憶装置１３５、外部接続装置１５０、ＣＤ−ＲＯＭドライブ１４０が接続されている。
Next, the electrical configuration of the
ＣＰＵ１２１は、情報処理装置１２０の全体の制御を司る。ＲＯＭ１２２は、ＢＩＯＳを含む、情報処理装置１２０を動作させるための各種のプログラムや、そのための設定値を記憶している。ＣＰＵ１２１は、ＲＯＭ１２２や、後述する記憶装置１３５に記憶されたプログラムに従って、情報処理装置１２０の動作を制御する。ＲＡＭ１２３は、各種データを一時的に記憶するための記憶装置である。
The CPU 121 governs overall control of the
画像出力処理部１２６、画像入力処理部１２８、音声入力処理部１３０、音声出力処理部１３２には、それぞれ表示装置１２５、カメラ１２７、マイク１２９、スピーカ１３１が接続されている。表示装置１２５は、他拠点から取得した撮像情報や、自拠点で撮像された撮像情報等を表示する機器であり、汎用的な液晶モニタ、プロジェクタ等の表示機器である。画像出力処理部１２６は、表示装置１２５への撮像情報の出力を処理する機器である。カメラ１２７は、情報処理装置１２０が設置されている拠点を撮像する撮像機器であり、画像入力処理部１２８は、カメラ１２７からの撮像情報の入力を処理する機器である。マイク１２９は、情報処理装置１２０が設置されている拠点の音声情報を取得する機器であり、音声入力処理部１３０は、マイク１２９から入力された音声情報を処理する機器である。スピーカ１３１は、他拠点の情報処理装置１２０から送信された他拠点の音声情報を出力する機器であり、音声出力処理部１３２は、スピーカ１３１へ音声情報の出力を処理する機器である。
A display device 125, a
また、記憶装置１３５は、プログラム情報記憶エリア１３５１を含む複数の記憶エリアを備えている。詳細は図示しないが、撮像情報、音声情報を端末装置１や、他拠点の情報処理装置１２０との間で送受信することでテレビ会議を行うためのテレビ会議アプリを、情報処理装置１２０に実行させるための各種プログラムが記憶されている。
The
ＣＤ−ＲＯＭドライブ１４０は、ＣＤ−ＲＯＭ１４１に記録されているデータを読み込む機器である。また、ＣＤ−ＲＯＭ１４１は、情報処理装置１２０でテレビ会議を行うためのテレビ会議アプリ等が記憶されている。ＣＤ−ＲＯＭ１４１の導入時には、これら各種プログラムが、ＣＤ−ＲＯＭ１４１から、プログラム記憶エリア１３５１に記憶される。外部接続装置１５０は、汎用的なＵＳＢ機器等であり、端末装置１に接続することで撮像情報や音声情報の送受信を行うための通信機器である。通信装置１３３は、ネットワーク２００に接続し、他の情報処理装置１２０との間で撮像情報や音声情報等の各種データの送受信を行うための機器である。
The CD-
次に、図３を参照しながら、本実施形態での端末装置１の外観構成について説明をする。図３に示すように、端末装置１は、第一筐体２と、第二筐体３とを備えている。第一筐体２と第二筐体３とは、回転軸５を介して連結され、回転軸５を中心に回動することで折り畳み可能に構成されている。端末装置１の上部中央には、回転軸５に回動可能に軸支されたカメラ６が設けられている。カメラ６の中心にはレンズ部７が設けられている。端末装置１は、回転軸５を上方に向け、第一筐体２と第二筐体３とを最大角度で開いた状態で、机上等の水平面に載置して自立させることができる。端末装置１が自立した状態で、カメラ６を回動し、レンズ部７を撮像対象者に向けることで、端末装置１の設置が完了する。
Next, an external configuration of the
次に、第一筐体２の構造について説明する。図３に示すように、第一筐体２は、縦長の略直方体状に形成されている。第一筐体２の内側には、電子基板等の各種電子部品が格納されている。第一筐体２は、正面部２１、右側面部２２、左側面部２３、上面部２４、底面部２５、背面部２６を備えている。正面部２１の略中央には、スピーカ１０が設けられている。スピーカ１０は、他拠点の情報処理装置１２０から送信された音声情報等を出力する。正面部２１の下部の左右両側には、マイク４（１１，１２）が各々設けられている。マイク４は、自拠点の使用者の音声情報を取得し、接続している自拠点の情報処理装置１２０へ出力する。
Next, the structure of the
上面部２４は、正面部２１の上部から後方に向かって半円弧状に形成されている。その終端部は上面部２４の最上部に位置し、かつ回転軸５に対して直交する方向に切断されている。この終端部には、第一筐体２と第二筐体３を開く際に、第二筐体３の上端部に設けられた後述する係止部６６が係止するための被係止部５６が設けられている。図３に示すように、係止部６６が被係止部５６に係止することによって、第一筐体２と第二筐体３の回動が制限される。このとき、第一筐体２と第二筐体３との開度は最大角度となる。
The
また、上面部２４の長手方向中央には、略長方形状に切り欠いた凹部１４が設けられている。凹部１４の内側には、回転軸５を中心に回動可能に軸支されたカメラ６が設けられている。カメラ６を使用する時は、図３に示すように、カメラ６を回動してレンズ部７を外部に露出させる。カメラ６を使用しない時は、カメラ６を回動してレンズ部７を凹部１４の内側に収納する。レンズ部７を収納できるので、使用しない時にレンズ部７が損傷するのを防止できる。
Further, a
右側面部２２の長手方向略中央には、スピーカ１０の音量を大きくするための＋（プラス）ボタン５１と、小さくするための−（マイナス）ボタン５２とが上下に並んで設けられている。右側面部２２の下側には、マイク４による音声入力を一時禁止するマイク禁止ボタン５３が設けられている。
A + (plus)
右側面部２２の背面部２６側の縁部に沿った部分には、右側面部２２よりも一段低くなった段差部２２Ａが設けられている。段差部２２Ａは、端末装置１を閉じたときに、第二筐体３の後述する側壁部３２によって覆われる部分である。この段差部２２Ａを設けることによって、端末機器１を閉じた状態において、第一筐体２の右側面部２２と、第二筐体３の側壁部３２とを面一にできる。
A
左側面部２３には、カメラ６による撮影を一時中断するカメラ中断ボタン（図示外）と、情報処理装置１２０に対して撮像情報、音声情報の入出力を行うための通信用の配線を接続するため、汎用的なＵＳＢ機器等の外部接続装置部（図示外）が設けられている。
In order to connect a camera interruption button (not shown) for temporarily suspending photographing by the
底面部２５は、背面部２６側の非接地部２７と、正面部２１側の接地部２８とからなる。接地部２８は、非接地部２７よりも下方に突出しているため、机上等の水平面に接地する部分となる。図３に示すように、接地部２８は、正面部２１側から背面部２６側に向かって所定角度で斜め上方に傾斜している。接地部２８の傾斜面は、端末装置１を最大角度で開き、机上等の水平面に自立させたときに水平となるように形成されている。
The
次に、第二筐体３の構造について説明する。図３に示すように、第二筐体３は、断面凹状の蓋状に形成されている。第二筐体３は、薄板である本体部３１を備えている。本体部３１は、その上端部において回転軸５に回動可能に連結されている。本体部３１の左右両端部には、第一筐体２側に向かって突出するリブ状の側壁部３２（左端部の側壁部は図示外）が各々設けられている。さらに、本体部３１の下端部には、第一筐体２側に向かって突出すると共に、机上に接地するリブ状の接地部３３が設けられている。一対の側壁部３２と接地部３３とは互いに連接している。
Next, the structure of the
また、これら本体部３１、側壁部３２、接地部３３によって囲まれる内側に、第一筐体２の背面部２６側に覆い被さるための空洞部３７が形成されている。端末装置１を折り畳んだときに、第一筐体２の背面部２６側に第二筐体３が覆い被さることで、端末装置１の厚みを薄くできる。これにより、端末装置１を持ち運びし易い大きさになるよう小型化を図ることができる。
In addition, a
次に、図４を参照にしながら、作動履歴情報記憶エリア１１５２に記憶されている作動履歴情報データベース１１５３について説明をする。作動履歴情報データベース１１５３には、履歴番号、日付、ＩＤ、カメラの拡大値、解像度、マイクの音量、指向性、スピーカの音量の項目が対応付けて記憶されている。履歴番号の項目は、作動履歴情報が追加される際に自動で採番される番号情報が記憶されている。日付の項目には、作動履歴情報の各項目が記憶された日付情報が年月日情報として記憶されている。ＩＤの項目には、端末装置１と接続した情報処理装置１２０の識別情報が記憶されている。カメラの拡大値の項目には、カメラ６を前回作動させた時の拡大値が記憶されている。拡大値の設定については、テレビ会議アプリを介して使用者が適宜設定できるようになっており、また後述するメイン処理内でも自動で設定される設定値である。カメラの解像度の項目は、カメラ６を前回作動させた時の解像度設定値が記憶されている。本実施形態での解像度とは、表示装置１２５に撮像情報を表示するための表示条件である画素数を示す情報であり、ｍ×ｎの形式で記憶されている。また、画素数が多い程、つまり解像度が大きい程、表示装置１２５にて表示する撮像情報を高画質で表示できる。マイクの音量の項目には、マイク４を前回作動させた時の入力レベル設定値が記憶されている。マイクの指向性の項目には、マイク４を前回作動させた時の入力方向に関する特性値である指向方向の設定値が記憶されている。スピーカの音量の項目には、スピーカ１０を前回作動させた時の出力レベルの設定値が記憶されている。
Next, the operation
次に、図５を参照して端末装置１のＣＰＵ１１１により行われるメイン処理について説明をする。図５は端末装置メイン処理のフローチャートであり、端末装置１の電源がＯＮされると開始される。まず初めに、ＣＰＵ１１１は、情報処理装置１２０と接続したかどうかを判断する（Ｓ４０１）。ここでは、使用者の操作により端末装置１の外部接続装置１１６を介して、情報処理装置１２０の外部接続装置１５０と電気的に接続されたかどうかを判断する。例えば、汎用的なＵＳＢケーブル等を用いて、外部接続装置１１６と外部接続装置１５０が接続されたかどうかを判断する。
Next, a main process performed by the CPU 111 of the
ステップＳ４０１の処理で、ＣＰＵ１１１は、情報処理装置１２０と接続されていないと判断した場合（Ｓ４０１：ＮＯ）、再度ステップＳ４０１を繰り返し処理を行う。また、ステップＳ４０１の処理で、ＣＰＵ１１１が、情報処理装置１２０と接続されたと判断した場合（Ｓ４０１：ＹＥＳ）、次に情報処理装置１２０から所定のコマンドを受信したかどうかを判断する（Ｓ４０２）。ステップＳ４０２の処理では、具体的には、使用者が汎用的なＵＳＢケーブル等を用いて外部接続装置１１６と外部接続装置１５０が接続させた場合、情報処理装置１２０から、端末１及び情報処理装置１２０の状態に関連する設定情報が送信されるので、その送信された設定情報から、テレビ会議アプリが起動されているかどうかを判断する。ステップＳ４０２の処理で、所定のコマンドを受信したと判断した場合（Ｓ４０２：ＹＥＳ）、つまり、情報処理装置１２０にテレビ会議アプリが記憶されて起動していると判断した場合、ＣＰＵ１１１は、情報処理装置内のテレビ会議アプリに連動した起動処理を実行する（Ｓ４０４）。
If the CPU 111 determines in step S401 that it is not connected to the information processing apparatus 120 (S401: NO), it repeats step S401 again. If it is determined in step S401 that the CPU 111 is connected to the information processing apparatus 120 (S401: YES), it is next determined whether a predetermined command is received from the information processing apparatus 120 (S402). In the process of step S402, specifically, when the user connects the external connection device 116 and the
また、ステップＳ４０２の処理で、ＣＰＵ１１１は、所定のコマンドを受信していないと判断した場合（Ｓ４０２：ＮＯ）、ステップＳ４０１の処理を実行してから規定時間（例えば、３秒）経過したかどうかを判断する（Ｓ４０３）。ステップＳ４０３の処理で、ＣＰＵ１１１は、規定時間を経過していないと判断した場合（Ｓ４０３：ＮＯ）、ステップＳ４０２の処理へ戻り、再度処理が実行される。また、ステップＳ４０３の処理で、ＣＰＵ１１１は、規定時間を経過したと判断した場合は（Ｓ４０３：ＹＥＳ）、次に、端末装置内のテレビ会議アプリ起動処理を実行する（Ｓ４０５）。上記のステップＳ４０４、Ｓ４０５の処理についての詳細な説明は後述するものとする。 Also, in the process of step S402, if the CPU 111 determines that a predetermined command has not been received (S402: NO), whether or not a specified time (eg, 3 seconds) has elapsed since the execution of the process of step S401. Is determined (S403). When the CPU 111 determines that the specified time has not elapsed in the process of step S403 (S403: NO), the process returns to the process of step S402, and the process is executed again. If it is determined in step S403 that the specified time has elapsed (S403: YES), the CPU 111 executes a video conference application activation process in the terminal device (S405). A detailed description of the processing in steps S404 and S405 will be given later.
ステップＳ４０４、又はステップＳ４０５の処理の後、ＣＰＵ１１１は、撮像音声情報送受信処理を実行する（Ｓ４０６）。ステップＳ４０６の処理では、具体的には、ステップＳ４０４、又はステップＳ４０５の処理にて設定されたカメラ６の撮像設定値や、マイク４や、スピーカ１０の音声設定値に基づいて、撮像情報や音声情報を、端末装置１と情報処理装置１２０を介して、ネットワーク２００を経由して他拠点の情報処理装置１２０との間で送受信処理を実行する。ステップＳ４０６の処理が実行されることで、使用者は各拠点での顔画像を表示装置１２５に表示させて共有し、また音声情報も同期させて共有することにより、テレビ会議を行うことができるようなる。
After the processing of step S404 or step S405, the CPU 111 executes imaging audio information transmission / reception processing (S406). In the process of step S406, specifically, based on the imaging setting value of the
ステップＳ４０６の処理後、ＣＰＵ１１１は会議終了指示が有ったかどうかを判断する（Ｓ４０７）。具体的には、会議終了指示とは、自拠点、または通信を接続中の他拠点の情報処理装置１２０を使用者が操作することにより、テレビ会議アプリの終了の指示が出されたかどうかを判断する。会議終了指示が無いと判断した場合（Ｓ４０７：ＮＯ）、ステップＳ４０６の処理へ戻り、繰り返し処理が実行される。また、ステップＳ４０７の処理にて、会議終了指示があったと判断した場合（Ｓ４０７：ＹＥＳ）、他拠点の情報処理装置１２０との通信の接続を遮断する処理を実行し、テレビ会議アプリを終了する処理を実行する（Ｓ４０８）。ステップＳ４０８の処理の後、本処理は終了する。
After the process of step S406, the CPU 111 determines whether or not there is a conference end instruction (S407). Specifically, the conference end instruction determines whether or not an instruction to end the video conference application is issued by the user operating the
次に、図６を参照しながら、図５のステップＳ４０５の処理である端末装置のアプリ起動処理について説明をする。まず初めに、ＣＰＵ１１１は、アプリ起動処理を実行する（Ｓ５０１）。具体的には、ＣＰＵ１１１は、プログラム記憶エリア１１５１に記憶されているテレビ会議アプリを起動させる処理を実行する。次に、ＣＰＵ１１１は、情報処理装置のＩＤが作動履歴情報に記憶されているかどうかを判断する（Ｓ５０２）。具体的には、ステップＳ５０２の処理では、情報処理装置１２０から送信されるＩＤ情報が、作動履歴情報データベース１１５３に記憶されているかどうかを判断する。そして、ステップＳ５０２の処理で、ＣＰＵ１１１は、ＩＤ情報が記憶されていると判断した場合（Ｓ５０２：ＹＥＳ）、ＩＤ情報に対応付けて記憶されている各設定値情報を抽出する（Ｓ５０５）。
Next, the application activation process of the terminal device that is the process of step S405 of FIG. 5 will be described with reference to FIG. First, the CPU 111 executes an application activation process (S501). Specifically, the CPU 111 executes processing for starting a video conference application stored in the
そして、ＣＰＵ１１１は、過去の作動履歴情報から撮像設定値情報を取得する（Ｓ５０６）。ステップＳ５０６の処理では、具体的には、Ｓ５０２で判断したＩＤ情報に対応付けして記憶されているカメラの拡大値、解像度設定値の情報を取得する。次に、ＣＰＵ１１１は、過去の作動履歴情報から音声設定値情報を取得する（Ｓ５０７）。具体的には、Ｓ５０２で判断したＩＤ情報に対応付けして記憶されているマイクの音量設定値、指向性設定値の情報や、スピーカの音量設定値を取得する。そして、本処理である端末装置のアプリ起動処理を終了する。 Then, the CPU 111 acquires imaging setting value information from past operation history information (S506). In the process of step S506, specifically, information on the enlargement value and resolution setting value of the camera stored in association with the ID information determined in S502 is acquired. Next, the CPU 111 acquires sound setting value information from past operation history information (S507). Specifically, the microphone volume setting value and directivity setting value information and the speaker volume setting value stored in association with the ID information determined in S502 are acquired. And the application starting process of the terminal device which is this process is complete | finished.
また、ステップＳ５０２の処理で、ＣＰＵ１１１は、情報処理装置のＩＤが、作動履歴情報に無いと判断した場合（Ｓ５０２：ＮＯ）、情報処理装置のＩＤ情報を作動履歴情報データベース１１５３に、新たな履歴番号を付与して追加記憶する（Ｓ５０３）。そして、カメラ６を作動させて撮像情報を取得する処理を実行する（Ｓ５０４）。次にステップＳ５０４の処理で取得した撮像情報に、会議に参加している人の顔画像が有るかどうかを判断する（Ｓ５０８）。ここでの顔画像の検出方法は、従来技術を用いればよく、例えば、人の顔の輪郭、目、鼻、口の形状等をパターンマッチング法等により画像解析することで検出するようにしてもよい。または、撮像画像の色分析を行い、人の顔に相当する色分布を検出するようにしても良いが、これに限るものではない。
In the process of step S502, when the CPU 111 determines that the ID of the information processing device is not included in the operation history information (S502: NO), the ID information of the information processing device is stored in the operation
ステップＳ５０８の処理で、ＣＰＵ１１１は、人の顔画像を検出していないと判断した場合（Ｓ５０８：ＮＯ）、ステップＳ５１４の処理へ移行する。また、ステップＳ５０８の処理で、ＣＰＵ１１１は、人の顔画像が有ると判断した場合（Ｓ５０８：ＹＥＳ）、顔画像サイズが規定値以上かどうかを判断する（Ｓ５０９）。ステップＳ５０９の処理では、具体的には、ステップＳ５０４の処理で取得した撮像情報に含まれている人の全ての顔画像のサイズが、規定値以上かどうか、つまり、表示装置１２５へ表示する際に認識できる大きさを規定値として、それ以上かどうかを判断している。ここで言う顔画像のサイズとは、少なくとも目、鼻、口を含む顔全体の画像領域の面積を意味する。また規定値とは、例えば、表示装置１２５の表示画面領域の１０分の１の大きさとしても良いし、またこれに限るものでもない。ステップＳ５０９の処理で、ＣＰＵ１１１は、規定値以上有ると判断した場合（Ｓ５０９：ＹＥＳ）、作動履歴情報データベース１１５３へ、カメラ６の現在の撮像設定値情報である、拡大値や解像度を記憶する処理を実行する（Ｓ５１４）。
If the CPU 111 determines in step S508 that no human face image has been detected (S508: NO), the process proceeds to step S514. In the process of step S508, if the CPU 111 determines that there is a human face image (S508: YES), the CPU 111 determines whether the face image size is greater than or equal to a specified value (S509). In the process of step S509, specifically, whether the size of all face images of the person included in the imaging information acquired in the process of step S504 is equal to or larger than a predetermined value, that is, when displaying on the display device 125. The size that can be recognized is determined as a specified value, and it is determined whether or not it is larger. The size of the face image here means the area of the image area of the entire face including at least eyes, nose and mouth. Further, the specified value may be, for example, one tenth of the display screen area of the display device 125, and is not limited thereto. If the CPU 111 determines in step S509 that the specified value is greater than or equal to the specified value (S509: YES), processing for storing an enlargement value and resolution, which are current imaging setting value information of the
また、ステップＳ５０９の処理で、ＣＰＵ１１１は、顔画像サイズが規定値以下と判断した場合（Ｓ５０９：ＮＯ）、次に、全ての人の顔画像サイズが規定値以上で撮像可能かどうかを判断する（Ｓ５１０）。ステップＳ５１０の処理では、具体的には、カメラの拡大値を調整し、撮像情報に含まれている顔画像が、全て規定値以上のサイズで撮像できるかどうかを判定する。そして、ステップＳ５１０の処理で、ＣＰＵ１１１が、規定値以上で撮像可能と判断した場合（Ｓ５１０：ＹＥＳ）、判断した時の拡大設定値、解像度を作動履歴情報データベース１１５３に記憶する（Ｓ５１１）。また、ステップＳ５１０の処理で、ＣＰＵ１１１は、規定値以上で撮像できないと判断した場合（Ｓ５１０：ＮＯ）、端末装置１に接続している情報処理装置１２０のカメラを作動させる処理を実行する（Ｓ５１２）。ステップＳ５１２の処理では、Ｓ５０１にて起動されたテレビ会議アプリが、情報処理装置１２０に備えられているカメラ１２７を作動させるような旨の制御信号を送信する。また、本実施形態では、情報処理装置１２０にカメラが搭載されているように説明をしたが、これに限るものではなく、情報処理装置１２０にカメラ１２７が搭載されていない場合は、ステップＳ５１２の処理は実行しないようにしても良い。次に、ＣＰＵ１１１は、情報処理装置１２０のカメラ１２７の撮像情報の設定値を調整する処理を実行する（Ｓ５１３）。ステップＳ５１３の処理では、情報処理装置１２０側にて、使用者が所望の拡大値、解像度になるように調整操作を行うことで処理される。また、この時、端末装置１のカメラ６も同時に作動しているので、この場合は、２台のカメラ機器から撮像情報が取得できるようになる。
In the process of step S509, if the CPU 111 determines that the face image size is equal to or smaller than the specified value (S509: NO), the CPU 111 next determines whether or not all the person's face image sizes are larger than the specified value. (S510). In the process of step S510, specifically, the camera enlargement value is adjusted, and it is determined whether or not all the face images included in the imaging information can be captured with a size equal to or larger than the specified value. If the CPU 111 determines in the process of step S510 that the image can be captured at a specified value or more (S510: YES), the enlarged setting value and resolution at the time of determination are stored in the operation history information database 1153 (S511). In the process of step S510, when the CPU 111 determines that imaging cannot be performed with a specified value or more (S510: NO), the CPU 111 executes a process of operating the camera of the
次に、ＣＰＵ１１１は、マイク４から音声情報を取得する処理を実行する（Ｓ５１５）。そして、ＣＰＵ１１１は、暗騒音が規定値以上かどうかを判断する（Ｓ５１６）。ここで言う暗騒音とは、本実施形態の端末装置１が設置された会議空間で常時発生している騒音のことを示す。また、ステップＳ５１６の処理での規定値は、端末装置１が設置された空間で、使用者の会議による発話音声が、支障なく送受信できるような騒音レベルで設定されているものとする。例えば、約５０ｄBを規定値とすれば良いが、これに限るものではない。
Next, the CPU 111 executes processing for acquiring audio information from the microphone 4 (S515). Then, the CPU 111 determines whether the background noise is equal to or higher than a specified value (S516). The background noise here refers to noise that is constantly generated in the conference space in which the
ステップＳ５１６の処理で、ＣＰＵ１１１は、規定値以下であると判断した場合（Ｓ５１６：ＮＯ）、判断した時のマイク入力レベルである音量設定値を、作動履歴情報データベース１１５３へ記憶する。また、ステップＳ５１６の処理で、ＣＰＵ１１１は、規定値以上であると判断した場合は（Ｓ５１６：ＹＥＳ）、情報処理装置１２０のマイク１２９を作動させるよう処理を実行する（Ｓ５１８）。ステップＳ５１８の処理では、Ｓ５０１にて起動されたテレビ会議アプリが、情報処理装置１２０に備えられているマイク１２９を作動させるような旨の制御信号を送信する。そして、ＣＰＵ１１１は、情報処理装置１２０のマイク１２９の音声情報の音量設定値を調整する処理を実行する（Ｓ５１９）。ステップＳ５１９の処理では、情報処理装置１２０側にて、使用者が所望の音量で入力できるように調整操作を行うことで処理される。そして、ステップＳ５１７、又はステップＳ５１９の処理が終わると、本処理は終了する。
When the CPU 111 determines that the value is equal to or less than the specified value in the process of step S516 (S516: NO), the sound volume setting value that is the microphone input level at the time of the determination is stored in the operation
次に、図７を参照しながら、図５のステップＳ４０４の処理である情報処理装置内のアプリ連動起動処理について説明をする。本処理は、情報処理装置１２０のテレビ会議アプリが記憶されている際に、端末装置１の各機能を起動させるための処理である。まず初めに、ＣＰＵ１１１は、情報処理装置１２０から送信される、情報処理装置のＩＤが作動履歴情報に記憶されているかどうかを判断する（Ｓ６０２）。ここでのステップＳ６０２の処理は、図６のステップＳ５０２の処理と同様の処理を実行するので、詳細な説明は省略するものとする。また、以下の処理であるステップＳ６０３~Ｓ６１９までの処理も、図６のステップＳ５０３~Ｓ５１９に対応して同様の処理であるため、ここでの説明は省略するものとする。
Next, an application-linked activation process in the information processing apparatus, which is the process in step S404 in FIG. 5, will be described with reference to FIG. This process is a process for activating each function of the
そして、ステップＳ６０７か、又はステップＳ６１７か、又はステップ６１９の処理の後、ＣＰＵ１１１は、ステップＳ６０３~ステップＳ６１９の処理過程で決定された撮像情報、音声情報の設定値を、情報処理装置１２０へ送信する（Ｓ６２０）。よって、情報処理装置１２０側でテレビ会議アプリを起動させる場合でも、カメラ、マイク、スピーカについて最適な作動条件で作動させながらテレビ会議を行うことができる。
After step S607, step S617, or step 619, the CPU 111 transmits the imaging information and audio information setting values determined in the process of steps S603 to S619 to the
次に、図８を参照にしながら、情報処理装置１２０で実行されるメイン処理について説明をする。図８に示す情報処理装置メイン処理は、ＣＰＵ１２１で実行される処理である。まず初めに、ＣＰＵ１２１は、テレビ会議アプリの起動指示があるかどうかを判断する（Ｓ７０１）。具体的には、情報処理装置１２０の使用者の操作により、テレビ会議アプリを起動させる指示があったかどうかで判断する。ステップＳ７０１の処理で、ＣＰＵ１２１は、起動指示が有ったと判断した場合（Ｓ７０１：ＹＥＳ）、テレビ会議アプリ起動処理を実行する（Ｓ７０２）。ステップＳ７０２の処理では、情報処理装置１２０のプログラム情報記憶エリア１３５１に記憶されているテレビ会議アプリを起動させる処理が行われる。
Next, the main process executed by the
次に、ＣＰＵ１２１は、端末装置１と接続したかどうかを判断する（Ｓ７０３）。具体的には、使用者が端末装置１とＵＳＢケーブル等を用いて、情報処理装置１２０の外部接続装置１５０と、端末装置１の外部接続装置１１６が電気的に接続されたかどうかを判断する。そして、ＣＰＵ１２１は、端末装置１と接続していないと判断した場合（Ｓ７０３：ＮＯ）、ステップＳ７０３の処理を繰り返し実行する。
Next, the CPU 121 determines whether or not the
また、ステップＳ７０３の処理で、ＣＰＵ１２１は、端末装置１と接続があったと判断した場合（Ｓ７０３：ＹＥＳ）、次に所定のコマンドを端末装置１へ送信する（Ｓ７０４）。ステップＳ７０４の処理では、情報処理装置１２０から、情報処理装置１２０の識別情報であるＩＤ情報、起動しているアプリ情報、端末装置１の各種設定情報等が送受信される。
In the process of step S703, when the CPU 121 determines that there is a connection with the terminal device 1 (S703: YES), it then transmits a predetermined command to the terminal device 1 (S704). In the process of step S704, ID information that is identification information of the
次に、ＣＰＵ１２１は、撮像、音声設定情報を端末装置１から受信する（Ｓ７０５）。ステップＳ７０５の処理では、図７のステップＳ６２０で送信された撮像情報、音声情報に関する設定値を受信する。そして、ＣＰＵ１２１は、撮像音声情報送受信処理を実行する（Ｓ７０６）。 Next, the CPU 121 receives imaging and audio setting information from the terminal device 1 (S705). In the process of step S705, the setting values relating to the imaging information and audio information transmitted in step S620 of FIG. 7 are received. Then, the CPU 121 executes imaging audio information transmission / reception processing (S706).
ステップＳ７０６の処理では、具体的には、ステップＳ７０５の処理にて受信した撮像設定値や、音声設定値に基づいて、撮像情報や音声情報を、ネットワーク２００を経由して他拠点の情報処理装置１２０との間で送受信処理を実行する。ステップＳ７０６の処理が実行されることで、使用者は各拠点での顔画像を表示装置１２５に表示させて共有し、また音声情報も同期させて共有することにより、テレビ会議を行うことができるようなる。
In the process of step S706, specifically, based on the imaging setting value and the audio setting value received in the process of step S705, the imaging information and the audio information are transmitted via the
そして、ＣＰＵ１２１は、会議終了指示が有るかどうかを判断する（Ｓ７０７）。具体的には、会議終了指示とは、自拠点、または通信を接続中の他拠点の情報処理装置１２０を使用者が操作することにより、テレビ会議アプリの終了の指示が出されたかどうかを判断する。会議終了指示が無いと判断した場合（Ｓ７０７：ＮＯ）、ステップＳ７０６の処理へ戻り、繰り返し処理が実行される。また、ステップＳ７０７の処理にて、会議終了指示があったと判断した場合（Ｓ７０７：ＹＥＳ）、他拠点の情報処理装置１２０との通信の接続を遮断する処理を実行し、テレビ会議アプリの終了処理を実行する（Ｓ７０８）。ステップＳ７０８の処理の後、本処理を終了する。
Then, the CPU 121 determines whether there is a conference end instruction (S707). Specifically, the conference end instruction determines whether or not an instruction to end the video conference application is issued by the user operating the
したがって、上記の図６~８の各種処理を実行することで、使用者は、情報処理装置１２０に端末装置１を接続した時に、情報処理装置１２０側にテレビ会議アプリである撮像音声制御プログラム情報が記憶されているかを判断し、インストールされていないと判断された場合は端末装置１に記憶されているテレビ会議アプリを自動起動させることができる。したがって、使用者は情報処理装置１２０側にテレビ会議アプリが記憶されていない場合は、端末装置１のテレビ会議アプリを自動起動できる、また、情報処理装置１２０側にテレビ会議アプリが記憶されている場合は、情報処理装置１２０側でのテレビ会議アプリと連動しながら起動させることができる。よって、使用者は情報処理装置に、撮像手段であるカメラ、音声情報入力手段であるマイク、音声情報出力手段であるスピーカが一体になった端末装置１を接続するだけで、簡単な操作で最適な状態のテレビ会議を行うことができる。
Therefore, by executing the various processes shown in FIGS. 6 to 8, when the user connects the
１ 端末装置
１０Ａ テレビ会議拠点
１０Ｂ テレビ会議拠点
１０Ｃ テレビ会議拠点
１００ テレビ会議システム
１２０ 情報処理装置
１１５３ 作動履歴情報データベース
２００ ネットワーク
1
Claims (7)
撮影した画像を前記撮像情報として生成する撮像手段と、
音声を前記音声情報として入力する音声情報入力手段と、
前記通信手段を介して前記情報処理装置から取得した音声情報を出力する音声情報出力手段と、
前記情報処理装置に対して前記通信手段を介して通信接続する外部接続手段と、
前記撮像情報、又は前記音声情報を、前記情報処理装置を介して他の情報処理装置と送受信する制御を行うための撮像音声制御プログラム情報を記憶するプログラム情報記憶手段と、
前記外部接続手段により前記情報処理装置と接続した時に、前記情報処理装置から送信される設定情報に基づいて、前記撮像音声制御プログラム情報が前記情報処理装置に記憶されているかどうかを判断する記憶判断手段を備え、
前記記憶判断手段により前記情報処理装置に前記撮像音声制御プログラム情報が記憶されていないと判断された場合、前記端末装置の前記プログラム情報記憶手段に記憶されている前記撮像音声制御プログラム情報を前記情報処理装置上で起動させるための制御信号を送信する起動制御手段
を備えることを特徴とする端末装置。 In a terminal device that is connected to an information processing device that stores a plurality of program information via a communication unit, and that transmits and receives at least one of imaging information and audio information,
Imaging means for generating a captured image as the imaging information;
Voice information input means for inputting voice as the voice information;
Voice information output means for outputting voice information acquired from the information processing apparatus via the communication means;
External connection means for communication connection to the information processing apparatus via the communication means;
Program information storage means for storing imaging voice control program information for performing control to transmit / receive the imaging information or the audio information to / from another information processing apparatus via the information processing apparatus;
Storage determination for determining whether or not the imaging sound control program information is stored in the information processing apparatus based on setting information transmitted from the information processing apparatus when connected to the information processing apparatus by the external connection unit With means,
When the storage determination unit determines that the imaging sound control program information is not stored in the information processing apparatus, the information about the imaging sound control program information stored in the program information storage unit of the terminal device is used as the information. A terminal device comprising start control means for transmitting a control signal for starting on a processing device.
前記起動制御手段は、前記情報処理装置から送信される前記設定情報に対応した前記作動履歴情報が、前記作動履歴情報記憶手段により前記プログラム情報記憶手段に記憶されているかどうかを判断し、記憶されていると判断した場合、前回作動した前記撮像手段、前記音声情報入力手段、前記音声情報出力手段の作動条件と同じ条件で作動させるようにすることを特徴とする請求項１に記載の通信端末装置。 Operation history information stored in the program information storage unit in association with operation history information, which is history information of operation conditions relating to each of the imaging unit, the audio information input unit, and the audio information output unit, and the device information The activation control means further determines whether or not the operation history information corresponding to the setting information transmitted from the information processing apparatus is stored in the program information storage means by the operation history information storage means. 2. If it is determined and stored, the operation is performed under the same conditions as the operation conditions of the imaging means, the voice information input means, and the voice information output means that have been operated last time. The communication terminal device according to 1.
前記顔検出手段で検出されたすべての前記顔画像のサイズが所定値以上で撮像可能かどうかを判断する顔画像サイズ判断手段をさらに備え、
前記作動履歴情報記憶手段は、前記情報処理装置から送信される前記設定情報に対応した前記作動履歴情報が、前記プログラム情報記憶手段に記憶されていないと判断し、さらに前記顔画像サイズ判断手段により所定値以上のサイズで撮像可能であると判断した場合は、前記顔画像のサイズが前記所定値以上になるよう前記撮像手段を作動させる条件を前記作動条件として記憶することを特徴とする請求項２に記載の端末装置。 Face detection means for performing detection processing of a human face image from the imaging information imaged by the imaging means;
A face image size determining means for determining whether or not the size of all the face images detected by the face detecting means can be imaged at a predetermined value or more;
The operation history information storage unit determines that the operation history information corresponding to the setting information transmitted from the information processing apparatus is not stored in the program information storage unit, and further includes the face image size determination unit. The condition for operating the imaging unit to store the face image size equal to or greater than the predetermined value when it is determined that the image can be captured with a size equal to or greater than a predetermined value is stored as the operation condition. The terminal device according to 2.
前記起動制御手段は、前記設定情報に対応した前記情報処理装置に備えられている撮像手段も作動させるよう前記制御信号を送信することを特徴とする請求項３に記載の端末装置。 If it is determined by the face image size determination means that it is not possible to capture an image with a size greater than the predetermined value
The terminal device according to claim 3, wherein the activation control unit transmits the control signal so that an imaging unit provided in the information processing apparatus corresponding to the setting information is also operated.
雑音レベル判断手段により所定値以上の雑音レベルであると判断した場合は、前記起動制御手段は、前記情報処理装置に備えられている音声情報入力手段を作動させるよう前記制御信号を送信することを特徴とする請求項１乃至４のいずれかに記載の端末装置。 Noise level determination means for determining whether the noise level of the noise input from the voice information input means is a predetermined value or more,
When the noise level determination means determines that the noise level is equal to or higher than a predetermined value, the activation control means transmits the control signal so as to operate the voice information input means provided in the information processing apparatus. The terminal device according to claim 1, wherein the terminal device is characterized in that:
撮影した画像を前記撮像情報として生成する撮像ステップと、
音声を前記音声情報として入力する音声情報入力ステップと、
前記通信手段を介して前記情報処理装置から取得した音声情報を出力する音声情報出力ステップと、
前記情報処理装置に対して前記通信手段を介して通信接続する外部接続ステップと、
前記撮像情報、又は前記音声情報を、前記情報処理装置を介して他の情報処理装置と送受信する制御を行うための撮像音声制御プログラム情報を記憶するプログラム情報記憶ステップと、
前記外部接続ステップにより前記情報処理装置と接続した時に、前記情報処理装置から送信される設定情報に基づいて、前記撮像音声制御プログラム情報が記憶されているかどうかを判断する記憶判断ステップを備え、
前記記憶判断ステップにより前記情報処理装置に前記撮像音声制御プログラム情報が記憶されていないと判断された場合、前記端末装置の前記プログラム情報記憶ステップにて記憶されている前記撮像音声制御プログラム情報を前記情報処理装置上で起動させるための制御信号を送信する起動制御ステップ
を処理することを特徴とする通信制御方法。 In a communication control method for processing in a terminal device that is connected to an information processing device that stores a plurality of program information via a communication unit and that transmits and receives at least one of imaging information and audio information,
An imaging step of generating a captured image as the imaging information;
A voice information input step for inputting voice as the voice information;
A voice information output step of outputting voice information acquired from the information processing apparatus via the communication means;
An external connection step of performing communication connection to the information processing apparatus via the communication unit;
A program information storage step for storing imaging voice control program information for performing control to transmit / receive the imaging information or the audio information to / from another information processing apparatus via the information processing apparatus;
A storage determination step of determining whether or not the imaging sound control program information is stored based on setting information transmitted from the information processing device when connected to the information processing device in the external connection step;
When it is determined in the storage determination step that the imaging sound control program information is not stored in the information processing apparatus, the imaging sound control program information stored in the program information storage step of the terminal device is A communication control method characterized by processing an activation control step of transmitting a control signal for activation on an information processing apparatus.
撮影した画像を前記撮像情報として生成する撮像ステップと、
音声を前記音声情報として入力する音声情報入力ステップと、
前記通信手段を介して前記情報処理装置から取得した音声情報を出力する音声情報出力ステップと、
前記情報処理装置に対して前記通信手段を介して通信接続する外部接続ステップと、
前記撮像情報、又は前記音声情報を、前記情報処理装置を介して他の情報処理装置と送受信する制御を行うための撮像音声制御プログラム情報を記憶するプログラム情報記憶ステップと、
前記外部接続ステップにより前記情報処理装置と接続した時に、前記情報処理装置から送信される設定情報に基づいて、前記撮像音声制御プログラム情報が記憶されているかどうかを判断する記憶判断ステップを備え、
前記記憶判断ステップにより前記情報処理装置に前記撮像音声制御プログラム情報が記憶されていないと判断された場合、前記端末装置の前記プログラム情報記憶ステップにて記憶されている前記撮像音声制御プログラム情報を前記情報処理装置上で起動させるための制御信号を送信する起動制御ステップ
を前記端末装置で実行させるための通信制御プログラム。 In a communication control program that is connected to an information processing apparatus that stores a plurality of program information through a communication unit and that is executed in a terminal device that transmits and receives at least one of imaging information and audio information,
An imaging step of generating a captured image as the imaging information;
A voice information input step for inputting voice as the voice information;
A voice information output step of outputting voice information acquired from the information processing apparatus via the communication means;
An external connection step of performing communication connection to the information processing apparatus via the communication unit;
A program information storage step for storing imaging voice control program information for performing control to transmit / receive the imaging information or the audio information to / from another information processing apparatus via the information processing apparatus;
A storage determination step of determining whether or not the imaging sound control program information is stored based on setting information transmitted from the information processing device when connected to the information processing device in the external connection step;
When it is determined in the storage determination step that the imaging sound control program information is not stored in the information processing apparatus, the imaging sound control program information stored in the program information storage step of the terminal device is A communication control program for causing the terminal device to execute an activation control step for transmitting a control signal for activation on the information processing device.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2010266163A JP2012119815A (en) | 2010-11-30 | 2010-11-30 | Terminal device, communication control method, and communication control program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2010266163A JP2012119815A (en) | 2010-11-30 | 2010-11-30 | Terminal device, communication control method, and communication control program |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2012119815A true JP2012119815A (en) | 2012-06-21 |
Family
ID=46502203
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2010266163A Pending JP2012119815A (en) | 2010-11-30 | 2010-11-30 | Terminal device, communication control method, and communication control program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2012119815A (en) |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0662396A (en) * | 1992-08-07 | 1994-03-04 | Matsushita Electric Ind Co Ltd | Picture communication terminal equipment |
| JPH11112954A (en) * | 1991-07-24 | 1999-04-23 | Hitachi Ltd | Video telephone set and video telephone communication method |
| JP2002238040A (en) * | 2001-02-09 | 2002-08-23 | Fuji Photo Film Co Ltd | Video conference system |
| JP2005045779A (en) * | 2003-07-02 | 2005-02-17 | Fuji Xerox Co Ltd | Method and interface tool for managing audio device, and computer program product executed by computer which manages audio device |
| JP2005094357A (en) * | 2003-09-17 | 2005-04-07 | Sony Corp | Imaging apparatus and printing method |
| JP2006074822A (en) * | 2001-08-30 | 2006-03-16 | Hitachi Kokusai Electric Inc | Monitored video delivery method, monitored video delivering apparatus, and monitored video delivery system |
| JP2006203398A (en) * | 2005-01-19 | 2006-08-03 | Sanyo Electric Co Ltd | Output destination switching method and communication equipment using same |
-
2010
- 2010-11-30 JP JP2010266163A patent/JP2012119815A/en active Pending
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH11112954A (en) * | 1991-07-24 | 1999-04-23 | Hitachi Ltd | Video telephone set and video telephone communication method |
| JPH0662396A (en) * | 1992-08-07 | 1994-03-04 | Matsushita Electric Ind Co Ltd | Picture communication terminal equipment |
| JP2002238040A (en) * | 2001-02-09 | 2002-08-23 | Fuji Photo Film Co Ltd | Video conference system |
| JP2006074822A (en) * | 2001-08-30 | 2006-03-16 | Hitachi Kokusai Electric Inc | Monitored video delivery method, monitored video delivering apparatus, and monitored video delivery system |
| JP2005045779A (en) * | 2003-07-02 | 2005-02-17 | Fuji Xerox Co Ltd | Method and interface tool for managing audio device, and computer program product executed by computer which manages audio device |
| JP2005094357A (en) * | 2003-09-17 | 2005-04-07 | Sony Corp | Imaging apparatus and printing method |
| JP2006203398A (en) * | 2005-01-19 | 2006-08-03 | Sanyo Electric Co Ltd | Output destination switching method and communication equipment using same |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| TWI602437B (en) | Video and audio processing devices and video conference system | |
| JP6171263B2 (en) | Remote conference system and remote conference terminal | |
| KR101636716B1 (en) | Apparatus of video conference for distinguish speaker from participants and method of the same | |
| JP2017034502A (en) | Communication equipment, communication method, program, and communication system | |
| EP2046032A1 (en) | A method and an apparatus for obtaining acoustic source location information and a multimedia communication system | |
| JP6582874B2 (en) | COMMUNICATION SYSTEM, COMMUNICATION DEVICE, COMMUNICATION METHOD, AND PROGRAM | |
| JP2015195477A (en) | Program, terminal device and method | |
| JP2011205243A (en) | Information processing apparatus, conference system, information processing method, and computer program | |
| JP2016213674A (en) | Display control system, display control unit, display control method, and program | |
| CN113905204B (en) | Image display method, device, equipment and storage medium | |
| JP5556719B2 (en) | Remote conference equipment | |
| JP2022054192A (en) | Remote conference system, server, photography device, audio output method, and program | |
| JP5598394B2 (en) | Conference terminal device, conference terminal control method, and conference terminal control program, | |
| JP2011066467A (en) | Television conference terminal apparatus, method for controlling voice of the same, and voice control program | |
| JP2012119815A (en) | Terminal device, communication control method, and communication control program | |
| JP6071054B2 (en) | Communication device and method for controlling voice input / output unit | |
| WO2018173139A1 (en) | Imaging/sound acquisition device, sound acquisition control system, method for controlling imaging/sound acquisition device, and method for controlling sound acquisition control system | |
| JP5353854B2 (en) | Remote conference equipment | |
| JP2004180086A (en) | Apartment house intercom device | |
| JP5434903B2 (en) | Communication terminal device, communication control method, and communication control program, | |
| JP2002207431A (en) | Electronic device with hub function | |
| JP2005197945A (en) | Video conference system | |
| JP2000083229A (en) | Conference system, method for displaying talker and recording medium | |
| JP7308445B2 (en) | Image processing system, image processing method and program | |
| JP2020115609A (en) | Voice recording device, control method of the same, and program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20120914 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130821 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130910 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20140218 |