JP2014110559A - Control device, control method, and program - Google Patents
Control device, control method, and program Download PDFInfo
- Publication number
- JP2014110559A JP2014110559A JP2012264585A JP2012264585A JP2014110559A JP 2014110559 A JP2014110559 A JP 2014110559A JP 2012264585 A JP2012264585 A JP 2012264585A JP 2012264585 A JP2012264585 A JP 2012264585A JP 2014110559 A JP2014110559 A JP 2014110559A
- Authority
- JP
- Japan
- Prior art keywords
- video
- information
- control device
- session
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
Description
本発明は、通信システムに関する。 The present invention relates to a communication system.
液晶やプラズマ等のフラットパネルやプロジェクタを用いた40インチ〜80インチ程度のサイズの大型のディスプレイに、タッチパネルを搭載した、いわゆる「電子情報ボード」製品が市場に出ている。 There is a so-called “electronic information board” product in which a touch panel is mounted on a large display with a size of about 40 inches to 80 inches using a flat panel such as liquid crystal or plasma, or a projector.
「電子情報ボード」はＰＣを接続することによって、接続したＰＣの画面を大きく映すことができる。このため、「電子情報ボード」は、企業や行政機関の会議におけるプレゼンテーション等や教育機関等で用いられる。 The “electronic information board” can display a large screen of the connected PC by connecting the PC. For this reason, the “electronic information board” is used in presentations at meetings of corporations and government agencies, educational institutions, and the like.
「電子情報ボード」にはタッチパネル機能が搭載される。タッチパネル機能により、映されている画面にマウス操作の代わりに直接タッチすることで、画面を表示しているパソコンを操作することができる。つまり、タッチパネルを介して、パソコンを操作することができる。 The “electronic information board” is equipped with a touch panel function. The touch panel function allows the user to operate the personal computer displaying the screen by directly touching the displayed screen instead of operating the mouse. That is, the personal computer can be operated via the touch panel.
さらに、「電子情報ボード」に接続したパソコン上で動作させるアプリケーション、いわゆる「黒板アプリケーション」がこれらの機器と一緒に提供される。「黒板アプリケーション」は、黒板の役割をする画面を提供し、タッチパネルを介して、黒板上に手書き文字等を描く機能を提供する。また、「黒板アプリケーション」は、パソコンの画面を取り込んでその上に手書き文字等を重畳して描く機能を提供する。 Furthermore, an application that runs on a personal computer connected to an “electronic information board”, a so-called “blackboard application” is provided together with these devices. The “blackboard application” provides a screen functioning as a blackboard, and provides a function of drawing handwritten characters on the blackboard via the touch panel. The “blackboard application” provides a function of taking a screen of a personal computer and drawing a handwritten character on the screen.
電子情報ボードは、該電子情報ボードに接続したノートＰＣ等の情報処理端末の表示画面を該電子情報ボードのディスプレイに表示する機能とともに、該電子情報ボードに表示した情報処理端末の表示画面を、遠隔地の他の電子情報ボードと共有する機能を有する。 The electronic information board has a function of displaying a display screen of an information processing terminal such as a notebook PC connected to the electronic information board on a display of the electronic information board, and a display screen of the information processing terminal displayed on the electronic information board. It has a function to share with other electronic information boards at remote locations.
デスクトップ画面をキャプチャしたデータと手書き線のデータとを分けて他の端末へ送信し、それらの２つのデータを受信した他の端末は、デスクトップ画面をキャプチャしたデータと手書き線のデータとを重畳させて表示する技術が知られている（例えば、特許文献１参照）。 Data that captures the desktop screen and handwritten line data are transmitted separately to other terminals, and the other terminal that receives these two data superimposes the data captured on the desktop screen and the handwritten line data. A technique for displaying the image is known (for example, see Patent Document 1).
他の電子情報ボードとの間で情報処理端末の表示画面を共有しているときに、電子情報ボードの表示画面が、どの電子情報ボードに接続された情報処理端末のものであるかは分からない。 When sharing the display screen of an information processing terminal with another electronic information board, it is not known to which information processing terminal the display screen of the electronic information board is connected to. .
例えば、拠点Ａ、拠点Ｂ、及び拠点Ｃの３拠点間で遠隔会議を行っている場合について説明する。 For example, a case where a remote conference is performed between three locations, that is, the locations A, B, and C will be described.
拠点Ａの電子情報ボードに接続されている情報処理端末の表示画面が公開されている。この場合、拠点Ｂと拠点Ｃのユーザは、公開されている情報処理端末の表示画面がどの拠点の情報処理端末のものであるかを知ることはできない。 The display screen of the information processing terminal connected to the electronic information board at the site A is open to the public. In this case, the users of the bases B and C cannot know which base information processing terminal the display screen of the public information processing terminal belongs to.
このため、遠隔会議の最中に、公開している情報処理端末がどの拠点のものであるかを確認する作業が発生する場合があり、会議の妨げになる。 For this reason, during the remote conference, there is a case where an operation for confirming which base the information processing terminal being disclosed belongs to occurs, which hinders the conference.
そこで、本発明は、情報処理端末の表示画面を他の装置と共有する際に、どの情報処理端末の表示画面が表示されているかを提示することを目的とする。 Therefore, an object of the present invention is to present which information processing terminal display screen is displayed when the display screen of the information processing terminal is shared with other devices.
開示の制御装置は、
映像を表示する制御を実行する制御装置であって、
他の制御装置との間でセッションを確立する通信制御部と、
前記他の制御装置からの映像と、該映像が送信された情報処理端末を表す情報を含む表示映像情報を作成する画像形成部と、
表示装置へ前記表示映像情報を出力する映像出力部
とを有し、
前記通信制御部は、前記セッションを確立する際に前記他の制御装置から送信されるセッション開始リクエストに含まれる前記情報処理端末を表す情報を取得し、
前記画像形成部は、前記他の制御装置からの映像と前記通信制御部が取得した前記情報処理端末を表す情報と、を含む表示映像情報を作成する。
The disclosed controller is
A control device that executes control to display an image,
A communication control unit that establishes a session with another control device;
An image forming unit for creating display video information including a video from the other control device and information indicating an information processing terminal to which the video is transmitted;
A video output unit for outputting the display video information to a display device;
The communication control unit acquires information representing the information processing terminal included in a session start request transmitted from the other control device when establishing the session,
The image forming unit creates display video information including a video from the other control device and information representing the information processing terminal acquired by the communication control unit.
開示の実施例によれば、情報処理端末の表示画面を他の装置と共有する際に、どの情報処理端末の表示画面が表示されているかを提示することができる。 According to the disclosed embodiment, when the display screen of the information processing terminal is shared with another device, it is possible to present which information processing terminal display screen is displayed.
次に、本発明を実施するための形態を、以下の実施例に基づき図面を参照しつつ説明する。 Next, the form for implementing this invention is demonstrated, referring drawings based on the following Examples.
なお、実施例を説明するための全図において、同一機能を有するものは同一符号を用い、繰り返しの説明は省略する。 In all the drawings for explaining the embodiments, the same reference numerals are used for those having the same function, and repeated explanation is omitted.
＜実施例＞
＜情報処理システム＞
図１は、情報処理システムの一実施例を示す。
<Example>
<Information processing system>
FIG. 1 shows an embodiment of an information processing system.
情報処理システムは、複数の画像処理システムを有する。図1には、第1の画像処理システム１００と、第２の画像処理システム２００と、第３の画像処理システム３００と、第４の画像処理システム４００とが示される。これらの画像処理システムは、映像共有サーバ５００と、ネットワーク６００を介して接続される。
The information processing system has a plurality of image processing systems. FIG. 1 shows a first
第1の画像処理システム１００は、画像処理装置１１０と、情報処理端末１３０ａ、１３０ｂ、１３０ｃとを含んで構成される。
The first
第２の画像処理システム２００の構成、第３の画像処理システム３００の構成、第４の画像処理システム４００の構成は第1の画像処理システム１００の構成と同様である。ここでは、第１の画像処理システム１００について説明する。
The configuration of the second
画像処理装置１１０は、表示装置１０２と、制御装置（コントローラ）１０４とを備える。画像処理装置１１０は、電子情報ボードに含まれるのが好ましい。
The
制御装置１０４に情報処理端末を接続する。情報処理端末の接続を認識した制御装置１０４は、自動的に遠隔地の画像処理システムとの間で画像情報の共有を開始する。
An information processing terminal is connected to the
具体的には、画像処理装置１１０の一例が電子情報ボードであり、情報処理端末の一例が会議参加者（ユーザー）が会議室に持ち込んだノート型ＰＣである。
Specifically, an example of the
このように会議室に制御装置１０４を備えた電子情報ボードを用意し、制御装置１０４にノート型ＰＣを接続すると、接続を認識した制御装置１０４が自動的に遠隔地に配置された特定の機器と画像の共有を開始する。例えば、制御装置１０４は、接続されたノート型ＰＣの画面をキャプチャして遠隔地に送信する。
In this way, when an electronic information board having the
情報処理システムの一実施例では、電子情報ボードを用いた遠隔会議システムにおいて、制御装置１０４は、遠隔地の特定の機器との間で画像情報を共有する処理を制御する。これにより、電子情報ボードを用いた遠隔会議システムにおいて、ノート型ＰＣ画面等の情報処理端末の直感的な共有を遠隔会議システムの参加者に提供することができる。
In an embodiment of the information processing system, in a remote conference system using an electronic information board, the
＜画像処理システム＞
図２は、第１の画像処理システム１００の一実施例を示す。第２の画像処理システム２００、第３の画像処理システム３００、第４の画像処理システム４００は、第１の画像処理システム１００と同様であるため、説明を省略する。
<Image processing system>
FIG. 2 shows an embodiment of the first
画像処理装置１１０と情報処理端末１３０ａ、１３０ｂ、１３０ｃは、それぞれケーブル１２４、１２６によって接続される。画像処理装置１１０と情報処理端末１３０ａ、１３０ｂ、１３０ｃが無線接続されるようにしてもよい。
The
画像処理装置１１０は、情報処理端末１３０ａ、１３０ｂ、１３０ｃに表示された画像（以下、「表示画像」という）を表示する。また、画像処理装置１１０は、ユーザが描画することにより生成される画像（以下、「描画画像」という）を表示できる。
The
画像処理装置１１０は、表示部１１２に接触されたことによってイベントを発生する。画像処理装置１１０は、マウス、キーボード等の入力装置により発生するイベントを情報処理端末１３０ａ、１３０ｂ、１３０ｃに送信する。
The
情報処理端末１３０ａ、１３０ｂ、１３０ｃは、画像処理装置１１０に表示画像を提供する。情報処理端末１３０ａ、１３０ｂ、１３０ｃは、画像信号を出力するインターフェースを備える。情報処理端末１３０ａ、１３０ｂ、１３０ｃは、情報処理端末１３０ａ、１３０ｂ、１３０ｃの表示画像を形成する画像信号を所定のレートで画像処理装置１１０に供給する。例えば、所定のレートは、毎秒３０フレーム程度が好ましい。
The
第１の画像処理システム１００では、上述したように情報処理端末１３０ａ、１３０ｂ、１３０ｃは、インターフェースとしてＶＧＡ(Video Graphics Array)出力端子（図示せず）を備える。情報処理端末１３０ａ、１３０ｂ、１３０ｃは、画像処理装置１１０に、ＶＧＡケーブル等のケーブル１２４を介して、画像処理装置１１０にＶＧＡ信号を送信する。情報処理端末１３０ａ、１３０ｂ、１３０ｃは、各種無線通信プロトコルに準拠した無線通信により、画像処理装置１１０に表示画像を形成する画像信号を送信してもよい。
In the first
また、情報処理端末１３０ａ、１３０ｂ、１３０ｃは、画像処理装置１１０の表示部１１２の表示画像を取得することができる。情報処理端末１３０ａ、１３０ｂ、１３０ｃは、ＵＳＢ(Universal Serial Bus)ポート（図示せず）を備える。情報処理端末１３０ａ、１３０ｂ、１３０ｃは、USB Mass Storage Class等の汎用ドライバを使用して、ＵＳＢケーブル１２６を介して接続された画像処理装置１１０に格納されている表示画像を取得することができる。
In addition, the
第１の画像処理システム１００の一実施例では、上述したように情報処理端末１３０ａ、１３０ｂ、１３０ｃとしてノート型ＰＣを採用するのが好ましい。情報処理端末１３０ａ、１３０ｂ、１３０ｃとして、デスクトップ型ＰＣやタブレット型ＰＣ、ＰＤＡ(Personal Digital Assistants)、デジタルビデオカメラ、デジタルカメラ等の画像フレームを供給可能な情報処理装置を採用することができる。
In one embodiment of the first
第１の画像処理システム１００の一実施例では、３台の情報処理端末１３０ａ、１３０ｂ、１３０ｃを採用する。１−２台の情報処理端末又は４以上の情報処理端末を採用するようにしてもよい。
In one embodiment of the first
＜画像処理システムの機能＞
図３は、第１の画像処理システム１００の機能ブロック図を示す。図３に示される第１の画像処理システム１００では、制御装置１０４に、１台の情報処理端末１３０ａが接続される。制御装置１０４に、２台以上の情報処理端末が接続される場合についても同様である。
<Functions of image processing system>
FIG. 3 shows a functional block diagram of the first
この機能ブロック図により表される機能は、主に、表示装置１０２、制御装置１０４、情報処理端末１３０ａにそれぞれ搭載されるＣＰＵ（図示せず）により実行される。つまり、図３の機能ブロック図により表される機能は、表示装置１０２、制御装置１０４、情報処理端末１３０ａにそれぞれ搭載される記憶部（図示せず）に記憶されたアプリケーションプログラムに従って各ＣＰＵにより実行されるのが好ましい。
The functions represented by this functional block diagram are mainly executed by CPUs (not shown) mounted on the
表示装置１０２に搭載されるＣＰＵは、第１の映像入力部１０６、表示処理部１０８として機能する。
The CPU mounted on the
第１の映像入力部１０６は、制御装置１０４と接続される。第１の映像入力部１０６は、表示処理部１０８に、制御装置１０４により出力された映像信号を入力する。
The first
表示処理部１０８は、第１の映像入力部１０６と接続される。表示処理部１０８は、第１の映像入力部１０６からの映像信号を表示する。
The
制御装置１０４に搭載されるＣＰＵは、第２の映像入力部１１０と、通信制御部１１２と、映像指定部１１４と、映像処理部１１６と、画像形成部１１８と、第２の映像出力部１２０として機能する。
The CPU mounted on the
第２の映像入力部１１０は、情報処理端末１３０ａと接続される。第２の映像入力部１１０は、通信制御部１１２に、情報処理端末１３０ａからＶＧＡ端子、ディスプレイポート、有線LAN、無線LAN、Bluetooth（登録商標）等を経由して転送される映像信号を入力する。
The second
通信制御部１１２は、第２の映像入力部１１０と、ネットワーク６００と接続される。通信制御部１１２は、第２の映像入力部１１０からの映像信号を映像共有サーバ５００に送信する制御を実行する。また、通信制御部１１２は、映像共有サーバ５００からの映像信号を受信する制御を実行する。通信制御部１１２は、映像共有サーバ５００から、映像信号を受信する。通信制御部１１２は、映像共有サーバ５００から映像信号を受信するに先立ち、映像共有サーバ５００との間でセッションを確立する。通信制御部１１２は、映像信号を送信する際に、セッション開始リクエストを送信する。該セッション開始リクエストには、映像の送信元である情報処理端末の情報が含まれる。
The
映像指定部１１４は、通信制御部１１２と接続される。映像指定部１１４は、表示可能な映像を表示する。映像指定部１１４は、ユーザにより選択された映像を表示映像として指定する。
The
映像処理部１１６は、第２の映像入力部１１０、通信制御部１１２、映像指定部１１４と接続される。映像処理部１１６は、第２の映像入力部１１０、通信制御部１１２から、映像指定部１１４により指定された映像の映像信号を取得する。映像処理部１１６は、画像形成部１１８に、取得した映像信号を入力する。映像処理部１１６は、画像形成部１１８に、第２の映像入力部１１０、通信制御部１１２から取得した映像の映像信号を入力する際に、該映像の情報を入力する。映像の情報には、入力端子の情報等が含まれるのが好ましい。
The
画像形成部１１８は、映像処理部１１６と接続される。画像形成部１１８は、映像処理部１１６からの映像信号の映像と該映像の送信元である情報処理端末の情報を同時に表示するための表示映像の情報（以下、「表示映像情報」という）を形成する。画像形成部１１８は、映像に情報処理端末の情報を重畳した表示映像情報を形成するのが好ましい。画像形成部１１８は、第２の映像出力部１２０に、表示映像情報を入力する。
The
第２の映像出力部１２０は、画像形成部１１８と接続される。第２の映像出力部１２０は、表示装置１０２に、画像形成部１１８からの表示映像情報を出力する。
The second
情報処理端末１３０ａに搭載されるＣＰＵは、第１の映像出力部１２２として機能する。
The CPU mounted on the
第１の映像出力部１２２は、制御装置１０４と接続される。第１の映像出力部１２２は、制御装置１０４に、ＶＧＡ端子、ディスプレイポート、有線LAN、無線LAN、Bluetooth（登録商標）等を経由して、映像信号を出力する。
The first
＜映像共有サーバ＞
図４は、映像共有サーバ５００の一実施例を示す。
<Video sharing server>
FIG. 4 shows an embodiment of the
映像共有サーバ５００は、通信部５０２と、呼制御部５０４と、フレーム受信部５０６と、フレーム処理部５０８と、フレーム送信部５１０を有する。
The
呼制御部５０４は、制御装置１０４、２０４、３０４、４０４との間でセッションを確立する。ＰＣ画像を送信する送信セッションの場合、フレーム受信部５０６がフレームを受信し、そのフレームはフレーム処理部５０８により処理される。ここで、ＰＣ画像を受信する受信セッションが確立されている場合は、ある制御装置からのフレームが処理され、他の制御装置に転送される。
The
フレーム処理の一実施例は、映像共有サーバ５００と制御装置との間の帯域や遅延、フレームの圧縮方法、各制御装置の能力等を勘案してフレームを転送に適したフレームに変換する。例えば、差分画像である場合、フレーム処理部５０８は、前フレーム等のデータを用いて通常の画像に復元する。また、映像共有サーバ５００と制御装置との間の帯域が狭く、制御装置の解像度が小さい場合、フレーム処理部５０８は、フレームに含まれる画像のサイズを縮小する。フレーム処理部５０８は、その他、受信側のディスプレイのサイズや形状に応じて画像データの向きを変更するのが好ましい。
In one embodiment of the frame processing, the frame is converted into a frame suitable for transfer in consideration of the bandwidth and delay between the
映像共有サーバ５００は、ＰＣ画像の受信側の制御装置が複数ある場合に特に効果を発揮する。ＰＣ画像の送信側の制御装置は１度だけデータを送信すればよいからである。
The
呼制御部５０４は、通信部５０２と接続される。呼制御部５０４は、制御装置１０４とデータ通信のための第１のセッションを確立し、該第１のセッションに第１のセッション識別情報を与え、制御装置２０４とデータ通信のための第２のセッションを確立し、該第２のセッションに第２のセッション識別情報を与える。また、呼制御部５０４は、制御装置３０４とデータ通信のための第３のセッションを確立し、該第３のセッションに第３のセッション識別情報を与え、制御装置４０４とデータ通信のための第４のセッションを確立し、該第４のセッションに第４のセッション識別情報を与えるのが好ましい。
Call
フレーム受信部５０６は、通信部５０２と接続される。フレーム受信部５０６は、第１のセッションが確立している場合に制御装置１０４から送信された画像データを受信し、第２のセッションが確立している場合に制御装置２０４から送信された画像データを受信する。フレーム受信部５０６は、第３のセッションが確立している場合に制御装置３０４から送信された画像データを受信し、第４のセッションが確立している場合に制御装置４０４から送信された画像データを受信する。
The
フレーム送信部５１０は、通信部５０２と接続される。フレーム送信部５１０は、第１のセッションが確立している場合に画像データを制御装置１０４へ送信し、第２のセッションが確立している場合に画像データを制御装置２０４へ送信する。フレーム送信部５１０は、第３のセッションが確立している場合に画像データを制御装置３０４へ送信し、第４のセッションが確立している場合に画像データを制御装置４０４へ送信する。
フレーム処理部５０８は、フレーム受信部５０６、フレーム送信部５１０と接続される。フレーム処理部５０８は、画像情報を用いて画像データを変換する。画像情報には、受信側の制御装置の表示装置に表示する際の形式に変換するためのフレームの圧縮方法等の情報が含まれる。画像情報は、フレーム受信部５０６から入力される。
The frame processing unit 508 is connected to the
フレーム送信部５１０は、画像情報に基づいてフレーム処理部５０８により変換された変換後の画像データを受信側の制御装置に送信する。
The
また、第１のセッション識別情報、第２のセッション識別情報は各セッションを識別するためのＩＤ等であり、セッションが確立されるたびに乱数から生成されるのが好ましい。 The first session identification information and the second session identification information are IDs for identifying each session, and are preferably generated from random numbers each time a session is established.
映像共有サーバ５００は、各セッションに付与されたセッション識別情報に基づきセッションを管理する。映像共有サーバ５００は、制御装置１０４、２０４、３０４及び４０４を含むグループで共有されるグループ識別情報を予め記憶するのが好ましい。
The
各セッションに付与されたセッション識別情報は、セッション毎に生成しなくてもグループ識別情報をそのまま割り付けることもできる。例えば、グループ識別情報として、制御装置１０４、２０４、３０４及び４０４に共通のＩＤが予め付与されるのが好ましい。また、例えば、各セッションを確立する際に、共通のＩＤとは別に、各セッションＩＤとして、第１のセッション識別情報、第２のセッション識別情報、第３のセッション識別情報、第４のセッション識別情報が生成されるようにしてもよい。
The group identification information can be assigned as it is without generating the session identification information given to each session for each session. For example, it is preferable to assign a common ID to the
＜情報処理システムの動作＞
図５は、情報処理システムの動作の一実施例を示す。
<Operation of information processing system>
FIG. 5 shows an embodiment of the operation of the information processing system.
図５には、画像処理システム１００と画像処理システム２００との間で映像が共有される場合について説明する。制御装置１０４から制御装置２０４へフレームが送信された後に、制御装置２０４から制御装置１０４へフレームが送信される。画像処理システム１００と画像処理システム３００、４００との間で映像が共有される場合についても同様である。
FIG. 5 illustrates a case where video is shared between the
制御装置１０４、２０４には、映像共有サーバ５００のIPアドレス、ポート番号が予め設定されるのが好ましい。また、制御装置１０４と制御装置２０４との間で、予めセッションID（＝遠隔会議のID）が共有されるのが好ましい。例えば、制御装置１０４、２０４にセッションIDが手動で設定されてもよいし、会議管理サーバ等からセッションＩＤを取得し、設定するようにしてもよい。
It is preferable that the IP address and port number of the
ステップＳ５０２では、制御装置１０４に、情報処理端末１３０ａ、１３０ｂ及び１３０ｃのいずれかから映像信号が入力される。他の画像処理システムとの間で制御装置１０４に入力される映像信号の映像を、共有することが指定される。
In step S502, a video signal is input to the
ステップＳ５０４では、制御装置１０４と映像共有サーバ５００との間でセッションが確立される。つまり、制御装置１０４の通信制御部１１２は、映像共有サーバ５００へ、セッション開始リクエスト（送信セッション）を送信する。セッション開始リクエストには、セッション情報が含まれる。セッション情報には、誰が何をどのように送信するのか等を表す情報が含まれる。例えば、セッション情報には、制御装置１０４の映像入力端子に映像信号入力が有るか無いかを表す情報、セッションID、制御装置１０４がPC画像を送信する旨の記述が含まれる。また、セッション情報には、制御装置１０４のIPアドレス、ポート番号等の通信情報が含まれる。ここで、セッションIDにより遠隔会議のID等が設定されるのが好ましい。遠隔会議のIDが設定されることにより、会議が識別されるため、同じ遠隔会議に参加者が参加できるためである。映像共有サーバ５００の呼制御部５０４は、制御装置１０４の通信制御部１１２からのセッション開始リクエスト(送信セッション)によりセッションを確立する。
In step S504, a session is established between the
ステップＳ５０６では、映像共有サーバ５００と制御装置２０４との間でセッションが確立される。つまり、映像共有サーバ５００の呼制御部５０４は、制御装置２０４へ、セッション開始リクエスト（受信セッション）を送信する。制御装置２０４の通信制御部１１２は、映像共有サーバ５００の呼制御部５０４からのセッション開始リクエスト(受信セッション)により、セッションを確立する。
In step S506, a session is established between the
ステップＳ５０８では、映像共有サーバ５００は、制御装置１０４へ、セッション開始レスポンス（送信セッション）を送信する。つまり、映像共有サーバ５００の呼制御部５０４は、制御装置１０４へ、セッション開始レスポンス（送信セッション）を送信する。
In step S508, the
ステップＳ５１０では、制御装置２０４は、映像共有サーバ５００へ、セッション開始レスポンス（送信セッション）を送信する。つまり、制御装置２０４の通信制御部１１２は、映像共有サーバ５００へ、セッション開始レスポンス（送信セッション）を送信する。
In step S <b> 510, the
ステップＳ５１２では、制御装置１０４は、映像共有サーバ５００へ、フレームを送信する。
In step S <b> 512, the
ステップＳ５１４では、映像共有サーバ５００は、制御装置２０４へ、フレームを送信する。制御装置２０４へフレームを転送する際に、制御装置１０４と映像共有サーバ５００は、セッション情報に基づいて、通信の確立や画像の圧縮、展開等を行う。つまり、制御装置１０４と映像共有サーバ５００はセッション情報に応じて、処理する。
In step S <b> 514, the
ステップＳ５１６では、制御装置１０４は、映像共有サーバ５００へ、フレームを送信する。
In step S516, the
ステップＳ５１８では、映像共有サーバ５００は、制御装置２０４へ、フレームを送信する。
In step S518, the
ステップＳ５２０では、所定の時間、制御装置１０４に、情報処理端末１３０ａ、１３０ｂ及び１３０ｃのうち、ステップＳ５０２により映像信号を入力している情報処理端末から映像信号が入力されない。つまり、制御装置１０４に、映像信号以外の信号が入力される。映像信号以外の信号には、入力が無いことが含まれる。
In step S520, the video signal is not input to the
ステップＳ５２２では、制御装置１０４から映像共有サーバ５００へ、セッション更新リクエスト（送信停止）が送信される。つまり、制御装置１０４の通信制御部１１２は、映像共有サーバ５００へ、セッション更新リクエスト（送信停止）を送信する。セッション更新リクエスト（送信停止）には、セッション情報が含まれる。セッション情報には、誰が何をどのように送信するのか等を表す情報が含まれる。例えば、セッション情報には、制御装置１０４の映像入力端子に映像入力が有るか無いかを表す情報、セッションID、制御装置１０４がPC画像を送信する旨の記述が含まれる。ここでは、セッション情報には、制御装置１０４の映像信号入力端子に映像入力が無いことを表す情報が含まれる。
In step S522, a session update request (transmission stop) is transmitted from the
また、セッション情報には、制御装置１０４のIPアドレス、ポート番号等の通信情報が含まれる。ここで、セッションIDにより遠隔会議のID等が設定される。遠隔会議のIDが設定されることにより、会議が識別されるため、同じ遠隔会議に参加者が参加できる。映像共有サーバ５００の呼制御部５０４は、制御装置１０４の通信制御部１１２からのセッション更新リクエスト(送信停止)によりセッションを確立する。映像共有サーバ５００の呼制御部５０４は、制御装置１０４の通信制御部１１２からのセッション更新リクエスト(送信停止)によりセッションを更新する。
Further, the session information includes communication information such as the IP address and port number of the
ステップＳ５２４では、映像共有サーバ５００から制御装置２０４へ、セッション更新リクエスト(受信停止)が送信される。つまり、映像共有サーバ５００の呼制御部５０４は、制御装置２０４へ、セッション更新リクエスト（受信停止）を送信する。制御装置２０４は、映像共有サーバ５００の呼制御部５０４からのセッション更新リクエスト(受信停止)により、セッションを更新する。つまり、制御装置２０４は、受信を停止する。
In step S524, a session update request (reception stop) is transmitted from the
ステップＳ５２６では、映像共有サーバ５００は、制御装置１０４へ、セッション更新レスポンス（送信停止）を送信する。つまり、映像共有サーバ５００の呼制御部５０４は、制御装置１０４へ、セッション更新レスポンス（送信停止）を送信する。制御装置１０４はセッション更新レスポンス（送信停止）を受信するとフレームの送信を停止する。
In step S526, the
ステップＳ５２８では、制御装置２０４は、映像共有サーバ５００へ、セッション更新レスポンス（受信停止）を送信する。つまり、制御装置２０４の通信制御部１１２は、映像共有サーバ５００へ、セッション更新レスポンス（受信停止）を送信する。映像共有サーバ５００は、セッション更新レスポンス（受信停止）を受信するとフレームの送信を停止する。
In step S528, the
ステップＳ５３０では、制御装置２０４に、情報処理端末２３０ａ、２３０ｂ及び２３０ｃのいずれかから映像信号が入力される。制御装置２０４に入力される映像信号の映像を、他の画像処理システムとの間で共有することが指定される。
In step S530, a video signal is input to the
ステップＳ５３２では、制御装置２０４から映像共有サーバ５００へ、セッション更新リクエスト（送信リクエスト）が送信される。つまり、制御装置２０４の通信制御部１１２は、映像共有サーバ５００へ、セッション更新リクエスト（送信リクエスト）を送信する。映像共有サーバ５００の呼制御部５０４は、制御装置２０４の通信制御部１１２からのセッション更新リクエスト(送信リクエスト)によりセッションを更新する。
In step S532, a session update request (transmission request) is transmitted from the
ステップＳ５３４では、映像共有サーバ５００から制御装置１０４へ、セッション更新リクエスト(受信リクエスト)が送信される。つまり、映像共有サーバ５００の呼制御部５０４は、制御装置１０４へ、セッション更新リクエスト（受信リクエスト）を送信する。制御装置１０４の通信制御部１１２は、映像共有サーバ５００の呼制御部５０４からのセッション更新リクエスト(受信リクエスト)により、セッションを更新する。
In step S534, a session update request (reception request) is transmitted from the
ステップＳ５３６では、映像共有サーバ５００は、制御装置２０４へ、セッション更新レスポンス（送信セッション）を送信する。つまり、映像共有サーバ５００の呼制御部５０４は、制御装置２０４へ、セッション更新レスポンス（送信セッション）を送信する。
In step S536, the
ステップＳ５３８では、制御装置１０４は、映像共有サーバ５００へ、セッション更新レスポンス（受信セッション）を送信する。つまり、制御装置１０４の通信制御部１１２は、映像共有サーバ５００へ、セッション更新レスポンス（受信セッション）を送信する。
In step S538, the
ステップＳ５４０では、制御装置２０４は、映像共有サーバ５００へ、フレームを送信する。
In step S540, the
ステップＳ５４２では、映像共有サーバ５００は、制御装置１０４へ、フレームを送信する。
In step S542, the
ステップＳ５４４では、制御装置２０４は、映像共有サーバ５００へ、フレームを送信する。
In step S544, the
ステップＳ５４６では、映像共有サーバ５００は、制御装置１０４へ、フレームを送信する。
In step S546, the
ステップＳ５４８では、制御装置１０４に、情報処理システムの処理を終了する操作が実行される。つまり、制御装置１０４に、映像を共有する処理を終了する操作が実行される。
In step S548, the
ステップＳ５５０では、制御装置２０４に、情報処理システムの処理を終了する操作が実行される。つまり、制御装置２０４に、映像を共有する処理を終了する操作が実行される。
In step S550, the
ステップＳ５５２では、制御装置１０４と映像共有サーバ５００との間のセッションを終了する。つまり、制御装置１０４の通信制御部１１２は、映像共有サーバ５００へ、セッション終了リクエストを送信する。映像共有サーバ５００の呼制御部５０４は、制御装置１０４の通信制御部１１２からのセッション終了リクエストによりセッションを終了する。
In step S552, the session between the
ステップＳ５５４では、映像共有サーバ５００と制御装置２０４との間のセッションが終了する。つまり、制御装置２０４の通信制御部１１２は、映像共有サーバ５００へ、セッション終了リクエストを送信する。映像共有サーバ５００の呼制御部５０４は、制御装置２０４の通信制御部１１２からのセッション終了リクエストによりセッションを終了する。
In step S554, the session between the
ステップＳ５５６では、映像共有サーバ５００は、制御装置１０４へ、セッション終了レスポンスを送信する。つまり、映像共有サーバ５００の呼制御部５０４は、制御装置１０４へ、セッション終了レスポンスを送信する。
In step S556, the
ステップＳ５５８では、映像共有サーバ５００は、制御装置２０４へ、セッション終了レスポンスを送信する。つまり、映像共有サーバ５００の呼制御部５０４は、制御装置２０４へ、セッション終了レスポンスを送信する。
In step S558, the
＜画像処理装置１１０の動作＞
図６は、画像処理装置１１０の動作の一実施例を示す。図６には、主に、制御装置１０４の動作が示される。制御装置２０４、３０４及び４０４の動作は、制御装置１０４の動作と同様である。
<Operation of
FIG. 6 shows an example of the operation of the
制御装置１０４は、表示装置１０２に、映像とともに該映像を送信元である情報処理端末の情報を表示する。
The
ステップＳ６０２では、制御装置１０４は、ユーザ入力により映像が指定されたか否かを判定する。ユーザは、映像を指定することと映像を指定しないことを選択できる。映像が指定されないと判定された場合、ステップＳ６０２に戻る。
In step S602, the
ステップＳ６０４では、ステップＳ６０２で映像が指定されたと判定された場合、制御装置１０４の映像指定部１１４は、第２の映像入力部１１０が受信している映像情報の中から表示する映像を指定する。
In step S604, when it is determined in step S602 that a video is designated, the
ステップＳ６０６では、制御装置１０４の通信制御部１１２、映像処理部１１６は、映像指定部１１４により指定された映像が第２の映像入力部１１０からの映像であるか、映像が含まれないかを判定する。映像が含まれないと判定した場合、ステップＳ６０２へ戻る。
In step S606, the
ステップＳ６０８では、ステップＳ６０６で第２の映像入力部１１０からの映像であると判定した場合、制御装置１０４の映像処理部１１６は、第２の映像入力部１１０から、映像と情報処理端末の情報を取得する。情報処理端末の情報には、該情報処理端末と接続している入力端子の情報が含まれるのが好ましい。映像処理部１１６は、画像形成部１１８へ、映像と情報処理端末の情報を入力する。
In step S608, if it is determined in step S606 that the video is from the second
ステップＳ６１０では、制御装置１０４の画像形成部１１８は、映像処理部１１６からの映像と情報処理端末の情報に基づいて、表示映像情報を形成する。画像形成部１１８は、表示映像情報を形成する際に、映像を公開している情報処理端末が分かるように形成する。画像形成部１１８は、映像と情報処理端末の情報とを重畳することにより表示映像情報を形成するのが好ましい。画像形成部１１８は、第２の映像出力部１２０へ、表示映像情報を入力する。
In step S610, the
ステップＳ６１２では、制御装置１０４の第２の映像出力部１２０は、表示装置１０２へ、画像形成部１１８からの表示映像情報を入力する。
In step S 612, the second
表示装置１０２では、第１の映像入力部１０６に制御装置１０４からの表示映像情報が入力される。第１の映像入力部１０６は、表示処理部１０８に、制御装置１０４からの表示映像情報を入力する。表示処理部１０８は、表示映像情報を表示する処理を実行する。
In the
また、ステップＳ６０８−Ｓ６１２の処理と並行して、ステップＳ６１４−Ｓ６１８の処理も実行される。 In parallel with the processes in steps S608 to S612, the processes in steps S614 to S618 are also executed.
ステップＳ６１４では、ステップＳ６０６で第２の映像入力部１１０からの映像であると判定した場合、制御装置１０４の通信制御部１１２は、映像送信セッションを確立する。制御装置１０４の通信制御部１１２は、映像受信セッションを開始している場合には、映像受信セッションを終了する。
In step S614, when it is determined in step S606 that the video is from the second
ステップＳ６１６では、制御装置１０４は、映像送信セッションが確立されているか否かを確認する。映像送信セッションが確立されていないと判定した場合、ステップＳ６０２へ戻る。
In step S616, the
ステップＳ６１８では、ステップＳ６１６で映像送信セッションが確立されていると判定した場合、制御装置１０４の通信制御部１１２は、映像共有サーバ５００へ、フレームを送信する。映像共有サーバ５００へフレームを送信した後、ステップＳ６１６へ戻る。
In step S618, when it is determined in step S616 that the video transmission session is established, the
図７は、画像処理装置２１０の動作の一実施例を示す。図７には、主に、制御装置２０４の動作が示される。制御装置１０４、３０４及び４０４の動作は、制御装置２０４の動作と同様である。
FIG. 7 shows an example of the operation of the
制御装置２０４は、表示装置２０２に映像を表示する際に、該映像を公開している情報処理端末の情報を一緒に表示する。例えば、制御装置２０４は、表示装置２０２に、映像に情報処理端末の情報を重畳して表示するのが好ましい。
When the
ステップＳ７０２では、制御装置２０４は、映像共有サーバ５００から、映像受信セッション開始リクエストを受信したか否かを判定する。映像受信セッション開始リクエストを受信していないと判定した場合、ステップＳ７０２に戻る。
In step S <b> 702, the
ステップＳ７０４では、ステップＳ７０２で映像受信セッション開始リクエストを受信したと判定した場合、制御装置２０４の通信制御部１１２は、映像受信セッションを確立する。制御装置２０４の通信制御部１１２は、映像送信セッションを開始している場合には、映像送信セッションを終了する。
If it is determined in step S704 that the video reception session start request has been received in step S702, the
ステップＳ７０６では、制御装置２０４は、映像受信セッションが確立されているか否かを確認する。映像受信セッションが確立されていないと判定した場合、ステップＳ７０２へ戻る。
In step S706, the
ステップＳ７０８では、ステップＳ７０６で映像受信セッションが確立されていると判定した場合、制御装置２０４の通信制御部１１２は、映像共有サーバ５００からフレームを受信する。制御装置２０４の通信制御部１１２は、フレームを展開して画像を作成する。
In step S <b> 708, when it is determined in step S <b> 706 that a video reception session has been established, the
ステップＳ７１０では、制御装置２０４の映像処理部１１６は、通信制御部１１２から、映像と情報処理端末の情報とを取得する。映像は映像共有サーバ５００から受信されるものであり、情報処理端末の情報は映像受信セッションから取得されるものである。情報処理端末の情報には、映像を送信している情報処理端末のIPアドレスやニックネーム等が含まれるのが好ましい。映像処理部１１６は、画像形成部１１８へ、映像と情報処理端末の情報を入力する。
In step S <b> 710, the
ステップＳ７１２では、制御装置２０４の画像形成部１１８は、映像処理部１１６からの映像と情報処理端末の情報に基づいて、表示映像情報を形成する。画像形成部１１８は、表示映像情報を形成する際に、映像を公開している情報処理端末が分かるように形成する。画像形成部１１８は、映像と情報処理端末の情報とを重畳することにより表示映像情報を形成するのが好ましい。画像形成部１１８は、第２の映像出力部１２０へ、表示映像情報を入力する。
In step S712, the
ステップＳ７１４では、制御装置２０４の第２の映像出力部１２０は、表示装置２０２へ、画像形成部１１８からの表示映像情報を入力する。
In step S <b> 714, the second
表示装置２０２では、第１の映像入力部１０６に制御装置２０４からの表示映像情報が入力される。第１の映像入力部１０６は、表示処理部１０８に、制御装置２０４からの表示映像情報を入力する。表示処理部１０８は、表示映像情報を表示する処理を実行する。
In the
＜表示装置への表示例（その１）＞
図８は、画像処理装置の表示装置に表示される情報処理端末の情報の一実施例を示す。
<Example of display on display device (1)>
FIG. 8 shows an example of information processing terminal information displayed on the display device of the image processing apparatus.
図８は、第２の画像処理システム２００と第３の画像処理システム３００との間で、第１の画像処理システム１００の画像処理装置１１０に接続された情報処理端末１３０ａの表示画面を共有する例を示す。
FIG. 8 shares the display screen of the
画像処理装置１１０には情報処理端末１３０ａ及び１３０ｂが接続され、画像処理装置２１０には情報処理端末２３０ａ及び２３０ｂが接続され、画像処理装置３１０には情報処理端末３３０ａ及び３３０ｂが接続されている。
画像処理装置１１０により情報処理端末１３０ａの表示画面が指定される場合、画像処理装置１１０の表示装置１０２には、情報処理端末１３０ａを表す「Ｉｎｐｕｔ１」が表示される。「Ｉｎｐｕｔ１」は一例であり、他のニックネーム等の表示により情報処理端末１３０ａが示されてもよい。
When the display screen of the
画像処理装置２１０の表示装置２０２には、セッション開始リクエストに含まれる情報処理端末の情報に基づいて、自画像処理システム以外の情報処理端末の表示画像であることを示す「遠隔」が表示される。
On the
画像処理装置３１０の表示装置２０２には、画像処理装置２１０の表示装置２０２と同様に、セッション開始リクエストに含まれる情報処理端末の情報に基づいて、自画像処理システム以外の情報処理端末の表示画像であることを示す「遠隔」が表示される。
「遠隔」は一例であり、他の表示により自画像処理システム以外の情報処理端末の表示画像であることが示されてもよい。
Similar to the
“Remote” is an example, and other display may indicate a display image of an information processing terminal other than the self-image processing system.
＜表示装置への表示例（その２）＞
図９は、画像処理装置の表示装置に表示される情報処理端末の情報の一実施例を示す。
<Example of display on display device (2)>
FIG. 9 shows an example of information processing terminal information displayed on the display device of the image processing apparatus.
図９は、第２の画像処理システム２００と第３の画像処理システム３００との間で、第１の画像処理システム１００の画像処理装置１１０に接続された情報処理端末１３０ａの表示画面を共有する例を示す。
In FIG. 9, the display screen of the
画像処理装置１１０には情報処理端末１３０ａ及び１３０ｂが接続され、画像処理装置２１０には情報処理端末２３０ａ及び２３０ｂが接続され、画像処理装置３１０には情報処理端末３３０ａ及び３３０ｂが接続されている。
画像処理装置１１０により情報処理端末１３０ａの表示画面が指定される場合、画像処理装置１１０の表示装置１０２には、情報処理端末１３０ａを表す「Ｉｎｐｕｔ１」が表示される。「Ｉｎｐｕｔ１」は一例であり、他のニックネーム等の表示により情報処理端末１３０ａが示されてもよい。
When the display screen of the
画像処理装置２１０の表示装置２０２には、セッション開始リクエストに含まれる情報処理端末の情報に基づいて、どの画像処理システムの情報処理端末の表示画像であるかが分かるように、第１の画像処理システムを示す「拠点Ａ」が表示される。
The
画像処理装置３１０の表示装置３０２には、画像処理装置２１０の表示装置２０２と同様に、セッション開始リクエストに含まれる情報処理端末の情報に基づいて、どの画像処理システムの情報処理端末の表示画像であるかが分かるように、第１の画像処理システムを示す「拠点Ａ」が表示される。
Similar to the
「拠点Ａ」は一例であり、他のニックネーム等の表示によりどの画像処理システムの情報処理端末の表示画像であるかが示されてもよい。 “Location A” is an example, and the display image of the information processing terminal of which image processing system may be indicated by display of other nicknames or the like.
＜表示装置への表示例（その３）＞
図１０は、画像処理装置の表示装置に表示される情報処理端末の情報の一実施例を示す。
<Example of display on display device (part 3)>
FIG. 10 shows an example of information processing terminal information displayed on the display device of the image processing apparatus.
図１０は、第２の画像処理システム２００と第３の画像処理システム３００との間で、第１の画像処理システム１００の画像処理装置１１０に接続された情報処理端末１３０ａの表示画面を共有する例を示す。
FIG. 10 shares the display screen of the
画像処理装置１１０には情報処理端末１３０ａ及び１３０ｂが接続され、画像処理装置２１０には情報処理端末２３０ａ及び２３０ｂが接続され、画像処理装置３１０には情報処理端末３３０ａ及び３３０ｂが接続されている。
画像処理装置１１０により情報処理端末１３０ａの表示画面が指定される場合、画像処理装置１１０の表示装置１０２には、第１の画像処理システム１００の情報処理端末１３０ａを表す「拠点Ａ：Ｉｎｐｕｔ１」が表示される。
「拠点Ａ：Ｉｎｐｕｔ１」は一例であり、他のニックネーム等の表示により第１の画像処理システム１００の情報処理端末１３０ａが示されてもよい。
When the display screen of the
“Base A: Input 1” is an example, and the
画像処理装置２１０の表示装置２０２には、セッション開始リクエストに含まれる情報処理端末の情報に基づいて、どの画像処理システムのどの情報処理端末の表示画像であるかが分かるように、第１の画像処理システムの情報処理端末１３０ａを示す「拠点Ａ：Ｉｎｐｕｔ１」が表示される。
The first image is displayed on the
画像処理装置３１０の表示装置３０２には、画像処理装置２１０の表示装置２０２と同様に、セッション開始リクエストに含まれる情報処理端末の情報に基づいて、どの画像処理システムのどの情報処理端末の表示画像であるかが分かるように、第１の画像処理システムの情報処理端末１３０ａを示す「拠点Ａ：Ｉｎｐｕｔ１」が表示される。
Similar to the
「拠点Ａ：Ｉｎｐｕｔ１」は一例であり、他のニックネーム等の表示によりどの画像処理システムのどの情報処理端末の表示画像であるかが示されてもよい。 “Base A: Input 1” is an example, and the display image of which information processing terminal of which image processing system may be indicated by display of another nickname or the like.
情報処理システムの一実施例では、画像処理装置に接続された情報処理端末の表示画像を、他の画像処理装置と共有している際に、該他の画像処理装置にどの情報処理端末の表示画像であるかを表示できる。つまり、他の画像処理装置の制御装置は、画像処理装置からのセッション情報に含まれる情報処理端末の情報に基づいて、画像処理装置からの映像に情報処理端末の情報を重畳して他の画像処理装置に表示することができる。 In an embodiment of the information processing system, when an image displayed on an information processing terminal connected to the image processing apparatus is shared with another image processing apparatus, which information processing terminal displays on the other image processing apparatus Whether it is an image can be displayed. That is, the control device of the other image processing device superimposes the information processing terminal information on the video from the image processing device based on the information processing terminal information included in the session information from the image processing device. It can be displayed on the processing device.
また、画像処理装置に接続された情報処理端末の表示画像を、他の画像処理装置と共有している際に、画像処理装置にどの情報処理端末の表示画像であるかを表示できる。つまり、画像処理装置に複数の情報処理端末が接続されている場合に、該画像処理装置にどの情報処理端末の表示画像が表示されているかを提示できる。このため、ユーザに、画像処理装置の表示画像がどの情報処理装置の表示画像であるかを直感的に提示できる。 Further, when the display image of the information processing terminal connected to the image processing apparatus is shared with another image processing apparatus, it is possible to display which information processing terminal the display image is on the image processing apparatus. That is, when a plurality of information processing terminals are connected to the image processing apparatus, it is possible to present which information processing terminal display image is displayed on the image processing apparatus. For this reason, it is possible to intuitively present to the user which information processing apparatus the display image of the image processing apparatus is.
＜変形例＞
情報処理システムの一変形例は、図１と略同一である。
<Modification>
A modification of the information processing system is substantially the same as FIG.
情報処理システムの一変形例では、他の画像処理システムに含まれる情報処理端末の表示画面を指定できるようにしたものである。 In a modification of the information processing system, a display screen of an information processing terminal included in another image processing system can be designated.
画像処理システム１００の一変形例は、図２、図３と略同一である。
A modification of the
映像共有サーバ５００の一変形例は、図４と略同一である。
A modification of the
情報処理システムの動作の一変形例は、図５と略同一である。 A modification of the operation of the information processing system is substantially the same as FIG.
＜画像処理装置１１０の動作＞
図１１は、画像処理装置１１０の動作の一変形例を示す。図１１には、主に、制御装置１０４の動作が示される。
<Operation of
FIG. 11 shows a modification of the operation of the
制御装置１０４は、表示装置１０２に、画像とともに該画像を送信している情報処理端末の情報を表示する。
The
ステップＳ１１０２では、制御装置１０４は、ユーザ入力により映像が指定されたか否かを判定する。ユーザは、映像を指定することと映像を指定しないことを選択できる。映像が指定されないと判定された場合、ステップＳ１１０２に戻る。
In step S1102, the
ステップＳ１１０４では、ステップＳ１１０２で映像が指定されたと判定された場合、制御装置１０４の映像指定部１１４は、第２の映像入力部１１０が受信している映像情報と通信制御部１１２が受信している映像情報の中から表示する映像を指定する。
In step S1104, when it is determined in step S1102 that a video is designated, the
ステップＳ１１０６では、制御部１０４の通信制御部１１２、映像処理部１１６は、映像指定部１１４により指定された映像が第２の映像入力部１１０が受信している映像情報であるのか、通信制御部１１２が受信している映像情報であるのか、それら以外（映像が含まれない）であるのかを判定する。映像が含まれないと判定した場合、ステップＳ１１０２へ戻る。
In step S1106, the
ステップＳ１１０８では、ステップＳ１１０６で、通信制御部１１２が受信している映像情報であると判定した場合、制御装置１０４の映像処理部１１６は、通信制御部１１２から、映像と情報処理端末の情報とを取得する。映像は映像共有サーバ５００から受信されるものであり、情報処理端末の情報は映像受信セッションから取得されるものである。情報処理端末の情報には、映像を送信している情報処理端末のIPアドレスやニックネーム等が含まれるのが好ましい。映像処理部１１６は、画像形成部１１８へ、映像と情報処理端末の情報を入力する。
In step S1108, when it is determined in step S1106 that the video information is received by the
ステップＳ１１１０では、制御装置２０４の画像形成部１１８は、映像処理部１１６からの映像と情報処理端末の情報に基づいて、表示映像情報を形成する。画像形成部１１８は、表示映像情報を形成する際に、映像を公開している情報処理端末が分かるように形成する。画像形成部１１８は、映像と情報処理端末の情報とを重畳することにより表示映像情報を形成するのが好ましい。画像形成部１１８は、第２の映像出力部１２０へ、表示映像情報を入力する。
In step S1110, the
ステップＳ１１１２では、制御装置２０４の第２の映像出力部１２０は、表示装置２０２へ、画像形成部１１８からの表示映像情報を入力する。
In step S <b> 1112, the second
表示装置２０２では、第１の映像入力部１０６に制御装置２０４からの表示映像情報が入力される。第１の映像入力部１０６は、表示処理部１０８に、制御装置２０４からの表示映像情報を入力する。表示処理部１０８は、表示映像情報を表示する処理を実行する。
In the
ステップＳ１１１４では、ステップＳ１１０６で、第２の映像入力部１１０が受信している映像情報であると判定した場合、制御装置１０４の映像処理部１１６は、第２の映像入力部１１０から、映像と情報処理端末情報を取得する。情報処理端末の情報には、該情報処理端末と接続している入力端子の情報が含まれるのが好ましい。映像処理部１１６は、画像形成部１１８へ、画像と情報処理端末情報を入力する。
In step S1114, when it is determined in step S1106 that the video information is received by the second
ステップＳ１１１６では、制御装置１０４の画像形成部１１８は、映像処理部１１６からの映像と情報処理端末情報に基づいて、表示映像情報を形成する。画像形成部１１８は、表示映像情報を形成する際に、映像を公開している情報処理端末が分かるように形成する。画像形成部１１８は、映像と情報処理端末の情報とを重畳することにより表示映像情報を形成するのが好ましい。画像形成部１１８は、第２の映像出力部１２０へ、表示映像情報を入力する。
In step S1116, the
ステップＳ１１１８では、制御装置２０４の第２の映像出力部１２０は、表示装置２０２へ、画像形成部１１８からの表示映像情報を入力する。
In step S <b> 1118, the second
ステップＳ１１２０では、ステップＳ１１０６で、第２の映像入力部１１０が受信している映像情報であると判定した場合、制御装置１０４の通信制御部１１２は、映像受信セッションを確立する。制御装置１０４の通信制御部１１２は、映像送信セッションを開始している場合には、送信セッションを終了する。
In step S1120, when it is determined in step S1106 that the video information is received by the second
ステップＳ１１２２では、制御装置１０４は、映像受信セッションが確立されているか否かを確認する。映像受信セッションが確立されていないと判定した場合、ステップＳ１１０２へ戻る。
In step S1122, the
ステップＳ１１２４では、ステップＳ１１２２で映像受信セッションが確立されていると判定した場合、制御装置１０４の通信制御部１１２は、映像共有サーバ５００へ、フレームを送信する。映像共有サーバ５００へフレームを送信した後、ステップＳ１１２２へ戻る。
In step S <b> 1124, when it is determined in step S <b> 1122 that the video reception session has been established, the
画像処理装置の表示装置に表示される情報処理端末の情報は、図８−図１０と略同一である。 Information on the information processing terminal displayed on the display device of the image processing apparatus is substantially the same as that shown in FIGS.
情報処理システムの一変形例によれば、上述した実施例と同様に、画像処理装置に接続された情報処理端末の表示画像を、他の画像処理装置と共有している際に、他の画像処理装置にどの情報処理端末の表示画像であるかを表示できる。つまり、他の画像処理装置の制御装置は、画像処理装置からのセッション情報に含まれる情報処理端末の情報に基づいて、他の画像処理装置に、画像処理装置からの映像に情報処理端末の情報を重畳して表示することができる。 According to a modification of the information processing system, as in the above-described embodiment, when the display image of the information processing terminal connected to the image processing device is shared with another image processing device, the other image Which information processing terminal display image can be displayed on the processing device. In other words, the control device of the other image processing device transmits information about the information processing terminal to the other image processing device based on the information of the information processing terminal included in the session information from the image processing device. Can be superimposed and displayed.
また、画像処理装置に接続された情報処理端末の表示画像を、他の画像処理装置と共有している際に、画像処理装置に、どの情報処理端末の表示画像であるかを表示できる。つまり、画像処理装置に複数の情報処理端末が接続されている場合に、該画像処理装置にどの情報処理端末の表示画像が表示されているかを提示できる。このため、ユーザに、画像処理装置の表示画像がどの情報処理装置の表示画像であるかを直感的に提示できる。 Further, when the display image of the information processing terminal connected to the image processing apparatus is shared with another image processing apparatus, it is possible to display which information processing terminal the display image is on the image processing apparatus. That is, when a plurality of information processing terminals are connected to the image processing apparatus, it is possible to present which information processing terminal display image is displayed on the image processing apparatus. For this reason, it is possible to intuitively present to the user which information processing apparatus the display image of the image processing apparatus is.
さらに、他の画像処理システムに含まれる情報処理端末の表示画像を指定できる。この場合でも、他の画像処理システムの他の画像処理装置に接続された情報処理端末の表示画像を画像処理装置と共有できる。他の画像処理装置に、どの情報処理端末の表示画像であるかを表示できるとともに画像処理装置にもどの情報処理端末の表示画像であるかを表示できる。 Furthermore, a display image of an information processing terminal included in another image processing system can be designated. Even in this case, the display image of the information processing terminal connected to another image processing apparatus of another image processing system can be shared with the image processing apparatus. Which information processing terminal display image can be displayed on another image processing apparatus, and which information processing terminal display image can be displayed on the image processing apparatus.
本発明は特定の実施例を参照しながら説明されてきたが、各実施例は単なる例示に過ぎず、当業者は様々な変形例、修正例、代替例、置換例等を理解するであろう。説明の便宜上、本発明の実施例に従った装置は機能的なブロック図を用いて説明されたが、そのような装置はハードウェアで、ソフトウエアで又はそれらの組み合わせで実現されてもよい。本発明は上記実施例に限定されず、本発明の精神から逸脱することなく、様々な変形例、修正例、代替例、置換例等が包含される。 Although the present invention has been described with reference to particular embodiments, each embodiment is merely illustrative, and those skilled in the art will appreciate various variations, modifications, alternatives, substitutions, and the like. . For convenience of explanation, an apparatus according to an embodiment of the present invention has been described using a functional block diagram, but such an apparatus may be implemented in hardware, software, or a combination thereof. The present invention is not limited to the above-described embodiments, and various variations, modifications, alternatives, substitutions, and the like are included without departing from the spirit of the present invention.
１００ 第１の画像処理システム
１０２ 表示装置
１０４ 制御装置
１０６ 第１の映像入力部
１０８ 表示処理部
１１０ 第２の映像入力部
１１２ 通信制御部
１１４ 映像指定部
１１６ 映像処理部
１１８ 画像形成部
１２０ 第２の映像出力部
１２２ 第１の映像出力部
１１０、２１０、３１０、４１０ 画像処理装置
１３０ａ、１３０ｂ 情報処理端末
２００ 第２の画像処理システム
２３０ａ、２３０ｂ 情報処理端末
３００ 第３の画像処理システム
３３０ａ、３３０ｂ 情報処理端末
４００ 第４の画像処理システム
４３０ａ、４３０ｂ 情報処理端末
DESCRIPTION OF
Claims (7)
他の制御装置との間でセッションを確立する通信制御部と、
前記他の制御装置からの映像と、該映像が送信された情報処理端末を表す情報を含む表示映像情報を作成する画像形成部と、
表示装置へ前記表示映像情報を出力する映像出力部
とを有し、
前記通信制御部は、前記セッションを確立する際に前記他の制御装置から送信されるセッション開始リクエストに含まれる前記情報処理端末を表す情報を取得し、
前記画像形成部は、前記他の制御装置からの映像と前記通信制御部が取得した前記情報処理端末を表す情報と、を含む表示映像情報を作成する、制御装置。 A control device that executes control to display an image,
A communication control unit that establishes a session with another control device;
An image forming unit for creating display video information including a video from the other control device and information indicating an information processing terminal to which the video is transmitted;
A video output unit for outputting the display video information to a display device;
The communication control unit acquires information representing the information processing terminal included in a session start request transmitted from the other control device when establishing the session,
The control device, wherein the image forming unit creates display video information including a video from the other control device and information representing the information processing terminal acquired by the communication control unit.
を有し、
前記画像形成部は、前記映像入力部からの映像と該映像の送信元の情報処理端末を表す情報を含む表示映像情報を作成する、請求項１に記載の制御装置。 A video input unit for inputting video output from an information processing terminal connected to the control device;
The control device according to claim 1, wherein the image forming unit creates display video information including a video from the video input unit and information representing an information processing terminal that is a transmission source of the video.
を有し、
前記通信制御部は、前記映像指定部により映像が指定されたことにより、前記他の制御装置との間でセッションを確立する制御を実行し、
前記画像形成部は、前記映像指定部により指定された映像と該映像の送信元の情報処理端末を表す情報を含む表示映像情報を作成する、請求項２に記載の制御装置。 A video designating unit for designating video selected from videos from a plurality of information processing terminals input by the video input unit;
The communication control unit executes control for establishing a session with the other control device when the video is specified by the video specifying unit,
The control device according to claim 2, wherein the image forming unit creates display video information including information specified by the video specifying unit and information indicating an information processing terminal that is a transmission source of the video.
を有し、
前記画像形成部は、前記映像指定部により指定された映像と該映像の送信元の情報処理端末を表す情報を含む表示映像情報を作成する、請求項１に記載の制御装置。 A video designating unit for designating a video selected from videos from a plurality of other control devices for which a session has been established by the communication control unit;
The control device according to claim 1, wherein the image forming unit creates display video information including a video specified by the video specifying unit and information indicating an information processing terminal that is a transmission source of the video.
他の制御装置との間でセッションを確立し、
前記他の制御装置からの映像と、該映像が送信された情報処理端末を表す情報を含む表示映像情報を作成し、
表示装置へ前記表示映像情報を出力する、
前記セッションを確立する際に前記他の制御装置から送信されるセッション開始リクエストに含まれる前記情報処理端末を表す情報を取得し、
前記他の制御装置からの映像と前記情報処理端末を表す情報と、を含む表示映像情報を作成する、制御方法。 A control method in a control device that executes control for displaying video,
Establish a session with another control unit,
Creating display video information including video from the other control device and information representing the information processing terminal to which the video is transmitted;
Outputting the display video information to a display device;
Obtaining information representing the information processing terminal included in the session start request transmitted from the other control device when establishing the session;
A control method for creating display video information including a video from the other control device and information representing the information processing terminal.
他の制御装置との間でセッションを確立させ、
前記他の制御装置からの映像と、該映像が送信された情報処理端末を表す情報を含む表示映像情報を作成させ、
表示装置へ、前記表示映像情報を出力させる、
前記セッションを確立する際に前記他の制御装置から送信されるセッション開始リクエストに含まれる前記情報処理端末を表す情報を取得させ、
前記他の制御装置からの映像と前記情報処理端末を表す情報と、を含む表示映像情報を作成させる、プログラム。 On the computer,
Establish a session with another control unit,
Creating display video information including video from the other control device and information representing the information processing terminal to which the video is transmitted;
Causing the display device to output the display video information;
Obtaining information representing the information processing terminal included in the session start request transmitted from the other control device when establishing the session;
A program for creating display video information including a video from the other control device and information representing the information processing terminal.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012264585A JP2014110559A (en) | 2012-12-03 | 2012-12-03 | Control device, control method, and program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012264585A JP2014110559A (en) | 2012-12-03 | 2012-12-03 | Control device, control method, and program |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2014110559A true JP2014110559A (en) | 2014-06-12 |
Family
ID=51030943
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2012264585A Pending JP2014110559A (en) | 2012-12-03 | 2012-12-03 | Control device, control method, and program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2014110559A (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US10868923B2 (en) | 2018-11-30 | 2020-12-15 | Ricoh Company, Ltd. | Communication management system, communication system, communication control method, and recording medium |
-
2012
- 2012-12-03 JP JP2012264585A patent/JP2014110559A/en active Pending
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US10868923B2 (en) | 2018-11-30 | 2020-12-15 | Ricoh Company, Ltd. | Communication management system, communication system, communication control method, and recording medium |
| US11146695B2 (en) | 2018-11-30 | 2021-10-12 | Ricoh Company, Ltd. | Communication management system, communication system, communication control method, and recording medium |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6051549B2 (en) | Communication control system, control device, program and electronic information board | |
| US10420011B2 (en) | Communication system, transmission terminal, communication method, and medium | |
| JP2014146229A (en) | Screen sharing system and central device | |
| JP2018093361A (en) | Communication terminal, communication system, video output method, and program | |
| US10511700B2 (en) | Communication terminal with first application displaying status of second application | |
| JP2017102635A (en) | Communication terminal, communication system, communication control method, and program | |
| EP3156895A1 (en) | Image processing apparatus and image processing system | |
| JP6540367B2 (en) | Display control apparatus, communication terminal, communication system, display control method, and program | |
| EP3059943A1 (en) | Image management system, communication device, communication system, non-transitory recording medium, and image management method | |
| JP6724423B2 (en) | Communication terminal, communication system, output method, and program | |
| JP2014110559A (en) | Control device, control method, and program | |
| JP2013196218A (en) | Communication server, communication control system and program | |
| US11656834B2 (en) | Information processing device, non-transitory recording medium, and information processing system | |
| US20170187990A1 (en) | Shared communication terminal, communication system, and communication method | |
| KR101392929B1 (en) | Video conference system providing data sharing function based on meta data and method thereof | |
| US20160036873A1 (en) | Custom input routing using messaging channel of a ucc system | |
| US20160173549A1 (en) | Video conferencing device and control method thereof | |
| JP6776905B2 (en) | Communication terminals, communication systems, display control methods, and programs | |
| JP2019079566A (en) | Communication terminal, communication system, communication control method, and program | |
| JP2010141662A (en) | Image display apparatus, video conferencing device, and image display method | |
| TWI598807B (en) | Controlling method for remote device and remote controlling system | |
| JP2018046443A (en) | Information terminal, electronic information board, and program | |
| JP6606251B2 (en) | SENDING COMPUTER, RECEIVING COMPUTER, METHOD EXECUTED BY THE SAME, AND COMPUTER PROGRAM | |
| CN113727054A (en) | Method and device for sharing information in video conference and computer readable storage medium | |
| CN106033246B (en) | Data transmission method and electronic equipment |