JP2019102982A - 情報処理装置およびその制御方法、並びにプログラム - Google Patents

情報処理装置およびその制御方法、並びにプログラム Download PDF

Info

Publication number
JP2019102982A
JP2019102982A JP2017231928A JP2017231928A JP2019102982A JP 2019102982 A JP2019102982 A JP 2019102982A JP 2017231928 A JP2017231928 A JP 2017231928A JP 2017231928 A JP2017231928 A JP 2017231928A JP 2019102982 A JP2019102982 A JP 2019102982A
Authority
JP
Japan
Prior art keywords
video
display
projector
information processing
resolution
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017231928A
Other languages
English (en)
Other versions
JP6663415B2 (ja
Inventor
和広 門田
Kazuhiro Kadota
和広 門田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2017231928A priority Critical patent/JP6663415B2/ja
Priority to US16/203,796 priority patent/US20190171406A1/en
Publication of JP2019102982A publication Critical patent/JP2019102982A/ja
Application granted granted Critical
Publication of JP6663415B2 publication Critical patent/JP6663415B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G06F3/1431Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display using a single graphics controller
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G06F3/1438Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display using more than one graphics controller
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14Display of multiple viewports
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066Session management
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/04Changes in size, position or resolution of an image
    • G09G2340/0407Resolution change, inclusive of the use of different resolutions for different screen areas
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2350/00Solving problems of bandwidth in display systems
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00Aspects of the architecture of display systems
    • G09G2360/04Display device controller operating with a plurality of display units
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/12Use of DVI or HDMI protocol in interfaces along the display data pipeline

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

【課題】ネットワークを介して接続された機器に表示させるための映像を適切なタイミングで作成できるシステムを実現する。【解決手段】情報処理装置は、表示手段に映像を表示する情報処理装置であって、表示装置とネットワークを介して通信する通信手段と、前記通信手段により前記表示装置との接続を確立すると、前記表示手段に表示される映像とは別の映像であって、前記表示装置に表示させるための拡張ディスプレイの映像を作成する制御手段と、を有する。【選択図】図3

Description

本発明は、情報処理装置と映像表示装置とがネットワークを介して接続されたシステムに関する。
パーソナルコンピュータ(以下、PC)などの情報処理装置とプロジェクタなどの映像表示装置とをHDMI(登録商標)などの接続ケーブルを介して接続したシステムに対して、ネットワークを介してPCとプロジェクタを接続した映像転送システムが知られている。このような映像転送システムでは、1台のPCから複数台のプロジェクタに対して、PCの映像をすべてのプロジェクタに同時投影する機能や、複数台のPCからの映像を1台のプロジェクタで多画面表示する機能などが実現される。
特許文献1には、複数台のPCと複数台のプロジェクタでネットワークグループを構築し、各PCから各プロジェクタに対して自由なレイアウトで投影表示をする技術が開示されている。
従来の映像ケーブルを介して接続したシステムでは、PCとプロジェクタを接続するとPCは自動的にプロジェクタを外部ディスプレイとして認識し、PCのデスクトップを拡張または複製することができる。特にデスクトップを拡張した場合には、PCのディスプレイと外部ディスプレイとして認識したプロジェクタにまたがる領域をデスクトップ領域として作業することが可能になる。こうした状況では、プレゼンタが用いているPCの表示画面と聴衆が見ているプロジェクタの投影映像を異なるものにすることが可能であり、プレゼンテーションを行う際には広く利用されている。
特開2014−127915号公報 特開2003−015858号公報
しかしながら、ネットワークを介してPCとプロジェクタを接続したシステムでは、PCはプロジェクタを外部ディスプレイとして自動的に認識することができないため、PCの表示画面と同じ映像しかプロジェクタに投影表示することができない。
また、PCのデスクトップを拡張または複製する場合は、PCのリソースを消費することになるため、適切なタイミングで行う必要がある。
本発明は、上記課題に鑑みてなされ、その目的は、ネットワークを介して接続された機器に表示させるための映像を適切なタイミングで作成できるシステムを実現することである。
上記課題を解決し、目的を達成するために、本発明の情報処理装置は、映像表示装置とネットワークを介して通信する通信手段と、映像を表示する表示手段と、前記通信手段により前記映像表示装置との接続を確立すると、前記表示手段に表示される映像とは別の映像であって、前記映像表示装置に表示させるための所定の映像を作成する制御手段と、を有する。
本発明によれば、ネットワークを介して接続された機器に表示させるための映像を適切なタイミングで作成できるようになる。
本実施形態のシステム構成図。 本実施形態の装置構成を示すブロック図。 本実施形態の拡張ディスプレイ作成処理を示すフローチャート。 本実施形態の拡張ディスプレイ作成処理のシーケンス図。 本実施形態のPCのUI画面を例示する図。 本実施形態の他のシステム構成図。
以下に、本発明を実施するための形態について詳細に説明する。尚、以下に説明する実施の形態は、本発明を実現するための一例であり、本発明が適用される装置の構成や各種条件によって適宜修正又は変更されるべきものであり、本発明は以下の実施の形態に限定されるものではない。また、後述する各実施形態の一部を適宜組み合わせて構成してもよい。
[実施形態1]以下、図1および図2を参照して、本実施形態の映像転送システムについて説明する。
なお、本実施形態では情報処理装置としてPCを、映像表示装置としてプロジェクタに適用した例を説明するが、これらには限定されない。例えば、情報処理装置としては携帯電話、デジタルカメラ、いわゆるタブレット端末などを用いてもよい。また、映像表示装置としてディスプレイ、デジタルテレビ、携帯電話、いわゆるタブレット端末などを用いてもよい。また、例えば、映像表示装置としては、PCから転送される映像を表示可能な投影装置その他の表示装置であってもよい。
図1において、本実施形態のPC100とプロジェクタ200はLAN(Local Area Network)などの通信ネットワーク150を介して接続されている。PC100はプロジェクタ200との間で通信が確立したタイミングでメインディスプレイの映像10とは別に拡張ディスプレイの映像20を作成し、プロジェクタ200の解像度に適合する映像30として転送する。プロジェクタ200は、PC100から転送される拡張ディスプレイの映像30をスクリーンなどに投影表示する。このようにすることで、PC100を操作するユーザ(プレゼンタ)は、プロジェクタ200には聴衆向けのプレゼンテーション用の映像30を表示しながら、PC100には映像30とは異なるプレゼンタ向けの補助資料などの映像10を表示することができる。
なお、本実施形態において拡張ディスプレイとは、PC100のメインディスプレイに表示されているデスクトップUIがPC100のメインディスプレイ解像度を超えて拡張された際の、PC100のメインディスプレイの範囲外の領域のことを指す。図1を例にとると、PC100のメインディスプレイが10のように表示されており、その右側にメインディスプレイに表示されてはいないが、デスクトップ領域が20のように繋がっている。この20の領域を拡張ディスプレイと呼ぶ。
次に、図2を参照して、本実施形態の映像転送システムを形成するPC100とプロジェクタ200の構成を説明する。
まず、PC100の構成および機能を説明する。
CPU101は、入力信号やプログラムに従って各部を制御することで、表示制御、記録制御、映像処理制御、通信制御といったPC100の全体の制御を行う。RAM102は、データの格納を行うメインメモリである。RAM102は、主に、CPU101が実行するプログラムを格納、或いは展開する領域、プログラム実行中のワーク領域など、様々なデータの格納領域として使用される。VRAM103は、表示部106に表示する映像データを格納する。なおRAM102の速度が十分高速であれば、RAM102をVRAM103として用いてもよい。ROM104は、CPU101が初期化時に実行するブートプログラムが格納されている。なお、ブートプログラムでは、記録媒体105に記録されているOS(オペレーティングシステム)をRAM102に展開して起動する処理が行われる。記録媒体105は、後述する映像転送プログラムやOSなどの各種プログラムとデータを格納するメモリカードやハードディスクドライブなどである。
表示部106は、表示制御部107より指示された映像データの表示を行う。表示部106は、例えば、液晶パネルや有機ELパネルである。表示制御部107は、VRAM103に格納された映像データを読み出し、表示部106に表示する処理を行う。操作部108は、ユーザからの入力を受け付ける操作部材、例えばキーボード、マウス、タッチパネルなどからなり、これらの入力操作はCPU101に送信される。タッチパネルを採用する場合は表示部106と一体的に形成し、表示面へのタッチで操作を入力することが可能である。通信部109は、通信ネットワーク150を介してプロジェクタ200などの外部装置と通信を行う。通信部109は、例えば1ギガビットイーサネット(登録商標)や無線LANなどの通信インタフェースモジュールなどであるが、これらに限らず、様々な通信方式を採用できる。内部バス110は、上述した各構成要素間を接続する。なお、PC100の制御は必ずしも1つのハードウェアで行う必要はなく、例えば複数のハードウェアが処理を分担してPC100の各機能を実現してもよい。
次に、本実施形態のPC100の基本的な動作を説明する。
PC100には、映像転送用のアプリケーションプログラム(以下、映像転送プログラム)がインストールされている。CPU101が実行する映像転送プログラムは、表示制御部107を制御し、表示部106に表示されている映像データをVRAM103からキャプチャし、プロジェクタ200が投影表示可能な所定のフォーマット(例えばJPEG)にエンコードする。CPU101が実行する映像転送プログラムは、通信部109を介して、エンコードした映像データをプロジェクタ200に送信する。なお、CPU101が実行する映像転送プログラムは、接続先プロジェクタの選択、映像データの転送の開始/停止などの各種操作を映像転送プログラムが提供するGUIを介して受け付ける。映像転送プログラムは、これらの操作を制御コマンドに変換して、通信部109を介してプロジェクタ200に送信する。
次に、プロジェクタ200の構成および機能を説明する。
CPU201、RAM202、ROM203、VRAM204、操作部208、通信部209、内部バス210のハードウェアとしての役割はPC100と同様であるので、説明を省略する。
ROM203はプロジェクタ200が動作するためのプログラムやパラメータなどのデータを記憶しており、CPU201はROM203に格納されたプログラムに従って動作する。VRAM204は、投影部206で投影する映像データを格納する。デコーダ205は、PC100から転送される、エンコードされた映像データをデコードする。投影部206は、液晶パネル、レンズ、光源などを有し、デコードされた映像を投影表示する。投影制御部207は、VRAM204に保持された映像データを読み出し、投影部206で投影するように制御する。なお、CPU201が投影制御部207として動作してもよい。なお、プロジェクタ200の制御は必ずしも上述のハードウェアでのみ行う必要はなく、例えば複数のハードウェアが処理を分担してPC100の各機能を実現してもよい。
操作部208は、装置本体に設けられたボタンや、不図示のリモコンからのユーザ操作を受け付けるリモコン受信部などからなり、これらの入力操作は、CPU201に送信される。
次に、本実施形態の映像転送システムにおけるプロジェクタ200の基本的な動作について説明する。
プロジェクタ200のCPU201は、PC100から転送されるエンコードされた映像データを通信部209を介して受信し、デコーダ205でデコードし、VRAM204に展開する。また、CPU201は、投影制御部207を制御し、VRAM204に展開した映像データを読み出して、投影部206により投影表示する。また、CPU201は、PC100において接続先プロジェクタとして選択された場合、PC100からの接続要求、映像データの転送の開始/停止などの制御コマンドを通信部209を介して受信し、コマンドに応じた処理を実行する。
<システムの動作説明>
次に、図3から図6を参照して、本実施形態のシステムの動作について説明する。
図3は本実施形態のPC100による拡張ディスプレイ作成処理を示している。図4はPCを操作するユーザ、PC、プロジェクタそれぞれの処理を示すシーケンス図である。図5はPCの映像転送プログラムのUI画面を例示している。図6は他のシステム構成を示している。
なお、以下では、図6(a)および図6(b)に示す場合における拡張ディスプレイ作成処理を説明する。図6(a)の場合は、PC100aの映像転送プログラムがプロジェクタ200a、200bからなるグループ(以下、セッション)を作成する場合である。図6(b)の場合は、新たなPC100bが作成済みのセッション(ミーティングX)に参加する場合である。なお、詳細な説明は省略するが、セッションを形成する全PCと全プロジェクタは各々ネットワークを介して論理的な接続が確立された状態である。よって、PC100aの映像転送プログラムを介して選択されたプロジェクタごとにネットワーク経由での映像データの転送の開始/停止が可能となる。また、セッションを作成する全プロジェクタに対してPCの画面を一斉送信することが可能となる。また、あるPCから別のPCに対して映像データの転送の開始/停止を指示することも可能である。
<セッション作成シーケンスの説明>
まず、PC100aの映像転送プログラムを操作して、プロジェクタ200aとプロジェクタ200bで形成されるセッションを作成するシーケンスについて、図4および図5を用いて説明する。以下では、PC100aを操作するユーザをユーザaとして説明する。
ユーザaがPC100aの映像転送プログラムを起動すると、「セッションを作成するか」、「作成済みのセッションに参加するか」を選択するための図5(a)に示すようなUIを表示する。
S400では、ユーザaはPC100aの映像転送プログラムに対して、新しいセッションの作成を指示する。つまり、図5(a)のボタン500を押下する。
S401では、PC100aの映像転送プログラムは、セッションを作成するプロジェクタを選択するための図5(b)に示すようなプロジェクタリストを表示する。なお、プロジェクタリストは、ネットワークを介してプロジェクタからブロードキャストされるプロジェクタ情報コマンドを含む。
本実施形態においては、ネットワーク上にプロジェクタ200a、200bが存在するので、S402およびS404において、各プロジェクタ200a、200bはプロジェクタ情報コマンドをネットワーク上にブロードキャストしている。なお、プロジェクタ情報コマンドには、例えばプロジェクタのIPアドレスやプロジェクタ名称が含まれている。また、本例では説明の容易化のため、セッション作成指示のタイミングでプロジェクタ情報コマンドを送信するとしているが、セッション化前のプロジェクタは一定時間ごとにプロジェクタ情報コマンドを送信している。
S403およびS405では、PC100aの映像転送プログラムは、プロジェクタ情報コマンドを受信しているので、プロジェクタリストを更新する。具体的には、図5(b)に示すようなセッション作成時に選択可能なプロジェクタとして、プロジェクタリスト表示領域502にプロジェクタ200a、プロジェクタ200bの情報をそれぞれ表示する。図5(b)のUIはセッション化対象を選択可能なプロジェクタ情報をリスト表示し、プロジェクタを選択するためのチェックボックス503を備えている。
S406では、ユーザaは、PC100aの映像転送プログラムのプロジェクタリストからプロジェクタ200aとプロジェクタ200bを選択してセッションの作成を指示する。この操作は図5(b)のチェックボックス503でプロジェクタ200aとプロジェクタ200bを選択することに相当する。そして、セッション名入力領域504にセッション名を入力し(本例では「ミーティングX」)、確定ボタン505を押下することに相当する。
S407およびS408では、PC100aの映像転送プログラムは、セッション化するプロジェクタ200a、200bとPC100aの論理的な接続を確立する。なお、接続の際にPC100aは自身のIPアドレスと名称(本例ではPC100a)をプロジェクタ200a、200bへそれぞれ送信する。前述したように、接続を確立したPCとセッション化済みのプロジェクタの間では転送処理が可能になる。なお、詳細な説明省略するが、接続に際し、各プロジェクタに設定されたパスワード認証が必要となる構成としてもよい。
S409およびS410では、PC100aの映像転送プログラムは、接続を確立したプロジェクタ200a、200bに対してセッション化要求コマンドをそれぞれ送信する。セッション化要求コマンドは、少なくとも、図5(b)のプロジェクタリスト表示領域502から選択されたセッションを作成するプロジェクタ数と各プロジェクタ情報(IPアドレス、プロジェクタ名称)を含む。また、セッション化要求コマンドは、図5(b)のセッション名入力領域504に入力されたセッション名を含む。
S411およびS412では、セッション化要求コマンドを受信したプロジェクタ200a、200bはセッション化済みの状態へ移行する。この処理はプロジェクタ200a、200bの各CPU201が、セッション化する各プロジェクタ情報(IPアドレス、プロジェクタ名称)、セッション名、セッションに属するPC情報(IPアドレス、PC名称)をRAM202に記憶することである。
S413では、PC100aの映像転送プログラムは、後述する拡張ディスプレイ作成処理を実行する。
<拡張ディスプレイ作成処理>
ここで、図3を用いて、図4のS413における拡張ディスプレイ作成処理について説明する。なお、図3の処理は、PC100のCPU101が実行する映像転送プログラムによって実現される。
S301において、CPU101は、表示制御部107によりメインディスプレイ以外のサブディスプレイがあるか判定し、サブディスプレイを有する場合は本処理を終了し、サブディスプレイを持たない場合はS302へ進む。サブディスプレイを有する環境であれば、例えば、メインディスプレイに聴衆向けのプレゼンテーション用資料を表示し、サブディスプレイにプレゼンタ向けの補助資料を表示することが可能となる。つまり、本実施形態を適用しなくとも、ユーザはメインディスプレイをプロジェクタの転送対象に指定するだけで、プレゼンテーション用資料はプロジェクタに投影させつつ、補助資料はユーザの手元のディスプレイにのみ表示させることができる。
S302において、CPU101は、表示制御部107により拡張ディスプレイを作成可能であるか判定し、拡張ディスプレイを作成可能な場合はS303へ進み、作成不能な場合は本処理を終了する。本例では、表示制御部107は既に表示部106に対して表示制御を実施している状態である。本処理は、表示部106(メインディスプレイ)への表示処理に加えて、映像転送プログラムが、拡張ディスプレイを作成可能か否かをOS提供のAPI(Application Programming Interface)を介してディスプレイドライバに対して問い合わせることを意味する。
S303において、CPU101は、表示制御部107から拡張ディスプレイに対応する解像度を取得し、RAM102へ記憶して、S304へ進む。
S304において、CPU101は、通信部109を制御して、接続を確立している各プロジェクタに対して解像度の送信を要求し、各プロジェクタから受信した解像度をRAM102へ記憶し、S305へ進む。
S305において、CPU101は、S303においてRAM102に記憶した拡張ディスプレイに対応する解像度と、S304においてRAM102に記憶した接続先プロジェクタの解像度とに基づいて拡張ディスプレイの解像度を決定し、S306へ進む。ここで、CPU101は、拡張ディスプレイを作成可能な解像度として、例えば、接続先プロジェクタの解像度のうち最も小さい解像度に最も近い解像度を適用する。このようにすることで、拡張ディスプレイの映像を全ての接続先プロジェクタに同時に表示する場合のネットワーク帯域を最小化することができる。また、プロジェクタが受信した映像について縮小処理を実施する必要がないため、文字潰れなどを抑制することができる。
また、CPU101は、拡張ディスプレイを作成可能な解像度として、例えば、接続先プロジェクタの解像度のうち最も大きい解像度に最も近い解像度を適用してもよい。このようにすることで、接続先プロジェクタのうちの最も解像度が高いプロジェクタに最適化した映像を転送することができ、最適化されたプロジェクタでは解像感のある映像を投影表示することができる。
S306において、CPU101は、S305で決定した解像度で表示制御部107に対して、拡張ディスプレイの作成を指示し、拡張ディスプレイを作成する。
<セッション作成シーケンスの説明の続き>
図4に戻り、セッション作成シーケンスの説明を続ける。なお、以下では、説明の容易化のため、PC100aはS302において拡張ディスプレイが作成可能と判定し、拡張ディスプレイを作成したものとして説明する。
S414では、PC100aの映像転送プログラムは、セッション化したプロジェクタに対して投影制御を実施するための図5(c)に示すような投影制御UIを表示する。
投影制御UIは、セッション名表示領域506、セッション化済みプロジェクタ選択タブ507、508、当該映像転送プログラムを実行しているPC自身を表示する自PC情報表示領域509、他PC情報表示領域510を含む。また、投影制御UIは、投影レイアウト設定領域511、投影開始ボタン512、投影停止ボタン513を含む。
本実施形態においては、PC100aは、プロジェクタ200a、200bを、セッション名「ミーティングX」としてセッション化したので、セッション化済みの2つのタブ507、508が表示されている。ユーザはタブ507、508を選択することで、選択したタブに対応するプロジェクタの投影レイアウト設定領域511を表示し、制御することができる。なお、タブはセッション化されるプロジェクタごとに表示される。そして、このセッションには「ミーティングX」というセッション名を付けたので、セッション名表示領域506にセッション名が表示されている。自PC情報表示領域509には、映像転送プログラムを実行しているPC自身を示す情報(つまりPC100aの情報)が表示されている。他PC情報表示領域510には、セッションに属している自PC以外の他のPC情報が表示される。なお、本例ではセッション作成直後であるので、他に参加するPCが存在しないため何も表示されない。
<セッション参加シーケンスの説明>
次に、図6(b)に示すように、PC100bの映像転送プログラムが、PC100aが作成したプロジェクタ200aとプロジェクタ200bが属するセッションへ参加するシーケンスを図4および図5を用いて説明する。ここでは、PC100bを操作するユーザをユーザbとして説明を行う。
まず、ユーザbがPC100bの映像転送プログラムを起動すると、「セッションを作成するか」、「作成済みのセッションに参加するか」を選択するための図5(a)に示すようなUIを表示する。
S420では、ユーザbはPC100bの映像転送プログラムに対して、セッションへの参加を指示する。つまり、図5(a)のボタン501を押下する。
S421では、PC100bの映像転送プログラムは、参加するセッションを選択するための図5(d)に示すようなセッションリストを表示する。なお、セッションリストは、ネットワークを介してプロジェクタからブロードキャストされるセッション情報コマンドを含む。
本実施形態においては、S411およびS412においてネットワーク上にセッション化済みのプロジェクタ200a、200bが存在する。よって、S422およびS424において各プロジェクタ200a、200bはRAM202からセッション情報を読み出し、セッション情報コマンドとしてネットワーク上にブロードキャストしている。セッション情報コマンドには、セッションを作成するプロジェクタ数、各プロジェクタのIPアドレス、プロジェクタ名称、セッション名、セッションに参加しているPCのIPアドレス、PC名称が含まれている。また、これらの情報はS407およびS408においてPC100aが接続要求を行った際に、各プロジェクタ200a、200bに送信した情報と、S409およびS410においてPC100aが送信したセッション化要求コマンドに含まれる。PC100aがプロジェクタ200aとプロジェクタ200bに送信した情報は同じものであるので、プロジェクタ200aとプロジェクタ200bが送信するセッション情報コマンドも同一のものとなる。セッション化する対象はプロジェクタ200aとプロジェクタ200bの2台、セッション名は「ミーティングX」、セッションに参加中のPCはPC100aである。
S423およびS425では、PC100bの映像転送プログラムは、セッション情報コマンドを受信しているので、セッションリストを更新する。具体的には、図5(d)に示すような参加対象セッションとして、セッションリスト表示領域514にセッション名である「ミーティングX」を表示する。なお、S423およびS425において受信するセッション情報コマンドは同じものであるためS425では更新処理は行われない。セッションリストは参加対象セッションを選択するためのラジオボタン515を備えており、ユーザは参加するセッションを1つ選択することができる。
S426では、ユーザbは、PC100bの映像転送プログラムのセッションリストからプロジェクタ200aとプロジェクタ200bが属するセッションを参加対象として選択する。この操作は図5(d)のラジオボタン515によって、「ミーティングX」を選択し、OKボタン516を押下することに相当する。
S427およびS428では、PC100bの映像転送プログラムは、セッション化するプロジェクタ200a、200bとPC100bの論理的な接続を確立する。PC100bは自身のIPアドレスと名称(本例ではPC100b)を各プロジェクタ200a、200bに送信する。
S429およびS430では、新たなPC100bの接続を受け付けたプロジェクタ200a、200bは、セッション情報として管理している、セッションに参加しているPC情報を更新し、既にセッションに参加済みのPC(PC100a)に通知する。
S431では、S430の通知を受信したPC(PC100a)の映像転送プログラムは、受信したセッション情報に基づいて、投影制御UIを図5(e)に示すように更新する。セッション情報には新たに参加したPC100bの名称が含まれているため他PC情報表示領域510にPC100bの情報を表示するように更新する。
S432では、PC100bの映像転送プログラムは、図4のS413で説明したように拡張ディスプレイ作成処理を実施する。
S433では、PC100bの映像転送プログラムは、セッション化したプロジェクタに対して投影制御を実施するための図5(f)に示すような投影制御UIを表示する。なお、図5(f)のUIは、図5(e)に示すPC100aの映像転送プログラムの投影制御UIと比較して、自PC情報表示領域509と他PC情報表示領域510がそれぞれ反対になっている。
<セッション化後の投影制御>
次に、セッション化後、PC100aの映像転送プログラムの投影制御UIを介して、図6(c)に示すように、プロジェクタ200aにPC100aの拡張ディスプレイの映像を、プロジェクタ200bにPC100bの拡張ディスプレイの映像をそれぞれ転送する処理を図5を用いて説明する。
(PC100aが作成した拡張ディスプレイをプロジェクタ200aに転送)
まず、PC100aの映像転送プログラムがPC100aの拡張ディスプレイの映像をプロジェクタ200aに転送する手順を説明する。
前述までの処理によってPC100aの映像転送プログラムの投影制御UIは図5(e)に示すような状態になっている。この状態からセッション化済みのプロジェクタタブのうちプロジェクタ200aの投影レイアウトを操作するため図5(g)のようにタブ507を選択する。そして、図5(g)において、PC100aを示す自PC情報表示領域509を投影レイアウト設定領域511へドラッグ&ドロップすると、投影制御UIは図5(h)のようになる。自PC情報表示領域509は、自PCが既にレイアウト中であることを示すためにグレーアウトされている。さらに投影レイアウト設定領域511は、自PCであるPC100aの投影対象ディスプレイが、アイコン517のようにメインディスプレイであることを示している。ここでアイコン517をクリックすることで、投影制御UIは図5(i)に示すようになる。
このようにして、投影対象ディスプレイを図5(i)に示すアイコン518のようにサブディスプレイに切り替えることができる。PC100aでは図4のS413において作成済みの拡張ディスプレイが投影対象となる。なお、図3のS301においてサブディスプレイが存在する場合には、これが投影対象となる。
この状態で投影開始ボタン512を押下することで、PC100aの映像転送プログラムが表示制御部107を制御し、拡張ディスプレイに相当する映像データをVRAM103からキャプチャし、エンコード処理を実施する。そして、通信部109を介して図4のS407で選択しているプロジェクタ200aに対してエンコードした映像を送信し、これをプロジェクタ200aが前述したように受信、デコード、投影処理を行う。これによって、図6(c)に示すように、プロジェクタ200aがPC100aの拡張ディスプレイ30aを投影表示する。
(PC100aが他のPC(PC100b)で作成した拡張ディスプレイをプロジェクタ200bに転送)
次に、PC100aの映像転送プログラムが、PC100bの拡張ディスプレイの映像をプロジェクタ200bに転送する手順を説明する。
図5(i)の状態からセッション化済みのプロジェクタタブのうちプロジェクタ200bの投影レイアウトを操作するため、図5(j)に示すようにタブ508を選択する。プロジェクタ200bには投影レイアウト設定前であるため投影レイアウト設定領域511は図5(j)に示したように未設定の状態となる。そして、図5(j)において、PC100bを示す他PC情報表示領域510を投影レイアウト設定領域511へドラッグ&ドロップすると、投影制御UIは図5(k)のようになる。他PC情報表示領域510は、他PCであるPC100bが既にレイアウト中であることを示すためにグレーアウトされている。さらに投影レイアウト設定領域511は、PC100bの投影対象ディスプレイが、アイコン517のようにメインディスプレイであることを示している。ここでアイコン517をクリックすることで、投影制御UIは図5(l)に示すようになる。
このようにして、投影対象ディスプレイを図5(l)に示すアイコン518のようにサブディスプレイに切り替えることができる。PC100bでは図4のS432において拡張ディスプレイを作成しているため、拡張ディスプレイが投影対象となる。なお、図3のS301においてサブディスプレイが存在する場合には、これが投影対象となる。
この状態で投影開始ボタン512を押下することで、PC100aの映像転送プログラムは、プロジェクタ200bに対して、PC100bの拡張ディスプレイが投影対象となった旨のレイアウト通知を通信部109を介して送信する。このレイアウト通知を受信したプロジェクタ200bのCPU201は、RAM202で管理しているセッション情報から、PC100bの情報を読み出し、PC100bのIPアドレスに宛てに拡張ディスプレイ映像の送信開始要求を送信する。
PC100bの映像転送プログラムは、拡張ディスプレイ映像の送信開始要求を受信すると、表示制御部107を制御し、拡張ディスプレイに相当する映像データをVRAM103からキャプチャし、エンコード処理を実施する。そして、通信部109を介して拡張ディスプレイ映像の送信開始要求の送信元であるプロジェクタ200bに対して、エンコードした映像を送信し、これをプロジェクタ200bが前述したように受信、デコード、投影処理を行う。これによって、図6(c)に示すように、プロジェクタ200bがPC100bの拡張ディスプレイ映像30bを投影表示する。
なお、上述した実施形態では、説明の簡単化のため、PC100aの映像転送プログラムから投影制御を行う手法を説明したが、PC100bの映像転送プログラムでも同様の制御が可能である。また、セッションに参加するPCがさらに増えた場合も同様に可能である。
また、図3には図示していないが、ユーザ操作によって映像転送プログラムの終了が指示された場合、CPU101は、「参加しているセッションから離脱するか」、「参加しているセッションを終了させるか」を選択するためのUIを表示してもよい。
そして、ユーザによって、「参加しているセッションから離脱する」旨の指示がなされた場合、つまり当該PCと論理的な接続を確立しているプロジェクタとの接続が解消された場合に、表示制御部107を制御し、S306で作成した拡張ディスプレイを破棄してもよい。
また、ユーザによって、「参加しているセッションを終了させる」旨の指示がなされた場合も、同様に当該PCと論理的な接続を確立しているプロジェクタとの接続を解消し、拡張ディスプレイを破棄してもよい。また、セッションの終了が指示された場合には、セッションに参加している別のPCにおいても、セッションの終了を検知することとなる。この場合も同様に、プロジェクタとの論理的な接続を解消し、拡張ディスプレイを破棄してもよい。
また、上述のような正常な処理フローだけでなく、映像転送プログラムによって、セッションを構成するすべてのプロジェクタとの通信が不能になったことを検知した場合にも、各プロジェクタとの論理的接続を解消し、拡張ディスプレイを破棄してもよい。
なお、映像転送プログラムがプロジェクタとの通信が有効であることを確認するためには、例えば、図4のS402、S403で説明したプロジェクタから一定時間ごとに送信されるプロジェクタ情報コマンドを用いればよい。つまり、映像転送プログラムは、セッションを構成するプロジェクタからプロジェクタ情報コマンドが所定の期間届かないことを検知した場合に、当該プロジェクタとの通信が不通になっていると判定できる。
以上のように、本実施形態の映像転送システムにおいては、セッション化後に、プロジェクタにPCの拡張ディスプレイを転送することができる。
また、セッションから離脱したとき、セッションを終了したとき、セッションの終了を検知したとき、セッションを構成するプロジェクタとの通信路が不通であることを検知したときには拡張ディスプレイを無効化することができる。また、PCはメインディスプレイを制御しているディスプレイドライバにおいて拡張ディスプレイを作成するため、仮想ディスプレイドライバをインストールすることなく、メインディスプレイとは異なるディスプレイを作成し転送することができる。
[その他の実施形態]
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
100…PC、101…CPU、106…表示部、108…操作部、109…通信部、200…プロジェクタ、201…CPU、206…投影部、208…操作部、209…通信部
上記課題を解決し、目的を達成するために、本発明の情報処理装置は、表示手段に映像を表示する情報処理装置であって、表示装置とネットワークを介して通信する通信手段と、前記通信手段により前記表示装置との接続を確立すると、前記表示手段に表示される映像とは別の映像であって、前記表示装置に表示させるための拡張ディスプレイの映像を作成する制御手段と、を有する。

Claims (10)

  1. 映像表示装置とネットワークを介して通信する通信手段と、
    映像を表示する表示手段と、
    前記通信手段により前記映像表示装置との接続を確立すると、前記表示手段に表示される映像とは別の映像であって、前記映像表示装置に表示させるための所定の映像を作成する制御手段と、を有することを特徴とする情報処理装置。
  2. 前記制御手段は、前記表示手段が複数ある場合または前記制御手段が所定の映像を作成不能な場合には、前記所定の映像を作成しないことを特徴とする請求項1に記載の情報処理装置。
  3. 前記制御手段は、前記映像表示装置の解像度と前記制御手段が作成可能な映像の解像度とに基づいて前記所定の映像の解像度を決定することを特徴とする請求項1または2に記載の情報処理装置。
  4. 前記映像表示装置は、複数の映像表示装置を含み、
    前記制御手段は、前記通信手段により少なくとも1つの前記映像表示装置との接続を確立すると、前記複数の映像表示装置の解像度を取得し、各映像表示装置の解像度と前記制御手段が作成可能な映像の解像度とに基づいて前記所定の映像の解像度を決定することを特徴とする請求項3に記載の情報処理装置。
  5. 前記制御手段は、前記所定の映像の解像度として、前記制御手段が作成可能な映像の解像度のうち、前記通信手段により接続を確立した前記複数の映像表示装置のうちの最も小さい解像度に近い解像度または最も大きい解像度に近い解像度を適用することを特徴とする請求項4に記載の情報処理装置。
  6. 前記制御手段は、前記映像表示装置との接続が解消された場合、前記所定の映像を破棄することを特徴とする請求項1から5のいずれか1項に記載の情報処理装置。
  7. 前記制御手段は、前記通信手段により接続が確立された前記複数の映像表示装置が属するグループに、新たな情報処理装置が参加した場合、前記新たな情報処理装置で作成された所定の映像を前記複数の映像表示装置のうちいずれかに転送するように制御することを特徴とする請求項4または5に記載の情報処理装置。
  8. 前記所定の映像は、前記表示手段に表示される映像とは異なる拡張ディスプレイの映像であることを特徴とする請求項1から7のいずれか1項に記載の情報処理装置。
  9. 映像表示装置とネットワークを介して通信する通信手段と、映像を表示する表示手段と、を有する情報処理装置の制御方法であって、
    前記通信手段により前記映像表示装置との接続を確立すると、前記表示手段に表示される映像とは別の映像であって、前記映像表示装置に表示させるための所定の映像を作成することを特徴とする制御方法。
  10. コンピュータを、請求項1から8のいずれか1項に記載された情報処理装置の各手段として機能させるためのプログラム。
JP2017231928A 2017-12-01 2017-12-01 情報処理装置およびその制御方法、並びにプログラム Active JP6663415B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2017231928A JP6663415B2 (ja) 2017-12-01 2017-12-01 情報処理装置およびその制御方法、並びにプログラム
US16/203,796 US20190171406A1 (en) 2017-12-01 2018-11-29 Information processing apparatus and method of controlling the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017231928A JP6663415B2 (ja) 2017-12-01 2017-12-01 情報処理装置およびその制御方法、並びにプログラム

Publications (2)

Publication Number Publication Date
JP2019102982A true JP2019102982A (ja) 2019-06-24
JP6663415B2 JP6663415B2 (ja) 2020-03-11

Family

ID=66657684

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017231928A Active JP6663415B2 (ja) 2017-12-01 2017-12-01 情報処理装置およびその制御方法、並びにプログラム

Country Status (2)

Country Link
US (1) US20190171406A1 (ja)
JP (1) JP6663415B2 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7371648B2 (ja) * 2021-03-05 2023-10-31 セイコーエプソン株式会社 表示制御方法及びプログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009086367A (ja) * 2007-09-28 2009-04-23 Brother Ind Ltd 画像投影システム及びこれに用いられる画像投影装置
WO2017152954A1 (en) * 2016-03-08 2017-09-14 Barco Nv Collaboration platform having moderated content flow
JP2017211494A (ja) * 2016-05-25 2017-11-30 株式会社リコー 画像処理装置、画像処理システム、画像処理方法及びプログラム

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1268122C (zh) * 2002-07-23 2006-08-02 精工爱普生株式会社 显示方法及投影机
JP2004287160A (ja) * 2003-03-24 2004-10-14 Seiko Epson Corp 画像表示システム、プロジェクタ、画像表示方法、プロジェクタ制御方法、画像表示プログラムおよびプロジェクタ制御プログラム
JP2005208823A (ja) * 2004-01-21 2005-08-04 Seiko Epson Corp プロジェクタのネットワークシステム
WO2005088602A1 (ja) * 2004-03-10 2005-09-22 Matsushita Electric Industrial Co., Ltd. 画像伝送システムおよび画像伝送方法
CN101354639A (zh) * 2007-07-25 2009-01-28 联想(北京)有限公司 在终端之间操作对象的方法及终端
JP4636136B2 (ja) * 2008-07-11 2011-02-23 ソニー株式会社 情報処理装置、情報処理方法、情報処理システム及びプログラム
JP4591568B2 (ja) * 2008-07-16 2010-12-01 セイコーエプソン株式会社 画像表示制御方法、画像供給装置及び画像表示制御プログラム
JP5375338B2 (ja) * 2009-05-29 2013-12-25 セイコーエプソン株式会社 画像表示システム、画像表示装置、画像表示方法、画像供給装置、およびプログラム
US8775516B2 (en) * 2010-03-26 2014-07-08 Seiko Epson Corporation Projector system and connection establishment method
US20140176393A1 (en) * 2012-12-25 2014-06-26 Kabushiki Kaisha Toshiba Information processing apparatus, user assistance method and storage medium
JP6249639B2 (ja) * 2013-05-30 2017-12-20 キヤノン株式会社 画像処理システム、画像処理装置、画像処理方法、画像処理プログラム
JP7022622B2 (ja) * 2018-03-08 2022-02-18 キヤノン株式会社 情報処理装置およびその制御方法、並びにプログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009086367A (ja) * 2007-09-28 2009-04-23 Brother Ind Ltd 画像投影システム及びこれに用いられる画像投影装置
WO2017152954A1 (en) * 2016-03-08 2017-09-14 Barco Nv Collaboration platform having moderated content flow
JP2017211494A (ja) * 2016-05-25 2017-11-30 株式会社リコー 画像処理装置、画像処理システム、画像処理方法及びプログラム

Also Published As

Publication number Publication date
JP6663415B2 (ja) 2020-03-11
US20190171406A1 (en) 2019-06-06

Similar Documents

Publication Publication Date Title
JP7022622B2 (ja) 情報処理装置およびその制御方法、並びにプログラム
US9445054B2 (en) Information providing apparatus, transmission system, information providing method, and recording medium storing information providing program
US9772811B2 (en) Image processing system, image processing apparatus, and image processing method
JP6656026B2 (ja) 情報処理装置、情報処理の制御方法、並びにコンピュータプログラム
EP3276973B1 (en) Content projection method and mobile terminal
US10282159B2 (en) Information processing apparatus for transmitting an image to a display apparatus and method of controlling the same
US10405362B2 (en) Communication device, communication device control method, and display system
WO2016065514A1 (zh) 图像显示方法、用户终端和视频接收设备
CN115297347B (zh) 影像显示装置
JP7119190B2 (ja) 映像表示装置
CN110798745A (zh) 多媒体播放的控制方法、服务器及存储介质
JP6663415B2 (ja) 情報処理装置およびその制御方法、並びにプログラム
JP2014127915A (ja) 表示制御装置、制御方法、プログラム
WO2013175717A1 (ja) テレビ会議システム
JP6327944B2 (ja) 情報処理装置、その制御方法及びプログラム
KR101531856B1 (ko) 와이파이 디스플레이 장치들의 역할 전환 방법 및 이를 위한 단말 장치
JP6680323B2 (ja) 情報処理装置、情報処理方法、及びプログラム
KR100959076B1 (ko) 네트워크를 이용한 영상 디스플레이 시스템 및 방법
WO2018229815A1 (ja) 通信装置、通信システム、通信方法、および通信プログラム
JP6157113B2 (ja) 表示制御装置、表示制御方法、プログラム及び記録媒体
JP7077604B2 (ja) 操作受付装置、制御システム、制御方法、及び、制御プログラム
US20190095088A1 (en) Electronic apparatus and method for controlling electronic apparatus
KR20120007119A (ko) 네트워크를 이용한 비디오 영상 스트리밍의 제어방법
GB2627079A (en) Video conferencing end-system
WO2024170887A1 (en) Video conferencing end-system

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180827

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180827

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190919

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20191007

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191122

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20191213

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191223

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200117

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200214

R151 Written notification of patent or utility model registration

Ref document number: 6663415

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151