JP7084450B2 - 分散メディアの相互作用かつリアルタイムの可視化のためのシステムおよび方法 - Google Patents

分散メディアの相互作用かつリアルタイムの可視化のためのシステムおよび方法 Download PDF

Info

Publication number
JP7084450B2
JP7084450B2 JP2020122623A JP2020122623A JP7084450B2 JP 7084450 B2 JP7084450 B2 JP 7084450B2 JP 2020122623 A JP2020122623 A JP 2020122623A JP 2020122623 A JP2020122623 A JP 2020122623A JP 7084450 B2 JP7084450 B2 JP 7084450B2
Authority
JP
Japan
Prior art keywords
media source
viewing
source
computer
media
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020122623A
Other languages
English (en)
Other versions
JP2020174401A (ja
Inventor
オー． ジェインズ クリストファー
Original Assignee
マーシブ テクノロジーズ，インコーポレイティド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by マーシブ テクノロジーズ，インコーポレイティド filed Critical マーシブ テクノロジーズ，インコーポレイティド
Publication of JP2020174401A publication Critical patent/JP2020174401A/ja
Application granted granted Critical
Publication of JP7084450B2 publication Critical patent/JP7084450B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1069—Session establishment or de-establishment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/613—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for the control of the source by the destination
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4092—Image resolution transcoding, e.g. by using client-server architectures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1083—In-session procedures
    • H04L65/1089—In-session procedures by adding media; by removing media
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1083—In-session procedures
    • H04L65/1093—In-session procedures by adding participants; by removing participants
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40—Support for services or applications
    • H04L65/401—Support for services or applications wherein the services involve a main real-time session and one or more additional parallel real-time or time sensitive sessions, e.g. white board sharing or spawning of a subconference
    • H04L65/4015—Support for services or applications wherein the services involve a main real-time session and one or more additional parallel real-time or time sensitive sessions, e.g. white board sharing or spawning of a subconference where at least one of the additional parallel sessions is real time or time sensitive, e.g. white board sharing, collaboration or spawning of a subconference
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/762—Media network packet handling at the source 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M3/00—Automatic or semi-automatic exchanges
    • H04M3/42—Systems providing special services or facilities to subscribers
    • H04M3/56—Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities
    • H04M3/567—Multimedia conference systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2407—Monitoring of transmitted content, e.g. distribution time, number of downloads
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/10—Office automation; Time management
    • G06Q10/101—Collaborative creation, e.g. joint development of products or services

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Information Transfer Between Computers (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Human Resources & Organizations (AREA)
  • Strategic Management (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Data Mining & Analysis (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Tourism & Hospitality (AREA)

Description

（関連出願）
本願は、米国特許出願第１４／６９５，７９６号（２０１５年４月２４日出願）に対する優先権を主張し、上記出願の内容は、その全体が参照により本明細書に引用される。
種々の技術が、ディスプレイ上の複数のメディアソースの外観および相対的位置／スケーリング（レイアウト）を制御するために存在する。例えば、ビデオウォールスケーラおよびスイッチャは、ユーザが、単一共有ディスプレイ上のビデオソースの外観に影響を及ぼす制御コマンドをビデオルーティングシステムに投入することを可能にする。ビデオウォール制御コマンドは、必然的に、主要ディスプレイの共有外観を修正する。すなわち、メディアソースがディスプレイ上でより大きくスケーリングされる場合、その単一共有ディスプレイの全視聴者に対してスケーリングされる。その一方で、いくつかのシステムは、共有ビューと異なる個々の制御をサポートする。例えば、いくつかのビデオ遠隔会議ソフトウェアシステムは、個々のユーザが、共有ビューの不在下、それら自身のインターフェース内の文書またはウェブカメラビューのビデオストリームをスケーリングすることを可能にする。
その結果、これらの既存の技術は、種々のメディアストリームの同期ビューを提供するホストディスプレイシステムと、接続されるソースコンピュータの各々上のその同じシステムの個々の（但し、同期される）ビューとの両方を含む分散された可視化システムの必要性に対処しない。必要とされるのは、主要共有ディスプレイ画面を修正せずに、グループ連携と共有メディアソースの各々の個々の視聴とをサポートする方法で、ユーザが、共有ディスプレイ表面を制御し、かつ同時に、接続されるデバイス上のその共有ディスプレイを視聴することを可能にする機構である。
例えば、各々が共有ディスプレイに接続された４つのソースコンピュータが、同時に、メディアソースを共有している場合を検討する。共有ディスプレイは、１９２０×１０８０分解能画面であると仮定する。各コンピュータが、単一１９２０×１０８０分解能メディアストリームを共有しており、全４つのソースが、共有ディスプレイ上に等しく示されている場合、最大でも、任意の個々のソース分解能は、（１９２０／２）×（１０８０／２）＝９６０×５４０である。これは、異なる、典型的には、異種である、メディアのソースの比較視聴のために有用であるが、情報は、必然的に、喪失される。さらに、共有ディスプレイメディアの複製を個々のコンピュータの各々上に表示するシステムは、それが制約されたユーザインターフェース内に適合するように、各表示されるメディアソースの分解能をさらに低減させ得る。
一組のコンピュータにおける複数のユーザが、共通ディスプレイシステムに接続される種々のデバイスを使用して、メディアソースの組を連携して可視化することを可能にするシステムおよび方法が、開示される。システムは、１つ以上のソースコンピュータから同時にストリーミングされる、メディアの複数のソースをサポートし、同時可視化のために、それらのソースを共通ディスプレイ上に配列する。同時に、各ソースコンピュータは、ユーザインターフェースを介して、共有ディスプレイ上のメディアストリームの現在の配列およびレイアウトを提示される。
システムおよび方法は、連携セッションにおける各参加者が、特定のソースメディアの高分解能ビデオをインタラクティブに選択および視聴することを可能にする技法を導入する。この方法は、以前のメディアストリーミングシステムが、典型的には、ソースコンピュータから共有ディスプレイへのメディアソースの一方向ストリーミングをサポートするが、ソースコンピュータ上での共有ディスプレイの同時可視化をサポートしないので、必要とされる。共有ディスプレイのグラフィカル表現が、ソースコンピュータ上に描写される場合でも、必然的に、ソースコンピュータディスプレイ分解能の制約、潜在的に、ユーザインターフェースにおける限界に一致するようにスケーリングされる。
本発明はさらに、例えば、以下を提供する。
（項目１）
メディアの制御および可視化を提供する方法であって、前記方法は、
ソースコンピュータから、初期分解能を有する第１のメディアソースストリームを受信することと、
前記第１のメディアソースストリームを再スケーリングし、第２の分解能を有する第２のメディアソースストリームを生成することと、
前記第２のメディアソースストリームを宛先コンピュータに伝送することと、
前記宛先コンピュータから、前記第２のメディアソースストリームの選択を示す命令と前記選択されたストリームのための再スケーリング情報とを受信することと、
前記受信された再スケーリング情報に従って、前記第２のメディアソースストリームを再スケーリングし、第３の分解能を有する第３のメディアソースストリームを生成することと、
前記第３のメディアソースストリームを前記宛先コンピュータに伝送することと
を含む、方法。
（項目２）
前記第３のメディアソースストリームを前記宛先コンピュータ上に表示することを含む、項目１に記載の方法。
（項目３）
前記宛先コンピュータに、共有ディスプレイの状態を表すソースマップを伝送することと、
前記ソースマップに従って、前記第２のメディアソースストリームを前記宛先コンピュータ上に表示することと
を含む、項目１に記載の方法。
（項目４）
前記ソースマップは、前記共有ディスプレイ上に表示される前記メディアソースストリームの相対的配列を描写するグラフィカル表現を備えている、項目３に記載の方法。
（項目５）
前記ソースマップは、前記共有ディスプレイ上の各メディアソースの相対的サイズおよび位置をエンコードするグラフィカル表現である、項目３に記載の方法。
（項目６）
前記再スケーリングされた第１のメディアソースストリームは、共有ディスプレイ上に表示される、項目１に記載の方法。
（項目７）
前記第１のメディアソースストリームは、１つ以上の他のメディアソースストリームと併せて前記共有ディスプレイ上に表示される、項目１に記載の方法。
（項目８）
前記メディアソースは、前記ソースコンピュータから前記宛先コンピュータに直接伝送される、項目１に記載の方法。
（項目９）
メディアの制御および可視化を提供する方法であって、前記方法は、
要求側クライアントコンピュータから、所有側クライアントコンピュータから生じるメディアソースストリームを検査するための要求を受信することと、
前記所有側クライアントコンピュータに、前記メディアソースストリームを前記要求側クライアントコンピュータに送信するための要求を伝送することと、
前記メディアソースストリームを送信するための要求を受信することに応答して、前記メディアソースを前記所有側クライアントコンピュータから前記要求側クライアントコンピュータに伝送することと
を含む、方法。
（項目１０）
前記メディアソースストリームは、前記要求側クライアントコンピュータと前記項目のステップを行うホストコンピュータとの両方に伝送される、項目９に記載の方法。
（項目１１）
特定のメディアソースがソースコンピュータおよび宛先コンピュータを含む複数の相互接続されているコンピュータのうちの１つによって検査されているかどうかを示す方法であって、前記方法は、
前記ソースコンピュータから、メディアソースストリームを受信することと、
前記宛先コンピュータから、前記メディアソースストリームの選択を示す命令を受信することと、
前記ソースコンピュータから送信されるメタデータを記憶することによって、第１の視聴イベントを捕捉することであって、前記メタデータは、ユーザ名、前記要求の時間、および要求される前記メディアソースのしるしを示す、ことと、
第１のメディアソースストリームを前記宛先コンピュータに伝送することと、
前記コンピュータのうちの１つのユーザが前記伝送されるメディアソースストリームをもはや表示していないとき、宛先コンピュータから受信されるメタデータを記憶することによって、第２の視聴イベントを捕捉することであって、前記メタデータは、前記メディアソースストリームの表示がもはや生じていないことを示す、ことと、
前記視聴イベント情報を分析することによって、前記第１および第２の視聴イベントに対する前記メタデータを視聴統計に変換することと、
前記視聴統計を前記相互接続されているコンピュータのうちの１つに送信することと
を含む、方法。
（項目１２）
前記相互接続されているコンピュータの各々に対して、前記視聴イベントの各々の開始／停止時間を監視することと、
前記相互接続されているコンピュータの各々から、前記コンピュータのうちの１つによって選択された前記メディアソースストリームの各々に対して、視聴開始時間、視聴終了時間、およびメディアＩＤを含むデータを収集することと、
前記収集されたイベントデータを前記第１のメディアソースストリームを現在視聴しているユーザを示す視聴情報に変換することと、
前記視聴情報を使用して、前記選択されたメディアストリームのうちの任意のものを視聴しているユーザのパーセンテージを示すことと
を含む、項目１１に記載の方法。
（項目１３）
前記視聴統計は、前記相互接続されているコンピュータのうちの少なくとも１つと、共有ディスプレイとに送信される、項目１１に記載の方法。
（項目１４）
前記視聴統計は、選択されたメディアソースストリームを現在視聴しているユーザの数を含む、項目１１に記載の方法。
（項目１５）
前記視聴統計は、選択されたメディアソースストリームを現在視聴している全でのユーザの名前を含む、項目１１に記載の方法。
（項目１６）
前記視聴統計は、選択されたメディアソースストリームを視聴している前記相互接続されているコンピュータのパーセンテージを含む、項目１１に記載の方法。
（項目１７）
前記視聴統計は、ユーザが選択されたメディアソースストリームを視聴した総時間を含む、項目１１に記載の方法。
（項目１８）
前記視聴統計は、選択されたメディアソースストリームを所定の時間量より長く視聴したユーザの数を含む、項目１１に記載の方法。
（項目１９）
前記相互接続されているコンピュータの各々から収集された前記データは、対応するユーザのためのユーザ名、固有のＩＤを含む、項目１１に記載の方法。
図１は、システムの例示的コンポーネントを図示する、略図である。 図２は、システムの例示的実施形態において行われるステップの例示的組を示すフローチャートである。 図３－５は、４人のユーザが、システムに接続され、連携しており、複数のソースメディアファイルが共有される、例を図示する。 図３－５は、４人のユーザが、システムに接続され、連携しており、複数のソースメディアファイルが共有される、実施例を図示する。 図３－５は、４人のユーザが、システムに接続され、連携しており、複数のソースメディアファイルが共有される、実施例を図示する。 図６は、メディアソースが、直接、ソースコンピュータから宛先コンピュータに伝送される、例示的実施形態を示す。 図７は、メタデータが、クライアントコンピュータ間で伝送され、特定のソースが検査されているかどうかを示す、例示的実施形態を示す。
システムおよび方法は、複数のソースコンピュータが特定の連携セッションに接続される環境で動作し、ソースコンピュータのうちの少なくとも１つからの１つ以上のメディアソースが、中央共有ディスプレイ上に表示され、それは、ソースコンピュータのうちの少なくとも１つ上にも表示される。システムは、メディアソースが、共有ディスプレイ上の現在のスケーリングから独立した分解能において、特定のソースコンピュータ上で視聴されることを可能にする。この機能性は、個々のユーザが所望のスケーリングにおける単一メディアソースを視聴することをサポートしながら、共有ディスプレイ表面の連携可視化を提供する。
図１は、ホストディスプレイシステム１０２と、インターネット等のネットワーク１３０を介して、システム１０２と通信する１つ以上のクライアントディスプレイデバイス１０６（＊）［「＊」は、恣意的デバイスを示す、ワイルドカードである］とを備えているシステム１００の例示的コンポーネントを示す。図１に示されるように、例示的実施形態では、ホストシステム１０２は、ホストコントローラ（デジタルプロセッサ）１０４と、関連付けられたデータ記憶装置１１０と、共有ディスプレイ１０３と、サーバ１１５とを含む。ホストコントローラ１０４は、サーバ１１５に結合され、ホストソフトウェア１０５を実行し、本明細書に説明されるメディアスケーリング機能性を提供する。データ記憶装置１１０は、ソースマップ１０１と、ユーザメタデータ情報を記憶するために使用される構成ファイル１２１とを含むデータを記憶するために使用される。ある場合には、ユーザは、共有ビューのために、単一ホストコンピュータ共有ディスプレイ１０３を一緒に視聴し得る。
各ソース（または「クライアント」）コンピュータ１０６は、デスクトップもしくはラップトップコンピュータ、タブレット、またはスマートフォン等、デジタルプロセッサ１０４およびディスプレイ１０８を伴う任意のタイプのコンピュータ制御デバイスであり得る。クライアントソフトウェアアプリケーション１０７は、各ソースコンピュータ１０６内のメモリ１１１に常駐し、以下に詳細に説明されるように、システム１０２から受信された情報をハンドリングおよびフォーマット化するためのユーザインターフェース１１６を提供することと、制御情報をシステムに送信することとを含む、タスクを行う。
図２は、システムの例示的実施形態において行われる例示的なステップの組を示すフローチャートである。図２に示されるように、ステップ２０３における１つ以上のソースコンピュータ１０６からの要求に応答して、ホストシステム１０２は、要求側コンピュータとのセッション接続を確立する。例示的実施形態におけるこのステップでは、各ソースコンピュータは、メタデータを送信することによって、新しいメディアソースストリームの開始を要求し、メタデータは、本来の分解能と、タイプ（静止画像またはビデオストリーム）と、潜在的に、他のデータ（ビデオストリームがエンコードされる方法を示すデータ等）とを含むストリームを含む情報を示す。システム１０２は、新しいストリームを拒
否することができる（例えば、許容可能ストリームの最大数を超える場合）。そうでなければ、ホストシステムは、ステップ２０５において、要求を肯定応答する。それに応答して、ステップ２１０では、ソースコンピュータ１０６のうちの１つ以上のものが、ホストシステム１０２に、初期（本来の）分解能を有するそれぞれのメディアソースストリームを送信する。
ステップ２１５では、ホストシステム１０２は、ソースマップ１０１を各接続されるソースコンピュータに送信することによって、接続されるソースコンピュータ１０６の各々に、他の接続されるソースコンピュータ１０６から現在利用可能なメディアソースストリームについて知らせる。ソースマップ１０１は、グラフィカル表現（すなわち、共有ディスプレイ状態の画像）、メディアソース名および所有者のリスト、または共有ディスプレイ１０３の状態を表す他の情報を含み得る。
一実施形態では、ステップ２１５において、ホストシステム１０２は、接続されるソースコンピュータの各々に、利用可能なソースメディアストリームのスケーリングされた／位置調整された表現である複数の「サムネイル」の形態においてソースマップ１０１を送信する。サムネイルは、ソースマップを描写するためのグラフィカル方法であり、所有権が、アイコンに対応するサムネイルの境界色によって示されるか、または名称をサムネイル上に表示すること等によって示されることができる。別の実施形態では、ソースマップ１０１は、必ずしも幾何学的に配列されない、またはサムネイルとして描写されないメディアソースのリスト（例えば、所有権情報を伴うテキスト名のリスト等）を備えている。このソースマップ伝送は、ユーザがソースコンピュータを介してホストシステムに接続し、接続されたままであるとき、ユーザ入力を伴わずに生じる。以下に詳細に説明されるように、ソースメディアストリームのうちの１つをより高い分解能において視聴するために、ユーザは、ソースマップ１０１内で利用可能なものとして示されるそれらから「選択
」する。
ソースマップ１０１は、ユーザが、ホストディスプレイシステム１０２に接続される各ソースコンピュータ１０６上のユーザインターフェース１１６を介して、特定のメディアソース１０９を選択することを可能にする。例えば、一実施形態では、ソースマップは、ユーザインターフェース１１６上の各利用可能なメディアソースのグラフィカル表現である。例えば、４つのメディアソースが、ホストディスプレイシステムと共有されているとき、これらのソースの各々は、各ソースメディアのそれぞれの本来の分解能より比較的に低い分解能および低いフレームレートにおいて、接続されるソースコンピュータ上のサムネイル内に示される。
ステップ２１７では、システム１０２は、共有ディスプレイ１０３上で、接続されるソースコンピュータからのメディアストリームを、ストリームのそれぞれが単一ディスプレイ画面上で視聴されることを可能にする第２の分解能おいて表示し、ステップ２２０では、システム１０２は、同様に第２の分解能において、各接続されるユーザからのストリーミングされたメディアを各接続されるソースコンピュータ１０６に送信する。
ステップ２２５では、特定のメディアソースを選択して視聴するために、一実施形態では、ソースコンピュータ１０６におけるユーザは、インターフェース１１６を使用して、着目メディアソースに対応するソースマップ１０１内のサムネイルを右クリックすることによって、ソースマップ１０１内のメディアソースを選択する。本実施形態では、メニューが、現れ、ユーザは、「デタッチおよびズーム」オプションを選択する。例示的実施形態では、ソースマップ１０１は、メディアソースのファイル名、短い説明、および所有者のリストを含み得、その場合、ホストシステム１０２は、必ずしも、最初に、実際のメディアストリームを全ての接続されるユーザに送信するわけではない。この情報は、最初に、メディアストリーム自体の代わりに、各ユーザに送信される。そのような実施形態では、ソースマップ１０１は、データのみを備えている。以下に説明されるように、ユーザは、このデータを使用して、メディアソースを選定し、次いで、選択されたメディアソースストリームの受信を開始することができる。メディアソースがこのように視聴されるとき、それは、オリジナルソースビデオストリームではなくてもよいことに留意されたい。例えば、視聴されるメディアは、オリジナルメディアソースストリームより低いフレームレートにおける、静止画像の組（本来の分解能における）であり得る。
ステップ２２５では、メディアソース１０９（＊）を選択後、ソースコンピュータ１０６（＊）のユーザは、ユーザインターフェース１１６を介して、再スケーリング情報を含むディスプレイパラメータを入力し、ソースコンピュータは、ホストシステム１０２に、選択されたメディアソースと、再スケーリング情報とを含む制御コマンドを送信する。
ステップ２３０では、制御コマンドの受信に応答して、ホストシステム１０２は、次いで、対応して再スケーリングされたソースメディアストリームを、第３の分解能において、選択側ソースコンピュータ１０６（＊）に伝送する。再スケーリングされたメディアストリームは、共有ディスプレイ上の現在のメディアストリーム（静止画像であり得る）のスケーリングおよび外観によって制約されず、代わりに、選択されたメディアソースのための選択されたディスプレイパラメータによって決定される。すなわち、新しく伝送される（再スケーリングされた）ソースメディアストリームは、共有ディスプレイ上１０３に表示される対応するメディアストリームと異なる分解能であることができ、それは、接続されるソースコンピュータ１０６のいずれか上のディスプレイ外観変化によって影響されない。選択側ソースコンピュータは、次いで、受信されたソースメディアストリームを第３の分解能において表示する。
図３－５は、４人のユーザが、システムに接続され、連携しており、複数のソースメディアファイルが、共有される、例を図示する。図３の例に示されるように、３つのソースコンピュータ１０６（１）、１０６（２）、１０６（３）が、ホストディスプレイシステム１０２に接続されると仮定する。ホストディスプレイシステムに接続されるソースコンピュータは、随意に、メディアストリームを共有ディスプレイにパブリッシュすることができる。ソースコンピュータ１０６（１）は、２つの異なるメディアストリーム、すなわち、１９２０×１０８０であるストリーム１４０（Ａ）と、１２００×７２０であるストリーム１４０（Ｂ）を、分解能１０８０ｐを用いて、共有ディスプレイ１０３にストリーミングしていると仮定する。この例では、第２のソースコンピュータ１０６（２）は、１０２４×７６８メディアストリーム１４０（Ｃ）をストリーミングしており、ソースコンピュータ１０６（３）は、１９２０×１０８０分解能メディアストリーム１４０（Ｄ）をストリーミングしている。
図２に示されるように、ステップ２１７では、ホストディスプレイシステム１０２は、共有ディスプレイ表面上に適合するように、着信メディアストリームをスケーリングおよび位置調整し、潜在的に、各ソースを第２の分解能に再スケーリングする。
全４つのメディアソースが同時に表示されている場合、各ソースは、通常、図４の実施例に見られるように、共有ディスプレイ表面上で２×２配列内に適合するように再スケーリングされ、共有されているメディアストリームの組は、共有ディスプレイ１０３上と、図４におけるソースコンピュータ１０６（１）のクライアントディスプレイ１０８（１）上に示されるように、各接続されるソースコンピュータ１０６のクライアントディスプレイ１０８上とに同時に示される。この時点において、各入力メディアストリームは、ＸおよびＹ方向の両方に再スケーリングされている。この分解能再マッピングは、共有ディスプレイ自体の分解能に依存する。
分解能マッピングは、以下のように定義されることができる。
Figure 0007084450000001
 式中、ＳＷおよびＳＨは、ディスプレイ上の共有メディアストリームの分解能である。クライアントメディアストリームの本来の分解能は、（Ｗ、Ｈ）であり、共有ディスプレイの分解能は、（ＤＷ、ＤＨ）であり、配列スケーリング係数は、（ＡＷ、ＡＨ）である。配列スケーリング係数は、他のソースおよびそれらの相対的サイズに起因して、ソースメディアフレームを共有ディスプレイに再マッピングする必要があるスケーリング変換を考慮する。４つのソースが共有ディスプレイ上に配列されている我々の例では、ソース１４０（Ｄ）のための分解能再マッピングは、
Figure 0007084450000002
 である。
この分解能は、動的であり、ソースが追加／除去される場合、または制御コマンドがストリームを共有ディスプレイ上の他の現在パブリッシュされているストリームに対して再スケーリングする場合、現在の配列係数に基づいて変化する。任意の所与のメディアソースの入力分解能にも依存する。
例示的実施形態では、共有ディスプレイに接続されるソースコンピュータ、または共有ディスプレイを直接観察することが可能なユーザは、メディアソースが初期スケーリング変換を受ける前、最初は、メディアソースへのアクセスを有していない。このアクセスは、クライアントディスプレイ１０８上のクライアントソフトウェア１０７によって提示されるユーザインターフェース１１６を使用して、要求されるメディアソースを選択することによって、ソースコンピュータ１０６のうちの１つからのメディアソース１４０（Ｄ）に対する要求を通して遂行される。
例えば、ソースコンピュータ１０６（１）を制御するユーザが、共有ディスプレイ１０３上で現在可能なもの（またはそれを上回るもの）より高い分解能において、ソース１４０（Ｄ）に対するメディアストリームの観察を所望する場合、そのユーザは、ユーザのソースコンピュータ１０６（１）上のユーザインターフェース１１６を介して、その要件を示し得る。
図５は、ホストシステム１０２が要求を受信し、再スケーリングされたメディアストリーム１４０（ＤＲ３）とともに、他のメディアソースのソースコンピュータ１０６（２）への送信を開始する場合を描写する。図５は、図５の例における初期メディアストリームＤのための３つの異なるレベルの分解能、すなわち、初期ソース分解能［ストリーム１４０（ＤＲ１）］と、共有ディスプレイ（デフォルト）分解能［ストリーム１４０（ＤＲ２）］と、再スケーリングされた分解能［ストリーム１４０（ＤＲ３）］との同時伝送を図示する。
図６は、メディアソースが、ホストコンピュータシステム１０２自体からではなく、直接、ソースコンピュータ１０６から宛先コンピュータ１０６に伝送される例示的実施形態を示す。これは、クライアントコンピュータ１０６のユーザが、別のクライアントコンピュータからストリーミングされているメディアソース１０９の「検査すること」を欲する場合である。ここでは、ホストコンピュータシステム１０２は、メディエータとしての役割りを果たし、メディアは、ホストシステムからストリーミングされず、代わりに、ホストシステムは、クライアントコンピュータ（それは、「検査されるべき」メディアストリームのソースである）に、ストリームを要求を行ったクライアントコンピュータに送信することを要求する。
図６に示されるように、ステップ６０３では、クライアントコンピュータ１０６は、検査されるべき特定のメディアソース１０９を要求する。ステップ６０５では、ホストシステム１０２は、メディアソースを検査するための要求を受信し、要求されるメディアストリームを最初に伝送したクライアントコンピュータ（そのストリームの所有者、すなわち、「所有側クライアントコンピュータ」）に、ストリームを要求側クライアントコンピュータに送信するための対応する要求を伝送する。要求に応答して、ステップ６１０では、所有側クライアントコンピュータは、矢印６１１によって示されるように、メディアソースの要求側クライアントコンピュータへの伝送を開始する。代替として、ステップ６１０では、所有側クライアントコンピュータは、矢印６１１および６１２によって示されるように、要求されるメディアソースをホストコンピュータシステムおよび要求側クライアントコンピュータの両方に伝送する。
図７は、メタデータが、クライアントコンピュータ間で伝送され、特定のソースが検査されているかどうかと、その長さとを示す、例示的実施形態を示す。本実施形態では、ユーザは、特定のメディア要素を検査している人々の数を示す情報と、関連し得る他の統計とを視聴し得る。
例として、それらのラップトップ（ソースクライアントコンピュータ）からのスライドプレゼンテーションおよびスプレッドシートの両方を共有している教授を検討する。教室内の生徒は、ホストコンピュータに接続し、彼ら自身のユーザインターフェースを介して、彼ら自身のソースマップ内で適切にスケーリングされた両メディアソースを閲覧することができる。最初、ソースマップ内のそれらの画像は、低分解能であり、生徒のデバイス上に適合するようにスケーリングされ、おそらく、例えば、彼らが特定のスライド内のテキストを読むことは、可能にされない。
生徒は、随時、メディアソースをソースマップから選択し、彼らのディスプレイ全体を埋めるようにスケーリングされた高分解能においてそれを閲覧するか、または、その特定のソースの本来の分解能において、彼らがパン／ズームすることを可能にし得る。
この例では、教授は、いくつかのスライドを示し、そして、一時停止し、スプレッドシート内の情報の議論に移行すると仮定する。生徒は、依然として、本明細書に説明される方法を使用して、スライドソースを視聴し得る。必要とされるものは、彼らが、依然として、彼ら自身のデバイス上のスライドソースをについて学習しており、現時点でスプレッドシートを見ていないので、教室内の一部の人々が、議論から「遅れ」ていないかどうかを確認することを可能にする機構である。システムは、教授のクライアントコンピュータユーザインターフェース上に示され得る、「従事」指標を提供することによって、その問題を解決する。
図７に示されるように、ステップ７０３では、クライアントコンピュータ１０６は、「切り離し」のための特定のソースを要求し、ホストシステム１０２は、データ記憶装置１１０内に、ユーザ名および固有のＩＤと、要求の時間と、要求されたメディアソースストリーム１４０（ｎ）とを含む、クライアントコンピュータの要求を示すメタデータ１２１を記憶する。このメタデータ情報は、視聴イベントと称される。「切り離し」は、特定のメディアソースをソースマップ１０１から選択し、したがって、より詳細な視聴のために、「切り離す」プロセスである。
ステップ７０５では、クライアントコンピュータの要求に応答して、ホストシステム１０２は、図１－５に関して前述のように、要求に基づいて、要求側クライアントコンピュータ１０６に、適切に再スケーリングされた（おそらく、本来の分解能における）メディアソースストリーム１４０（ｎ）を伝送する。
ステップ７１０では、ユーザが、再スケーリングされた分解能において、伝送されたメディアソースをもはや視聴していないとき（クライアントコンピュータユーザインターフェース１１６を介して）、この状態を示すメタデータ１２１が、クライアントコンピュータからホストシステム１０２に伝送され、再スケーリングされた高分解能視聴がユーザのクライアントコンピュータ上でもはや生じていないことを示す。この状態は、視聴イベントでもあり、それは、同じクライアントコンピュータが再スケーリングされたメディアソースの表示を開始した場合、前に生じた視聴イベントに関連する。
ステップ７１５では、受信されたメタデータ情報は、種々の視聴イベントを、データ記憶装置１１０内に記憶された蓄積された統計的情報１２２に組み合わせることによって、ホストコンピュータ１０２によって、視聴統計に変換される。一例として、視聴統計は、以下を含み得る。
「切り離された」メディアソースを現在視聴しているユーザの数
切り離されたメディアソースを現在視聴している全ユーザ名
任意のソースを切り離しモードで視聴している者と、完全メディアマップグラフィックを単に視聴している者とのクラスのパーセンテージ
ユーザが切り離しモードでソースを視聴した総時間
特定の時間量より長くソースを視聴したユーザの数
最後に、ステップ７２０では、視聴統計を１つ以上のクライアントコンピュータに伝送し、ステップ７２５において、対応するユーザインターフェース１１６を使用して、それらの統計をある様式で表示することによって、視聴統計が、クライアントコンピュータまたは共有ディスプレイもしくは両方に利用可能にされる。
例えば、ある生徒が、困惑し、５分を超えて、スライドメディアソースに「留まっている」場合、モデレータのユーザインターフェースは、その生徒に対応するアイコン上に「困惑」を示すインジケータを描写することによって、このイベントを描写し得る。
一実施形態では、ホストシステム１０２は、接続されるコンピュータの各々に対して、「視聴イベント」の開始／停止時間を監視する。システム動作中、ホストシステムは、各接続されるユーザに対して、ユーザ名、そのユーザのための固有のＩＤ、視聴開始時間、視聴終了時間、およびメディアＩＤを含むデータを収集する。そして、蓄積されたイベントデータは、メディアを現在視聴している視聴者の数／その視聴者を示す情報に変換される。そして、この情報は、選択されたメディアストリームのうちの１つを個人的に視聴しているので、共有画面をもはや見ていないユーザのパーセンテージを示すために使用される。
（特徴の組み合わせ）
（Ａ１）メディアの制御および可視化を提供する方法において、方法は、ソースコンピュータから、初期分解能を有する第１のメディアソースストリームを受信することと、第１のメディアソースストリームを再スケーリングし、第２の分解能を有する第２のメディアソースストリームを生成することと、第２のメディアソースストリームを宛先コンピュータに伝送することと、宛先コンピュータから、第２のメディアソースストリームの選択を示す命令および選択されたストリームのための再スケーリング情報を受信することと、受信された再スケーリング情報に従って、第２のメディアソースストリームを再スケーリングし、第３の分解能を有する第３のメディアソースストリームを生成することと、第３のメディアソースストリームを宛先コンピュータに伝送することとを含み得る。
（Ａ２）上記（Ａ１）に記載の方法において、方法は、第３のメディアソースストリームを宛先コンピュータ上に表示することを含み得る。
（Ａ３）上記（Ａ１）または（Ａ２）のいずれかに記載の方法において、方法は、宛先コンピュータに、共有ディスプレイの状態を表すソースマップを伝送することを含み得る。
（Ａ４）上記（Ａ３）に記載の方法において、方法は、ソースマップに従って、第２のメディアソースストリームを宛先コンピュータ上に表示することを含み得る。
（Ａ５）上記（Ａ３）または（Ａ４）のいずれかに記載の方法において、ソースマップは、共有ディスプレイ上に表示されるメディアソースストリームの相対的配列を描写するグラフィカル表現を備え得る。
（Ａ６）上記（Ａ３）から（Ａ５）のいずれかに記載の方法において、ソースマップは、共有ディスプレイ上の各メディアソースの相対的サイズおよび位置をエンコードするグラフィカル表現を備え得る。
（Ａ７）上記（Ａ１）から（Ａ６）のいずれかに記載の方法において、再スケーリングされた第１のメディアソースストリームは、共有ディスプレイ上に表示され得る。
（Ａ８）上記（Ａ１）から（Ａ７）のいずれかに記載の方法において、第１のメディアソースストリームは、１つ以上の他のメディアソースストリームと併せて、共有ディスプレイ上に表示され得る。
（Ａ９）上記（Ａ１）から（Ａ８）のいずれかに記載の方法において、メディアソースは、直接、ソースコンピュータから宛先コンピュータに伝送され得る。
（Ｂ１）メディアの制御および可視化を提供する方法において、方法は、要求側クライアントコンピュータから、所有側クライアントコンピュータから生じるメディアソースストリームを検査するための要求を受信することと、所有側クライアントコンピュータに、メディアソースストリームを要求側クライアントコンピュータに送信するための要求を伝送することと、メディアソースストリームを送信するための要求を受信することに応答して、メディアソースを所有側クライアントコンピュータから要求側クライアントコンピュータに伝送することとを含み得る。
（Ｂ２）上記（Ｂ１）に記載の方法において、メディアソースストリームは、要求側クライアントコンピュータおよび上記項目のステップを行うホストコンピュータの両方に伝送され得る。
（Ｃ１）特定のメディアソースがソースコンピュータおよび宛先コンピュータを含む複数の相互接続されているコンピュータのうちの１つによって検査されているかどうかを示す方法において、方法は、ソースコンピュータから、メディアソースストリームを受信することと、宛先コンピュータから、メディアソースストリームの選択を示す命令を受信することと、ユーザ名、要求の時間、および要求されるメディアソースのしるしを示す、ソースコンピュータから送信されるメタデータを記憶することによって、第１の視聴イベントを捕捉することと、第１のメディアソースストリームを宛先コンピュータに伝送することと、コンピュータのうちの１つのユーザが、伝送されるメディアソースストリームをもはや表示していないとき、宛先コンピュータから受信されたメタデータを記憶することによって、メディアソースストリームの表示がもはや生じていないことを示す、第２の視聴イベントを捕捉することと、視聴イベント情報を分析することによって、第１および第２の視聴イベントに対するメタデータを視聴統計に変換することと、視聴統計を相互接続されているコンピュータのうちの１つに送信することとを含み得る。
（Ｃ２）上記（Ｃ１）に記載の方法において、方法は、相互接続されているコンピュータの各々に対して、各該視聴イベントの開始／停止時間を監視することを含み得る。
（Ｃ３）上記（Ｃ１）または（Ｃ２）のいずれかに記載の方法において、方法は、相互接続されているコンピュータの各々から、コンピュータのうちの１つによって選択された該メディアソースストリームの各々に対して、視聴開始時間、視聴終了時間、およびメディアＩＤを含むデータを収集することを含み得る。
（Ｃ４）上記（Ｃ３）に記載の方法において、方法は、収集されたイベントデータを、第１のメディアソースストリームを現在視聴しているユーザを示す視聴情報に変換することを含み得る。
（Ｃ５）上記（Ｃ４）に記載の方法において、方法は、視聴情報を使用して、選択されたメディアストリームのうちの任意のものを視聴しているユーザのパーセンテージを示すことを含み得る。
（Ｃ６）上記（Ｃ１）から（Ｃ５）のいずれかに記載の方法において、視聴統計は、相互接続されているコンピュータのうちの少なくとも１つと、共有ディスプレイとに送信され得る。
（Ｃ７）上記（Ｃ１）から（Ｃ６）のいずれかに記載の方法において、該視聴統計は、選択されたメディアソースストリームを現在視聴しているユーザの数を含み得る。
（Ｃ８）上記（Ｃ１）から（Ｃ７）のいずれかに記載の方法において、該視聴統計は、選択されたメディアソースストリームを現在視聴している全ユーザ名を含み得る。
（Ｃ９）上記（Ｃ１）から（Ｃ８）のいずれかに記載の方法において、該視聴統計は、選択されたメディアソースストリームを視聴している相互接続されているコンピュータのパーセンテージを含み得る。
（Ｃ１０）上記（Ｃ１）から（Ｃ９）のいずれかに記載の方法において、該視聴統計は、ユーザが選択されたメディアソースストリームを視聴した総時間を含み得る。
（Ｃ１１）上記（Ｃ１）から（Ｃ１０）のいずれかに記載の方法において、該視聴統計は、選択されたメディアソースストリームを所定の時間量より長く視聴したユーザの数を含み得る。
（Ｃ１２）上記（Ｃ１）から（Ｃ１１）のいずれかに記載の方法において、相互接続されているコンピュータの各々から収集されたデータは、ユーザ名、対応するユーザのための固有のＩＤを含み得る。
本発明のある実施形態の前述の説明は、包括的である、または本発明を開示される精密な形態に限定することを意図するものではない。請求項において使用される用語は、本発明を本明細書に開示される具体的実施形態に限定するものと解釈されるべきではなく、むしろ、本発明の範囲は、以下の請求項によって決定されるべきである。

Claims (9)

  1. 特定のメディアソースがソースコンピュータおよび宛先コンピュータを含む複数の相互接続されているコンピュータのうちの少なくとも１つのユーザによって視聴されているかどうかを示す方法であって、前記方法は、コントローラを備えるホストコンピュータにおいて行われ、前記方法は、
    前記コントローラが、前記ソースコンピュータから、初期分解能を有するメディアソースストリームを受信することと、
    前記コントローラが、前記メディアソースストリームを再スケーリングし、第２の分解能を有する第１の再スケーリングされたメディアソースストリームを生成することであって、前記第２の分解能は、同じ時間において共有ディスプレイ上に同時に表示されるメディアソースストリームの数および前記共有ディスプレイの分解能に基づく、ことと、
    前記コントローラが、前記第１の再スケーリングされたメディアソースストリームを前記共有ディスプレイを有するホストコンピュータ上に表示することと、
    前記コントローラが、前記宛先コンピュータに、前記共有ディスプレイ上の各メディアソースストリームの位置を示すソースマップを伝送することと、
    前記コントローラが、前記宛先コンピュータから、前記第１の再スケーリングされたメディアソースストリームの選択を示す命令と、前記宛先コンピュータのための再スケーリング情報とを受信することと、
    前記コントローラが、ユーザ名、前記第１の再スケーリングされたメディアソースストリームの選択の時間、および選択された前記メディアソースのしるしを含む第１の視聴イベントを捕捉し、前記第１の視聴イベントを第１のメタデータとして記憶することと、
    前記コントローラが、前記受信された再スケーリング情報に従って、前記メディアソースストリームを再スケーリングし、前記再スケーリング情報に基づく第３の分解能を有する第２の再スケーリングされたメディアソースストリームを生成することと、
    前記コントローラが、前記第２の再スケーリングされたメディアソースストリームを前記宛先コンピュータに伝送することと、
    前記コントローラが、前記伝送された第２の再スケーリングされたメディアソースストリームが前記宛先コンピュータにおいてもはや表示されていないとき、第２の視聴イベントを捕捉し、前記第２の視聴イベントを第２のメタデータとして記憶することと、
    前記コントローラが、前記第１および第２のメタデータを組み合わせることによって、前記第１および第２のメタデータを視聴統計に変換することと、
    前記伝送されたメディアソースストリームが所定期間の間視聴されたことを前記視聴統計が示す場合に前記複数の相互接続されているコンピュータのうちの１つのコンピュータのディスプレイ上にインジケータを表示するために、前記コントローラが、前記視聴統計を前記１つのコンピュータに送信することと
    を含む、方法。
  2. 前記コントローラが、前記相互接続されているコンピュータの各々から、前記相互接続されたコンピュータによって選択された各メディアソースストリームに対して、視聴開始時間、視聴終了時間、およびメディアＩＤを含むデータを収集することと、
    前記コントローラが、前記収集されたデータを、前記相互接続されているコンピュータによって選択されたメディアソースストリームを現在視聴しているユーザを示す視聴イベント情報に変換することと、
    前記コントローラが、前記視聴イベント情報を使用して、前記相互接続されているコンピュータによって選択されたいずれかのメディアソースストリームを視聴しているユーザのパーセンテージを示すことと
    をさらに含む、請求項１に記載の方法。
  3. 前記視聴統計は、前記相互接続されているコンピュータのうちの少なくとも１つと、共有ディスプレイとに送信される、請求項１に記載の方法。
  4. 前記視聴統計は、選択されたメディアソースストリームを現在視聴しているユーザの数を含む、請求項１に記載の方法。
  5. 前記視聴統計は、選択されたメディアソースストリームを現在視聴している全てのユーザのユーザ名を含む、請求項１に記載の方法。
  6. 前記視聴統計は、選択されたメディアソースストリームを視聴している前記相互接続されているコンピュータのパーセンテージを含む、請求項１に記載の方法。
  7. 前記視聴統計は、ユーザが選択されたメディアソースストリームを視聴した終了時間と開始時間との間の差を含む、請求項１に記載の方法。
  8. 前記視聴統計は、選択されたメディアソースストリームを所定の時間量より長く視聴したユーザの数を含む、請求項１に記載の方法。
  9. 前記相互接続されているコンピュータの各々から記憶された前記第１および第２のメタデータのデータは、対応するユーザのためのユーザ名、固有のＩＤを含む、請求項１に記載の方法。
JP2020122623A 2015-04-24 2020-07-17 分散メディアの相互作用かつリアルタイムの可視化のためのシステムおよび方法 Active JP7084450B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US14/695,796 2015-04-24
US14/695,796 US9705936B2 (en) 2015-04-24 2015-04-24 System and method for interactive and real-time visualization of distributed media

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2018150246A Division JP2018182761A (ja) 2015-04-24 2018-08-09 分散メディアの相互作用かつリアルタイムの可視化のためのシステムおよび方法

Publications (2)

Publication Number Publication Date
JP2020174401A JP2020174401A (ja) 2020-10-22
JP7084450B2 true JP7084450B2 (ja) 2022-06-14

Family

ID=57143619

Family Applications (3)

Application Number Title Priority Date Filing Date
JP2017555532A Active JP6405059B2 (ja) 2015-04-24 2016-04-23 分散メディアの相互作用かつリアルタイムの可視化のためのシステムおよび方法
JP2018150246A Withdrawn JP2018182761A (ja) 2015-04-24 2018-08-09 分散メディアの相互作用かつリアルタイムの可視化のためのシステムおよび方法
JP2020122623A Active JP7084450B2 (ja) 2015-04-24 2020-07-17 分散メディアの相互作用かつリアルタイムの可視化のためのシステムおよび方法

Family Applications Before (2)

Application Number Title Priority Date Filing Date
JP2017555532A Active JP6405059B2 (ja) 2015-04-24 2016-04-23 分散メディアの相互作用かつリアルタイムの可視化のためのシステムおよび方法
JP2018150246A Withdrawn JP2018182761A (ja) 2015-04-24 2018-08-09 分散メディアの相互作用かつリアルタイムの可視化のためのシステムおよび方法

Country Status (5)

Country Link
US (2) US9705936B2 (ja)
EP (1) EP3286672A4 (ja)
JP (3) JP6405059B2 (ja)
CN (2) CN107851107B (ja)
WO (1) WO2016172654A1 (ja)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9705936B2 (en) * 2015-04-24 2017-07-11 Mersive Technologies, Inc. System and method for interactive and real-time visualization of distributed media
WO2017169502A1 (ja) * 2016-03-31 2017-10-05 ソニー株式会社 情報処理装置、情報処理方法及びコンピュータプログラム
US11363087B2 (en) * 2018-05-24 2022-06-14 Disney Enterprises, Inc. Leveraging microservices to orchestrate media workflows in the cloud
CN108898416B (zh) * 2018-05-30 2022-02-25 百度在线网络技术（北京）有限公司 用于生成信息的方法和装置
CN111385607A (zh) * 2018-12-29 2020-07-07 浙江宇视科技有限公司 分辨率的确定方法、装置、存储介质、客户端及服务器
KR102668429B1 (ko) * 2019-11-15 2024-05-24 삼성전자주식회사 전자장치 및 그 제어방법
US11651749B2 (en) * 2020-11-02 2023-05-16 Panduit Corp. Display layout optimization of multiple media streams

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004072741A (ja) 2002-07-10 2004-03-04 Seiko Epson Corp バックチャンネルビデオインタフェースによりコンテンツ及び引き渡しの制御が可能な多数参加者会議システム
JP2004252970A (ja) 2003-01-30 2004-09-09 Daiwa Securities Group Inc 遠隔講演システム、方法及びプログラム、情報処理システム及び方法、遠隔聴講端末装置
JP2011130279A (ja) 2009-12-18 2011-06-30 Sony Corp コンテンツ提供サーバ、コンテンツ再生装置、コンテンツ提供方法、コンテンツ再生方法、プログラムおよびコンテンツ提供システム
JP2012039288A (ja) 2010-08-05 2012-02-23 Hitachi Ltd イーラーニング・テレビ会議システム及び方法、イーラーニングシステム

Family Cites Families (54)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5128776A (en) * 1989-06-16 1992-07-07 Harris Corporation Prioritized image transmission system and method
US5241625A (en) 1990-11-27 1993-08-31 Farallon Computing, Inc. Screen image sharing among heterogeneous computers
US5703965A (en) 1992-06-05 1997-12-30 The Regents Of The University Of California Image compression/decompression based on mathematical transform, reduction/expansion, and image sharpening
JPH09266571A (ja) * 1996-03-28 1997-10-07 Mitsubishi Electric Corp 画像伝送装置
JPH1023383A (ja) * 1996-07-03 1998-01-23 Matsushita Electric Ind Co Ltd テレビ会議システム
US7552460B2 (en) * 2000-05-08 2009-06-23 Microsoft Corporation Modifying an electronic program guide based on viewer statistics
JP2002269457A (ja) 2001-03-09 2002-09-20 Hitachi Ltd 情報サービスシステム、これに使用される情報提供端末、情報サービス方法および情報提供端末プログラム
JP3488442B2 (ja) * 2001-03-30 2004-01-19 株式会社ジャストシステム 視聴状況管理方法および装置
JP2003061072A (ja) * 2001-08-16 2003-02-28 Tokyo City Co Ltd 映像視聴認証システム
US20030066074A1 (en) * 2001-09-29 2003-04-03 Koninklijke Philips Electronics N.V. System and method for displaying group viewing statistics during television viewing
JP3836030B2 (ja) * 2002-01-30 2006-10-18 富士通株式会社 ストリーミング配信コンテンツの視聴状況指標算出方法及びシステム
JP2003324758A (ja) 2002-04-26 2003-11-14 Nippon Telegr & Teleph Corp <Ntt> ストリーミング視聴率集計システム、ストリーミングサーバ、および視聴率サーバ
US20040008249A1 (en) * 2002-07-10 2004-01-15 Steve Nelson Method and apparatus for controllable conference content via back-channel video interface
US7362349B2 (en) * 2002-07-10 2008-04-22 Seiko Epson Corporation Multi-participant conference system with controllable content delivery using a client monitor back-channel
US7034860B2 (en) * 2003-06-20 2006-04-25 Tandberg Telecom As Method and apparatus for video conferencing having dynamic picture layout
JP4335642B2 (ja) 2003-11-10 2009-09-30 日本電信電話株式会社 視聴者反応情報収集方法と、視聴者反応情報収集システムで用いられるユーザ端末及び視聴者反応情報提供装置と、そのユーザ端末・視聴者反応情報提供装置の実現に用いられる視聴者反応情報作成用プログラム
WO2005076993A2 (en) * 2004-02-09 2005-08-25 Regis Development, L.L.C. Computer presentation and command integration apparatus and method
JP2005295142A (ja) 2004-03-31 2005-10-20 Victor Co Of Japan Ltd 映像情報管理サーバ及び映像情報管理方法
US8787164B2 (en) 2004-07-09 2014-07-22 Qualcomm Incorporated Media delivery system and method for transporting media to desired target devices
JP4011573B2 (ja) 2004-09-10 2007-11-21 日本電信電話株式会社 会議構造把握支援方法、装置、プログラム、及び該プログラムを格納した記録媒体
US20060107294A1 (en) * 2004-11-16 2006-05-18 Rivlin Ze Ev Integrated video processing circuit and method for providing a displayed visual user interface for the display, selection and setup of video input sources
US7535484B2 (en) * 2005-03-14 2009-05-19 Sony Ericsson Mobile Communications Ab Communication terminals that vary a video stream based on how it is displayed
JP2007110399A (ja) * 2005-10-13 2007-04-26 Canon Inc 視聴状況共有システム
ES2386977T3 (es) 2005-11-29 2012-09-10 Google Inc. Aplicaciones sociales e interactivas para medios masivos
CN101523369B (zh) * 2006-08-21 2016-08-03 斯灵媒体公司 捕捉和共享媒体内容以及对共享媒体内容的管理
WO2008064356A1 (en) 2006-11-22 2008-05-29 Metis Enterprise Technologies Llc Real-time multicast peer-to-peer video streaming platform
JP5082722B2 (ja) * 2007-09-28 2012-11-28 ブラザー工業株式会社 画像表示装置及び画像表示システム
US20090184962A1 (en) * 2008-01-22 2009-07-23 Dell Product L.P. Systems and Methods for Managing Video Resolution in a Multiple-Output Information Handling System
US8473851B2 (en) * 2008-02-27 2013-06-25 Cisco Technology, Inc. Multi-party virtual desktop
EP2328349B1 (en) * 2008-08-29 2019-07-03 Sony Interactive Entertainment Inc. Information processing system and information processing device
US10631632B2 (en) * 2008-10-13 2020-04-28 Steelcase Inc. Egalitarian control apparatus and method for sharing information in a collaborative workspace
US20100169791A1 (en) * 2008-12-31 2010-07-01 Trevor Pering Remote display remote control
JP4683128B2 (ja) * 2009-01-06 2011-05-11 ソニー株式会社 プレゼンス情報共有装置、プレゼンス情報共有方法、プレゼンス情報共有プログラムおよびプレゼンス情報共有システム
JP2010166168A (ja) * 2009-01-13 2010-07-29 Koichi Sumida 映像配信サーバ、映像配信方法、および映像配信システム
JP2010211513A (ja) 2009-03-10 2010-09-24 Hideki Yoshioka 動画投稿システム
JP2010287030A (ja) 2009-06-11 2010-12-24 Nikon Corp コンテンツ配信システムおよびコンテンツ再生装置
KR20110032678A (ko) * 2009-09-23 2011-03-30 삼성전자주식회사 디스플레이장치, 시스템 및 그 해상도 제어방법
JP5415225B2 (ja) 2009-10-15 2014-02-12 ソニー株式会社 動画提供装置、動画提供方法およびプログラム
US20110157322A1 (en) 2009-12-31 2011-06-30 Broadcom Corporation Controlling a pixel array to support an adaptable light manipulator
JP2012124735A (ja) 2010-12-09 2012-06-28 Sharp Corp 視聴情報収集システムおよび視聴情報収集方法
WO2012100001A1 (en) * 2011-01-18 2012-07-26 T1 Visions, Llc Multimedia, multiuser system and associated methods
JP2012159987A (ja) * 2011-01-31 2012-08-23 Canon Inc 文書閲覧確認装置、文書閲覧確認方法及びプログラム
GB2483125B (en) * 2011-02-25 2012-09-26 British Sky Broadcasting Ltd Media system
US8682973B2 (en) * 2011-10-05 2014-03-25 Microsoft Corporation Multi-user and multi-device collaboration
JP5755168B2 (ja) 2012-03-09 2015-07-29 Kddi株式会社 レコメンド装置、レコメンド方法、およびプログラム
US9167009B2 (en) * 2012-05-08 2015-10-20 International Business Machines Corporation Presenting data to electronic meeting participants
KR101955202B1 (ko) * 2012-10-31 2019-03-07 삼성에스디에스 주식회사 다자간 영상 통화 장치 및 이를 이용한 다자간 영상 출력 방법
ES2794500T3 (es) * 2013-02-26 2020-11-18 Mersive Tech Inc Sistema y método para control multiusuario y difusión en continuo de medios a un visualizador compartido
JP6111753B2 (ja) * 2013-03-11 2017-04-12 株式会社リコー 情報処理装置、伝送システム、プログラム
US9215413B2 (en) * 2013-03-15 2015-12-15 Cisco Technology, Inc. Split frame multistream encode
JP6244719B2 (ja) * 2013-07-30 2017-12-13 カシオ計算機株式会社 文書管理装置、文書管理システム及びプログラム
US10044979B2 (en) * 2013-08-19 2018-08-07 Cisco Technology, Inc. Acquiring regions of remote shared content with high resolution
JP6331296B2 (ja) 2013-09-06 2018-05-30 株式会社リコー 情報処理端末、伝送システム、及びプログラム
US9705936B2 (en) * 2015-04-24 2017-07-11 Mersive Technologies, Inc. System and method for interactive and real-time visualization of distributed media

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004072741A (ja) 2002-07-10 2004-03-04 Seiko Epson Corp バックチャンネルビデオインタフェースによりコンテンツ及び引き渡しの制御が可能な多数参加者会議システム
JP2004252970A (ja) 2003-01-30 2004-09-09 Daiwa Securities Group Inc 遠隔講演システム、方法及びプログラム、情報処理システム及び方法、遠隔聴講端末装置
JP2011130279A (ja) 2009-12-18 2011-06-30 Sony Corp コンテンツ提供サーバ、コンテンツ再生装置、コンテンツ提供方法、コンテンツ再生方法、プログラムおよびコンテンツ提供システム
JP2012039288A (ja) 2010-08-05 2012-02-23 Hitachi Ltd イーラーニング・テレビ会議システム及び方法、イーラーニングシステム

Also Published As

Publication number Publication date
JP2018519700A (ja) 2018-07-19
CN109446355B (zh) 2022-05-27
CN107851107A (zh) 2018-03-27
JP2020174401A (ja) 2020-10-22
US20160316172A1 (en) 2016-10-27
US10404763B2 (en) 2019-09-03
EP3286672A4 (en) 2019-03-27
EP3286672A1 (en) 2018-02-28
JP6405059B2 (ja) 2018-10-17
CN107851107B (zh) 2019-04-05
JP2018182761A (ja) 2018-11-15
US20170310714A1 (en) 2017-10-26
US9705936B2 (en) 2017-07-11
WO2016172654A1 (en) 2016-10-27
CN109446355A (zh) 2019-03-08

Similar Documents

Publication Publication Date Title
JP7084450B2 (ja) 分散メディアの相互作用かつリアルタイムの可視化のためのシステムおよび方法
EP3657824A2 (en) System and method for multi-user control and media streaming to a shared display
US20150142884A1 (en) Image Sharing for Online Collaborations
US11216237B2 (en) Interactive display synchronisation
GB2452590A (en) Visual Presenter with Image Overlay
JP2014049865A (ja) 監視カメラシステム
JP2019022181A (ja) 会議システム、共有表示装置に対する表示方法および切換装置
JP5859771B2 (ja) 情報処理装置、情報処理システム情報処理方法及びプログラム
CN106210665B (zh) 一种基于视频采集的远程主机控制方法及系统
JP2006279893A (ja) 画像処理装置及び画像処理方法
US10235029B2 (en) Information processing apparatus, information processing method
US20230164200A2 (en) Method for remote consultation and related apparatus
JP5389747B2 (ja) コンテンツ変換システム、およびコンテンツ変換方法
WO2019188406A1 (ja) 字幕生成装置及び字幕生成プログラム
KR100932157B1 (ko) Ｉｐ 감시 기반의 대형 관제 시스템
Zhang et al. Uncompressed high-definition videoconferencing tools for telemedicine and distance learning
US20190102054A1 (en) Systems and methods for enabling participants in an audio or video conference session to express interest in shared content
EP3796661A1 (en) Media pipeline system for dynamic responsive visualization of video streams
LaRosa et al. Designing and deploying usetube, google's global user experience observation and recording system.
KR102392908B1 (ko) 자유시점 비디오 서비스를 제공하는 방법, 장치 및 시스템
JP2007060032A (ja) 情報処理装置、講義システム、テレビ会議システム
JP6369581B2 (ja) 情報処理装置、情報処理方法及びプログラム
Nobuyuki et al. Tiled display system for improved communication efficiency
JP2015023466A (ja) 配信システム、配信方法、及びプログラム
JP2005079868A (ja) 画像配信装置、画像生成装置、画像保存装置、画像配信プログラム、画像生成プログラム、画像保存プログラムおよび画像取得プログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200717

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210706

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210810

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20211109

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211213

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220506

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220602

R150 Certificate of patent or registration of utility model

Ref document number: 7084450

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150