JP6535681B2 - ビデオ会議中におけるプレゼンターの表示 - Google Patents

ビデオ会議中におけるプレゼンターの表示 Download PDF

Info

Publication number
JP6535681B2
JP6535681B2 JP2016554344A JP2016554344A JP6535681B2 JP 6535681 B2 JP6535681 B2 JP 6535681B2 JP 2016554344 A JP2016554344 A JP 2016554344A JP 2016554344 A JP2016554344 A JP 2016554344A JP 6535681 B2 JP6535681 B2 JP 6535681B2
Authority
JP
Japan
Prior art keywords
endpoint
user
rank value
view rank
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016554344A
Other languages
English (en)
Other versions
JP2017512427A (ja
JP2017512427A5 (ja
Inventor
ポール デイビッド ジョンソン、クリストファー
ポール デイビッド ジョンソン、クリストファー
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google LLC
Original Assignee
Google LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Google LLC filed Critical Google LLC
Publication of JP2017512427A publication Critical patent/JP2017512427A/ja
Publication of JP2017512427A5 publication Critical patent/JP2017512427A5/ja
Application granted granted Critical
Publication of JP6535681B2 publication Critical patent/JP6535681B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/10Office automation; Time management
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066Session management
    • H04L65/1076Screening of IP real time communications, e.g. spam over Internet telephony [SPIT]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40Support for services or applications
    • H04L65/403Arrangements for multi-party communication, e.g. for conferences
    • H04L65/4046Arrangements for multi-party communication, e.g. for conferences with distributed floor control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42203Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508Management of client data or end-user data
    • H04N21/4532Management of client data or end-user data involving end-user characteristics, e.g. viewer profile, preferences
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems
    • H04N7/152Multipoint control units therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/02Details
    • H04L12/16Arrangements for providing special services to substations
    • H04L12/18Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1822Conducting the conference, e.g. admission, detection, selection or grouping of participants, correlating users to one or more conference sessions, prioritising transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M3/00Automatic or semi-automatic exchanges
    • H04M3/42Systems providing special services or facilities to subscribers
    • H04M3/56Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities
    • H04M3/567Multimedia conference systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Business, Economics & Management (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Human Resources & Organizations (AREA)
  • Strategic Management (AREA)
  • Data Mining & Analysis (AREA)
  • Marketing (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Tourism & Hospitality (AREA)
  • Economics (AREA)
  • Human Computer Interaction (AREA)
  • Telephonic Communication Services (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

本発明は、ビデオ会議中におけるプレゼンターの表示に関する。
ビデオ会議は、仕事の場でしばしば使用され、これにより参加者は、地理的に分散した位置の間で互いとビデオおよびオーディオ・コンテンツをリアルタイムに共有することが可能になる。各位置における通信デバイスでは、ビデオおよびオーディオ・ストリームを送るために典型的にはビデオカメラとマイクロホンとが使用され、受信されたビデオおよびオーディオ・ストリームを再生するためにビデオ・モニタとスピーカとが使用され、ビデオおよびオーディオ・ストリームはある位置から別の位置にネットワークを介してリアルタイムにおいて送信される。ビデオ会議は、参加者がビデオ会議中に互いに見たり聞いたりすることを可能にすることにより、リアルタイムの対面のミーティングをシミュレートする。
実施形態は、一般にビデオ会議中にプレゼンターを表示することに関する。
いくつかの実施形態では、方法は、少なくとも第1ユーザと第2ユーザとの間のビデオ会議のユーザ・インタフェースを提供する工程であって、前記第1ユーザは第1エンドポイントに関連付けられ、前記第2ユーザは第2エンドポイントに関連付けられている、工程を備える。前記方法は、前記第1エンドポイントおよび前記第2エンドポイントの各々に対するビューランク値を決定する工程をさらに備える。前記方法は、前記ビューランク値に基づいて、前記ユーザ・インタフェースに、現在のプレゼンター・ポジションに第1ユーザのビデオストリームを表示させ、次位のプレゼンター・ポジションに第2ユーザのビデオストリームを表示させる工程をさらに備える。
前記方法に関してさらに、いくつかの実施形態では、前記方法は、前記ビデオ会議の各エンドポイントに関連付けられているエンドポイント・データを集める工程をさらに備える。いくつかの実施形態では、前記方法は、前記ビデオ会議における前記エンドポイントを、それらのビューランク値に基づいてランク付けする工程をさらに備える。いくつかの実施形態では、各ビューランク値は、対応する前記エンドポイントに関連付けられている前記ユーザが発言している可能性を示している。いくつかの実施形態では、各ビューランク値は発言の持続時間に少なくとも部分的に基づく。いくつかの実施形態では、各ビューランク値は検知されるオーディオの種類に少なくとも部分的に基づく。いくつかの実施形態では、各ビューランク値は、対応する前記エンドポイントに関連付けられている部屋にいる人の数に少なくとも部分的に基づく。いくつかの実施形態では、各ビューランク値は、エンドポイントの種類に少なくとも部分的に基づく。いくつかの実施形態では、各ビューランク値は、過去のビデオ会議の履歴に少なくとも部分的に基づく。いくつかの実施形態では、各ビューランク値は、少なくとも1つの所定のビデオ機能が発揮されているか否かに少なくとも部分的に基づく。
いくつかの実施形態では、方法は、少なくとも第1ユーザと第2ユーザとの間のビデオ会議のユーザ・インタフェースを提供する工程であって、前記第1ユーザは第1エンドポイントに関連付けられ、前記第2ユーザは第2エンドポイントに関連付けられている、工程を備える。前記方法は、前記第1エンドポイントおよび前記第2エンドポイントの各々に対するビューランク値を決定する工程であって、各ビューランク値は、対応する前記エンドポイントに関連付けられている前記ユーザが発言している可能性を示しており、各ビューランク値は、発言の持続時間、検知されるオーディオの種類、対応する前記エンドポイントに関連付けられている部屋にいる人の数、エンドポイントの種類、過去のビデオ会議の履歴、および、少なくとも1つの所定のビデオ機能が発揮されているか否か、のうちの少なくとも1つ以上に基づく、工程をさらに備える。前記方法は、前記ビューランク値に基づいて、前記ユーザ・インタフェースに、現在のプレゼンター・ポジションに第1ユーザのビデオストリームを表示させ、次位のプレゼンター・ポジションに第2ユーザのビデオストリームを表示させる工程をさらに備える。
いくつかの実施形態では、システムは、1つ以上のプロセッサと、前記1つ以上のプロセッサによる実行のために1つ以上の有形な媒体に符号化されている論理と、を備える。実行時に、該論理は、少なくとも第1ユーザと第2ユーザとの間のビデオ会議のユーザ・インタフェースを提供する工程であって、前記第1ユーザは第1エンドポイントに関連付けられ、前記第2ユーザは第2エンドポイントに関連付けられている、工程と、前記第1エンドポイントおよび前記第2エンドポイントの各々に対するビューランク値を決定する工程と、前記ビューランク値に基づいて、前記ユーザ・インタフェースに、現在のプレゼンター・ポジションに第1ユーザのビデオストリームを表示させ、次位のプレゼンター・ポジションに第2ユーザのビデオストリームを表示させる工程と、を含む動作を実行するように構成されている。
前記システムに関してさらに、いくつかの実施形態では、前記論理は、実行時に、前記ビデオ会議の各エンドポイントに関連付けられているエンドポイント・データを集める工程を含む動作を実行するようにさらに構成されている。いくつかの実施形態では、前記論理は、実行時に、前記ビデオ会議における前記エンドポイントを、それらのビューランク値に基づいてランク付けする工程を含む動作を実行するようにさらに構成されている。いくつかの実施形態では、各ビューランク値は、対応する前記エンドポイントに関連付けられている前記ユーザが発言している可能性を示している。いくつかの実施形態では、各ビューランク値は発言の持続時間に少なくとも部分的に基づく。いくつかの実施形態では、各ビューランク値は検知されるオーディオの種類に少なくとも部分的に基づく。いくつかの実施形態では、各ビューランク値は、対応する前記エンドポイントに関連付けられている部屋にいる人の数に少なくとも部分的に基づく。いくつかの実施形態では、各ビューランク値は、エンドポイントの種類に少なくとも部分的に基づく。いくつかの実施形態では、各ビューランク値は、過去のビデオ会議の履歴に少なくとも部分的に基づく。
例示的なネットワーク環境のブロック図を示す図であり、そのネットワーク環境は、本明細書において説明する実施形態を実施するために使用されてよい。 いくつかの実施形態による、ビデオ会議中にプレゼンターを表示するための例示的な単純化されたフロー図。 いくつかの実施形態による、例示的な単純化されたユーザ・インタフェースを示す図。 いくつかの実施形態による、現在のプレゼンターが異なる場合の図3の例示的なユーザ・インタフェース示す図。 いくつかの実施形態による、現在のプレゼンター・ポジションに表示するべく現在のユーザを決定するための例示的な単純化されたフロー図。 例示的なサーバ・デバイスのブロック図であり、そのサーバ・デバイスは、本明細書において説明する実施形態を実施するために使用されてよい。
本明細書において説明する実施形態は、ビデオ会議においてプレゼンターの表示を最適化することにより、ソーシャル・ネットワークにおけるユーザ・エンゲージメントを改善する。様々な実施形態では、システムは、複数のユーザ間のビデオ会議のユーザ・インタフェースを提供する。ここで、ユーザの各々は、エンドポイントに関連付けられている。エンドポイントは、ビデオ会議に接続するために参加者によって使用されるクライアント・デバイスである。エンドポイントは、ビデオ会議エンドポイントとも呼ばれる。システムは、エンドポイントの各々に対するビューランク値を決定する。より詳細に以下に説明するように、所与のエンドポイントに対するビューランク値の各々は、エンドポイントに関連付けられているユーザがミーティング中において発言している可能性を示す。さらに、ビューランク値は、いずれのビデオストリームをメインビデオウィンドウに表示するか選択する目的のためにエンドポイントをランク付けするよう、システムによって使用される。様々な実施形態では、メインビデオウィンドウは、ユーザ・インタフェースの現在のプレゼンター・ポジションに位置する。
システムは、ビューランク値に基づいて、ユーザ・インタフェースに、現在のプレゼンター・ポジションにおけるメインビデオウィンドウに特定のビデオストリームを表示させ、次位のプレゼンター・ポジションに位置する他のウィンドウに他のビデオストリームを表示させる。様々な実施形態では、ビューランク値は、エンドポイントに関連付けられているいくつかのアスペクトに基づく。例えば、ビューランク値は、音声ボリューム、発言の持続時間、エンドポイントの種類、音の種類などの任意の組み合わせに基づいてよい。
図1は、例示的なネットワーク環境100のブロック図を示し、そのネットワーク環境100は本明細書において説明する実施形態を実施するために使用されてもよい。いくつかの実施形態では、ネットワーク環境100はシステム102を含み、そのシステム102は、サーバ・デバイス104およびソーシャル・ネットワーク・データベース106を含んでいる。ネットワーク環境100はさらにクライアント・デバイス110、120、130および140を含み、これらはシステム102およびネットワーク150によって互いと通信してもよい。
説明を容易にするため、図1は、各々のシステム102、サーバ・デバイス104およびソーシャル・ネットワーク・データベース106についての1つのブロックを示し、クライアント・デバイス110、120、130および140についての4つのブロックを示す。ブロック102、104および106は複数のシステム、サーバ・デバイスおよびソーシャル・ネットワーク・データベースを表わしていてもよい。さらに、任意の数のクライアント・デバイスがあってもよい。他の実施形態では、ネットワーク環境100は、示した構成要素の全てを有していなくてもよく、および/または、本明細書において示したものの代わりに、または、これに加えて他の種類の要素を含む他の要素を有していてもよい。
様々な実施形態では、ユーザU1、U2、U3およびU4は、それぞれのクライアント・デバイス110、120、130および140を使用して、互いと通信してもよい。例えば、ユーザU1、U2、U3およびU4は、複数ユーザのビデオ会議で互いと対話してもよい。ここで、それぞれのクライアント・デバイス110、120、130および140は、互いにメディア・ストリームを送信する。
様々な実施形態では、メディア・ストリームは異なる種類のメディア・ストリーム(例えば、1つ以上のビデオストリームおよび/または、1つ以上のオーディオ・ストリーム)を含んでいてもよい。例えば、そのようなメディア・ストリームは、ユーザU1、U2、U3およびU4を表示するビデオストリームを含んでいてもよく、関連付けられているオーディオ・ストリームを含んでいてもよい。さらに、メディア・ストリームは、各クライアント・デバイス110、120、130および140に関して異なる方向(例えば、1つ以上のアウトバウンド・ストリームおよび/または、1つ以上のインバウンド・ストリーム)に送信されているメディア・ストリームを含んでいてもよい。図2、図3Aおよび図3Bに関して、より詳細に以下に説明するように、システム102は、ユーザU1、U2、U3およびU4のエクスペリエンスを向上するように、複数ユーザのビデオ会議においてユーザU1、U2、U3およびU4に対してメディア・ストリームを提示することが可能である。
図2は、いくつかの実施形態による、ビデオ会議中にプレゼンターを表示するための例示的な単純化されたフロー図を示す。図1および図2の両方を参照して、方法はブロック202から開始する。ここでシステム102は、複数のユーザ(例えば少なくとも、第1ユーザU1、第2ユーザU2など)間のビデオ会議のユーザ・インタフェースを提供する。様々な実施形態では、第1ユーザは第1エンドポイントに関連付けられ、第2ユーザは第2エンドポイントに関連付けられている。
説明を容易にするため、例示的な実施形態は、第1ユーザおよび第2ユーザ(例えばユーザU1、U2)の文脈で本明細書において説明される。なお、これらの実施形態は、ユーザU1、U2に加えて、ユーザU3、U4などのユーザに対しても適用される。
いくつかの実施形態では、ユーザ・インタフェースは、現在のプレゼンター・ポジションに第1ユーザのビデオストリームを表示し、次位のプレゼンター・ポジションに第2ユーザのビデオストリームを表示する。
図3は、いくつかの実施形態による、例示的な単純化されたユーザ・インタフェース300を示す。より詳細に以下に説明するように、図3は、現在のプレゼンター・ポジション312に表示される第1ユーザ(例えばユーザU1)に関連付けられているビデオストリームを示すとともに、次位のプレゼンター・ポジション314に表示される第2ユーザ(例えばユーザU2)に関連付けられているビデオストリームを示す。
いくつかの実施形態では、ユーザ・インタフェース300は、ビデオウィンドウ302、304、306および308を含み、これらは、複数ユーザのビデオ会議に参加しているそれぞれのユーザU1、U2、U3およびU4のビデオストリームを表示する。説明を容易にするため、4人のユーザU1、U2、U3およびU4が示される。様々な実施形態では、複数ユーザのビデオ会議に参加するユーザの数は任意である(例えば10人までのユーザまたは、11人以上のユーザ)。様々な実施形態では、システム102は、ユーザU1、U2、U3およびU4が、ビデオと、音声と、オーディオと、タイピングのチャットとの任意の組み合わせにより通信することを可能にする。
いくつかの実施形態では、ユーザ・インタフェース300は、メインビデオウィンドウ310を含み、それは「現在のプレゼンター・ポジション」312に対応する。説明を容易にするため、メインビデオウィンドウ310(実線の四角)は、現在のプレゼンター・ポジション312(点線の四角)から離れて現在のプレゼンター・ポジション312内に示されている。様々な実施形態では、メインビデオウィンドウ310および現在のプレゼンター・ポジション312は完全に重なっていてもよい。いくつかの実施形態では、現在のプレゼンター・ポジション312は、当該ポジションにおいて示されているユーザが「現在のプレゼンター」であることを示す、ユーザ・インタフェース300における目立つポジションである。様々な実施形態では、現在のプレゼンターは、音声によって他のユーザに通信しているユーザである。この特定の例では、メインビデオウィンドウ310は、ユーザU1のビデオストリームを表示しており、ユーザU1は現在のプレゼンターである。
いくつかの実施形態では、ビデオウィンドウ302、304、306および308は「次位のプレゼンター・ポジション」314に対応し、現在のプレゼンターでないユーザを含む全てのユーザを示す。次位のプレゼンター・ポジション314における一連のビデオウィンドウは、全てのユーザU1、U2、U3、U4などのサムネイルを示すという点で、フィルム・ストリップとも呼ばれる。示すように、いくつかの実施形態では、メインビデオウィンドウ310における現在のプレゼンター(例えばユーザU1)も、次位のプレゼンター・ポジション314におけるビデオウィンドウのうちの1つ(例えばビデオウィンドウ302)に示される。説明を容易にするため、ビデオウィンドウ302、304、306および308(実線の四角)は、次位のプレゼンター・ポジション314(点線の四角)内に互いに離れて示されている。様々な実施形態では、ビデオウィンドウ302、304、306および308の各々と、対応する次位のプレゼンター・ポジション314とは、完全に重なる。いくつかの実施形態では、次位のプレゼンター・ポジション314は、ユーザ・インタフェース300における、比較的目立たないポジションにある。第2のプレゼンター・ポジション314は、現在のプレゼンターおよび他のユーザを含む、複数ユーザのビデオ会議に参加している全てのユーザを示す。様々な実施形態では、現在のプレゼンターでない他のユーザは、現在のプレゼンターを見ているか、聞いているユーザである。この特定の例では、ビデオウィンドウ302、304、306および308は、全てのユーザU1、U2、U3およびU4のビデオストリームを表示している。
いくつかの実施形態では、現在のプレゼンター・ポジション312およびメインビデオウィンドウ310は、ユーザ・インタフェース300における目立つポジションにある。さらに、メインビデオウィンドウ310は、次位のプレゼント・ポジションにおける対応するビデオウィンドウ(例えばビデオウィンドウ302)の、より大きなバージョンである。いくつかの実施形態では、メインビデオウィンドウ310は、他のビデオウィンドウ302、304、306および308よりも大きい。メインビデオウィンドウ310がプレゼント・ポジション312にあり、他のビデオより大きいという組み合わせによって、メインビデオウィンドウ310に示されているユーザが現在のプレゼンターであることが視覚的に示される。
いくつかの実施形態では、ユーザ・インタフェース300は、さらにコントロール・ウィンドウ320を含み、それはコントロール・ボタン330(点線で囲まれている)を含んでいる。説明を容易にするため、8つのコントロール・ボタンが示されている。コントロール・ボタンの数は具体的な実施形態によって変わってもよい。さらに、コントロール・ボタン330の機能は、具体的な実施形態によって変わる。いくつかの実施形態では、コントロール・ボタン330のうちの1つは、特定のユーザを現在のプレゼンターにするために機能してもよい。したがって、コントロール・ボタン330のうちの1つの選択によって、コントロール・ボタンを選択したユーザのビデオストリームに現在のプレゼンター・ポジションを取得させてもよい。
図4は、いくつかの実施形態による、現在のプレゼンターが異なる場合の図3の例示的なユーザ・インタフェース300を示す。いくつかの実施形態では、ユーザ・インタフェース300は図3の要素と同じ要素を含んでいる。図3と図4の主な違いは、第2ユーザ(例えばユーザU2)に関連付けられているビデオストリームが現在のプレゼンター・ポジション312に表示されていることと、第1ユーザ(例えばユーザU1)に関連付けられているビデオストリームが次位のプレゼンター・ポジション314に表示され、もはや現在のプレゼンター・ポジション312に表示されていないことと、を図4が示しているということである。
図4が示すように、システム102がユーザU2の音声を検知した後、ビューランク値に少なくとも部分的に基づいて、ユーザU2は現在のプレゼンターになる。次いで、システム102は、ユーザ・インタフェース300に、ユーザU2に関連付けられているビデオストリームを現在のプレゼンター・ポジション310に表示させ、ユーザU1に関連付けられているビデオストリームを次位のプレゼンター・ポジション314に表示させる(もはや現在のプレゼンター・ポジション310に表示させない)。説明を容易にするため、これらの例示的な実施形態のうちのいくつかは、ユーザU2が現在のプレゼンターになる文脈により説明される。様々な実施形態では、ユーザU3またはユーザU4などの他のユーザも、現在のプレゼンターになってもよい。
この例では、ユーザU2がトークを始める。様々な実施形態では、システム102は、ビデオストリームにおけるオーディオ要素を認識する検知アルゴリズムを使用する。例えば、検知アルゴリズムは、ユーザU2が現在のプレゼンターであることを意図しているという指示としてユーザU2の音声を検知してもよい。
より詳細に以下に説明するように、さらに、システム102は、エンドポイントの各々のビューランク値を決定することと、ビューランク値をランク付けすることと、現在のプレゼンター・ポジション312において新たなユーザのビデオストリームを表示したり、そのビデオストリームをポジショニングすることを延期したりすることと、を行う。
いくつかの実施形態では、システム102がユーザU1あるいは他の任意のユーザ(例えばユーザU3あるいはユーザU4)からの少なくとも1つの後続する音声を検知するまで、ユーザ・インタフェース300は、ユーザU2に関連付けられているビデオストリームを現在のプレゼンター・ポジション312に表示する。いくつかの実施形態では、さらに、システム102は、異なるユーザが発言するごとに、メインビデオウィンドウ310に表示されるビデオストリームを切り替えてもよい。図2のブロック204および206に関してより詳細に以下に説明するように、システム102は、相対的なビューランク値に基づいて、現在のプレゼンター・ポジション312における発言者をいつ切り替えるか、どの程度の速さで切り替えるか調節する。
説明を容易にするため、ユーザ・インタフェース300は、1つのより大きな現在のプレゼンター・ポジション312と、より小さな次位のプレゼンター・ポジション314と、を示している。ここで、次位のプレゼンター・ポジション314における比較的小さなウィンドウ同士は、同じサイズである。他の構成も可能である。例えば、いくつかの実施形態では、ユーザが現在のプレゼンターでない比較的高いビューランク値を有するエンドポイントについて、このユーザは、現在のプレゼンター・ポジション312のウィンドウよりも小さいウィンドウにおいて観察されてもよいが、次位のプレゼンター・ポジションにおける他のウィンドウよりも大きくてもよい。
図2をなおも参照して、ブロック204では、システム102は、各エンドポイント(例えば第1エンドポイント、第2エンドポイントなど)に対するビューランク値を決定する。様々な実施形態では、所与のエンドポイントに対するビューランク値の各々は、それぞれのエンドポイントに関連付けられているユーザがビデオ会議中に発言している可能性を示す。
いくつかの実施形態では、ビューランク値は、ボリュームおよび持続時間など1つ以上の音声アスペクトに部分的に基づいてよい。例えば、システム102は、現在のプレゼンターでないユーザの音声のボリュームの増加を検知してもよい。特定のエンドポイントにおけるボリュームが予め定められた閾値を超えて増加し、予め定められた持続時間よりも長く予め定められた閾値を超えたままである場合、システム102は、所与のエンドポイントに対するビューランク値を、所定の持続時間にわたる平均ボリュームに基づいて変えてもよい(例えば直近の3秒、5秒、10秒などにわたる平均ボリューム)。例えば、いくつかの実施形態では、システム102は、所定の持続時間にわたる平均ボリュームに基づいてビューランク値を増加させてもよい。いくつかの実施形態では、平均ボリュームはオーディオ音に休止を組み入れる。様々なシナリオでは、例えば、現在のプレゼンターが考えるために休止することに起因して、オーディオ音に様々な休止が存在すると予想される。
いくつかの実施形態では、ビューランク値は、発言の持続時間、あるいはエンドポイントに関連付けられているユーザのミーティング中のトーク時間の量に部分的に基づいてもよい。いくつかの実施形態では、システム102は、所与のエンドポイントにおけるビューランク値を、そのエンドポイントにおける発言の所定の持続時間に基づいて変えてもよい(例えば直近の3秒、5秒、10秒などにわたる平均ボリューム)。例えば、いくつかの実施形態では、システム102は、所与のユーザが発言の所定の持続時間にわたり発言している時間の量に基づいて、ビューランク値を増加させてもよい。
様々な実施形態では、本明細書において説明するいくつかのアスペクトは、所与のミーティングの持続時間においてビューランク値に影響を及ぼしてもよい。いくつかの実施形態で、2、3人のユーザがトークしているのがほとんどであれば、それらのユーザは、おそらく、現況において最も重要なユーザであろう。したがって、システム102は、ミーティングの持続時間において、これらの人に対するビューランク値を増加させてもよい。より詳細に以下に説明するように、いくつかのアスペクトは将来のミーティングのためのビューランク値に影響を及ぼしてもよい。
いくつかの実施形態では、ビューランク値は、システム102によって検知されるオーディオの種類に部分的に基づいてもよい。例えば、システム102は、人間の音声であるオーディオに対し、より大きなビューランク値を与えてもよい。システム102は、「ノイズ」であるオーディオに対し、より小さなビューランク値を与えてもよい。例えば、紙のシャッフルなどの単純な小さなノイズが、一見ではランダムな人が現在のプレゼンター画面に現れることを生じさせ得る(他方、その人が自身が見られていることを知ることなく)。
いくつかの実施形態では、ビューランク値は、それぞれのエンドポイントに関連付けられている部屋にいる人の数に部分的に基づいてもよい。いくつかの実施形態では、システム102は、ビデオストリームにおける顔を検知するために顔検知アルゴリズムを適用してもよい。次いで、システム102は、検知された顔からの人の数を決定してもよい。いくつかの実施形態では、システム102は、所与のエンドポイントにおいて、会議室中の人の所定の数の閾値に基づいてビューランク値を変えてもよい(例えば2人以上のユーザ、3人以上のユーザ、4人以上のユーザなど)。例えば、いくつかの実施形態では、システム102は、所与のエンドポイントにおけるビューランク値を、所定の数の閾値を満たすエンドポイントに関連付けられている会議室中の人の数に基づいて減少させてもよい。システム102は、比較的多くの人がいると、バックグラウンドノイズ、主要でない会話などが存在する可能性が高くなり得るので、比較的多くの人がいる場合にはビューランク値を減少させてもよい。
いくつかの実施形態では、ビューランク値はエンドポイントの種類に部分的に基づいてもよい。例えば、システム102は、エンドポイントの種類が会議室であるか1人のユーザのエンドポイントであるかを判断してもよい。いくつかの実施形態では、システム102は、エンドポイントが1人のユーザのエンドポイントであることに基づいて、ビューランク値を増加させてもよい。いくつかの実施形態では、システム102は、エンドポイントが会議室/複数ユーザのエンドポイントであることに基づいて、ビューランク値を減少させてもよい。
いくつかの実施形態では、ビューランク値は、過去のビデオ会議の履歴に部分的に基づいてもよい。例えば、システム102は、データを集めて、過去のミーティングからのトーキング統計を計算してもよい。いくつかの実施形態では、システム102は、エンドポイントが履歴においてよく発言するユーザに関連付けられている場合、そのビューランク値を増加させてもよい。いくつかの実施形態では、システム102は、所与のユーザの以前のミーティングへの参加を判断するためにカレンダー・システムを探索してもよい。次いで、システム102は、そのユーザに関連付けられているエンドポイントを判断し、過去のミーティングのビューランク値を取り出してもよい。様々な実施形態では、システム102は、所与のエンドポイントの以前のビューランク値を、現在および/または将来のミーティングにおけるそのエンドポイントのビューランク値へ影響を及ぼすか関わるように使用してもよい。
いくつかの実施形態では、ビューランク値は、特定のビデオ機能が発揮されているか否かに部分的に基づいてもよい。例えば、いくつかの実施形態では、ビューランク値は、ビデオのミュートフィーチャが発揮されているか否かに部分的に基づいてもよい。いくつかの実施形態では、ビューランク値は、エンドポイントがミーティングで誰か他の人によってミュートにされているか否かに基づいてもよい。例えば、システム102は、所与のエンドポイントのビューランク値を、ユーザがその所与のエンドポイントに対してミュートフィーチャを発揮することに基づいて減少させてもよい。いくつかの実施形態では、システム102は、別のユーザが別のエンドポイントに対してミュートフィーチャを発揮することに基づいてビューランク値を減少させてもよい。ここで、当該他のエンドポイントでビューランク値が減少させられる。
いくつかの実施形態では、ビューランク値は、画面共有フィーチャが発揮されているか否かに部分的に基づいてもよい。画面共有フィーチャは、他のユーザが共有画面を観察するように、ビデオストリームにおいてユーザが自身の画面を表示するフィーチャである。いくつかの実施形態では、さらに、ビューランク値は、画面共有フィーチャが発揮されていることとの組み合わせに基づいてもよく、「トーキング」のセグメントと組み合わされてもよい。いくつかの実施形態では、システム102は、トーキング・セグメントが所定の長さ基準を満たす場合(例えば、30秒、1分、2分などよりも長い)、所与のトーキング・セグメントがビューランク値に影響を及ぼすことを可能にしてよい。いくつかの実施形態では、システム102は、所与のエンドポイントに対するビューランク値を、そのエンドポイントに対し発揮されている共有フィーチャに基づいて増加させてもよい。いくつかの実施形態では、システム102は、所与のエンドポイントに対するビューランク値を、そのエンドポイントに対して発揮されている共有フィーチャに基づいて、また、所定の持続時間閾値を満たすトーキングのセグメントに基づいて、さらに高い程度に増加させてもよい。
様々な実施形態では、システム102は、各エンドポイントの様々なアスペクトに関連付けられている様々なビューランクサブ値を決定する(例えば音声アスペクト、エンドポイントアスペクト、履歴アスペクトなど)。次いで、システム102は、ビューランクサブ値、また、本明細書において説明されているアスペクトの任意の組み合わせを各エンドポイントに対する最終ビューランク値へと集約する。
ブロック206では、システム102は、ビューランク値に基づいて、ユーザ・インタフェースに、現在のプレゼンター・ポジションに第1ユーザのビデオストリームを表示させ、次位のプレゼンター・ポジションに第2ユーザのビデオストリームを表示させる。
本明細書において説明されている実施形態は、現在のプレゼンター・ウィンドウにおけるプレゼンターのランダムで不快な切り替えを最小化することによりビデオ会議のユーザエクスペリエンスを向上する。
工程、動作あるいは計算は、具体的な順序により提示されている場合があるが、順序は特定の実施形態において変えてもよい。特定の実施形態によっては、工程の他の順序が可能である。いくつかの実施形態では、本明細書において連続するものとして示されている複数の工程は同時に実行されてもよい。
図5は、いくつかの実施形態による、現在のプレゼンター・ポジションに表示するべく現在のユーザを決定するための例示的な単純化されたフロー図を示す。様々な実施形態では、方法はブロック502から開始される。ここで、システム102は、少なくとも第1ユーザと第2ユーザとの間のビデオ会議のユーザ・インタフェースを提供する。いくつかの実施形態では、ユーザ・インタフェースは、現在のプレゼンター・ポジションに第1ユーザのビデオストリームを表示し、次位のプレゼンター・ポジションに第2ユーザのビデオストリームを表示する。
ブロック504では、システム102は、ビデオ会議のエンドポイントの各々に関連付けられているエンドポイント・データを集める。エンドポイント・データは、図2のブロック204に関して上述した、ビューランク値および関連するアスペクトに関連付けられている任意のデータであってよい。
ブロック506では、システム102は、各エンドポイントに対するビューランク値を決定する。ここで、ビューランク値は、エンドポイント・データに基づく。上記の図2のブロック204に関して上述した実施形態は、さらに、図3のブロック506についても当てはまる。
ブロック508では、システム102は、ビデオ会議におけるエンドポイントを、それらのビューランク値に基づいてランク付けする。様々な実施形態では、システム102は、ハングアウトの全ての参加者にランク付けアルゴリズムを適用する。いくつかの実施形態では、所与のエンドポイントに関連付けられている比較的大きなビューランク値は、現在のプレゼンター・ポジションのメイン画面上において、当該所与のエンドポイントに関連付けられているユーザを見ることの他の参加者の比較的高い望みに対応するか、大まかに変換される。反対に、所与のエンドポイントに関連付けられている比較的小さなビューランク値は、メイン画面上において、当該所与のエンドポイントに関連付けられているユーザを見ることの他の参加者の比較的低い望みに対応するか、大まかに変換される。
様々な実施形態では、システム102は、ランク付けに基づいて各エンドポイントに表示バイアスを適用する。例えば、いくつかの実施形態では、所与のエンドポイントが比較的大きいビューランク値を有する場合、システム102は、他のエンドポイントに関連付けられている他のユーザの表示に対立するものとして、現在のプレゼンター・ポジションのメイン画面上において、当該エンドポイントに関連付けられているユーザを表示するために当該エンドポイントに表示バイアスを適用する。そのような表示バイアスは、比較的小さなランク付けビューランク値を有する他のエンドポイントに適用された表示バイアスよりも高くなる。これは、エンドポイントのランク付けビューランク値が大きいと、そのエンドポイントに関連付けられているユーザがメイン画面上に必要である可能性が高くなるためである。
様々な実施形態では、システム102は、ランク付けに基づいて各エンドポイントに延期バイアスを適用する。例えば、いくつかの実施形態では、所与のエンドポイントが比較的低いランク付けビューランク値を有する場合、システム102は、そのエンドポイントに関連付けられているユーザをメイン画面上に表示することを延期するために、そのエンドポイントに延期バイアスを適用する。そのような延期バイアスは、比較的高いランク付けビューランク値を有する他のエンドポイントに適用される延期バイアスよりも高くなる。これは、エンドポイントのランク付けビューランク値が小さいと、そのエンドポイントに関連付けられているユーザがメイン画面上に必要である可能性が低くなるためである。
工程、動作あるいは計算は、具体的な順序により提示されている場合があるが、順序は特定の実施形態において変えてもよい。特定の実施形態によっては、工程の他の順序が可能である。いくつかの実施形態では、本明細書において連続するものとして示されている複数の工程は同時に実行されてもよい。
本明細書において説明されている実施形態は様々な利点を提供する。例えば、本明細書において説明されている実施形態は、さらに、広範囲のユーザが複数ユーザのビデオ会議に参加することを可能にすることにより、ソーシャル・ネットワーキング環境におけるユーザ間の全体的なエンゲージメントを高める。
図6は、例示的なサーバ・デバイス500のブロック図であり、そのサーバ・デバイスは、本明細書において説明する実施形態を実施するために使用されてもよい。例えば、サーバ・デバイス600は、本明細書において説明されている方法の実施形態を実行するとともに、図1のサーバ・デバイス104を実施するために使用されてもよい。いくつかの実施形態では、サーバ・デバイス600は、プロセッサ602、オペレーティング・システム604、メモリ606および入力/出力(I/O)インタフェース608を含んでいる。サーバ・デバイス600は、さらに、ソーシャル・ネットワーク・エンジン610およびメディア・アプリケーション612を含んでいる。それは、メモリ606に、あるいは任意の他の適切な記憶場所かコンピュータ可読媒体上に記憶されてもよい。メディア・アプリケーション612は、プロセッサ602が本明細書において説明されている機能および他の機能を実行することを可能にする命令を提供する。
説明を容易にするため、図6は、プロセッサ602と、オペレーティング・システム604と、メモリ606と、I/Oインタフェース608と、ソーシャル・ネットワーク・エンジン610と、メディア・アプリケーション612との各々について、1つのブロックを示す。これらのブロック602、604、606、608、610および612は、複数のプロセッサ、複数のオペレーティング・システム、複数のメモリ、複数のI/Oインタフェース、複数のソーシャル・ネットワーク・エンジンおよび複数のメディア・アプリケーションを表わしていてもよい。他の実施形態では、サーバ・デバイス600は、示されている構成要素の全てを有していないこともあれば、および/または、本明細書において示されている要素の代わりに、または、これらに加えて他の種類の要素を含む他の要素を有することがある。
説明は、これの特定の実施形態に関して説明されたが、これらの特定の実施形態は例示に過ぎず限定的ではない。例において示されている概念は、他の例および実施形態に適用されてもよい。
当業者に知られているように、本開示において説明されている機能ブロック、方法、デバイス、およびシステムは、一体化されていてもよいし、システム、デバイスおよび機能ブロックの異なる複数の組み合わせに分割されてもよいことに注意されたい。
任意の適切なプログラミング言語およびプログラミング技術も特定の実施形態のルーチンを実施するために使用されてもよい。手続き型やオブジェクト指向型など、異なる複数のプログラミング技術が使用されてもよい。ルーチンは1つのプロセッシングデバイスか複数のプロセッサ上で実行してもよい。工程、動作あるいは計算は、具体的な順序により提示されている場合があるが、順序は異なる複数の特定の実施形態において変えてもよい。いくつかの特定の実施形態では、本明細書において連続するものとして示されている複数の工程は同時に実行されてもよい。
「プロセッサ」は、データ、信号あるいは他の情報を処理する任意の適切なハードウェアおよび/またはソフトウェアのシステム、メカニズムあるいは構成要素を含んでいる。プロセッサは、機能を達成するための汎用の中央処理装置、複数の処理装置、専用回路あるいは他のシステムを備えたシステムを含んでいてもよい。処理は、地理的な位置に制限されなくともよいか、または、時間的に制限される。例えば、プロセッサは、「リアルタイム」、「オフライン」、「バッチ・モード」により機能を実行してもよい。処理の一部は、異なる(あるいは同じ)処理システムによって異なる時、および異なる位置において実行されてもよい。コンピュータは、メモリと通信する任意のプロセッサの場合がある。メモリは、ランダム・アクセス・メモリ(RAM)、読出専用メモリ(ROM)、磁気ディスク、光ディスク、あるいはプロセッサによる実行のために命令を記憶するのに適した他の有形な媒体のような任意の適切なプロセッサ可読記憶媒体の場合がある。

Claims (16)

  1. 少なくとも第1ユーザと第2ユーザとの間のビデオ会議のユーザ・インタフェースを提供する工程であって、前記第1ユーザは第1エンドポイントに関連付けられ、前記第2ユーザは第2エンドポイントに関連付けられている、工程と、
    前記第1エンドポイントおよび前記第2エンドポイントの各々に対するビューランク値を決定する工程であって、各ビューランク値は、対応する前記エンドポイントに関連付けられている前記ユーザが発言している可能性を示している、工程と、
    前記第1エンドポイントおよび前記第2エンドポイントの各々に対する前記ビューランク値に基づいて、前記ユーザ・インタフェースに、現在のプレゼンター・ポジションに第1ユーザのビデオストリームを表示させ、次位のプレゼンター・ポジションに第2ユーザのビデオストリームを表示させる工程と、
    を備え
    各ビューランク値は、1つ以上の過去のビデオ会議の履歴に少なくとも部分的に基づく、方法。
  2. 前記ビデオ会議における前記第1エンドポイントおよび前記第2エンドポイントを、それらのビューランク値に基づいてランク付けする工程をさらに備える、請求項に記載の方法。
  3. 各ビューランク値は、対応する前記エンドポイントに関連付けられている前記ユーザの発言の持続時間に少なくとも部分的に基づく、請求項に記載の方法。
  4. 対応する前記エンドポイントに関連付けられている前記ユーザの発言の前記持続時間に基づいて前記ビューランク値を決定する工程は、
    対応する前記エンドポイントに関連付けられている前記ユーザが前記ビデオ会議において発言している時間の量を決定することと、
    対応する前記エンドポイントに関連付けられている前記ユーザが前記ビデオ会議において発言している前記時間の量を、発言の所定の持続時間と比較することであって、各ビューランク値は、関連付けられている前記ユーザが、前記発言の所定の持続時間と比較して、発言している前記時間の量に少なくとも部分的に基づく、請求項に記載の方法。
  5. 少なくとも第1ユーザと第2ユーザとの間のビデオ会議のユーザ・インタフェースを提供する工程であって、前記第1ユーザは第1エンドポイントに関連付けられ、前記第2ユーザは第2エンドポイントに関連付けられている、工程と、
    前記第1エンドポイントおよび前記第2エンドポイントの各々に対するビューランク値を決定する工程であって、各ビューランク値は、対応する前記エンドポイントに関連付けられている前記ユーザが発言している可能性を示している、工程と、
    前記第1エンドポイントおよび前記第2エンドポイントの各々に対する前記ビューランク値に基づいて、前記ユーザ・インタフェースに、現在のプレゼンター・ポジションに第1ユーザのビデオストリームを表示させ、次位のプレゼンター・ポジションに第2ユーザのビデオストリームを表示させる工程と、
    を備え、
    各ビューランク値は、対応する前記エンドポイントに関連付けられている前記ユーザの発言の持続時間に少なくとも部分的に基づいており、
    前記ビューランク値を決定する工程は、1つ以上の過去の前記ビデオ会議における対応する前記ユーザの参加を判定することを含み、前記ビューランク値のうちの1つ以上は、1つ以上の過去の前記ビデオ会議における対応する前記ユーザの前記参加に少なくとも部分的に基づく、方法。
  6. 各ビューランク値は、対応する前記エンドポイントで検知されるオーディオの種類に少なくとも部分的に基づき、前記オーディオの種類は、人間の音声およびノイズを含むシステムにより検知可能な複数のオーディオの種類のうちの1つである、請求項に記載の方法。
  7. 少なくとも第1ユーザと第2ユーザとの間のビデオ会議のユーザ・インタフェースを提供する工程であって、前記第1ユーザは第1エンドポイントに関連付けられ、前記第2ユーザは第2エンドポイントに関連付けられている、工程と、
    前記第1エンドポイントおよび前記第2エンドポイントの各々に対するビューランク値を決定する工程であって、各ビューランク値は、対応する前記エンドポイントに関連付けられている前記ユーザが発言している可能性を示している、工程と、
    前記第1エンドポイントおよび前記第2エンドポイントの各々に対する前記ビューランク値に基づいて、前記ユーザ・インタフェースに、現在のプレゼンター・ポジションに第1ユーザのビデオストリームを表示させ、次位のプレゼンター・ポジションに第2ユーザのビデオストリームを表示させる工程と、
    を備え、
    各ビューランク値は、対応する前記エンドポイントに関連付けられている部屋にいる人の数に少なくとも部分的に基づいており、対応する前記エンドポイントに関連付けられている部屋にいる人の数が所定の数の閾値を満たすときに減少させられる、方法。
  8. 少なくとも第1ユーザと第2ユーザとの間のビデオ会議のユーザ・インタフェースを提供する工程であって、前記第1ユーザは第1エンドポイントに関連付けられ、前記第2ユーザは第2エンドポイントに関連付けられている、工程と、
    前記第1エンドポイントおよび前記第2エンドポイントの各々に対するビューランク値を決定する工程であって、各ビューランク値は、対応する前記エンドポイントに関連付けられている前記ユーザが発言している可能性を示している、工程と、
    前記第1エンドポイントおよび前記第2エンドポイントの各々に対する前記ビューランク値に基づいて、前記ユーザ・インタフェースに、現在のプレゼンター・ポジションに第1ユーザのビデオストリームを表示させ、次位のプレゼンター・ポジションに第2ユーザのビデオストリームを表示させる工程と、
    を備え、
    各ビューランク値は、エンドポイントの種類に少なくとも部分的に基づき、
    各ビューランク値は、対応する前記エンドポイントの種類が複数ユーザのエンドポイントであることに基づいて減少させられること、および、各ビューランク値は、対応する前記エンドポイントの種類が1人ユーザのエンドポイントであることに基づいて増加させられることのうちの少なくとも1つを含む、方法。
  9. 各ビューランク値は、少なくとも1つの所定のビデオ機能に少なくとも部分的に基づき、前記少なくとも1つの所定のビデオ機能は、
    前記ビデオ会議においてオーディオが伝わらないビデオミュート機能と、
    対応する前記エンドポイントでの画面ディスプレイが、前記ビデオ会議の別のエンドポイントと共有される、画面共有機能と、
    のうちの少なくとも1つを含む、請求項に記載の方法。
  10. 少なくとも第1ユーザと第2ユーザとの間のビデオ会議のユーザ・インタフェースを提供する工程であって、前記第1ユーザは第1エンドポイントに関連付けられ、前記第2ユーザは第2エンドポイントに関連付けられている、工程と、
    前記第1エンドポイントおよび前記第2エンドポイントの各々に対するビューランク値を決定する工程であって、各ビューランク値は、対応する前記エンドポイントに関連付けられている前記ユーザが発言している可能性を示している、工程と、
    前記第1エンドポイントおよび前記第2エンドポイントの各々に対する前記ビューランク値に基づいて、前記ユーザ・インタフェースに、現在のプレゼンター・ポジションに第1ユーザのビデオストリームを表示させ、次位のプレゼンター・ポジションに第2ユーザのビデオストリームを表示させる工程と、
    前記第1エンドポイントおよび前記第2エンドポイントのうちの少なくとも1つに、対応する延期バイアスを適用する工程と、
    を備え、対応する前記延期バイアスの大きさは前記ビューランク値に基づき、対応する前記延期バイアスによって、前記第2ユーザのビデオストリームを前記現在のプレゼンター・ポジションに表示することが延期される、方法。
  11. システムであって、
    1つ以上のプロセッサと、
    前記1つ以上のプロセッサによる実行のために1つ以上の有形な媒体に符号化されている論理と、を備え、該論理は、実行時に、
    少なくとも第1ユーザと第2ユーザとの間のビデオ会議のユーザ・インタフェースを提供する工程であって、前記第1ユーザは第1エンドポイントに関連付けられ、前記第2ユーザは第2エンドポイントに関連付けられている、工程と、
    前記第1エンドポイントおよび前記第2エンドポイントの各々に対するビューランク値を決定する工程であって、各ビューランク値は、対応する前記エンドポイントに関連付けられている前記ユーザが発言している可能性を示している、工程と、
    前記第1エンドポイントおよび前記第2エンドポイントの各々に対する前記ビューランク値に基づいて、前記ユーザ・インタフェースに、現在のプレゼンター・ポジションに第1ユーザのビデオストリームを表示させ、次位のプレゼンター・ポジションに第2ユーザのビデオストリームを表示させる工程と、を含む動作を実行するように構成され
    各ビューランク値は、1つ以上の過去のビデオ会議の履歴に少なくとも部分的に基づく、システム。
  12. 各ビューランク値は、対応する前記エンドポイントに関連付けられている前記ユーザの発言の持続時間に少なくとも部分的に基づく、請求項11に記載のシステム。
  13. 各ビューランク値は、対応する前記エンドポイントで検知されるオーディオの種類に少なくとも部分的に基づき、前記オーディオの種類は、人間の音声およびノイズのうちの少なくとも1つを含む、請求項11に記載のシステム。
  14. システムであって、
    1つ以上のプロセッサと、
    前記1つ以上のプロセッサによる実行のために1つ以上の有形な媒体に符号化されている論理と、を備え、該論理は、実行時に、
    少なくとも第1ユーザと第2ユーザとの間のビデオ会議のユーザ・インタフェースを提供する工程であって、前記第1ユーザは第1エンドポイントに関連付けられ、前記第2ユーザは第2エンドポイントに関連付けられている、工程と、
    前記第1エンドポイントおよび前記第2エンドポイントの各々に対するビューランク値を決定する工程であって、各ビューランク値は、対応する前記エンドポイントに関連付けられている前記ユーザが発言している可能性を示している、工程と、
    前記第1エンドポイントおよび前記第2エンドポイントの各々に対する前記ビューランク値に基づいて、前記ユーザ・インタフェースに、現在のプレゼンター・ポジションに第1ユーザのビデオストリームを表示させ、次位のプレゼンター・ポジションに第2ユーザのビデオストリームを表示させる工程と、を含む動作を実行するように構成され、
    各ビューランク値は、対応する前記エンドポイントに関連付けられている部屋にいる人の数に少なくとも部分的に基づいており、対応する前記エンドポイントに関連付けられている部屋にいる人の数が所定の数の閾値を満たすときに減少させられる、システム。
  15. システムであって、
    1つ以上のプロセッサと、
    前記1つ以上のプロセッサによる実行のために1つ以上の有形な媒体に符号化されている論理と、を備え、該論理は、実行時に、
    少なくとも第1ユーザと第2ユーザとの間のビデオ会議のユーザ・インタフェースを提供する工程であって、前記第1ユーザは第1エンドポイントに関連付けられ、前記第2ユーザは第2エンドポイントに関連付けられている、工程と、
    前記第1エンドポイントおよび前記第2エンドポイントの各々に対するビューランク値を決定する工程であって、各ビューランク値は、対応する前記エンドポイントに関連付けられている前記ユーザが発言している可能性を示している、工程と、
    前記第1エンドポイントおよび前記第2エンドポイントの各々に対する前記ビューランク値に基づいて、前記ユーザ・インタフェースに、現在のプレゼンター・ポジションに第1ユーザのビデオストリームを表示させ、次位のプレゼンター・ポジションに第2ユーザのビデオストリームを表示させる工程と、を含む動作を実行するように構成され、
    各ビューランク値は、エンドポイントの種類に少なくとも部分的に基づき、
    各ビューランク値は、対応する前記エンドポイントの種類が複数ユーザのエンドポイントであることに基づいて減少させられること、および、各ビューランク値は、対応する前記エンドポイントの種類が1人ユーザのエンドポイントであることに基づいて増加させられることのうちの少なくとも1つを含む、システム。
  16. 各ビューランク値は、少なくとも1つの所定のビデオ機能に少なくとも部分的に基づき、前記少なくとも1つの所定のビデオ機能は、
    前記ビデオ会議においてオーディオが伝わらないビデオミュート機能と、
    対応する前記エンドポイントでの画面ディスプレイが、前記ビデオ会議の別のエンドポイントと共有される、画面共有機能と、
    のうちの少なくとも1つを含む、請求項11に記載のシステム。
JP2016554344A 2014-02-27 2015-02-19 ビデオ会議中におけるプレゼンターの表示 Active JP6535681B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201461945359P 2014-02-27 2014-02-27
US61/945,359 2014-02-27
US14/249,298 2014-04-09
US14/249,298 US9210379B2 (en) 2014-02-27 2014-04-09 Displaying a presenter during a video conference
PCT/US2015/016718 WO2015130557A1 (en) 2014-02-27 2015-02-19 Displaying a presenter during a video conference

Publications (3)

Publication Number Publication Date
JP2017512427A JP2017512427A (ja) 2017-05-18
JP2017512427A5 JP2017512427A5 (ja) 2018-01-25
JP6535681B2 true JP6535681B2 (ja) 2019-06-26

Family

ID=53883498

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016554344A Active JP6535681B2 (ja) 2014-02-27 2015-02-19 ビデオ会議中におけるプレゼンターの表示

Country Status (7)

Country Link
US (3) US9210379B2 (ja)
EP (1) EP3111657A1 (ja)
JP (1) JP6535681B2 (ja)
KR (1) KR102054173B1 (ja)
CN (1) CN106063255B (ja)
AU (1) AU2015223376A1 (ja)
WO (1) WO2015130557A1 (ja)

Families Citing this family (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9210379B2 (en) * 2014-02-27 2015-12-08 Google Inc. Displaying a presenter during a video conference
KR102202110B1 (ko) * 2014-04-30 2021-01-13 삼성전자주식회사 서비스 제공 방법, 전자 장치 및 저장 매체
TWI504272B (zh) * 2014-05-08 2015-10-11 Aver Information Inc 視訊會議系統及其顯示配置方法
US10887628B1 (en) * 2016-04-27 2021-01-05 United Services Automobile Services (USAA) Systems and methods for adaptive livestreaming
US20180041552A1 (en) * 2016-08-02 2018-02-08 Facebook, Inc. Systems and methods for shared broadcasting
US10079994B2 (en) * 2016-11-18 2018-09-18 Facebook, Inc. Methods and systems for displaying relevant participants in a video communication
US10116898B2 (en) 2016-11-18 2018-10-30 Facebook, Inc. Interface for a video call
US10250849B2 (en) * 2016-12-30 2019-04-02 Akamai Technologies, Inc. Dynamic speaker selection and live stream delivery for multi-party conferencing
KR102625773B1 (ko) * 2017-01-04 2024-01-17 삼성전자주식회사 뷰 벡터별 다른 렌더링 품질을 갖는 영상을 생성하는 전자 장치
US10045086B1 (en) * 2017-02-09 2018-08-07 Nanning Fugui Precision Industrial Co., Ltd. Interactive system for virtual cinema and method
US10326809B2 (en) * 2017-02-09 2019-06-18 Nanning Fugui Precision Industrial Co., Ltd. Interactive system for virtual cinema and method
US10334283B2 (en) * 2017-02-09 2019-06-25 Nanning Fugui Precision Industrial Co., Ltd. Interactive system for virtual cinema and method
US10038877B1 (en) * 2017-03-13 2018-07-31 Microsoft Technology Licensing, Llc Event conditioned views for teleconferencing sessions
CN109413359B (zh) * 2017-08-16 2020-07-28 华为技术有限公司 摄像跟踪方法、装置及设备
CN107682752B (zh) * 2017-10-12 2020-07-28 广州视源电子科技股份有限公司 视频画面显示的方法、装置、系统、终端设备及存储介质
WO2019095084A1 (es) * 2017-11-17 2019-05-23 Latin Telecomunicaciones S.A. Interfaz de servicio del usuario y plataforma de gestión para videoconferencia y actividades de colaboración
CN108495074B (zh) * 2018-03-28 2021-02-02 武汉斗鱼网络科技有限公司 一种视频聊天方法及装置
CN111695044B (zh) * 2019-03-11 2023-08-18 北京柏林互动科技有限公司 用户排名的数据处理方法、装置及电子设备
US11019219B1 (en) * 2019-11-25 2021-05-25 Google Llc Detecting and flagging acoustic problems in video conferencing
WO2022007618A1 (zh) 2020-07-08 2022-01-13 聚好看科技股份有限公司 视频通话方法及显示设备
CN114071056B (zh) * 2020-08-06 2022-08-19 聚好看科技股份有限公司 视频数据显示方法及显示设备
US11392863B2 (en) * 2020-08-14 2022-07-19 Cisco Technology, Inc. Optimizing dynamic open space environments through a reservation service using collaboration data
US11082661B1 (en) * 2020-09-25 2021-08-03 Microsoft Technology Licensing, Llc Virtual conference view for video calling
US11651749B2 (en) * 2020-11-02 2023-05-16 Panduit Corp. Display layout optimization of multiple media streams
US11153442B1 (en) * 2021-01-28 2021-10-19 Bande Fitness Llc Systems and methods for facilitating side-channel communications during shared communication session
US11310465B1 (en) * 2021-03-17 2022-04-19 Ampula Inc. Video conference teminal and system there of
CN115220829A (zh) 2021-04-20 2022-10-21 华为技术有限公司 界面显示的方法、相关装置、设备以及可读存储介质
US12342102B2 (en) * 2021-11-19 2025-06-24 Apple Inc. Systems and methods for managing captions
EP4437514A1 (en) * 2021-11-24 2024-10-02 Phenix Real Time Solutions, Inc. Eye gaze as a proxy of attention for video streaming services
KR102740785B1 (ko) * 2021-12-02 2024-12-16 한국항공우주산업 주식회사 회의용 다기능 시스템
CN114663550A (zh) * 2022-03-17 2022-06-24 北京华伟恒远信息系统技术有限公司 用于线上签章的会议管理方法、装置、会议平台及介质
US11937014B2 (en) * 2022-03-17 2024-03-19 Lenovo (Singapore) Pte. Ltd. Permitting devices to change settings related to outbound audio/video streamed from another device as part of video conference
JP7459890B2 (ja) * 2022-03-23 2024-04-02 セイコーエプソン株式会社 表示方法、表示システムおよびプログラム
EP4333423A1 (en) * 2022-09-05 2024-03-06 Nokia Technologies Oy Video conference calls
US12308989B1 (en) * 2023-01-19 2025-05-20 Meta Platforms, Inc. Optimized video call grid for picture-in-picture mode
US20240333872A1 (en) * 2023-03-29 2024-10-03 Google Llc Determining visual items for presentation in a user interface of a video conference

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS57208781A (en) * 1981-06-19 1982-12-21 Hitachi Ltd Conference system by video telephone
JPH08274888A (ja) * 1995-03-31 1996-10-18 Hitachi Software Eng Co Ltd 多地点間会議システムの議事進行制御方法
US6532218B1 (en) 1999-04-05 2003-03-11 Siemens Information & Communication Networks, Inc. System and method for multimedia collaborative conferencing
GB2404297B (en) * 2003-07-24 2007-12-05 Hewlett Packard Development Co Editing multiple camera outputs
US8081205B2 (en) 2003-10-08 2011-12-20 Cisco Technology, Inc. Dynamically switched and static multiple video streams for a multimedia conference
US7797383B2 (en) 2006-06-21 2010-09-14 Cisco Technology, Inc. Techniques for managing multi-window video conference displays
JP4957119B2 (ja) * 2006-08-11 2012-06-20 富士通東芝モバイルコミュニケーションズ株式会社 情報処理装置
US8300556B2 (en) * 2007-04-27 2012-10-30 Cisco Technology, Inc. Optimizing bandwidth in a multipoint video conference
US8319814B2 (en) 2007-06-22 2012-11-27 Lifesize Communications, Inc. Video conferencing system which allows endpoints to perform continuous presence layout selection
CN101132562A (zh) * 2007-09-24 2008-02-27 中兴通讯股份有限公司 蜂窝按讲业务的话语权控制方法及系统
JP2010028299A (ja) * 2008-07-16 2010-02-04 Brother Ind Ltd 会議撮影画像処理方法及び会議装置等
US8248448B2 (en) 2010-05-18 2012-08-21 Polycom, Inc. Automatic camera framing for videoconferencing
US8558868B2 (en) * 2010-07-01 2013-10-15 Cisco Technology, Inc. Conference participant visualization
JP5760783B2 (ja) * 2010-07-29 2015-08-12 株式会社リコー コミュニケーション端末およびプログラム
JP5655858B2 (ja) 2010-09-16 2015-01-21 ブラザー工業株式会社 テープカセット及びテープ印字装置
CN102741831B (zh) * 2010-11-12 2015-10-07 宝利通公司 多点环境中的可伸缩音频
CN102547210B (zh) * 2010-12-24 2014-09-17 华为终端有限公司 级联会议中级联会场的处理方法、装置及系统
CN102169488A (zh) * 2011-01-28 2011-08-31 方蝶软件(上海)有限公司 一种有关网络时空公平的发言权控制方法
CN102761672B (zh) * 2011-04-27 2014-09-10 阿里巴巴集团控股有限公司 一种在网页服务器中实现语音通信的方法、系统及装置
US20130028443A1 (en) * 2011-07-28 2013-01-31 Apple Inc. Devices with enhanced audio
US20130169742A1 (en) * 2011-12-28 2013-07-04 Google Inc. Video conferencing with unlimited dynamic active participants
US20130179491A1 (en) 2012-01-11 2013-07-11 Google Inc. Access controls for communication sessions
US9503683B2 (en) 2012-03-27 2016-11-22 Google Inc. Providing users access to applications during video communications
US9001183B2 (en) 2012-06-15 2015-04-07 Cisco Technology, Inc. Adaptive switching of views for a video conference that involves a presentation apparatus
US9210379B2 (en) * 2014-02-27 2015-12-08 Google Inc. Displaying a presenter during a video conference

Also Published As

Publication number Publication date
US9699412B2 (en) 2017-07-04
AU2015223376A1 (en) 2016-09-01
US20160057389A1 (en) 2016-02-25
US9210379B2 (en) 2015-12-08
CN106063255B (zh) 2019-10-18
CN106063255A (zh) 2016-10-26
WO2015130557A1 (en) 2015-09-03
KR20160125972A (ko) 2016-11-01
EP3111657A1 (en) 2017-01-04
US20180070051A1 (en) 2018-03-08
JP2017512427A (ja) 2017-05-18
US20150244981A1 (en) 2015-08-27
US10104337B2 (en) 2018-10-16
KR102054173B1 (ko) 2019-12-10

Similar Documents

Publication Publication Date Title
JP6535681B2 (ja) ビデオ会議中におけるプレゼンターの表示
US11386903B2 (en) Methods and systems for speech presentation based on simulated binaural audio signals
US10708703B1 (en) Switching binaural sound
US9264660B1 (en) Presenter control during a video conference
US8791977B2 (en) Method and system for presenting metadata during a videoconference
JP2014225801A (ja) 会議システム、会議方法およびプログラム
US12052391B2 (en) Methods and systems for automatic queuing in conference calls
JP2025120200A (ja) 情報処理装置及びプログラム
CN112400158B (zh) 音频装置、音频分配系统和操作其的方法
CN118715562A (zh) 用于改进群组通信会话的系统和方法
US11876632B2 (en) Audio transcription for electronic conferencing
TW201543902A (zh) 視訊會議靜音技術
US8913102B2 (en) Teleconferencing method and device
US12347235B2 (en) Establishing private communication channels
US20240113905A1 (en) Audio transcription for electronic conferencing
JP2015046822A (ja) テレビ会議システム
US20230308501A1 (en) Organic conversations in a virtual group setting
CN104539873B (zh) 远程会议系统和进行远程会议的方法
JP7584996B2 (ja) 仮想イベントシステム、情報処理装置、出力制御方法及びプログラム
WO2024089887A1 (ja) 情報提示装置、情報提示方法及び情報提示プログラム
TW202343438A (zh) 用於改進的群通訊通信期的系統和方法
CN117397235A (zh) 用于电子会议的音频转录

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20171211

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20171211

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20180921

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20181002

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20181221

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190122

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190415

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190514

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190603

R150 Certificate of patent or registration of utility model

Ref document number: 6535681

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250