CN105684425A - 控制对视频数据的显示 - Google Patents

控制对视频数据的显示 Download PDF

Info

Publication number
CN105684425A
CN105684425A CN201480060040.3A CN201480060040A CN105684425A CN 105684425 A CN105684425 A CN 105684425A CN 201480060040 A CN201480060040 A CN 201480060040A CN 105684425 A CN105684425 A CN 105684425A
Authority
CN
China
Prior art keywords
user terminal
map
video data
display
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201480060040.3A
Other languages
English (en)
Inventor
J·O·恩斯特兰德
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Technology Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Technology Licensing LLC filed Critical Microsoft Technology Licensing LLC
Priority claimed from PCT/US2014/062489 external-priority patent/WO2015065929A1/en
Publication of CN105684425A publication Critical patent/CN105684425A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/10—Architectures or entities
    • H04L65/1059—End-user terminal functionalities specially adapted for real-time communication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1083—In-session procedures
    • H04L65/1089—In-session procedures by adding media; by removing media
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/52—Network services specially adapted for the location of the user terminal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72457—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to geographic location
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02—Services making use of location information
    • H04W4/025—Services making use of location information using location based information parameters
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Environmental & Geological Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Telephonic Communication Services (AREA)
  • Telephone Function (AREA)

Abstract

一种用户终端，包括：网络接口；显示器；以及通信模块，该通信模块被配置为：在经由网络接口与至少一个其它的用户终端的通信事件期间，通过通信网络从所述至少一个其它的用户终端接收视频数据；经由所述网络接口，通过所述通信网络从所述至少一个其它的用户终端接收位置信息；响应于接收到所述位置信息，在所述显示器上显示地图，所述地图显示多个位置；以及针对所述至少一个其它的用户终端中的每个用户终端，控制从所述其它的用户终端接收的视频数据来使其被显示在所述显示器上，以提供在所述多个位置中的一个位置处的对所述其它的用户终端的位置的视觉指示。

Description

控制对视频数据的显示
背景技术
互联网协议语音(“VoIP”)通信系统使设备的用户得以通过通信网络进行呼叫。为了使用VoIP，用户必须在其设备上安装并且执行客户端软件。该客户端软件提供VoIP连接以及诸如注册和认证之类的其它功能。有利地，除了语音通信和视频通信之外，客户端还可以提供视频呼叫和即时通信(“IM”)。利用视频呼叫，呼叫者除了语音信息之外还能够观看对方的视频图像。这在多方之间实现更加自然的通信，因为还传送了面部表情，由此拨打视频呼叫与面对面交谈更具有可比性。
经常期望视频呼叫的参与者向视频呼叫的其它参与者传送其地理位置。这可以以多种方式来实现。
视频呼叫的第一参与者可以尝试向视频呼叫的第二参与者口头地描述其位置。
对于移动设备来说，还常见的是包括位置确定功能，以确定移动设备的地理位置。在移动设备上执行的地图绘制应用(mappingapplication)可以使用该地理位置信息来向移动设备的用户显示移动设备的地理位置。
视频呼叫的第一参与者可以在其设备上发起地图绘制应用。在被发起时，第一参与者可以使用该地图绘制应用来显示其地理位置。然后，第一参与者可以使用在第一参与者的设备的显示器上所显示的地理位置信息来向第二参与者口头地描述其位置。替代地，当视频呼叫的第一参与者正在向第二参与者口头地描述其位置时，第二参与者可以在其设备上发起地图绘制应用。然后，第二参与者可以尝试使用由第一参与者提供的口头描述和在其设备上执行的地图绘制应用来确定第一参与者的位置。
发明内容
根据一个方面，提供了一种用户终端，包括：网络接口；显示器；和通信模块，所述通信模块被配置为：在经由网络接口与至少一个其它的用户终端的通信事件期间，通过通信网络从至少一个其它的用户终端接收视频数据；经由网络接口通过通信网络从至少一个其它的用户终端接收位置信息；响应于接收到位置信息，在显示器上显示地图，所述地图显示多个位置；以及针对至少一个其它的用户终端中的每个用户终端，控制从其它的用户终端接收的视频数据来使其被显示在显示器上，以提供在所述多个位置中的一个位置处的对其它的用户终端的位置的视觉指示。
根据一个方面，提供了一种在用户终端处实现的方法，所述方法包括：在经由用户终端的网络接口与至少一个其它的用户终端的通信事件期间，通过通信网络从至少一个其它的用户终端接收视频数据。通信事件可以例如说是视频呼叫。该方法还包括经由网络接口通过通信网络从至少一个其它的用户终端接收位置信息。该位置信息可以包括纬度信息和经度信息。该方法还包括：响应于接收到位置信息，在用户终端的显示器上显示地图，所述地图显示多个位置；以及针对至少一个其它的用户终端中的每个用户终端，控制从其它的用户终端接收的视频数据来使其被显示在显示器上，以提供在所述多个位置中的一个位置处的对其它的用户终端的位置的视觉指示。
根据另一个方面，提供了一种计算机程序产品，该计算机程序产品被体现在非暂时性计算机可读介质上，并且被配置为当在设备的处理器上执行时执行本文描述的方法中的任何方法的步骤。
提供该发明内容，以用简化的形式介绍下文在具体实施方式中进一步描述的一系列概念。该发明内容既不旨在标识所要求的主题的关键特征或者必要特征，也不旨在被用来限制所要求的主题的范围。
附图说明
出于更好地理解所描述的实施例并且为了示出可以如何实施所描述的实施例，现在将通过示例的方式来对下面的附图进行参考，其中：
图1示出了通信系统；
图2示出了用户终端的示意图；
图3是针对在视频呼叫期间显示接收的位置信息的过程的流程图；以及
图4a和4b示出了可以如何显示接收的视频数据以提供对视频呼叫的一个或多个参与者的位置的视觉指示。
具体实施方式
在已知的实现方式中，当视频呼叫的参与者向视频呼叫的接收方参与者传送其地理位置时，在任何一个时间，接收方的设备显示从接收方设备上执行的单个应用输出的一种类型的数据。
例如，参见上面描述的视频呼叫的第一参与者可以尝试向视频呼叫的第二参与者口头地描述其位置的示例。第二参与者的设备仅仅显示从通信客户端应用输出的视频数据。对于第二参与者来说，可能难于精确地确定第一参与者的位置，特别是如果第一参与者对其位置的描述缺乏足够的信息使得第二参与者无法确定第一参与者的位置。如果第一参与者处于对于第一参与者和第二参与者中的任一者或者两者来说不熟悉的地理位置，则可能发生这种情形。
类似地，当视频呼叫的第一参与者在其设备上发起地图绘制应用以显示其地理位置，并且使用在第一参与者的设备的显示器204上所显示的地理位置信息来向第二参与者口头地描述其位置时，第二参与者的设备仅仅显示从通信客户端应用输出的视频数据。
同样地，当视频呼叫的第一参与者正在向第二参与者口头地描述其位置时，第二参与者的设备显示从通信客户端应用输出的视频数据。然后，如果第二参与者在其设备上发起地图绘制应用来辅助其确定第一参与者的位置时，第二参与者的设备停止显示从通信客户端应用输出的视频数据，而显示从地图绘制应用输出的地理位置信息。在第二参与者关闭地图绘制应用之后，第二参与者的设备重新开始显示从通信客户端应用输出的视频数据。在任何一个时间，第二参与者的设备显示从在第二参与者的设备上执行的单个应用输出的一种类型的数据。
当第一参与者或者第二参与者在视频呼叫期间使用地图绘制应用时，这对于视频呼叫来说是破坏性的，因为由于参与者必须从注视该参与者的设备上的照相机转而观看该参与者的设备上的显示器，导致打断第一参与者与第二参与者之间的目光交流。此外，这依赖于第一参与者口头地向第二参与者精确地转述在第一参与者的设备的显示器上显示的地理位置信息以使得第二参与者能够确定第一参与者的位置，或者依赖于第二参与者能够使用地图绘制应用来基于第一参与者对其位置的口头描述确定第一参与者的位置。
在本公开内容的实施例中，在一用户终端上同时地显示地理位置信息和视频数据二者，以在视觉上指示该接收的位置信息和视频数据所来自的其它用户终端的位置。
现在将仅仅通过示例的方式来描述实施例。
图1示出了包括与第一用户终端102相关联的第一用户104(用户A)和与第二用户终端108相关联的第二用户110(用户B)的通信系统100。为了简单起见，虽然在图1中示出了仅仅两个用户，但是通信系统100可以包括任何数量的用户和相关联的用户设备。用户终端102和108在通信系统100中可以通过网络106进行通信，由此使用户104和110得以通过网络106与彼此通信。网络106可以是具有用于在第一用户终端102和第二用户终端108之间提供通信信道的能力的任何合适的网络。例如，网络106可以是互联网或者诸如高数据速率移动网络(诸如第三代(“3G”)移动网络)之类的另一种类型的网络。用户终端102可以是，例如，移动电话、个人数字助理(“PDA”)、个人计算机(“PC”)(包括，例如，WindowTMPC、MacOSTMPC和LinuxTMPC)、游戏设备或者能够连接至网络106的其它嵌入式设备。安排用户终端102从用户终端102的用户104接收信息，以及向用户终端102的用户104输出信息。在一个实施例中，用户终端102包括诸如屏幕之类的显示器和诸如小键盘、触摸屏和/或麦克风之类的输入设备。用户终端102被连接至网络106。被连接至网络106的是被布置为存储地图数据的地图绘制服务器112。地图绘制服务器112可以在单一的计算设备上实现。地图绘制服务器112还可以操作以支持对“云计算”环境中的有关操作的执行，由此这些操作中的至少一些操作可以由多个计算设备来执行。
随着移动带宽的增加，在经由运行在移动设备(诸如，启用互联网的移动电话)上的客户端应用来提供基于分组的视频呼叫方面增加兴趣。这些移动设备包括收发机，诸如在一个或多个未经许可的频带上操作以便经由(例如，WLAN网络的Wi-Fi接入点的)无线接入点来访问互联网的短程RF收发机，和/或在一个或多个经许可的频带上操作以便经由诸如GPRS(通用分组无线业务)或者HSPA(高速分组接入)之类的蜂窝网络的基于分组的业务来访问互联网的蜂窝收发机。
用户终端102执行由与通信系统100相关联的软件提供商提供的通信客户端。该通信客户端是在用户终端102中的本地处理器上执行的软件程序(即，通信模块)。该客户端执行用户终端102处需要的处理，以便用户终端102通过通信系统100发送和接收数据。如本领域中已知的，可以通过数字证书的呈现来对在用户终端102处执行的客户端进行认证，以在通信系统上进行通信(例如，以证明用户104是通信系统的真实用户—在WO2005/009019中更详细地进行了描述)。
用户终端108可以与用户终端102相对应。用户终端108在本地处理器上执行通信客户端，所述通信客户端与在用户终端102处执行的通信客户端相对应。用户终端108处的客户端以这样一种方式执行使用户110能够通过网络106进行通信所需要的处理：该方式与用户终端102处的客户端执行使用户104能够通过网络106进行通信所需要的处理的方式相同。用户终端102和108是通信系统中的端点。为了清楚起见，图1仅仅示出了两个用户(104和110)以及两个用户终端(102和108)，但是如本领域中已知的，更多的用户和用户设备可以被包括在通信系统100中，并且可以使用在各自的用户设备上执行的各自的通信客户端，通过通信系统100来进行通信。
图2示出了在其上执行通信客户端以通过通信系统100进行通信的用户终端102的详细视图。用户终端102包括中央处理单元(“CPU”)202，诸如屏幕或者触摸屏之类的显示器204、诸如小键盘206之类的输入设备、照相机208和触摸屏204被连接至所述中央处理单元202。输出音频设备210(例如，扬声器)和输入音频设备212(例如，麦克风)被连接至CPU202。如图2中示出的，显示器204、小键盘206、照相机208、输出音频设备210和输入音频设备212可以被集成到用户终端102中。在替代的用户终端中，显示器204、小键盘206、照相机208、输出音频设备210和输入音频设备212中的一个或多个可以不被集成到用户终端102中，并且可以经由各自的接口被连接至CPU202。这样的接口的一个示例是USB接口。CPU202被连接至诸如调制解调器的网络接口224，用于与网络106进行通信。如图2中示出的，网络接口224可以被集成到用户终端102中。在替代的用户终端中，网络接口224未被集成到用户终端102中。如本领域中已知的，用户终端102还包括用于存储数据的存储器226。存储器226可以是永久性存储器，诸如ROM。替代地，存储器226可以是暂时性存储器，诸如RAM。
图2还示出了在CPU202上执行的操作系统(“OS”)214。在OS214之上运行的是用于上面提及的通信客户端应用的软件栈216。该软件栈示出了I/O层218、客户端引擎层220和客户端用户界面层(“UI”)222。每个层负责特定的功能。因为每个层通常与两个其它层通信，所以它们被认为布置在如图2中示出的栈中。操作系统214管理计算机的硬件资源，并且处理经由网络接口224被发送给网络106和从网络106接收的数据。I/O层218包括音频编解码器和/或视频编解码器，其接收输入的经编码的流并且对这些流进行解码以视情况而定地输出到扬声器210和/或显示器204，并且音频编解码器和/或视频编解码器从麦克风212和/或照相机208接收未经编码的音频和/或视频数据并且对这些数据进行编码以用于作为流发送至通信系统10的其它端用户终端。客户端引擎层220处理如上所述的VoIP系统的连接管理功能，诸如通过基于服务器的或者P2P的地址查找和认证来建立呼叫或者其它连接。客户端引擎还可以负责本文未讨论的其它辅助功能。客户端引擎层220还与客户端用户界面层222进行通信。可以将客户端引擎层220布置为控制客户端用户界面层222来经由客户端的用户界面来向用户终端200的用户呈现被显示在显示器204上的信息，并且经由用户界面从用户终端200的用户接收信息。
在OS214之上运行的还有地图绘制模块228。地图绘制模块228提供用户界面，所述用户界面被显示在显示器204上，以用于第一用户104与地图绘制模块228交互。在被发起时，第一用户104可以使用由地图绘制模块228提供的用户界面来进行适当地选择，以显示第一用户104的地理位置。地图绘制模块228在显示器204上显示用于显示第一用户104的地理位置的地图。地图绘制模块228可以支持多个缩放级别，使得第一用户104可以增加或者降低第一用户104的地理位置的细节的级别。地图绘制模块228被配置为从也在OS214之上运行的位置确定模块230接收用户终端102的位置信息。
位置确定模块230确定用户终端102的位置。在相对于地球表面的地理位置方面，位置确定模块230使用地理位置技术来确定用户终端102的位置，例如，诸如GPS(全球定位系统，包括诸如辅助GPS或者差分GPS的潜在变型)、GLONASS(全球导航卫星系统)或者伽利略定位系统；和/或相对于具有已知位置的多个不同的无线基站或者接入点的三边测量法(或者更通常的多点定位)；和/或基于相对于已知基站或者接入点检测信号强度的技术。可以使用其它公知的方法用于用户终端102确定其位置。
如下文将更详细地描述的，地图绘制模块228还被配置为接收通信系统100的一个或多个其它用户的位置信息。
用户终端108用与如上所述的用户终端102相同的方式来实现，其中，用户终端108可以具有与本文相对于用户终端102描述的那些要素相对应的要素。
在第一用户终端102与第二用户终端108之间的通信事件(即，视频呼叫)期间，第二用户终端108处的第二用户110可能想要向第一用户终端102的第一用户104通知他的地理位置。
现在参考图3，其示出了当在第一用户终端102与第二用户终端108之间正在进行视频呼叫时，在用户终端102处执行的方法的流程图300。
在第一用户终端102与第二用户终端108之间的视频呼叫期间，在步骤S302处，第一用户终端102经由网络接口224，通过网络106接收从第二用户终端108发送的经编码的视频数据(由第二用户终端108的照相机208捕获的图像数据帧)。在第一用户终端102上执行的通信客户端应用的I/O层218接收输入的经编码的视频流并且对经编码的视频流进行解码。客户端引擎层220控制客户端用户界面层222来经由在显示器204上显示的客户端的用户界面来向第一用户104显示经解码的视频数据。
在第一用户终端102与第二用户终端108之间的视频呼叫期间，第一用户终端还可以经由网络接口224，通过网络106接收从第二用户终端108发送的(由第二用户终端108的麦克风212捕获的)经编码的音频数据。在第一用户终端102上执行的通信客户端应用的I/O层218接收输入的经编码的音频数据并且对经编码的音频数据进行解码以便输出到扬声器210。
在第二用户终端108上执行的通信客户端的用户界面使得第二用户110能够在视频呼叫期间选择通过网络106向第一用户终端102发送其地理位置。第二用户110可以使用第二用户终端108的输入设备在通信客户端的用户界面中做出这样的选择。例如，第二用户110可以选择在第二用户终端108上执行的通信客户端的用户界面中显示的按键，或者通过通信客户端的用户界面的适当的菜单进行导航以便选择向第一用户终端102发送其地理位置。
一旦第二用户110在视频呼叫期间选择向视频呼叫中的参与者(即，第一用户终端102)发送其地理位置。在第二用户终端108上执行的通信客户端就从第二用户终端108上的位置确定模块230请求位置信息。一旦接收到该请求，第二用户终端108上的位置确定模块230就确定第二用户终端108的位置，并且向在第二用户终端108上执行的通信客户端提供该位置信息。
在第二用户终端108上执行的通信客户端通过网络106向第一用户终端102发送位置信息，并且该位置信息经由第一用户终端102的网络接口224在第一用户终端102处被接收。该位置信息可以包括第二用户终端108的经度和纬度。该位置信息其它可以包括第二用户终端108的高度。
为了向第一用户终端102提供精确的位置信息，第二用户终端108上的位置确定模块230可以确定并且向在第二用户终端108上执行的通信客户端提供位置信息，以便周期地向第一用户终端102进行发送。这使得第二用户终端108的位置的任何改变(即，移动)能够被传送到第一用户终端102。替代地，在向在第二用户终端108上执行的通信客户端提供位置信息之后，如果第二用户终端108上的位置确定模块230确定第二用户终端108已经移动，则第二用户终端108上的位置确定模块230可以仅仅向在第二用户终端108上执行的通信客户端提供附加的位置信息，以向第一用户终端102进行发送。
位置信息可以被嵌入到从第二用户终端108发送至第一用户终端102的视频数据中，使得该位置信息在与视频数据相同的通信信道上发送。替代地，位置信息可以与视频数据分开地从第二用户终端108发送至第一用户终端102，使得该位置信息在与视频数据不同的通信信道上发送。
在步骤S304处，在第一用户终端102上执行的通信客户端经由第一用户终端102的网络接口224，通过网络106接收从第二用户终端108发送至第一用户终端102的位置信息。
在步骤S306处，在第一用户终端102上执行的通信客户端向第一用户终端102上的地图绘制模块228提供位置信息。在第一用户终端102上执行的通信客户端和地图绘制模块228均可以包括应用程序接口(API)，以使得可以在它们之间交换数据，使得应用能够与彼此进行通信。
地图绘制模块228利用对于地图数据的请求来经由网络接口224向地图绘制服务器112发送位置信息。地图绘制服务器112存储覆盖整个地球的预先生成的地图图块图像的大型集合，每个地图图块具有描述其缩放级别的z坐标，以及描述其位置的x坐标和y坐标。对于每个缩放级别，存在用于覆盖整个地球的预先确定数量的地图图块，由此缩放级别越大，就需要更大数量的预先确定数量的地图图块图像来覆盖整个地球。较低缩放级别的单一地图图块示出了比较高缩放级别的单一地图图块更大的地理区域。
地图绘制服务器112基于所接收的位置信息来确定由地图绘制服务器112存储的预先生成的地图图块图像的大的集合中的地图图块图像的子集。地图绘制服务器112向在第一用户终端102上执行的地图绘制模块228发送地图图块图像的子集。
地图绘制模块228向在第一用户终端102上执行的通信客户端应用提供地图图块图像的子集。在步骤S306处，在第一用户终端102上执行的通信客户端应用在显示器204上显示由地图图块图像的子集形成的地图。所生成的地图以适当的比例提供对第二用户终端108附近的陆地或者海洋的区域的图示表征。例如，所生成的地图可以示出公路、公园、铁路线、河流、医院、地标等等。
在第一用户终端102上执行的地图绘制模块228基于从通信客户端应用接收该信息知道第二用户终端108的位置(即，经度和纬度)。该地图图块图像的子集覆盖第二用户终端108附近的经度的范围和纬度的范围。因此，地图绘制模块228能够参照在显示器204上显示的由地图图块图像的子集形成的地图来确定第二用户终端108的位置(地图绘制模块228能够参照显示器204上所显示的地图来确定要显示对第二用户终端108的位置的视觉指示的位置)。
在第一用户终端102上执行的地图绘制模块228向在第一用户终端102上执行的通信客户端应用传送关于要在显示器204上的哪里显示对第二用户终端108的位置的视觉指示(参照所显示的地图)的位置信息。
在步骤S308处，在第一用户终端102上执行的通信客户端应用使用从地图绘制模块228接收的该位置信息来控制在步骤S302处接收的视频数据以使其被显示在显示器204上的提供参照所显示地图的对第二用户终端108的位置的视觉指示的位置上。即，就其本质而言，由地图绘制模块228显示的地图示出了多个地理位置，并且在第一用户终端102上执行的通信客户端应用控制从第二用户终端108接收的视频数据以使其被显示在显示器204上，以在多个位置中的一个位置处提供对第二用户终端108的位置的视觉指示。
因此，同时在用户终端上显示地理位置信息和视频数据二者，以视觉地指示从其接收视频数据的第二用户终端108的位置。
从上面将意识到的是，本公开内容的实施例在让视频呼叫中的所有参与者保持目光接触并且持续视觉通信的同时，清楚地传送彼此的地理位置和移动。在本公开内容的实施例中，避免在不同应用的用户界面之间进行切换，以观看地理位置信息和视频数据二者。
可以以多种方式来实现对地理位置信息和视频数据二者的同时显示。
现在参考图4a和图4b，其示出了可以如何显示接收的视频数据，以提供对视频呼叫的参与者的位置的视觉指示。
由在第一用户终端102上执行的通信客户端应用来在第一用户终端102的显示器204上显示地图402，该地图是由从地图绘制模块228接收的地图图块图像的子集形成的。在第一用户终端102上执行的通信客户端应用还在所显示的地图402上显示“视频头像(videoavatar)”(捕获的第二用户110的视频数据)。
在图4a中，在显示在步骤S302处从第二用户终端接收的视频数据的窗口404中显示视频头像。即，窗口404显示在第二用户终端108处捕获的、并且通过网络106被发送给第一用户终端102的实时视频数据，例如，第二用户110的视频数据。替代地，如在图4b中示出的，可以示出视频头像被包围在边框408内，边框408包括用于提供对第二用户终端108的位置的更精确的指示的指针。
虽然图4a和图4b示出了视频头像被通信客户端应用呈现为使得其覆盖所显示的地图402(即，在所显示的地图401的上面)，但是，在其它实施例中，可以不在所显示的地图的上面显示视频头像的一部分或者整个视频头像。例如，可以在显示器204的中心显示地图402，并且可以在地图402的边缘的外部显示视频头像，并且可以显示合适的标记或者指针来指示第二用户终端108在所显示的地图402上的位置。
如图4a和图4b中示出的，在第一用户终端102上执行的通信客户端应用可以覆盖可选择按键406，以用于第一用户104使用合适的输入设备进行选择。可选择的按键406可以包括用于结束视频呼叫、用于使音频静音以使得在视频期间接收的音频数据不从扬声器210输出、用于控制从扬声器210输出的音频的音量、以及与视频呼叫有关的其它功能的按键。通过将可选择的按键406覆盖在所显示的地图402的上面，地图402的大小被增至最大限度，这对于具有有限的显示大小的移动设备是有利的。替代地，可选择的按键406的一部分或者全部可以不被显示在所显示的地图的上面。例如，可选择的按键406可以被显示在地图402的边缘的外部。
由通信客户端应用在显示器204上显示的视频数据可以是可选择的输入。即，第一用户104可以使用第一用户终端102的适当的输入设备来选择所显示的视频数据。
响应于第一用户104选择所显示的视频数据，通信客户端应用可以利用比在由第一用户104进行用户选择之前显示的地图图块图像的缩放级别更高的缩放级别来显示由地图图块图像形成的地图，即，在第一用户终端102上执行的通信客户端应用对第二用户终端108的位置进行放大。即，响应于通信客户端应用检测到对所显示的视频数据的选择，通信客户端应用可以向地图绘制模块228发送对于更高的缩放级别的、基于在第一用户终端102处接收的最新位置信息的地图数据的请求。地图绘制模块228从地图服务器112检索该地图数据并且向通信客户端应用提供该地图数据用于在显示器204上进行显示。
这使得第一用户104能够被提供有第二用户终端108的位置的更详细的视图，以辅助确定第二用户终端108的位置。
响应于第一用户104选择显示的视频数据，通信客户端应用可以增加所显示的视频数据的大小。即，响应于通信客户端应用检测到对所显示的视频数据的选择，通信客户端应用可以利用显示器204的更大的物理部分来显示所接收的视频数据，即，在第一用户终端102上执行的通信客户端应用对于所显示的视频数据进行放大。这使得第一用户104被提供有所接收的视频数据的更大的视图。
响应于通信客户端应用检测到对所显示的视频数据的选择，通信客户端应用可以向用户提供关于由通信客户端应用提供的功能的一个或多个可选择的选项。一个或多个可选择的选项可以由第一用户104使用第一用户终端102上的适当的输入设备来选择，并且允许在第二用户终端108处与第二用户110交互。
一个或多个可选择的选项可以包括用于观看第二用户110的简档信息的选项、用于向第二用户110发送短信业务(SMS)消息的选项、用于向第二用户110发送IM消息的选项、用于向第二用户110发送数据文件的选项、用于观看第一用户104与第二用户110之间的IM交谈历史等等的选项等。将意识到的是，本文使用这些示例来说明概念，并且可以为通信客户端应用提供本文未描述的其它的可选择的选项。
在视频呼叫期间，当向第一用户终端发送对第二用户终端108的位置的更新时，在第一用户终端102上执行的通信客户端应用控制从第二用户终端108接收的要在所述显示器上显示的视频数据来参照所显示的地图提供对第二用户终端108的位置的视觉指示。即，当第二用户终端移动地理位置时，第二用户的视频头像将在地图上移动。
为了第一用户终端102根据图3的过程进行操作以在第一用户终端102上显示地理位置信息和视频数据二者来视觉地指示第二用户终端108的位置，将意识到的是，不需要第一用户终端102上的位置确定模块228。
虽然上面已经描述了沿一个方向(从第二用户终端108至第一用户终端104)发送位置信息，但是在视频呼叫期间，第一用户104可以选择与第二用户110共享其地理位置。即，在视频呼叫期间，位置信息可以是从单个用户终端处发送的并且在单个用户终端处接收的。将意识到的是，为了第一用户终端102共享其地理位置，需要位置确定模块228以便确定用户终端102的位置。
为了简单起见，虽然在图1中示出了仅仅两个用户终端，但是将意识到的是，可以在使用各自的用户终端的多于两个的用户之间进行视频呼叫。在视频呼叫期间，不管电话中的参与者的数量，一个或多个电话参与者可以同时广播其位置，并且它们的视频头像可以被呈现在其它设备的地图上。当一个用户终端从多个用户终端接收到位置信息时，在步骤S306处显示的地图的比例将取决于多个用户终端的地理邻近性。例如，当多个用户终端位于同一城市中时形成地图的地图图块图像与当多个用户终端位于不同的城市中时形成地图的地图图块图像相比，将处于更高的缩放级别。
虽然上面已经将由地图绘制服务器112存储的地图数据描述为包括预先生成的地图图块图像，但是由地图绘制服务器112存储的地图数据可以采取对于本领域的技术人员公知的其它形式。
在图3中单独示出的步骤可以或者可以不被实现为单独的步骤。
通常地，本文描述的功能中的任何功能可以使用软件、固件、硬件(例如，固定的逻辑电路)或者这些实现方式的组合来实现。如本文使用的术语“模块”、“功能”、“部件”、“应用”和“逻辑器件”通常表示软件、固件、硬件或者其组合。在软件实现方式的情况下，模块、功能或者逻辑器件表示当在处理器(例如，CPU或者数个CPU)上被执行时执行指定的任务的程序代码。程序代码可以被存储在一个或多个计算机可读存储器设备中。下文描述的技术的特征是独立于平台的，意味着这些技术可以在具有各种各样的处理器的各种各样的商用计算平台上实现。
例如，用户终端还可以包括使用户终端的硬件执行操作(例如，处理器功能框等等)的实体(例如，软件)。例如，用户终端可以包括计算机可读介质，其可以被配置为保持使用户终端并且更特别是操作系统和用户终端的相关联的硬件执行操作的指令。因此，指令用于配置操作系统和相关联的硬件执行操作并且以该方式导致操作系统和相关联的硬件的转变以执行功能。计算机可读介质可以通过各种各样不同的配置向用户终端提供该指令。
计算机可读介质的一种这样的配置是信号承载介质，并且因此被配置为诸如经由网络向计算设备发送指令(例如，作为载波)。计算机可读介质还可以被配置为计算机可读存储介质，并且因此不是信号承载介质。计算机可读存储介质的示例包括随机存取存储器(RAM)、只读存储器(ROM)、光盘、闪存、硬盘存储器和可以使用磁的、光学的和其它技术来存储指令和其它数据的其它存储器设备。
尽管已经用特定于结构特征和/或方法动作的语言描述了主题，但是应当理解的是，在所附权利要求中限定的主题不一定地被限制为上面描述的具体的特征或者动作。更确切地说，上面描述的具体的特征和动作被公开是作为实现权利要求的示例。

Claims (10)

1.一种用户终端，包括：
网络接口；
显示器；以及
通信模块，被配置为：
在经由所述网络接口与至少一个其它的用户终端的通信事件期间，通过通信网络从所述至少一个其它的用户终端接收视频数据；
经由所述网络接口，通过所述通信网络从所述至少一个其它的用户终端接收位置信息；
响应于接收到所述位置信息，在所述显示器上显示地图，所述地图显示多个位置；以及
针对所述至少一个其它的用户终端中的每个用户终端，控制从所述其它的用户终端接收的视频数据来使所述视频数据被显示在所述显示器上，以提供在所述多个位置中的一个位置处的对所述其它的用户终端的位置的视觉指示。
2.根据权利要求1所述的用户终端，其中，所述用户终端还包括地图绘制模块，所述地图绘制模块被配置为：
从所述通信模块接收所述位置信息；
经由所述网络接口，向被耦合至所述通信网络的地图服务器发送所述位置信息；
经由所述网络接口，从所述地图服务器接收地图数据；以及
向所述通信模块提供所述地图数据。
3.根据权利要求2所述的用户终端，其中，所述通信模块被配置为使用从所述地图绘制模块接收的所述地图数据来显示所述地图。
4.根据权利要求2或3所述的用户终端，其中，所述通信模块被配置为基于从所述地图绘制模块接收位置信息，来控制从所述其它的用户终端接收的视频数据来使所述视频数据被显示在所述显示器上。
5.根据任一前述权利要求所述的用户终端，其中，所述通信模块被配置为控制从所述其它的用户终端接收的视频数据来使所述视频数据在边框内被显示在所述显示器上，所述边框包括用于提供在所述多个位置中的一个位置处的对所述其它的用户终端的位置的视觉指示的指针。
6.根据任一前述权利要求所述的用户终端，其中，所述通信模块被配置为控制对从所述其它的用户终端接收的视频数据的显示，以覆盖所显示的地图。
7.根据任一前述权利要求所述的用户终端，其中，所述通信模块被配置为控制从所述其它的用户终端接收的视频数据使所述视频数据被显示为可选择的输入。
8.根据任一前述权利要求所述的用户终端，其中，所述位置信息包括纬度信息和经度信息。
9.一种计算机程序产品，所述计算机程序产品被体现在非暂时性计算机可读介质上，并且被配置为当在包括显示器和网络接口的用户终端的处理器上执行时使得：
在经由所述网络接口与至少一个其它的用户终端的通信事件期间，通过通信网络从所述至少一个其它的用户终端接收视频数据；
经由所述网络接口，通过所述通信网络从所述至少一个其它的用户终端接收位置信息；
以及响应于接收到所述位置信息，在所述显示器上显示地图，所述地图显示多个位置，以及针对所述至少一个其它的用户终端中的每个用户终端，控制从所述其它的用户终端接收的视频数据来使所述视频数据被显示在所述显示器上，以提供在所述多个位置中的一个位置处的对所述其它的用户终端的位置的视觉指示。
10.一种在用户终端处实现的方法，所述方法包括：
在经由所述用户终端的网络接口与至少一个其它的用户终端的视频呼叫期间，通过通信网络从所述至少一个其它的用户终端接收视频数据；
经由所述网络接口，通过所述通信网络从所述至少一个其它的用户终端接收纬度信息和经度信息；
以及响应于接收到所述纬度信息和所述经度信息，在所述用户终端的显示器上显示地图，所述地图显示多个位置，以及针对所述至少一个其它的用户终端中的每个用户终端，控制从所述其它的用户终端接收的视频数据来使所述视频数据被显示在所述显示器上，以提供在所述多个位置中的一个位置处的对所述其它的用户终端的位置的视觉指示。
CN201480060040.3A 2013-11-01 2014-10-28 控制对视频数据的显示 Pending CN105684425A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
GB201319333A GB201319333D0 (en) 2013-11-01 2013-11-01 Controlling display of video data
GB1319333.9 2013-11-01
US14/191,115 2014-02-26
US14/191,115 US9294715B2 (en) 2013-11-01 2014-02-26 Controlling display of video data
PCT/US2014/062489 WO2015065929A1 (en) 2013-11-01 2014-10-28 Controlling display of video data

Publications (1)

Publication Number Publication Date
CN105684425A true CN105684425A (zh) 2016-06-15

Family

ID=49767529

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480060040.3A Pending CN105684425A (zh) 2013-11-01 2014-10-28 控制对视频数据的显示

Country Status (4)

Country Link
US (1) US9294715B2 (zh)
EP (1) EP3050292A1 (zh)
CN (1) CN105684425A (zh)
GB (1) GB201319333D0 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102651793B1 (ko) * 2017-01-10 2024-03-28 삼성전자주식회사 영상 통화를 수행하기 위한 전자 장치 및 컴퓨터 판독 가능한 기록매체
CN111935434A (zh) * 2020-08-07 2020-11-13 南京洽道智能科技有限公司 一种可视化分析算法的显示管控终端

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002300548A (ja) * 2001-03-29 2002-10-11 Toshiba Corp 電話機の画像表示システム及びその方法
CN1874577A (zh) * 2005-04-23 2006-12-06 Lg电子株式会社 用于提供地理信息的移动通信终端及其方法
EP2015572A2 (en) * 2007-07-12 2009-01-14 LG Electronics Inc. Mobile terminal and method for displaying location information therein
CN101883317A (zh) * 2010-05-18 2010-11-10 中兴通讯股份有限公司 移动终端及用户位置通知方法
CN101977350A (zh) * 2010-10-09 2011-02-16 惠州Tcl移动通信有限公司 视频通话中加入位置信息的方法及移动通信终端

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4168837B2 (ja) * 2003-06-03 2008-10-22 ソニー株式会社 情報生成装置、記録装置、再生装置、記録再生システムおよびその方法ならびにプログラム
JP2005333226A (ja) 2004-05-18 2005-12-02 Denso Corp 車両用テレビ会議システム
US7630724B2 (en) * 2004-09-21 2009-12-08 Advanced Ground Information Systems, Inc. Method of providing a cellular phone/PDA communication system
US8280405B2 (en) * 2005-12-29 2012-10-02 Aechelon Technology, Inc. Location based wireless collaborative environment with a visual user interface
JP4937592B2 (ja) 2006-01-30 2012-05-23 ソニー株式会社 電子機器
US8421805B2 (en) 2006-02-09 2013-04-16 Dialogic Corporation Smooth morphing between personal video calling avatars
WO2007115273A2 (en) 2006-03-31 2007-10-11 Geospot, Inc. Methods for interaction, sharing, and exploration over geographical locations
US7979067B2 (en) 2007-02-15 2011-07-12 Yahoo! Inc. Context avatar
GB0703974D0 (en) 2007-03-01 2007-04-11 Sony Comp Entertainment Europe Entertainment device
KR101370897B1 (ko) 2007-03-19 2014-03-11 엘지전자 주식회사 이미지 제어 방법 및 그를 위한 단말기
US8758102B2 (en) 2008-03-25 2014-06-24 Wms Gaming, Inc. Generating casino floor maps
US8291341B2 (en) * 2008-05-28 2012-10-16 Google Inc. Accelerated panning user interface interactions
US8423285B2 (en) * 2009-03-05 2013-04-16 International Business Machines Corporation Enhanced adaptive optimization and presentation of on-line map data
ES2579055T3 (es) * 2011-10-24 2016-08-04 Huawei Device Co., Ltd. Método para compartir la posición de un terminal y dispositivo terminal

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002300548A (ja) * 2001-03-29 2002-10-11 Toshiba Corp 電話機の画像表示システム及びその方法
CN1874577A (zh) * 2005-04-23 2006-12-06 Lg电子株式会社 用于提供地理信息的移动通信终端及其方法
EP2015572A2 (en) * 2007-07-12 2009-01-14 LG Electronics Inc. Mobile terminal and method for displaying location information therein
CN101883317A (zh) * 2010-05-18 2010-11-10 中兴通讯股份有限公司 移动终端及用户位置通知方法
CN101977350A (zh) * 2010-10-09 2011-02-16 惠州Tcl移动通信有限公司 视频通话中加入位置信息的方法及移动通信终端

Also Published As

Publication number Publication date
GB201319333D0 (en) 2013-12-18
US20150124043A1 (en) 2015-05-07
EP3050292A1 (en) 2016-08-03
US9294715B2 (en) 2016-03-22

Similar Documents

Publication Publication Date Title
US11709067B2 (en) User controlled directional interface processing
CN103222319B (zh) 一种用于移动计算设备的方法及移动计算设备
KR102386189B1 (ko) 컨텐츠 공유
US8620339B2 (en) System and method for providing quality of service mapping
KR100678142B1 (ko) 위치기반 서비스를 제공하는 푸시투토크 방식을 채용한이동통신 시스템 및 그 서비스 구현 방법
US10887801B2 (en) Method for implementing edge computing of network and device thereof
CN103458354B (zh) 一种基于位置的群组生成方法、装置及系统
US20180115877A1 (en) Inter-platform multi-directional communications system and method
CN107409269A (zh) 确定对移动客户端和代理设备之间的代理流量的路由
US8744409B2 (en) Location method, device and system for secure user plane location enabled terminal
KR101302599B1 (ko) 모바일 소셜 네트워크 서비스 어플리케이션에서 그룹 관리 방법 및 그룹 관리 서버
CN109274732B (zh) 地理位置获取方法、装置、电子设备及存储介质
WO2015187501A1 (en) Signal strength management
KR102392436B1 (ko) 인스턴트 메시징을 통한 미디어 데이터 및 위치 정보 공유 기법
KR20130048158A (ko) 인스턴트 메시징 애플리케이션으로부터 리마인더들 셋팅
US8237613B2 (en) Apparatus and method for identifying subscriber position in portable terminal
CN105871826A (zh) 一种终端间共享地理位置的方法及装置
US20130083149A1 (en) Method and apparatus for device peer resource pooling
CN105684425A (zh) 控制对视频数据的显示
WO2015065929A1 (en) Controlling display of video data
EP2249614A1 (en) Method and apparatus for locating and assistant locating in a phs network
CN112770253A (zh) 紧急呼叫的定位方法、装置、存储介质及电子设备
US20140228052A1 (en) Method for alerting a mobile device at a predetermined destination
KR101617235B1 (ko) 이동통신 서비스 및 그를 이용한 휴대용 단말기
US20130130716A1 (en) Method for obtaining report information in short message service

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20160615

RJ01 Rejection of invention patent application after publication