CN105594163A - 具有实时状态通知的语音通信 - Google Patents

具有实时状态通知的语音通信 Download PDF

Info

Publication number
CN105594163A
CN105594163A CN201480054365.0A CN201480054365A CN105594163A CN 105594163 A CN105594163 A CN 105594163A CN 201480054365 A CN201480054365 A CN 201480054365A CN 105594163 A CN105594163 A CN 105594163A
Authority
CN
China
Prior art keywords
recording
equipment
control piece
text
select
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201480054365.0A
Other languages
English (en)
Other versions
CN105594163B (zh
Inventor
简·库姆
迈克尔·B·多诺霍
布赖恩·阿克顿
埃里克·詹姆斯·雷德
迪玛·斯图卡洛夫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Woz EPP Co.,Ltd.
Original Assignee
WhatsApp LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by WhatsApp LLC filed Critical WhatsApp LLC
Publication of CN105594163A publication Critical patent/CN105594163A/zh
Application granted granted Critical
Publication of CN105594163B publication Critical patent/CN105594163B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/56—Unified messaging, e.g. interactions between e-mail, instant messaging or converged IP messaging [CPM]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/07—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail characterised by the inclusion of specific contents
    • H04L51/10—Multimedia information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/06—Selective distribution of broadcast services, e.g. multimedia broadcast multicast service [MBMS]; Services to user groups; One-way selective calling services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/20—Services signaling; Auxiliary data signalling, i.e. transmitting data via a non-traffic channel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W88/00—Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/02—Terminal devices

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Telephonic Communication Services (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephone Function (AREA)
  • Mobile Radio Communication Systems (AREA)

Abstract

提供了用于执行具有实时状态通知的语音通信的系统、装置、图形用户界面和方法。执行通信应用程序的第一便携式设备的用户选择自动发起录音的多功能控制件，当该控制件被释放时，向激活通信会话的另一个参与者自动发送该录音。可使用相同的多功能控制件传输文本消息。在用户设备上显示的录音的表示具有当其他参与者播放该录音时改变外观的指示符。另外，当一个用户发起将被自动发送至另一个用户的录音时，另一个用户的设备被告知录音的发起并且为其他用户显示这种状态。

Description

具有实时状态通知的语音通信
背景技术
本发明涉及计算机和电子通信领域。更具体地，提供了用于执行具有状态通知的电子语音通信的系统、装置、图形用户界面和方法。
无线电话已经成为了不可或缺的附属品，并且可以伴随大多数人无论他们身在何处。因此，移动电话的用户几乎总能经由一些通信形式而取得联系。执行现场的、实时的语音通信的能力仍是很多人携带他们的电话的主要原因，但是很多其他人使用他们的电话可能更多是为了非语音通信而不是为了实时语音通信。
具体地，很多人使用无线电话以经由SMS(短消息服务)交换短文本消息。SMS消息通常被限制在140个文本字符，并且经由无线电话服务提供商的语音网络的控制信道传输。因此，无线电话用户是否正在给一个人或给多人发送短信，他或者她被限制于他或她一次可以通信的量是多少。开发MMS(多媒体消息服务)以允许媒体(例如，图像、视频)被传输到无线电话和从无线电话传输，但是仍依赖于SMS协议以给接收者发送通知。
然而，即使使用MMS，无线电话用户与另一个无线电话用户交换录制的语音通信的性能是很麻烦的。特别是，在典型的无线电话上发起语音的录制(或其它音频的录制)需要多个动作，诸如，以正确的顺序操作多个控制。例如，用户可能需要打开录制应用程序、开始录制、结束录制，可能将其命名用于存储、打开通信应用程序、创建至所需的接收者的消息、选择选项以添加附件，然后找到并附加录音。即使发起用户和目标用户正在操作通用的通信应用程序，发起者可能仍然需要打开菜单，以找到并选择用于进行录制、开始录制、停止录制的选项，然后选择一个用于将其发送到接收者的选项。
发明内容
在本发明的一些实施方式中，提供用于执行具有实时状态通知的语音通信的系统、装置、图形用户界面和方法。在这些实施方式中，一个便携式设备的用户能够容易地并且快速地创建录音并将其发送至另一个设备的用户。一方或者双方用户可接收其他用户的或者录制的状态的实时通知(real-timenotification)。
在一些实施方式中，一个便携式电子设备的用户可使用多功能控制件(multi-functioncontrol)的单一操控创建录音并发送至另一个用户。在不同的情况下，相同的控制件允许用户与录音相分离地发送文本消息。在一些实施方式中，控制件可根据情况(context)-诸如用户是否在文本窗口或者对话框中输入文本而改变外观(appearance)。
在一些实施方式中，录音的发送者接收接收者已经发起和/或完成录制的回放的实时通知。在一些实施方式中，录音的表示(representation)(例如，以图形显示用户对话的版本)或者其他用户的表示改变外观以指示在录音状态上的这种改变。
在一些实施方式中，录音的接收者可被告知发送者已经开始录音。例如，当录制开始时，可朝接收者的设备发送信号并且接收者可以看见发送者完成录制之前的状态。
附图说明
图1是根据本发明的一些实施方式的用于帮助录制具有实时状态通知的语音通信的系统的框图。
图2示出了根据本发明的一些实施方式的用于执行具有实时状态通知的语音通信的设备的用户界面。
图3A至图3H示出了根据本发明的一些实施方式的用于执行具有实时状态通知的语音通信的设备的图形用户界面。
图4A至图4E示出了根据本发明的一些实施方式的用于执行具有实时状态通知的语音通信的设备的图形用户界面。
图5是示出了根据本发明的一些实施方式的支持具有实时状态通知的语音通信的方法的流程图。
图6是根据本发明的一些实施方式的用于执行具有实时状态通知的录制的音频通信的便携式设备的框图。
具体实施方式
提出以下描述以使所属领域的技术人员能够制造和使用本发明。针对所公开的实施方式进行的各种修改对本领域技术人员将是显而易见的，并且在不背离本发明的范围的前提下，本文定义的一般原理可以应用于其它实施方式和应用。因此，本发明不旨在限制示出的实施方式。
在本发明的一些实施方式中，提供了用于执行具有实时状态通知的语音通信的系统、装置、用户界面和方法。在不同的实施方式中，实现了一个或多个补充特征，诸如单键录制语音、向开始录制语音的通信伙伴发送动态实时通知、向伙伴发送可信的录音、由通信伙伴回放录音的实时通知，以及自动选择播放录音的输出设备。
在通信环境中实施本发明的实施方式，在通信环境中，通过符合IEEE802.11标准(例如，Wi-Fi连接)的数据通信信道交换文本、图像、录音和/或其它的电子信息。在这些实施方式中，不是基于为即时或实时传输除了现场语音对话的通信提供有限支持的传统无线语音通信信道，而是数据通信信道允许在相同和/或不同类型的设备间的几乎所有类型的通信和媒体的非限制性交换。
描述了本发明的说明性的实施方式，因为它们可作为一对一通信会话(例如，交谈会话)的一部分来实现，但是也可以适用于群组通信会话(例如，群组交谈)。
图1是根据本发明的一些实施方式用于帮助录制具有实时状态通知的语音通信的系统的框图。
在这些实施方式中，通信系统120的用户操作运行在相同或不同的操作系统(例如，安卓、黑莓、iOS、诺基亚S40、塞班和Windows手机)下的各种便携式通信设备。因此，由不同的用户操作设备102、104，但是可以类似地或非常不同地进行配置。设备102、104之间的通信会话110包括设备102和系统120之间以及设备104和系统120之间的单独的连接。
系统120是用于托管(hosting)可以由多个用户同时使用的通信应用程序或服务(或通信应用程序的服务器部分)的计算机资源的数据中心、计算机网络或其它协作集合。在一些实施方式中，该应用程序将具有来自他或她的通信设备(例如，设备102)的文本、录音、照片、视频和多媒体的即时消息提供给操作其它通信设备(例如，设备104)的一个或多个其他用户或者将来自该一个或多个其他用户的该即时消息提供给该用户。
由系统120托管的通信应用程序与设备102、104兼容，并且包括在设备的本机操作系统下执行的客户端逻辑。操作一种类型的设备并且订制一种通信服务提供商的用户可以与操作其它类型的设备并且订制其它通信服务提供商的用户交换消息。可发送个人信息至任意数量的接收者；例如，可提供一群组通信形式(例如，交谈)，其中，多个用户交互式交换即时通信。
通信服务器122是系统120的前端组件(front-endcomponent)，该前端组件托管用户与系统的连接，并且帮助用户间的通信交换。服务器122可被称为“交谈(chat)”服务器，因为它们从各个用户接收实时消息和交谈会话通信用于传输至一个或多个其它用户。
示例性地，只要用户与系统120联机，并且在他的或她的设备上执行应用程序，那么可以在设备和通信服务器122之间保持连接或会话。当用户关闭了设备上的应用程序，则他的或她的连接可持续一段时间(例如五分钟、十五分钟)。
状态服务器124保持用户和/或用户们的设备的状态或配置。因此，状态服务器存储一些或者所有的用户的个人资料，包括适用的喜好(例如，偏好听觉和/或视觉提示、状态消息)、设备类型/型号等。一些由状态服务器保持的关于用户的状态信息可仅在用户与系统120连接的过程中持续。由于用户的设备以不同的方式或不同的模式(脱机、联机等)运行，状态服务器可以获取这些改变。
然而，在本发明的一些实施方式中，没有保持用户设备或系统连接的状态。然而，在这些实施方式中，可通过设备将用户或用户设备的状态的改变报告给系统，并且中继给与该用户进行通信(例如，交谈)会话的其他用户，和/或虽然没有打开与该用户进行的通信会话，但是订制了有关该用户的状态更新的用户。
在这些实施方式中，通过在状态服务器上保持的部分用户的个人资料，可识别与该用户相关联的其他用户的身份。将通知这些其他用户在该用户状态中的一些或者所有的改变(或者在该用户设备的状态的改变)-诸如当她上线时以及当她脱机时。如下所述，其它状态的改变也可被传输至相关联的用户。
消息服务器126存储不能立即被传送至他们的目标或目的用户的通信。当前与系统120联机(即，通过用户打开与通信服务器122的连接)的用户接收到的新消息(例如，文本交谈消息)可被立即传输。然而，当前脱机(没有打开与通信服务器122的连接)的用户所接收的消息可被存储在消息服务器126上直到它被传输出去。
除了在消息服务器126上存储的消息之外，媒体服务器128还存储等待传送到目标用户的媒体文件或内容。例如，从一个用户到另一个用户的消息可以是或者可以包括照片、视频、录音或一些其它媒体。媒体存储在媒体服务器128上直到其可以被传输，这当目标用户在线时可自动完成，或者仅当目标用户请求该媒体时被发起(例如，通过点击在传输至目标用户的文本消息中的链接以告知他媒体的内容)。
标识与系统120连接的在线用户的终端点的信息可以存储在通信/交谈服务器122、状态服务器124和/或其它实体(例如，会话服务器(图1中未示出))上。例如，各通信服务器可保持标识与系统的连接在该服务器上终止或者由该服务器托管的用户的表格或者其它数据结构。其它实体(例如，状态服务器124、会话服务器)可存储更大的数据组，该数据组针对连接至系统的每个用户，确定哪个通信服务器保持他们的连接。
因此，当通信服务器从所连接的用户接收新的通信时，对于一个或多个其他用户，其可以在本地数据和/或存储在其它系统实体上的数据内执行查找，以确定其他用户的状态(例如，他们是否连接，他们是否在繁忙通信)，以及，如果是这样，在哪进行。在一些实施方式中，其将首先搜索本地数据表(例如，路由表)，并且仅当如果一些或所有目标用户的状态都没有本地地找到时发起至另一个组件的查询。
可在系统100内部署任意数量的(例如，一个或多个)通信服务器、状态服务器、消息服务器、媒体服务器和/或其它服务器。在其它实施方式中，可以不同的方式分布服务器122、124、126、128的功能，诸如通过合并成更少的服务器或者分开成额外的服务器。
系统120的服务器可以是分离的物理计算机系统，该物理计算机系统包括适于执行赋予它们的功能的硬件资源(例如，处理器、存储器、通信界面)和软件资源(例如，程序代码、数据)。在一些替代的实施方式中，任意或所有的服务器可以是共享硬件资源和/或软件资源的虚拟计算机。因此，执行不同功能的多个软件服务器模块可以位于一台服务器计算机上。
一个或多个网络150包括设备102、104与系统120之间的通信路径，并且可以包括数据和/或语音通信信道。为了携带数据通信，网络150可以包括因特网、一个或多个内部网、多个LAN(局域网)、多个WAN(广域网)和/或其它点对点或分布式连接，这些在本质上可以是有线和/或无线的。为了携带语音通信，网络150可以包括由不同的远程通信服务提供商管理的有线和/或无线语音通信链路，以及几乎可执行任何无线技术，诸如全球移动通信系统(GSM)、GSM演进的增强型数据速率(EDGE)、长期演进(LTE)、码分多址(CDMA)、演进数据最优化(EV-DO)等。
因此，网络150可包括在图1中未示出的各种实体，诸如路由器、网关、交换机、基站(例如，无线接入点、节点B、演进的节点B)和/或其它用于建立、维护、交换或以其它方式操纵数据和/或语音连接的装置。
图2示出了根据本发明的一些实施方式的用于执行具有实时状态通知的语音通信的设备的用户界面。在这些实施例中，设备202可以是智能电话，或在其上安装有由图1的系统120托管的通信应用程序的便携式计算设备。因此，设备202的操作者能够实时地与应用的其他用户交换通信。他们的通信可以包括文本、图像、录音和/或其它媒体。设备202包括触摸屏显示器、一个或多个麦克风和一个或多个扬声器，并且可以包括本文中未提及的其它组件。
在图2中，设备202的用户或操作者打开通信应用程序并利用用户界面204呈现出来，其包括会话线程210。各会话线程210涉及与一个或多个用户进行的单独的通信会话。如果该用户已提供诸如线程210a的缩略图212a的图像，则部分或全部线程可包括与参与会话的另一个用户相关联的缩略图。线程还可以识别与该用户进行的最后一次通信交换的时间或者日期(例如，线程210a的时间214a)，以及最后一次通信的摘录(如果该通信包括文本内容)或者如果最后一次通信足够短则识别完整通信(例如，线程210a的摘录216a)。
可针对设备202的用户参与的任意激活的通信会话并且同时针对用户在已经过去的一段时间内(例如，一周、一个月、三个月、一年)参与的任意会话列出会话线程，其可以或者不可以通过用户进行配置。如果它们不能一次在设备202的显示组件上显示，则该用户需要通过线程进行滚动。线程210可以被排序，因此与最近激活的通信会话相关联的线程处于顶部，因此最激活的会话(例如，总体具有最大数量的消息或者最大平均通信速率的会话)处于顶部，因此由用户选择的人首先被列出，或者以一些其它方式排序。
可以通过参与通信会话(一对一会话)的其他用户的名称或通过群组通信会话的组名来识别会话线程210之中的个人会话。用于群组会话的线程还可以识别提出最近的通信的成员，可以识别群组的哪个成员当前在线和/或提供其它信息。
除了会话线程210之外，图2的界面204包括页脚220和页眉240，任一者或这两者可提供用于执行各种功能的软控制。说明性功能包括搜索(例如，定位与特定用户或组相关联的线程)、联系人(例如，添加联系人，开始与联系人的对话/通信线程)、设置(例如，调整通信应用程序或设备的操作参数，以修改用户界面的外观)、状态(例如，设置用于显示通信伙伴和/或其他用户的状态)、创建的新组，等等。
未在图2示出或标记的设备202的硬控制和其它软控制可以具有其它功能，并可能取决于设备的类型、设备制造商、设备的操作系统和/或其它因素。这些其它功能这里没有列出，以免模糊与本发明有关的特征的描述。
图3A至图3H示出了根据本发明的一些实施方式用于执行具有实时状态通知的语音通信的设备的图形用户界面。
在图3A中，当用户从图2的界面204选择会话线程210(例如线程210a)时，会在设备302的触摸屏显示器上显示图形用户界面(GUI)304。用户界面204、304可以是相同的界面的不同部分。
界面304具有对话区域或者范围310，该界面显示被发送作为当前通信会话的一部分的最近的通信312。具体地，如果用户之前在这个会话或线程过程中交换了任意通信，则那些会话(或者至少最近的会话)将在对话区域310内被显示或者被表示。如后续的示图所示，可显示全部文本消息(或者仅显示长消息的起始部分)，并且还可显示录音、图像、视频和/或其它已经被发送或者被接收的通信的表示。如果该用户以前(或一段时间内)没有交谈或者如果这是新创建的对话，则区域310可以不含通信。
图3A的GUI304具有页脚(footer)320，在所说明的实施方式中，页脚320包括多功能控制件322、文本输入窗口324和表情工具326。可激活表情工具326以获取用于选择和输入至文本消息中的表情的面板。文本输入窗口324可以由用户激活，以发起或继续输入文本消息。
GUI304的多功能控制件322以不同的方式工作，这取决于其中它被呈现的内容，并且如下面进一步讨论。在一种情况下，诸如当用户打开如图3A中所示的当前通信会话时，将用一方面或者形式-可以选择麦克风(例如，按压、点击)显示控制件322。
在这种情况下，用户可以容易地生成并发送语音或录音到其它参与会话的一个或多个用户。具体来说，通过按压并保持控制件322，设备302的麦克风被激活并开始录制。在释放控制件之后，录制会自动被传送至对话中的其他参与者。具体地，录制会被传送至托管应用程序的系统(例如，图1的系统120)，并且随后被传送至接收者。在另一个方面，并且如下所讨论的，多功能控制件322能够传送文本消息。
图3A的界面304还包括页眉340，该页眉340提供参与通信会话的其他用户的或与参与通信会话的其他用户相关联的缩略图342，如果通信会话是一对一会话，则还提供用于返回至图2的界面204的返回工具344。
在图3B中，图形用户界面304被显示在设备302的触摸屏显示器组件上，因为它可以在选择多功能控制件322后出现。在说明的实施方式中，选择控制件包括在其上按压(例如，用手指、手写笔或一些其它物体)并保持。一旦选择了控制件322，GUI的页脚320变成包括提示334、计时器336和指示符338。
如上所述，当多功能控制件呈现出在图3A所示的外观时，选择多功能控制件则会自动启动设备302的麦克风和录音器组件。录制的启动可能会稍微滞后(例如，半秒、一秒)，在意外或错误地选择控制件322的情况下，允许快速放弃录制过程而不将任何消息发送至通信伙伴306。
提示334用于提醒用户他可以通过在具有按压控制件322的对象的页脚上水平滑动以取消录制。计时器336报告用户目前为止录制的长度，以及指示符338提供录制正在进行的视觉的提示。指示符338可以是有色的(例如，红色)，可能会闪烁或以其它方式跳动，以指示录制正在进行中，从而指示由设备的麦克风等获取的音频的相对强度。在一些实施方式中，当按压多功能控制件322时，其会稍微改变外观，诸如在色调上变更暗(或更亮)。
图3C示出了在设备302的操作者释放多功能控制件322后的图3B的GUI304以及界面回到相似于图3A所示的状态。通信312a被添加到对话区域310来表示录音。此外，当操作者取消选择多功能控制件322时(通过释放它)，录制被关闭并且录音文件被上传至托管/支持与图形用户界面304相关联的通信应用程序的通信系统，用于传送给一个或多个接收者。
通信312a可以包括涉及录音的各种控制件，诸如用于播放(以及轮流、暂停)录制的控制件、识别录制的持续时间的时间字段、用于迅速到达期望的录制部分(在这种控制件的操作中，时间字段可以指示录制中的当前时间位置)的滑块和/或其它控制件。
然而，另外，通信312a伴随有录音的创建者的缩略图或者形象314a。在一对一的对话或者通信会话中(诸如在图3C中所示的)，各通信者通常将知晓在对话区域310中出现的录音，并且知晓不是由他或者她创建的录音必定是由其它通信者创建的。然而，在群组通信会话中，发送者的形象314a可允许组成员轻易地确定是谁发起相关的录音。此外，形象314a可基于录音的状态随着时间而改变(例如，除了，或者取代在下面即将描述的指示符的状态的改变)。
通信312a还伴随有状态指示符316a和传送指示符318a。当通信312a被传送至通信会话的其它组成员时，传送指示符318a进行指示。说明性地，单个的复选标记(或其它符号)指示该通信已经从设备302分派给通信系统。一对复选标记(或其它符号)将指示通信已经被传送至其他一方的设备，正如之前的通信312所示。
然而，状态指示符316a将允许设备302的操作者能够快速确定接收者是否已播放录制。当接收者启动录制的回放时，接收者的设备将通知系统并且系统将通知设备302，这将改变或者代替指示符316a。在一些实施方式中，指示符316a改变颜色(例如，从灰色变为蓝色)；在其它实施方式中，指示符改变大小或者形状(例如，变成扬声器而不是麦克风)。在其它的一些实施方式中，指示符则会消失。然而在其它实施方式中，状态指示符316a可以其它或多种方式改变，发送者的形象314a可以改变，和/或可以进行通信312a的其它改变以表明该录制已经被接收者播放。
在群组通信会话中，当群组成员播放录制时，状态指示符316a可以在外观上进行任意次数的改变(例如，指示接收者已经播放的数目或者百分比)，对于不同的成员可以使用不同的状态指示符，操作者可选择指示符以看到已经播放(或者没有播放)录制的组成员的列表等。
状态指示符316a的更新(和/或在本文描述的其它指示符和状态)可能是可信的或者是不可信的。换句话说，当与通信312a相关联的录音的接收者播放该录制时，即使设备302是脱线的或者是关闭的，该操作的通知可以在通信系统中缓冲并传送至设备302，由此，当设备302再次在线时该指示符可被更新。
图3D示出了当设备302的操作者或用户为了对文本消息排版而选择文本输入窗口324时的图3A的GUI304。对话区域310收缩以适应用于键入消息的键盘350的外观，以及光标被放置在文本输入窗口。多功能控制件322保持其初始的或第一个外观，以及如上所述可被用于创建和发送录音，而不是或者除了发送文本消息。
图3E示出了当设备302的操作者按压键盘或者小型键盘350上的一个或者多个键时图3D的GUI304。除了在文本输入窗口324中显示对应于用户输入的文本，多功能控制件322改变为第二形式或外观以指示其现在可以被用于发送包含在窗口324内的文本的文本消息。
在本发明的不同的实施方式中，根据在其中显示的情况，多功能控制件322几乎可采取任何形式或者外观(例如，代替词“发送”的符号或多个符号)和/或可以提供不同的功能。在说明性的示例中，通过缺少设备的操作者录入的文本来表征第一种情况，而通过存在这种文本来表征第二种情况。
然而，在一些实施方式中，即使在用户已经在文本输入窗口324中输入了文本，控制件322可仍然被用于创建音频，并且可以或不可以在外观上发生改变。在这些实施方式中，简单地选择控制件322(例如，按下并释放它)可能使在文本输入窗口中的文本以文本消息被发送，在此之后，用户界面可能会返回至一种状态，诸如在图3A或者图3D中所示的状态(具有在区域310中显示的新的文本消息)。
然而，在这些实施方式中，更长时间选择控制件322(例如，按住并且保持它)，将会在预定的时间段(例如，一秒，两秒)之后开始录音。如上所述，释放控制键将导致向接收者转发录音，并且还可导致在文本输入窗口中的文本被作为文本消息被发送。可替代地，在发送录音之后，界面可能回到生成录音之前的状态(例如，如图3E所示)，因此，用户可以完成他的文本输入，不同之处在于，将在区域310内出现用于录音的新的通信。在这些实施方式的创建录音的过程中，当选择控制件322时，用户仍然可以取消录制，诸如通过水平、垂直或者通过一些其它方向从控制件322滑动。
返回至在图3E说明的本发明的实施方式的论述，如果用户在窗口324对文本消息排版之后激活控制322，则该消息将被发送并在对话区域310内显示(或者将显示消息的表示)。键盘350可关闭或者可保持打开以允许生成其它文本。
图3F绘示了当设备302的操作者在没有按压键盘350上的按键时或者在按压键盘350上的按键之前的情况下激活多功能控制件322时的图3D的GUI304。结合图3D的描述，如通过提示334告知的，录音开始但是也可被取消。
图3G绘示了在控制件322被取消选择以及向一个或多个接收者转发了新的录音之后的图3F的GUI304。新的通信312b被添加到对话区域310，并伴随或包括发送者形象314b、状态指示符316b和传送指示符318b，它们起到类似于那些在以上结合图3C所讨论的作用。在这种情况下，指示符318b的双重复选标记可指示录音已经被传送至接收者的设备。
图3H绘示了在接收者开始回放通信312a(或者通信312b)以及实时通知活动已经被传送至设备302之后的图3C(或者图3G)的GUI304。在本发明的这些实施方式中，状态指示符316a改变颜色以提示设备302的操作者他的录制已经被播放或者正在被播放。由于附图黑-和-白的性质，颜色的改变(例如，从灰色变为蓝色)在图3H中可能不是很明显，但是在设备302的显示器上颜色将是很显著的。可替换地，状态指示符316a的一些其它特征可改变(例如，大小、形状、填充)。
图4A至图4D示出了根据本发明的一些实施方式的用于执行具有实时状态通知的语音通信的设备的图形用户界面。在这些实施方式中，设备402是智能电话或者是便携式计算设备，该便携式计算设备是由反映在图3A至图3H的通信会话中的其他参与者操作的-换句话说，是由设备302的操作者发送的录音的接收者操作的。设备402可类似于设备302，其中，设备402包括触摸屏显示器和麦克风；并且，其执行相同的通信应用程序。它可能是也可能不是相同类型或型号的设备或者执行相同的操作系统。
显示在设备402的触摸屏显示器上的图形用户界面404包括多功能控制件422、文本输入窗口424和表情工具426，这些起到如上所述的作用。然而，此外在图4A中，界面404包括对话的其它方的状态448-当前“正在录音…”。因此，设备302的操作者当前(或最近)正在录制将要发送至设备402的音频。
在本发明说明的实施方式中，当通信会话中的一个成员开始录音时(例如，经由本文提供的多功能控制件)，该活动会被实时地通知给对方。在改变至表明其它设备的操作者正在录音的状态栏448之前，该状态可指示操作者是“在线”的或者“在<特定的时间>最后一次看到”等。
状态448可保持显示直到知晓了不同的状态。例如，当另一台设备的操作者完成录制时(并且其是在通向设备402的过程中)，该状态可以相应地改变。设备用户可以或者不可以选择要显示的消息或者信息作为在其他用户设备上的状态448，或者创建自定义消息。
图4B绘示了当正在下载由设备402的操作者的通信伙伴录制的录音、通信412a时，图4A的GUI404。在一些实施方式中，如果/当设备402处于在线状态时，录制可被自动下载。在其它实施方式中，可通知设备402的操作者录制是可用的(例如，经由在图4A中确认的对话区域410中显示的链接)，并且必须采取下载其的操作(例如，选择该链接)。应当注意，状态栏448已经改变，以反映其他用户的当前状态。
通信412a可以包括用于指示下载状态的符号和/或控制件(诸如反映下载过程、录制持续时间的进度条)、用于取消该下载的控制件等。通信412a还包括发送者形象314a以及指示录制是否已经在接收的设备上播放的状态指示符416a。
在一些实施方式中，诸如指示符316a、416a的状态指示符在录制的发送者和接收者之间以及在不同设备平台之间在外观上可以有所不同。例如，状态指示符可具有不同的颜色、不同的形状、动画等。然而，应当提出，一旦接收者开始或者结束播放相关的录制时，其以某种方式进行改变。
图4C绘示了在完成由通信412a表示的下载录音之后并且播放(例如，使用嵌入通信412a的控制件)该录音的图4B的GUI404。由于设备402的操作者还没有播放录制，因此状态指示器416a还没有发生改变。
在图4D中，设备402的操作者已播放(或至少开始播放)录音。因此，状态指示符416a在外观上改变-在这种情况下是通过改变颜色。在其它实施方式中，如之前所讨论的，指示符416a可经历更显着的改变。由于附图的黑-和-白的性质，在图4D中反映的颜色改变(从绿色到蓝色)可能不是显而易见的。
图4E绘示了当设备402的用户选择(例如，按压并保持)通信412a时的图4D的GUI404。当检测到该操作时，菜单460被显示在触摸屏显示器上，以允许用户对通信(和相关的录制)采取一些操作。例如，如图4E所示，可以提供删除或者转发录音的选项。如果用户希望用她自己的录音对通信412a做出回应，那么她可激活如上所述的多功能控制件422，并且她的录音将被自动创建，并且仅在控制件所422上使用一次触摸即可发送。
图5是示出了根据本发明的一些实施方式的支持具有实时状态通知的语音通信的方法的流程图。在所示出的方法中，设备102的用户正在与另一个人-设备104的用户进行交谈会话。所说明的方法可被修改，以在不超出本发明的范围的情况下支持群组通信会话内的语音通信。
在操作500中，设备102的用户在他的设备上打开通信应用程序并且打开(或创建)与设备104的用户的对话。他按压多功能控制件(例如，图3A的控制件322)以发起语音录制或者其它录音。需要注意的是，他还可能在与录音相关联的文本输入窗口输入一些文本，该文本可在录音之前(例如，如果在开始录制之前输入)、录音期间(例如，与录制发送)或录音之后(例如，如果在完成录制之后输入)被传送。
当开始录制时，在设备102上执行的通信应用程序发出短暂的信号到通信系统120。该信号作为通信会话的一部分不同于由应用程序发送的正常的交谈消息，其中，该信号不能作为消息被传送至设备104。相反，如本文中所描述的，这意味着它是由应用程序逻辑发出的。
在操作502中，通信系统接收关于开始录制的实时状态通知，并且将该通知传送至设备104。在一些实施方式中，可在系统120上保留通知，仅当时间足够长时将其中继至设备104(或直到确认其被从设备104接收)，并且随后其可被丢弃。在如图5所反映的本发明的实施方式中，即使设备102的用户已激活或者打开与其他用户的通信线程或者会话，但仅通知涉及当前对话的(即，发起了针对该对话的录音)用户录制开始。
在操作504中，设备104接收在设备102上的录音的通知，并且更新相关联的对话的显示以指示该状态。说明性地，设备104上的对话的视图可以被改变，以显示“录音”或“录制中”或在设备102上采取的一些其它操作的指示。
如果当前没有在设备104上显示对话，但是通信应用程序正在运行，则可以或者不可以示出状态通知。例如，如果设备104当前正在显示多个对话的缩略图(例如，如在图2所示)，则对话的缩略图(或图标或缩略图的其它部分)可以进行闪烁、颜色改变或者其它方式呈现改变的外观以指示与该对话有关的音频活动。或者，如果设备104当前显示另一对话，则页眉或者该对话的其它部分可以简单的改变以确认设备102的用户并且指示他正在录音(例如，用打印出来的通知、用音调、用图标)。例如，代码显示可以在页眉上滚动，它的一部分可短暂的改变为显示其它的对话状态，可以利用听觉提示显示其它用户的缩略图。然而，如果设备104的用户当前正在录制或者播放来自另一个对话的音频，则声音提示不会响起，或者对处于设备102的所有状态都没有指示。
如果当前没有在设备104上执行通信应用程序，则通知可被丢弃。如果应用在后台运行，通知可能会被消耗，但是如果将设备置于显著位置，则设备104的用户将只看见该通知。
在操作510中，设备102的用户记录他的音频(例如，语音、音乐、音效)并且释放多功能控制件。当释放控制件，设备102(即，该通信应用程序)发出新的临时信号至系统120以报告状态的改变。
在操作512中，通信系统120接收并且以类似于操作502的通知处理该通知，以及将其传送至设备104。
在操作514中，设备104接收该通知，并且如果可能的话更新其显示(例如，如果是在设备上的显著位置操作应用)来反映新状态。如图所示，如果用户目前正在与设备102的用户观看对话中，她可能会看到状态指示符(例如，在显示器的页眉)改变至“在线”或“空闲”或“正在输入”或其它状态。
在操作520中，设备102上传录音到通信系统120(例如，到媒体服务器)。该设备还可以发送设备102的用户在录制之前和/或录制之后输入的任意文本。在该录制被上传之前或之后，其可以被转码、压缩和/或以其它方式进行处理。
在操作522中，系统120存储该录制，将其报告至或者提供至设备104，并且传送可能伴随录制的任意文本。在一些实施方式中，如果设备104处于在线，则系统可尝试立即传送该录制。在其它实施方式中，系统可传送在设备104上显示的对话中出现的消息，该消息可包括与录制相关联的任意文本，并且其使设备104的用户发起对录制的下载。当录制被下载到设备104时，用于发起其回放的控制件被插入对话。因此，设备104的用户可以通过按压一个符号或者控制件开始回放。
在操作530中，用户开始回放在设备104上的录制。通信应用程序因此将短暂的信号发送至系统120以报告这次状态的改变。
在操作532中，系统接收通知，类似于处理来自设备102的通知处理该通知，并且将其传送至设备102。
在操作534中，设备102接收该通知，并且如果可能的话(例如，在设备102的前台中执行应用程序)，更新用户的对话的状态。例如，表示设备104的用户(例如，图标)的指示符或缩略图的一部分可改变颜色、可改变成不同的形状、可以显示复选标记或其它符号等。
在可选的操作540中，在回放录制的过程中，设备104的用户将设备移动更接近她或者更远离她，并且通过不同输出组件继续进行回放。例如，当设备离她相对远时可使用第一扬声器-诸如当设备被置于免提的操作模式时被激活的扬声器。当该设备被靠近用户放置时(假设她当时正在使用其打电话)，音频输出会自动切换至当她打电话时使用的扬声器而不是处于免提模式。
在可选的操作550中，设备102的用户创建文本消息至设备104的用户，诸如在录音后的后续消息(follow-upmessage)，并且使用被激活以创建和发送录音的相同的多功能工具发送该后续消息。因此，在本发明的一些实施方式中，使用单独的敏感情况的控制件以发送在通信会话内的文本和录音两者。
图6是根据本发明的一些实施方式的用于执行具有实时状态通知的录制的音频通信的便携式设备的框图。
设备602包括一个或多个处理单元或者处理器602、触摸屏显示器604、软和/或硬输入控制件606(例如，小键盘、键盘、鼠标、轨迹球)、辅助存储器608、无线收发器610(耦接至天线610a)，可选附加的输入/输出端口612和存储器618，所有这些都通过总线614被耦接。无线收发器610可具有与无线通信服务提供商(例如，无线电话公司的网络)的持久的通信连接。
存储器618存储程序和/或用于由一个或多个处理器602执行的其它指令。这些程序包括用于管理基本设备服务和执行依赖于硬件功能和任务的操作系统630。
存储器618还存储多个可执行的处理器指令的程序模块或组，该可执行的处理器指令支持和/或实现与实时通知交换语音通信的方法。具体地，存储器618包括用于经由文本和/或媒体进行实时通信的通信程序620。可由通信系统(诸如图1的系统120)的操作者提供程序620。
作为通信应用程序620的一部分，或除了该应用程序，存储器618存储图形用户界面622、通知逻辑624、通信626(其包括录音628)等。
GUI622显示和管理触摸屏显示器604的各种情况，包括用于发起录音消息和文本的消息中的一个或两者的多功能控制件，并且该控制件可在不同的情况下改变外观以标志其功能。GUI622进一步包括通信状态指示符，当播放相关的录音时该通信状态指示符会改变外观，并且其还可由于其它原因改变外观(例如接收者转发录音或者删除录音)。然而，GUI622还包括通信伙伴的状态(例如，指示该伙伴正在录音)、通信的形象(以在显示器604的对话区域中进行显示)、通信伙伴的缩略图等。
当由一个或多个处理器602执行通知逻辑624时，其可发送和/或消耗实时通知。例如，当设备602的操作者录制音频以发送至其它设备的用户时，逻辑624可向另一个设备发送通知，当录制完成时，并且另外当设备602的操作者播放从其它设备接收的录制时可发送另一个通知。
通信626包括在设备602的操作者和在操作者的通信/交谈会话中的参与者之间交换的至少一些通信。其它(例如，较旧的)通信可被存储在辅助存储器608中直到其被需要时(例如，如果设备操作者通过他的通信进行滚动)。
在其中执行本发明的一些实施方式的情况可包括通用计算机或特殊用途设备，诸如手持计算机或通信设备。具体地，在本文中所涉及的设备(例如，便携式远程通信设备)可以是智能电话、膝上型或平板计算机，或其他一些便携式计算和/或通信设备。为清楚起见，这种设备(例如，处理器、存储器、数据存储器、显示器)的一些细节会被省略。诸如执行一个或多个任务或功能的处理器或存储器的组件可以是被暂时配置为执行该特定任务和功能的一般组件，或者可以是被制造以执行该任务或功能的特定组件。如本文所用的术语“处理器”指的是一个或多个电子电路、设备、芯片、处理核心和/或配置成处理数据和/或计算机程序代码的其它组件。无线通信装置可为一个或多个无线网络(例如，Wi-Fi、3G蜂窝电话)提供支持。
在本说明书详细描述的数据结构和程序代码通常存储在非临时性计算机可读存储介质上，其能够存储由计算机系统使用的代码和/或数据的任意设备或介质。非临时性计算机可读存储介质包括，但不限于，现在已知的或以后开发的易失性存储器、非易失性存储器、磁和光存储设备(诸如磁盘驱动器、磁带、CD(紧凑盘)和DVD(数字通用光盘或数字视频光盘))、固态驱动器和/或其它的非临时性计算机可读介质。
在本说明详细描述的方法和进程可被体现为代码和/或数据，如上所述，其可以被存储在非临时性计算机可读存储介质中。当处理器或计算机系统读取和执行代码以及控制存储在介质上的数据时，处理器或计算机系统执行该方法和进程，其体现为代码和数据结构并且被存储在介质中。
仅出于说明和描述的目的呈现本发明的实施方式的上述描述。这并不意味它们是排他性的或者将本发明限制于所公开的形式。因此，对于本领域的普通技术人员来说许多修改和改变都将是显而易见的。本发明的范围由所附的权利要求书而不是前面所公开的内容限定。

Claims (40)

1.一种便携式远程通信设备，具有无线通信装置、支持图形用户界面的触摸屏显示器、能够用于进行录音的麦克风、存储器以及用于执行存储在所述存储器中的一个或多个程序的一个或多个处理器，其中，所述图形用户界面包括：
对话区域，显示在所述触摸屏显示器上并且当通信发生时被在使用无线通信的所述便携式远程通信设备与另一个设备之间的通信填充；以及
能够选择的控制件，显示在所述触摸屏显示器上，
其中，在第一种情况下通过用户选择所述控制件来发起使用所述无线通信装置向其它设备传输录音；以及
其中，在第二种情况下通过用户选择所述控制件来发起使用所述无线通信装置向所述其它设备传输文本消息。
2.根据权利要求1所述的便携式远程通信设备，其中，所述图形用户界面进一步包括：
页眉区域，被配置为识别所述其它设备的操作者。
3.根据权利要求1或2所述的便携式远程通信设备，其中，所述图形用户界面进一步包括：
文本输入窗口，用于对所述文本消息排版，并且
其中，当在所述文本输入窗口中输入文本时，所述控制件的形式自动改变。
4.根据前述权利要求中任一项所述的便携式远程通信设备，其中，
所述图形用户界面进一步包括文本输入窗口；
通过在所述文本输入窗口中不存在文本来表征所述第一种情况；以及
通过在所述文本输入窗口中存在文本来表征所述第二种情况。
5.根据前述权利要求中任一项所述的便携式远程通信设备，其中，
选择了所述控制件，则开始使用所述麦克风创建录音；并且
取消选择所述控制件，则使所述录音被自动传输至所述其它设备。
6.根据权利要求5所述的便携式远程通信设备，其中，
选择所述控制件包括按压所述控制件；并且
取消选择所述控制件包括释放所述控制件。
7.根据前述权利要求中任一项所述的便携式远程通信设备，其中，
在选择所述控制件至少预定的时间段，则引起音频的录制并且当取消选择所述控制件时进一步使录音被自动传输；并且
选择所述控制件小于所述预定的时间段，则在取消选择所述控制件时使所述文本消息被自动传输。
8.根据权利要求7所述的便携式远程通信设备，其中，在选择所述控制件小于所述预定的时间段之前，通过所述图形用户界面的所述文本输入窗口输入所述文本消息。
9.根据前述权利要求中任一项所述的便携式远程通信设备，进一步包括，在向所述其它设备传输所述录音之后，
在所述对话区域中存在所述录音的表示，
其中，在所述其它设备上播放所述录音之前，所述表示具有第一形式，并且
其中，在所述其它设备上播放所述录音之后，所述表示具有第二形式。
10.根据权利要求9所述的便携式远程通信设备，其中，在所述其它设备上播放所述录音完成之前，所述表示从所述第一形式改变成所述第二形式。
11.根据前述权利要求中任一项所述的便携式远程通信设备，其中，所述图形用户界面进一步包括：
状态字段，被配置为显示所述其它设备的状态，并且
其中，在所述其它设备上开始用于指示在新的录音被寻址至所述便携式远程通信设备时的音频的录制的状态改变。
12.根据前述权利要求中任一项所述的便携式远程通信设备，其中，所述图形用户界面进一步包括：
在所述第一种情况下选择所述控制件期间存在关于取消所述录音的视觉提示；并且
其中，在选择所述控制件期间，从所述控制件上离开的动作能够使所述录音被取消。
13.一种方法，包括：
在具有触摸屏显示器的便携式设备上：
在所述触摸屏显示器上显示对话区域，所述对话区域反映所述设备的操作者与另一个设备的操作者之间的对话；
在所述触摸屏显示器上显示能够选择的控制件；
当在第一种情况下选择了所述控制件时，向其它设备发起录音的传输；并且
当在第二种情况下选择了所述控制件时，向所述其它设备发起文本消息的传输。
14.根据权利要求13所述的方法，其中，所述对话区域最初没有通信并且当通信发生时利用所述设备的操作者与所述其它设备的操作者之间的通信填充所述对话区域。
15.根据权利要求13或14所述的方法，其中，所述对话区域包括在所述便携式设备的操作者与所述另一个设备的操作者之间的一个或多个通信。
16.根据权利要求13至15中任一项所述的方法，其中，
所述便携式设备进一步包括麦克风；并且
向所述其它设备发起录音的传输包括：
激活所述麦克风以录制所述录音；并且
当取消选择所述控制件时，向所述其它设备自动传输所述录音。
17.根据权利要求16所述的方法，进一步包括，在传输所述录音之后：
在所述对话区域显示所述录音的表示，其中，所述表示包括指示所述录音还没有在所述其它设备上播放的第一特征。
18.根据权利要求17所述的方法，进一步包括，在显示所述表示之后：
接收在所述其它设备上开始播放所述录音的通知；并且
提示所述第一特征以指示所述录音的至少一部分已经在所述其它设备上播放。
19.根据权利要求13至18中任一项所述的方法，其中，向所述其它设备发起文本消息的传输包括：
当取消选择所述控制件时，向所述其它设备传输所述文本消息。
20.根据权利要求19所述的方法，进一步包括，在所述传输之前：
在所述触摸屏显示器上显示文本输入窗口；并且
在所述文本输入窗口输入文本对应于由所述设备的操作者对所述设备的所述控制件的操控。
21.根据权利要求20所述的方法，进一步包括，在所述传输之前：
当在所述文本输入窗口中输入文本时，提示能够选择的所述控制件的外观。
22.根据权利要求13至21中任一项所述的方法，其中，
在所述第一种情况中，在显示在所述触摸屏显示器上的所述文本输入窗口中不存在已输入的文本；以及
在所述第二种情况中，在所述文本输入窗口中输入了文本。
23.根据权利要求13至22中任一项所述的方法，进一步包括：
在所述触摸屏显示器上显示标识所述其它设备的所述操作者的页眉区域。
24.根据权利要求13至23中任一项所述的方法，进一步包括：
在所述触摸屏显示器上显示被配置为指示所述其它设备的状态的状态字段，
其中，当在所述其它设备上开始新的录音时，所述状态改变以指示音频的录制。
25.根据权利要求13至24中任一项所述的方法，进一步包括：
从所述其它设备接收新录音；
响应于由所述设备的操作者对播放控制件的操控，通过所述设备的第一输出组件开始回放所述新录音；并且
响应于检测到接近于所述设备的所述操作者，将所述新录音的回放切换至第二输出组件。
26.根据权利要求13至25中任一项所述的方法，进一步包括在所述第一种情况下选择了所述控制件期间，
在所述触摸屏显示器上靠近于所述控制件显示关于取消所述录音的视觉提示。
27.根据权利要求26所述的方法，进一步包括在所述第一种情况下选择了所述控制件期间，
响应于所检测到的在所述提示的方向远离所述控制件的动作来取消所述录音。
28.一种操作具有触摸屏显示器和麦克风的便携式设备的方法，所述方法包括：
在所述触摸屏显示器上显示对话区域并且当通信发生时利用所述便携式设备的操作者与另一个设备的操作者之间的通信填充所述对话区域；
在所述触摸屏显示器上显示文本输入窗口；
在所述触摸屏显示器上显示能够选择的控制件；并且
当选择了能够选择的所述控制件时：
如果选择所述控制件预定的时间段，
则使用所述麦克风开始音频的录制；并且
当取消选择所述控制件时，向其它设备传输录音；并且
如果选择所述控制件小于所述预定的时间段，向所述其它设备传输之前对所述文本输入窗口中的文本消息排版。
29.一种包括程序指令的计算机程序，当由通信设备的一个或多个处理器执行所述程序指令时，所述程序指令执行根据权利要求13至28中任一项所述的方法的所有步骤。
30.根据权利要求29所述的计算机程序，其中，所述计算机程序包括图形用户界面。
31.一种存储指令的非临时性计算机可读介质，当通过具有触摸屏显示器的便携式设备执行所述指令时使所述设备：
在所述触摸屏显示器上显示对话区域，所述对话区域反映所述设备的操作者与另一个设备的操作者之间的对话；
在所述触摸屏显示器上显示能够选择的控制件；
当在第一种情况下选择了所述控制件时，向其它设备发起录音的传输；以及
当在第二种情况下选择了所述控制件时，向所述其它设备发起文本消息的传输。
32.一种便携式设备，包括：
触摸屏显示器；
一个或多个处理器；以及
存储指令的存储器，所述指令被配置为由所述一个或多个处理器执行以：
在所述触摸屏显示器上显示所述设备的操作者与另一个设备的操作者之间的对话；
在所述触摸屏显示器上显示能够选择的控制件；
当在第一种情况下选择了所述控制件时，向其它设备发起录音的传输；以及
当在第二种情况下选择了所述控制件时，向所述其它设备发起文本消息的传输。
33.根据权利要求32所述的便携式设备，进一步包括麦克风。
34.根据权利要求32或33所述的便携式设备，进一步包括被配置为由所述一个或多个处理器执行的指令以：
显示用于对所述文本消息进行排版的文本输入窗口；
其中，当在所述文本输入窗口中输入文本时，所述控制件的形式改变。
35.根据权利要求32至34中任一项所述的便携式设备，进一步包括指令，所述指令被配置为由所述一个或多个处理器执行以：
在所述触摸屏显示器上显示文本输入窗口；
其中，所述第一种情况包括在所述文本输入窗口中不存在文本；并且
其中，所述第二种情况包括在所述文本输入窗口中存在文本。
36.根据权利要求32至35中任一项所述的便携式设备，其中，
选择了所述控制件，则开始创建所述录音；以及
取消选择所述控制件，则使所述录音被传输至所述其它设备。
37.根据权利要求32至36中任一项所述的便携式设备，其中，
选择所述控制件至少预定的时间段引起音频的录制并且在取消选择所述控制件时进一步使所述录音被自动传输；以及
选择所述控制件小于所述预定的时间段，在取消选择所述控制件时使所述文本消息被自动传输。
38.根据权利要求32至37中任一项所述的便携式设备，进一步包括指令，所述指令被配置为由所述一个或多个处理器执行以：
显示所述录音的表示；
其中，在所述其它设备上播放录音之前，所述表示具有第一形式；并且
其中，在所述其它设备上播放录音之后，所述表示具有第二形式。
39.根据权利要求32至38中任一项所述的便携式设备，进一步包括指令，所述指令被配置为由所述一个或多个处理器执行以：
在所述触摸屏显示器上显示被配置为指示所述其它设备的状态的状态字段，
其中，在所述其它设备上开始新的录音时，所述状态改变以指示音频的录制。
40.根据权利要求32至39中任一项所述的便携式设备，进一步包括指令，所述指令被配置为由所述一个或多个处理器执行以：
在所述第一种情况下选择所述控制件期间，在所述触摸屏显示器上显示有关取消所述录音的视觉提示；
其中，在选择所述控制件期间从所述控制件上离开的动作能够使所述录音被取消。
CN201480054365.0A 2013-08-02 2014-06-12 具有实时状态通知的语音通信 Active CN105594163B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/958,417 US9419935B2 (en) 2013-08-02 2013-08-02 Voice communications with real-time status notifications
US13/958,417 2013-08-02
PCT/US2014/042085 WO2015017029A2 (en) 2013-08-02 2014-06-12 Voice communications with real-time status notifications

Publications (2)

Publication Number Publication Date
CN105594163A true CN105594163A (zh) 2016-05-18
CN105594163B CN105594163B (zh) 2020-03-03

Family

ID=51168397

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480054365.0A Active CN105594163B (zh) 2013-08-02 2014-06-12 具有实时状态通知的语音通信

Country Status (10)

Country Link
US (3) US9419935B2 (zh)
JP (2) JP6594871B2 (zh)
CN (1) CN105594163B (zh)
AU (1) AU2014296808B2 (zh)
BR (1) BR112016002364A2 (zh)
CA (1) CA2919439A1 (zh)
IL (1) IL243770A0 (zh)
MX (1) MX358742B (zh)
TW (1) TWI689184B (zh)
WO (1) WO2015017029A2 (zh)

Families Citing this family (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9954996B2 (en) 2007-06-28 2018-04-24 Apple Inc. Portable electronic device with conversation management for incoming instant messages
US8989773B2 (en) 2013-01-29 2015-03-24 Apple Inc. Sharing location information among devices
US9226121B2 (en) 2013-08-02 2015-12-29 Whatsapp Inc. Voice communications with real-time status notifications
US20150046807A1 (en) * 2013-08-07 2015-02-12 Gface Gmbh Asynchronous Rich Media Messaging
US10845982B2 (en) * 2014-04-28 2020-11-24 Facebook, Inc. Providing intelligent transcriptions of sound messages in a messaging application
US9733807B2 (en) * 2014-04-30 2017-08-15 Cisco Technology, Inc. Techniques to handle multimedia questions from attendees in an online meeting
CN106462541A (zh) * 2014-05-13 2017-02-22 关德 用于管理、共享和组织存储在多项云端服务上的信息的系统和方法
US9887949B2 (en) * 2014-05-31 2018-02-06 Apple Inc. Displaying interactive notifications on touch sensitive devices
US20150350141A1 (en) 2014-05-31 2015-12-03 Apple Inc. Message user interfaces for capture and transmittal of media and location content
US10382378B2 (en) 2014-05-31 2019-08-13 Apple Inc. Live location sharing
WO2016022496A2 (en) 2014-08-06 2016-02-11 Apple Inc. Reduced-size user interfaces for battery management
SG11201701255VA (en) * 2014-08-20 2017-03-30 Touchgram Pty Ltd A system and a method for sending a touch message
JP6349030B2 (ja) 2014-09-02 2018-06-27 アップル インコーポレイテッド アラートを管理するための小型インターフェース
EP3189406B1 (en) 2014-09-02 2022-09-07 Apple Inc. Phone user interface
CN112152904B (zh) 2015-02-16 2022-12-09 钉钉控股（开曼）有限公司 网络交互方法
KR102377277B1 (ko) * 2015-02-27 2022-03-23 삼성전자주식회사 전자 장치에서 커뮤니케이션 지원 방법 및 장치
CN106034068A (zh) 2015-03-20 2016-10-19 阿里巴巴集团控股有限公司 群聊中进行私聊的方法、装置、客户端、服务器及系统
CN105162678B (zh) * 2015-07-07 2022-03-11 腾讯科技（深圳）有限公司 语音聊天的模式自适应方法及装置
US10003938B2 (en) 2015-08-14 2018-06-19 Apple Inc. Easy location sharing
US10409901B2 (en) * 2015-09-18 2019-09-10 Microsoft Technology Licensing, Llc Providing collaboration communication tools within document editor
US9559995B1 (en) * 2015-10-19 2017-01-31 Meteors Information Systems Limited System and method for broadcasting contents from web-based browser to a recipient device using extensible messaging and presence protocol (XMPP)
CN105610695B (zh) 2015-12-21 2021-01-12 阿里巴巴集团控股有限公司 对象分配方法及装置
CN105681056B (zh) 2016-01-13 2019-03-19 阿里巴巴集团控股有限公司 对象分配方法及装置
CN105812237B (zh) 2016-03-07 2020-12-04 钉钉控股（开曼）有限公司 快速添加提醒对象的方法及装置
CN107306286B (zh) 2016-04-21 2020-12-04 钉钉控股（开曼）有限公司 离线考勤的处理方法及装置
CN107305459A (zh) 2016-04-25 2017-10-31 阿里巴巴集团控股有限公司 语音和多媒体消息的发送方法及装置
CN107368995A (zh) 2016-05-13 2017-11-21 阿里巴巴集团控股有限公司 任务处理方法及装置
CN107846345A (zh) 2016-09-18 2018-03-27 阿里巴巴集团控股有限公司 通讯方法及装置
JP6236510B1 (ja) * 2016-10-31 2017-11-22 Ｌｉｎｅ株式会社 情報処理システム、情報処理方法、および、プログラム
US10680986B1 (en) 2016-12-11 2020-06-09 Snap Inc. Stacked chat conversations
KR102323797B1 (ko) * 2017-05-22 2021-11-09 삼성전자 주식회사 전자 장치 및 그의 정보 공유 방법
WO2020032788A1 (en) * 2018-08-10 2020-02-13 Poqeapp B.V. Computer-implemented method for communication between a first electronic device and a second electronic device
NL2021453B1 (en) * 2018-08-10 2020-02-20 Poqeapp B V Computer-implemented method for communication between a first electronic device and a second electronic device
CN114938360B (zh) * 2019-04-12 2023-04-18 腾讯科技（深圳）有限公司 一种基于即时通讯应用的数据处理方法和装置
JP2023527624A (ja) * 2020-03-20 2023-06-30 ライン プラス コーポレーション コンピュータプログラムおよびアバター表現方法
US11079913B1 (en) 2020-05-11 2021-08-03 Apple Inc. User interface for status indicators
CN112000411B (zh) * 2020-08-18 2023-07-07 青岛海信移动通信技术有限公司 移动终端及其录音通道占用信息的显示方法
KR20240004698A (ko) * 2021-05-28 2024-01-11 니뽄 다바코 산교 가부시키가이샤 정보 처리 방법, 정보 처리 단말, 및 정보 처리 시스템
JP7489152B2 (ja) 2022-02-25 2024-05-23 ビーサイズ株式会社 情報処理端末、情報処理装置、情報処理方法、情報処理プログラム
CN118192924A (zh) * 2023-12-15 2024-06-14 深圳市众鸿科技股份有限公司 智能座舱多通道音频通路设计方法、装置、设备以及介质

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050210394A1 (en) * 2004-03-16 2005-09-22 Crandall Evan S Method for providing concurrent audio-video and audio instant messaging sessions
US6959207B2 (en) * 2000-12-22 2005-10-25 Nokia Corporation Mobile emotional notification application
US20060062382A1 (en) * 2004-09-23 2006-03-23 Sami Ronkainen Method for describing alternative actions caused by pushing a single button
US20060189333A1 (en) * 2003-09-12 2006-08-24 Core Mobility, Inc. Unified interface for voice, text or picture message authoring
US20070036292A1 (en) * 2005-07-14 2007-02-15 Microsoft Corporation Asynchronous Discrete Manageable Instant Voice Messages
US20090180598A1 (en) * 2006-05-02 2009-07-16 Konstantin Othmer Visual voice messaging state synchronization
CN101529874A (zh) * 2006-09-06 2009-09-09 苹果公司 用于具有触摸屏显示器的便携式多功能设备的电话呼入管理
CN101611602A (zh) * 2007-02-20 2009-12-23 斯凯普有限公司 即时消息活动通知
US20100080084A1 (en) * 2008-09-30 2010-04-01 Shaohai Chen Microphone proximity detection
US20100185989A1 (en) * 2008-05-06 2010-07-22 Palm, Inc. User Interface For Initiating Activities In An Electronic Device
US8437744B1 (en) * 2008-04-23 2013-05-07 Zerotouchdigital, Inc. Methods and devices for remote processing of information originating from a mobile communication device

Family Cites Families (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4928302A (en) * 1987-11-06 1990-05-22 Ricoh Company, Ltd. Voice actuated dialing apparatus
US20040145608A1 (en) 2003-01-24 2004-07-29 International Business Machines Corporation User interface for conducting chats over a network
US8346862B2 (en) * 2005-04-28 2013-01-01 Nokia Corporation Mobile communication terminal and method
KR100637327B1 (ko) 2005-08-22 2006-10-20 (주)엠비즈코리아 에스엠에스메시지 수신확인 서비스 방법과, 이를 수행하기위한 이동통신 단말기 및 서비스 시스템
JP4645418B2 (ja) 2005-11-15 2011-03-09 カシオ計算機株式会社 画像メッセージ伝達システム及びプログラム
EP1987659A4 (en) 2006-01-06 2012-09-19 Orative Corp INTEGRATION OF A BUSINESS VOICE MESSAGING IN MOBILE SYSTEMS
US20080055263A1 (en) * 2006-09-06 2008-03-06 Lemay Stephen O Incoming Telephone Call Management for a Portable Multifunction Device
JP4740076B2 (ja) * 2006-09-12 2011-08-03 シャープ株式会社 メッセージ交換端末
WO2008084215A2 (en) * 2007-01-09 2008-07-17 Spinvox Limited Detection of unanswered call in order to give calling party the option to alternatively dictate a text message for delivery to the called party
US20090176517A1 (en) 2008-01-06 2009-07-09 Apple Inc. Multiple Recipient Messaging Service for Mobile Device
US8542804B2 (en) 2008-02-08 2013-09-24 Voxer Ip Llc Voice and text mail application for communication devices
US8060069B1 (en) 2008-04-01 2011-11-15 Sprint Communciations Company L.P. Mobile call outcome display
US8312380B2 (en) * 2008-04-04 2012-11-13 Yahoo! Inc. Local map chat
KR101477743B1 (ko) * 2008-06-16 2014-12-31 삼성전자 주식회사 단말 및 그의 기능 수행 방법
US20130310089A1 (en) * 2008-08-05 2013-11-21 Vasileios John Gianoukos Voice texting over sms
US9070149B2 (en) 2008-09-30 2015-06-30 Apple Inc. Media gifting devices and methods
US8204486B2 (en) 2008-12-19 2012-06-19 Cox Communications, Inc. Dynamic messaging routing and audio-to-text linking for visual voicemail
US20100205539A1 (en) 2009-02-12 2010-08-12 Amivox Ehf. Instant messaging and telephony value added services
CN101854425A (zh) * 2009-04-02 2010-10-06 深圳富泰宏精密工业有限公司 移动装置及其声音模式切换方法
US20110111805A1 (en) 2009-11-06 2011-05-12 Apple Inc. Synthesized audio message over communication links
US9553974B2 (en) 2010-08-11 2017-01-24 Apple Inc. Media/voice binding protocol and related user interfaces
CA2823810C (en) * 2011-01-06 2016-08-09 Research In Motion Limited Delivery and management of status notifications for group messaging
JP5005103B1 (ja) 2011-06-24 2012-08-22 一矢 野中 通話システム
JP5793054B2 (ja) * 2011-10-20 2015-10-14 京セラ株式会社 携帯端末装置、プログラムおよび実行抑制方法
EP3157205B1 (en) * 2011-11-02 2019-03-27 BlackBerry Limited System and method for enabling voice and video communications using a messaging application
CN103959206B (zh) * 2011-12-08 2016-10-19 英特尔公司 用于动态适应虚拟键盘的方法和装置
US10313279B2 (en) * 2011-12-12 2019-06-04 Rcs Ip, Llc Live video-chat function within text messaging environment
US8738715B2 (en) * 2012-01-31 2014-05-27 Global Relay Communications Inc. System and method for processing messages in a messaging service
US10051104B2 (en) * 2012-05-14 2018-08-14 Apple Inc. Delivery/read receipts for electronic messaging
US20140071060A1 (en) * 2012-09-11 2014-03-13 International Business Machines Corporation Prevention of accidental triggers of button events
US8848026B2 (en) 2013-02-01 2014-09-30 Maitland M. DeLand Video conference call conversation topic sharing system
US9226121B2 (en) 2013-08-02 2015-12-29 Whatsapp Inc. Voice communications with real-time status notifications
US9720640B2 (en) * 2013-08-20 2017-08-01 Hallmark Cards, Incorporated Multifunction button

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6959207B2 (en) * 2000-12-22 2005-10-25 Nokia Corporation Mobile emotional notification application
US20060189333A1 (en) * 2003-09-12 2006-08-24 Core Mobility, Inc. Unified interface for voice, text or picture message authoring
US20050210394A1 (en) * 2004-03-16 2005-09-22 Crandall Evan S Method for providing concurrent audio-video and audio instant messaging sessions
US20060062382A1 (en) * 2004-09-23 2006-03-23 Sami Ronkainen Method for describing alternative actions caused by pushing a single button
US20070036292A1 (en) * 2005-07-14 2007-02-15 Microsoft Corporation Asynchronous Discrete Manageable Instant Voice Messages
US20090180598A1 (en) * 2006-05-02 2009-07-16 Konstantin Othmer Visual voice messaging state synchronization
CN101529874A (zh) * 2006-09-06 2009-09-09 苹果公司 用于具有触摸屏显示器的便携式多功能设备的电话呼入管理
CN101611602A (zh) * 2007-02-20 2009-12-23 斯凯普有限公司 即时消息活动通知
US8437744B1 (en) * 2008-04-23 2013-05-07 Zerotouchdigital, Inc. Methods and devices for remote processing of information originating from a mobile communication device
US20100185989A1 (en) * 2008-05-06 2010-07-22 Palm, Inc. User Interface For Initiating Activities In An Electronic Device
US20100080084A1 (en) * 2008-09-30 2010-04-01 Shaohai Chen Microphone proximity detection
CN102625931A (zh) * 2009-07-20 2012-08-01 惠普发展公司，有限责任合伙企业 用于在电子设备中发起活动的用户界面

Also Published As

Publication number Publication date
US10608978B2 (en) 2020-03-31
JP6594871B2 (ja) 2019-10-23
JP6682026B2 (ja) 2020-04-15
US20150040029A1 (en) 2015-02-05
AU2014296808A1 (en) 2016-02-18
AU2014296808B2 (en) 2017-05-18
CN105594163B (zh) 2020-03-03
CA2919439A1 (en) 2015-02-05
WO2015017029A2 (en) 2015-02-05
US11159478B1 (en) 2021-10-26
BR112016002364A2 (pt) 2017-08-01
JP2016531498A (ja) 2016-10-06
US20160323726A1 (en) 2016-11-03
TWI689184B (zh) 2020-03-21
WO2015017029A3 (en) 2015-07-23
IL243770A0 (en) 2016-04-21
MX2016001402A (es) 2016-08-18
US9419935B2 (en) 2016-08-16
JP2019149813A (ja) 2019-09-05
MX358742B (es) 2018-09-03
TW201519600A (zh) 2015-05-16

Similar Documents

Publication Publication Date Title
CN105594163A (zh) 具有实时状态通知的语音通信
CN105580325B (zh) 具有实时状态通知的语音通信
EP2642726A1 (en) Peer-to-peer time limited data sharing
CN112202582B (zh) 群组建立方法、装置、电子设备和存储介质
KR101377853B1 (ko) 그룹 채팅에서의 사용자 인터페이스 방법
KR101637208B1 (ko) 모션이모티콘 제공 시스템, 방법 및 컴퓨터 프로그램이 기록된 기록매체
KR20100066596A (ko) 문자 대화를 지원하는 장치 및 문자 대화 서비스 방법
CN102625246A (zh) 一种手机短信群聊系统及方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP01 Change in the name or title of a patent holder

Address after: California, USA

Patentee after: Woz EPP Co.,Ltd.

Address before: California, USA

Patentee before: WHATSAPP Inc.

CP01 Change in the name or title of a patent holder