CN102414755B - 用于编辑电子消息中的音频或视频附件的设备、方法和图形用户界面 - Google Patents

用于编辑电子消息中的音频或视频附件的设备、方法和图形用户界面 Download PDF

Info

Publication number
CN102414755B
CN102414755B CN201080018968.7A CN201080018968A CN102414755B CN 102414755 B CN102414755 B CN 102414755B CN 201080018968 A CN201080018968 A CN 201080018968A CN 102414755 B CN102414755 B CN 102414755B
Authority
CN
China
Prior art keywords
user
icon
audio
adjustable
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201080018968.7A
Other languages
English (en)
Other versions
CN102414755A (zh
Inventor
F·A·安祖里斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Computer Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apple Computer Inc filed Critical Apple Computer Inc
Publication of CN102414755A publication Critical patent/CN102414755A/zh
Application granted granted Critical
Publication of CN102414755B publication Critical patent/CN102414755B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485Scrolling or panning
    • G06F3/04855Interaction with scrollbars
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/10Office automation; Time management
    • G06Q10/107Computer-aided management of electronic mailing [e-mailing]
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34Indicating arrangements 
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/04Real-time or near real-time messaging, e.g. instant messaging [IM]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/06Message adaptation to terminal or network requirements
    • H04L51/063Content adaptation, e.g. replacement of unsuitable content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H04M1/72439User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for image or video messaging
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72469User interfaces specially adapted for cordless or mobile telephones for operating the device by selecting functions from two or more displayed items, e.g. menus or icons
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/22Details of telephonic subscriber devices including a touch pad, a touch sensor or a touch detector

Abstract

公开了一种在具有显示器和触摸敏感表面的多功能设备上执行的方法。检测对于要在电子消息中发送的音频或视频文件的用户选择。响应于检测到用户的第一输入,音频或视频文件编辑界面被显示。编辑界面包含:时间条、用户可调整开始编辑图标和用户可调整结束编辑图标。用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离被限制为小于等于与文件的预定义的最大允许尺寸对应的距离。响应于检测到用户在触摸敏感表面上的第二输入,在音频或视频文件编辑界面中调整开始编辑图标和结束编辑图标中的至少一个。音频或视频文件被编辑为更短。

Description

用于编辑电子消息中的音频或视频附件的设备、方法和图形用户界面
技术领域
公开的实施例一般涉及可操作来编辑诸如电子邮件和文本消息的电子消息的音频或视频附件的具有显示器和触摸敏感表面的多功能设备。
背景技术
近年来,作为计算机和其它电子计算设备的输入装置的触摸敏感表面的使用明显提高。示例性触摸敏感表面包含触摸板和触摸屏显示器。这种表面被广泛用于操作显示器上的用户界面对象,包含诸如电子邮件和文本消息的电子消息的用户音频或视频附件。但是,当在电子消息中发送音频或视频时,文件尺寸限制会成为问题。因而,希望在发送文件之前减小音频或视频文件的尺寸。并且,由于减少传送时间会节省能量,因此允许用户选择发送音频或视频文件的子集是有用的。在电池操作的设备中,该后一种考虑是特别重要的。
但是,通过触摸板或触摸屏显示器上的输入有效地执行这些编辑会是十分麻烦的。
因此,需要计算设备具有更快、更有效的用于编辑诸如电子邮件和文本消息的电子消息的音频或视频附件的方法和界面。对于电池操作的计算设备,这种方法和界面通过减少传送时间节省能量,由此延长电池充电之间的时间。
发明内容
通过公开的设备,减少或消除与通过诸如电子邮件和文本消息的电子消息发送音频或视频附件的具有显示器和触摸敏感表面的多功能设备相关的以上缺点和其它问题。
在一些实施例中,设备是台式计算机。在一些实施例中,设备是便携式的(例如,笔记本计算机或手持设备)。在一些实施例中,设备具有触摸板。在一些实施例中,设备具有触摸敏感显示器(也称为“触摸屏”或“触摸屏显示器”)。在一些实施例中,设备具有图形用户界面(GUI)、一个或多个处理器、存储器和一个或多个模块、存储于存储器中的用于执行多个功能的程序或多组指令。在一些实施例中,用户主要通过触摸敏感表面上的手指接触和姿态与GUI交互。在一些实施例中,功能可包含图像编辑、绘图、呈现、字处理、站点创建、盘编写、电子数据表制作、玩游戏、电话、视频会议、电子邮件、即时消息、训练支撑、数字照相、数字视频、网络浏览、数字音乐播放和/或数字视频播放。可以在被配置为通过一个或多个处理器执行的计算机可读存储介质或其它计算机程序产品中包含用于执行这些功能的可执行指令。
根据一些实施例,在具有显示器和触摸敏感表面的多功能设备上执行一种方法。所述方法包括:检测对于要在电子消息中发送的音频或视频文件的用户选择,其中,音频或视频文件具有初始持续时间;检测用户的第一输入;和响应于检测到用户的第一输入,显示音频或视频文件编辑界面。音频或视频文件编辑界面包含:表示具有初始持续时间的音频或视频文件的具有长度的时间条;用户可调整开始编辑图标;和用户可调整结束编辑图标。用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离小于时间条的长度。用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离被限制为小于等于与音频或视频文件的预定义的最大允许尺寸对应的距离。所述方法还包括:检测用户在触摸敏感表面上的第二输入;响应于检测到用户在触摸敏感表面上的第二输入,调整音频或视频文件编辑界面中的开始编辑图标和结束编辑图标中的至少一个;和根据对于音频或视频文件编辑界面中的开始编辑图标和结束编辑图标的调整将音频或视频文件编辑为第二更短持续时间。
根据一些实施例,一种在多功能设备上的图形用户界面,所述多功能设备具有显示器、触摸敏感表面、存储器和执行存储于存储器中的一个或多个程序的一个或多个处理器,所述图形用户界面包括包含以下的音频或视频文件编辑界面:表示具有初始持续时间的音频或视频文件的具有长度的时间条;用户可调整开始编辑图标;和用户可调整结束编辑图标。用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离小于时间条的长度。用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离被限制为小于等于与音频或视频文件的预定义的最大允许尺寸对应的距离。对于要在电子消息中发送的音频或视频文件的用户选择被检测,其中,音频或视频文件具有初始持续时间。响应于检测到用户的第一输入,音频或视频文件编辑界面被显示。响应于检测到用户在触摸敏感表面上的第二输入,音频或视频文件编辑界面中的开始编辑图标和结束编辑图标中的至少一个被调整。根据对于音频或视频文件编辑界面中的开始编辑图标和结束编辑图像中的调整,音频或视频文件被编辑为第二更短持续时间。
根据一些实施例,一种多功能设备包括:显示器;触摸敏感表面;一个或多个处理器;存储器;和一个或多个程序。一个或多个程序被存储于存储器中并被配置为由一个或多个处理器执行。一个或多个程序包含用于执行以下操作的指令:检测对于要在电子消息中发送的音频或视频文件的用户选择,其中,音频或视频文件具有初始持续时间;检测用户的第一输入;和响应于检测到用户的第一输入,显示音频或视频文件编辑界面。音频或视频文件编辑界面包含:表示具有初始持续时间的音频或视频文件的具有长度的时间条;用户可调整开始编辑图标;和用户可调整结束编辑图标。用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离小于时间条的长度。用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离被限制为小于等于与音频或视频文件的预定义的最大允许尺寸对应的距离。所述一个或多个程序还包括用于执行以下操作的指令:检测用户在触摸敏感表面上的第二输入;响应于检测到用户在触摸敏感表面上的第二输入,调整音频或视频文件编辑界面中的开始编辑图标和结束编辑图标中的至少一个;和根据对于音频或视频文件编辑界面中的开始编辑图标和结束编辑图标的调整将音频或视频文件编辑为第二更短持续时间。
根据一些实施例,一种计算机可读存储介质在其中存储有指令,这些指令在被具有显示器和触摸敏感表面的多功能设备执行时使得多功能设备:检测对于要在电子消息中发送的音频或视频文件的用户选择,其中,音频或视频文件具有初始持续时间;检测用户的第一输入;和响应于检测到用户的第一输入,显示音频或视频文件编辑界面。音频或视频文件编辑界面包含:表示具有初始持续时间的音频或视频文件的具有长度的时间条;用户可调整开始编辑图标;和用户可调整结束编辑图标。用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离小于时间条的长度。用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离被限制为小于等于与音频或视频文件的预定义的最大允许尺寸对应的距离。所述指令还使得所述多功能设备:检测用户在触摸敏感表面上的第二输入;响应于检测到用户在触摸敏感表面上的第二输入,调整音频或视频文件编辑界面中的开始编辑图标和结束编辑图标中的至少一个;和根据对于音频或视频文件编辑界面中的开始编辑图标和结束编辑图标的调整将音频或视频文件编辑为第二更短持续时间。
根据一些实施例,一种多功能设备包括:显示器;触摸敏感表面;用于检测对于要在电子消息中发送的音频或视频文件的用户选择的装置,其中,音频或视频文件具有初始持续时间;用于检测用户的第一输入的装置;和响应于检测到用户的第一输入,用于显示音频或视频文件编辑界面的装置。音频或视频文件编辑界面包含:表示具有初始持续时间的音频或视频文件的具有长度的时间条;用户可调整开始编辑图标;和用户可调整结束编辑图标。用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离小于时间条的长度。用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离被限制为小于等于与音频或视频文件的预定义的最大允许尺寸对应的距离。所述多功能设备还包括:用于检测用户在触摸敏感表面上的第二输入的装置;响应于检测到用户在触摸敏感表面上的第二输入,用于调整音频或视频文件编辑界面中的开始编辑图标和结束编辑图标中的至少一个的装置;和用于根据对于音频或视频文件编辑界面中的开始编辑图标和结束编辑图标的调整而将音频或视频文件编辑为第二更短持续时间的装置。
根据一些实施例,一种用于具有显示器和触摸敏感表面的多功能设备中的信息处理装置包括:用于检测对于要在电子消息中发送的音频或视频文件的用户选择的装置,其中,音频或视频文件具有初始持续时间;用于检测用户的第一输入的装置;和响应于检测到用户的第一输入,用于显示音频或视频文件编辑界面的装置。音频或视频文件编辑界面包含:表示具有初始持续时间的音频或视频文件的具有长度的时间条、用户可调整开始编辑图标和用户可调整结束编辑图标。用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离小于时间条的长度。用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离被限制为小于等于与音频或视频文件的预定义的最大允许尺寸对应的距离。所述信息处理装置还包括:用于检测用户在触摸敏感表面上的第二输入的装置;响应于检测到用户在触摸敏感表面上的第二输入,用于调整音频或视频文件编辑界面中的开始编辑图标和结束编辑图标中的至少一个的装置;和用于根据对于音频或视频文件编辑界面中的开始编辑图标和结束编辑图标的调整而将音频或视频文件编辑为第二更短持续时间的装置。
根据一些实施例,在具有显示器和触摸敏感表面的多功能设备上执行一种方法。所述方法包括:显示用户在显示器上草拟的电子消息,其中,电子消息包含具有初始持续时间的音频或视频附件;检测用户的第一输入;和响应于检测到用户的第一输入,显示附件编辑界面。附件编辑界面包含:表示具有初始持续时间的音频或视频附件的具有长度的时间条、用户可调整开始编辑图标和用户可调整结束编辑图标。用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离小于时间条的长度。用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离被限制为小于等于与音频或视频附件的预定义的最大允许尺寸对应的距离。所述方法还包括:检测用户在触摸敏感表面上的第二输入;响应于检测到用户在触摸敏感表面上的第二输入,调整附件编辑界面中的开始编辑图标和结束编辑图标中的至少一个;根据对于附件编辑界面中的开始编辑图标和结束编辑图标的调整而将音频或视频附件编辑为第二更短持续时间;检测用户的第三输入;和响应于检测到用户的第三输入,启动电子消息的发送。电子消息包含具有第二更短持续时间的编辑后的音频或视频附件。
根据一些实施例,一种多功能设备包括显示器、触摸敏感表面、一个或多个处理器、存储器和一个或多个程序。一个或多个程序被存储于存储器中并被配置为由一个或多个处理器执行。一个或多个程序包含用于执行以下操作的指令:显示用户在显示器上正在草拟的电子消息,其中,电子消息包含具有初始持续时间的音频或视频附件;检测用户的第一输入;和响应于检测到用户的第一输入,显示附件编辑界面。附件编辑界面包含:表示具有初始持续时间的音频或视频附件的具有长度的时间条、用户可调整开始编辑图标和用户可调整结束编辑图标。用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离小于时间条的长度。用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离被限制为小于等于与音频或视频附件的预定义的最大允许尺寸对应的距离。一个或多个程序还包括用于执行以下操作的指令:检测用户在触摸敏感表面上的第二输入;响应于检测到用户在触摸敏感表面上的第二输入,调整附件编辑界面中的开始编辑图标和结束编辑图标中的至少一个;根据对于附件编辑界面中的开始编辑图标和结束编辑图标的调整而将音频或视频附件编辑为第二更短持续时间;检测用户的第三输入;和响应于检测到用户的第三输入,启动电子消息的发送。电子消息包含具有第二更短持续时间的编辑后的音频或视频附件。
根据一些实施例,一种计算机可读存储介质在其中存储有指令,这些指令在被具有显示器和触摸敏感表面的多功能设备执行时使得所述多功能设备:显示用户在显示器上草拟的电子消息,其中,电子消息包含具有初始持续时间的音频或视频附件;检测用户的第一输入;和响应于检测到用户的第一输入,显示附件编辑界面。附件编辑界面包含:表示具有初始持续时间的音频或视频附件的具有长度的时间条、用户可调整开始编辑图标和用户可调整结束编辑图标。用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离小于时间条的长度。用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离被限制为小于等于与音频或视频附件的预定义的最大允许尺寸对应的距离。所述指令还使得所述多功能设备:检测用户在触摸敏感表面上的第二输入;响应于检测到用户在触摸敏感表面上的第二输入,调整附件编辑界面中的开始编辑图标和结束编辑图标中的至少一个;根据对于附件编辑界面中的开始编辑图标和结束编辑图标的调整而将音频或视频附件编辑为第二更短持续时间;检测用户的第三输入;和响应于检测到用户的第三输入,启动电子消息的发送。电子消息包含具有第二更短持续时间的编辑后的音频或视频附件。
根据一些实施例,一种在多功能设备上的图形用户界面,所述多功能设备具有显示器、触摸敏感表面、存储器和执行存储于存储器中的一个或多个程序的一个或多个处理器,所述图形用户界面包括显示用户在显示器上正在草拟的电子消息的电子消息应用。电子消息包含具有初始持续时间的音频或视频附件。响应于检测到用户的第一输入,显示附件编辑界面。附件编辑界面包含:表示具有初始持续时间的音频或视频附件的具有长度的时间条、用户可调整开始编辑图标和用户可调整结束编辑图标。用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离小于时间条的长度。用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离被限制为小于等于与音频或视频附件的预定义的最大允许尺寸对应的距离。响应于检测到用户在触摸敏感表面上的第二输入,在附件编辑界面中调整开始编辑图标和结束编辑图标中的至少一个。根据对于附件编辑界面中的开始编辑图标和结束编辑图标的调整而将音频或视频附件编辑为第二更短持续时间。响应于检测到用户的第三输入,启动电子消息的发送。电子消息包含具有第二更短持续时间的编辑后的音频或视频附件。
根据一些实施例,一种多功能设备包括:显示器;触摸敏感表面;用于显示用户在显示器上正在草拟的电子消息的装置,其中,电子消息包含具有初始持续时间的音频或视频附件;用于检测用户的第一输入的装置;和响应于检测到用户的第一输入,用于显示附件编辑界面的装置。附件编辑界面包含:表示具有初始持续时间的音频或视频附件的具有长度的时间条、用户可调整开始编辑图标和用户可调整结束编辑图标。用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离小于时间条的长度。用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离被限制为小于等于与音频或视频附件的预定义的最大允许尺寸对应的距离。所述多功能设备还包括:用于检测用户在触摸敏感表面上的第二输入的装置;响应于检测到用户在触摸敏感表面上的第二输入,用于调整附件编辑界面中的开始编辑图标和结束编辑图标中的至少一个的装置;用于根据对于附件编辑界面中的开始编辑图标和结束编辑图标的调整而将音频或视频附件编辑为第二更短持续时间的装置;用于检测用户的第三输入的装置;和响应于检测到用户的第三输入,用于启动电子消息的发送的装置,其中电子消息包含具有第二更短持续时间的编辑后的音频或视频附件。
根据一些实施例,一种用于具有显示器和触摸敏感表面的多功能设备中的信息处理装置包括:用于显示用户在显示器上正在草拟的电子消息的装置,其中,电子消息包含具有初始持续时间的音频或视频附件;用于检测用户的第一输入的装置;和响应于检测到用户的第一输入,用于显示附件编辑界面的装置。附件编辑界面包含:表示具有初始持续时间的音频或视频附件的具有长度的时间条、用户可调整开始编辑图标和用户可调整结束编辑图标。用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离小于时间条的长度。用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离被限制为小于等于与音频或视频附件的预定义的最大允许尺寸对应的距离。所述信息处理装置还包括:用于检测用户在触摸敏感表面上的第二输入的装置;响应于检测到用户在触摸敏感表面上的第二输入,用于调整附件编辑界面中的开始编辑图标和结束编辑图标中的至少一个的装置;用于根据对于附件编辑界面中的开始编辑图标和结束编辑图标的调整而将音频或视频附件编辑为第二更短持续时间的装置;用于检测用户的第三输入的装置;和响应于检测到用户的第三输入,用于启动电子消息的发送的装置,其中电子消息包含具有第二更短持续时间的编辑后的音频或视频附件。
因此,具有显示器和触摸敏感表面的多功能设备具有用于编辑电子消息的音频或视频附件的有效的方法和界面,由此提高了这种设备的有效性、效率和用户满意度。
附图说明
为了更好地理解本发明的上述实施例及其其它的实施例,应结合附图参照以下的具体实施方式,在附图中,类似的附图标记始终指示相应的部分。
图1A和图1B是示出根据一些实施例的具有触摸敏感显示器的便携式多功能设备的框图。
图2示出根据一些实施例的具有触摸屏的便携式多功能设备。
图3是根据一些实施例的具有显示器和触摸敏感表面的示例性计算设备的框图。
图4A~4B示出根据一些实施例的便携式多功能设备上的应用的菜单的示例性用户界面。
图4C示出根据一些实施例的用于将便携式电子设备解锁的示例性用户界面。
图5A~5Q示出根据一些实施例的具有显示器和触摸敏感表面的多功能设备上的用于编辑电子消息的音频或视频附件的示例性用户界面。
图6A~6C是示出根据一些实施例的编辑电子消息的音频或视频附件的方法的流程图。
图7A~7J示出根据一些实施例的用于编辑要在电子消息中发送的音频或视频文件的示例性用户界面。
图8A~8B是示出根据一些实施例的将音频或视频文件编辑为电子消息的方法的流程图。
图9A~9B示出根据一些实施例的用于记录要在电子消息中发送的音频文件的示例性用户界面。
具体实施方式
现在详细参照实施例,在附图中示出了这些实施例的例子。在以下的详细描述中,为了使得能够彻底地理解本发明,阐述大量的特定细节。但是,本领域技术人员很容易理解,可以在没有这些特定细节的情况下实施本发明。在其它情况下,公知的方法、过程、部件、电路和网络没有被详细描述,以不至于不必要地混淆实施例的各方面。
还应理解,虽然这里可以使用术语第一、第二等来描述各种要素,但是,这些要素不应受这些术语限制。这些术语仅仅用于使要素相互区分开。例如,在不背离本发明的范围的情况下,第一接触可被称为第二接触,并且类似地,第二接触可被称为第一接触。第一接触和第二接触均是接触,但是,它们不是同一接触。
这里在本发明的描述中使用的术语仅出于描述特定实施例的目的,而不是意欲限制本发明。如在本发明的描述和所附的权利要求中使用的那样,除非上下文另外明确指出,否则单数形式“一(a,an,the)”也意欲包括复数形式。还应理解,这里使用的术语“和/或”指的是并且包含相关联地列出的项中的一个或多个的任意和所有可能的组合。还应理解,在本说明书中使用的术语“包含”和/或“包括”规定陈述的特征、整数、步骤、操作、元件和/或部件的存在,但不排除一个或多个其它的特性、整数、步骤、操作、元件、部件和/或它们的组的存在或添加。
如这里使用的那样,根据上下文,术语“如果”可被解释为意味着“当...时”或“一旦”或“响应于确定”或“响应于检测到”。类似地,根据上下文,短语“如果确定”或者“如果检测到[陈述的条件或事件]”可被解释为意味着“一旦确定”或“响应于确定”或“一旦检测到[陈述的条件或事件]”或“响应于检测到[陈述的条件或事件]”。
描述了计算设备、用于这种设备的用户界面和用于使用这种设备的相关处理的实施例。在一些实施例中,计算设备是还包含诸如PDA和/或音乐播放器功能之类的其它功能的诸如移动电话之类的便携式通信设备。便携式多功能设备的示例性实施例包含但不限于来自Apple Computer,Inc.of Cupertino,California的和iPod
在以下的讨论中,描述了包含显示器和触摸敏感表面的计算设备。但应理解,计算设备可包括诸如物理键盘、鼠标和/或游戏杆之类的一个或多个其它的物理用户界面装置。
设备支持诸如以下应用中的一个或多个应用之类的各种应用:绘图应用、演示应用、字处理应用、站点创建应用、盘编写应用、电子数据表制作应用、游戏应用、电话应用、视频会议应用、电子邮件应用、即时消息应用、语音备忘录应用、照片管理应用、数字照相机应用、数字视频照相机应用、网络浏览应用、数字音乐播放器应用和/或数字视频播放器应用。
可在设备上执行的各种应用可以使用至少一个诸如触摸敏感表面之类的常用的物理用户界面装置。可以调整和/或从一种应用到下一种应用和/或在相应的应用内改变触摸敏感表面的一个或多个功能以及在设备上显示的对应信息。以这种方式,设备的常用的物理架构(诸如,触摸敏感表面)可利用直观且透明的用户界面支持各种应用。
用户界面可包含一个或多个软键盘实施例。软键盘实施例可包含在键盘的所显示图标上的符号的标准(QWERTY)和/或非标准配置,诸如在2006年7月24日提交的名为“Keyboards For PortableElectronic Devices”的美国专利申请11/459,606和2006年7月24日提交的名为“Touch Screen Keyboards For Portable ElectronicDevices”的美国专利申请11/459,615中所述,在此加入这些专利申请的全部内容作为参考。相对于现有物理键盘(诸如,用于打字机的物理键盘)中的键的数量,键盘实施例可包含减少数量的图标(或软键)。这可以使得用户更容易选择键盘中的一个或多个图标,并由此选择一个或多个相应的符号。键盘实施例可以是自适应的。例如,可根据诸如选择一个或多个图标和/或一个或多个相应的符号之类的用户动作修改显示的图标。设备上的一个或多个应用可利用公用和/或不同的键盘实施例。因此,可对于应用中的至少一些应用定制所使用的键盘实施例。在一些实施例中,可对于相应的用户定制一个或多个键盘实施例。例如,可基于相应用户的字使用历史(词典、俚语、个人使用)对于相应的用户定制一个或多个键盘实施例。当使用软键盘实施例时,键盘实施例中的一些可被调整以减少在选择一个或多个图标并由此选择一个或多个符号时用户错误的概率。
现在关注具有触摸敏感显示器的便携式设备的实施例。图1A和图1B是示出根据一些实施例的具有触摸敏感显示器112的便携式多功能设备100的框图。触摸敏感显示器112有时为了方便被称为“触摸屏”,并且也可被称为或叫做触摸敏感显示器系统。设备100可包含存储器102(其可包含一个或多个计算机可读存储介质)、存储器控制器122、一个或多个处理单元(CPU)120、外设接口118、RF电路108、音频电路110、扬声器111、麦克风113、输入/输出(I/O)子系统106、其它输入或控制装置116和外部端口124。设备100可包含一个或多个光学传感器164。这些部件可经由一个或多个通信总线或信号线103进行通信。
应当理解,设备100仅为便携式多功能设备100的一个例子,并且,设备100可具有比示出的部件更多或更少的部件,可以组合两个或更多个部件,或者可具有部件的不同配置或布置。可以以硬件、软件或包含一个或多个信号处理和/或专用集成电路的硬件和软件的组合来实现图1A和图1B所示的各种部件。
存储器102可包含高速随机存取存储器,并且也可包含非易失性存储器,诸如一个或多个磁盘存储设备、闪速存储设备或其它的非易失性固态存储设备。可通过存储器控制器122控制诸如CPU 120和外设接口118之类的设备100的其它部件对于存储器102的访问。
外设接口118使设备的输入和输出外设与CPU 120和存储器102耦合。一个或多个处理器120运行或执行存储于存储器102中的各种软件程序和/或多组指令,以执行设备100的各种功能并处理数据。
在一些实施例中,可在诸如芯片104之类的单个芯片上实现外设接口118、CPU 120和存储器控制器122。在一些其它实施例中,可以在分立的各芯片上实现它们。
RF(射频)电路108接收和发送也称为电磁信号的RF信号。RF电路108将电磁信号转换为电信号和/或将电信号转换成电磁信号,并且通过电磁信号与通信网络和其它通信设备通信。RF电路108可包含用于执行这些功能的公知电路,包括但不限于天线系统、RF收发器、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、CODEC芯片组、订户身份模块(SIM)卡和存储器等。RF电路108可通过无线通信与网络和其它设备通信,所述网络是诸如也被称为万维网(WWW)的因特网、内联网和/或诸如蜂窝电话网络、无线局域网络(LAN)和/或都市区域网络(MAN)的无线网络。无线通信可使用多种通信标准、协议和技术中的任一种,包含但不限于全球移动通讯系统(GSM)、增强型数据GSM环境(EDGE)、高速下行链路分组接入(HSDPA)、宽带码分多址(W-CDMA)、码分多址(CDMA)、时分多址(TDMA)、蓝牙、无线高保真(Wi-Fi)(例如,IEEE 802.11a、IEEE 802.11b、IEEE 802.11g和/或IEEE 802.11n)、基于IP的语音(VoIP)、Wi-MAX、用于电子邮件的协议(例如,互联网邮件访问协议(Internet Message Access Protocol,IMAP)和/或邮局协议(Post Office Protocol,POP))、即时消息(例如,可扩展消息与存在协议(XMPP))、针对即时信息和现场支持扩展的会话初始化协议(Session Initiation Protocol for Instant Messaging andPresence Leveraging Extensions,SIMPLE)、即时消息收发和存在服务(Instant Messaging and Presence Service,IMPS))和/或短消息服务(SMS))或包含到本文档的提交日期为止还没有开发出来的通信协议的任何其它适当的通信协议。
音频电路110、扬声器111和麦克风113在用户和设备100之间提供音频接口。音频电路110从外设接口118接收音频数据,将音频数据转换成电信号,并且将电信号传送到扬声器111。扬声器111将电信号转换成人可听到的音波。音频电路110还接收由麦克风113从音波转换来的电信号。音频电路110将电信号转换成音频数据,并且将音频数据传送到外设接口118以供处理。可通过外设接口118从存储器102和/或RF电路108检索和/或向其传送音频数据。在一些实施例中,音频电路110还包含头戴式耳机插孔(例如,212,图2)。头戴式耳机插孔提供音频电路110和诸如仅有输出的头戴式耳机或具有输出(例如,用于单耳或双耳的头戴式耳机)和输入(例如,麦克风)的头戴式耳机之类的可去除音频输入/输出外设之间的接口。
I/O子系统106使诸如触摸屏112和其它输入/控制装置116之类的设备100上的输入/输出外设与外设接口118耦合。I/O子系统106可包含显示控制器156和用于其它输入或控制装置的一个或多个输入控制器160。一个或多个输入控制器160从/向其它输入或控制装置116接收/发送电信号。其它输入/控制装置116可包含物理按钮(例如,按钮、摇式按钮等)、拨号盘、滑条开关、游戏杆和点击轮等。在一些替代性实施例中,输入控制器(一个或多个)160可与键盘、红外端口、USB端口和诸如鼠标之类的指示器件中的任一个耦合(或者不与其中的任一个耦合)。一个或多个按钮(例如,208,图2)可包含用于扬声器111和/或麦克风113的音量控制的上/下按钮。一个或多个按钮可包含推动按钮(例如,206,图2)。如在2005年12月23日提交的名为“Unlocking a Device by Performing Gestures on anUnlock Image”的美国专利申请11/322,549中描述的那样,推动按钮的快速按压可释放触摸屏112的锁定或者开始用户在触摸屏上做姿态以使设备解锁的处理,在此加入该专利申请的全部内容作为参考。推动按钮(例如,206)的更长的按压可接通或关断设备100的电力。用户能够定制按钮中的一个或多个按钮的功能。触摸屏112被用于实现虚拟或软按钮和一个或多个软键盘。
触摸敏感触摸屏112提供设备和用户之间的输入界面和输出界面。显示控制器156从/向触摸屏112接收和/或发送电信号。触摸屏112向用户显示虚拟输出。视觉输出可包含图形、文本、图标、视频和它们的任意组合(统称为“图形”)。在一些实施例中,视觉输出中的一些或全部可与用户界面对象对应。
触摸屏112具有基于触觉和/或感觉接触接收来自用户的输入的触摸敏感表面、传感器或传感器组。触摸屏112和显示控制器156(连同任何相关的模块和/或存储器102中的多组指令)检测触摸屏112上的接触(和接触的任何移动或中断)并且将检测到的接触转换成与在触摸屏上显示的用户界面对象(例如,一个或多个软键、图标、网页或图像)的交互作用。在示例性实施例中,触摸屏112和用户之间的接触点与用户的手指对应。
虽然可以在其它实施例中使用其它显示技术,但是,触摸屏112可使用LCD(液晶显示器)技术或LPD(发光聚合物显示器)技术。触摸屏112和显示控制器156可通过使用包含但不限于电容、电阻、红外和表面声波技术以及用于确定与触摸屏112的一个或多个接触点的其它接近性传感器阵列或其它元件的现在已知或者以后开发的多种触摸感测技术中的任一种检测接触及其任何移动或其中断。在示例性实施例中,使用诸如在来自Apple Computer,Inc.of Cupertino,California的和iPod中发现的技术之类的投影互电容感测技术。
触摸屏112的一些实施例中的触摸敏感显示器可与在美国专利6,323,846(Westerman等)、美国专利6,570,557(Westerman等)和/或美国专利6,677,932(Westerman)和/或美国专利公开2002/0015024A1中描述的多触摸敏感写字板类似,在此加入它们中的每一个的全部内容作为参考。但是,触摸屏112显示来自便携式设备100的视觉输出,而触摸敏感写字板不提供视觉输出。
触摸屏112的一些实施例中的触摸敏感显示器可以如在以下申请中描述的那样:(1)在2006年5月2日提交的美国专利申请No.11/381,313“Multipoint Touch Surface Controller”;(2)在2004年5月6日提交的美国专利申请No.10/840,862“MultipointTouchscreen”;(3)在2004年7月30日提交的美国专利申请No.10/903,964“Gestures For Touch Sensitive Input Devices”;(4)在2005年1月31日提交的美国专利申请No.11/048,264“Gestures ForTouch Sensitive Input Devices”;(5)在2005年1月18日提交的美国专利申请No.11/038,590“Mode-Based Graphical User InterfacesFor Touch Sensitive Input Devices”;(6)在2005年9月16日提交的美国专利申请No.11/228,758“Virtual Input Device Placement On ATouch Screen User Interface”;(7)在2005年9月16日提交的美国专利申请No.11/228,700“Operation Of A Computer With A TouchScreen Interface”;(8)在2005年9月16日提交的美国专利申请No.11/228,737“Activating Virtual Keys Of A Touch-Screen VirtualKeyboard”;(9)在2006年3月3日提交的美国专利申请No.11/367,749“Multi-Functional Hand-Held Device”。在此加入所有的这些申请的全部内容作为参考。
触摸屏112可具有超过100dpi的分辨率。在示例性实施例中,触摸屏具有约160dpi的分辨率。用户可通过使用诸如尖笔(stylus)和手指等的任何适当的物体或附属物与触摸屏112接触。在一些实施例中,用户界面被设计为主要通过基于手指的接触和姿态工作,由于触摸屏上的手指的接触面积较大,因此这种基于手指的接触和姿态不如基于尖笔的输入那么精确。在一些实施例中,设备将粗略的基于手指的输入翻译成精确的指示器/光标位置或用于执行用户希望的动作的命令。
在一些实施例中,除了触摸屏以外,设备100还可包含用于激活或去激活特定功能的触摸板(未示出)。在一些实施例中,与触摸屏不同,触摸板是设备的不显示视觉输出的触摸敏感区域。触摸板可以是与触摸屏112分开的触摸敏感表面或由触摸屏形成的触摸敏感表面的扩展。
在一些实施例中,设备100可包含物理或虚拟的点击轮作为输入控制装置116。用户可通过旋转点击轮或通过移动与点击轮的接触点(例如,通过其相对于点击轮的中心点的角位移来测量接触点的移动量),在触摸屏112中显示的一个或多个图形对象(例如,图标)之间导航或与所述图形对象交互作用。点击轮也可被用于选择显示的图标中的一个或多个。例如,用户可按下点击轮或相关按钮的至少一部分。可通过输入控制器160以及模块中的一个或多个和/或存储器102中的多组指令来处理用户通过点击轮提供的用户命令和导航命令。对于虚拟点击轮,点击轮和点击轮控制器可分别是触摸屏112和显示控制器156的一部分。对于虚拟点击轮,点击轮可以是响应于与设备的用户交互作用而在触摸屏显示器上出现和消失的不透明或半透明的对象。在一些实施例中,在便携式多功能设备的触摸屏上显示并且通过与触摸屏的用户接触操作虚拟点击轮。
设备100还包含用于对各种部件供电的电力系统162。电力系统162可包含电力管理系统、一个或多个电源(例如,电池、交变电流(AC))、再充电系统、电力失效检测电路、电力转换器或逆变器、电力状态指示器(例如,发光二极管(LED))和与便携式设备中的电力的产生、管理和分布相关的任何其它部件。
设备100还可包含一个或多个光学传感器164。图1A和图1B示出与I/O子系统106中的光学传感器控制器158耦合的光学传感器。光学传感器164可包含电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS)光电晶体管。光学传感器164接收通过一个或多个透镜投影的来自环境的光,并且将光转换成代表图像的数据。与成像模块143(也称为照相机模块)结合,光学传感器164可捕获静止图像或视频。在一些实施例中,光学传感器位于与设备前面的触摸屏显示器112相对的设备100的后面,以使得触摸屏显示器可被用作用于静止和/或视频图像获取的取景器。在一些实施例中,光学传感器位于设备的前面,以使得在用户在触摸屏显示器上观看其它视频会议参与者的同时为进行视频会议而获得用户的图像。在一些实施例中,可由用户改变光学传感器164的位置(例如,通过旋转设备外壳内的透镜和传感器),以使得单个光学传感器164可以与触摸屏显示器一起使用,以用于视频会议和静止和/或视频图像获取。
设备100还可包含一个或多个接近度传感器166。图1A和图1B示出与外设接口118耦合的接近度传感器166。作为替代方案,接近度传感器166可与I/O子系统106中的输入控制器160耦合。接近度传感器166可如美国专利申请No.11/241,839,“Proximity Detector InHandheld Device”;美国专利申请No.11/240,788,“Proximity DetectorIn Handheld Device”;美国专利申请No.11/620,702,“Using AmbientLight Sensor To Augment Proximity Sensor Output”;美国专利申请No.11/586,862,“Automated Response To And Sensing Of UserActivity In Portable Devices”;和美国专利申请No.11/638,251,“Methods And Systems For Automatic Configuration OfPeripherals”中描述的那样执行操作,在此加入它们的全部内容作为参考。在一些实施例中,当多功能设备位于用户的耳朵附近时(例如,当用户进行电话呼叫时),接近度传感器关断并禁用触摸屏112。在一些实施例中,当设备处于用户的口袋、提包或其它黑暗区域中时,接近度传感器使屏幕保持关闭,以防止在设备处于锁定状态时的不必要的电池泄漏。
设备100还可包含一个或多个加速计168。图1A和图1B示出与外设接口118耦合的加速计168。作为替代方案,加速计168可与I/O子系统106中的输入控制器160耦合。加速计168可如美国专利公开No.20050190059“Acceleration-based Theft Detection System forPortable Electronic Devices”和美国专利公开No.20060017692“Methods And Apparatuses For Operating A Portable Device BasedOn An Accelerometer”中描述的那样执行操作,在此加入这两个专利公开的全部内容作为参考。在一些实施例中,基于从一个或多个加速计接收的数据的分析,以横向或以纵向在触摸屏显示器上显示信息。
在一些实施例中,存储于存储器102中的软件部件可包含操作系统126、通信模块(或一组指令)128、接触/移动模块(或一组指令)130、图形模块(或一组指令)132、文本输入模块(或一组指令)134、全球定位系统(GPS)模块(或一组模块)135和应用(或一组指令)136。
操作系统126(例如,Darwin、RTXC、LINUX、UNIX、OS X、WINDWOS或诸如VxWorks的嵌入式操作系统)包含用于控制和管理一般系统任务(例如,存储器管理、存储设备控制、电力管理等)的各种软件部件和/或驱动器,并且有利于各种硬件和软件部件之间的通信。
通信模块128有利于经由一个或多个外部端口124与其它设备的通信,并且还包含用于处理由RF电路108和/或外部端口124接收的数据的各种软件部件。外部端口124(例如,Universal Serial Bus(USB),FIREWIRE等)适于直接地与其它设备耦合或经由网络(例如,因特网、无线LAN等)间接地与其它设备耦合。在一些实施例中,外部端口是与在iPOD(Apple Computer,Inc.的商标)设备上使用的30针连接器相同、类似和/或兼容的多针(例如,30针)连接器。
接触/移动模块130可检测与触摸屏112(与显示控制器156结合)和其它触摸敏感设备(例如,触摸板或物理点击轮)的接触。接触/移动模块130包含各种软件部件,这些软件部件用于执行与接触的检测有关的各种操作,诸如确定是否发生接触(例如,检测手指向下事件)、确定是否存在接触的移动并且跟踪在触摸敏感表面上的移动(例如,检测一个或多个手指拖动事件)以及确定是否停止接触(即,检测手指向上事件或接触的中断)。接触/移动模块130从触摸敏感表面接收接触数据。确定由一系列接触数据表示的接触点的移动可包含确定接触点的速度(大小)、速度(大小和方向)和/或加速度(大小和/或方向的变化)。这些操作可被应用于各单个接触(例如,一个手指接触)或多个同时的接触(例如,“多触摸”/多手指接触)。在一些实施例中,接触/移动模块130和显示控制器156检测触摸板上的接触。在一些实施例中,接触/移动模块130和控制器160检测点击轮上的接触。
接触/移动模块130可检测用户的姿态输入。触摸敏感表面上的不同姿态具有不同的接触图案。因此,可通过检测特定的接触图案来检测姿态。例如,检测手指轻敲姿态包含检测手指向下事件和随后检测在与手指向下事件(例如,在图标的位置上)相同的位置(或基本上相同的位置)上的手指向上事件。作为另一例子,检测触摸敏感表面上的手指挥扫姿态包含检测手指向下事件、随后检测一个或多个手指拖动事件并在此后再检测手指向上事件。
图形模块132包含用于在触摸屏112或其它显示器上呈现和显示图形的各种已知的软件部件,包括用于改变所显示的图形的强度的部件。如这里使用的那样,术语“图形”包含可显示给用户的任何对象,包括但不限于文本、网页、图标(诸如包含软键的用户界面对象)、数字图像、视频和动画等。
在一些实施例中,图形模块132存储表示要使用的图形的数据。每个图形可被分配相应的代码。图形模块132从应用等接收一个或多个代码,所述代码规定如果必要的话要与坐标数据和其它图形属性数据一起显示的图形,并随后产生输出到显示控制器156的屏幕图像数据。
文本输入模块134,其可以是图形模块132的部件,提供用于在各种应用(例如,联系人137、电子邮件140、IM 141、浏览器147和需要文本输入的任何其它应用)中键入文本的软键盘。
GPS模块135确定设备的位置并且提供该信息以用于各种应用中(例如,提供给电话138以用于基于位置的拨号中、提供给照相机143作为图片/视频元数据和提供给诸如天气小部件、本地黄页小部件和地图/导航小部件之类的提供基于位置的服务的应用)。
应用136可包含以下模块(或多组指令)或它们的子集或超集:
●联系人模块137(有时称为地址薄或联系人列表);
●电话模块138;
●视频会议模块139;
●电子邮件模块140;
●即时消息(IM)模块141;
●语音备忘录模块142;
●用于静止和/或视频图像的照相机模块143;
●图像管理模块144;
●视频播放器模块145;
●音乐播放器模块146;
●浏览器模块147;
●日历模块148;
●小部件模块149,其可包含天气小部件149-1、股票小部件149-2、计算器小部件149-3、报警时钟小部件149-4、字典小部件149-5和由用户获得的其它小部件以及用户创建的小部件149-6;
●用于制作用户创建的小部件149-6的小部件产生器模块150;
●搜索模块151;
●合并视频播放器模块145和音乐播放器模块146的视频和音乐播放器模块152;
●便签模块153;
●地图模块154;和/或
●在线视频模块155。
可存储于存储器102中的其它应用136的例子包含其它的字处理应用、其它的图像编辑应用、绘图应用、演示应用、支持JAVA的应用、加密、数字权利管理、语音识别和语音复制。
与触摸屏112、显示控制器156、接触模块130、图形模块132和文本输入模块134结合,可以使用联系人模块137以管理地址薄或联系人列表,包括:向地址薄添加名字(一个或多个);从地址薄删除名字(一个或多个);使电话号码(一个或多个)、电子邮件地址(一个或多个)、物理地址(一个或多个)或其它信息与名字相关联;使图像与名字相关联;对名字进行分类和分选;提供电话号码或电子邮件地址以通过电话138、视频会议139、电子邮件140或IM 141启动和/或有利于通信;等等。
与RF电路108、音频电路110、扬声器111、麦克风113、触摸屏112、显示控制器156、接触模块130、图形模块132和文本输入模块134结合,电话模块138可被用于键入与电话号码对应的一系列字符、访问地址薄137中的一个或多个电话号码、修改已键入的电话号码、对相应的电话号码拨号、进行通话并在完成通话时断开或挂断。如上所述,无线通信可以使用多个通信标准、协议和技术中的任一个。
与RF电路108、音频电路110、扬声器111、麦克风113、触摸屏112、显示控制器156、光学传感器164、光学传感器控制器158、接触模块130、图形模块132、文本输入模块134、联系人列表137和电话模块138结合,视频会议模块139可被用于启动、进行和终止用户和一个或多个其它参与者之间的视频会议。
与RF电路108、触摸屏112、显示控制器156、接触模块130、图形模块132和文本输入模块134结合,电子邮件客户端模块140可被用于创建、发送、接收和管理电子邮件。与图像管理模块144结合,电子邮件模块140使得创建和发送带有由照相机模块143拍摄的静止或视频图像的电子邮件变得非常容易。
与RF电路108、触摸屏112、显示控制器156、接触模块130、图形模块132和文本输入模块134结合,即时消息模块141可被用于键入与即时消息对应的一系列字符、修改先前键入的字符、传送相应的即时消息(例如,使用用于基于电话的即时消息的短消息服务(SMS)或多媒体消息服务(MMS)协议或者使用用于基于因特网的即时消息的XMPP、SIMPLE或IMPS)、接收即时消息并观看接收到的即时消息。在一些实施例中,传送和/或接收的即时消息可包含MMS和/或增强型消息服务(EMS)中所支持的图形、照片、音频文件、视频文件和/或其它附件。如这里使用的那样,“即时消息”指的是基于电话的消息(例如,使用SMS或MMS发送的消息)和基于因特网的消息(例如,使用XMPP、SIMPLE或IMPS发送的消息)。
与RF电路108、触摸屏112、显示控制器156、接触模块130、图形模块132、文本输入模块134、电子邮件客户端模块140和即时消息模块141结合,语音备忘录模块142可被用于记录演讲、听写测验、电话交谈、会话、表演等的音频,并且在电子邮件或即时消息中发送该音频。
与触摸屏112、显示控制器156、光学传感器(一个或多个)164、光学传感器控制器158、接触模块130、图形模块132和图像管理模块144结合,照相机模块143可被用于捕获静止图像或视频(包含视频流),并且将它们存储于存储器102中、修改静止图像或视频的特性,或者从存储器102中删除静止图像或视频。
与触摸屏112、显示控制器156、接触模块130、图形模块132、文本输入模块134和照相机模块143结合,图像管理模块144可被用于配置、修改(例如,编辑)或另外操作、标注、删除、呈现(例如,以数字幻灯片放映或相册的方式)并且存储静止和/或视频图像。
与触摸屏112、显示控制器156、接触模块130、图形模块132、音频电路110和扬声器111结合,视频播放器模块145可被用于显示、呈现或另外回放视频(例如,在触摸屏上,或者,通过外部端口124在外部的连接的显示器上)。
与触摸屏112、显示系统控制器156、接触模块130、图形模块132、音频电路110、扬声器111、RF电路108和浏览器模块147结合,音乐播放器模块146允许用户下载并回放诸如MP3或AAC文件之类的以一种或多种文件格式存储的所记录的音乐和其它声音文件。在一些实施例中,设备100可包含诸如iPod(Apple Computer,Inc.的商标)的MP3播放器的功能。
与RF电路108、触摸屏112、显示系统控制器156、接触模块130、图形模块132和文本输入模块134结合,浏览器模块147可被用于浏览因特网,包括搜索、链接到、接收和显示网页或者它们的各部分以及与网页链接的附件和其它文件。
与RF电路108、触摸屏112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134、电子邮件模块140和浏览器模块147结合,日历模块148可被用于产生、显示、修改和存储日历和与日历相关的数据(例如,日历条目、待做事项列表等)。
与RF电路108、触摸屏112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134和浏览器模块147结合,小部件模块149是可被下载并被用户使用的微型应用(例如,天气小部件149-1、股票小部件149-2、计算器小部件149-3、报警时钟小部件149-4和字典小部件149-5)或由用户创建的微型应用(例如,用户创建的小部件149-6)。在一些实施例中,小部件包含HTML(Hypertext MarkupLanguage,超文本标记语言)文件、CSS(Cascading Style Sheets,级联样式表)文件和JavaScript文件。在一些实施例中,小部件包含XML(Extensible Markup language,可扩展标记语言)文件和JavaScript文件(例如,Yahoo!Widgets)。
与RF电路108、触摸屏112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134和浏览器模块147结合,小部件产生器模块150可被用户使用以创建小部件(例如,将网页的用户指定部分变为小部件)。
与触摸屏112、显示系统控制器156、接触模块130、图形模块132和文本输入模块134结合,搜索模块151可被用于搜索存储器102中的匹配一个或多个搜索准则(例如,一个或多个用户规定的搜索项)的文本、音乐、声音、图像、视频和/或其它文件。
与触摸屏112、显示控制器156、接触模块130、图形模块132和文本输入模块134结合,便签模块153可被用于创建和管理便签和待做事项列表等。
与RF电路108、触摸屏112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134、GPS模块135和浏览器模块147结合,地图模块154可被用于接收、显示、修改和存储地图和与地图相关的数据(例如,驾驶方向;关于在特定位置处或其附近的商店和其它关注点的数据;和其它的基于位置的数据)。
与触摸屏112、显示系统控制器156、接触模块130、图形模块132、音频电路110、扬声器111、RF电路108、文本输入模块134、电子邮件客户端模块140和浏览器模块147结合,在线视频模块155允许用户访问、浏览、接收(例如,通过流和/或下载)、回放(例如,在触摸屏上,或者,通过外部端口124在外部的连接的显示器上)、发送具有与特定的在线视频的链接的电子邮件并且另外管理具有诸如H.246的一个或多个文件格式的在线视频。在一些实施例中,使用即时消息模块141而不是电子邮件客户端模块140以发送与特定的在线视频的链接。可以在2007年6月20日提交的名为“PortableMultifunction Device,Method,and Graphical User Interface forPlaying Online Videos”的美国临时专利申请No.60/936,562和2007年12月31日提交的名为“Portable Multifunction Device,Method,andGraphical User Interface for Playing Online Videos”的美国专利申请No.11/968,067中找到对在线视频应用的附加描述。
以上识别的模块和应用中的每一个与用于执行上述的一个或多个功能的一组可指行指令和在本申请中描述的方法(例如,计算机实现的方法和这里描述的其它信息处理方法)对应。这些模块(即,多组指令)不需要被实现为单独的软件程序、过程或模块,由此,可以在各种实施例中组合或另外重新配置这些模块的各种子集。例如,视频播放器模块145可与音乐播放器模块146组合成单个模块(例如,视频和音乐播放器模块152,图1B)。在一些实施例中,存储器102可存储以上识别的模块和数据结构的子集。并且,存储器102可存储以上没有描述的其它模块和数据结构。
在一些实施例中,设备100是只能通过触摸屏112和/或触摸板执行设备上的预定义的一组功能的操作的设备。通过使用触摸屏和/或触摸板作为用于设备100的操作的主要输入/控制设备,可以减少设备100上的物理输入/控制装置(诸如,推动按钮和拨盘等)的数量。
可只能通过触摸屏和/或触摸板执行的预定义的一组功能包含用户界面之间的导航。在一些实施例中,触摸板在被用户触摸时使设备100从可显示在设备100上的任何用户界面导航到主菜单、Home(初始)菜单或根菜单。在这些实施例中,触摸板可被称为“菜单按钮”。在一些其它实施例中,菜单按钮可以是代替触摸板的物理推动按钮或其它物理输入/控制装置。
图2示出根据一些实施例的具有触摸屏112的便携式多功能设备100。触摸屏可显示用户界面(UI)200内的一个或多个图形。在本实施例以及后面描述的其它实施例中,用户可例如通过用一个或多个手指202(图中没有按比例绘制)接触或触摸图形,选择图形中的一个或多个。在一些实施例中,当用户中断与一个或多个图形的接触时,选择了一个或多个图形。在一些实施例中,接触可包含姿态,诸如一个或多个轻敲、一个或多个挥扫(从右到左、从左到右、向上和/或向下)和/或与设备100接触的手指的滚动(从右到左、从左到右、向上和/或向下)。在一些实施例中,与图形的无意的接触不会选择图形。例如,当与选择对应的姿态是轻敲时,在应用图标上挥扫的挥扫姿态不会选择对应的应用。
设备100还可包含诸如“Home”或菜单按钮204的一个或多个物理按钮。如上所述,菜单按钮204可被用于导航到可在设备100上执行的一组应用中的任意应用136。作为替代方案,在一些实施例中,在触摸屏112中的GUI中,菜单按钮可被实现为软键。
在一个实施例中,设备100包含触摸屏112、菜单按钮204、用于将设备通电/断电并锁定设备的推动按钮206、音量调整按钮(一个或多个)208、订户身份识别模块(SIM)卡槽210、头戴式耳机插孔212和停靠/充电外部端口124。推动按钮206可被用于通过按压按钮并使按钮保持在按压状态下达预定义的时间间隔而将设备通电/断电;通过按压按钮并在经过预定义的时间间隔之前释放按钮而锁定设备;和/或将设备解锁或者启动解锁过程。在替代性实施例中,设备100还可通过麦克风113接收用于激活或去激活一些功能的语音输入。
图3是根据一些实施例的具有显示器和触摸敏感表面的示例性计算设备的框图。设备300不需要是便携式的。在一些实施例中,设备300是膝上型计算机、桌上型计算机、台式计算机、多媒体播放器设备、导航设备、教育设备(诸如孩子的学习机)、游戏系统或控制设备(例如,家庭或工业控制器)。设备300一般包含一个或多个处理单元(CPU)310、一个或多个网络或其它的通信接口360、存储器370和一个或多个用于互连这些部件的通信总线320。通信总线320可包含互连并控制系统部件之间的通信的电路(有时称为芯片组)。设备300包含输入/输出(I/O)接口330,其包含在一些实施例中为触摸屏显示器112的显示器340。I/O接口330还可包含键盘和/或鼠标(或其它的指示器件)350和触摸板355。存储器370包含高速随机存取存储器,诸如DRAM、SRAM、DDR RAM或其它的随机存取固态存储设备;并且可包含非易失性存储器,诸如一个或多个磁盘存储设备、光盘存储设备、闪速存储设备或其它的非易失性固态存储设备。存储器370可任选地包含远离CPU(一个或多个)310的一个或多个存储设备。在一些实施例中,存储器370存储与存储于便携式多功能设备100的存储器102(图1)中的程序、模块和数据结构类似的程序、模块和数据结构或者它们的子集。并且,存储器370可存储不存在于便携式多功能设备100的存储器102中的附加的程序、模块和数据结构。例如,设备300的存储器370可存储绘图模块380、演示模块382、字处理模块384、站点创建模块386、盘编写模块388、电子数据表模块390和/或附件编辑模块133,而便携式多功能设备100的存储器102(图1)可以不存储这些模块。
简要参照附件编辑模块133,在一些实施例中,附件编辑模块133可被实现为语音备忘录模块142的子模块。作为替代方案,附件编辑模块133可以是与语音备忘录模块142分开的模块,并且可供任何适当模块使用。可利用附件编辑模块133的适当模块的非限制性例子包含电子邮件客户端模块140、图像管理模块144、视频播放器模块145和音乐播放器模块146。简言之,允许用户与音频或视频文件交互作用的任何模块可利用附件编辑模块。因此,在一些实施例中,可以在不是电子消息的附件的文件上使用附件编辑模块133。
也就是说,可以替代性地在任何情况下在独立的音频或视频文件上使用附件编辑模块133。在一些实施例中,这种使用可包含在用户已选择音频或视频文件以在例如红外文件传送、无线网络协议、常规和现代以太网等的任何适当的网络上通过包括但不限于用于电子邮件的通信程序、HTTP、FTP、MMS等的任何适当传送方法向另一用户传送所述文件自身(即,没有伴随的消息)。
图3中的以上识别的要素中的每一个可被存储于先前提到的存储设备中的一个或多个中。以上识别的模块中的每一个与用于执行以上描述的功能的一组指令对应。以上识别的模块或程序(即,多组指令)不需要被实现为单独的软件程序、过程或模块,由此,在各种实施例中,这些模块的各种子集可被组合或另外被重新配置。在一些实施例中,存储器370可存储以上识别的模块和数据结构的子集。并且,存储器370可存储以上没有描述的附加的模块和数据结构。
现在关注可在便携式多功能设备100上实现的用户界面(“UI”)的实施例。
图4A和图4B示出根据一些实施例的便携式多功能设备100上的应用的菜单的示例性用户界面。可以在设备300上实现类似的用户界面。在一些实施例中,用户界面400A包含以下要素或它们的子集或超集:
●诸如蜂窝和Wi-Fi信号之类的用于无线通信(一个或多个)的信号强度指示器(一个或多个)402;
●时间404;
●蓝牙指示器405;
●电池状态指示器406;
●具有用于频繁使用的应用的图标的托盘408,所述频繁使用的应用诸如是:
○电话138,可包含未接呼叫或语音邮件消息的数量的指示器414;
○电子邮件客户端140,可包含未读电子邮件的数量的指示器410;
○浏览器147;和
○音乐播放器146;和
●用于其它应用的图标,所述其它应用诸如是:
○IM 141;
○图像管理144;
○照相机143;
○视频播放器145;
○天气149-1;
○股票149-2;
○语音备忘录142;
○日历148;
○计算器149-3;
○报警时钟149-4;
○词典149-5;和
○用户创建的小部件149-6。
在一些实施例中,用户界面400B包含以下要素或它们的子集或超集:
●如上所述的402、404、405、406、141、148、144、143、149-3、149-2、149-1、149-4、410、414、138、140和147;
●地图154;
●便签153;
●后面进一步描述的设定412,提供对于设备100及其各种应用136的设置的访问;
●也称为iPOD(Apple Computer,Inc.的商标)模块152的视频和音乐播放器模块152;和
●也称为YouTube(Google,Inc.的商标)模块155的在线视频模块155。
图4C示出根据一些实施例的用于将便携式电子设备解锁的示例性用户界面。在一些实施例中,用户界面400C包含以下要素或它们的子集或超集:
●通过手指姿态移动以将设备解锁的解锁图像450;
●提供对于解锁姿态的视觉提示的箭头455;
●提供对于解锁姿态的附加提示的通道460;
●时间465;
●日子466;
●日期467;和
●壁纸图像470。
在一些实施例中,在设备处于用户界面锁定状态中时,设备检测与触摸敏感显示器的接触(例如,用户的手指接触到解锁图像450或其附近)。设备根据接触移动解锁图像450。如果检测到的接触与诸如在通道460上移动解锁图像之类的预定义姿态对应,那么设备过渡到用户界面解锁状态。相反,如果检测到的接触不与预定义姿态对应,那么设备保持用户界面锁定状态。如上所述,在2005年12月23日提交的名为“Unlocking A Device By Performing Gestures On An UnlockImage”的美国专利申请11/322,549和2005年12月23日提交的名为“Indication Of Progress Towards Satisfaction Of A User InputCondition”的美国专利申请11/322,550中描述了使用触摸屏上的姿态将设备解锁的处理,在此加入上述专利申请的全部内容作为参考。
现在关注可在诸如设备300或便携式多功能设备之类的具有显示器和触摸敏感表面的计算设备上实现的用户界面(“UI”)和相关处理的示例性实施例。
图5A~5Q示出根据一些实施例的在具有显示器和触摸敏感表面的多功能设备上的用于编辑电子消息的音频或视频附件的示例性用户界面。这些图中的用户界面被用于示出以下参照图6A~6C描述的处理。
UI 500A和UI 500B(分别为图5A和图5B)示出用于创作可包含音频或视频附件的电子消息的示例性用户界面。这里,UI 500A示出用户正在草拟电子消息。如本例子所示,软键盘500被设置以使得字符输入能够寻址到电子消息。可以在地址区域504中显示电子消息接收人502。附件显示区域506可显示要发送的电子消息的一个或多个音频或视频附件508。在一些实施例中,还设置发送按钮510和取消按钮512。如508-1所示,音频或视频附件508具有初始的尺寸。这里,尺寸被显示为文件尺寸。在一些实施例中,尺寸可被显示为持续时间。用户的输入514可被检测,这允许用户能够通过诸如参照以下的UI 500C~UI 500O讨论的界面之类的附件编辑界面,利用附件编辑模块133。
UI 500C~UI 500O(图5C~5O)示出有利于减小音频或视频附件的尺寸的示例性附件编辑界面518。这里示出的附件编辑界面518包含具有表示音频或视频附件的初始持续时间或尺寸的长度的时间条520。附件编辑界面518还包含用户可调整开始编辑图标524和用户可调整结束编辑图标522。这些图标可被用户操作以调整音频或视频附件508的持续时间或尺寸。最初以距离526-1显示用户可调整开始编辑图标524和用户可调整结束编辑图标522。在本例子示出的距离526小于时间条的长度,并且,在一些实施例中,用户可调整开始编辑图标524和用户可调整结束编辑图标522之间的距离可被限制为小于等于与预定义的最大允许持续时间或尺寸对应的距离。所示出的示例性附件编辑界面518还包含任选的附件信息面板528,其显示记录的时间和持续时间信息528-1和记录的日期信息528-2。所示出的示例性附件编辑界面518还包含任选的现在修整按钮530,其会减小附件的尺寸或持续时间以与用户可调整开始编辑图标524和用户可调整结束编辑图标522的当前设置对应。
所示出的示例性附件编辑界面518还包含任选的共享按钮532,共享按钮532在被激活时会创建在其中发送附件的另一电子消息。
所示出的示例性附件编辑界面518还包含任选的预览按钮537,其使得用户能够收听或观看具有与用户可调整开始编辑图标524和用户可调整结束编辑图标522的当前设置对应的减小的尺寸或持续时间的音频或视频附件508。
所示出的示例性附件编辑界面518还包含取消按钮536以及发送文本消息按钮534,其与附件编辑模块133协作,首先减小附件508的尺寸或持续时间以与用户可调整开始编辑图标524和用户可调整结束编辑图标522的当前设置对应,然后再使用户返回到用于创作并发送电子消息的用户界面(例如,UI 500A、UI 500O等)。
UI 500D(图5D)示出初始接触538-1用户可调整开始编辑图标524的用户输入538,并且,如箭头538-2所示,用户向右拖动用户可调整开始编辑图标524。
UI 500E(图5E)示出用户输入538结束之后的示例性附件编辑界面518。它具有减小用户可调整开始编辑图标524和用户可调整结束编辑图标522之间的距离526-2的效果,因此,附件508的预期的尺寸或持续时间与用户可调整开始编辑图标524和用户可调整结束编辑图标522之间的当前的更短的距离对应。如这里使用的那样,预期的尺寸或持续时间意味着,如果在没有对于用户可调整开始编辑图标524和用户可调整结束编辑图标522的任何进一步调整的情况下被修整,那么附件编辑模块133会减小附件508的尺寸或持续时间,以与由用户可调整开始编辑图标524和用户可调整结束编辑图标522的当前设置所表示的尺寸或持续时间对应。
UI 500F(图5F)示出向用户传送用户可调整开始编辑图标524当前处在附件508内的哪个时间位置的示例性编辑图标定时标记540。在一些实施例中,编辑图标定时标记540可被制成动画,以在用户调整用户可调整开始编辑图标524和用户可调整结束编辑图标522中的任一个时更新时间位置。在一些实施例中,编辑图标定时标记540可被制成动画,以在用户开始与用户可调整开始编辑图标524和用户可调整结束编辑图标522中的任一个接触时出现。在一些实施例中,编辑图标定时标记540可被制成动画以在用户开始与用户可调整开始编辑图标524和用户可调整结束编辑图标522中的任一个接触之后经过预定义的延迟之后出现。
UI 500G(图5G)示出用户输542,用户输入542首先接触542-1用户可调整结束编辑图标522,并且,如箭头542-2所示,用户向左拖动用户可调整结束编辑图标522。
UI 500H(图5H)示出用户终止用户输入542之后的示例性附件编辑界面518。它具有减小用户可调整开始编辑图标524和用户可调整结束编辑图标522之间的距离526-3的效果,因此,附件508的预期的尺寸或持续时间与用户可调整开始编辑图标524和用户可调整结束编辑图标522之间的当前的更短的距离对应。
UI 500I(图5I)示出多触摸用户输入544,多触摸用户输入544:1)首先接触544-1用户可调整开始编辑图标524,并且,如箭头544-2所示,用户向右拖动用户可调整开始编辑图标524;和2)首先接触544-3用户可调整结束编辑图标522,并且,如箭头544-4所示,用户向左拖动用户可调整结束编辑图标522。该多触摸用户输入544可被称为去捏合(depinch)姿态,并且,它具有增大用户可调整开始编辑图标524和用户可调整结束编辑图标522之间的距离的效果。可在预定义的时间段内相对于彼此分别启动初始接触544-1和544-3,以避免与去捏合姿态以外的姿态混淆。
UI 500J(图5J)示出在图5I所示的去捏合姿态544之后,附件508的预期的尺寸或持续时间与用户可调整开始编辑图标524和用户可调整结束编辑图标522之间的当前的更大的距离526-4对应。因此,去捏合姿态可被用于增大附件编辑界面518中的附件的尺寸或持续时间。但是,记住:用户可调整开始编辑图标524和用户可调整结束编辑图标522之间的距离被限制为小于等于与预定义的最大允许尺寸对应的距离。
UI 500K(图5K)示出向用户传送用户可调整开始编辑图标524和用户可调整结束编辑图标522当前被设定在附件508内的哪个时间范围的示例性编辑图标范围标记548。在一些实施例中,编辑图标范围标记548可被制成动画,以在用户调整用户可调整开始编辑图标524和用户可调整结束编辑图标522中的任一个时更新时间范围。在一些实施例中,编辑图标范围标记548可被制成动画,以在用户开始与用户可调整开始编辑图标524和用户可调整结束编辑图标522中的任一个接触时出现。在一些实施例中,编辑图标范围标记548可被制成动画,以在用户开始与用户可调整开始编辑图标524和用户可调整结束编辑图标522中的任一个接触之后经过预定义的延迟之后出现。
UI 500L(图5L)示出用户输入552,用户输入552首先接触552-1用户可调整开始编辑图标524和用户可调整结束编辑图标522之间的扩展区550,并且,如箭头552-2所示,用户向右拖动包含用户可调整开始编辑图标524、扩展区550和用户可调整结束编辑图标522的整个条。作为替代方案,用户也可向左拖动整个条。在一些实施例中,编辑图标范围标记548可被制成动画,以在用户如这里所描述的那样拖动整个条时更新时间范围。在一些实施例中,编辑图标范围标记548可被制成动画,以在用户如这里所描述的那样开始拖动整个条时出现。在一些实施例中,编辑图标范围标记548可被制成动画,以在用户如这里所描述的那样开始整个条的拖动之后经过预定义的延迟之后出现。
UI 500M(图5M)示出附件508内的附件编辑模块133将保持以下编辑的范围的位置。
UI 500N(图5N)示出发送文本消息按钮534上的用户输入556,其表示附件编辑模块133应前进以将音频或视频附件508编辑为与附件编辑界面518中的开始编辑图标524和结束编辑图标522的那时已有设置对应的更短的尺寸或持续时间。
UI 500O(图5O)示出从示例性附件编辑界面518返回到用于创作电子消息的示例性用户界面。在附件编辑模块133的对附件508的编辑操作之后,值得注意的是:附件的尺寸508-2现在比其在UI 500A中的尺寸小。假定不希望对于电子消息进行额外的改变,用户可发送该消息。发送按钮510上的用户输入558启动电子消息的发送。
UI 500P(图5P)示出由发送标记560表示的发送状态中的示例性电子消息界面以及处于日期和时间状态标记563下面的消息简介562。
UI 500Q(图5Q)示出发送电子消息之后的示例性电子消息界面。发送消息简介565现在在日期和时间状态标记563之上,并且,已从用户界面UI 500Q中去除了发送标记560。
图6A~6E是示出根据一些实施例的编辑电子消息的音频或视频附件的方法的流程图。在具有显示器和触摸敏感表面的多功能设备(例如,300,图3)上执行方法600。在一些实施例中,显示器是触摸屏。在一些实施例中,触摸敏感表面是触摸板。
方法600中的一些操作可被组合和/或一些操作的顺序可以被改变。
设备显示(602)用户在显示器上正在草拟的电子消息,其中,电子消息包含具有初始持续时间的音频(例如,演讲、听写测验、电话交谈、会话、表演等的数字存储的音频记录)或视频(例如,任何演讲、会议、表演、音乐会等的数字存储的视频记录)附件。电子消息可以是包含具有初始持续时间的音频附件或视频附件的即时消息或电子邮件。
在一些实施例中,电子消息是使用MMS协议的即时消息(604)。
设备检测(606)用户的第一输入(例如,输入514,图5B)。在一些实施例中,第一输入处于触摸敏感表面上(608)。在一些实施例中,第一输入处于物理按钮上(610)。在一些实施例中,第一输入是电子消息应用中的发送图标的激活(612)。在一些实施例中,第一输入是电子消息应用中的编辑图标的激活(614)。在一些实施例中,第一输入是电子邮件应用中的发送图标的激活(616)。作为替代方案,第一输入是电子邮件应用中的编辑图标的激活(618)。
响应于检测到用户的第一输入,设备显示(620)附件编辑界面(例如,附件编辑界面518,图5C)。附件编辑界面被配置为允许用户指出附件编辑模块133应修整的音频或视频附件的部分(一个或多个),以使得音频或视频附件从其初始持续时间减小到第二更短持续时间。附件编辑界面包含下述的大量特征。附件编辑界面包含表示具有初始持续时间的音频或视频附件的具有长度的时间条(例如,图5C中的时间条520)。附件编辑界面还包含用户可调整开始编辑图标(例如,图5C中的524)。用户可调整开始编辑图标表示在编辑之后音频或视频附件的开始点。附件编辑界面还包含用户可调整结束编辑图标(例如,图5C中的522)。用户可调整结束编辑图标表示在编辑之后音频或视频附件的结束点。附件编辑界面被配置为使得用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离(例如,图5C中的526-1)小于时间条的长度。附件编辑界面还被配置为使得用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离被限制为小于等于与音频或视频附件的预定义的最大允许尺寸对应或者在一些实施例中与音频或视频附件的最大允许持续时间对应的距离。
并且,在一些实施例中,用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离被限制为小于与预定义的最大允许尺寸对应的距离(622)。
在一些实施例中,开始编辑图标和结束编辑图标被设置在时间条中(623)。
设备检测(624)用户在触摸敏感表面上的第二输入(例如,以下讨论的图5D中的538、图5G中的542、图5I中的544、图5L中的552或图7E中的744)。在一些实施例中,第二输入是调整时间条上的开始编辑图标的位置的手指姿态(626)。在一些实施例中,第二输入是调整时间条上的结束编辑图标的位置的手指姿态(628)。
在一些实施例中,第二输入是调整开始编辑图标在时间条上的位置和/或结束编辑图标在时间条上的位置的多手指姿态(630)(例如,图5D中的538、图5G中的542和图5L中的552)。在一些实施例中,多手指姿态是捏合姿态,并且其中捏合姿态减小时间条上的开始编辑图标和时间条上的结束编辑图标之间的距离(632)(例如,以下讨论的图7E中的744)。在一些实施例中,多手指姿态是去捏合姿态,并且其中去捏合姿态增大时间条上的开始编辑图标和时间条上的结束编辑图标之间的距离(634)(例如,图5I中的544)。
响应于检测到用户在触摸敏感表面上的第二输入,设备调整(636)附件编辑界面中的开始编辑图标和结束编辑图标中的至少一个。在一些实施例中,调整包含在保持用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离小于等于与音频或视频附件的预定义的最大允许尺寸对应的距离的限制的同时调整附件编辑界面中的开始编辑图标和结束编辑图标中的至少一个的位置。
设备根据对于附件编辑界面中的开始编辑图标和结束编辑图标的调整,将音频或视频附件编辑(638)为第二更短持续时间。设备还检测(640)用户的第三输入(例如,图5N中的556)。在一些实施例中,可在检测到第三输入之前由附件编辑模块133执行编辑(638),并且,替代性地,可在检测到第三输入之后由附件编辑模块133执行编辑(638)。
在一些实施例中,第三输入处于触摸敏感表面上(642)。在一些实施例中,第三输入处于物理按钮上(644)。在一些实施例中,第三输入是电子消息应用中的第二图标的激活(646)(例如,图5O中发送按钮510上的用户输入558)。在一些实施例中,第三输入是电子邮件应用中的发送图标的激活(648)。在一些实施例中,第三输入是手指姿态(650)。
响应于检测到用户的第三输入,设备启动电子消息的发送(652),其中电子消息包含具有第二更短持续时间的编辑后的音频或视频附件。
图7A~7J示出根据一些实施例的用于编辑要在电子消息中发送的音频或视频文件的示例性用户界面。使用这些图中的用户界面以示出以下参照图8A~8B描述的处理。
UI 700A(图7A)示出用于管理音频或视频附件的示例性用户界面700,并且包含可作为电子消息或者在一些实施例中作为电子消息的附件而被发送的音频或视频文件的可滚动列表702。在本例子中,音频或视频文件702-1和702-2在可滚动列表702中,并且,可滚动列表702中的附加位置(例如,702-3)可表示创建或接收的附加的音频或视频文件。
信息按钮704在一些实施例中可提供关于音频或视频文件的信息显示,该信息显示可采取以上参照UI 500C讨论的附件信息面板528的形式。切换播放/暂停按钮706可允许用户浏览音频或视频文件的内容,并且,在一些实施例中,播放状态条708可通过随着文件被预览而使播放时间朝着结束前进来指示用户的预览的进展。
删除按钮710允许用户去除所选择的音频或视频文件。共享按钮711允许用户发送在示例性用户界面700中选择的音频或视频文件作为电子消息或电子消息的附件。这里共享按钮711的激活由用户选择712示出,这允许示例性用户界面700准备发送所选择的音频或视频文件702-1。
UI 700B示出在一些实施例中如果所选择的音频或视频文件702-1大于音频或视频文件的预定义的最大允许尺寸(在本例子确实如此),则可以显示文件尺寸警告714。文件尺寸警告714包含如果被激活则取消所选择的音频或视频文件702-1的发送并使用户返回UI700A的关闭按钮716。文件尺寸警告714包含如果被激活则将所选择的音频或视频文件702-1放在音频或视频文件编辑界面(UI 700C~UI 700G中示出了其示例性版本)中的文件编辑界面激活按钮718。在一些实施例中,UI 700C~UI 700G的音频或视频文件编辑界面可与以上参照UI 500C~UI 500O(图5C~5O)讨论的示例性附件编辑界面518类似。这里,用户输入719激活音频或视频文件编辑界面。
UI 700C~UI 700G(图7C~7G)示出示例性音频或视频文件编辑界面720,其在本例子与UI 500C~UI 500O所示的示例性附件编辑界面518相同并且以与以上讨论的方式相同的方式操作。因此,将提供编辑操作的简短概述。
UI 700D(图7D)示出与UI 500D所示的编辑操作类似的编辑操作,其中用户输入726首先接触726-1用户可调整开始编辑图标724,并且,如箭头726-2所示,用户向右拖动用户可调整开始编辑图标724,从而调整所选择的音频或视频文件702-1的预期的尺寸或持续时间。
UI 700E~UI 700F(图7E~7F)示出多触摸用户输入744,多触摸用户输入744:1)首先接触744-1用户可调整开始编辑图标724,并且,如箭头744-2所示,用户向左拖动用户可调整开始编辑图标724;和2)首先接触744-3用户可调整结束编辑图标722,并且,如箭头744-4所示,用户向右拖动用户可调整结束编辑图标722。该多触摸用户输入744可被称为捏合(pinch)姿态(与UI 500I所示的去捏合姿态相反),并且它具有减小用户可调整开始编辑图标724和用户可调整结束编辑图标722之间的距离的效果。如UI 700F所示,在图7E所示的捏合姿态744之后,s选择的音频或视频文件702-1的预期的尺寸或持续时间与用户可调整开始编辑图标724和用户可调整结束编辑图标722之间的当前更小的距离750对应。如以上讨论的去捏合姿态那样,可在预定义的时间段内相对于彼此分别启动初始接触744-1和744-3,以避免与捏合姿态以外的姿态混淆。
UI 700G(图7G)示出发送文本消息按钮752上的用户输入754,其表示附件编辑模块133应前进以将所选择的音频或视频文件702-1编辑为与开始编辑图标724和结束编辑图标722的那时已有设置对应的更短的尺寸或持续时间。
发送文本消息按钮752的激活将使得用于管理音频或视频附件的用户界面700使附件编辑模块133将所选择的音频或视频文件702-1编辑到与开始编辑图标724和结束编辑图标722的那时已有设置对应的第二更短持续时间或尺寸。
在一些实施例中,具有第二更短持续时间或尺寸的音频或视频文件702-1然后被发送到预定位置(例如,文件服务器、基于网络的文件库、FTP站点、预定义的电子邮件地址等)。在一些实施例中,具有第二更短持续时间或尺寸的音频或视频文件702-1然后会作为附件被放在电子消息中。
UI 700H~UI 700J(图7H~7J)示出发送电子消息中的附件(这里,为具有第二更短持续时间或尺寸的音频或视频文件702-1)的过程;UI 700H~UI 700J中的发送电子消息的示例性过程与UI 500O~UI 500Q所示的过程相同,这里对其不再详细描述。
图8A~8B是示出根据一些实施例的编辑电子消息的音频或视频附件的方法的流程图。在具有显示器和触摸敏感表面的多功能设备(例如,300,图3)上执行方法800。
方法800中的一些操作可被组合和/或一些操作的次序可以被改变。
设备检测(802)对于要在电子消息中发送的音频或视频文件的用户选择(例如,图7A中的用户选择),其中,音频或视频文件具有初始持续时间。用户选择可采用适当输入的任何形式(例如,诸如共享按钮711上的轻敲姿态之类的手指姿态,图7A)。
在一些实施例中,响应于检测到对于要在电子消息中发送的音频或视频文件的用户选择,当音频或视频文件尺寸超过预定义的最大值时,设备可显示(804)文件尺寸警告(例如,图7B中的文件尺寸警告714)。
在一些实施例中,电子消息选自包含电子邮件消息和使用MMS协议的电子消息的组(806)。在一些实施例中,音频或视频文件是电子消息的附件(808)。在一些实施例中,当用户在显示器上正在草拟电子消息时,检测对于要作为电子消息发送的音频或视频文件的用户选择(810)。
在检测到对于要在电子消息中发送的音频或视频文件的用户选择之后,设备检测(812)用户的第一输入(例如,诸如文件尺寸警告714中的文件编辑界面激活按钮718上的轻敲姿态之类的手指姿态,图7B)。
在一些实施例中,对音频或视频文件的用户选择是第一用户输入(814)。例如,在一些实施例中,可以在不显示文件尺寸警告或不同时显示文件尺寸警告和文件编辑界面的情况下,响应于用户选择允许用户指示要发送什么类型的电子消息的电子消息类型图标(未示出)(例如,规定MMS消息或电子邮件消息的电子消息类型图标)而显示文件编辑界面。
响应于检测到用户的第一输入,设备显示(816)音频或视频文件编辑界面(例如,图7C中的720或在图5C中显示的附件编辑界面518)。音频或视频文件编辑界面可包含表示具有初始持续时间的音频或视频文件的具有长度的时间条、用户可调整开始编辑图标和用户可调整结束编辑图标,其中:用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离小于时间条的长度,并且,用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离被限制为小于等于与音频或视频文件的预定义的最大允许尺寸对应的距离。
在一些实施例中,用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离被限制为小于与预定义的最大允许尺寸对应的距离(818)。在一些实施例中,在时间条中设置开始编辑图标和结束编辑图标(820)。
设备检测(822)用户在触摸敏感表面上的第二输入(例如,图7D中的用户输入726)。在一些实施例中,第二输入是调整开始编辑图标在时间条上的位置的手指姿态(824)。在一些实施例中,第二输入是调整结束编辑图标在时间条上的位置的手指姿态(826)。在一些实施例中,第二输入是调整开始编辑图标在时间条上的位置和结束编辑图标在时间条上的位置的多手指姿态(828)。在一些实施例中,多手指姿态是捏合姿态,其中,捏合姿态减小时间条上的开始编辑图标和时间条上的结束编辑图标之间的距离(830)。在一些实施例中,多手指姿态是去捏合姿态,其中,去捏合姿态增大时间条上的开始编辑图标和时间条上的结束编辑图标之间的距离(832)。但应注意:增大时间条上的开始编辑图标和结束编辑图标之间的距离的去捏合姿态不能超过与音频或视频文件的预定义的最大允许尺寸对应的距离。
响应于检测到用户在触摸敏感表面上的第二输入,设备调整音频或视频文件编辑界面中的开始编辑图标和结束编辑图标中的至少一个(834)(例如,图7D与图7D中的开始编辑图标724的位置的差值)。设备然后根据对于音频或视频文件编辑界面中的开始编辑图标和结束编辑图标的调整,将音频或视频文件编辑(836)到第二更短持续时间。
在一些实施例中,可在检测到第二输入之前由附件编辑模块133执行编辑(836),并且,替代性地,可在检测到第二输入之后由附件编辑模块133执行编辑(836)。
在一些实施例中,设备检测(838)用户的第三输入(例如,图7G中发送文本消息按钮752上的用户输入754),并且,响应于检测到用户的第三输入,设备在电子消息应用中显示(838)表示具有第二更短持续时间的编辑后的音频或视频文件的图标。例如,设备在图7H中的UI 700H所示的即时消息应用中的输入区域761中显示图标760。
在一些实施例中,设备检测(840)用户的第四输入(例如,手指姿态762,诸如“发送”图标763上的轻敲姿态,图7H中的UI 700H),并且,响应于检测到用户的第四输入,设备启动电子消息的发送,其中,电子消息包含具有第二更短持续时间的编辑后的音频或视频文件。
图9A~9B示出用于记录要在电子消息中发送的音频文件的示例性用户界面。
UI 900A~UI 900B(图9A和图9B)示出用于记录音频文件的示例性用户界面900。如所示的那样,用户界面900不处于记录状态中。用户界面900包含麦克风图像902、Vu水平计量器904和Vu水平计量器指示器906。当在麦克风图像902上接收到用户输入910(例如,轻敲姿态)时,Vu水平计量器指示器906通过向Vu水平计量器904上的更高位置移动来登记读数。该行为模拟乐师或公共演讲者轻敲麦克风以确保麦克风正在接收音频输入的方式,并且当用户切换记录按钮912时,可向用户界面900的用户传递设备准备好记录。
可通过在诸如通用处理器或应用专用芯片之类的信息处理装置中运行一个或多个功能模块来实现上述的信息处理方法中的步骤。这些模块、这些模块的组合和/或它们与一般硬件的组合(例如,如以上参照图1A、图1B和图3描述的那样)均包含于本发明的保护范围之内。
已出于解释的目的参照特定实施例进行了以上的描述。但是,以上的解释性讨论不是详尽无遗的,或者,不是要将本发明限于所公开的具体形式。根据以上教导,许多修改和变型是可能的。为了最好地解释本发明的原理及其实际的应用,选择和描述了这些实施例,以由此使得本领域技术人员以适于所设想的特定用途的各种修改最好地利用本发明和各种实施例。

Claims (14)

1.一种编辑要在电子消息中发送的音频或视频文件的方法,包括:
在处于音频或视频回放模式中时:
呈现用于回放的音频或视频文件;
检测对于要在电子消息中发送的所述音频或视频文件的用户选择,其中所述音频或视频文件具有初始持续时间;
直接响应于检测到对于要在电子消息中发送的音频或视频文件的用户选择,当音频或视频文件尺寸超过预定义的最大值时立即显示文件尺寸警告以及用于进入文件编辑模式的图标;
检测用户对于所述用于进入文件编辑模式的图标的激活;
直接响应于检测到对于用于进入文件编辑模式的图标的激活,立即显示:
表示具有初始持续时间的音频或视频文件的具有长度的时间条;
用户可调整开始编辑图标;以及
用户可调整结束编辑图标,其中:
用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离小于时间条的长度,并且
用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离被限制为小于等于与音频或视频文件的预定义的最大允许尺寸对应的距离,其中时间条、用户可调整开始编辑图标和用户可调整结束编辑图标被显示在音频或视频文件编辑界面中;
检测用户在触摸敏感表面上的第一输入;
直接响应于检测到用户在触摸敏感表面上的第一输入,调整音频或视频文件编辑界面中的开始编辑图标和结束编辑图标中的至少一个;
在显示音频或视频文件编辑界面的同时,检测用户的第二输入;以及
直接响应于检测到用户的第二输入,立即在电子消息应用中显示表示具有第二持续时间的编辑后的音频或视频文件的图标,其中第二持续时间比初始持续时间短,第二持续时间是根据对于音频或视频文件编辑界面中的开始编辑图标和结束编辑图标的调整获得的。
2.根据权利要求1所述的方法,其中,用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离被限制为小于与预定义的最大允许尺寸对应的距离。
3.根据权利要求1所述的方法,其中,第一输入是调整开始编辑图标在时间条上的位置和结束编辑图标在时间条上的位置的多手指姿态。
4.根据权利要求3所述的方法,其中,多手指姿态是捏合姿态,并且其中捏合姿态减小时间条上的开始编辑图标和时间条上的结束编辑图标之间的距离。
5.根据权利要求1所述的方法,还包括:
响应于检测到用户的第三输入,启动电子消息的发送,其中所述电子消息包括具有较短的第二持续时间的编辑后的音频或视频文件。
6.根据权利要求1所述的方法,还包括:
响应于检测到用户的第二输入,根据对于音频或视频文件编辑界面中的开始编辑图标和结束编辑图标的调整,将音频或视频文件编辑为第二持续时间。
7.根据权利要求1所述的方法,其中,开始编辑图标和结束编辑图标被设置在时间条中。
8.一种编辑要在电子消息中发送的音频或视频文件的设备,包括:
用于在处于音频或视频回放模式中时呈现用于回放的音频或视频文件并且检测对于要在电子消息中发送的所述音频或视频文件的用户选择的装置,其中所述音频或视频文件具有初始持续时间;
用于直接响应于检测到对于要在电子消息中发送的音频或视频文件的用户选择,在音频或视频文件尺寸超过预定义的最大值时立即显示文件尺寸警告以及用于进入文件编辑模式的图标的装置;
用于检测用户对于所述用于进入文件编辑模式的图标的激活的装置;
用于直接响应于检测到对于用于进入文件编辑模式的图标的激活,立即显示表示具有初始持续时间的音频或视频文件的具有长度的时间条、用户可调整开始编辑图标和用户可调整结束编辑图标的装置,其中,用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离小于时间条的长度,并且用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离被限制为小于等于与音频或视频文件的预定义的最大允许尺寸对应的距离,其中时间条、用户可调整开始编辑图标和用户可调整结束编辑图标被显示在音频或视频文件编辑界面中;
用于检测用户在触摸敏感表面上的第一输入的装置;
用于直接响应于检测到用户在触摸敏感表面上的第一输入,调整音频或视频文件编辑界面中的开始编辑图标和结束编辑图标中的至少一个的装置;
用于在显示音频或视频文件编辑界面的同时,检测用户的第二输入的装置;以及
用于直接响应于检测到用户的第二输入,立即在电子消息应用中显示表示具有第二持续时间的编辑后的音频或视频文件的图标的装置,其中第二持续时间比初始持续时间短,第二持续时间是根据对于音频或视频文件编辑界面中的开始编辑图标和结束编辑图标的调整获得的。
9.根据权利要求8所述的设备,其中,用户可调整开始编辑图标和用户可调整结束编辑图标之间的距离被限制为小于与预定义的最大允许尺寸对应的距离。
10.根据权利要求8所述的设备,其中,第一输入是调整开始编辑图标在时间条上的位置和结束编辑图标在时间条上的位置的多手指姿态。
11.根据权利要求10所述的设备,其中,多手指姿态是捏合姿态,并且其中捏合姿态减小时间条上的开始编辑图标和时间条上的结束编辑图标之间的距离。
12.根据权利要求8所述的设备,还包括:
用于响应于检测到用户的第三输入,启动电子消息的发送的装置,其中所述电子消息包括具有较短的第二持续时间的编辑后的音频或视频文件。
13.根据权利要求8所述的设备,还包括:
用于响应于检测到用户的第二输入,根据对于音频或视频文件编辑界面中的开始编辑图标和结束编辑图标的调整,将音频或视频文件编辑为第二持续时间的装置。
14.根据权利要求8所述的设备,其中,开始编辑图标和结束编辑图标被设置在时间条中。
CN201080018968.7A 2009-03-16 2010-01-25 用于编辑电子消息中的音频或视频附件的设备、方法和图形用户界面 Active CN102414755B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US21033609P 2009-03-16 2009-03-16
US61/210,336 2009-03-16
US12/566,656 US9852761B2 (en) 2009-03-16 2009-09-24 Device, method, and graphical user interface for editing an audio or video attachment in an electronic message
US12/566,656 2009-09-24
PCT/US2010/021925 WO2010107517A1 (en) 2009-03-16 2010-01-25 Device, method, and graphical user interface for editing an audio or video attachment in an electronic message

Publications (2)

Publication Number Publication Date
CN102414755A CN102414755A (zh) 2012-04-11
CN102414755B true CN102414755B (zh) 2015-05-06

Family

ID=42731708

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201080018968.7A Active CN102414755B (zh) 2009-03-16 2010-01-25 用于编辑电子消息中的音频或视频附件的设备、方法和图形用户界面

Country Status (5)

Country Link
US (1) US9852761B2 (zh)
EP (1) EP2409300B1 (zh)
CN (1) CN102414755B (zh)
HK (1) HK1166175A1 (zh)
WO (1) WO2010107517A1 (zh)

Families Citing this family (103)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040230910A1 (en) * 2003-05-16 2004-11-18 Brian Lin Assistant editing display method for media clips
KR101808625B1 (ko) 2010-11-23 2018-01-18 엘지전자 주식회사 콘텐츠 제어 장치 및 그 방법
US20120148216A1 (en) * 2010-12-14 2012-06-14 Qualcomm Incorporated Self-editing video recording
US9727124B2 (en) 2011-04-19 2017-08-08 Apple Inc. Power saving application update in a portable electronic device
US9417754B2 (en) 2011-08-05 2016-08-16 P4tents1, LLC User interface system, method, and computer program product
US8971572B1 (en) 2011-08-12 2015-03-03 The Research Foundation For The State University Of New York Hand pointing estimation for human computer interaction
US8819154B2 (en) 2011-10-14 2014-08-26 Blackberry Limited User interface methods and apparatus for use in communicating text and photo messages
EP2582120A1 (en) * 2011-10-14 2013-04-17 Research In Motion Limited User interface methods and apparatus for use in communicating text and photo messages
US9134900B2 (en) * 2012-01-18 2015-09-15 Qualcomm Incorporated Traversal of a soft bar to unlock an application
US9032292B2 (en) * 2012-01-19 2015-05-12 Blackberry Limited Simultaneous display of multiple maximized applications on touch screen electronic devices
US20130215144A1 (en) * 2012-02-20 2013-08-22 Sony Corporation Display control device and display control method
WO2013169845A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for scrolling nested regions
WO2013169882A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving and dropping a user interface object
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
WO2013169851A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for facilitating user interaction with controls in a user interface
CN108241465B (zh) 2012-05-09 2021-03-09 苹果公司 用于针对在用户界面中执行的操作提供触觉反馈的方法和装置
AU2013259614B2 (en) 2012-05-09 2016-08-25 Apple Inc. Device, method, and graphical user interface for providing feedback for changing activation states of a user interface object
WO2013169843A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for manipulating framed graphical objects
CN104487928B (zh) 2012-05-09 2018-07-06 苹果公司 用于响应于手势而在显示状态之间进行过渡的设备、方法和图形用户界面
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
WO2013169877A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting user interface objects
WO2013169875A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying content associated with a corresponding affordance
EP2847657B1 (en) 2012-05-09 2016-08-10 Apple Inc. Device, method, and graphical user interface for displaying additional information in response to a user contact
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
US9684441B2 (en) * 2012-10-22 2017-06-20 Nokia Technologies Oy Apparatus and associated methods
US20140115468A1 (en) * 2012-10-24 2014-04-24 Benjamin Guerrero Graphical user interface for mixing audio using spatial and temporal organization
WO2014105275A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for forgoing generation of tactile output for a multi-contact gesture
AU2013368443B2 (en) 2012-12-29 2016-03-24 Apple Inc. Device, method, and graphical user interface for transitioning between touch input to display output relationships
EP3467634B1 (en) 2012-12-29 2020-09-23 Apple Inc. Device, method, and graphical user interface for navigating user interface hierarchies
AU2013368445B8 (en) 2012-12-29 2017-02-09 Apple Inc. Device, method, and graphical user interface for determining whether to scroll or select contents
WO2014105277A2 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for moving a cursor according to a change in an appearance of a control icon with simulated three-dimensional characteristics
WO2014105279A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for switching between user interfaces
US20140208333A1 (en) * 2013-01-22 2014-07-24 Motorola Mobility Llc Initialize a Computing Device to Perform an Action
WO2014127465A1 (en) * 2013-02-25 2014-08-28 Summit-Tech Multimedia Communications Inc. Underlying message method and system
US9106960B2 (en) * 2013-03-15 2015-08-11 Cellco Partnership Reducing media content size for transmission over a network
US9300611B2 (en) 2013-03-26 2016-03-29 Dropbox, Inc. Content-item linking system for messaging services
US9843623B2 (en) 2013-05-28 2017-12-12 Qualcomm Incorporated Systems and methods for selecting media items
US9071798B2 (en) * 2013-06-17 2015-06-30 Spotify Ab System and method for switching between media streams for non-adjacent channels while providing a seamless user experience
US10097604B2 (en) 2013-08-01 2018-10-09 Spotify Ab System and method for selecting a transition point for transitioning between media streams
US9716733B2 (en) 2013-09-23 2017-07-25 Spotify Ab System and method for reusing file portions between different file formats
US9529888B2 (en) 2013-09-23 2016-12-27 Spotify Ab System and method for efficiently providing media and associated metadata
US9063640B2 (en) 2013-10-17 2015-06-23 Spotify Ab System and method for switching between media items in a plurality of sequences of media items
US20150134751A1 (en) * 2013-11-13 2015-05-14 Microsoft Corporation Sharing a file via email
CN103699300B (zh) * 2013-12-24 2017-01-18 贝壳网际(北京)安全技术有限公司 移动终端中图标的管理方法、装置和移动终端
CN111488111B (zh) * 2014-01-23 2023-10-20 苹果公司 虚拟计算机键盘
US11914419B2 (en) 2014-01-23 2024-02-27 Apple Inc. Systems and methods for prompting a log-in to an electronic device based on biometric information received from a user
KR20150095046A (ko) * 2014-02-12 2015-08-20 엘지전자 주식회사 이동 단말기 및 그 제어방법
USD758442S1 (en) * 2014-03-26 2016-06-07 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
US9559999B1 (en) * 2014-05-30 2017-01-31 EMC IP Holding Company LLC Method and system for processing large scale emails and limiting resource consumption and interruption therefrom
US20150350141A1 (en) * 2014-05-31 2015-12-03 Apple Inc. Message user interfaces for capture and transmittal of media and location content
USD776143S1 (en) * 2014-06-23 2017-01-10 Sartorius Stedim Biotech Gmbh Display with a graphical user interface
WO2016015181A1 (zh) * 2014-07-26 2016-02-04 华为技术有限公司 一种音频文件的剪辑方法及装置
US9740839B2 (en) 2014-08-13 2017-08-22 Google Technology Holdings LLC Computing device chording authentication and control
CN104200824B (zh) * 2014-08-25 2019-05-03 努比亚技术有限公司 音频录制方法和装置
USD762663S1 (en) * 2014-09-02 2016-08-02 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
USD766267S1 (en) * 2014-09-02 2016-09-13 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
CN104408980A (zh) * 2014-11-25 2015-03-11 重庆智培科技发展有限公司 一种视频网络学习机
USD776130S1 (en) * 2015-01-15 2017-01-10 Adp, Llc Display screen with a dashboard for a user interface
US10048757B2 (en) 2015-03-08 2018-08-14 Apple Inc. Devices and methods for controlling media presentation
US9632664B2 (en) 2015-03-08 2017-04-25 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US9645732B2 (en) 2015-03-08 2017-05-09 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US9990107B2 (en) 2015-03-08 2018-06-05 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US10095396B2 (en) 2015-03-08 2018-10-09 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US9639184B2 (en) 2015-03-19 2017-05-02 Apple Inc. Touch input cursor manipulation
US9785305B2 (en) 2015-03-19 2017-10-10 Apple Inc. Touch input cursor manipulation
US10152208B2 (en) 2015-04-01 2018-12-11 Apple Inc. Devices and methods for processing touch inputs based on their intensities
US20170045981A1 (en) 2015-08-10 2017-02-16 Apple Inc. Devices and Methods for Processing Touch Inputs Based on Their Intensities
KR101797042B1 (ko) * 2015-05-15 2017-11-13 삼성전자주식회사 의료 영상 합성 방법 및 장치
US9860451B2 (en) 2015-06-07 2018-01-02 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US10200598B2 (en) 2015-06-07 2019-02-05 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US10346030B2 (en) 2015-06-07 2019-07-09 Apple Inc. Devices and methods for navigating between user interfaces
US9830048B2 (en) 2015-06-07 2017-11-28 Apple Inc. Devices and methods for processing touch inputs with instructions in a web page
US9891811B2 (en) 2015-06-07 2018-02-13 Apple Inc. Devices and methods for navigating between user interfaces
US9674426B2 (en) 2015-06-07 2017-06-06 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
USD780799S1 (en) * 2015-06-12 2017-03-07 Intelleflex Corporation Display screen or portion thereof with an animated graphical user interface for temperature monitoring
CN106257875A (zh) * 2015-06-18 2016-12-28 展讯通信(上海)有限公司 信息处理的方法及装置
US10416800B2 (en) 2015-08-10 2019-09-17 Apple Inc. Devices, methods, and graphical user interfaces for adjusting user interface objects
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10235035B2 (en) 2015-08-10 2019-03-19 Apple Inc. Devices, methods, and graphical user interfaces for content navigation and manipulation
US10248308B2 (en) 2015-08-10 2019-04-02 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interfaces with physical gestures
USD782520S1 (en) * 2015-12-14 2017-03-28 Spotify Ab Display screen or portion thereof with transitional graphical user interface
USD782533S1 (en) * 2015-12-14 2017-03-28 Spotify Ab Display panel or portion thereof with transitional graphical user interface
USD781906S1 (en) * 2015-12-14 2017-03-21 Spotify Ab Display panel or portion thereof with transitional graphical user interface
US10866722B2 (en) * 2015-12-28 2020-12-15 Verizon Patent And Licensing Inc. Methods and systems for managing multiple communication lines within a single on-screen user interface
US20170229146A1 (en) * 2016-02-10 2017-08-10 Justin Garak Real-time content editing with limited interactivity
BR112018073693A2 (pt) 2016-05-18 2019-02-26 Apple Inc dispositivos, métodos, e interfaces gráficas de usuário para mensagens
US11320982B2 (en) 2016-05-18 2022-05-03 Apple Inc. Devices, methods, and graphical user interfaces for messaging
US10368208B2 (en) 2016-06-12 2019-07-30 Apple Inc. Layers in messaging applications
CN107799132A (zh) * 2016-09-05 2018-03-13 中兴通讯股份有限公司 一种音频剪辑方法和装置,及终端
USD863341S1 (en) * 2017-01-05 2019-10-15 Bryan J. Wrzesinski Display screen with graphical user interface
CN107453982A (zh) * 2017-08-11 2017-12-08 广东电网有限责任公司信息中心 一种语音邮箱的实现方法
KR102500145B1 (ko) 2018-07-13 2023-02-16 삼성전자주식회사 전자 장치 및 전자 장치의 컨텐트 전송 방법
CN114706503A (zh) 2018-11-26 2022-07-05 华为技术有限公司 一种应用显示方法及电子设备
USD929431S1 (en) * 2019-01-17 2021-08-31 Bae Systems Controls Inc. Display screen or portion thereof with animated graphical user interface
US11531701B2 (en) * 2019-04-03 2022-12-20 Samsung Electronics Co., Ltd. Electronic device and control method thereof
US11301128B2 (en) * 2019-05-01 2022-04-12 Google Llc Intended input to a user interface from detected gesture positions
CN110569094B (zh) * 2019-07-29 2022-04-12 华为技术有限公司 一种显示方法及电子设备
US10990263B1 (en) * 2019-09-03 2021-04-27 Gopro, Inc. Interface for trimming videos
CN112995760B (zh) * 2019-12-18 2022-06-28 腾讯科技(深圳)有限公司 视频处理方法、装置、设备及计算机存储介质
CN113810751B (zh) * 2020-06-12 2022-10-28 阿里巴巴集团控股有限公司 视频处理方法及设备、电子设备及服务器
USD971941S1 (en) * 2020-12-10 2022-12-06 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
DE102021102741A1 (de) 2021-02-05 2022-08-11 Karin Lang Verfahren zur Verschickung KI-basierter elektronischer Nachrichten
CN115079889A (zh) * 2022-06-10 2022-09-20 北京字跳网络技术有限公司 信息处理方法、装置、设备、介质及产品

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1802857A (zh) * 2003-07-23 2006-07-12 卡西欧计算机株式会社 配置用于显现的多媒体消息的方法和设备

Family Cites Families (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2306750B (en) 1995-10-23 1999-11-10 Quantel Ltd An audio editing system
US5760767A (en) 1995-10-26 1998-06-02 Sony Corporation Method and apparatus for displaying in and out points during video editing
US6538665B2 (en) 1999-04-15 2003-03-25 Apple Computer, Inc. User interface for presenting media information
US7085995B2 (en) 2000-01-26 2006-08-01 Sony Corporation Information processing apparatus and processing method and program storage medium
US6597375B1 (en) 2000-03-10 2003-07-22 Adobe Systems Incorporated User interface for video editing
JP3784289B2 (ja) * 2000-09-12 2006-06-07 松下電器産業株式会社 メディア編集方法及びその装置
US7117210B2 (en) * 2001-09-06 2006-10-03 Danger, Inc. System and method of distributing a file by email
US7613746B2 (en) * 2001-09-14 2009-11-03 Hewlett-Packard Development Company, L.P. System and method for file size management
US20090143141A1 (en) * 2002-08-06 2009-06-04 Igt Intelligent Multiplayer Gaming System With Multi-Touch Display
US20040068545A1 (en) * 2002-10-08 2004-04-08 Bellsouth Intellectual Property Corporation Displaying and working with email attachments
US20050018050A1 (en) * 2003-07-23 2005-01-27 Casio Computer Co., Ltd. Wireless communication device, dynamic image preparation method and dynamic image preparation program
US7890585B2 (en) * 2003-09-03 2011-02-15 Lowe John C Second person review of email
US20060005135A1 (en) * 2004-06-30 2006-01-05 Nokia Corporation Method for quantifying a visual media file size in an electronic device, an electronic device utilizing the method and a software program for implementing the method
US20060075033A1 (en) * 2004-09-20 2006-04-06 Bienstock Terry S Method and system for creating and sending electronic mail having multi-media files
US20060168016A1 (en) * 2004-11-30 2006-07-27 Barrett Michael C E-mail
US7769819B2 (en) * 2005-04-20 2010-08-03 Videoegg, Inc. Video editing with timeline representations
US9098597B2 (en) 2005-06-03 2015-08-04 Apple Inc. Presenting and managing clipped content
US7739599B2 (en) * 2005-09-23 2010-06-15 Microsoft Corporation Automatic capturing and editing of a video
US7735101B2 (en) * 2006-03-28 2010-06-08 Cisco Technology, Inc. System allowing users to embed comments at specific points in time into media presentation
US20090278806A1 (en) * 2008-05-06 2009-11-12 Matias Gonzalo Duarte Extended touch-sensitive control area for electronic device
US20070274683A1 (en) 2006-05-24 2007-11-29 Michael Wayne Shore Method and apparatus for creating a custom track
US20080016160A1 (en) * 2006-07-14 2008-01-17 Sbc Knowledge Ventures, L.P. Network provided integrated messaging and file/directory sharing
US7656438B2 (en) * 2007-01-04 2010-02-02 Sharp Laboratories Of America, Inc. Target use video limit enforcement on wireless communication device
US7956847B2 (en) 2007-01-05 2011-06-07 Apple Inc. Gestures for controlling, manipulating, and editing of media files using touch sensitive devices
US20080313541A1 (en) * 2007-06-14 2008-12-18 Yahoo! Inc. Method and system for personalized segmentation and indexing of media
KR20090003547A (ko) * 2007-06-15 2009-01-12 삼성전자주식회사 화상형성장치 및 그 전자메일 처리방법
US7877454B1 (en) * 2007-08-06 2011-01-25 Shane Horan Hunter Electronic messaging

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1802857A (zh) * 2003-07-23 2006-07-12 卡西欧计算机株式会社 配置用于显现的多媒体消息的方法和设备

Also Published As

Publication number Publication date
EP2409300B1 (en) 2016-04-20
US20100235746A1 (en) 2010-09-16
US9852761B2 (en) 2017-12-26
WO2010107517A1 (en) 2010-09-23
EP2409300A1 (en) 2012-01-25
CN102414755A (zh) 2012-04-11
HK1166175A1 (zh) 2012-10-19

Similar Documents

Publication Publication Date Title
CN102414755B (zh) 用于编辑电子消息中的音频或视频附件的设备、方法和图形用户界面
US11586348B2 (en) Portable multifunction device, method, and graphical user interface supporting user navigations of graphical objects on a touch screen display
JP7311484B2 (ja) 構造化電子ドキュメントを表示するためのポータブル電子装置、方法及びグラフィックユーザインターフェイス
CN101796478B (zh) 具有界面重新配置模式的便携式多功能设备
US20080201650A1 (en) Web-Clip Widgets on a Portable Multifunction Device
CN101627359A (zh) 用于在触摸屏上移动列表项目的系统和方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant