CN105183442A - 用于媒体和位置内容的捕获和传输的消息用户界面 - Google Patents

用于媒体和位置内容的捕获和传输的消息用户界面 Download PDF

Info

Publication number
CN105183442A
CN105183442A CN201510290133.1A CN201510290133A CN105183442A CN 105183442 A CN105183442 A CN 105183442A CN 201510290133 A CN201510290133 A CN 201510290133A CN 105183442 A CN105183442 A CN 105183442A
Authority
CN
China
Prior art keywords
display
message
media
available
contact
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510290133.1A
Other languages
English (en)
Other versions
CN105183442B (zh
Inventor
L·Y·杨
R·加西亚
J·伍德
R·R·德林杰
I·肖德里
K·J·林德曼
K·S·麦康伯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Computer Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from PCT/US2015/032309 external-priority patent/WO2015183756A1/en
Application filed by Apple Computer Inc filed Critical Apple Computer Inc
Publication of CN105183442A publication Critical patent/CN105183442A/zh
Application granted granted Critical
Publication of CN105183442B publication Critical patent/CN105183442B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1686Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being an integrated camera
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1694Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being a single or a set of motion sensors for pointer control or gesture input obtained by sensing movements of the portable computer
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304Detection arrangements using opto-electronic means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412Digitisers structurally integrated in a display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485Scrolling or panning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/10Office automation; Time management
    • G06Q10/107Computer-aided management of electronic mailing [e-mailing]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/10Image acquisition
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/04Real-time or near real-time messaging, e.g. instant messaging [IM]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/04Real-time or near real-time messaging, e.g. instant messaging [IM]
    • H04L51/046Interoperability with other network applications or services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/07User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail characterised by the inclusion of specific contents
    • H04L51/08Annexed information, e.g. attachments
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/07User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail characterised by the inclusion of specific contents
    • H04L51/10Multimedia information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/21Monitoring or handling of messages
    • H04L51/222Monitoring or handling of messages using geographical location information, e.g. messages transmitted or received in proximity of a certain spot or area
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/21Monitoring or handling of messages
    • H04L51/234Monitoring or handling of messages for tracking messages
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/42Mailbox-related aspects, e.g. synchronisation of mailboxes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H04M1/72433User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for voice messaging, e.g. dictaphones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H04M1/72439User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for image or video messaging
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72454User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04808Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/165Management of the audio stream, e.g. setting of volume, audio stream path
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/22Details of telephonic subscriber devices including a touch pad, a touch sensor or a touch detector
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/52Details of telephonic subscriber devices including functional features of a camera

Abstract

一种设备,提供用于从消息应用内捕获和发送诸如音频、视频或者图像之类的媒体的用户界面。设备检测该设备的移动,并且作为响应,播放或者录制音频消息。设备检测该设备的移动并且作为响应,发送录制的音频消息。设备与对话的一个或者多个消息参与者共享位置。

Description

用于媒体和位置内容的捕获和传输的消息用户界面
相关申请的交叉引用
本申请要求2014年5月31日提交的、主题名称为“MESSAGEUSERINTERFACESFORCAPTUREANDTRANSMITTALOFMEDIAANDLOCATIONCONTENT”的美国临时专利申请序列号62/006,071以及2014年9月8日提交的、主题名称为“MESSAGEUSERINTERFACESFORCAPTUREANDTRANSMITTALOFMEDIAANDLOCATIONCONTENT”的美国临时专利申请序列号62/047,622的优先权。这些申请的内容出于所有目的在此通过引用整体并入本文。
本申请涉及2011年6月3日提交的、主题名称为“MOTIONPATTERNCLASSSIFICATIONANDGESTURERECOGNITION”的美国专利申请13/153,374;以及2011年6月3日提交的、主题名称为“MOTION-BASEDDEVICEOPERATIONS”的美国专利申请序列号13/153,335。这些申请的内容出于所有目的在此通过引用整体并入本文。
技术领域
所公开的示例总体涉及电子设备的用户界面。
背景技术
消息可以包括各种媒体,诸如音频、视频或消息。一些系统可以要求用户启动消息收发应用之外的媒体应用以便捕获、发送和查看媒体。此外,在消息中包括媒体可以要求用户执行多个步骤以捕获内容,在消息中包括所捕获的内容,以及发送消息至接收方。接收方可以随后需要执行多个步骤或者明确地启动分离的媒体应用以回放或者查看内容。
发明内容
除了共享媒体之外,用户也可能希望将他们的位置信息与来自消息收发应用内的一个或多个其他用户容易地共享,或者发起音频操作以用于通信。期望支持快速捕获并向一个或多个接收方发送消息中媒体和位置信息或者发起音频操作的消息用户界面。
然而,用于使用电子设备共享媒体和位置信息的一些技术通常是麻烦和低效的。例如,对于支持媒体和/或位置信息的共享来说,现有技术使用复杂和耗时的用户界面,其可以包括多个键码推压或者键击。现有技术需要比所必需的更多的时间,浪费了用户时间和设备能量。该后者考虑在电池操作的设备中特别重要。
在一些实施例中,一种用于在消息应用内捕获并且发送媒体的方法包括:在具有触摸敏感表面和显示器的电子设备处,在显示器上显示媒体可供性(affordance)和用于显示在消息对话中参与者之间所发送消息的消息区域;检测在触摸敏感表面上的手势,包括检测在触摸敏感表面上的对应于显示器上的媒体可供性位置的位置处的接触;响应于检测到接触,在显示器上显示发送可供性;检测手势的后续包括检测接触跨触摸敏感表面的移动,之后检测接触从触摸敏感表面的抬起;确定接触是否移动至在触摸敏感表面上的、对应于显示器上发送可供性位置的位置;以及根据接触移动至在触摸敏感表面上的、对应于发送可供性位置的位置的确定,以及响应于检测到抬起,响应于手势的至少一部分向消息对话中参与者发送所捕获的媒体。
在一些实施例中,一种用于在消息收发应用内捕获并且发送视频的方法包括:在具有触摸敏感表面和显示器的电子设备处,在显示器上显示媒体可供性和用于显示在消息对话中参与者之间所发送消息的消息区域;检测在触摸敏感表面上的第一输入,其中第一输入对应于显示器上媒体可供性的位置;响应于检测到第一输入,显示录制可供性以及发送可供性;检测在触摸敏感表面上第二输入,其中第二输入对应于显示器上录制可供性的位置;响应于检测到第二输入,开始录制视频;检测在触摸敏感表面上第三输入,其中第三输入对应于显示器上发送可供性的位置;以及响应于检测到第三输入,向参与者发送所录制的视频,以及从显示器去除发送可供性和录制可供性。
在一些实施例中,一种用于在消息应用内捕获、发送并且播放音频消息的方法包括:在具有触摸敏感表面和显示器的电子设备处,显示从消息对话中第一参与者接收的第一音频消息的表示;检测对于播放第一音频消息的请求;响应于检测到请求,播放第一音频消息;在播放第一音频消息之后,检测设备的上升;响应于检测到设备的上升,录制第二音频消息;以及在录制第二音频消息之后,发送第二音频消息至第一参与者。
在一些实施例中,一种用于对消息分组以用于在对话中显示的方法包括:在包括触摸敏感表面和显示器的电子设备处,在时间间隔内从第一参与者接收多个消息;确定多个消息是否满足消息分组准则;根据多个消息并未满足消息分组准则的确定,显示表示多个消息的多个分离的界定的消息区域;以及根据多个消息满足消息分组准则的确定,显示表示多个消息的单个分组界定消息区域。
在一些实施例中,一种用于从消息对话中删除失效消息的方法包括:在包括触摸敏感表面和显示器的电子设备处,接收第一消息;在显示器上显示第一消息的表示,其中一旦满足失效准则则按计划删除第一消息;显示用于保持第一消息的可供性;根据检测到在满足失效准则之前选择了可供性的确定,保持第一消息;以及根据在满足失效准则而并未检测到可供性的选择,停止在显示器上显示第一消息的表示。
在一些实施例中,一种用于共享位置信息的方法包括:在包括触摸敏感表面和显示器的电子设备处,在显示器上显示用于显示在消息对话第一参与者与第二参与者之间所发送消息的消息区域;当位置在至少预定时间段期间改变时,显示共享位置可供性以用于向第二参与者共享第一参与者的位置;检测共享位置可供性的选择;以及响应于检测到共享位置可供性的选择,向第二参与者提供使得第二参与者在至少预定时间段期间确定第一参与者当前位置的信息。
在一些实施例中,一种用于添加媒体至对话的方法包括:在具有相机传感器、触摸敏感表面和显示器的电子设备处,在显示器上显示用于显示消息对话的消息区域;接收对于添加媒体至消息对话的请求;响应于接收到请求,与消息对话的至少一部分并行地显示媒体选择界面,其中媒体选择界面包括用于选择用于添加至消息对话的媒体的多个可供性,多个可供性的至少一子集包括可用于添加至消息对话的媒体的缩略表示;从多个可供性检测相应可供性的选择;以及响应于检测到相应可供性的选择,选择对应的媒体以用于添加至消息对话。
在一些实施例中,一种用于发起音频操作的方法包括:在包括麦克风的电子设备处,基于电子设备移动和一个或多个邻近传感器读数来检测设备情景的改变;响应于检测到设备情景的改变,确定设备是否满足音频操作准则,其中音频操作准则包括当电子设备的移动满足移动准则并且一个或多个邻近传感器读数满足邻近准则时所满足的准则;以及根据设备情景的改变满足音频操作准则的确定,发起音频操作;以及根设备情景的改变并未满足音频操作准则的确定,放弃发起音频操作。
在一些实施例中,一种用于发送音频消息的方法包括:在包括至少一个麦克风的电子设备处,检测解读作为对于录制用于指定联系人的音频消息的请求的一个或多个条件;响应于检测到一个或多个条件,使用至少一个麦克风产生音频录制;确定音频录制是否满足拒绝准则;根据并未满足拒绝准则的确定,发送音频录制至指定联系人;以及根据满足拒绝准则的确定,放弃发送音频录制至指定联系人。
在一些实施例中,一种用于捕获并发送媒体的方法包括:在具有触摸敏感表面和显示器的电子设备处,在显示器上显示媒体可供性、消息编辑域、以及参与者之间的消息对话,其中消息对话显示在消息区域中;检测在触摸敏感表面上的、对应于显示器上媒体可供性位置的位置处的接触;响应于检测到接触,在消息编辑域中显示实时媒体预览;检测接触从触摸敏感表面的抬起;响应于检测到抬起,基于实况媒体预览捕获新图像;以及发送所捕获的图像至消息对话中的参与者。
附图说明
图1A是示出了根据一些实施例的具有触摸敏感显示器的便携式多动能设备的框图。
图1B是示出了根据一些实施例的用于事件处理的示例性部分的框图。
图2示出了根据一些实施例的具有触摸屏的便携式多动能设备。
图3是根据一些实施例的具有显示器和触摸敏感表面的示例性多动能设备的框图。
图4A示出了根据一些实施例的用于在便携式多动能设备上应用的菜单的示例性用户界面。
图4B示出了根据一些实施例的用于具有与显示器分离的触摸敏感表面的多动能设备的示例性用户界面。
图5A示出了根据一些实施例的个人电子设备。
图5B是示出了根据一些实施例的个人电子设备的框图。
图6A至图6B示出了根据一些实施例的示例性消息收发用户界面。
图6C至图6D示出了根据一些实施例的示例性消息收发用户界面。
图7A至图7B示出了根据一些实施例的示例性消息收发用户界面。
图7C至图7D示出了根据一些实施例的示例性消息收发用户界面。
图8示出了根据一些实施例的示例性消息收发用户界面。
图9A至图9B示出了根据一些实施例的示例性消息收发用户界面。
图10A至图10B示出了根据一些实施例的示例性消息收发用户界面。
图11A至图11B示出了根据一些实施例的示例性消息收发用户界面。
图11C至图11E示出了根据一些实施例的示例性消息收发用户界面。
图11F至图11G示出了根据一些实施例的示例性消息收发用户界面。
图12A至图12B示出了根据一些实施例的示例性消息收发用户界面。
图13A至图13C示出了根据一些实施例的示例性消息收发用户界面。
图14示出了根据一些实施例的示例性消息收发用户界面。
图15A至图15B示出了根据一些实施例的示例性消息收发用户界面。
图16A至图16B示出了根据一些实施例的示例性消息收发用户界面。
图17A至图17C示出了根据一些实施例的示例性消息收发用户界面。
图18A至图18C示出了根据一些实施例的示例性消息收发用户界面。
图19A至图19B示出了根据一些实施例的示例性消息收发用户界面。
图19C至图19D示出了根据一些实施例的示例性消息收发用户界面。
图20示出了根据一些实施例的示例性消息收发用户界面。
图21A至图21B示出了根据一些实施例的示例性消息收发用户界面。
图22A至图22C示出了根据一些实施例的示例性消息收发用户界面。
图22D示出了根据一些实施例的示例性消息收发用户界面。
图23A至图23C示出了根据一些实施例的示例性消息收发用户界面。
图24A至图24C示出了根据一些实施例的示例性消息收发用户界面。
图25A至图25B示出了根据一些实施例的示例性消息收发用户界面。
图25C至图25E示出了根据一些实施例的示例性消息收发用户界面。
图26示出了根据一些实施例的示例性消息收发用户界面。
图27A至图27C示出了根据一些实施例的示例性消息收发用户界面。
图28A至图28C示出了根据一些实施例的示例性消息收发用户界面。
图29A至图29C示出了根据一些实施例的示例性消息收发用户界面。
图30示出了根据一些实施例的示例性消息收发用户界面。
图31示出了根据一些实施例的示例性消息收发用户界面。
图32A至图32C示出了根据一些实施例的示例性消息收发用户界面。
图33是示出了根据一些实施例的用于捕获以及发送媒体的方法的流程图。
图34是示出了根据一些实施例的用于捕获以及发送媒体的方法的流程图。
图35是示出了根据一些实施例的用于捕获以及发送媒体的方法的流程图。
图36是示出了根据一些实施例的用于分组消息的方法的流程图。
图37是示出了根据一些实施例的用于基于失效准则管理消息的方法的流程图。
图38是示出了根据一些实施例的用于共享位置信息的方法的流程图。
图39是示出了根据一些实施例的用于添加媒体至对话的方法的流程图。
图40是示出了根据一些实施例的用于发起音频操作的方法的流程图。
图41A至图41B是示出了根据一些实施例的用于发起音频操作的方法的流程图。
图42A至图42B是示出了根据一些实施例的用于发起音频操作的方法的流程图。
图43A至图43C是示出了根据一些实施例的用于发起音频操作的方法的流程图。
图44A至图44B是示出了根据一些实施例的用于发起音频操作的方法的流程图。
图44C是示出了根据一些实施例的用于发起音频操作的方法的流程图。
图45A至图45B是示出了根据一些实施例的用于发起音频操作的方法的流程图。
图45C是示出了根据一些实施例的用于发起音频操作的方法的流程图。
图46是示出了根据一些实施例的用于发送音频录制的方法的流程图。
图47A至图47B是示出了根据一些实施例的用于发送音频录制的方法的流程图。
图47C至图47D是示出了根据一些实施例的用于发送音频录制的方法的流程图。
图48A至图48B是示出了根据一些实施例的用于发送音频录制的方法的流程图。
图49是示出了根据一些实施例的用于捕获并发送媒体的方法的流程图。
图50示出了根据一些实施例的电子设备的功能框图。
图51示出了根据一些实施例的电子设备的功能框图。
图52示出了根据一些实施例的电子设备的功能框图。
图53示出了根据一些实施例的电子设备的功能框图。
图54示出了根据一些实施例的电子设备的功能框图。
图55示出了根据一些实施例的电子设备的功能框图。
图56示出了根据一些实施例的电子设备的功能框图。
图57示出了根据一些实施例的电子设备的功能框图。
图58示出了根据一些实施例的电子设备的功能框图。
图59示出了根据一些实施例的电子设备的功能框图。
具体实施方式
以下说明书列出了示例性的方法、参数等等。然而应该知晓的是,该说明书并非意在限定本公开的范围,而是替代地提供作为对示例性实施例的描述说明。
需要一种电子设备,其具有用于捕获、发送并在便携式电子设备上播放媒体内容或位置数据的更快、更有效的方法和界面。例如,使得用户能够在消息收发应用内捕获并发送的媒体内容的用户界面可以减少共享该内容所需的输入的数目,并且减小对参与消息对话的用户的认知负担,由此增强了生产力。此外,这些技术可以减小另外浪费在冗余用户输入上的处理器和电池能量。
以下,图1A至图1B、图2、图3、图4A至图4B、图5A至图5B以及图50至图59提供了对用于执行用于捕获、发送和播放或查看媒体对象或位置内容的技术的示例性设备的描述说明。图6A至图32C示出了用于捕获、发送、播放或查看媒体对象或位置内容、以及发送所录制音频消息的示例性用户消息用户界面。图33至图49是示出了捕获、发送和播放或查看媒体和位置内容、对用于显示的消息分组、从对话去除失效消息、发起音频操作以及发送所录制消息的方法的流程图。
尽管以下说明书使用了术语“第一”、“第二”等以描述各种元件,这些元件并未由术语所限定。这些术语仅用于将一个元件与另一个进行区分。例如,第一触摸可以称作第二触摸,并且类似地第二触摸可以称作第一触摸,并未脱离各个所述实施例的范围。第一触摸和第二触摸均是触摸,但是它们并非是相同触摸。
在此各个所述是实力的描述说明中所使用的术语仅是为了描述特定实施例的目的,并非意在为限定性。如在各个所述实施例的描述以及所附权利要求中所使用的,单数形式“一”、“一个”和“该”意在也包括复数形式,除非上下文明确给出相反指示。也应该理解,如在此使用的术语“和/或”涉及并且包括一个或多个相关所列项目的任意和所有可能组合。应该进一步理解的是,当用于该说明书中时术语“包括”、“包含”、“含有”和/或“具有”规定了所述特征、整数、步骤、操作、元件和/或部分的存在,但是并未排除一个或多个其他特征、整数、步骤、操作、元件、部分和/或其群组的存在或添加。
术语“如果”可以构造为意味着“当…时”或“一旦”或者“响应于确定”或者“响应于检测”,取决于上下文。类似地,短语“如果确定了”或者“如果检测到[一定的条件或事件]”可以构造为意味着“一旦确定”或“响应于确定”或者“一旦检测到[一定条件或事件]”或者“响应于检测到[一定条件或事件]”,取决于上下文。
描述了电子设备、用于这些设备的用户界面、以及用于使用这些设备的相关方法的实施例。在一些实施例中,设备是便携式通信设备,诸如移动电话,其也包含其他功能,诸如PDA和/或音乐播放器功能。便携式多动能设备的示例性实施例包括但不限于,来自加州Cupertino的苹果有限公司的iPod设备。可选地使用其他便携式电子设备,诸如具有触摸敏感表面(例如触摸屏显示器和/或触摸板)的膝上型或平板计算机。也应该理解,在一些实施例中,设备并非是便携式通信设备,而是具有触摸敏感表面(例如触摸屏显示器和/或触摸板)的桌上型计算机。
在以下的讨论中,描述了一种包括显示器和触摸敏感表面的电子设备。然而应该理解,电子设备可选地包括一个或多个其他物理用户界面设备,诸如物理键盘、鼠标和/或操纵杆。设备可以支持各种应用,诸如以下项中的一个或多个:绘图应用、演示应用、文字处理应用、网站创作应用、盘编写应用、电子表格应用、游戏应用、电话应用、视频会议应用、电子邮件应用、即时消息收发应用、锻炼支持应用、照片管理应用、数字相机应用、数字视频相机应用,网页浏览应用、数字音乐播放器应用和/或数字视频播放器应用。
在设备上运行的各种应用可选地使用至少一个公共物理用户界面设备,诸如触摸敏感的表面。触摸敏感表面的一个或多个功能以及在设备上显示的对应的信息可选地从一个应用至下一个和/或在相应应用内调整和/或改变。以此方式,设备的公共物理体系结构(诸如触摸敏感表面)可选地支持了具有对用户直觉和透明的用户界面的各种应用。
现在关注转向具有触摸敏感显示器的便携式设备的实施例。图1A是示出了根据一些实施例的具有触摸敏感显示器系统112的便携式多功能设备100的框图。触摸敏感显示器112有时为了方便称作“触摸屏”,并且有时已知作为或者称作“触摸敏感显示器系统”。设备100包括存储器102(其可选地包括一个或多个计算机可读存储介质),存储器控制器122,一个或多个处理单元(CPU)120,外围接口118,RC电路装置108,音频电路装置110,扬声器111,麦克风113,输入/输出(I/O)子系统106,其他输入控制设备116,以及外部端口124。设备100可选地包括一个或多个光学传感器164。设备100可选地包括用于检测设备100(例如,触摸敏感表面,诸如设备100的触摸敏感显示器系统112)上接触的强度的一个或多个接触强度传感器165。设备100可选地包括用于在设备100上产生触觉输出的一个或多个触觉输出发生器167(例如在诸如设备100的触摸敏感显示器系统112或者设备300的触摸板355的触摸敏感表面上产生触觉输出)。这些部分可选地通过一个或多个通信总线或信号线路103进行通信。
如在说明书和权利要求中所使用的那样,在触摸敏感表面上接触的术语“强度”涉及在触摸敏感表面上接触(例如指状接触)的力或压力(单位面积的力),或者涉及对于触摸敏感表面上接触的力或压力的替代(代理)。接触的强度具有包括至少四个不同数值并且更通常包括数百个不同数值(例如至少256个)的数值范围。可选地,使用各种方案和各种传感器或传感器的组合确定(或测量)接触的强度。例如,可选地使用在触摸敏感表面下方或者与其相邻的一个或多个力传感器以测量在触摸敏感表面上各个点处的力。在一些实施方式中,组合(例如加权平均)从多个力传感器得到的力测量值以确定接触的估算力。类似地,可选地使用输入笔的压力敏感尖端以确定输入笔在触摸敏感表面上的压力。备选地,在触摸敏感表面上检测到和/或改变对其的接触面积的尺寸、最靠近接触和/或改变对其的触摸敏感表面的电容、和/或最靠近接触和/或改变对其的触摸敏感表面的电阻可选地用作对于触摸敏感表面上接触的力或压力的替代。在一些实施方式中,对于接触力或压力的替代测量值直接用于确定是否已经超过了强度阈值(例如在对应于替代测量值的单位描述强度阈值)。在一些实施方式中,用于接触力或压力的替代测量值转换为估算力或压力,并且估算力或压力用于确定是否已经超过了强度阈值(例如强度阈值为以压力单位测得的压力阈值)。使用接触的强度作为用户输入的属性允许用户访问额外的设备功能,其可以由用户在具有用于显示可供性(affordance)(例如在触摸敏感显示器上)和/或接收用户输入(例如经由触摸敏感显示器,触摸敏感表面,或者诸如调节钮或按钮的物理/机械控制)的有限占用面积的减小尺寸设备上所访问。
如在说明书和权利要求中所使用的那样,术语“触觉输出”涉及设备相对于设备之前位置的物理位移,设备部分(例如触摸敏感表面)相对于设备另一部分(例如外壳)的物理位移,或者部分相对于设备质心的位移,将由用户采用用户的触摸感觉而检测。例如,在其中设备或设备部分与对于触摸敏感的用户表面(例如指状、手掌或用户手的其他部分)接触的情形中,由物理位移产生的触觉输出将由用户解读为对应于感受到的设备或设备部分的物理特性改变的触感。例如,触摸敏感表面(例如触摸敏感显示器或轨迹板)的移动可选地由用户解读为物理致动器按钮的“向下点击”或“向上点击”。在一些情形中,甚至当并未存在与由用户的移动物理地按压(例如位移)触摸敏感表面相关联的物理致动器按钮运动时,用户将感受到诸如“向下点击”或“向上点击”的触感。作为另一示例,甚至当触摸敏感表面的平滑度没有改变时,触摸敏感表面的移动可选地由用户解读或者感测为触摸敏感表面的“粗糙度”。尽管由用户对触摸的这类解读将经受用户的个性化感官知觉,但是存在对于大多数用户共同的许多触摸的感官知觉。因此,当触觉输出被描述为对应于用户的特定感官知觉(例如“向上点击”、“向下点击”、“粗糙度”)时,除非明确给出相反指示,否则所产生的触觉输出对应于设备或其部分的物理位移,其将产生所描述的对于典型(或平均)用户的感官知觉。
应该知晓,设备100仅是便携式多功能设备的一个示例,以及设备100可选地具有比所示更多或更少的部分,可选地组合两个或更多部分,或者可选地具有不同的部分配置或设置。图1A中所示的各个部分实施在硬件、软件或者硬件与软件的组合中,包括一个或多个信号处理和/或专用集成电路。
存储器102可以包括一个或多个计算机可读存储介质。计算机可读存储介质可以是有形的和非易失性的。存储器102可以包括高速随机存取存储器,并且也可以包括非易失性存储器,诸如一个或多个磁盘存储设备、闪存设备、或其他非易失性固态存储器设备。存储器控制器122可以由设备100的其他部分来控制对存储器102的访问。
外围接口118可以用于将设备的输入和输出外围设备耦合至CPU120和存储器102。一个或多个处理器120运行或执行存储在存储器102中的各个软件程序和/或指令集,以执行用于设备100的各个功能以及用于处理数据。在一些实施例中,外围接口118、CPU120、以及存储器控制器122可以实施在单个芯片上,诸如芯片104。在一些其他实施例中,它们可以实施在分立芯片上。
RF(射频)电路装置108接收并且发送RF信号,也称作电磁信号。RF电路装置108将电信号转换为电磁信号/将电磁信号转换为电信号,并且经由电磁信号与通信网络和其他通信设备通信。RF电路装置108可选地包括用于执行这些功能的已知电路装置,包括但不限于天线系统、RF收发器、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、CODEC芯片集、用户身份模块(SIM)卡、存储器等等。RF电路装置108可选地由无线通信而与网络通信,诸如互联网、也称作万维网(WWW),内联网和/或无线网络,诸如蜂窝电话网络、无线局域网(LAN)和/或城域网(MAN)以及其他设备。RF电路装置108可选地包括用于检测近场通信(NFC)场的已知电路装置,诸如通过短程通信无线电。无线通信可选地使用任意多个通信标准、协议和技术,包括但不限于用于移动通信的全球系统(GSM)、增强数据GSM环境(EDGE)、高速下行链路数据分组接入(HSDPA)、高速上行链路数据分组接入(HSUPA)、演化、仅数据(EV-DO)、HSPA、HSPA+、双单元HSPA(DC-HSPDA)、长期演化(LTE)、近场通信(NFC)、宽带码分多址访问(W-CDMA)、码分多址访问(CDMA)、时分多址访问(TDMA)、蓝牙、蓝牙低能(BTLE)、无线保真(Wi-Fi)(例如,IEEE802.11a、IEEE802.11b、IEEE802.11g、IEEE802.11n、和/或IEEE802.11ac)、互联网协议之上的语音(VoIP)、Wi-MAX、用于电子邮件的协议(例如互联网消息访问协议(IMAP)和/或邮局协议(POP))、即时消息收发(例如可扩充消息收发和存在协议(XMPP)、用于即时消息收发和存在杠杆扩展的通话启动协议(SIMPLE)、即时消息收发和存在服务(IMPS)、和/或短消息服务(SMS)),或者任何其他合适的通信协议,包括本文件提交日当时尚未研发的通信协议。
音频电路装置110、扬声器111和麦克风113在用户与设备100之间提供音频接口。音频电路装置110从外围接口118接收音频数据,将音频数据转换为电信号,并且将电信号发送至扬声器111。扬声器111将电信号转换为人类可听到的声波。音频电路装置110也从声波接收由麦克风113转换的电信号。音频电路装置110将电信号转换为音频数据,并且发送音频数据至外围接口118以用于处理。音频数据可以由外围接口118从存储器102和/或RF电路装置108检索和/或向其发送。在一些实施例中,音频电路装置110也包括耳机插孔(例如图2的212)。耳机插孔提供在音频电路装置110与可移除的音频输入/输出外围设备之间的接口,诸如仅输出的听筒或者具有输出(例如用于一只或两只耳朵的听筒)和输入(例如麦克风)的耳机。
I/O子系统106将设备100上的输入/输出外围设备(诸如触摸屏112和其他输入控制设备116)耦合至外围接口118。I/O子系统106可选地包括显示控制器156,光学传感器控制器158,强度传感器控制器159,触觉反馈控制器161,以及用于其他输入或控制设备的一个或多个输入控制器160。一个或多个输入控制器160从其他输入控制设备116接收/向其发送电信号。其他输入控制设备116可选地包括物理按钮(例如推压按钮、摇杆按钮等)、拨号盘、滑块开关、操纵杆、点击轮等。在一些备选实施例中,输入控制器160可选地耦合至以下项中的任意项(或一个也没有):键盘,红外端口,USB端口,以及诸如鼠标之类的指针设备。一个或多个按钮(例如图2的208)可选地包括用于扬声器111和/或麦克风113音量控制的向上/向下按钮。一个或多个按钮可选地包括推压按钮(例如图2的206)。
推压按钮的快速按压可以脱离触摸屏112的锁定,或者开始使用在触摸屏上手势以解锁设备的过程,如2005年12月23日提交的主题名称为“UnlockingaDevicebyPerformingGesturesonanUnlockImage”的美国专利申请11/322,549、美国专利No.7,657,849中所述,该申请和专利在此通过引用整体并入本文。推压按钮(例如206)的较长按压可以使得设备100打开或者关闭。用户可以能够定制一个或多个按钮的功能。触摸屏112用于实施虚拟或软按钮以及一个或多个软键盘。
触摸敏感显示器112提供设备与用户之间的输入接口和输出接口。显示控制器156从触摸屏112接收电信号和/或向触摸屏112发送电信号。触摸屏112向用户显示视觉输出。可视化输出可包括图形、文本、图标、视频以及它们的任何组合(统称为“图形”)。在一些实施例中,一些视觉输出或全部的视觉输出可对应于用户界面对象。
触摸屏112具有基于触觉和/或触觉接触从用户接受输入的触摸敏感表面、传感器或传感器组。触摸屏112和显示控制器156(与存储器102中的任何相关联模块和/或指令集一起)检测触摸屏112上的接触(和该接触的任何移动或中断),并且将所检测到的接触转换为与显示在触摸屏112上的用户界面对象(例如,一个或多个软按键、图标、网页或图像)的交互。在示例性实施例中,触摸屏112与用户之间的接触点对应于用户的指状。
尽管其他显示器技术可在其他实施例中使用,但是触摸屏112可使用LCD(液晶显示器)技术、LPD(发光聚合物显示器)技术,或LED(发光二极管)技术。使用现在已知或以后开发的多种触摸传感技术中的任一触摸传感技术(该触摸传感技术包括但不限于电容性的、电阻性的、红外和表面声波技术)以及其他接近传感器阵列或用于确定与触摸屏112的一个或多个接触点的其他元件,触摸屏112和显示控制器156可检测到接触及其任何移动或破坏。在一示例性实施例中,使用投射式互电容感测技术,诸如从AppleInc.(Cupertino,California)的iPod中发现的技术
在触摸屏112的一些实施例中,触摸敏感显示器可以类似于在以下美国专利和/或申请中所述的多触摸敏感触摸板:6,323,846(Westerman等人),6,570,557(Westerman等人),6,677,932(Westerman),和/或美国专利申请No.2002/0015024A1,上述专利和/或申请在此通过引用均并入本文。然而,触摸屏112显示来自设备100的可视化输出,而触摸敏感触摸板并不提供可视化输出。
在触摸屏112的一些实施例中,触摸敏感显示器可以如在以下申请中描述:(1)2006年5月2日提交的、主题名称为“MultipointTouchSurfaceController”的美国专利申请No.11/,381,313;(2)2004年5月2日提交的、主题名称为“MultipointTouchscreen”的美国专利申请No.10/840,862;(3)2004年7月30日提交的、主题名称为“GesturesForTouchSensitiveInputDevices”的美国专利申请No.10/903,964;(4)2005年1月31提交的、主题名称为“GesturesForTouchSensitiveInputDevices”的美国专利申请11/048,264;(5)2005年1月18日提交的、主题名称为“Mode-BasedGraphicalUserInterfacesForTouchSensitiveInputDevices”美国专利申请No.11/038,950;(6)2005年9月16日提交的、主题名称为“VirtualInputDevicePlacementOnATouchScreenUserInterface”的美国专利申请No.11/228,758;(7)2005年9月16日提交的、主题名称为“OperationofAComputerWithATouchScreenInterface”的美国专利申请No.11/228,700;(8)2005年9月16日提交的、主题名称为“ActivatingVirtualKeysOfATouch-ScreenVirtualKeyboard”的美国专利申请No.11/228,737;以及(9)2006年3月3日提交的、主题名称为“Multi-FunctionalHand-HeldDevice”美国专利申请No.11/367,749。这些申请全部在此通过引用整体并入本文。
触摸屏112可具有超过100dpi的视频分辨率。在一些实施例中,触摸屏具有大约160dpi的视频分辨率。用户可使用任何合适的对象或附加物,诸如触笔、指状等来接触触摸屏112。在一些实施例中,用户界面被设计为主要与基于指状的接触和手势一起工作,这与基于触笔的输入相比由于指状在触摸屏上接触面积更大而可能精确度更低。在一些实施例中,设备将基于指状的粗略输入翻译为精确的指针/光标位置或命令以执行用户所期望的动作。
在一些实施例中,除了触摸屏,设备100还可包括触摸板(未示出)以用于激活或去激活特定的功能。在一些实施例中,触摸板是设备的触敏区域,该触敏区域与触摸屏不同,其不显示视觉输出。触摸板可以是与触摸屏112分开的触摸敏感表面或者是由触摸屏形成的触摸敏感表面的延伸。
设备100还包括用于为各种部分供电的电力系统162。电力系统162可包括电源管理系统、一个或多个功率源(例如,电池、交流电(AC))、再充电系统、电源故障检测电路、电源转换器或反相器、电源状态指示符(例如,发光二极管(LED))以及与便携式设备中的发电、电源管理和配电相关联的任何其他部分。
设备100也可以包括一个或多个光学传感器164。图1A示出了I/O子系统106中耦合至光学传感器控制器158的光学传感器。光学传感器164可以包括电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS)光电晶体管。光学传感器164从环境接收穿过一个或多个透镜投射的光,并且将光转换为代表图像的数据。结合成像模块143(也称作相机模块),光学传感器164可以捕获静态图像或视频。在一些实施例中,光学传感器位于设备100的背面上,与设备正面上触摸屏显示区112相对,以使得触摸屏显示器可以用作用于静态和/或视频图像采集的探视镜。在一些实施例中,光学传感器位于设备的正面上,以使得当用户查看触摸屏显示器上其他视频会议参与者时可以获得用户的图像以用于视频会议。在一些实施例中,光学传感器164的位置可以由用户改变(例如通过旋转设备外壳中的透镜和传感器)以使得可以使用单个光学传感器164以及触摸屏显示器以用于视频会议以及静态和/或视频图像采集。
设备100可选地也包括一个或多个接触强度传感器165。图1A示出了I/O子系统106中耦合至强度传感器控制器159的接触强度传感器。接触强度传感器165可选地包括一个或多个压阻应变仪、电容力传感器、静电力传感器、压电力传感器、光学力传感器、电容性触摸敏感表面、或其他强度传感器(例如用于测量触摸敏感表面上接触的力(或压力)的传感器)。接触强度传感器165从环境接收接触强度信息(例如压力信息或者用于压力信息的替代物)。在一些实施例中,至少一个接触强度传感器与触摸敏感表面(例如触摸敏感显示器系统112)并列或者靠近。在一些实施例中,至少一个接触强度传感器位于设备100的背面上,与位置设备100正面上的触摸屏显示器112相对。
设备100也可以包括一个或多个邻近传感器166。图1A示出了耦合至外围接口118的邻近传感器166。备选地,邻近传感器166可以耦合至I/O子系统106中的输入控制器160。邻近传感器166可以如主题名称为“ProximityDetectorInHandheldDevice”的美国专利申请No.11/241,839、主题名称为“ProximityDetectorInHandheldDevice”的美国专利申请No.11/240,788、主题名称为“UsingAmbientLightSensorToAugmentProximitySensorOutput”的美国专利申请No.11/620,702、主题名称为“AutomatedResponseToAndSensingOfUserActivityInPortableDevices”的美国专利申请No.11/586,862、以及主题名称为“MethodsAndSystemsForAutomaticConfigurationOfPeripherals”的美国专利申请No.11/638,251中所述而执行,这些申请在此通过引用整体并入本文。在一些实施例中,当多功能设备放置在用户耳部附近时(例如当用户进行电话呼叫时)邻近传感器关闭并且停用触摸屏112。
设备100可选地也包括一个或多个触觉输出发生器167。图1A示出了在I/O子系统106中耦合至触觉反馈控制器161的触觉输出发生器。触觉输出发生器167可选地包括一个或多个电声设备,诸如扬声器或其他音频部分和/或将电能转换为线性运动的机电设备,诸如电机、螺线管、电有源聚合物、压电致动器、静电致动器,或者其他触感输出产生部分(例如设备上将电信号转换为触感输出的部分)。接触强度传感器165从触觉反馈模块133接收触感反馈发生指令,并且在设备100上产生能够由设备100的用户感受到的触感输出。在一些实施例中,至少一个触觉输出发生器与触摸敏感表面(例如触摸敏感显示器系统112)并列或者靠近,并且可选地通过垂直(例如在设备100的表面中/外)或横向(例如在与设备100表面相同表面中往复)移动触摸敏感表面而产生触感输出。在一些实施例中,至少一个触觉输出发生器传感器位于设备100的背面上,与位于设备100正面上的触摸屏显示器112相对。
设备100也可以包括一个或多个加速度计168。图1A示出了耦合至外围接口118的加速度计168。备选地,加速度计168可以耦合至I/O子系统106中的输入控制器160。加速度计168可以如主题名称为“Acceleration-basedTheftDetectionSystemforPortableElectronicDevices”的美国专利公开No.20050190059以及主题名称为“MethodsAndApparatusesForOperatingAPortableDeviceBasedOnAnAccelerometer”的美国专利公开No.20060017692中所述而执行,这两个申请在此通过引用整体并入本文。在一些实施例中,信息基于对从该一个或多个加速度计所接收的数据的分析而在触摸屏显示器上以纵向视图或横向视图被显示。设备100可选地除一个或多个加速度计168之外还包括磁力仪(未示出)和GPS(或GLONASS或其它全球导航系统)接收器(未示出),以用于获取关于设备100的位置和取向(例如,纵向或横向)的信息。用于获得关于设备100的位置和朝向(例如纵向或横向)的信息。
在一些实施例中,存储在存储器102中的软件部件包括操作系统126、通信模块(或指令集)128、接触/运动模块(或指令集)130、图形模块(或指令集)132、文本输入模块(或指令集)134、全球定位系统(GPS)模块(或指令集)135以及应用程序(或指令集)136。此外,在一些实施例中,存储器102存储设备/全局内部状态157,如图1A和3中所示。设备/全局内部状态157包括以下中的一个或多个:活动应用程序状态,其指示哪些应用程序(如果有的话)当前是活动的;显示状态,其指示什么应用程序、视图或其它信息占据触摸屏显示器112的各个区域;传感器状态,包括从设备的各个传感器和输入控制设备116获取的信息;以及关于设备的位置和/或姿态的位置信息。
操作系统126(例如,Darwin、RTXC、LINUX、UNIX、OSX、WINDOWS、或嵌入式操作系统诸如VxWorks)包括用于控制和管理一般系统任务(例如,存储器管理、存储设备控制、电源管理等)的各种软件部件和/或驱动器,并且有利于各种硬件和软件部件之间的通信。
通信模块128有利于通过一个或多个外部端口124来与其他设备进行通信,并且还包括用于处理由RF电路108和/或外部端口124所接收的数据的各种软件部件。外部端口124(例如,通用串行总线(USB)、火线等)适于直接耦接至其它设备或者间接地通过网络(例如,互联网、无线LAN等)耦接。在一些实施例中,外部端口是与iPod(AppleInc.的商标)设备上所使用的30针连接器相同的或类似的和/或与其兼容的多针(例如,30针)连接器。
接触/运动模块130可检测到与触摸屏112(结合显示控制器156)和其他触敏设备(例如,触摸板或物理点击式触摸转盘)的接触。接触/运动模块130包括各种软件部件以用于执行与接触检测相关的各种操作,诸如确定是否发生接触(例如,检测手指向下事件),确定是否有接触运动以及跟踪在触摸敏感表面上的运动(例如,检测一个或多个手指拖动事件),以及确定接触是否已停止(例如,检测手指抬起事件或接触中的中断)。接触/运动模块130从触摸敏感表面接收接触数据。确定由一系列的接触数据所表示的接触点的运动,这可包括确定接触点的速率(量值)、速度(量值和方向)和/或加速度(量值和/或方向的变化)。这些操作可施加于单个接触(例如,一个指状接触)或多个同时的接触(例如,“多点触摸”/多个指状接触)。在一些实施例中,接触/运动模块130和显示控制器156检测触摸板上的接触。
在一些实施例中,接触/运动模块130使用一个或多个强度阈值的集合,以确定是否已经由用户执行了操作(例如以确定用户是否已经“点击”图标)。在一些实施例中,根据软件参数确定强度阈值的至少一子集(例如并不由特定物理致动器的激活阈值来确定强度阈值,并且可以在不改变设备100的物理硬件的情形下调整强度阈值)。例如,触摸板或触摸屏显示器的鼠标“点击”阈值可以设置为预定阈值范围的任何大范围,而不必改变触摸板或触摸屏显示器硬件。额外地,在一些实施方式中,向设备的用户提供软件设置以用于调整强度阈值的一个或多个集合(例如通过调整单个强度阈值和/或通过采用系统级点击“强度”参数一次性调整多个强度阈值)。
接触/运动模块130可由用户检测手势输入。触摸敏感表面上的不同的手势具有不同的接触模式。因此,手势可通过检测特定的接触模式而被检测到。例如,检测到手指轻击手势包括检测到手指按下事件、然后在与手指按下事件相同的位置(或基本上相同的位置)处(例如,在图标位置处)检测到手指向上(抬起)事件。又如,在触摸敏感表面上检测手指轻扫手势包括检测手指按下事件,然后检测一个或多个手指拖动事件,并且随后检测手指抬起(抬起)事件。
图形模块132包括各种已知的软件部件以用于渲染和显示触摸屏112或其他显示器上的图形,该显示触摸屏或其他显示器包括用于改变被显示的图形强度的部件。如本文所使用,术语“图形”包括可被显示给用户的任何对象,非限制性地包括文本、网页、图标(诸如包括软按键的用户界面对象)、数字图像、视频、动画等等。
在一些实施例中,图形模块132存储表示要使用的图形的数据。每个图形可被分配到对应的代码。图形模块132从应用程序等接收指定待显示的图形的一个或多个代码,在必要的情况下还一起接收坐标数据和其它图形属性数据,然后生成屏幕图像数据来输出给显示控制器156。
触觉反馈模块133包括用于产生由触觉输出发生器167使用的指令的各个软件部分,以响应于用户与设备100的交互在设备100上的一个或多个位置处产生触感输出。
文本输入模块134可以是图形模块132的部分,该文本输入模块提供了软键盘以用于输入各种应用程序中的文本(例如,联系人137、电子邮件140、即时消息141、浏览器147、以及任何其他需要文本输入的应用程序)。
GPS模块135确定设备的位置并且将该信息提供用于各种应用程序(例如,用于基于位置拨号的电话138、作为画面/视频元数据的相机143和提供基于位置的服务的应用程序,诸如天气桌面小部件、本地黄页桌面小部件和地图/导航桌面小部件)。
应用136可以包括以下模块(或指令集),或者其子集或超集:
联系人模块137(有时称作地址簿或联系人列表);
电话模块138;
视频会议模块139;
电子邮件客户端模块140;
即时消息收发(IM)模块141;
锻炼支持模块142;
用于静态和/或视频图像的相机模块143;
图像管理模块144;
视频播放器模块;
音乐播放器模块;
浏览器模块147;
日历模块148;
小部件模块149,该小部件模块模块可包括以下中的一者或多者:天气小部件模块149-1、股市小部件模块149-2、计算器小部件模块149-3、闹钟小部件模块149-4、词典小部件模块149-5和由用户获取的其他小部件模块以及用户创建的小部件模块149-6;
小部件发生器模块150,用于形成用户产生的小部件149-6;
搜索模块151;
视频和音乐播放器模块152,其合并了视频播放器模块和音乐播放器模块;
记事本模块153;
地图模块154;和/或
在线视频模块155。
可存储在存储器102中的其他应用程序136的实例包括其他文字处理应用程序、其他图像编辑应用程序、绘图应用程序、呈现应用程序、支持java的应用程序、加密、数字权限管理、语音识别和语音复制。
结合触摸屏112、显示控制器156、接触模块130、图形模块132和文本输入模块134,联系人模块137可用于管理通讯录或联系人列表(例如,存储在存储器102或存储器370中的联系人模块137的应用程序内部状态192),包括:将一个或多个姓名添加到通讯录;从通讯录删除一个或多个姓名;将一个或多个电话号码、一个或多个电子邮件地址、一个或多个物理地址或其他信息与姓名相关联;将图像与姓名进行关联;对姓名进行归类和分类;提供电话号码或电子邮件地址来发起和/或促进通过电话138、视频会议139、电子邮件140或即时消息收发141的通信;等等。
结合RF电路装置108、音频电路装置110、扬声器111、麦克风113、触摸屏112、显示控制器156、接触/运动模块130、图形模块132和文本输入模块134,电话模块138可以用于输入对应于电话号码的字符序列,访问联系人模块137中一个或多个电话号码,修改已经输入的电话号码,拨打相应电话号码,进行会话并且当完成会话时断开或挂断。如上所述,无线通信可以使用任意多个通信标准、协议和技术中的任一个。
结合RF电路装置108、音频电路装置110、扬声器111、麦克风113、触摸屏112、显示控制器156、光学传感器164、光学传感器控制器158、接触/运动模块130、图形模块132、文本输入模块134、联系人模块137、以及电话模块138,视频会议模块139包括根据用户指令发起、进行和终止用户与一个或多个其他参与者之间的视频会议的可执行指令。
结合RF电路装置108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132、以及文本输入模块134,电子邮件客户端模块140包括响应于用户指令来创建、发送、接收和管理电子邮件的可执行指令。结合图像管理模块144,电子邮件客户端模块140使得非常容易创建和发送具有由相机模块143拍摄的静态图像或视频图像的电子邮件。
结合RF电路装置108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132、以及文本输入模块134,即时消息收发模块141包括用于输入对应于即时消息的字符序列、修改先前输入的字符、传输相应即时消息(例如,使用短消息服务(SMS)或多媒体消息服务(MMS)协议以用于基于电话的即时消息或者使用XMPP、SIMPLE、或IMPS以用于基于互联网的即时消息)、接收即时消息以及查看所接收的即时消息的可执行指令。在一些实施例中,所传输和/或所接收的即时消息可包括在MMS和/或增强的消息服务(EMS)中所支持的图形、照片、音频文件、视频文件和/或其他附件。如本文所使用,“即时消息”是指基于电话的消息(例如,使用SMS或MMS发送的消息)和基于互联网的消息(例如,使用XMPP、SIMPLE、或IMPS发送的消息)两者。。
结合RF电路装置108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132、文本输入模块134、GPS模块135、地图模块154以及音乐播放器模块,锻炼支持模块142包括创建锻炼(例如,具有时间、距离和/或卡路里燃烧目标)的可执行指令;与健身传感器(运动设备)进行通信;接收健身传感器数据;校准用于监视健身的传感器;选择和播放用于健身的音乐;以及显示、存储和传输健身数据。
结合触摸屏112、显示控制器156、光学传感器164、光学传感器控制器158、接触/运动模块130、图形模块132以及图像管理模块144,相机模块143包括捕获静态图像或视频(包括视频流)并且将它们存储到存储器102中、修改静态图像或视频的特性、或从存储器102删除静态图像或视频的可执行指令。
结合触摸屏112、显示控制器156、接触/运动模块130、图形模块132、文本输入模块134以及相机模块143,图像管理模块144包括排列、修改(例如,编辑)、或以其他方式操控、加标签、删除、呈现(例如,在数字幻灯片或相册中)以及存储静态图像和/或视频图像的可执行指令。
结合RF电路装置108、触摸显示器112、显示控制器156、接触/运动模块130、图形模块132以及文本输入模块134,浏览器模块147浏览器模块147包括根据用户指令浏览互联网(包括搜索、链接到、接收和显示网页或其部分以及链接到网页的附件和其他文件)的可执行指令。
结合RF电路装置108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132、文本输入模块134、电子邮件客户端模块140、以及浏览器模块147,日历模块148包括用于根据用户指令创建、显示、修改、和存储日历和与日历相关联的数据(例如,日历条目、待办任务列表等)的可执行指令。
结合RF电路装置108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132、文本输入模块134以及浏览器模块147,小部件模块149是可由用户下载和使用(例如,天气小部件149-1、股市小部件149-2、计算器小部件149-3、闹钟小部件149-4和词典小部件149-5)或者用户创建(例如,用户创建的小部件149-6)的迷你应用程序。在一些实施例中,桌面小程序包括HTML(超文本标记语言)文件、CSS(层叠样式表)文件和JavaScript文件。在一些实施例中,桌面小程序包括XML(可扩展标记语言)文件和JavaScript文件(例如,Yahoo!桌面小程序)。
结合RF电路装置108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132、文本输入模块134以及浏览器模块147,小部件生成器模块150可由用户用于创建小部件(例如,将网页的用户指定的部分变成小部件)。
结合触摸屏112、显示控制器156、接触/运动模块130、图形模块132以及文本输入模块134,搜索模块151包括根据用户指令来搜索存储器102中的匹配一个或多个搜索条件(例如,一个或多个用户指定的搜索词)的文本、音乐、声音、图像、视频和/或其他文件的可执行指令。
结合触摸屏112、显示控制器156、接触/运动模块130、图形模块132、音频电路装置110、扬声器111、RF电路装置108、以及浏览器模块147,音频和音乐播放器模块152包括允许用户下载和回放以一种或多种文件格式(诸如MP3或AAC文件)存储的所记录的音乐和其他声音文件的可执行指令,以及显示、呈现或以其他方式回放视频(例如,在触摸屏112上或在经由外部端口124连接的外部显示器上)的可执行指令。在一些实施例中,设备100可包括MP3播放器诸如iPod(AppleInc.的商标)的功能。
结合触摸屏112、显示控制器156、接触/运动模块130、图形模块132以及文本输入模块134,记事本模块153包括根据用户指令来创建和管理记事本、待办事项等的可执行指令。
结合RF电路装置108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132、文本输入模块134、GPS模块135以及浏览器模块147,地图模块154根据用户指令可用于接收、显示、修改和存储地图和与地图相关联的数据(例如,行驶方向;特定位置处或附近的商店和其它兴趣点的数据;以及其他基于位置的数据)。
结合触摸屏112、显示控制器156、接触/运动模块130、图形模块132、音频电路装置110、扬声器111、RF电路装置108、文本输入模块134、电子邮件客户端模块140以及浏览器模块147,在线视频模块155包括指令,该指令允许用户访问、浏览、接收(例如,通过流媒体和/或下载)、回放(例如在触摸屏上或经由外部端口124所连接的外部显示器上)、发送具有至特定的在线视频的链接的电子邮件,以及以其他方式管理一种或多种文件格式诸如H.264的在线视频。在一些实施例中,即时消息模块141而不是电子邮件客户端模块140用于发送链接至特定的在线视频。对在线视频应用的额外描述可以在2007年6月20日提交的、主题名称为“PortableMultifunctionDevice,Method,andGraphicalUserInterfaceforPlayingOnlineVideos”的美国临时专利申请No.60/936,562以及2007年12月31日提交的、主题名称为“PortableMultifunctionDevice,Method,andGraphicalUserInterfaceforPlayingOnlineVideos”的美国专利申请No.11/968,067中找到,这些申请的全文在此通过引用整体并入本文。
上述所识别的每个模块和应用程序对应于用于执行上述一种或多种功能以及在本申请中所描述的方法(例如,本文中所描述的计算机实现的方法和其他信息处理方法)的一组可执行指令。这些模块(即指令集)不需要作为单独的软件程序、过程或模块来实现,因此这些模块的各种子集可组合或以其他方式被重新布置在各种实施例中。例如,视频播放器模块可以与音乐播放器模块组合为单个模块(例如视频和音乐播放器模块152,图1A)。在一些实施例中,存储器102可以存储以上所标识模块和数据结构的子集。此外,存储器102可以存储以上并未描述的额外的模块和数据结构。
在一些实施例中,设备100是该设备上的预定义的一组功能的操作唯一地通过触摸屏和/或触摸板来执行的设备。通过使用触摸屏和/或触摸板作为用于设备100的操作的主要输入控制设备,设备100上的物理输入控制设备(诸如推压按钮、刻度盘等)的数量可减少。
通过触摸屏和/或触摸板排他地执行的功能的预定集合可选地包括在用户界面之间的导航。在一些实施例中,当用户触摸触摸板时,设备100被从可显示在设备100上的任何用户界面导航到主菜单、主屏幕菜单或根菜单。在这样的实施例中,触摸板可以被称为“菜单按钮”。在一些其他实施例中,菜单按钮可以是物理推压按钮或者其他物理输入控制设备,而非触摸板。
图1B是示出了根据一些实施例的用于事件处理的示例性部分的框图。在一些实施例中,存储器102(图1A)或370(图3)包括事件分类器170(例如在操作系统126中)以及相应应用136-1(例如任意前述应用137-151,155,380-390)。事件分类器170接收事件信息并确定要将事件信息递送到的应用程序136-1和应用程序136-1的应用程序视图191。事件分类器170包括事件监视器171和事件分配器模块174。在一些实施例中,应用程序136-1包括应用程序内部状态192,该应用程序内部状态指示当应用程序是活动的或正在执行时显示在触敏显示器112上的一个或多个当前应用程序视图。在一些实施例中,设备/全局内部状态157被事件分类器170用来确定哪个(哪些)应用程序当前是活动的,并且应用程序内部状态192被事件分类器170用来确定要将事件信息递送到的应用程序视图191。
在一些实施例中,应用内部状态192包括额外的信息,诸如一个或多个:当应用136-1恢复执行时恢复将要使用的信息,指示了正在显示的信息或者准备由应用136-1显示的用户界面状态信息,用于使得用户回到应用136-1的之前状态或者视图的状态队列,以及由用户采取的之前动作的重做/撤销队列。
事件监控器171从外围接口118接收事件信息。事件信息包括关于子事件的信息(例如在触摸敏感显示器112上用户触摸,作为多触摸手势的一部分)。外围接口118发送其从I/O子系统106或传感器、诸如邻近传感器166、加速度计168和/或麦克风113(通过音频电路装置110)接收的信息。外围接口118从I/O子系统106接收的信息包括来自触摸敏感显示器112或触摸敏感表面的信息。
在一些实施例中,事件监视器171以预先确定的间隔将请求发送至外围设备接口118。作为响应,外围设备接口118传输事件信息。在其它实施例中,外围设备接口118仅当存在显著事件(例如,接收到高于预先确定的噪声阈值的输入和/或接收到超过预先确定的持续时间的输入)时传输事件信息。在一些实施例中,事件分类器170也包括命中视图确定模块172和/或活动事件识别器确定模块173。
命中视图确定模块172提供用于当触摸敏感显示器112显示多于一个视图时确定子事件已经在一个或多个视图内何处发生的软件程序。视图由控件以及用户可以在显示器上看到的其他元素构成。
与应用程序相关联的用户界面的另一方面是一组视图,本文中有时也称为应用程序视图或用户界面窗口,在其中显示信息并且发生基于触摸的手势。其中检测到触摸的(相应的应用程序的)应用程序视图可对应于应用程序的程序化或视图分级结构内的程序化水平。例如,其中所检测到的触摸的最低水平视图可称为命中视图,并且被认为是正确输入的一组事件可至少部分地基于初始触摸的命中视图来确定,该初始触摸开始基于触摸的手势。
命中视图确定模块172接收与基于触摸的手势的子事件相关的信息。当应用程序具有以分级结构组织的多个视图时,命中视图确定模块172将命中视图识别为该分级结构中应当处理该子事件的最低视图。在大多数情况下,命中视图是发起子事件(即形成事件或潜在事件的子事件序列中的第一个子事件)在其中发生的最低水平视图。一旦命中视图被命中视图确定模块识别,命中视图通常接收与其被识别为命中视图所针对的同一触摸或输入源相关的所有子事件。
活动事件识别器确定模块173确定视图分级结构内的哪个或哪些视图应该接收特定的子事件序列。在一些实施例中,活动事件识别器确定模块173确定仅命中视图应当接收特定的子事件序列。在其它实施例中,活动事件识别器确定模块173确定包括子事件的物理位置在内的所有视图均为主动参与的视图,因此确定了所有主动参与的视图均应接收特定的子事件序列。在其它实施例中,即使触摸子事件完全被局限到与一特定视图相关联的区域,分级结构中更高的视图将仍然保持为主动参与的视图。
事件分配器模块174将事件信息调度到事件识别器(例如,事件识别器180)。在包括活动事件识别器确定模块173的实施例中,事件分配器模块174将事件信息递送到由活动事件识别器确定模块173确定的事件识别器。在一些实施例中,事件分配器模块174在事件队列中存储事件信息,该事件信息由相应事件接收器模块182检索。
在一些实施例中,操作系统126包括事件分类器170。另选地,应用程序136-1包括事件分类器170。在另一实施例中,事件分类器170是独立的模块,或者是存储在存储器102中的另一模块(诸如接触/运动模块130)的一部分。
在一些实施例中,应用程序136-1包括多个事件处理程序190和一个或多个应用程序视图191,其中每一个都包括用于处理发生在应用程序的用户界面的相应视图内的触摸事件的指令。应用程序136-1的每个应用程序视图191包括一个或多个事件识别器180。通常,相应应用程序视图191包括多个事件识别器180。在其它实施例中,事件识别器180中的一个或多个是独立模块的一部分,独立模块诸如是用户界面工具包(未示出)或应用程序136-1从中继承方法和其它特性的更高水平对象。在一些实施例中,相应事件处理程序190包括以下中的一个或多个:数据更新器176、对象更新器177、GUI更新器178和/或从事件分类器170接收的事件数据179。事件处理程序190可利用或调用数据更新器176、对象更新器177或GUI更新器178以更新应用程序内部状态192。或者,应用程序视图191中的一个或多个包括一个或多个相应事件处理程序190。另外,在一些实施例中,数据更新器176、对象更新器177和GUI更新器178中的一个或多个被包括在相应应用程序视图191中。
相应的事件识别器180从事件分类器170接收事件信息(例如,事件数据179),并且从事件信息识别事件。事件识别器180包括事件接收器182和事件比较器184。在一些实施例中,事件识别器180还包括以下的至少一个子集:元数据183、以及事件递送指令188(其可包括子事件递送指令)。
事件接收器182从事件分类器170接收事件信息。事件信息包括关于子事件的信息,例如触摸或触摸移动。根据子事件,事件信息还包括附加信息,诸如子事件的位置。当子事件涉及触摸的运动时,事件信息也可包括子事件的速率和方向。在一些实施例中,事件包括设备从一个取向旋转到另一取向(例如,从纵向取向旋转到横向趋向,反之亦然),并且事件信息包括关于设备的当前取向(也被称为设备姿态)的对应信息。
事件比较器184将事件信息与预定义的事件或子事件定义进行比较,并且基于该比较来确定事件或子事件、或者确定或更新事件或子事件的状态。在一些实施例中,事件比较器184包括事件定义186。事件定义186包含事件的定义(例如,预定义的子事件序列),例如事件1(187-1)、事件2(187-2)以及其它。在一些实施例中,事件187中的子事件包括例如触摸开始、触摸结束、触摸移动、触摸取消和多点触摸。在一个实例中,事件1(187-1)的定义是被显示对象上的双击。例如,该双击包括被显示对象上的预定时长的第一次触摸(触摸开始)、预定时长的第一次抬起(触摸结束)、该被显示对象上的预定时长的第二次触摸(触摸开始)、以及预定时长的第二次抬起(触摸结束)。在另一实例中,事件2(187-2)的定义是被显示对象上的拖动。例如,拖动包括被显示对象上的预定时长的触摸(或接触)、横跨触敏显示器112的触摸的移动,以及触摸的抬起(触摸结束)。在一些实施例中,事件还包括用于一个或多个相关联的事件处理程序190的信息。
在一些实施例中,事件定义187包括事件的用于相应的用户界面对象的定义。在一些实施例中,事件比较器184执行命中测试以确定哪个用户界面对象与子事件相关联。例如,在其中在触敏显示器112上显示三个用户界面对象的应用程序视图中,当在触敏显示器112上检测到触摸时,事件比较器184执行命中测试以确定这三个用户界面对象中的哪个用户界面对象与该触摸(子事件)相关联。如果每个所显示的对象与相应的事件处理程序190相关联,则事件比较器使用该命中测试的结果来确定哪个事件处理程序190应当被激活。例如,事件比较器184选择与触发该命中测试的子事件和对象相关联的事件处理程序。
在一些实施例中,相应事件187的定义还包括延迟动作,该延迟动作延迟事件信息的递送,直到已确定子事件序列是否对应于事件识别器的事件类型之后。
当相应的事件识别器180确定子事件串不与事件定义186中的任何事件匹配,则该相应事件识别器180进入事件不可能、事件失败、或事件结束状态,然后其忽视该基于触摸的手势的后续子事件。在这种情况下,保持活动以用于命中视图的其他事件识别器(如果有的话)继续跟踪和处理持续的基于接触的手势的子事件。
在一些实施例中,相应的事件识别器180包括具有指示事件递送系统应如何执行对主动参与的事件识别器的子事件递送的可配置的属性、标记和/或列表的元数据183。在一些实施例中,元数据183包括指示事件识别器如何彼此进行交互的可配置的属性、标记和/或列表。在一些实施例中,元数据183包括指示子事件是否被递送到视图或程序化分级结构中的变化水平的可配置的属性、标记和/或列表。
在一些实施例中,当事件的一个或多个特定子事件被识别时,相应事件识别器180激活与事件相关联的事件处理程序190。在一些实施例中,相应的事件识别器180将与该事件相关联的事件信息递送到事件处理程序190。激活该事件处理程序190不同于将子事件发送(和延期发送)到相应的命中视图。在一些实施例中,事件识别器180抛出与所识别的事件相关联的标记,并且与该标记相关联的事件处理程序190接到该标记并执行预定义的过程。
在一些实施例中,事件递送指令188包括递送关于子事件的事件信息而不激活事件处理程序的子事件递送指令。替代地,子事件递送指令将事件信息递送到与子事件串相关联的事件处理程序或者递送到主动参与的视图。与子事件串或与主动参与的视图相关联的事件处理程序接收事件信息并执行预先确定的过程。
在一些实施例中,数据更新器176创建并更新在应用程序136-1中使用的数据。例如,数据更新器176对在联系人模块137中使用的电话号码进行更新,或者对在视频播放器模块145中使用的视频文件进行存储。在一些实施例中,对象更新器177创建并更新在应用程序136-1中使用的对象。例如,对象更新器176创建新的用户界面对象,或者更新用户界面对象的位置。GUI更新器178更新GUI。例如,GUI更新器178准备显示信息并将其发送至图形模块132以用于显示在触敏显示器上。
在一些实施例中,一个或多个事件处理程序190包括数据更新器176、对象更新器177和GUI更新器178或者具有对数据更新器176、对象更新器177和GUI更新器178的访问权限。在一些实施例中,数据更新器176、对象更新器177和GUI更新器178被包括在相应应用程序136-1或应用程序视图191的单个模块中。在其它实施例中,它们被包括在两个或更多个软件模块中。
应当理解,有关触敏显示器上的用户触摸的事件处理的前述讨论还适用于对具有输入设备的多功能设备100进行操作的其他形式的用户输入,并非所有输入都在触摸屏上发起,例如利用或者不利用触摸板上的单个或多个键盘按下或保持、用户移动轻击、拖动、滚动等,利用或者不利用手写触笔输入、设备移动、口头指令、所检测的眼睛移动、生物特征输入和/或它们的任何组合来协调鼠标移动和鼠标按钮按下,该鼠标移动和鼠标按钮按下可用作对应于定义待识别的事件的子事件的输入。
图2根据一些实施例示出了具有触摸屏112的便携式多功能设备100。触摸屏可在用户界面(UI)200内显示一个或多个图形。在该实施例中以及下面描述的其它实施例中,用户可通过在图形上作手势来选择图形中的一个或多个图形,例如利用一个或多个手指202(在图中未按比例绘制)或一个或多个触笔203(在图中未按比例绘制)。在一些实施例中,当用户中断与该一个或多个图形的接触时,发生对一个或多个图形的选择。在一些实施例中,手势可包括已与设备100进行接触的一次或多次轻击,一次或多次轻扫(从左到右、从右到左、向上和/或向下)和/或手指的滚动(从右到左、从左到右、向上和/或向下)。在一些实施例中,无意中接触图形可能不会选择该图形。例如,当对应于选择的手势是轻击时,扫过应用程序图标的轻扫手势可能不会选择对应的应用程序。
设备100也可包括一个或多个物理按钮,诸如“home键”按钮或菜单按钮204。如先前所述,菜单按钮204可用于导航到一组应用程序中的可在设备100上执行的任一个应用程序136。备选地,在一些实施例中,菜单按钮被实现为被显示在触摸屏112上的GUI中的软键。
在一些实施例中,设备100包括触摸屏112,菜单按钮204,用于打开/关闭设备并且锁定设备的推压按钮206,音量调节按钮208,用户身份模块(SIM)卡槽210,耳机插孔212,以及连接/充电外部端口124。推压按钮206可选地用于通过推压按钮并且以预定时间间隔保持按钮在推压状态下以打开/关闭设备电源;用于通过推压按钮并且在预定时间间隔已经过去之前释放按钮来锁定设备;和/或用于解锁设备或发起解锁程序。在备选实施例中,设备100通过麦克风113接收用于激活或停用一些功能的言语输入。设备100也可选地包括用于检测触摸屏112上接触强度的一个或多个接触强度传感器165和/或用于产生对于设备100用户的触感输出的一个或多个触觉输出发生器167。
图3是根据一些实施例的具有显示器和触摸敏感表面的示例性多功能设备的框图。设备300不必是便携式的。在一些实施例中,设备300是膝上型计算机、桌上型计算机、平板计算机、多媒体播放器设备、导航设备、教育设备(诸如儿童学习玩具)、游戏系统或控制设备(例如家用或工业控制器)。设备300通常包括一个或多个处理单元(CPU)310,一个或多个网络或其他通信接口360,存储器370,以及用于互连这些部分的一个或多个通信总线320。通信总线320可选地包括互连并且控制系统部分之间通信的电路装置(有时称作芯片集)。设备300包括输入/输出(I/O)接口330,包括通常为触摸屏显示器的显示器340。I/O接口330也可选地包括键盘和/或鼠标(或其他指点设备)350以及触摸板355,用于在设备300上产生触觉输出的触觉输出发生器357(例如类似于参照图1A如上所述的触觉输出发生器167),传感器359(例如,光学、加速度、邻近、触摸敏感传感器,和/或类似于如上参照图1A所述的接触强度传感器的接触强度传感器)。存储器370包括高速随机存取存储器,诸如DRAM、SRAM、DDRRAM,或其他随机访问固态存储器设备;以及可选地包括非易失性存储器,诸如一个或多个磁盘存储设备,光盘存储设备,闪存设备,或其他非易失性固态存储设备。存储器370可选地包括一个或多个远离CPU310的存储设备。在一些实施例中,存储器370存储与在便携式多功能设备100(图1A)的存储器102中所存储的程序、模块和数据结构类似的程序、模块和数据结构,或者其子集。此外,存储器370可选地存储在便携式多功能设备100的存储器102中不存在的额外程序、模块和数据结构。例如,设备300的存储器370可选地存储绘图模块380,演示模块382,文字处理模块384,网站创建模块386,盘编写模块388,和/或电子表格模块390,而便携式多功能设备100(图1A)的存储器102可选地并未存储这些模块。
图3中的上述所识别的元件中的每个元件可存储在先前提到的存储器设备中的一个或多个存储器设备中。上述所识别的模块中的每个模块对应于用于执行上述功能的指令集。上述所识别的模块或程序(即指令集)不需要被实现为独立的软件程序、过程或模块,因此在各种实施例中,这些模块的各种子集可被组合或以其他方式被重新布置。在一些实施例中,存储器370可存储上述所识别的模块和数据结构的子集。此外,存储器370可存储上面未描述的附加模块和数据结构。
现在转而关注可以例如实施在便携式多功能设备100上的用户界面的实施例。
图4A示出了根据一些实施例的在便携式多功能设备100上用于应用菜单的示例性用户界面。类似的用户界面可以在设备300上实施。在一些实施例中,用户界面400包括以下元件,或者其子集或超级:
信号强度指示符402,用于无线通信,诸如蜂窝和Wi-Fi信号;
时间404;
蓝牙指示符405;
电池状态指示符406;
托盘408,具有用于频繁使用的应用的图标,诸如:
图标416,用于电话模块138,标注为“电话”,其可选地包括未接来电或语音邮件消息的数目的指示符414;
图标418,用于电子邮件客户端模块140,标注为“邮件”,其可选地包括未读电子邮件数目的指示符410;
图标420,用于浏览器模块147,标注为“浏览器”以及
图标422,用于视频和音乐播放器模块152,也称作iPod(苹果有限公司的商标)模块152,标注为“iPod;”以及
用于其他应用的图标,诸如:
图标424,用于IM模块141,标注为“消息”
图标426,用于日历模块148,标注为“日历”
图标428,用于图像管理模块144,标注为“照片”
图标430,用于相机模块143,标注为“相机”
图标432,用于在线视频模块155,标注为“在线视频”
图标434,用于股票小部件149-2,标注为“股票”
图标436,用于地图小部件154,标注为“地图”
图标438,用于天气小部件149-1,标注为“天气”
图标440,用于闹钟小部件149-1,标注为“闹钟”
图标442,用于锻炼支持模块142,标注为“锻炼支持”
图标444,用于设置应用或模块,标注为“设置”,其提供了对用于设备100及其各个应用136设置的访问。
应该注意,图4A中所示图标符号仅是示例。例如,用于视频和音乐播放器模块152的图标422可以可选地标注为“音乐”或“音乐播放器”。其他图标可选地用于各个应用图标。在一些实施例中,用于相应应用图标的标注包括对应于相应应用图标的应用的名称。在一些实施例中,用于特定应用图标的标注与对应于特定应用图标的应用名称不同。
图4B示出了在具有与显示器450(例如触摸屏显示器112)分离的触摸敏感表面451(例如平板或触摸板355,图3)的设备(例如设备300,图3)上的示例性用户界面。设备300也可选地包括用于检测触摸敏感表面451上的接触强度的一个或多个接触强度传感器(例如一个或多个传感器357)和/或用于向设备300的用户产生触感输出的一个或多个触觉输出发生器359。
尽管将参考触摸屏显示器112(其中组合了触摸敏感表面和显示器)上的输入给出随后的实例中的一些实例,但是在一些实施例中,设备检测与显示器分开的触摸敏感表面上的输入,如图4B中所示。在一些实施例中,触摸敏感表面(例如,图4B中的451)具有对应于显示器(例如,450)上的主轴(例如,图4B中的453)的主轴(例如,图4B中的452)。根据这些实施例,设备检测在对应于显示器上的相应位置的位置(例如,在图4B中,460对应于468并且462对应于470)处与触摸敏感表面451的接触(例如,图4B中的460和462)。这样,当触摸敏感表面(例如,图4B中的451)与多功能设备的显示器(图4B中的450)分开时,由设备在触摸敏感表面上检测到的用户输入(例如,接触460和462以及它们的移动)被该设备用于操控显示器上的用户界面。应当理解,类似的方法可用于本文所述的其他用户界面。
尽管主要针对手指输入(例如,键盘按键上的手指接触、手指轻击手势、手指轻扫手势、手指挥击)给出了以下实例,但是应当理解,在一些实施例中,可利用来自另一个输入设备(例如,基于鼠标的输入或触笔输入)的输入来替换一个或多个手指输入。例如,轻扫手势可被鼠标单击(例如,代替接触)替换,之后是光标沿轻扫路径的移动(例如,代替接触的移动)。又如,在光标位于轻击手势的位置上方(例如,代替检测接触,之后是停止检测接触)的同时,轻击手势可被鼠标单击替换。类似地,当同时检测到多个用户输入时,应当理解,可同时使用多个计算机鼠标,或者可同时使用鼠标和手指接触。
图5A示出了示例性个人电子设备500。设备500包括本体502。在一些实施例中,设备500可以包括参照设备100和300(例如图1A至图4B)所述的一些或所有特征。在一些实施例中,设备500具有触摸敏感显示屏504,下文中称作触摸屏504。备选地,或者除了触摸屏504之外,设备500具有显示器和触摸敏感表面。与设备100和300相同,在一些实施例中,触摸屏504(或者触摸敏感表面)可以具有用于检测所施加接触(例如触摸)强度的一个或多个强度传感器。触摸屏504(或触摸敏感表面)的一个或多个强度传感器可以提供表示触摸强度的输出数据。设备500的用户界面可以基于它们的强度而对触摸做出响应,这意味着不同强度的触摸可以调用设备500上不同的用户界面操作。
用于检测并处理触摸强度的技术可以例如在相关申请中找到:2013年5月8日提交的、主题名称为“Device,Method,andGraphicalUserInterfaceforDisplayingUserInterfaceObjectsCorrespondingtoanApplication”的国际专利申请序列No.PCT/US2013/040061以及2013年11月11日提交的、主体名称为“Device,Method,andGraphicalUserInterfaceforTransitioningBetweenTouchInputtoDisplayOutputRelationships”的国际专利申请序列No.PCT/US2013/069483,这些申请在此通过引用整体并入本文。
在一些实施例中,设备500具有一个或多个输入机构506和508。如果包括的话,则输入机构506和508可以是物理的。物理输入机构的示例包括推压按钮和可旋转机构。在一些实施例中,设备500具有一个或多个附件机构。如果包括的话,则这些附件机构可以允许设备500的附件具有例如帽子、眼饰、耳环、项链、衬衣、夹克、手镯、表带、链条、裤子、皮带、鞋子、钱包、背包等。这些附件机构可以允许由用户穿戴设备500。
图5B示出了示例性个人电子设备500。在一些实施例中,设备500可以包括参照图1A、图1B和图3所述的一些或所有部分。设备500具有总线512,其将I/O区段514与一个或多个计算机处理器516和存储器518可操作地耦合。I/O区段514可以连接至显示器504,其可以具有触摸敏感部分522,以及可选地触摸强度敏感部分524。此外,I/O区段514可以与通信单元530组合以用于使用Wi-Fi、蓝牙、近场通信(NFC)、蜂窝和/或其他无线通信技术来接收应用和操作系统数据。设备500可以包括输入机构506和/或508。输入机构506可以例如是可旋转输入设备,或者可推压和可旋转输入设备。输入机构508在一些示例中可以是按钮。
输入机构508在一些示例中可以是麦克风。个人电子设备500可以包括各种传感器,诸如GPS传感器532、加速度计534、方向传感器540(例如罗盘)、陀螺仪536、运动传感器538和/或其组合,所有这些设备可以可操作地连接至I/O区段514。
个人电子设备500的存储器518可以是非易失性计算机可读存储介质,用于存储计算机可执行指令,当由一个或多个计算机处理器执行时,计算机可执行指令例如可以使得计算机处理器执行如上所述的技术,包括方法3300、3400、3500、3600、3700、3800、3900、4000、4600和4900(图33至图49)。计算机可执行指令也可以存储和/或输运在任何非易失性计算机可读存储介质内,以由指令执行系统、设备或装置所使用或者与其连接。指令执行系统、设备或装置诸如基于计算机的系统、包含处理器的系统、或者可以从指令执行系统、设备或装置获取指令并且执行指令的其他系统。出于该文献的目的,“非易失性计算机可读存储介质”可以是可以有形地包含或存储由指令执行系统、设备或装置所使用或者与其连接地计算机可执行指令地任何介质。非易失性计算机可读存储介质可以包括但不限于,磁、光学、和/或半导体存储。这些存储地示例包括磁盘,基于CD、DVD或蓝光技术的光盘,以及诸如闪存、固态驱动器等的永久固态存储器。个人电子设备500并不限于图5B的部分和配置,而是可以包括在多个配置结构中的其他或额外部分。
如在此所使用的那样,术语“可供性”涉及可以在设备100、300和/或500(图1、图3和图5)的显示屏上显示的用户交互图形用户界面对象。例如,图像(例如图标)、按钮和文本(例如超文本)可以均构成可供性。
如在此使用的那样,术语“焦点选择器”涉及指示了用户界面的、与用户交互的当前部分的输入元件。在包括光标或其他位置标记的一些实施方式中,光标用作“焦点选择器”,以使得当在触摸敏感表面(例如图3中触摸板355,或者图4B中触摸敏感表面451)上检测到输入(例如推压输入)而光标在特定用户界面元件(例如按钮、窗口、滑块或其他用户界面元件)之上时,根据检测到的输入而调整特定的用户界面元件。在包括实现与触摸屏显示器上的用户界面元件直接交互的触摸屏显示器(例如图1A中触摸敏感显示系统112,或者图4A中触摸屏112)的一些实施方式中,在触摸屏上检测到的接触用作“焦点选择器”,使得当在特定用户界面元件(例如按钮、窗口、滑块或其他用户界面元件)的位置处检测到触摸屏显示器上输入(例如由接触输入的推压)时,根据检测到的输入调整特定用户界面元件。在一些实施方式中,焦点从用户界面的一个区域移动至用户界面的另一区域而并不具有对应的光标移动或者触摸屏显示器上接触的移动(例如通过使用制表键或方向键将焦点从一个按钮移动至另一按钮);在这些实施方式中,焦点选择器根据用户界面不同区域之间焦点的移动而移动。不考虑焦点选择器所采取的具体细节,焦点选择器通常是由用户控制以便于将用户的目的交互与用户界面通信(例如通过向设备指示用户有意与其交互的用户界面的元件)的用户界面元件(或者触摸屏显示器上接触)。例如,当在触摸敏感表面(例如触摸板或触摸屏)上检测到推压输入时在相应按钮之上的焦点选择器(例如光标、接触或选择框)的位置将指示用户旨在激活相应按钮(与在设备的显示器上所示其他用户界面元件相反)。
如在说明书和权利要求中所使用,术语接触的“特性强度”涉及基于接触的一个或多个强度的接触的特性。在一些实施例中,特性强度是基于多个强度样本。特性强度可选地基于预定数目的强度样本,或者在相对于预定事件(例如在检测到接触之后,在检测接触抬起之前,在检测到接触开始移动之前或之后,在检测到接触结束之前,在检测到接触强度增大之前或之后,和/或在检测到接触强度减小之前或之后)的预定时间段(例如0.05、0.1、0.2、1、2、5、10秒)期间收集到的强度样本的集合。接触的特性强度可选地基于以下项中的一个或多个:接触强度的最大值,接触强度的中值,接触强度的平均值,接触强度的最高10%数值,接触强度半高处数值,接触强度90%最大处数值等等。在一些实施例中,接触的历时在确定特性强度(例如当特性强度是接触强度随时间的平均值时)中使用。在一些实施例中,特性强度与一个或多个强度阈值的集合对比以确定是否已经由用户执行了操作。例如,一个或多个强度阈值的集合可以包括第一强度阈值和第二强度阈值。在该示例中,具有并未超过第一阈值的特性强度的接触导致第一操作,具有超过第一强度阈值并且并未超过第二强度阈值的特性强度的接触导致第二操作,以及具有超过第二阈值的特性强度的接触导致第三操作。在一些实施例中,特性强度与一个或多个阈值之间的比较用于确定是否执行一个或多个操作(例如是否执行相应操作,或者放弃执行相应操作),而不是用于确定是否执行第一操作或第二操作。
在一些实施例中,识别手势的一部分以用于确定特性强度的目的。例如,触摸敏感表面可以接收从开始位置转变并且到达结束位置的连续滑动接触,在该结束位置点处接触强度增大。在该示例中,在结束位置处的接触的特性强度可以仅基于连续滑动接触的一部分,而不是整个滑动接触(例如在结束位置处滑动接触的仅一部分)。在一些实施例中,平滑算法可以在确定接触的特性强度之前应用于滑动接触的强度。例如,平滑算法可选地包括以下项中的一种或多种:未加权的滑动平均平滑算法,三角平滑算法,中值过滤器平滑算法,和/或指数平滑算法。在一些情形中,这些平滑算法为了确定特性强度的目的而消除了滑动接触的强度中的窄尖峰或急降。
在触摸敏感表面上接触的强度可以相对于一个或多个强度阈值而特征化,诸如接触检测强度阈值、轻压强度阈值、深压强度阈值、和/或一个或多个其他强度阈值。在一些实施例中,轻压强度阈值对应于在此强度下设备将执行通常与点击物理鼠标或轨迹板的按钮相关联的操作的强度。在一些实施例中,深压强度阈值对应于在此强度下设备将执行与通常与点击物理鼠标或轨迹板的按钮相关联操作不同的操作的强度。在一些实施例中,当检测到接触具有低于轻压强度阈值的特性强度(例如,以及在额定接触检测强度阈值之上,在该阈值之下不再检测到接触)时,设备将根据触摸敏感表面上接触的移动而移动焦点选择器,而并不执行与轻压强度阈值或深压强度阈值相关联的操作。通常,除非上下文给出相反指示,否则这些强度阈值在用户界面图形的不同集合之间是一致的。
接触的特性强度从低于轻压强度阈值的强度增大至在轻压强度阈值与深压强度阈值之间的强度有时称作“轻压”输入。接触的特性强度从低于深压强度阈值的强度增大至深压强度阈值之上的强度有时称作“深压”输入。接触的特性强度从低于接触检测强度阈值的强度增大至在接触检测强度阈值与轻压强度阈值之间的强度有时称作检测到触摸表面上的接触。接触的特性强度从接触检测强度阈值之上的强度减小至低于接触检测强度阈值的强度有时称作检测到接触从触摸表面抬起。在一些实施例中,接触检测强度阈值是零。在一些实施例中,接触检测强度阈值大于零。
在此所述的一些实施例中,响应于检测到包括相应推压输入的手势、或者响应于检测到由相应接触(或多个接触)执行的推压输入来执行一个或多个操作,其中基于至少部分地检测到接触(或多个接触)强度增大到推压输入强度阈值之上来检测相应推压输入。在一些实施例中,响应于检测到相应接触强度增大至推压输入强度阈值之上来执行相应操作(例如相应推压输入的“下冲程”)。在一些实施例中,推压输入包括相应接触强度增大至推压输入强度阈值之上,以及接触强度随后减小至低于推压输入强度阈值,以及响应于检测到相应接触强度随后减小至低于推压输入阈值来执行相应操作(例如相应推压输入的“上冲程”)。
在一些实施例中,设备利用强度迟滞以避免有时称作“抖动”的意外输入,其中设备限定或者选择具有与推压输入强度的预定关系的迟滞强度阈值(例如,迟滞强度阈值比推压输入阈值低X个强度单位,或者迟滞强度阈值是推压输入强度阈值的75%、90%或一些合理的比例)。因此,在一些实施例中,推压输入包括相应接触强度增大至推压输入强度阈值之上,以及随后接触强度减小至对应于推压输入强度阈值的迟滞强度阈值之下,并且响应于随后检测到相应接触强度减小至迟滞强度阈值之下而执行相应操作(例如,相应推压输入的“上冲程”)。类似地,在一些实施例中,仅当设备检测到接触强度从迟滞强度阈值处或之下增大至推压输入强度阈值处或之上时检测到推压输入,并且可选地,接触强度随后减小至迟滞强度处或之下,并且响应于检测到推压输入来执行相应操作(例如,取决于情况,接触强度增大,或者接触强度减小)。
为了易于解读,响应于检测到以下项来可选地触发响应于与推压输入强度阈值相关联的推压输入、或者响应于包括推压输入的手势来执行的操作的描述:接触强度增大至推压输入强度阈值之上,接触强度从低于迟滞强度阈值的强度增大至在推压输入强度阈值之上的强度,接触强度减小至推压输入强度阈值之下,和/或接触强度减小至对应于推压输入强度阈值的迟滞强度阈值之下。额外地,在其中操作描述作为响应于检测到接触强度减小至推压输入强度阈值之下而执行的示例中,可选地响应于检测到接触强度减小至对应于并且低于推压输入强度阈值的迟滞强度阈值之下来执行操作。
如在此所使用的那样,“安装的应用程序”涉及已经下载至电子设备(例如设备100、300和/或500)上并且准备在设备上运行(例如成为打开)的软件应用程序。在一些实施例中,下载的应用程序借由从下载页面提取程序部分并且将所提取的部分与计算机系统的操作系统集成的安装程序而成为已安装应用程序。
如在此使用的那样,术语“打开的应用程序”或“执行的应用程序”涉及具有保持状态信息的软件应用程序(例如,作为设备/全局内部状态157和/或应用程序内部状态192的一部分)。打开或执行的应用程序可以是以下类型应用程序的任意一种:
活动应用程序,当前显示在设备的显示屏上的、正被使用的应用程序;
后台应用程序(或后台过程),当前并未显示,但是用于应用程序的一个或多个过程正由一个或多个处理器在处理;以及
暂停或休眠应用程序,并未运行,但是具有存储在存储器(分别为易失性和非易失性)中并且可以用于恢复应用程序执行的状态信息。
如在此使用的那样,术语“关闭的应用程序”涉及不具有保持的状态信息的软件应用程序(例如,关闭的应用程序的状态信息并未存储在装置的存储器中)。因此,关闭应用程序包括停止和/或去除用于应用程序的应用程序过程并且从装置存储器去除用于应用程序的状态信息。通常,在第一应用程序中打开第二应用程序时并未关闭第一应用程序。当显示了第二应用程序并且停止显示第一应用程序时,第一应用程序成为后台应用程序。
现在转而关注用于捕获、发送和查看或播放媒体和位置数据的消息用户界面的实施例。
图6A至图32C示出了根据一些实施例的用于消息的示例性用户界面。在这些附图中的用户界面用于示出以下所述的过程,包括图33至图49中的过程。
图6A示出了可选地由设备100所显示的示例性消息用户界面。消息用户界面包括用于显示在消息对话中参与者之间所发送消息的消息区域602,以及用于编写消息的消息编写区域604。由参与者所交换的消息显示在界定的消息区域606内。在一些实施例中,界定的消息区域是视觉上区分于应用程序画布背景的连续区域。
在该实施例中,消息用户界面包括用于捕获以及发送媒体流的两个媒体可供性608、610:用于捕获并发送音频消息的音频捕获可供性608,以及用于捕获并发送图像或视频的可视媒体捕获可供性610。在该实施例中,可视媒体捕获可供性和音频数据捕获可供性显示在消息编写区域的两侧上。消息用户界面也包括用于在消息编写区域604中输入文本的虚拟键盘612。在一些实施例中,如图6B中所示,响应于检测到在消息编写区域604中的用户输入,设备100将音频捕获可供性608的显示替换为用于发送消息的发送按钮614的显示。
如以下详细所述,设备100可以捕获并且发送来自消息收发应用程序内的各类媒体-诸如音频、视频和消息。
在一些实施例中,设备100在消息收发应用程序内录制并且发送音频消息。例如,如图6C-D所示,响应于检测到在音频捕获可供性608上的接触,设备100显示包含多个可供性618、620、622的视觉辨别的区域616,并且开始使用设备100的麦克风录制音频消息。音频消息可以是用户的讲话或歌唱,例如,或者可以由设备100捕获的一些其他类型音频消息。
在图6D中所示的实施例中,视觉辨别的区域616包含用于发送所捕获音频消息至消息对话中参与者的发送可供性618,用于停止录制音频消息并且放弃发送音频消息至参与者的取消可供性620,以及用于录制音频消息的录制可供性622。在一些实施例中,发送可供性显示在显示器上媒体可供性附近。
在该实施例中,视觉辨别的区域616显示在显示器的与音频捕获可供性608相同的侧边上,并且垂直居中在对应于音频捕获可供性608的位置上。因此,当用户与音频捕获可供性608接触时,视觉辨别的区域616出现在音频捕获可供性位置周围,其中录制可供性622替代了音频捕获可供性608。
如图6D中所示,示例性的视觉辨别区域616由显示器的边缘626以及半圆624所界定,半圆开始并且结束于显示器的边缘626处并且抵靠显示器的边缘围闭发送可供性618、取消可供性620以及录制可供性622。视觉辨别区域616可以向用户提供设备100已经进入媒体捕获模式的视觉指示。
在一些实施例中,只要接触维持在显示器上对应于录制可供性的位置处,则设备100继续录制音频消息。在一些实施例中,如图7A至图7B中所示,响应于检测到显示器上至第二可供性618的滑动手势,设备100停止录制音频消息并且立即将所录制的音频消息发送至消息对话中的参与者。滑动手势可以对应于显示器上接触移动至第二可供性618,随后接触在第二可供性618处抬起。在一些实施例中,在显示了第二可供性之后检测到接触的移动。
在一些实施例中,结合发送媒体(诸如音频消息)至消息对话中参与者,媒体的表示显示在消息区域中。例如,如图7B中所示,在一些实施例中,设备100在插入在消息对话中的界定消息区域708中显示了所发送音频消息的表示。在该实施例中,音频消息的表示包括表示了音频消息的波形702的图像,用于播放音频消息的回放可供性704,以及音频消息的时间历时706。在一些实施例中,基于所录制音频消息产生波形,并且示出了消息的音频内容的具体特性。在一些实施例中,波形是图标的。在一些实施例中,波形的长度可以对应于音频录制的长度。
在一些实施例中,当录制音频消息时,设备100在消息编写区域中显示音频消息的表示。表示可以是如上所述的波形,并且当用户录制音频消息以指示正在录制的变化音频内容时可以动态地改变形状。
在一些实施例中,响应于检测到回放可供性704上的接触,设备10播放音频消息。在一些实施例中,在已经播放了音频消息之后回放可供性的颜色可以改变,以向用户提供对于已经播放了音频消息的可视化指示。在一些实施例中,当播放音频消息的对应部分时,回放可供性的一部分改变外观,提供了对流逝播放时间的可视化指示。
在一些实施例中,设备100显示了以初始颜色表示音频消息的波形702,并且当播放音频消息时,改变波形颜色以向用户提供对于已经播放了音频消息的可视化指示。在一些实施例中,当播放音频消息的对应部分时,设备100改变波形702的一部分的颜色,从而提供已流逝的播放时间的可视化表示。上述音频消息表示和颜色改变可以用于表现在消息收发应用程序内交换的任何音频消息,其表现在消息对话中、在消息编写区域中或其他地方。
在一些实施例中,设备100响应于检测到接触远离音频捕获可供性、或者朝向发送可供性或沿其他方向移动而停止录制音频消息。在一些实施例中,设备100响应于在接触移动之后检测到在对应于发送可供性618的位置处的抬起而发送所录制的音频消息。在音频捕获可供性上的初始接触以及接触随后移动至发送可供性可以由用户执行作为在显示器上的单个、连续接触。
如图7C至图7D中所示,在一些实施例中,如果设备100检测到显示器上的去往取消可供性620的滑动手势,则设备100停止录制音频消息,从显示器去除视觉辨别的区域616,重新显示音频捕获可供性608,以及放弃发送音频消息至参与者。在一些实施例中,如之前参照发送可供性所述,滑动手势可以对应于从音频捕获可供性608上初始接触开始横越显示器至取消可供性620的单个连续移动,接着在取消可供性620处抬起。
在一些实施例中,如图8中所示,响应于检测到接触在显示器上的移离录制可供性的移动,设备100扩展了视觉辨别区域616。在一些实施例中,视觉辨别区域616根据接触的移动而扩展(例如,当视觉辨别区域扩展时视觉辨别区域的扩展与接触的移动成比例)。在一些实施例中,视觉辨别区域616内发送可供性618和取消可供性620根据视觉辨别区域616的扩展而向外移动。扩展视觉辨别区域可以向用户提供已经检测到设备100移离录制可供性的位置的移动的指示,并且可以向用户提供用于执行滑动手势的较大显示器面积,从而潜在地使得用户更易于控制滑动手势的轨迹或目的地。
在一些实施例中,如图9A中所示,如果设备100检测到接触从显示器抬起而并未检测到接触至发送可供性或取消可供性的之前移动,则设备100停止录制音频消息,在消息编写区域604中显示音频消息的表示,并且将音频捕获可供性替换为用于发送所录制音频消息至消息对话中参与者的发送按钮906。
如之前参照图7A中所述,在一些实施例中,在消息编写区域中显示的所录制音频消息的表示包括表示了所录制音频消息的波形702、所录制音频消息的历时706以及用于播放所录制音频消息的回放可供性704的图像。
在一些实施例中,如图9B中所示,响应于检测到发送按钮906上的接触,设备100发送所录制音频消息至消息对话中参与者,并且将发送按钮906替换为音频捕获可供性608。如图9B中所示,在一些实施例中,在响应于发送按钮上接触而发送音频消息之后,设备100在插入消息对话中的界定消息区域908中显示了所发送音频消息的表示。
因此,如上参照图6A至图9B中所述,在一些实施例中,设备100在消息收发应用程序中显示了消息用户界面,使得用户在消息收发应用程序内录制并发送音频消息,而无需用户发起分离的应用程序。此外,在一些实施例中,用户可以使用显示器上单个连续手势来录制并发送音频消息,包括在音频捕获可供性上的初始接触,随后移动至发送可供性以及抬起。该方案提高了用户界面的效率并且减小了对于用户的认知负担。
在一些实施例中,设备100也可以在消息收发应用程序内捕获并发送相机图像。在一些实施例中,如图10A至图10B中所示,响应于检测到在可视化媒体捕获可供性610上的接触,设备100显示相机用户界面。相机用户界面包括来自设备100上的相机传感器的实况媒体预览1010,以及包含用于使用相机传感器捕获图像的图像可供性1004以及录制可供性1006的视觉辨别区域1002。可视化媒体捕获可供性610替换为取消可供性1008。在一些实施例中,实况媒体预览替换了消息区域的显示。
在该实施例中,视觉辨别区域1002出现在显示器的与可视化媒体捕获可供性610相同的侧边上,并且垂直地居中在对应于可视化媒体捕获可供性610的位置上。因此,当用户接触可视化媒体捕获可供性610时,视觉辨别区域1002出现在可视化媒体捕获可供性位置的周围,并且取消可供性替代可视化媒体捕获可供性。
如图11A至图11B中所示,在一些实施例中,响应于检测到显示器上至图像可供性1004的滑动手势,设备100捕获了预览中所示的图像并且将图像作为消息发送至参与者。滑动手势可以对应于接触横越显示器移动至图像可供性1004,随后在图像可供性1004处抬起。在一些实施例中,设备100响应于检测到移动而捕获图像,并且响应于抬起而发送图像。
如图11B中所示,在一些实施例中,在作为消息发送图像之后,设备100停止显示预览并且重新显示消息区域、消息编辑区域、以及媒体可供性。在一些实施例中,设备100在插入所显示的消息对话中的界定消息区域1106中显示表现了所捕获图像的缩略图1104。
图11C至图11E示出了另一技术,设备100可以可选地在消息收发应用程序内用于捕获并且发送图像。在一些实施例中,如图11C至图11E中所示,响应于检测到在可视化媒体可供性上的接触,而不是如参照图10A至图10B所述在消息区域中显示实况媒体预览,设备100扩展了消息编写区域604并且在消息编写区域604中显示了实况媒体预览。在一些实施例中,设备100将音频捕获可供性的显示替换为发送按钮614的显示。在一些实施例中,响应于检测到接触从可视化媒体捕获可供性610的抬起,设备100捕获新图像。在一些实施例中,响应于检测到从可视化媒体可供性抬起或者响应于检测到在发送按钮614上的接触,所捕获的图像作为消息发送至参与者。在一些实施例中,如图11C中所示,在发送了图像之后,设备100在插入所显示消息对话中的界定消息区域中显示了表示图像的缩略图。在一些实施例中,在发送图像之后,设备100重新显示音频捕获可供性以替代发送按钮。
如图11F中所示,在一些实施例中,在检测到抬起并捕获新图像之后,设备100在消息编写区域604中显示所捕获图像的表示1108。在一些实施例中,当在消息编写区域中显示了所捕获图像的表示时,设备100检测在消息编写区域中额外内容1110的用户输入;例如,额外内容可以与所捕获图像的表示邻近地输入。该额外内容可以是如图11F中所示的文本内容,例如,或者可以是诸如表情符号(emoji)或图标的图形对象。在一些实施例中,额外内容和所捕获图像响应于检测到发送按钮上接触而被发送至参与者。
在一些实施例中,如图11G中所示,在发送图像和额外内容至参与者之后,设备100在插入对话中的界定消息区域1112中显示表现了所捕获图像与额外内容1110的缩略图1114。在一些实施例中,发送消息和额外内容之后,设备100重新显示音频捕获可供性以替代发送按钮。
在一些实施例中,设备100也可以在消息收发应用程序内捕获并发送视频。如之前参照图10A所述的那样,在一些实施例中,响应于检测到可视化媒体捕获可供性610上的接触,设备100显示相机预览和视觉辨别区域,具有用于捕获图像的图像可供性、用于捕获视频的录制可供性、以及用于取消媒体捕获的取消可供性。
在一些实施例中,如图12A至图12B中所示,响应于检测到录制可供性1006上的接触,设备100开始录制视频,将录制可供性替换为用于停止录制视频的停止可供性122,以及将图像可供性1004替换为用于发送视频至参与者的发送可供性1210。在一些实施例中,设备100响应于检测到接触移动至录制可供性1006上、或者响应于在录制可供性1006上接触或轻击而开始录制视频。在一些实施例中,当设备100录制视频时,设备100显示了对已流逝录制时间1208的指示。
如图13A至图13C中所示,在一些实施例中,如果设备100检测到当设备100录制视频时接触已经从显示器抬起而并未检测到在发送可供性1210上的接触,则设备100继续录制视频并且将录制可供性1006的显示替换为停止可供性1212的显示。在一些实施例中,当设备100录制视频时,响应于检测到在停止可供性1212上的接触,设备100停止录制视频,并且将停止可供性1212替换为用于在发送至收件人之前查看所录制视频数据的回放可供性1314。
在一些实施例中,响应于检测到发送可供性1210上的接触,设备100停止录制视频(如果尚未停止录制的话)并且将所录制视频发送至消息对话中参与者。在一些实施例中,如图14中所示,设备100将视频的缩略图1402插入参与者之间消息对话中,并且去除视觉辨别区域的显示,包括录制可供性和发送可供性。在一些实施例中,插入缩略图包括在消息区域中界定消息区域1406中显示缩略图1402和回放可供性1414。在一些实施例中,响应于在界定消息区域1406中检测到回放可供性1414上接触,设备100在界定消息区域1406的边界内播放视频。在一些实施例中,响应于检测到回放可供性1414上接触,设备100以全屏模式播放视频。
返回至图12A,在一些实施例中,当设备100录制视频时,设备100响应于检测到从录制可供性1006抬起而停止录制视频。在一些实施例中,在检测到从录制可供性1006抬起以及停止录制视频之后,设备100将录制可供性1006的显示替换为用于在发送至收件人之前查看视频的回放可供性1314,如图13C中所示。
因此,在一些实施例中,当显示了视觉辨别区域时,向上至图像可供性的滑动捕获并发送图像,当滑动至录制可供性之上随后向上朝向发送可供性滑动时,捕获并且发送视频。
在一些实施例中,图10A中所示可视化媒体捕获可供性610可以用于选择一个或多个现有图像或视频以添加至消息对话。可以使用除了消息收发应用程序之外的应用程序来捕获这些图像;例如,可以使用运行在设备100上或运行在远程设备上的相机应用程序捕获图像或视频,或者可以由其他用户使用在设备100上或在远程设备上不同应用程序而捕获。这些已有的图像或视频可以存储在设备100的存储器中或者从远程存储位置访问。
图15A显示了示例性媒体选择器界面,设备100可以可选地响应于对添加媒体至对话的请求而显示,诸如在可视化媒体捕获可供性610上的接触。在一些实施例中,媒体选择器界面使得用户选择一个或多个已有图像、视频或音频文件以添加至消息对话。在一些实施例中,当显示消息对话时,媒体选择器界面在消息区域下方显示。媒体选择器界面包括幻灯片1502,具有表示了已有图像或视频的数个缩略图1504。在一些实施例中,缩略图1504表示了最近捕获或访问的图像、视频或音频文件。在一些实施例中,响应于检测到在与幻灯片1502相关联的位置上的滑动手势,设备100根据滑动手势滚动幻灯片。
在一些实施例中,响应于检测到特定缩略图1504上的接触,设备100将与缩略图相关联的图像、视频或音频文件发送至消息对话中参与者,并且将图像、视频或音频文件的表示1506插入对话中,如图15B示例中所示。
在一些实施例中,响应于检测到在幻灯片1502中特定缩略图1504上的接触,设备100显示了由缩略图表示的图像或视频。在一些实施例中,图像或视频可以显示在由缩略图所表示图像的更大版本中,诸如在全屏显示中。
在一些实施例中,幻灯片1502中的一个缩略图表示相机预览。在一些实施例中,响应于检测到对表示预览的缩略图的选择,设备100使用设备100上的相机捕获新图像并且发送新图像至对话中参与者。
图16A至图16B示出了用于添加媒体至对话的媒体选择器界面的另一实施例。在该实施例中,幻灯片1602在消息编写区域604下方显示。响应于检测到幻灯片中缩略图1604的选择,在一些实施例中,设备100在消息编写区域604中显示所选择缩略图的表示1608,并且将音频捕获可供性的显示替换为用于发送图像至消息对话中参与者的发送按钮614的显示。在一些实施例中,响应于检测到发送按钮1610上的接触,设备100发送图像至参与者,并且将所发送图像的表示插入对话中,如参照图11B之前所示和所述。
在一些实施例中,响应于设备100检测到幻灯片中的两个或多个缩略图的选择以及随后选择发送按钮1610,设备100将对应于所选择缩略图的两个或多个图像或视频发送至消息对话中参与者。
图17A-图17C示出了用于添加媒体至对话的媒体选择器界面的另一实施例。如图17A中所示,在一些实施例中,设备100显示了具有缩略图1704的幻灯片1702以及用于从库选择图像或视频的照片库按钮1706,用于捕获新照片或视频的获取照片按钮1710,以及用于取消并退出媒体选择器界面显示的取消按钮1708。在一些实施例中,幻灯片中的缩略图1704展示了最近捕获或访问的图像或视频。
在一些实施例中,响应于检测照片库按钮1706的选择,设备100显示了照片库1712、1714的列表。在一些实施例中,响应于检测到在列表中照片库的选择,设备100显示具有来自所选照片库的图像或视频的缩略图1718的另一幻灯片1716。在一些实施例中,响应于检测到特定缩略图1718的选择,设备100显示由缩略图所展示的图像或视频,或者将对应的图像或视频发送至对话中参与者,如上参照图15A所述。
现在参照图18A至图18C,如图18B中所示,在一些实施例中,响应于检测到对用于获取新照片或视频的获取照片按钮1710的选择,设备100显示用于捕获新图像或视频的用户界面。在一些实施例中,用户界面包括实况相机预览1802和用于捕获图像的捕获按钮1804。如图18C中所示,在一些实施例中,响应于检测捕获按钮1804的选择,设备100捕获了预览中所示图像,并且在显示器上显示所捕获的图像,其中具有用于重新获取图像(例如捕获另一图像)的重新获取按钮1806以及用于发送所捕获图像至参与者的使用按钮1808。在一些实施例中,响应于检测在使用按钮1808上的接触,设备100立即发送所捕获图像至参与者并且返回至消息对话的显示画面。在一些实施例中,设备100将所发送图像的表示插入对话中,如之前参照图11B中所述。
在一些实施例中,可视化媒体捕获可供性可以用于添加已有媒体至对话以及用于捕获新媒体以添加至对话。返回至图10A,在一些实施例中,响应于检测到显示器上的对应于可视化媒体捕获可供性610的位置处的接触,设备100可以确定接触的历时。如果历时大于阈值历时,例如如果接触是在可视化媒体捕获可供性上的触摸并保持,则设备100可以如上参照图10至图13所述而做出响应,并且在消息收发应用程序内显示用于捕获并发送图像或视频的用户界面。然而,如果接触的历时并未超过阈值历时,例如如果接触是在可视化媒体捕获可供性610上的短轻击,则设备100可以显示用于选择一个或多个已有图像或视频以添加至消息对话的媒体选择器界面。阈值历时可以例如在0.5秒至10秒的范围内。
图6A至图6B中所示的用户界面示出了媒体可供性以及在设备100上显示器中部之上水平显示的消息编写区域,其中在消息编写区域的每个侧边上具有沿着显示器相对的边缘显示的每个媒体可供性(可视化媒体捕获可供性以及音频捕获可供性)。当在显示器上显示虚拟键盘以用于输入消息至接收方时,这些位置可以是适当的,例如如图6A中所示。然而,媒体可供性和消息编写区域无需显示在图6A至图6B中所示的位置或朝向中。图19A至图19B示出了示例性备选位置,在该位置处设备100可以显示音频捕获可供性608、可视化媒体捕获可供性610以及消息编写区域604。当并未在显示器上显示虚拟键盘时这些备选位置可以是适当的,并且可以提供更大消息区域以用于显示消息对话。
如图19A中所示,在一些实施例中,设备100在显示器角落处显示音频捕获可供性608。如图20中所示,在一些实施例中,例如,响应于检测到在角落中在音频捕获可供性上的接触,设备100显示了由开始于并结束于触摸敏感显示器的两个不同边缘2006、2008处的弧线2004所界定的视觉辨别区域2002,而不是显示了如之前参照图6D所述开始并结束于显示器相同边缘处的半圆。如之前参照图8所述,响应于检测到在显示器上接触移离音频捕获可供性608的位置的移动,在一些实施例中,设备100扩展视觉辨别区域2002。在一些实施例中,在视觉辨别区域内显示的可供性的位置根据视觉辨别区域的扩展而向外移动。
在一些实施例中,显示器上的命中区域分配至媒体可供性,以使得在命中区域上的接触由设备100解读为在媒体可供性上的接触。在一些实施例中,命中区域大于所显示的媒体可供性。如图19C至图19D中所示,在一些实施例中,用于媒体可供性的命中区域1902诸如图19C中当并未显示虚拟键盘时比诸如图19D中当显示了虚拟键盘时更大。例如,当显示了虚拟键盘时,用于媒体可供性的命中区域可以稍微大于媒体可供性(例如比媒体可供性大5、10、15或20%),并且当并未显示虚拟键盘时,用于媒体可供性的命中区域可以环绕直至显示器底部四分之一的一半。当显示器上存在足够空间以允许更大命中区域时,该方案允许用户更容易地调用对媒体可供性上接触的检测。
在一些实施例中,设备100也可以播放所接收的音频消息。在一些实施例中,如图21A至图21B中所示,响应于接收来自第一参与者的音频消息,设备100显示了在消息对话中音频消息的表示2108。在该实施例中,表示包括示出了表示音频消息的波形2102的图像,用于播放音频消息的回放可供性2104,以及音频消息2106的历时。在一些实施例中,表示被显示在界定消息区域内。在一些实施例中,响应于检测到回放可供性2104上的接触,设备100播放音频消息。
在一些实施例中,在显示了音频消息的表示2108之后,设备100响应于检测到设备的升起而播放音频消息。在一些实施例中,设备100通过使用一个或多个用于检测设备100移动的设备运动或朝向传感器和/或使用用于检测设备100邻近用户耳部的邻近传感器或环境光传感器来检测用户已经拿起设备100。返回至图21A,在一些实施例中,设备100通过显示指示用户拿起设备100以听取消息的指令2110以如此方式促使用户播放音频消息。
如图22A至图22C中所示,在一些实施例中,设备100响应于检测到设备100的升起而录制第二音频消息。例如,如果设备100已经播放了所接收的音频消息(其可以如图22A中所示由以不同颜色显示波形或回放可供性而指示)并且设备100检测到设备100升起,则设备100开始录制第二音频消息。在一些实施例中,如果设备100已经响应于检测到装置的升起而播放所接收音频消息(例如,而不是响应于检测到回放可供性上的接触),则设备100在检测到设备100的下降之后、在检测到设备100的第二次抬起之前仅录制第二音频消息。换言之,在一些实施例中,用户可以拿起设备100以听取音频消息,降低设备100,并且随后再次拿起设备100以录制新音频消息。在一些实施例中,设备100通过显示指示用户拿起设备100以录制音频消息的指令而促使用户拿起设备100以录制消息。
在一些实施例中,如果当录制第二音频消息时,设备100检测到设备100的下降,设备100停止录制第二音频消息,并且发送第二音频消息至第一参与者。例如可以通过使用一个或多个设备运动/朝向传感器以检测设备移动和/或使用邻近传感器或环境光传感器以检测设备至用户耳部的邻近端部从而检测设备的下降。因此,如参照图22A至图22B所述,在接收并且听取来自消息对话中参与者的音频消息之后,在一些实施例中,用户可以通过拿起设备100以录制第二音频消息并且随后降低设备100以自动发送第二音频消息至参与者从而做出响应。在一些实施例中,如图22C中所示,设备100在对话中插入所发送的第二音频消息的表示。在一些实施例中,设备100基于消息的特性(例如,没有检测到人类说话,或者消息历时太长因此指示了意外消息收发以及计算资源的浪费)确定不应发送所录制的消息。该特征方面示出在图22D中。如所示,在一些实施例中,设备100显示了消息可供性2214,其指示已经录制了消息但是一旦设备降低则不自动发送消息。相反地,设备100显示可供性2216,当其被选择时则发送消息至指定联系人。
如图23A中所示,在一些实施例中,设备100显示了可供性2302,指示了当设备100工作在锁定状态下时所接收的消息。锁定状态可以是其中设备100限制了与设备100用户交互的状态。
在一些实施例中,如图23B中所示,响应于检测到在可供性2302上沿第一方向的滑动手势,设备100显示了用于回复消息的回复可供性2304。如图23C中所示,响应于检测到回复可供性2304上的接触,设备100可选地显示指令2306,指示用户拿起电子设备以录制用于发送在回复消息中的音频消息。在一些实施例中,响应于检测到设备100的拿起,设备100开始如之前参照图22A至图22B所述录制音频消息,以及类似地,响应于随后装置下降,设备100如上参照图22C所述发送音频消息。
返回至图23A,响应于检测到沿相反方向上在可供性2302上的滑动手势,设备100可选地促使用户解锁设备100,并且在一些实施例中,在解锁了设备100之后,设备100将所接收的消息作为所显示消息对话的一部分而显示。
在一些实施例中,如图24A中所示,设备100在显示器的通知区域2404中显示了所接收的音频消息的通知2402。如图24B中所示,响应于检测到在通知2402或通知区域2404上的接触,诸如向下拖拽或轻击,在一些实施例中,设备100显示了具有用于播放音频消息的播放可供性2406、用于录制回复音频消息的音频捕获可供性608、以及用于退出用户界面的取消可供性2408的用户界面。在一些实施例中,如图24C中所示,响应于检测到在音频捕获可供性608上的接触,设备100显示了具有用于录制并发送音频消息的多个可供性的视觉辨别区域2410,例如参照图6D和图20所示和所述。
类似于如上所述用于录制音频消息的过程,在一些实施例中,设备100可以响应于检测到设备100的拿起和降低而播放、录制并发送视频消息。在这些实施例中,设备100可以使用面部识别技术以确定设备100是否已经升起至用于视频消息回放或录制的合适位置。
在一些实施例中,由设备100使用如上所述用户界面所捕获的媒体包括元数据。该元数据可以包括例如设备100的位置的表示。在一些实施例中,设备100提供选项以允许用户指定是否防止发送具有媒体的元数据。
如前所述,设备100可以发送并接收包含媒体(诸如音频、视频或图像)、文本或两者的消息。在一些实施例中,如果设备100在时间间隔内接收多个消息,并且所接收的消息满足消息分组准则,则设备100在单个群组界定的消息区域内显示消息,而不是在多个界定消息区域中显示消息。时间间隔可以例如范围从10秒至十分钟。
以如此方式对消息的表示分组可以减少在用于显示消息的消息区域中所需的面积量,并且可以减小与接收多个消息相关联的簇。分组可以对于音频消息是特别有用的,音频消息可以压缩为相对较小的表示以用于显示。
在一些实施例中,消息分组准则包括当消息数目超过数字阈值时满足的准则。例如,如果设备100在时间间隔内接收了一些数目的相继的消息,并且数目超过数字阈值,则设备100可以可选地确定消息满足消息分组准则并且在单个分组界定消息区域内显示消息的表示。数字阈值可以例如是在时间间隔内接收的3、5、7或10个消息。
在一些实施例中,消息分组准则包括当接收到的消息以小于时间阈值量相互间隔开时所满足的准则。例如,以小于30、20、10或5秒相互间隔开的相继的消息可以满足消息分组准则。例如,如果设备100在音频消息之后小于30秒内接收文本消息,则设备100可以可选地确定消息满足消息分组准则并且在对话中显示消息的分组表示。
在一些实施例中,消息分组准则是基于所接收到消息的类型。例如,如果设备100在时间间隔内接收多个相继的音频消息,则设备100可以可选地确定消息满足消息分组准则。然而,如果设备100接收并非是音频消息的插入消息,则设备100可以可选地确定所接收消息并未满足消息分组准则并且在分离界定消息区域内显示所接收消息的表示。
在一些实施例中,消息分组准则是基于消息的发送方。例如,从消息对话中单个参与者接收的相继的消息可以满足消息分组准则,但是从不同参与者接收的相继的消息可以不满足消息分组准则。
在一些实施例中,消息分组准则是基于消息是否均具有相同读取状态。在一些实施例中,读取状态对应于消息是否已经读取、播放或查看。例如,均未读(例如未播放)的相继的音频消息可以满足消息分组准则,但是具有不同读取状态-也即一些已经播放而一些尚未播放-的相继的音频消息可以不满足消息分组准则。
图25A示出了在分组界定消息区域2502中显示满足消息分组准则的多个音频消息的表示的示例。在一些实施例中,除了显示用于每个单独音频消息的回放可供性2506之外或者作为对其的替代,设备100显示了用于播放所有分组音频消息的全部播放可供性2504。在一些实施例中,设备100响应于检测到设备100的升起而回放全部分组音频消息。在一些实施例中,设备100显示了指示用户那样设备100以播放所有多个分组音频消息的指令。
在图25A所示实施例中,每个音频消息由分离的波形图像表示。然而,在一些实施例中,设备100显示了表现多个分组音频消息的单个复合波形。
图25B示出了在多个界定消息区域2508中显示的并未满足消息分组准则的多个音频消息的示例。
在一些实施例中,响应于检测到在分组界定消息区域2502上的接触,诸如图25A中所示,设备100在分离界定消息区域2508中显示了由分组界定消息区域2502表示的音频消息,诸如图25B中所示。
图25C示出了在分组界定消息区域2512中显示满足消息分组准则的多个图像消息2510的缩略图表示的示例。图25D示出了在多个界定消息区域2514中显示的并未满足消息分组准则的多个图像消息的表示的示例。
在一些实施例中,响应于检测到在分组界定消息区域2512上的接触,设备100在分离界定消息区域2514中显示图像消息的表示,诸如图25D中所示。
如图25E中所示,在一些实施例中,响应于检测到在表现多个图像或视频消息的分组界定消息区域2512上的接触,设备100在显示器上的幻灯片2516中显示了表示图像或视频的缩略图2518。在一些实施例中,在幻灯片2516上显示的缩略图2518要大于在界定消息区域中所显示的缩略图,并且可选地是可滚动的。
因为如上所述的用户界面使得参与者易于在消息对话中交换媒体,因此在一些情形中,参与者可以在对话对话期内交换许多媒体消息。例如,参与者可以在消息对话期间交换多个短音频消息。在一些情形中,这些交换的消息可以设计为无需保持的快速、非正式通信,并且可以扰乱参与者的消息对话显示。因此,在一些实施例中,设备100调度了基于一旦满足一些失效准则则停止在对话中显示的消息。在一些实施例中,停止显示消息包括从设备100删除消息。自动删除的目的并非是保密,而是相反地,避免由瞬时消息扰乱对话。
在一些实施例中,失效准则是基于消息是否包含任何媒体内容,或者基于消息包含哪种媒体内容。例如,音频消息可以具有与视频消息不同的失效准则。在一些实施例中,文本消息并不具有任何失效准则并且因此从不自动删除。
在一些实施例中,失效准则是基于时间间隔。在一些实施例中,时间间隔可以从媒体捕获的时间(例如,对于捕获了媒体的对话参与者)、或者从媒体已经播放的时间(例如,对于接收媒体的对话参与者)开始测量。在一些实施例中,对于消息的失效准则对于第一参与者与对于第二参与者是不同的。在一些实施例中,时间间隔可以例如是1分钟、2分钟、3分钟、4分钟、5分钟或10分钟。
在一些实施例中,失效准则是基于是否使用如上参照图6A至图14所述的消息用户界面捕获媒体对象,例如,或者使用诸如相机应用程序之类的不同应用程序而捕获。在一些实施例中,使用参照图6A至图14所述的快速媒体捕获方案而捕获并且添加至对话的媒体(其旨在作为非正式临时通信)可以具有与使用不同方案(诸如参照图15A至图18C所述的媒体选择器界面)添加至对话的媒体不同的失效准则。
本领域技术人员将理解的是,可以以许多方式组合或修改如上所述的示例性失效准则。
在一些实施例中,如图26中所示,设备100提供了对在消息的表示中失效准则2602的指示。在图26所示实施例中,失效准则2602的指示包括时间间隔,在该时间间隔之后消息将停止显示在消息对话中。
如图26中所示,在一些实施例中,设备100显示了保持可供性2604,用于保持原本将在满足失效准则之后删除的信息。在一些实施例中,响应于检测到保持可供性2604的选择,设备100忽略失效准则并且继续在对话中显示消息。在一些实施例中,响应于检测到在保持可供性2604上的接触,设备100停止显示对失效准则的指示和/或停止显示保持可供性。
在一些实施例中,当使用图6A至图14中所述的界面添加至对话的、可以旨在作为非正式临时通信的媒体消息被发送或接收时,该媒体消息并未添加至媒体库(诸如相机卷或音频库),而是使用图15A至图18C中所述界面添加至对话的媒体消息被添加至媒体库。在一些实施例中,保持媒体消息(通过例如选择保持可供性)添加媒体至媒体库。
在一些实施例中,可以由第一参与者、由第二参与者、由两者或由任一者保持具有从消息对话中第一参与者发送至第二参与者的相关失效准则的消息。
如图27A中所示,在将音频消息从消息对话中第一参与者发送至第二参与者之后,设备100可选地向第一参与者提供了关于音频消息已经传输至第二参与者的指示2702。如图27B中所示,响应于检测到第二参与者已经播放了至少一部分音频消息,设备100可选地向第一参与者提供关于已经播放了音频消息的指示2704。如图27C中所示,响应于检测到第二参与者已经选择了与音频消息相关联的保持可供性,设备100可选地向第一参与者提供关于第二参与者已经保持了消息的指示2706。在一些实施例中,消息已被保持的指示符替换已被传输或播放/查看/读取消息的指示符。
在一些实施例中,设备100也可以在消息对话中两个或多个参与者之间发送静态位置信息或共享动态位置信息,以及在地图上显示两个或多个参与者的位置信息。
在一些实施例中,如图28A中所示,当显示消息对话时,设备100显示了用于显示关于消息对话的额外细节的细节可供性2702。如图28B中所示,在一些实施例中,响应于检测到在细节可供性上的接触,设备100显示了在对话期间已经交换的媒体的表示2704(诸如缩略图或波形),用于发送设备100的当前位置信息至对话中一个或多个参与者的发送位置可供性2706,以及用于以预定时间段将设备100的位置信息与一个或多个参与者共享的共享位置可供性2708。
在一些实施例中,响应于检测到发送位置可供性2706的选择,设备100向消息对话中参与者提供了对于设备100的当前位置信息。如图28C中所示,在一些实施例中,设备100将示出了当前位置信息的地图2710插入对话中。在一些实施例中,响应于检测到发送位置可供性2706上的接触而发送的位置信息是静态的,并且随后并未根据设备100位置改变而更新。
如图29A至图29B中所示,在一些实施例中,响应于检测到共享位置可供性2708的选择,设备100显示了用于选择预定时间段的用户界面2902,在该预定时间段期间将共享位置信息。响应于检测到对一个预定时间段的选择,设备100向消息对话中参与者提供了使得参与者确定在所选时间段期间设备100位置的信息。在一些实施例中,提供该信息使得由接收信息的参与者所使用的远程电子设备促使参与者将他们的位置与设备100的用户共享。在一些实施例中,在所选时间段已经流逝之后,设备100可以停止与参与者共享位置信息。
在一些实施例中,使得参与者确定设备100的位置包括使得参与者从设备100发送位置信息至其的位置服务器请求关于设备100位置的信息。
如图29C中所示,在一些实施例中,当共享位置信息时,设备100显示了在时间段已经流逝之前用于停止与参与者共享位置信息的停止共享可供性2904。
在一些实施例中,设备100可以从消息对话中另一参与者接收位置信息。在一些实施例中,响应于接收到位置信息,如图30中所示,设备100促使设备100的用户与其他参与者共享他们的位置信息。在一些实施例中,响应于检测到用户已经选择共享他们的位置信息,设备100向其他参与者提供了使得参与者确定设备100位置的信息。如之前参照图29B所述,设备100可以可选地允许用户选择将要共享位置信息的预定时间段。
如上所述,在一些实施例中,设备100从消息对话中参与者接收所共享的位置信息。在一些实施例中,位置信息包括外部装置的位置。在一些实施例中,响应于接收位置信息,设备100显示地图,示出了电子设备的位置以及外部设备的位置。
如图31中所示,在一些实施例中,设备10可以从消息对话中多个参与者接收所共享的位置信息,并且作为响应,(在相同地图上)显示了示出多个参与者的位置3104以及设备100的位置3106的地图3102。在一些实施例中,设备100显示了关于其位置显示在地图上的每个参与者的信息3108。
在一些实施例中,对话中多个参与者的任一个可以从对话添加或去除一个或多个其他参与者,或者可以改变消息对话的名称。
如图32A中所示,在一些实施例中,响应于检测到消息对话中地图3202上的接触,设备100显示了地图的更大版本3204。在一些实施例中,响应于检测到在更大地图3204上的接触,设备100显示了由消息对话中参与者所共享的位置信息的卫星图像3206,位置信息的地图图像3208,以及用于显示去往位置信息的方向3210或来自位置信息的方向3212的可供性。
如之前参照图28A至图28C和图29A至图29C如上所述,在一些实施例中,设备100提供了消息用户界面,其允许参与者容易地相互发送他们当前位置,或者以预定时间段相互共享他们的位置。
在一些实施例中,在预定时间段已经流逝之后,设备100改变所显示地图(例如图28C中地图2701)的颜色以指示不再采用位置信息对其更新。在一些实施例中,响应于在预定时间段已经流逝之后检测到地图上接触,设备100显示了指示不再共享位置信息的可供性。
图33是图示了用于媒体的快速捕获和发送的过程3300的流程图。可以在具有显示器和触摸敏感表面的电子设备处执行过程3300,像设备100(图2)。在框3302处,设备在其触摸敏感显示器上显示媒体可供性和用于显示消息对话的参与者之间发送的消息的消息区域。在框3304处,设备检测触摸敏感表面上的手势,包括检测在触摸敏感表面上的、对应于显示器上的媒体可供性的位置的位置处的接触。在框3306处,响应于检测到接触,设备在其触摸敏感显示器上显示发送可供性。在框3308中,设备检测手势的后续,包括检测接触跨触摸敏感表面的移动以及然后检测接触从触摸敏感表面的抬起。在框3310处,设备确定接触是否移动到触摸敏感表面上的、对应于发送可供性的位置的位置。在框3312处,根据接触移动到触摸敏感表面上的、对应于发送可供性的位置的位置的确定,并且响应于检测到抬起,设备向消息对话的参与者发送响应于手势的至少一部分所捕获的媒体。可选地,在一些实施例中,响应于框3304中示出的检测到接触,设备可以在显示器上显示取消可供性,确定接触是否移动到触摸敏感表面上的、对应于显示器上的取消可供性的位置的位置,并且根据接触移动到触摸敏感表面上的、对应于取消可供性的位置的位置以及然后抬起的确定,设备可以放弃向参与者发送所捕获的媒体。在一些实施例中,根据接触未移动到对应于发送可供性的位置的触摸敏感表面上的位置也未移动到对应于取消可供性的位置的触摸敏感表面上的位置的确定,并且响应于检测到抬起,设备可以显示消息编辑域中的图像,图像具有表示所捕获的媒体的波形(在图33中由B表示)。在一些实施例中,根据接触未移动到在触摸敏感表面上的、对应于发送可供性的位置的位置并且接触也未移动到在触摸敏感表面上的、对应于取消可供性的位置的位置的确定,并且响应于检测到移动,设备可以停止捕获媒体(在图33中由B’表示)。
注意,上文关于过程3300所描述的过程的细节(例如,图33和图6A-图14)也以类似的方式适应于本文所描述的其他过程。例如,过程3400、3500、3600、3700、3800、3900、4000、4600和4900可以包括上文参考过程3300所描述的各个过程的一个或者多个特征。为了简单起见,这些细节不在其他过程的描述中重复。上文参考过程(方法)3300所描述的各种方法和技术可以可选地实现为一个或者多个单元,诸如关于图50所描述的那些单元。
图34是图示了用于快速视频捕获的过程3400的流程图。可以在具有显示器和触摸敏感表面的电子设备处执行过程3400,该电子设备像设备100(图2)。在框3402处,设备在显示器上显示媒体可供性和用于显示消息对话的参与者之间发送的消息的消息区域。在框3404处,设备检测触摸敏感表面上的对应于显示器上的媒体可供性的位置的第一输入。在框3406处,响应于检测到第一输入,设备显示录制可供性和发送可供性。在框3408处,设备检测触摸敏感表面上的对应于显示器上的录制可供性的位置的第二输入。在框3410处,响应于检测到第二输入,设备开始录制视频。在框3412处,设备检测触摸敏感表面上的对应于显示器上的发送可供性的位置的第三输入。在框3414处,响应于检测到第三输入,设备向参与者发送录制的视频并且从显示器中去除发送可供性和录制可供性。可选地,在框3414处,响应于检测到第三输入,设备可以将录制的视频的缩略图表示插入到显示的消息对话中。
注意,上文关于过程3400所描述的过程的细节(例如,图34、图10A-10B和图12A-图14)也以类似的方式适应于本文所描述的其他过程。例如,过程3300、3500、3600、3700、3800、3900、4000、4600和4900可以包括上文参考过程3400所描述的各个过程的一个或者多个特征。为了简单起见,这些细节不在其他过程的描述中重复。上文参考过程(方法)3400所描述的各种方法和技术可以可选地实现为一个或者多个单元,诸如关于图51所描述的那些单元。
图35是图示了用于通过拿起电子设备来答复音频消息的过程3500的流程图。可以在具有显示器和触摸敏感表面的电子设备处执行过程3500,该电子设备像设备100(图2)。在框3502处,设备显示从消息对话的第一参与者接收的第一音频消息的表示。在框3504处,设备检测播放第一音频消息的请求。可选地,在一些实施例中,在框3504处,设备通过在显示第一音频消息的表示时检测设备的分离的拿起以检测播放第一音频消息的请求。可选地,在一些实施例中,在框3504处,设备通过检测在触摸敏感表面上的对应于第一音频消息的显示的表示的位置的位置处的接触来检测播放第一音频消息的请求。在框3506处,响应于检测到请求,设备播放第一音频消息。在框3508处,在播放第一音频消息之后,设备检测设备的拿起。在3510处,响应于检测到设备的拿起,设备录制第二音频消息。可选地,在框3510处,在录制第二音频消息时,设备可以检测设备的降低,并且响应于检测到设备的降低,设备可以停止录制第二音频消息。在框3512处,在录制第二音频消息之后,设备向第一参与者发送第二音频消息。可选地,在框3512处,响应于检测到设备的降低,并且在停止录制第二音频消息之后,设备可以向第一参与者发送第二音频消息。
注意,上文关于过程3500所描述的过程的细节(例如,图35和图21A-24C)也以类似的方式适应于本文所描述的其他过程。例如,过程3300、3400、3600、3700、3800、3900、4000、4600和4900可以包括上文参考过程3500所描述的各个过程的一个或者多个特征。为了简单起见,这些细节不在其他过程的描述中重复。上文参考过程(方法)3500所描述的各种方法和技术可以可选地实现为一个或者多个单元,诸如关于图52所描述的那些单元。
图36是图示了用于消息分组的过程3600的流程图。可以在具有显示器和触摸敏感表面的电子设备处执行过程3600,电子设备像设备100(图2)。在框3602处,设备在时间间隔内从第一参与者接收多个消息。在框3604处,设备确定多个消息是否满足消息分组准则。在一些实施例中,消息分组准则可以包括当多个消息中的消息的数目超过数值阈值时满足的准则。在一些实施例中,消息分组准则可以包括当多个消息彼此间隔少于阈值时间量时满足的准则。在一些实施例中,消息分组准则可以包括当多个消息是顺序邻近消息时所满足的准则。在一些实施例中,顺序邻近消息可以包括在不包含具有不同的读取状态的中间的接收的消息的情况下具有相同读取状态的消息。在框3606处,根据多个消息满足消息分组准则的确定,显示器显示表示多个消息的单个组界定的消息区域。可选地,在框3606处,在其中分组界定的消息区域表示至少两个音频消息的一些实施例中,设备可以接收请求以顺序地播放至少两个音频消息,并且响应于接收到请求,顺序地播放至少两个音频消息。在3608处,根据多个消息不满足消息分组准则的确定,设备显示表示多个消息的多个分离的界定的消息区域。
注意,上文关于过程3600所描述的过程的细节(例如,图36和图25A-25E)也以类似的方式适应于本文所描述的其他过程。例如,过程3300、3400、3500、3700、3800、3900、4000、4600和4900可以包括上文参考过程3600所描述的各个过程的一个或者多个特征。为了简单起见,这些细节不在其他过程的描述中重复。上文参考过程(方法)3600所描述的各种方法和技术可以可选地实现为一个或者多个单元,诸如关于图53所描述的那些单元。
图37是图示了用于基于失效准则管理消息显示的过程3700的流程图。可以在具有显示器和触摸敏感表面的电子设备处执行过程3700,电子设备像设备100(图2)。在框3702处,设备接收第一消息。在框3704处,设备在显示器上显示第一消息的表示,第一消息计划在满足失效准则之后被删除。在一些实施例中,失效准则可以基于时间间隔。在一些实施例中,失效准则可以基于第一消息是否包含媒体。在一些实施例中,失效准则可以基于使用诸如关于图6A-图14所描述的快速媒体捕获方法还是使用另一方法来捕获媒体。在框3706处,设备显示用于保持第一消息的可供性。在框3708处,根据可供性在满足失效准则之前被选择的确定,设备保持第一消息。可选地,在框3708处,如果第一消息包含媒体,则根据可供性在满足失效准则之前被选择的确定,设备可以将媒体保存在媒体库中。在一些实施例中,设备100仅保存使用诸如关于图6A-图14所描述的快速媒体捕获方法所捕获的媒体。在一些实施例中,如果第一消息包含媒体并且失效基于时间间隔,则时间间隔可以从媒体被播放之后的时间开始被测量。在一些实施例中,如果第一消息包含媒体并且失效基于时间间隔,则时间间隔可以从媒体被创建时的时间开始被测量。在框3710处,根据失效准则已经被满足而没有检测到可供性的选择的确定,设备停止在显示器上显示第一消息的表示。可选地,在框3710处,设备可以接收第二消息,第二消息基于失效准则不被删除。
注意,上文关于过程3700所描述的过程的细节(例如,图37和图26-27C)也以类似的方式适应于本文所描述的其他过程。例如,过程3300、3400、3500、3600、3800、3900、4000、4600和4900可以包括上文参考过程3700所描述的各个过程的一个或者多个特征。为了简单起见,这些细节不在其他过程的描述中重复。上文参考过程(方法)3700所描述的各种方法和技术可以可选地实现为一个或者多个单元,诸如关于图54所描述的那些单元。
图38是图示了用于位置共享的过程3800的流程图。可以在具有显示器和触摸敏感表面的电子设备处执行过程3800,该电子设备像设备100(图2)。在框3802处,设备在显示器上显示用于显示在消息对话的第一参与者和第二参与者之间发送的消息的消息区域。在框3804处,随着位置在至少预定时间段内变化,设备显示用于将第一参与者的位置与第二参与者共享的共享位置可供性。在框3806处,设备检测在触摸敏感显示器上的、对应于显示器上的共享位置可供性的位置的位置处的接触。在框3808处,响应于检测到在触摸敏感显示器上的、对应于共享位置可供性的位置的位置处的接触,设备向第二参与者提供使得第二参与者能够确定至少预定时间段期间第一参与者的当前位置的信息。在一些实施例中,设备可以允许用户选择时间段。可选地,在框3808处,响应于检测到对应于共享位置可供性的位置处的接触,设备可以显示对应于至少两个预定时间段的至少两个可供性,检测在触摸敏感表面上的对应于显示器上的至少两个可供性之一的位置的位置处的接触,并且响应于检测到在触摸敏感表面上的对应于显示器上的至少两个可供性之一的位置处的接触,向第二参与者提供使得第二参与者能够确定对应于至少两个可供性之一的预定时间段期间的第一参与者的当前位置的信息。可选地,在框3808处,设备可以从第二参与者接收动态地指示第一外部设备的位置的位置信息,并且在显示器上显示用户设备在地图上的位置以及第一外部设备在地图上的位置。可选地,在框3808处,设备可以向消息对话添加第三参与者、从第三参与者接收指示第二外部设备的位置的位置信息、以及在显示器上显示第二外部设备在地图上的位置。可选地,在框3808处,设备可以在显示器上与消息对话一起显示细节可供性、检测对应于显示器上的细节可供性的位置的触摸敏感表面上的位置处的接触、并且响应于检测到在触摸敏感表面上的对应于显示器上的细节可供性的位置的位置处的接触,显示示出已经共享他们的位置的消息对话的两个或者更多参与者的位置的地图。
注意,上文关于过程3800所描述的过程的细节(例如,图38和图28A-图32C)也以类似的方式适应于本文所描述的其他过程。例如,过程3300、3400、3500、3600、3700、3900、4000、4600和4900可以包括上文参考过程3800所描述的各个过程的一个或者多个特征。为了简单起见,这些细节不在其他过程的描述中重复。上文参考过程(方法)3800所描述的各种方法和技术可以可选地实现为一个或者多个单元,诸如关于图55所描述的那些单元。
图39是图示了用于向消息对话添加媒体的过程3900的流程图。可以在具有显示器、触摸敏感表面和相机传感器的电子设备处执行过程3900。在框3902处,设备在显示器上显示用于显示消息对话的消息区域。在框3904处,设备接收向消息对话添加媒体的请求。在框3906处,响应于接收到请求,设备与消息对话的至少一部分并行显示媒体选择界面,媒体选择界面包括用于选择向消息对话添加媒体的多个可供性,至少多个可供性的子集包括可以向消息对话添加的媒体的缩略图表示。在框3908处,设备检测从多个可供性选择相应的可供性。在框3910处,响应于检测到相应的可供性的选择,设备选择用于向消息对话添加的对应的媒体。可选地,在框3910处,响应于检测到相应的可供性的选择,设备可以向消息对话添加媒体。可选地,在框3910处,如果多个可供性包括实时预览可供性,设备可以检测在触摸敏感显示器上的对应于显示器上的实时预览可供性的位置的位置处的接触,并且响应于检测到在触摸敏感表面上的对应于实时相机预览的位置的位置处的接触,基于实时相机预览捕获新图像并且选择向消息对话添加的新图像。
注意,上文关于过程3900所描述的过程的细节(例如,图39和图15A-图18C)也以类似的方式适应于本文所描述的其他过程。例如,过程3300、3400、3500、3600、3700、3800、4000、4600和4900可以包括上文参考过程3900所描述的各个过程的一个或者多个特征。为了简单起见,这些细节不在其他过程的描述中重复。上文参考过程(方法)3900所描述的各种方法和技术可以可选地实现为一个或者多个单元,诸如关于图56所描述的那些单元。
图40是图示了用于发起音频操作的过程4000的流程图。过程4000在具有显示器(例如,设备100的显示器112)和麦克风(例如,设备100的麦克风113)的电子设备(例如,设备100)处执行。在框4002处,设备基于电子设备的移动和一个或者多个接近传感器读数检测设备情景的变化(例如,通过如图21B所描述的上升运动)。在框4004处,响应于检测到设备情景的变化,设备确定设备是否满足音频操作准则。例如,音频操作准则包括当电子设备的移动满足移动准则并且接近传感器读数满足接近准则时满足的准则。在框4006处,根据设备情景的变化满足音频操作准则的确定,设备发起音频操作。在框4008处,根据设备情景的变化不满足音频操作准则的确定,设备放弃发起音频操作。
有利地,过程4000使得用户能够发起具有单个手势(例如,通过拿起电话到用户的耳朵)的音频操作。过程4000降低用户查看手机并且在其上选择可供性以便发起诸如音频消息的发送之类的音频操作的需要。进一步地,移动准则和接近准则相结合以有利地降低错误音频操作的量。用户界面增加的效率以及错误音频操作的降低的发生频率和持续时间均降低设备的能量使用,这对于电池供电的设备是非常重要的,其中降低的能量使用增加电池寿命。
在一些实施例中,当设备选择图21A-22C中图示的向上轨迹时满足移动准则。在一些实施例中,使用一个或者多个加速计168和设备100上可选的传感器(图1A)追踪设备的移动。在一些实施例中,当设备处于与预定定向不同的定向时满足移动准则(例如,当设备并不上下颠倒时满足)。在一些实施例中,当设备选择基本上向上的轨迹或者在设备从使其显示器接近与地球表面平行(例如,当用户观看显示器上的通信的指示时)向使其显示器接近与地球表面垂直(例如,当用户已经拿起设备以将其放置靠近用户耳朵以倾听或者录制音频消息时)旋转的情况下向上的轨迹时满足移动准则。
在一些实施例中,如图21B所示,当电话在用户的脸处时满足接近准则。在一些实施例中,接近传感器读数由设备100的接近传感器166提供,并且当传感器指示与物体(可以是用户的脸)接近时满足接近准则。
图41A和图41B是图示了过程4000(图40)的框4002内的可选的子过程的流程图。在一些实施例中,在框4002(图40)中执行图41A中描绘的一个或者多个可选的过程4102-4106。在框4102处,设备接收通信,例如,音频消息、文本消息、语音邮件、电话呼叫。在框4104处,响应于接收到通信并且因此在检测到设备情景的变化之前(例如,在图40中的过程4000的框4004之前),设备提供通信被接收的指示。可能的指示包括可视通知(例如,接收到消息的标志或者特定应用的显示,诸如消息泡)、触觉通知(例如,震动)或者音频通知(例如,蜂鸣或者铃声)。可能的指示包括显示在锁屏状态的用户界面中或者未锁屏状态的用户界面中的那些指示。在一些实施例中,显示通信被接收的指示涉及发起消息收发应用。消息收发应用是配置为经由诸如SMS和MMS之类的服务处理短消息和/或经由诸如例如由加利福尼亚,库比蒂诺的苹果公司提供的之类的服务处理文本消息的应用。
在框4106处,在检测到设备的情景的变化之前,设备播放所接收的通信的音频部分。例如,如果通信包括具有尚未由设备播放的音频部分的消息(例如,新的音频消息),则音频操作包括播放消息的音频部分。作为另一示例,如果通信包括语音邮件消息,则播放语音邮件消息。
转到图41B,在一些实施例中,在框4002(图40)处执行可选的步骤4108和4110。在框4108处,在检测到设备情景的变化之前,设备检测它在音频消息收发情景中。例如,当具有音频部分的收到的消息被接收时(可选地在最近的一些窗口内),设备确定它在音频消息收发情景中。作为另一示例,当消息收发应用活跃时,设备确定它在消息情景中。在框4110处,只有当电子设备在音频消息收发情景中(例如,当通信引用被打开或者通信最近已经被接收时),设备才检测设备情景的变化。过程4108和4110的有利的效果是当设备不在音频情景中时检测拿起讲话移动所需要的加速计和/或接近传感器可以被断电(或者至少不被活跃地监控),由此降低功率使用(例如,降低用于监控设备情景的变化的资源以及降低用于录制和处理假阳性检测的音频的资源),并且因此节省功率并且延长设备的电池寿命。
在一些实施例中,如上文所讨论的那样,在框4110处,只有当电子设备在音频消息收发情景中,设备才监控设备情景的变化。在一些实施例中,设备不监控满足音频操作准则的设备情景的变化,甚至当多媒体消息收发应用打开时,直到多媒体消息收发应用中的当前选择的对话包括具有音频部分(例如,由用户或者对话的其他参与者之一录制和发送的音频部分)的至少一个消息。如上文所述,减少其中设备监控设备情景的变化的情况降低设备的功率使用,由此节省功率并且延长电池操作设备的电池寿命。另外,减少其中设备监控设备情景的变化的情况降低音频操作的假阳性发起的可能性(例如,当在新闻应用中,当用户举起设备并且将其放置在梳妆台上时,开始录制音频),由此改善用户体验的整体质量。
图42A-图43C是图示了过程4000的框4004内的可选的子过程的流程图(图40)。转到图42A,在一些实施例中,可选的过程4202被执行在框4004(图40)处。在框4202处,设备确定消息是否在检测到设备情景的变化之前的预定时间间隔内被接收,并且播放消息的音频部分包括如果消息在预定时间间隔内被接收,则播放消息的音频部分。如果消息不是在预定时间间隔内被接收,则框4202(以及因此框4004)提供“否”的结果,并且处理前进至框4008(图40),其中设备放弃发起诸如录制新音频消息之类的音频操作的机会。如果消息是在时间间隔内被接收,则框4202提供“是”的结果,并且如果框4004内的其他要求也被满足,则处理前进至框4006(图40),其中设备可以发起诸如录制新的音频消息之类的音频操作。作为示例,新录制的音频消息是对接收的通信的答复。
转到图42B,在一些实施例中,在过程4000的框4004(图40)处执行可选的步骤4204。回想在一些实施例中,在到达过程4204之前,设备已经播放了接收的通信的音频部分。在这些情况下,设备可以执行可选的框4204以确定设备情景的所检测的变化是否发生在播放音频消息的预定时间间隔内。如果设备情景的变化发生在时间间隔外,则框4204(以及因此框4004)提供“否”的结果,并且处理前进至框4008(图40),其中设备放弃发起诸如录制新音频消息之类的音频操作的机会。如果情景的变化被检测在从音频部分被播放的时间的预定时间间隔内,则框4204提供“是”的结果,并且如果框4004内的其他要求也被满足,则处理前进至框4006,其中设备可以发起诸如录制新消息之类的音频操作。
转到图43A,在一些实施例中,在过程4000的框4004(图40)处执行可选的过程4302。在框4302处,设备确定移动的结束和移动结束时电子设备的定向。例如,确定移动的结束包括,在高于阈值速度(例如,0.75英尺每秒、1英尺每秒、1.5英尺每秒、2英尺每秒)移动之后,确定设备在不多于时间段(例如,0.5s、0.75s、1s、1.25s、1.5s)的时间移动高于阈值量(例如,由本领域技术人员之一鉴于所使用的精确加速计确定的噪音滤波值)。例如,确定设备的定向包括确定设备是否在预定定向中(例如,面朝下或者面朝上、麦克风朝下或者麦克风朝上)。在一些实施例中,当移动结束时电子设备不在预定定向(例如,面朝下)中时,满足移动准则。
有利地,该特征具有降低错误音频操作的情况的效果。因为一些设备定向不可能与音频操作相关联,所以当设备在那些定向中时防止音频操作降低错误音频操作的情况。用户界面的增加的效率以及错误音频操作的降低的发生概率和持续时间均降低设备的功率使用,这对于电池供电设备是特别重要的,其中降低的能量使用增加电池寿命。
在一些实施例中,电子设备包括定位在设备的表面上的扬声器(例如,扬声器111,图2)并且在预定定向中表面朝下(例如,相对于重力)。在一些实施例中,电子设备包括扬声器,并且在预定定向中,麦克风被定位在耳机之上(例如,相对于重力)。如果移动结束时的设备定向不满足移动准则,则框4302(以及因此框4004)提供“否”的结果并且处理前进至框4008(图40),其中设备放弃发起诸如录制新音频消息之类的音频操作的机会。如果移动结束时设备定向满足移动准则,则框4302提供“是”的结果并且如果框4004内的其他要求也被满足,则处理前进至框4006,其中设备可以发起诸如录制新消息之类的音频操作。
转到图43B,在一些实施例中,可选的过程4304被执行在过程4000的框4004(图40)处。在框4304处,设备确定接近传感器读数是否指示接近电子设备的物体的检测在满足移动准则的移动被检测之后的预定时间间隔内。接近的物体可选地在设备的例如0.01、0.02、0.05、1、2或者5英寸内或者另一合理的阈值内。预定时间间隔包括例如0.5、0.75、1、1.25或者1.5秒。如果接近传感器读数被检测在时间间隔外,则框4304(以及因此框4004)提供“否”的结果,并且处理前进至框4008(图40),其中设备放弃发起诸如录制新音频消息之类的音频操作的机会。如果接近传感器读数被检测在时间间隔内,则框4304提供“是”的结果,并且如果框4004内的其他要求也被满足,则处理前进至框4006,其中设备可以发起诸如录制新消息之类的音频操作。
转到图43C,在一些实施例中,在过程4000的框4004(图40)处执行可选的过程4306。在框4306处,设备确定在移动满足移动准则并且一个或者多个接近传感器读数满足接近准则的确定的预定时间间隔(例如,3秒)内电子设备是否在预定定向中。如果在预定时间间隔内设备在预定定向中,则设备不满足音频操作准则,其中框4306(以及因此框4004)提供“否”的结果并且处理前进至框4008(图40),其中设备放弃发起诸如录制新音频消息之类的操作的机会。如果在时间间隔内设备不在预定定向中,则框4304提供“是”的结果并且如果框4004内的其他要求也被满足,则处理前进至框4006,其中设备可以发起诸如录制新消息之类的音频操作。
图44A-图45C是图示了过程4000的框4006(图40)内的可选的子过程的流程图。在一些实施例中,框4006包括描绘在图44A中的可选的过程4402-4406。在框4402(图44A)处,在发起音频操作之后,设备确定电子设备是否在预定定向中。如果是,则处理前进至框4404,其中设备根据电子设备在预定定向中的确定而结束音频操作。结束音频操作可选地包括停止回放音频和/或停止录制音频;可选地,删除任何已经录制的音频;可选地,存储已经录制的音频并且提醒用户递送录制的音频。如果否,则处理前进至框4406,设备根据电子设备不在预定定向中的确定放弃结束音频操作。
在一些实施例中,电子设备包括定位在设备的表面上的扬声器(例如,设备100的扬声器111)并且在预定定向中表面朝下(例如,相对于重力)。在一些实施例中,电子设备包括耳机,并且在预定定向中,麦克风被定位在耳机之上(例如,相对于重力)。
转到图44B,在一些实施例中,在过程4000的框4006(图40)处执行可选的过程4408-4410。在框4408处,在发起音频操作之后,设备检测电子设备的特征移动高于预定阈值。特征移动可以基于加速计随时间的输出(平均)、峰值输出、输出持续时间或者重复。不太可能的音频消息收发场景的示例性特征移动是在袖子上擦手机。在框4410处,响应于检测到电子设备的特征移动高于预定阈值,设备结束音频操作。结束音频操作可选地包括停止回放音频和/或停止录制音频;可选地,删除任何已经录制的音频;可选地,存储已经录制的音频已经提醒用户递送录制的音频。
这些特征涉及在它已经开始之后结束音频操作的能力,这些特征具有降低由于错误音频操作对用户体验的影响的有益效果。快速发起音频操作以由此改善响应度并且增强用户的体验是有利的。在这样的情况下,很多事情可以看起来像用户旨在发起音频操作。例如,拿起电话并且将其放在口袋里可能触发移动准则和接近传感器准则。上文的特征移动和预定定向不太可能与音频相关联。当那些移动和/或定向被检测到时结束音频操作有利地降低错误音频操作的数据,而不影响用户对设备的响应度的感知。用户界面的增加的效率以及错误音频操作的降低的发生率和持续时间均降低设备的能量使用,这对于电池供电的设备是特别重要的,其中降低的能量使用增加电池寿命。
转到图44C,在一些实施例中,过程4000的框4006(图40)包括可选的过程4412-4416。回想,如上文所讨论的那样,根据上游处理,设备可以发起新消息的录制。在框4412处,设备确定消息是否包括讲话。为了检测讲话,设备可选地将检测到的信号与讲话波形的已知特征比较:如果录制的数据包括讲话波形的已知特征,则设备确定消息包括讲话;如果数据中没有这样的特征,则设备确定消息不包括讲话。在框4414处,根据消息不包括讲话的确定,设备结束消息的录制。结束音频操作可选地包括停止回放音频和/或停止录制音频;可选地,删除任何已经录制的音频;可选地,存储已经录制的音频以及提醒用户递送录制的音频。在框4416处,根据消息不包括讲话的确定,设备放弃结束消息的录制。
转到图45A,在一些实施例中,在过程4000的框4006(图40)处执行可选的过程4502-4504。在框4502处,在播放语音邮件消息之后,设备检测电子设备的竖摇运动(pumpmotion)。竖摇运动可选地包括向下运动以及然后向上运动(例如,满足音频操作准则的运动)。图22A-图22C中图示了示例性竖摇运动。在框4504处,响应于检测到竖摇运动,设备向与语音邮件消息相关联的电话号码发起电话呼叫(例如,设备进行回电呼叫)。
转到图45B,在一些实施例中,在过程4000的框4006(图40)处执行可选的过程4506-4510。在框4506处,设备确定音频回放准则已经被满足。在框4508处,根据音频回放准则已经被满足的确定,设备播放对应于接收的通信的音频。在一些实施例中,音频回放准则包括当通信包括以前在设备上没有播放过的音频部分时满足的准则。在一些实施例中,音频回放准则包括当通信在从设备情景的变化被检测到时的预定时间段内被接收时满足的准则。在一些实施例中,音频回放准则包括当通信对应于当设备情景的变化被检测到时设备的显示器上显示的通信警告(例如,用户界面锁屏上的弹出通知、置于显示在显示器上的另一用户界面上的弹出窗口或者对话中的消息)时满足的准则。在框4510处,根据音频回放准则没有被满足的确定,设备放弃回放。
转到图45C,在一些实施例中,在过程4000的框4006(图40)处执行可选的过程4512-4516。在框4512处,设备确定音频录制准则已经被满足。在框4514处,根据音频录制准则已经被满足的确定,设备录制用于答复接收的通信的音频。在一些实施例中,音频录制准则包括当用于通信应用(例如,电话拨号应用、其中至少一个音频消息已经被发送或者接收的多媒体消息收发应用的对话)的用户界面被显示在显示器上时满足的准则。在一些实施例中,音频录制准则包括当消息的音频部分在当设备情景的变化被检测到时的预定时间段内被播放时满足的准则。在框4516处,根据音频录制准则未被满足的确定,设备放弃录制。
注意,上文关于过程4000所描述的过程的细节(例如,图40-图45、图21和图22)也以类似的方式适应于本文所描述的其他过程。例如,过程3300、3400、3500、3600、3700、3800、3900、4600和4900可以包括上文参考过程4000所描述的各个过程的一个或者多个特征。为了简单起见,这些细节不在其他过程的描述中重复。上文参考过程(方法)4000所描述的各种方法和技术可以可选地实现为一个或者多个单元,诸如关于图57所描述的那些单元。
图46是图示了用于发送消息的过程4600的流程图。在一些实施例中,在具有显示器(例如,设备100的显示器112)和至少一个麦克风(例如,设备100的麦克风113)的电子设备(例如,设备100)处执行过程4600。在框4602处,设备检测解读为录制用于指定联系人的音频消息的请求的一个或者多个条件。指定联系人可选地包括通讯录中的人、电子邮件、与接收的消息或者语音邮件相关联的电话号码。然而,对语音输入有响应而没有更多的应用不应当被认为是“联系人”。指定联系人是由用户或者由设备100标识(例如,指定)的联系人。在框4604处,响应于检测到一个或者多个条件,设备使用至少一个麦克风生成音频录音。在框4606处,设备确定音频录音是否满足拒绝准则。在框4608处,根据拒绝准则不被满足的确定,设备向指定联系人发送音频录音。在框4610处,根据拒绝准则被满足的确定,设备放弃向指定联系人发送录音。
有利地,过程4600可以降低错误消息的发送。通过针对拒绝准则监控进行中的音频录制,设备有利地确定用户已经非故意地激活的音频录制或者在录制期间已经改变他/她的想法。这具有改善客户对消息收发系统的满意度的效果。用户界面的增加的效率以及错误音频操作的降低的发生率和持续时间均降低设备的能量使用,这对于电池供电设备是特别有利的,其中降低的能量使用增加电池寿命。
框4602中的一个或者多个条件可选地包括设备情景的变化或者诸如上文参考过程4000(图40)更加详细地描述的拿起手势之类的用户输入,或者诸如使多媒体消息收发应用显示在显示器上的消息收发情景中的其他输入。
在一些实施例中,当音频录制的持续时间超过预定持续时间(例如,15秒)时,框4606中的拒绝准则被满足。该特征有利地防止当用户分心时发送音频消息。
图47A-图47D是图示了过程4600的框4606(图46)内的可选的子过程的流程图。转到图47A,在一些实施例中,可选的过程4702被执行在过程4600的框4606(图46)处。在框4702处,设备检测音频录音中是否存在讲话。当音频录音被确定不包括多于阈值量时,满足拒绝准则。阈值量可选地是绝对量或者诸如百分比之类的相对量。在一些实施例中,阈值量是能量阈值,诸如短时能量和过零率。在一些实施例中,阈值量基于讲话模型。在一些实施例中,当没有声音(高于噪声滤波阈值)被检测到时,满足拒绝准则。
现在关注基于设备的位置的拒绝准则。在一些实施例中,当电子设备在距声音源的距离阈值内时,满足拒绝准则。可选地,设备通过确定设备的接近传感器(例如,设备100的接近传感器166)是否已经检测到设备的距离阈值内的物体来确定电子设备是否在距离阈值内。
转到图47B,在一些实施例中,在过程4600的框4606(图46)内执行可选的过程4704。在框4704处,设备通过分析通过组合由第一麦克风和第二麦克风捕获的信号产生的波形(例如,经由波束成形评价所形成的束中的基衰减,其中评价可选地基于近场束的均衡化)来确定电子设备是否在声音源的距离阈值内。如果设备不在距离阈值内,则框4704(以及因此框4606)产生“否”的输出,处理前进至框4610,其中设备结束进行中的录制。如果设备在距离阈值内,则框4704提供“是”的结果,并且如果框4604内的其他要求也被满足,则处理前进至框4608,其中设备可选地继续录制并且发送录制的消息。
转到图47C,在一些实施例中,在过程4600的框4606(图46)处执行可选的过程4706。在框4706处,设备通过确定至少一个麦克风处的声压级是否超过声压级阈值来确定电子设备是否在距离阈值内。在一些实施例中,声压级阈值基于由电子设备先前检测到的声压级的函数(例如,时间平均,用于耳语、大声说话、轻声细语、正常音调的参考级,等等)。如果设备不在距离阈值内,框4706(以及因此框4606)产生“否”的输出,处理前进至框4610,其中设备结束正在进行的录制。如果设备在距离阈值内,则框4704提供“是”的结果,并且如果框4604内的其他要求也被满足,则处理前进至框4608,其中设备可以继续录制并且发送录制的消息。
转到图47D,在一些实施例中,在过程4600的框4606(图46)处执行可选的过程4708。在框4708处,设备通过比较声压级与由至少一个麦克风检测的混响级(例如,计算直接讲话能量与混响能量的比例,并且将比例与阈值进行比较)来确定电子设备是否在距离阈值内。如果比例指示远场音质,则处理前进至框4610,其中设备结束进行中的录制。如果比例指示近场音质,并且如果框4604内的其他要求也被满足,则处理前进至框4608,其中设备可以继续录制并且发送录制的消息。
虽然本文的描述主要关于音频操作提供,但是应当领会的是所描述的系统和方法可以被扩展至其他操作。例如,确定电话的位置可以利用在其他应用中并且可以被呈现为平台服务以提供关于电话靠近用户还是远离用户的信息。这样的信息可以被使用例如以设置铃声的音量。
在一些实施例中,拒绝准则基于电子设备的定向。在一些实施例中,电子设备包括定位在设备的表面上的扬声器(例如,设备100的扬声器111)并且当表面面向下时(例如,相对于重力)拒绝准则被满足。在一些实施例中,电子设备包括耳机,并且当麦克风被定位在耳机之上(例如,相对于重力)时,满足拒绝准则。
在一些实施例中,当电子设备的特征移动超过阈值时,满足拒绝准则。特征移动可选地包括陀螺仪和/或加速计随时间的输出(平均)、峰值移动、移动持续时间或者移动的重复(诸如在袖子上擦手机)。
在一些实施例中,确定音频录音是否满足拒绝准则是响应于检测被解读为向指定联系人发送音频录制的请求的一个或者多个条件。在一些实施例中,在录制音频之后(例如,在音频的简短分段被录制之后),执行确定。在一些实施例中,在录制音频时,执行确定(例如,以便当用户不打算录制音频时终止长音频分段的录制)。
图48A-图48B是图示了一些实施例中的过程4600的框4610(图46)内的可选子过程的流程图。转到图48A,可以在过程4600的框4610(图46)处执行可选的过程4802。在框4802处,当音频录音满足拒绝准则时,设备并行显示包括音频录音的草稿消息的表示和发送可供性。(这方面被图示在图22D的设备100上)。在检测到发送可供性的用户选择之后,设备向指定联系人发送草稿消息。
转到图48B,在一些实施例中,在过程4600的框4610(图46)处执行可选过程4804-4808。在框4804(图48B)处,当音频录音满足拒绝准则时,设备确定检测一个或者多个条件(例如,接收用户输入或者开始录制音频)和确定音频录音满足拒绝准则之间的经过时间是否超过时间阈值。在框4806处,根据经过时间超过时间阈值的确定,设备显示包括音频录音的草稿消息的表示(例如,图22D中的设备100的用户界面)。在框4808处,根据经过时间不超过时间阈值的确定,设备删除音频录音而不显示草稿消息的表示。例如,如果音频消息的录制在开始录制音频之后不久或者在完成录制音频之后不久被确定为错误,则音频消息被删除并且用户不用麻烦播放草稿音频消息。在这种情况下,很可能是录制被错误地发起,并且该实施例消除由可能的无意录制来麻烦用户的需要。然而,如果音频消息的录制在录制音频之后或者在开始录制音频之后大于阈值时间被确定为错误,则音频消息被保存为可以用户用于发送的草稿以便避免使用户迷惑或者困扰。
注意,上文关于过程4600所描述的过程的细节(例如,图46-图48、图21和图22)也以类似的方式适应于本文所描述的其他过程。例如,过程3300、3400、3500、3600、3700、3800、3900、4000和4900可以包括上文参考过程4600所描述的各个过程的一个或者多个特征。为了简单起见,这些细节不在其他过程的描述中重复。上文参考过程(方法)4600所描述的各种方法和技术可以可选地实现为一个或者多个单元,诸如关于图58所描述的那些单元。
图49是图示了用于捕获和发送媒体的过程4900的流程图。可以在具有显示器和触摸敏感表面的电子设备处执行过程4900,该电子设备像设备100(图2)。在框4902处,设备在显示器上显示媒体可供性、消息编辑域以及参与者之间的消息对话,其中对话被显示在消息区域中。在框4904处,设备检测在触摸敏感表面上的对应于显示器上的媒体可供性的位置的位置处的接触。在框4906处,响应于检测到接触,设备显示消息编辑域中的实时的媒体预览。在框4908处,设备检测接触的抬起。在框4910处,响应于检测到抬起,设备基于实时的媒体预览捕获新图像,并且向消息对话的参与者发送捕获的图像。可选地,响应于检测到抬起,所捕获的图像被发送给参与者。可选地,显示器显示用于发送消息的发送按钮。响应于检测到对应于发送按钮的位置处的接触,捕获的图像被发送给参与者。可选地,响应于检测到抬起,捕获的图像的表示被显示在消息编辑域中。设备检测消息编辑域中的附加的内容的用户条目。响应于检测到接触,附加的内容和捕获的图像被发送给参与者。可选地,捕获的图像的缩略图和附加的内容被显示在插入到显示的消息对话中的界定消息区域中。
注意,上文关于过程4900所描述的过程的细节(例如,图49和图11C-图11G)也以类似的方式适应于本文所描述的其他过程。例如,过程3300、3400、3500、3600、3700、3800、3900、4000和4600可以包括上文参考过程4900所描述的各个过程的一个或者多个特征。为了简单起见,这些细节不在其他过程的描述中重复。上文参考过程(方法)4900所描述的各种方法和技术可以可选地实现为一个或者多个单元,诸如关于图59所描述的那些单元。
如图50所示,电子设备5000包括:显示器单元5002,配置成显示用户界面;触摸敏感表面单元5004,配置成接收接触;以及处理单元5006,耦合到显示器单元5002和触摸敏感表面单元5004。在一些实施例中,处理单元5006包括显示使能单元5008、检测单元5010、确定单元5012、发送单元5014、媒体捕获单元5016、分配单元5018和接收单元5020。
处理单元5006被配置为实现(例如,使用显示使能单元5008)媒体可供性和用于显示消息对话的参与者之间发送的消息的消息区域的显示;检测(例如,使用检测单元5010)触摸敏感表面单元5004上的手势,包括检测在触摸敏感表面单元5004上的、对应于显示器单元5002上的媒体可供性的位置的位置处的接触;响应于检测到接触:实现(例如,使用显示使能单元5008)显示器上的发送可供性的显示;检测(例如,使用检测单元5010)手势的后续,包括检测接触跨触摸敏感表面单元5004的移动以及然后检测接触从触摸敏感表面的抬起;确定(例如,使用确定单元5012)接触是否移动到在触摸敏感表面单元上的对应于发送可供性的位置的位置;以及根据接触移动到对应于发送可供性的位置的触摸敏感表面单元上的位置的确定,并且响应于检测到抬起,向消息对话的参与者发送(例如,使用发送单元5014)响应于手势的至少一部分所捕获(例如,使用媒体捕获单元5016)的媒体。
在一些实施例中,接触以及然后接触的移动是触摸敏感表面单元5004上的单个连续的接触。
在一些实施例中,处理单元5006被进一步配置为:响应于检测到接触,实现在显示器单元5002上(例如,使用显示使能单元5008)取消可供性的显示;确定(例如,使用确定单元5012)接触是否移动到在触摸敏感表面单元5004上的、对应于取消可供性的位置的位置;以及根据接触移动到在触摸敏感表面单元上的对应于取消可供性的位置的位置以及然后抬起的确定,放弃向参与者发送所捕获的媒体。
在一些实施例中,处理单元5006被进一步配置为:在检测到(例如,利用检测单元5010)抬起之后,实现(例如,使用显示使能单元5008)从显示器单元去除发送可供性。
在一些实施例中,处理单元5006被进一步配置为:根据接触移动到触摸敏感表面单元5004上的对应于显示器单元5002上的发送可供性的位置的位置,并且响应于检测到抬起:捕获媒体(例如,使用媒体捕获单元5016),以向参与者发送(例如,使用发送单元5014)媒体。
在一些实施例中,处理单元5006被进一步配置为:响应于检测到接触,开始捕获媒体(例如,使用媒体捕获单元5016);以及根据接触移动到触摸敏感表面单元5004上的对应于显示器单元5002上的发送可供性的位置的位置的确定,并且响应于检测到抬起:停止捕获媒体,以及向参与者发送(例如,使用发送单元5014)媒体。
在一些实施例中,处理单元5006被进一步配置为:响应于检测接触,开始捕获媒体(例如,使用媒体捕获单元5016);响应于检测到接触的移动,停止捕获媒体;以及根据接触移动到接触敏感表面单元5004上的对应于显示器单元5002上的发送可供性的位置的位置,并且响应于在接触在触摸敏感表面单元上的对应于发送可供性的位置处时检测到抬起,向参与者发送(例如,使用发送单元5014)媒体。
在一些实施例中,媒体是从麦克风接收的音频数据,并且抬起在触摸敏感表面单元上的对应于显示器单元上的发送可供性的位置的位置处,并且处理单元5006被进一步配置为:响应于检测到接触,开始捕获音频数据(例如,使用媒体捕获单元5016);以及根据接触移动到触摸敏感表面单元5004上的对应于显示器单元5002上的发送可供性的位置的位置的确定,并且响应于检测到抬起,停止捕获音频数据并且向参与者发送(例如,使用发送单元5014)音频数据。
在一些实施例中,处理单元5006被进一步配置为:使得能够在显示器单元5002上显示消息编辑域(例如,使用显示使能单元5008);以及根据接触未移动到接触敏感表面单元5004上的对应于发送可供性的位置的位置并且也未移动到触摸敏感表面上的对应于取消可供性的位置的位置的确定,并且响应于检测到抬起:实现在显示器单元5002上显示消息编辑域中的图像的显示,图像具有表示捕获的媒体的波形。
在一些实施例中,处理单元5006被进一步配置为:响应于检测到抬起,实现利用用于向参与者发送(例如,使用发送单元5014)捕获的媒体的发送按钮的显示代替媒体可供性的显示(例如,使用显示使能单元5008)。
在一些实施例中,处理单元5006被进一步配置为:响应于检测到(例如,使用检测单元5010)触摸敏感表面单元5004上的接触,实现在显示器单元5002上媒体预览的显示(例如,使用显示使能单元5008);以及在检测到抬起之后,停止在显示器单元上显示媒体预览。
在一些实施例中,处理单元5006被进一步配置为:当接触被保持在媒体可供性上时:实现在显示器单元5002上的视觉辨别的区域的显示,其中视觉辨别的区域围闭媒体可供性和发送可供性;以及响应于检测到接触的移动,扩展视觉辨别的区域的显示(例如,使用显示使能单元5008)。
在一些实施例中,处理单元5006被进一步配置为:向参与者实现在显示器单元5002上的用于输入消息的虚拟键盘的显示(例如,使用显示使能单元5008);以及实现在虚拟键盘上方沿着显示器单元5002的特定边缘的媒体可供性的显示(例如,使用显示使能单元5008),其中所显示的视觉辨别的区域由特定边缘部分地界定。
在一些实施例中,处理单元5006被进一步配置为:实现在显示器单元5002的角落处的媒体可供性的显示(例如,使用显示使能单元),其中显示的视觉辨别区域由显示器单元的两个不同边缘部分地界定。
在一些实施例中,触摸敏感表面单元5004是触摸敏感显示器(例如,触摸敏感表面单元5004是显示器单元5002的一部分),并且处理单元5006被进一步配置为:向媒体可供性分配(例如,使用分配单元5018)命中区域,其中命中区域是显示器单元的响应于触摸输入的区域,并且其中命中区域在虚拟键盘被显示在显示器单元上时比虚拟键盘不被显示时具有更大的尺寸。
在一些实施例中,处理单元5006被进一步配置为:确定(例如,使用确定单元5012)媒体可供性上的接触的持续时间;以及根据接触的持续时间小于阈值持续时间的确定,实现在显示器单元5002上的用于选择向参与者发送的现有媒体的媒体选择器用户界面的显示(例如,使用显示使能单元5008)。
在一些实施例中,处理单元5006被进一步配置为:接收(例如,使用接收单元5020)是否防止向参与者发送捕获的媒体的元数据的集合的用户指定。
在一些实施例中,元数据包括电子服务的位置的表示。
在一些实施例中,媒体可供性是第一媒体可供性,其中处理单元5006被进一步配置为:实现在显示器单元5002上的第二媒体可供性的显示(例如,使用显示使能单元5008)。
在一些实施例中,第一媒体可供性是用于捕获音频数据的音频捕获可供性并且第二媒体可供性是用于捕获视频或者图像的视觉媒体捕获可供性。
在一些实施例中,向参与者发送的媒体基于失效准则而失效。
上文参考图33所描述的操作可选地由描绘在图1A-图1B、图3、图5B或者图50中的部分来实现。例如,显示使能操作3302、检测操作3304和/或确定操作3310可选地由事件分类器170、事件识别器180和事件处理器190实现。事件分类器170中的事件监控器171检测触摸敏感显示器112上的接触,并且事件调度器模块174将事件信息递送至应用136-1。应用136-1的相应的事件识别器180将事件信息与相应的事件定义186比较,并且确定触摸敏感表面上的手势是否对应于预定事件或者子事件,诸如用户界面上的可供性的激活。当相应的预定事件或者子事件被检测到时,事件识别器180激活与事件或者子事件的检测相关联的事件处理器190。事件处理器190可以利用或者调用数据更新器176或者物体更新器177以更新应用内部状态192。在一些实施例中,事件处理器190访问相应的GUI更新器178以更新由应用所显示的内容。同样地,对于本领域技术人员清楚的是可以基于图1A-图1B、图3、图5B或者图50中描绘的部分如何实现其他过程。
如图51所示,电子设备5100包括:显示器单元5102,配置成显示用户界面;触摸敏感表面单元5104,配置成接收接触;以及处理单元5106,耦合到显示器单元5102和触摸敏感表面单元5104。在一些实施例中,处理单元5106包括显示使能单元5108、检测单元5110、确定单元5112、发送单元5114、媒体捕获单元5116和媒体回放单元5118。
处理单元5106被配置为实现在显示器单元5102上的媒体可供性和用于显示消息对话的参与者之间发送的消息的消息区域的显示(例如,使用显示使能单元5108);检测(例如,使用检测单元5110)触摸敏感表面单元5104上的第一输入,其中第一输入对应于显示器单元5102上的媒体可供性的位置;响应于检测到第一接触,实现显示器单元5102上的录制可供性和发送可供性的显示(例如,使用显示使能单元5108);检测(例如,使用检测单元5110)触摸敏感表面单元5104上的第二输入,其中第二输入对应于显示器单元5102上的录制可供性的位置;响应于检测到第二输入,开始录制视频(例如,使用媒体捕获单元5116);检测触摸敏感表面单元5104上的第三输入,其中第三输入对应于显示器单元5102上的发送可供性的位置,以及响应于检测到第三输入:向参与者发送(例如,使用发送单元5114)录制的视频,并且实现从显示器单元5102去除(例如,使用显示使能单元5108)发送可供性和录制可供性。
在一些实施例中,第一输入、第二输入和第三输入是触摸敏感表面单元5104上的三个分离的接触。
在一些实施例中,第一输入是触摸敏感表面单元5104上的接触,并且第二输入是触摸敏感表面单元5104上的接触的后续,包括接触从在触摸敏感表面单元5104上的对应于显示器单元5102上的媒体可供性的位置的位置向在触摸敏感表面单元5104上的对应于显示器单元5102上的录制可供性的位置的位置的移动。
在一些实施例中,第一输入是触摸敏感表面单元5104上的接触,并且第二输入是触摸敏感表面单元5104上的分离的接触,并且第三输入是触摸敏感表面单元5104上的分离的接触的后续,包括接触从在触摸敏感表面单元5104上的对应于显示器单元5102上的录制可供性的位置的位置向在触摸敏感表面单元5104上的对应于显示器单元5102上的发送可供性的位置的位置的移动。
在一些实施例中,处理单元5106被进一步配置为:响应于检测到第三输入,实现(例如,使用显示使能单元5108)将录制的视频的缩略图表示插入到所显示的消息对话中。
在一些实施例中,处理单元5106被进一步配置为:在录制视频时,检测第二接触的抬起(例如,使用检测单元5110);以及在抬起之后继续录制(例如,使用媒体捕获单元5116)视频。
在一些实施例中,处理单元5106被进一步配置为:在录制视频时,检测第二接触的抬起(例如,使用检测单元5110);以及响应于检测到抬起,停止录制视频。
在一些实施例中,处理单元5106被进一步配置为:响应于检测到抬起,实现利用用于播放尚未向参与者发送的视频的回放可供性的显示代替在显示器单元5102上的录制可供性的显示(例如,使用显示使能单元5108)。
在一些实施例中,处理单元5106被进一步配置为:在录制视频时,实现在显示器单元5102上的录制的视频的时间长度的指示的显示(例如,使用显示使能单元5108)。
在一些实施例中,实现在显示的消息对话中插入捕获的视频的缩略图表示包括:实现在显示器单元5102上的显示消息对话中的界定消息区域的显示(例如,使用显示使能单元5108),以及在显示器单元5102上的界定消息区域中的回放可供性的显示(例如,使用显示使能单元5108)。处理单元5106被进一步配置为:检测(例如,使用检测单元5110)在触摸敏感表面单元5104上的对应于显示器单元5102上的回放可供性的位置的位置处的第五接触,并且响应于检测到第五接触,播放(例如,使用媒体回放单元5118)界定消息区域的边界内的录制视频。
在一些实施例中,向参与者发送的录制视频基于失效准则而失效。
上文参考图34所描述的操作可选地由描绘在图1A-图1B、图3、图5B或者图51中的部分实现。例如,显示使能操作3402、3406、和/或检测操作3404、3408可选地由事件分类器170、事件识别器180和事件处理器190实现。事件分类器170中的事件监控器171检测触摸敏感显示器112或者其他输入控制设备116上的接触,并且事件调度器模块174将事件信息递送至应用136-1。应用136-1的相应的事件识别器180将事件信息与相应的事件定义186比较,并且确定对应于显示器位置的第一输入是否对应于预定事件或者子事件,诸如用户界面上的可供性的激活。当相应的预定事件或者子事件被检测到时,事件识别器180激活与事件或者子事件的检测相关联的事件处理器190。事件处理器190可以利用或者调用数据更新器176或者物体更新器177以更新应用内部状态192。在一些实施例中,事件处理器190访问相应的GUI更新器178以更新由应用所显示的内容。同样地,对于本领域技术人员清楚的是可以基于图1A-图1B、图3、图5B或者图51中描绘的部分如何实现其他过程。
如图52所示,电子设备5200包括:显示器单元5202,配置成显示用户界面;可选的,触摸敏感表面单元5204,配置成接收接触;以及处理单元5206,耦合到显示器单元5202;以及,可选的触摸敏感表面单元5204。在一些实施例中,处理单元5206包括显示使能单元5208、检测单元5210、确定单元5212、发送单元5214、媒体捕获单元5216和媒体回放单元5218。
处理单元5206被配置为:实现在显示器单元5202上的从消息对话的第一参与者接收的第一音频消息的表示的显示(例如,利用显示使能单元5208);检测(例如,使用检测单元5210)播放第一音频消息的请求;响应于检测到请求,播放(例如,使用媒体回放单元5218)第一音频消息;在播放第一音频消息之后,检测(例如,使用检测单元5210)设备5200的拿起;响应于检测到设备5200的拿起,录制(例如,使用媒体捕获单元5216)第二音频消息;以及在录制第二音频消息之后,向第一参与者发送(例如,使用发送单元5214)第二音频消息。
在一些实施例中,处理单元5206被进一步配置为:在录制第二音频消息时,检测(例如,使用检测单元5210)设备5200的降低,以及响应于检测到设备的降低:停止录制第二音频消息,并且向第一参与者发送(例如,使用发送单元5214)录制的第二音频消息。
在一些实施例中,检测播放第一音频消息的请求包括在第一音频消息的表示被显示在显示器单元5202上时检测设备5200的分离的拿起。
在一些实施例中,处理单元5200被进一步配置为:在播放第一音频消息之后并且在录制第二音频消息之前,检测(例如,使用检测单元5210)设备5200的降低。
在一些实施例中,检测播放第一音频消息的请求包括检测在触摸敏感表面单元5204上的对应于显示器单元5202上的第一音频消息的显示的表示的位置的位置处的接触。
在一些实施例中,显示器单元5202是触摸敏感显示器单元,并且使能显示表示包括:实现在显示器单元5202上的接收的消息的可供性的显示(例如,使用显示使能单元5208);检测(例如,使用检测单元5210)所显示的可供性的滑动手势;以及响应于检测到滑动手势,实现在显示器单元5002上的指示用户拿起设备5200录制第二音频消息的指令的显示(例如,使用显示使能单元5208)。
在一些实施例中,指示接收的消息的可供性被显示在显示器单元5202上的锁屏上。
在一些实施例中,处理单元5206被进一步配置为:响应于检测到滑动手势:实现在显示器单元5202上的用于回复接收的消息的回复可供性的显示(例如,使用显示使能单元5208),检测(例如,使用检测单元5210)回复可供性的选择,以及响应于检测到回复可供性的选择,实现在显示器单元5202上的指示用户拿起设备5200录制第二音频消息的指令的显示(例如,使用显示使能单元5208)。
在一些实施例中,指示用户拿起设备5200录制第二音频消息的指令被显示在显示器单元5202上的消息编辑域中,并且处理单元5200被进一步配置为:实现在显示器单元5202上的媒体可供性的显示(例如,使用显示使能单元5208);检测(例如,使用检测单元5210)在触摸敏感表面单元5204上的对应于显示器单元5202上的媒体可供性的位置的位置处的接触;响应于检测到接触,录制第二音频消息(例如,使用媒体捕获单元5216);以及在录制第二音频消息之后,向第一参与者发送(例如,使用发送单元5214)第二音频消息。
在一些实施例中,处理单元5206被进一步配置为:检测(例如,检测单元5210)在触摸敏感表面单元5204上的对应于显示器单元5202上的消息录入域的位置的位置处的接触;以及响应于检测到触摸敏感表面单元5204上的对应于消息录入域的位置的位置处的接触,实现在显示器单元5202上的虚拟键盘的显示(例如,使用显示使能单元5208)。
在一些实施例中,第二音频消息基于失效准则而失效。
上文参考图35所描述的操作可选地由描绘在图1A-图1B、图3、图5B或者图52中的部分来实现。例如,检测操作3504、3508可选地由加速计168、事件分类器170、事件识别器180和/或事件处理器190实现。事件分类器170中的事件监控器171检测诸如由接触或者设备的拿起所表示的请求之类的请求,并且事件调度器模块174将事件信息递送至应用136-1。应用136-1的相应的事件识别器180将事件信息与相应的事件定义186比较,并且确定请求是否对应于预定事件或者子事件,诸如播放音频消息的请求。当相应的预定事件或者子事件被检测到时,事件识别器180激活与事件或者子事件的检测相关联的事件处理器190。事件处理器190可以利用或者调用数据更新器176或者物体更新器177以更新应用内部状态192。在一些实施例中,事件处理器190访问音频电路装置110以播放音频消息。同样地,对于本领域技术人员清楚的是可以基于图1A-图1B、图3、图5B或者图52中描绘的部分如何实现其他过程。
如图53所示,电子设备5300包括:显示器单元5302,配置成显示用户界面;可选地,触摸敏感表面单元5304,配置成接收接触;以及处理单元5306,耦合到显示器单元5302和可选地触摸敏感表面单元5304。在一些实施例中,处理单元5306包括显示使能单元5308、检测单元5310、确定单元5312、接收单元5314和媒体回放单元5316。
处理单元5306被配置为:在时间间隔内从第一参与者接收(例如,使用接收单元5314)多个消息,并且确定(例如,使用确定单元5314)多个消息是否满足消息分组准则。根据多个消息不满足消息分组准则的确定,处理单元5306被配置为实现在显示器单元5302上的表示多个消息的多个分离的界定的消息区域的显示(例如,使用显示使能单元5308)。根据多个消息满足消息分组准则的确定,处理单元5306被配置为实现在显示器单元5302上的表示多个消息的单个组界定的消息区域的显示(例如,使用显示使能单元5308)。
在一些实施例中,消息分组准则包括当多个消息中的消息的数目超过数值阈值时满足的准则。
在一些实施例中,消息分组准则包括当多个消息彼此间隔至少阈值时间量时满足的准则。
在一些实施例中,消息分组准则包括当多个消息是顺序邻近消息时所满足的准则。
在一些实施例中,顺序邻近消息是在没有来自其他参与者的中间的接收的消息的情况下从单个参与者接收的消息。
在一些实施例中,顺序邻近消息是在没有不同类型的任何中间的接收的消息的情况下接收的相同类型的消息。
在一些实施例中,顺序邻近消息是在不包含具有不同的读取状态的任何中间的接收的消息的情况下具有相同读取状态的消息。
在一些实施例中,多个消息中的消息是音频消息,并且处理单元被进一步配置为:实现在显示器单元5302上对应于音频消息的界定消息区域内的波形图像的显示(例如,使用显示使能单元5308),波形图像具有表示音频消息的内容的波形。
在一些实施例中,实现界定消息内的波形图像的显示包括:实现初始颜色中的波形的显示;接收(例如,使用接收单元5314)播放音频消息的请求;以及响应于接收到播放音频消息的请求,播放(例如,使用媒体回放单元5316)音频消息,以及实现在回放期间改变波形的至少一部分的颜色(例如,使用显示使能单元5308)以指示已经被播放的音频消息的部分。
在一些实施例中,处理单元5306被进一步配置为:实现当音频消息的对应的部分被播放(例如,由媒体回放单元5316)时改变波形的部分的颜色。
在一些实施例中,分组界定消息区域表示至少两个音频消息,并且处理单元5306被进一步配置为:接收(例如,使用接收单元5314)请求以顺序地播放至少两个音频消息,并且响应于接收到请求,顺序地播放(例如,使用媒体回放单元5316)至少两个音频消息。
在一些实施例中,顺序播放至少两个音频消息的请求包括检测设备5300的拿起的检测。
在一些实施例中,处理单元5306被进一步配置为:实现在显示器单元5302上的用于播放顺序音频消息的可供性的显示(例如,使用显示使能单元5308),其中接收顺序播放至少两个音频消息的请求包括可供性上的接触的检测(例如,使用检测单元5310)。
在一些实施例中,处理单元5306被进一步配置为:检测(例如,使用检测单元5310)分组界定消息区域的选择;以及响应于检测到分组界定消息区域的选择,使用利用多个消息的多个表示的显示代替单个分组界定消息区域在显示器单元5302上的显示(例如,使用显示使能单元5308)。
在一些实施例中,分组界定消息区域包括表示多个消息中的第一消息的文本和表示多个消息中的第二消息的图像缩略图,并且处理单元5306被进一步配置为:检测(例如,使用检测单元5310)触摸敏感表面单元5304上的对应于所显示的图像缩略图的位置的位置处的接触;以及响应于检测到对应于所显示的图像缩略图的位置处的接触,实现在显示器单元5302上的由图像缩略图表示的图像的更大版本的显示。
在一些实施例中,显示图像的更大版本包括将图像作为全屏图像显示。
在一些实施例中,分组界定消息区域包括表示多个消息中的第一消息的文本和表示多个消息中的视频消息的图像缩略图,并且处理单元5306被进一步配置为:检测(例如,使用检测单元5310)在触摸敏感表面单元5304上的、对应于所显示的图像缩略图的位置的位置处的接触;以及响应于检测到在触摸敏感表面单元5304上的对应于所显示的图像缩略图的位置的位置处的接触,播放(例如,使用媒体回放单元5316)由图像缩略图表示的视频消息。
在一些实施例中,播放视频消息包括以全屏模式播放视频消息。
在一些实施例中,播放视频消息包括播放分组界定消息区域内的视频消息。
在一些实施例中,分组界定消息区域包括表示多个消息中的第一消息的文本和表示多个消息中的音频消息的波形图像,并且处理单元5306被进一步配置为:实现在显示器单元5302上的分组界定消息区域中的回放可供性的显示(例如,使用显示使能单元5308),回放可供性与波形图像相关联;检测(例如,使用检测单元5310)在触摸敏感表面单元5304上的、对应于显示的分组界定消息区域内的回放可供性的位置的位置处的接触;以及响应于检测到在触摸敏感表面单元5304上的、对应于回放可供性的位置的位置处的接触,播放(例如,使用媒体回放单元5316)由波形图像所表示的音频消息。
上文参考图36所描述的操作可选地由描绘在图1A-图1B、图3、图5B或者图53中的部分来实现。例如,接收操作3602、确定操作3604和/或显示使能操作3606可选地由外围接口118、事件分类器170、事件识别器180和事件处理器190实现。外围接口118接收消息,并且事件分类器170中的事件监控器171检测已经接收的消息,事件调度器模块174将事件信息递送至应用136-1。应用136-1的相应的事件识别器180将事件信息与相应的事件定义186比较,并且确定多个接收的消息是否对应于预定事件或者子事件,诸如满足分组准则。当相应的预定事件或者子事件被检测到时,事件识别器180激活与事件或者子事件的检测相关联的事件处理器190。事件处理器190可以利用或者调用数据更新器176或者物体更新器177以更新应用内部状态192。在一些实施例中,事件处理器190访问相应的GUI更新器178以更新由应用显示的内容。同样地,对于本领域技术人员清楚的是可以基于图1A-图1B、图3、图5B或者图53中描绘的部分如何实现其他过程。
如图54所示,电子设备5400包括配置成显示用户界面的显示器单元5402,以及耦合到显示器单元5402的处理单元5406。在一些实施例中,处理单元5406包括显示使能单元5408、检测单元5410、确定单元5412、接收单元5414、保持单元5416、保存单元5418和提供单元5420。
处理单元5406被配置为:接收(例如,使用接收单元5414)第一消息;实现在显示器单元5402上的第一消息的表示的显示(例如,使用显示使能单元5408),其中第一消息计划在满足失效准则之后被删除;实现在显示器单元5402上的用于保持第一消息的可供性的显示(例如,使用显示使能单元5408);根据可供性在满足失效准则之前被选择的确定(例如,使用确定单元5412),保持(例如,使用保持单元5416)第一消息;以及根据失效准则已经被满足而没有检测到可供性的选择的确定,停止在显示器单元5402上显示第一消息的表示。
在一些实施例中,处理单元5406被进一步配置为:接收(例如,使用接收单元5414)第二消息,其中第二消息基于失效准则不被删除。
在一些实施例中,失效准则基于时间间隔。
在一些实施例中,失效准则基于第一消息是否包含媒体。
在一些实施例中,失效准则基于媒体是否使用消息收发应用被捕获。
在一些实施例中,第一消息包含媒体,并且时间间隔从媒体被播放之后的时间开始进行测量。
在一些实施例中,第一消息包含媒体,并且时间间隔从媒体被创建时的时间开始进行测量。
在一些实施例中,第一消息包含媒体,并且处理单元5406被进一步配置为:根据可供性在满足失效准则之前被选择的确定,将媒体保存(例如,使用保存单元5418)在媒体库中。
在一些实施例中,第一消息包含媒体,并且处理单元5406被进一步配置为:确定(例如,使用确定单元5412)媒体是否使用消息收发应用被捕获;以及根据媒体不是使用消息收发应用被捕获的确定,将媒体保存到(例如,使用保存单元5418)媒体库。
在一些实施例中,第一消息是从第一参与者接收的,并且处理单元5406被进一步配置为:根据可供性在满足失效准则之前被选择的确定,向第一参与者提供(例如,使用提供单元5420)第一消息已经被保持的指示。
在一些实施例中,处理单元5406被进一步配置为:确定(例如,使用确定单元5412)第一消息是否是音频消息;以及根据第一消息是音频消息的确定,实现在显示器单元5402上的用于保持第一消息的可供性的显示(例如,使用显示使能单元5408)。
在一些实施例中,第二消息是文本消息。
在一些实施例中,失效准则包括文本消息不失效的准则。
上文参考图37所描述的操作可选地由描绘在图1A-图1B、图3、图5B或者图54中的部分来实现。例如,接收操作3702、显示使能操作3704和/或保持操作3708可选地由外围接口118、事件分类器170、事件识别器180和事件处理器190实现。外围接口118接收消息,并且事件分类器170中的事件监控器171检测已经被接收的消息。事件分类器170中的事件监控器171检测触摸敏感显示器112上的接触,并且事件调度器模块174将事件信息递送至应用136-1。应用136-1的相应的事件识别器180将事件信息与相应的事件定义186比较,并且确定选择是否对应于预定事件或者子事件,诸如用户界面上的可供性的激活或者选择。当相应的预定事件或者子事件被检测到时,事件识别器180激活与事件或者子事件的检测相关联的事件处理器190。事件处理器190可以利用或者调用数据更新器176或者物体更新器177以更新应用内部状态192。在一些实施例中,事件处理器190访问相应的GUI更新器178以更新由应用显示的内容。同样地,对于本领域技术人员清楚的是可以基于图1A-图1B、图3、图5B或者图54中描绘的部分如何实现其他过程。
如图55所示,电子设备5500包括:显示器单元5502,配置成显示用户界面;可选的触摸敏感表面单元5504,配置成接收接触;以及处理单元5506,耦合到显示器单元5502和可选的触摸敏感表面单元5504。在一些实施例中,处理单元5506包括显示使能单元5508、检测单元5510、确定单元5512、接收单元5514、提供单元5516、添加单元5518、发送单元5520和插入单元5522。
处理单元5506被配置为:实现在显示器单元5502上的用于显示消息对话的第一参与者和第二参与者之间发送的消息的消息区域的显示;实现在显示器单元5502上的用于随着位置在至少预定时间段内变化将第一参与者的位置与第二参与者共享的共享位置可供性的显示(例如,使用显示使能单元5508);检测(例如,使用检测单元5510)共享位置可供性的选择;以及响应于检测到共享位置可供性的选择:向第二参与者提供(例如,使用提供单元5516)实现第二参与者能够确定至少预定时间段期间第一参与者的当前位置的信息。
在一些实施例中,处理单元5506被进一步配置为:从第二参与者接收(例如,使用接收单元5514)动态地指示第一外部设备的位置的位置信息;在显示器单元5502上实现电子设备在地图上的位置和第一外部设备的位置的显示(例如,使用显示使能单元5508)。
在一些实施例中,处理单元5506被进一步配置为:向消息对话添加(例如,使用添加单元5518)第三参与者;从第三参与者接收(例如,使用接收单元5514)指示第二外部设备的位置的位置信息;以及实现在显示器单元上的第二外部设备在地图上的位置的显示(例如,使用显示使能单元5508)。
在一些实施例中,处理单元5506被进一步配置为:响应于检测到对应于共享位置可供性的位置处的接触的选择,实现在显示器单元5502上的对应于至少两个预定时间段的至少两个可供性的显示(例如,使用显示使能单元5508);检测(例如,使用检测单元5510)在触摸敏感表面单元5504上的、对应于显示器单元5502上的至少两个可供性之一的位置的位置处的接触;以及响应于检测到在触摸敏感表面单元上的、对应于显示器单元上的至少两个可供性之一的位置的位置处的接触,向第二参与者提供(例如,使用提供单元5516)使得第二参与者能够确定对应于至少两个可供性之一的预定时间段期间的第一参与者的当前位置的信息。
在一些实施例中,处理单元5506被进一步配置为:实现在显示器单元5502上的将共享的位置的剩余时间量的指示的显示(例如,使用显示使能单元5508)。
在一些实施例中,处理单元5506被进一步配置为:实现在显示器单元5502上的用于停止向第二参与者提供信息的可供性的显示(例如,使用显示使能单元5506)。
在一些实施例中,处理单元5506被进一步配置为:实现在显示器单元5502上与消息对话一起的细节可供性的显示(例如,使用显示使能单元5508);检测(例如,使用检测单元5510)在触摸敏感表面单元5504上的对应于显示器单元5502上的细节可供性的位置的位置处的接触;以及响应于检测到在触摸敏感表面单元5504上的对应于显示器单元5502上的细节可供性的位置的位置处的接触,实现在显示器单元5502上的示出已经共享他们的位置的消息对话的两个或者更多参与者的位置的地图的显示(例如,使用显示使能单元5508)。
在一些实施例中,处理单元5506被进一步配置为:实现在显示器单元5502上的标识已经共享他们的位置的消息对话的两个或者更多参与者的信息的显示(例如,使用显示使能单元5508)。
在一些实施例中,处理单元5506被进一步配置为:向两个或者更多参与者提供(例如,使用提供单元5516)用于从消息对话中去除两个或者更多参与者中的参与者的选项。
在一些实施例中,处理单元5506被进一步配置为:向两个或者更多参与者提供(例如,使用提供单元5516)用于向消息对话添加新参与者的选项。
在一些实施例中,消息对话具有名称,并且处理单元5506被进一步配置为:向两个或者更多参与者提供(例如,使用提供单元5516)用于更改消息对话的名称的选项。
在一些实施例中,地图不与消息对话中的特定消息相关联。
在一些实施例中,在显示器单元5502上轻敲在对应于地图的显示位置的位置处的触摸敏感表面单元5504,启动地图应用,并且地图应用提供用于获取去往地图上显示的位置的方向的选项。
在一些实施例中,向第二参与者提供(例如,使用提供单元5516)信息使得由第二参与者使用的远程电子设备提示第二用户共享他们的位置。
在一些实施例中,处理单元5506被进一步配置为:实现在显示器单元5502上用于向第二参与者发送(例如,使用发送单元5520)第一参与者的静态位置信息的发送位置可供性的显示(例如,使用显示使能单元5508),其中静态位置信息不根据设备的位置而更新;检测(例如,使用检测单元5510)发送位置可供性的选择;以及响应于检测到发送位置可供性的选择,向第二参与者发送(例如,使用发送单元5520)静态位置信息。
在一些实施例中,发送静态位置信息包括将包括静态位置信息的静态地图插入(例如,使用插入单元5522)到消息对话中。
在一些实施例中,静态地图不与消息对话中的特定消息相关联。
在一些实施例中,轻敲静态地图启动地图应用,并且地图应用提供用于获取去往静态地图上显示的位置信息的方向的选项。
上文参考图38所描述的操作可选地由描绘在图1A-图1B、图3、图5B或者图55中的部分来实现。例如,显示使能操作3802、检测操作3806和/或提供操作3808可选地由事件分类器170、事件识别器180、事件处理器190和外围接口118实现。事件分类器170中的事件监控器171检测触摸敏感显示器112上的接触,并且事件调度器模块174将事件信息递送至应用136-1。应用136-1的相应的事件识别器180将事件信息与相应的事件定义186比较,并且确定触摸敏感表面上的接触是否对应于预定事件或者子事件,诸如用户界面上的可供性的激活。当相应的预定事件或者子事件被检测到时,事件识别器180激活与事件或者子事件的检测相关联的事件处理器190。事件处理器190可以利用或者调用数据更新器176或者物体更新器177以更新应用内部状态192。在一些实施例中,事件处理器190访问相应的GUI更新器178以更新由应用显示的内容,或者访问外围接口118以向外部设备提供数据。同样地,对于本领域技术人员清楚的是可以基于图1A-图1B、图3、图5B或者图55中描绘的部分如何实现其他过程。
如图56所示,电子设备5600包括:显示器单元5602,配置成显示用户界面;可选地,触摸敏感表面单元5604,配置成接收接触;以及处理单元5606,耦合到显示器单元5602和可选地触摸敏感表面单元5604。在一些实施例中,处理单元5606包括显示使能单元5608、检测单元5610、确定单元5612、接收单元5614、选择单元5616、添加单元5618、插入单元5620、指示单元5622、发送单元5624和捕获单元5626。
处理单元5606被配置为:实现在显示器单元5602上的用于显示消息对话的消息区域的显示(例如,使用显示使能单元5608);接收(例如,使用接收单元5614)向消息对话添加媒体的请求;响应于接收到请求,实现媒体选择界面的与消息对话的至少一部分的并行显示(例如,使用显示使能单元5608),其中媒体选择界面包括用于选择向消息对话添加媒体的多个可供性,至少多个可供性的子集包括可以向消息对话添加的媒体的缩略图表示;检测(例如,使用检测单元5610)从多个可供性选择相应的可供性;以及响应于检测到相应的可供性的选择,选择(例如,使用选择单元5616)用于向消息对话添加的对应的媒体。
在一些实施例中,处理单元5606被进一步配置为:响应于检测到相应的可供性的选择,向消息对话添加(例如,使用添加单元5618)媒体。
在一些实施例中,处理单元5606被进一步配置为:响应于检测到相应的可供性的选择,将媒体插入(例如,使用插入单元5620)到消息编辑域中,并且实现在显示器单元5602上的用于向消息对话添加消息编辑域的内容的发送可供性的显示(例如,使用显示使能单元5608)。
在一些实施例中,处理单元5606被进一步配置为:检测(例如,使用检测单元5610)触摸敏感表面单元5604上的对应于显示器单元5602上的媒体选择界面的位置的位置处的滑动手势;以及响应于检测到滑动手势,实现在显示器单元5602上的多个可供性的滚动(例如,使用显示使能单元5608)。
在一些实施例中,多个可供性对应于相机相册中的最新获得的照片。
在一些实施例中,处理单元5606被进一步配置为:响应于检测到可供性从多个可供性的选择,实现在显示器单元5602上的媒体选择界面的尺寸的增加(例如,使用显示使能单元5608)。
在一些实施例中,处理单元5606被进一步配置为:实现显示器单元5602上的媒体可供性的显示(例如,使用显示使能单元5608),其中向消息对话添加媒体的请求包括在触摸敏感表面单元5604上的对应于显示器单元5602上的媒体可供性的位置的位置处的接触;响应于检测到接触,确定(例如,使用确定单元5612)接触的持续时间;根据接触的持续时间不超过阈值的确定,实现在显示器单元5602上用于使用相机传感器捕获新图像的可供性的显示(例如,使用显示使能单元5608);在用于捕获新图像的可供性被显示时,检测(例如,使用检测单元5610)触摸敏感表面单元5604上的滑动手势;以及响应于检测到滑动手势:指示(例如,使用指示单元5622)相机传感器捕获图像;以及向消息对话的参与者发送(例如,使用发送单元5624)图像。
在一些实施例中,实现媒体选择界面的显示包括:检测(例如,使用检测单元5610)在触摸敏感表面单元5604上的对应于显示器单元5602上的第一可供性的位置的位置处的接触;以及响应于检测到在触摸敏感表面单元5604上的对应于显示器单元5602上的第一可供性的位置的位置处的接触,向对话的参与者发送(例如,使用发送单元5624)对应的媒体。
在一些实施例中,实现媒体选择界面的显示进一步包括:实现在显示器单元上的发送可供性的显示(例如,使用显示使能单元5608);检测(例如,使用检测单元5610)在触摸敏感表面单元5604上的对应于显示器单元5602上的第一可供性、第二可供性和发送可供性的位置的位置处的接触;以及响应于检测到在触摸敏感表面单元5604上的对应于显示器单元5602上的第一可供性、第二可供性和发送可供性的位置的位置处的接触:向对话的参与者发送(例如,使用发送单元5624)对应的第一媒体和第二媒体。
在一些实施例中,多个可供性包括实时预览可供性,并且处理单元5606被进一步配置为:检测(例如,使用检测单元5610)在触摸敏感表面单元5604上的对应于显示器单元5602上的实时预览可供性的位置的位置处的接触;以及响应于检测到在触摸敏感表面单元5604上的对应于实时相机预览的位置的位置处的接触:基于实时相机预览捕获(例如,使用捕获单元5626)新图像,并且选择(例如,使用选择单元5616)新图像以用于向消息对话添加。
在一些实施例中,处理单元5606被进一步配置为:检测(例如,使用检测单元5610)发送新图像的请求;以及响应于检测到请求,向第一参与者发送(例如,使用发送单元5624)新图像。
上文参考图39所描述的操作可选地由描绘在图1A-图1B、图3、图5B或者图56中的部分来实现。例如,显示使能操作3902、3906、接收操作3904、检测操作3908和/或选择操作3910可选地由事件分类器170、事件识别器180、事件处理器190和其他输入控制设备116实现。事件分类器170中的事件监控器171检测触摸敏感显示器112上的接触或者来自其他输入控制设备116上的不同的用户输入,并且事件调度器模块174将事件信息递送至应用136-1。应用136-1的相应的事件识别器180将事件信息与相应的事件定义186比较,并且确定接触或者其他输入是否对应于预定事件或者子事件,诸如用户界面上的可供性的激活或者其他用户请求。当相应的预定事件或者子事件被检测到时,事件识别器180激活与事件或者子事件的检测相关联的事件处理器190。事件处理器190可以利用或者调用数据更新器176或者物体更新器177以更新应用内部状态192。在一些实施例中,事件处理器190访问相应的GUI更新器178以更新由应用显示的内容。同样地,对于本领域技术人员清楚的是可以基于图1A-图1B、图3、图5B或者图56中描绘的部分如何实现其他过程。
如图57所示,电子设备5700包括处理单元5702。在一些实施例中,处理单元5702包括检测单元5704、确定单元5706、发起单元5708、接收单元5710、提供单元5712、媒体回放单元5714和录制单元5716。
处理单元5702被配置为:基于电子设备5700的移动和一个或者多个接近传感器读数检测(例如,使用检测单元5704)设备情景的变化;响应于检测到设备情景的变化:确定(例如,使用确定单元5706)设备是否满足音频操作准则,其中音频操作准则包括当电子设备5700的移动满足移动准则并且一个或者多个接近传感器读数满足接近准则时满足的准则;以及根据设备情景的变化满足音频操作准则的确定,发起(例如,使用发起单元5708)音频操作;以及根据设备情景的变化不满足音频操作准则的确定,放弃发起音频操作。
在一些实施例中,移动准则包括预定轨迹。
在一些实施例中,确定移动是否满足移动准则包括确定移动的结束以及移动结束时电子设备的定向,并且其中当在移动结束时电子设备不在预定定向中时满足移动准则。
在一些实施例中,处理单元5702被进一步配置为,在发起音频操作之后:确定(例如,使用确定单元5706)电子设备是否在预定定向中;以及根据电子设备在预定定向中的确定:结束音频操作。
在一些实施例中,电子设备在预定定向中的确定包括:在移动满足移动准则并且一个或者多个接近传感器读数满足接近准则的确定的预定时间间隔内电子设备在预定定向中的确定。
在一些实施例中,电子设备5700进一步包括扬声器,并且其中扬声器被定位在设备5700的表面上,并且其中在预定定向中,表面面朝下。
在一些实施例中,电子设备5700进一步包括耳机,并且在预定定向中,麦克风被定位在耳机上方。
在一些实施例中,确定一个或者多个接近传感器读数是否满足接近准则包括确定指示接近电子设备的物体的检测的接近传感器读数是否在满足移动准则的移动被检测之后的预定时间间隔内被检测到。
在一些实施例中,处理单元5700被进一步配置为,在发起音频操作之后:检测(例如,使用检测单元5704)高于预定阈值的电子设备5700的特征移动;以及响应于检测到高于预定阈值的电子设备5700的特征移动:结束音频操作。
在一些实施例中,音频操作包括录制新消息,并且处理单元5702被进一步配置为:确定(例如,使用确定单元5706)消息是否包括讲话;以及根据消息不包括讲话的确定:结束新消息的录制。
在一些实施例中,处理单元被进一步配置为:接收(例如,使用接收单元5710)通信;以及响应于接收到通信并且在检测到设备情景的变化之前,提供(例如,使用提供单元5712)通信被接收得到的指示。
在一些实施例中,提供通信被接收的指示包括启动消息收发应用。
在一些实施例中,通信包括含尚未由设备播放的音频部分的消息,并且音频操作包括播放(例如,使用媒体回放单元5714)消息的音频部分。
在一些实施例中,处理单元5702被进一步配置为:确定(例如,使用确定单元5706)消息是否在检测到设备情景的变化之前的预定时间间隔内被接收,其中播放消息的音频部分包括如果消息在预定时间间隔内被接收,则播放(例如,使用媒体回放单元5714)消息的音频部分。
在一些实施例中,通信包括语音邮件消息,并且其中音频操作包括回放(例如,使用媒体回放单元5714)语音邮件消息。
在一些实施例中,处理单元5702被进一步配置为:在播放语音邮件消息之后,检测(例如,使用检测单元5704)电子设备的竖摇运动,其中竖摇运动包括向下运动以及然后向上运动;以及响应于检测到电子设备的竖摇运动,向与语音邮件消息相关联的电话号码发起电话呼叫(例如,使用发起单元5708)。
在一些实施例中,通信包括对应于来自电话号码的电话呼叫的语音邮件消息,并且处理单元5702被进一步配置为:在检测到设备情景的变化之前,播放(例如,使用媒体回放单元5714)语音邮件消息的至少一部分,并且语音操作包括向对应于语音邮件消息的电话号码发起电话呼叫(例如,使用发起单元5708)。
在一些实施例中,通信包括具有音频部分的消息,并且处理单元5702被进一步配置为:在检查到设备的情景的变化之前,播放(例如,使用媒体回放单元5714)消息的音频部分;以及确定(例如,使用确定单元5706)电子设备的移动是否在播放音频消息之后的预定时间间隔内被检测,并且其中发起音频操作包括如果设备情景的变化在从消息的音频部分被播放时的时间的预定时间间隔内被检测,则录制(例如,使用录制单元5716)用于新消息的音频。
在一些实施例中,通信包括具有由设备先前播放的音频部分的消息,并且消息操作包括录制(例如,使用录制单元5716)新消息。
在一些实施例中,处理单元5702被进一步配置为:在检测到设备情景的变化之前,检测(例如,使用检测单元5704)电子设备在音频消息收发情景中;以及只有当电子设备在音频消息收发情景中,才检测(例如,使用检测单元5704)设备情景的变化。
在一些实施例中,发起音频操作包括:根据音频回放准则已经被满足的确定,回放(例如,使用音频回放单元5714)对应于接收的通信的音频;以及根据音频录制准则已经被满足的确定,录制音频用于答复接收的通信。
上文参考图40-图45C所描述的操作可选地由描绘在图1A-图1B、图3、图5B或者图57中的部分来实现。例如,检测操作4002、确定操作4004和/或发起操作4006可选地由事件分类器170、事件识别器180、事件处理器190、接近传感器166和加速计168实现。事件分类器170中的事件监控器171基于来自诸如接近传感器166和/或加速计168之类的一个或者多个传感器的读数检测设备情景的变化。事件调度器模块174将事件信息递送至应用136-1。应用136-1的相应的事件识别器180将事件信息与相应的事件定义186比较,并且确定设备情景的变化是否对应于预定事件或者子事件,诸如满足某些准则。当相应的预定事件或者子事件被检测到时,事件识别器180激活与事件或者子事件的检测相关联的事件处理器190。事件处理器190可以利用或者调用数据更新器176或者物体更新器177以更新应用内部状态192。在一些实施例中,事件处理器190访问音频电路装置110以发起音频操作。同样地,对于本领域技术人员清楚的是可以基于图1A-图1B、图3、图5B或者图40-图45C中描绘的部分如何实现其他过程。
如图58所示,电子设备5800包括:至少一个麦克风5820以及可选地,配置成显示用户界面的显示器单元5802,以及耦合到至少一个麦克风5820和可选地显示器单元5802的处理单元5804。在一些实施例中,处理单元5804包括显示使能单元5806、检测单元5808、确定单元5810、生成单元5812、发送单元5814、比较单元5816和删除单元5818。
处理单元5804被配置为:检测(例如,使用检测单元5808)解读为录制用于指定联系人的音频消息的请求的一个或者多个条件;响应于检测到一个或者多个条件,使用至少一个麦克风5820生成(例如,使用生成单元5812)音频录音;确定(例如,使用确定单元5810)音频录音是否满足拒绝准则;根据不满足拒绝准则的确定,向指定联系人发送(例如,使用发送单元5814)音频录音;以及根据拒绝准则被满足的确定,放弃向指定联系人发送录音。
在一些实施例中,当音频录音的持续时间超过预定持续时间时,满足拒绝准则。
在一些实施例中,处理单元5804被进一步配置为:检测(例如,使用检测单元5808)音频录音中是否存在讲话,并且当音频录音被确定不包括多于阈值量的人类讲话时,满足拒绝准则。
在一些实施例中,拒绝准则基于设备的位置。
在一些实施例中,当电子设备在与声音源距离阈值内时,满足拒绝准则。
在一些实施例中,处理单元5804被进一步配置为:通过确定设备的接近传感器是否已经检测到物体在设备的距离阈值内,确定(例如,使用确定单元5810)电子设备是否在距离阈值内。
在一些实施例中,处理单元5804被进一步配置为:通过分析通过组合由至少一个麦克风捕获的信号产生的波形,确定(例如,使用确定单元5810)电子设备是否在距离阈值内,至少一个麦克风包括第一麦克风和第二麦克风。
在一些实施例中,处理单元5806被进一步配置为:通过确定至少一个麦克风处的声压级是否超过声压级阈值来确定(例如,使用确定单元5810)电子设备是否在距离阈值内。
在一些实施例中,声压级阈值基于由电子设备先前检测到的声压级的函数。
在一些实施例中,处理单元5804被进一步配置为:通过比较(例如,使用比较单元5816)声压级与由至少一个麦克风检测的混响级,确定电子设备5800是否在距离阈值内。
在一些实施例中,拒绝准则基于电子设备5800的定向。
在一些实施例中,电子设备5800包括扬声器(例如,耳机),并且扬声器被定位在设备的表面上,并且当表面面向下时,拒绝准则被满足。
在一些实施例中,电子设备5800包括扬声器(例如,耳机),并且当电子设备的定向将麦克风放置在扬声器之上时,满足拒绝准则。
在一些实施例中,当电子设备的特征移动超过阈值时,满足拒绝准则。
在一些实施例中,电子设备包括显示器单元5802,并且处理单元5804被进一步配置为,当音频录音满足拒绝准则时,实现在显示器单元5802上如下项的并行显示(例如,使用显示使能单元5806):包括音频录音的草稿消息的表示;以及发送可供性,其中当由用户选择时,发送可供性使得设备向指定联系人发送草稿消息。
在一些实施例中,处理单元5804被进一步配置为,当音频录音满足拒绝准则时:在确定(例如,使用确定单元5810)检测一个或者多个条件和确定音频录音满足拒绝准则之间的经过时间是否超过时间阈值;根据经过时间超过时间阈值的确定,实现在显示器单元5802上的包括音频录音的草稿消息的表示的显示(例如,使用显示使能单元5806);以及根据经过时间不超过时间阈值的确定,删除(例如,使用删除单元5818)音频录音而不实现草稿消息的表示的显示。
上文参考图46-图48B所描述的操作可选地由描绘在图1A-图1B、图3、图5B或者图58中的部分来实现。例如,检测操作4602、显示使能操作4802、生成操作4604、确定操作4606和/或发送操作4608可选地由事件分类器170、事件识别器180、事件处理器190、加速计168、接近传感器166和外围接口118实现。事件分类器170中的事件监控器171检测触摸敏感显示器112上的接触和/或设备情景的变化(例如,使用接近传感器166和/或加速计168),并且事件调度器模块174将事件信息递送至应用136-1。应用136-1的相应的事件识别器180将事件信息与相应的事件定义186比较,并且确定触摸敏感表面上的接触或者设备情景的变化是否对应于预定事件或者子事件,诸如录制音频消息的请求。当相应的预定事件或者子事件被检测到时,事件识别器180激活与事件或者子事件的检测相关联的事件处理器190。事件处理器190可以利用或者调用数据更新器176或者物体更新器177以更新应用内部状态192。在一些实施例中,事件处理器190访问相应的GUI更新器178以更新由应用显示的内容,或者访问音频电路装置110和麦克风113以生成音频录音。在一些实施例中,事件处理器190访问外围接口118以向指定联系人发送录音。同样地,对于本领域技术人员清楚的是可以基于图1A-图1B、图3、图5B或者图46-48B中描绘的部分如何实现其他过程。
如图59所示,电子设备5900包括:显示器单元5902,配置成显示用户界面;触摸敏感表面单元5904,配置成接收接触;以及处理单元5906,耦合到显示器单元5902和触摸敏感表面单元5904。在一些实施例中,处理单元5906包括显示使能单元5908、检测单元5910、确定单元5912、发送单元5914和媒体捕获单元5916。
处理单元5906被配置为:实现在显示器单元5902上媒体可供性、消息编辑域以及参与者之间的消息对话的显示(例如,使用显示使能单元5908),其中对话被显示在显示器单元5902上的消息区域中;检测(例如,使用检测单元5910)在触摸敏感表面单元5904上的对应于显示器单元5902上的媒体可供性的位置的位置处的接触;响应于检测到接触,在显示器单元5902上实现消息编辑域中的媒体预览的显示(例如,使用显示使能单元5908);检测(例如,使用检测单元5910)接触从触摸敏感表面单元5904的抬起;响应于检测到抬起,基于媒体预览捕获(例如,使用媒体捕获单元5916)新图像;以及向消息对话的参与者发送(例如,使用发送单元5914)捕获的图像。
在一些实施例中,响应于检测到抬起,所捕获的图像被发送给参与者。
在一些实施例中,处理单元5906被进一步配置为:在显示器单元5902上实现用于向消息对话的参与者发送消息的发送按钮的显示(例如,使用显示使能单元5908);在检测到抬起并且捕获媒体之后,检测(例如,使用检测单元5910)在触摸敏感表面单元5902上的对应于显示器单元5902上的发送按钮的位置的位置处的第二接触,并且响应于检测到第二接触,捕获的图像被发送给参与者。
在一些实施例中,处理单元5906被进一步配置为:进一步响应于检测到抬起,在显示器单元5902上实现消息编辑域中的捕获的图像的表示的显示。
在一些实施例中,处理单元5906被进一步配置为:当显示消息编辑域中的捕获的图像的表示时,检测(例如,使用检测单元5910)消息编辑域中的附加内容的用户条目,并且响应于检测到第二接触,附加的内容和所捕获的图像被发送给参与者。
在一些实施例中,实现消息编辑域中的媒体预览的显示包括在显示器单元5902上实现消息编辑域的扩展(例如,使用显示使能单元5908)。
上文参考图49所描述的操作可选地由描绘在图1A-图1B、图3、图5B或者图59中的部分来实现。例如,显示使能操作4902、检测操作4904和/或捕获操作4910可选地由事件分类器170、事件识别器180、事件处理器190和外围接口118实现。事件分类器170中的事件监控器171检测触摸敏感显示器112上的接触,并且事件调度器模块174将事件信息递送至应用136-1。应用136-1的相应的事件识别器180将事件信息与相应的事件定义186比较,并且确定触摸敏感表面上的接触是否对应于预定事件或者子事件,诸如用户界面上的可供性的激活。当相应的预定事件或者子事件被检测到时,事件识别器180激活与事件或者子事件的检测相关联的事件处理器190。事件处理器190可以利用或者调用数据更新器176或者物体更新器177以更新应用内部状态192。在一些实施例中,事件处理器190访问相应的GUI更新器178以更新由应用显示的内容。在一些实施例中,事件处理器190访问外围接口118以捕获图像。同样地,对于本领域技术人员清楚的是可以基于图1A-图1B、图3、图5B或者图59中描绘的部分如何实现其他过程。
前述描述是为了解读的目的参考特定实施例进行描述的。然而,上文示例性的讨论并不旨在是穷尽式的或者将本发明限制到所公开的精确形式。鉴于以上教导,很多修改和变化是可能的。实施例被选择和描述以便最好地解读技术的原理和它们的实际应用。本领域中其他技术人员由此能够最好地利用该技术和适于构思具体使用的具有各种修改的各种实施例。
虽然已经参考附图充分详细地描述了本公开和示例,注意各种变化和修改将对于本领域技术人员变得明显。注意的变化和修改应当被理解为包括在如由权利要求书限定的本公开和示例的范围内。
如上文所描述的,本技术的一个方面是从各种源可获得的数据的收集和使用以与消息对话的其他参与者共享位置信息。本公开构思在一些情况下,该收集的数据可以包括唯一地标识特定人或者可以用于联系或者定位特定人的个人信息数据。这样的个人信息数据可以包括人口统计数据、基于位置的数据、电话号码、电子邮件地址、家庭地址或者任何其他标识信息。
本公开认识到这样的个人信息数据在本技术中的使用可以为了用户的利益被使用。例如,个人信息数据可以被用于使得参与者能够确定彼此的位置和预计抵达时间。进一步地,本公开也构思了对用户有益的个人信息数据的其他使用。
本公开进一步构思对这样的个人信息数据的收集、分析、公开、转移、存储或者其他使用负责的实体将遵从完善的隐私策略和/或隐私实践。具体地,这样的实体应当实现和一致地使用隐私策略和实践,这样的隐私策略和实践通常被认为满足或者超过对保持个人信息数据隐私和安全的工业或者政府要求。例如,来自用户的个人信息应当被收集用于合法且合理的实体使用,并且不在那些合法使用之外共享和销售。进一步地,这样的收集应当仅发生在接收到用户告知的知情之后。另外,这样的实体将采取任何所需要的步骤用于保护和守卫对这样的个人信息的访问和确保对个人信息有访问权的其他实体坚守他们的隐私策略和程序。进一步地,这样的实体可以让他们接受第三方的评估以证明他们坚守广为接受的隐私策略和实践。
此外,本公开还构思其中用户选择性地阻止对个人信息数据的使用或者访问的实施例。即,本公开构思硬件和/或软件元件可以被提供以防止或者阻挡对这样的个人信息数据的访问。例如,在位置共享特征的情况下,本技术可以被配置为允许用户选择不向消息对话参与者提供位置信息。在又一实施例中,用户可以选择不提供精确的位置信息,但允许共享位置区信息。
因此,虽然本公开广义地涵盖个人信息数据的使用以实现一个或者多个各种公开实施例,但是本公开也构思各种实施例也可以在不需要这样的个人信息数据的情况下被实现。即,本技术的各种实施例不会因为这样的个人信息数据的全部或者部分的缺乏而行不通。例如,预计抵达时间内容可以使用最小量的个人信息而被确定,诸如位置区信息或者公开可获得的信息。

Claims (48)

1.一种方法,包括:
在具有触摸敏感表面和显示器的电子设备处:
在所述显示器上显示媒体可供性和用于显示在消息对话的参与者之间发送的消息的消息区域;
检测在所述触摸敏感表面上的手势,其包括检测在所述触摸敏感表面上的、与所述显示器上的所述媒体可供性的位置相对应的位置处的接触;
响应于检测到所述接触:
在所述显示器上显示发送可供性;
检测所述手势的延续,其包括检测所述接触跨所述触摸敏感表面的移动以及然后检测所述接触从所述触摸敏感表面抬起;
确定所述接触是否移动到在所述触摸敏感表面上的、与所述发送可供性的位置相对应的位置;以及
根据对所述接触移动到在所述触摸敏感表面上的、与所述发送可供性的位置相对应的位置的确定,并且响应于检测到所述抬起,向所述消息对话的参与者发送响应于所述手势的至少一部分而捕获的媒体。
2.根据权利要求1所述的方法,其中所述接触以及然后所述接触的所述移动是在所述触摸敏感表面上的单个、连续的接触。
3.根据权利要求1-2中任一项所述的方法,进一步包括:
响应于检测到所述接触,在所述显示器上显示取消可供性;
确定所述接触是否移动到在所述触摸敏感表面上的、与所述取消可供性的位置相对应的位置;以及
根据对所述接触移动到在所述触摸敏感表面上的、与所述取消可供性的位置相对应的位置以及然后抬起的确定,放弃向所述参与者发送捕获的所述媒体。
4.根据权利要求1-3中任一项所述的方法,进一步包括:
在检测到所述抬起之后,从所述显示器去除所述发送可供性。
5.根据权利要求1-4中任一项所述的方法,进一步包括:
根据对所述接触移动到所述接触敏感表面上的、与所述显示器上的所述发送可供性的位置相对应的位置的确定,并且响应于检测到所述抬起:
捕获所述媒体,以及
向所述参与者发送所述媒体。
6.根据权利要求1-4中任一项所述的方法,进一步包括:
响应于检测到所述接触,开始捕获所述媒体;以及
根据对所述接触移动到在所述触摸敏感表面上的、与所述显示器上的所述发送可供性的位置相对应的位置的确定,并且响应于检测到所述抬起:
停止捕获所述媒体,以及
向所述参与者发送所述媒体。
7.根据权利要求1-4中任一项所述的方法,进一步包括:
响应于检测到所述接触,开始捕获所述媒体;
响应于检测到所述接触的所述移动,停止捕获所述媒体;以及
根据对所述接触移动到所述接触敏感表面上的、与所述显示器上的所述发送可供性的位置相对应的位置的确定,并且响应于在所述接触在所述触摸敏感表面上的、与所述发送可供性相对应的位置处时检测到所述抬起,向所述参与者发送所述媒体。
8.根据权利要求1-4中任一项所述的方法,其中所述媒体是从麦克风接收的音频数据,并且其中所述抬起在所述触摸敏感表面上的、与所述显示器上的所述发送可供性的位置相对应的位置处,所述方法进一步包括:
响应于检测到所述接触,开始捕获所述音频数据;以及
根据对所述接触移动到在所述触摸敏感表面上的、与所述显示器上的所述发送可供性的位置相对应的位置的确定,并且响应于检测到所述抬起,停止捕获所述音频数据并且向所述参与者发送所述音频数据。
9.根据权利要求3-4中任一项所述的方法,进一步包括:
显示消息编辑域;以及
根据对所述接触未移动到所述接触敏感表面上的、与所述发送可供性的位置相对应的位置,也未移动到在所述触摸敏感表面上的、与所述取消可供性的位置相对应的位置的确定,并且响应于检测到所述抬起:
在所述消息编辑域中显示图像,所述图像具有表示捕获的所述媒体的波形。
10.根据权利要求9所述的方法,进一步包括:
响应于检测到所述抬起,利用用于向所述参与者发送捕获的所述媒体的发送按钮的显示代替所述媒体可供性的显示。
11.根据权利要求1所述的方法,进一步包括:
响应于检测到在所述触摸敏感表面上的所述接触,在所述显示器上显示媒体预览;以及
在检测到所述抬起之后,停止在所述显示器上显示所述媒体预览。
12.根据权利要求1-11中任一项所述的方法,进一步包括:
当所述接触被保持在所述媒体可供性上时:
显示视觉辨别的区域,其中所述视觉辨别的区域围闭所述媒体可供性和所述发送可供性;以及
响应于检测到所述接触的所述移动,扩展所述视觉辨别的区域。
13.根据权利要求12所述的方法,进一步包括:
向所述参与者显示用于输入消息的虚拟键盘;以及
在所述虚拟键盘上方,沿着所述显示器的特定边缘显示所述媒体可供性,其中所显示的视觉辨别的区域由所述特定边缘部分地界定。
14.根据权利要求12所述的方法,进一步包括:
在所述显示器的角落处显示所述媒体可供性,其中所显示的视觉辨别区域由所述显示器的两个不同边缘部分地界定。
15.根据权利要求12-14中任一项所述的方法,其中所述触摸敏感表面是触摸敏感显示器,所述方法进一步包括:
向所述媒体可供性分配命中区域,其中所述命中区域是所述显示器的响应于触摸输入的区域,并且其中所述命中区域在虚拟键盘被显示时比在所述虚拟键盘不被显示时具有更大的尺寸。
16.根据权利要求1-15中任一项所述的方法,进一步包括:
确定所述媒体可供性上的所述接触的持续时间;以及
根据对所述接触的所述持续时间小于阈值持续时间的确定,显示用于选择现有媒体以向所述参与者发送的媒体选择器用户界面。
17.根据权利要求1-16中任一项所述的方法,进一步包括:
接收是否防止向所述参与者发送捕获的所述媒体的元数据的集合的用户指定。
18.根据权利要求17所述的方法,其中所述元数据包括所述电子设备的位置的表示。
19.根据权利要求1-18中任一项所述的方法,其中所述媒体可供性是第一媒体可供性,所述方法进一步包括:
在所述显示器上显示第二媒体可供性。
20.根据权利要求19所述的方法,其中所述第一媒体可供性是用于捕获音频数据的音频捕获可供性并且所述第二媒体可供性是用于捕获视频或者图像的视觉媒体捕获可供性。
21.根据权利要求1-20中任一项所述的方法,其中向所述参与者发送的所述媒体基于失效准则而失效。
22.一种存储一个或者多个程序的非瞬态计算机可读存储介质,所述一个或者多个程序包括指令,当所述指令由具有显示器和触摸敏感表面的电子设备的一个或者多个处理器执行时,所述指令使得所述电子设备:
显示媒体可供性和用于显示在消息对话的参与者之间发送的消息的消息区域;
检测在所述触摸敏感表面上的手势,其包括检测在所述触摸敏感表面上的、与所述显示器上的所述媒体可供性的位置相对应的位置处的接触;
响应于检测所述接触:
显示发送可供性;
检测所述手势的延续,其包括检测所述接触跨所述触摸敏感表面的移动以及然后检测所述接触从所述触摸敏感表面抬起;
确定所述接触是否移动到在所述触摸敏感表面上的、与所述发送可供性的位置相对应的位置;以及
根据对所述接触移动到在所述触摸敏感表面上的、与所述发送可供性的位置相对应的位置的确定,并且响应于检测到所述抬起,向所述消息对话的参与者发送响应于所述手势的至少一部分而捕获的媒体。
23.一种电子设备,包括:
显示器;
触摸敏感表面;
一个或者多个处理器;
存储器;以及
一个或者多个程序,其中所述一个或者多个程序被存储在所述存储器中并且被配置为由所述一个或者多个处理器执行,所述一个或者多个程序包括指令,所述指令用于:
在所述显示器上显示媒体可供性和用于显示在消息对话的参与者之间发送的消息的消息区域;
检测在所述触摸敏感表面上的手势,其包括检测在所述触摸敏感表面上的、与所述显示器上的所述媒体可供性的位置相对应的位置处的接触;
响应于检测到所述接触:
在所述显示器上显示发送可供性;
检测所述手势的延续,其包括检测所述接触跨所述触摸敏感表面的移动以及然后检测所述接触从所述触摸敏感表面抬起;
确定所述接触是否移动到在所述触摸敏感表面上的、与所述发送可供性的位置相对应的位置;以及
根据对所述接触移动到在所述触摸敏感表面上的、与所述发送可供性的位置相对应的位置的确定,并且响应于检测到所述抬起,向所述消息对话的参与者发送响应于所述手势的至少一部分而捕获的媒体。
24.一种电子设备,包括:
显示器;
触摸敏感表面;以及
用于在所述显示器上显示媒体可供性和用于显示在消息对话的参与者之间发送的消息的消息区域的装置;
用于检测在所述触摸敏感表面上的手势的装置,所述检测包括检测在所述触摸敏感表面上的、与所述显示器上的所述媒体可供性的位置相对应的位置处的接触;
用于响应于检测到所述接触而在所述显示器上显示发送可供性的装置;
用于检测所述手势的延续的装置,所述检测包括检测所述接触跨所述触摸敏感表面的移动以及然后检测所述接触从所述触摸敏感表面抬起;
用于确定所述接触是否移动到在所述触摸敏感表面上的、与所述发送可供性的位置相对应的位置的装置;以及
用于根据对所述接触移动到在所述触摸敏感表面上的、与所述发送可供性的位置相对应的位置的确定并且响应于检测到所述抬起而向所述消息对话的参与者发送响应于所述手势的至少一部分而捕获的媒体的装置。
25.一种电子设备,包括:
显示器;
触摸敏感表面;
一个或者多个处理器;
存储器;以及
一个或者多个程序,其中所述一个或者多个程序被存储在所述存储器中并且被配置为由所述一个或者多个处理器执行,所述一个或者多个程序包括用于执行根据权利要求1-21所述的方法中的任一项的指令。
26.一种存储一个或者多个程序的非瞬态计算机可读存储介质,所述一个或者多个程序包括指令,当所述指令由具有显示器和触摸敏感表面的电子设备的一个或者多个处理器执行时,所述指令使得所述设备执行根据权利要求1-21所述的方法中的任一项。
27.一种电子设备,包括:
显示器;
触摸敏感表面;
用于执行根据权利要求1-21所述的方法中的任一项的装置。
28.一种电子设备,包括:
触摸敏感表面单元;
显示器单元;以及
处理单元,耦合到所述显示器单元和所述触摸敏感表面单元,所述处理器单元被配置为:
实现在所述显示器单元上的媒体可供性和用于显示在消息对话的参与者之间发送的消息的消息区域的显示;
检测所述触摸敏感表面单元上的手势,其包括检测所述触摸敏感表面单元上的、与所述显示器单元上的所述媒体可供性的位置相对应的位置处的接触;
响应于检测到所述接触:
实现在所述显示器单元上的发送可供性的显示;
检测所述手势的延续,其包括检测所述接触跨所述触摸敏感表面单元的移动以及然后检测所述接触从所述触摸敏感表面单元抬起;
确定所述接触是否移动到在所述触摸敏感表面上的、与所述发送可供性的位置相对应的位置;以及
根据对所述接触移动到所述触摸敏感表面单元上的、与所述发送可供性的位置相对应的位置的确定,并且响应于检测到所述抬起,向所述消息对话的参与者发送响应于所述手势的至少一部分而捕获的媒体。
29.根据权利要求28所述的电子设备,其中所述接触以及然后所述接触的移动是在所述触摸敏感表面单元上的单个、连续的接触。
30.根据权利要求28-29中任一项所述的电子设备,其中所述处理单元被进一步配置为:
响应于检测到所述接触,实现在所述显示器单元上的取消可供性的显示;
确定所述接触是否移动到所述触摸敏感表面单元上的、与所述取消可供性的位置相对应的位置;以及
根据所述接触移动到所述触摸敏感表面单元上的、与所述取消可供性的位置相对应的位置以及然后抬起的确定,放弃向所述参与者发送捕获的所述媒体。
31.根据权利要求28-30中任一项所述的电子设备,其中所述处理单元被进一步配置为:
在检测到所述抬起之后,实现从所述显示器单元去除所述发送可供性。
32.根据权利要求28-31中任一项所述的电子设备,其中所述处理单元被进一步配置为:
根据对所述接触移动到所述接触敏感表面上的、与所述显示器单元上的所述发送可供性的位置相对应的位置的确定,并且响应于检测到所述抬起:
捕获所述媒体,以及
向所述参与者发送所述媒体。
33.根据权利要求28-31中任一项所述的电子设备,其中所述处理单元被进一步配置为:
响应于检测到所述接触,开始捕获所述媒体;以及
根据对所述接触移动到所述触摸敏感表面单元上的、与所述显示器单元上的所述发送可供性的位置相对应的位置的确定,并且响应于检测到所述抬起:
停止捕获所述媒体,以及
向所述参与者发送所述媒体。
34.根据权利要求28-31中任一项所述的电子设备,其中所述处理单元被进一步配置为:
响应于检测到所述接触,开始捕获所述媒体;
响应于检测到所述接触的所述移动,停止捕获所述媒体;以及
根据所述接触移动到所述接触敏感表面上的、与所述显示器单元上的所述发送可供性的位置相对应的位置,并且响应于在所述接触在所述触摸敏感表面单元上的、与所述发送可供性相对应的位置处时检测到所述抬起,向所述参与者发送所述媒体。
35.根据权利要求28-31中任一项所述的电子设备,其中所述媒体是从麦克风接收的音频数据,并且其中所述抬起在所述触摸敏感表面单元上的、与所述显示器单元上的所述发送可供性的位置相对应的位置处,其中所述电子设备被进一步配置为:
响应于检测到所述接触,开始捕获所述音频数据;以及
根据对所述接触移动到所述触摸敏感表面单元上的、与所述显示器单元上的所述发送可供性的位置相对应的位置的确定,并且响应于检测到所述抬起,停止捕获所述音频数据并且向所述参与者发送所述音频数据。
36.根据权利要求30-31中任一项所述的电子设备,其中所述处理单元被进一步配置为:
实现在所述显示器单元上的消息编辑域的显示;以及
根据所述接触未移动到所述接触敏感表面上的、与所述发送可供性的位置相对应的位置也未移动到所述触摸敏感表面单元上的、与所述取消可供性的位置相对应的位置的确定,并且响应于检测到所述抬起:
实现在所述显示器单元上的所述消息编辑域中显示图像,所述图像具有表示捕获的所述媒体的波形。
37.根据权利要求36所述的电子设备,其中所述处理单元被进一步配置为:
响应于检测到所述抬起,实现利用在所述显示器单元上的用于向所述参与者发送捕获的所述媒体的发送按钮的显示代替所述媒体可供性的显示。
38.根据权利要求28所述的电子设备,其中所述处理单元被进一步配置为:
响应于检测到所述触摸敏感表面单元上的所述接触,实现在所述显示器单元上的媒体预览的显示;以及
在检测到所述抬起之后,停止在所述显示器单元上显示所述媒体预览。
39.根据权利要求28-38中任一项所述的电子设备,其中所述处理单元被进一步配置为:
当所述接触被保持在所述媒体可供性上时:
实现在所述显示器单元上的视觉辨别的区域的显示,其中所述视觉辨别的区域围闭所述媒体可供性和所述发送可供性;以及
响应于检测到所述接触的所述移动,扩展所述视觉辨别的区域。
40.根据权利要求39所述的电子设备,其中所述处理单元被进一步配置为:
实现在所述显示器单元上向所述参与者显示用于输入消息的虚拟键盘;以及
实现在所述虚拟键盘上方沿着所述显示器单元的特定边缘显示所述媒体可供性,其中所显示的视觉辨别的区域由所述特定边缘部分地界定。
41.根据权利要求39所述的电子设备,其中所述处理单元被进一步配置为:
实现在所述显示器单元的角落处的所述媒体可供性的显示,其中所显示的视觉辨别区域由所述显示器单元的两个不同边缘部分地界定。
42.根据权利要求39-41中任一项所述的电子设备,其中所述触摸敏感表面单元是触摸敏感显示器单元,其中所述处理单元被进一步配置为:
向所述媒体可供性分配命中区域,其中所述命中区域是所述显示器单元响应于触摸输入的区域,并且其中所述命中区域在虚拟键盘被显示时比在所述虚拟键盘不被显示时具有更大的尺寸。
43.根据权利要求28-42中任一项所述的电子设备,其中所述处理单元被进一步配置为:
确定所述媒体可供性上的所述接触的持续时间;以及
根据对所述接触的所述持续时间小于阈值持续时间的确定,实现用于选择现有媒体以向所述参与者发送的媒体选择器用户界面在所述显示器单元上的显示。
44.根据权利要求28-43中任一项所述的电子设备,其中所述处理单元被进一步配置为:
接收是否防止向所述参与者发送捕获的所述媒体的元数据的集合的用户指定。
45.根据权利要求44所述的电子设备,其中所述元数据包括所述电子设备的位置的表示。
46.根据权利要求28-45中任一项所述的电子设备,其中所述媒体可供性是第一媒体可供性,其中所述处理单元被进一步配置为:
实现在所述显示器单元上的第二媒体可供性的显示。
47.根据权利要求46所述的电子设备,其中所述第一媒体可供性是用于捕获音频数据的音频捕获可供性,并且所述第二媒体可供性是用于捕获视频或者图像的视觉媒体捕获可供性。
48.根据权利要求28-47中任一项所述的电子设备,其中向所述参与者发送的所述媒体基于失效准则而失效。
CN201510290133.1A 2014-05-31 2015-05-29 用于媒体和位置内容的捕获和传输的消息用户界面 Active CN105183442B (zh)

Applications Claiming Priority (8)

Application Number Priority Date Filing Date Title
US201462006071P 2014-05-31 2014-05-31
US62/006,071 2014-05-31
US201462047622P 2014-09-08 2014-09-08
US62/047,622 2014-09-08
PCT/US2015/032309 WO2015183756A1 (en) 2014-05-31 2015-05-22 Message user interfaces for capture and transmittal of media and location content
USPCT/US2015/032309 2015-05-22
PCT/US2015/032305 WO2015183755A1 (en) 2014-05-31 2015-05-22 Message user interfaces for captured and transmittal of media and location
USPCT/US2015/032305 2015-05-22

Publications (2)

Publication Number Publication Date
CN105183442A true CN105183442A (zh) 2015-12-23
CN105183442B CN105183442B (zh) 2019-03-08

Family

ID=53836331

Family Applications (8)

Application Number Title Priority Date Filing Date
CN202110744146.7A Pending CN113485550A (zh) 2014-05-31 2015-05-22 用于媒体和位置内容的捕获以及传输的消息用户界面
CN201580029071.7A Active CN106575149B (zh) 2014-05-31 2015-05-22 用于捕获和传输媒体和位置内容的消息用户界面
CN202110744381.4A Pending CN113485551A (zh) 2014-05-31 2015-05-22 用于媒体和位置内容的捕获以及传输的消息用户界面
CN201710267617.3A Active CN107122049B (zh) 2014-05-31 2015-05-22 用于捕获和传输媒体和位置内容的消息用户界面
CN201510290133.1A Active CN105183442B (zh) 2014-05-31 2015-05-29 用于媒体和位置内容的捕获和传输的消息用户界面
CN201520365843.1U Withdrawn - After Issue CN205263700U (zh) 2014-05-31 2015-05-29 电子设备
CN201510291012.9A Active CN105183443B (zh) 2014-05-31 2015-05-29 用于媒体和位置内容的捕获和传输的消息用户界面
CN201520365358.4U Active CN204946542U (zh) 2014-05-31 2015-05-29 电子设备

Family Applications Before (4)

Application Number Title Priority Date Filing Date
CN202110744146.7A Pending CN113485550A (zh) 2014-05-31 2015-05-22 用于媒体和位置内容的捕获以及传输的消息用户界面
CN201580029071.7A Active CN106575149B (zh) 2014-05-31 2015-05-22 用于捕获和传输媒体和位置内容的消息用户界面
CN202110744381.4A Pending CN113485551A (zh) 2014-05-31 2015-05-22 用于媒体和位置内容的捕获以及传输的消息用户界面
CN201710267617.3A Active CN107122049B (zh) 2014-05-31 2015-05-22 用于捕获和传输媒体和位置内容的消息用户界面

Family Applications After (3)

Application Number Title Priority Date Filing Date
CN201520365843.1U Withdrawn - After Issue CN205263700U (zh) 2014-05-31 2015-05-29 电子设备
CN201510291012.9A Active CN105183443B (zh) 2014-05-31 2015-05-29 用于媒体和位置内容的捕获和传输的消息用户界面
CN201520365358.4U Active CN204946542U (zh) 2014-05-31 2015-05-29 电子设备

Country Status (7)

Country Link
US (10) US20150350141A1 (zh)
EP (3) EP3217341A1 (zh)
JP (7) JP6500093B2 (zh)
CN (8) CN113485550A (zh)
AU (9) AU2015267259B2 (zh)
DE (4) DE202015009346U1 (zh)
HK (2) HK1216556A1 (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105824541A (zh) * 2016-02-29 2016-08-03 维沃移动通信有限公司 一种提示信息的处理方法及移动终端
CN110637280A (zh) * 2017-07-18 2019-12-31 谷歌有限责任公司 图形图标的操纵
CN111291653A (zh) * 2020-01-21 2020-06-16 Oppo(重庆)智能科技有限公司 指纹事件上报方法、装置及电子设备
CN113439255A (zh) * 2019-02-22 2021-09-24 索尼集团公司 信息处理装置、信息处理方法及程序
CN114128248A (zh) * 2019-12-13 2022-03-01 索尼集团公司 管理多个图像设备
CN115185431A (zh) * 2020-06-01 2022-10-14 苹果公司 用于管理媒体的用户界面
US11962889B2 (en) 2016-06-12 2024-04-16 Apple Inc. User interface for camera effects

Families Citing this family (185)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9954996B2 (en) 2007-06-28 2018-04-24 Apple Inc. Portable electronic device with conversation management for incoming instant messages
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
TWI439960B (zh) 2010-04-07 2014-06-01 Apple Inc 虛擬使用者編輯環境
US10715380B2 (en) 2011-05-23 2020-07-14 Apple Inc. Setting a reminder that is triggered by a target user device
US8971924B2 (en) 2011-05-23 2015-03-03 Apple Inc. Identifying and locating users on a mobile network
US9247377B2 (en) 2011-05-23 2016-01-26 Apple Inc. Setting a reminder that is triggered by a target user device
KR102013443B1 (ko) 2012-09-25 2019-08-22 삼성전자주식회사 이미지를 전송하기 위한 방법 및 그 전자 장치
US8989773B2 (en) 2013-01-29 2015-03-24 Apple Inc. Sharing location information among devices
JP2016508007A (ja) 2013-02-07 2016-03-10 アップル インコーポレイテッド デジタルアシスタントのためのボイストリガ
WO2014143776A2 (en) 2013-03-15 2014-09-18 Bodhi Technology Ventures Llc Providing remote interactions with host device using a wireless device
USD737319S1 (en) * 2013-06-09 2015-08-25 Apple Inc. Display screen or portion thereof with graphical user interface
USD742894S1 (en) * 2013-06-10 2015-11-10 Apple Inc. Display screen or portion thereof with graphical user interface
KR102161764B1 (ko) * 2013-10-31 2020-10-05 삼성전자주식회사 카툰 이미지를 이용한 메신저 대화창 표시 방법 및 컴퓨터 판독 가능한 기록 매체
USD759668S1 (en) * 2014-01-13 2016-06-21 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
USD751117S1 (en) 2014-02-07 2016-03-08 Apple Inc. Display screen or portion thereof with animated graphical user interface
US20150350146A1 (en) 2014-05-29 2015-12-03 Apple Inc. Coordination of message alert presentations across devices based on device modes
US10313506B2 (en) 2014-05-30 2019-06-04 Apple Inc. Wellness aggregator
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US20150350141A1 (en) 2014-05-31 2015-12-03 Apple Inc. Message user interfaces for capture and transmittal of media and location content
US10382378B2 (en) 2014-05-31 2019-08-13 Apple Inc. Live location sharing
USD771112S1 (en) * 2014-06-01 2016-11-08 Apple Inc. Display screen or portion thereof with graphical user interface
US10721594B2 (en) * 2014-06-26 2020-07-21 Microsoft Technology Licensing, Llc Location-based audio messaging
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
CN106605201B (zh) 2014-08-06 2021-11-23 苹果公司 用于电池管理的减小尺寸的用户界面
TWI549504B (zh) * 2014-08-11 2016-09-11 宏碁股份有限公司 影像擷取裝置及其自動對焦補償方法
KR102016160B1 (ko) * 2014-09-02 2019-08-29 애플 인크. 경고를 관리하기 위한 축소된 크기의 인터페이스
EP4209872A1 (en) 2014-09-02 2023-07-12 Apple Inc. Phone user interface
USD762693S1 (en) 2014-09-03 2016-08-02 Apple Inc. Display screen or portion thereof with graphical user interface
KR102354769B1 (ko) * 2014-10-29 2022-01-25 삼성전자주식회사 단말장치 및 그 제어 방법
USD805102S1 (en) 2015-01-27 2017-12-12 Twitter, Inc. Media sharing device with graphical user interface
USD763889S1 (en) * 2015-01-28 2016-08-16 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
EP3484134B1 (en) 2015-02-02 2022-03-23 Apple Inc. Device, method, and graphical user interface for establishing a relationship and connection between two devices
CN112152910A (zh) 2015-02-16 2020-12-29 钉钉控股(开曼)有限公司 通讯方法
KR102377001B1 (ko) * 2015-03-16 2022-03-22 삼성전자주식회사 모션 인식 서비스 제공 방법 및 그 전자 장치
CN106034068A (zh) 2015-03-20 2016-10-19 阿里巴巴集团控股有限公司 群聊中进行私聊的方法、装置、客户端、服务器及系统
US20170083168A1 (en) * 2015-04-20 2017-03-23 Idt Messaging, Llc System and method for managing multiple chat sessions
US9973615B2 (en) * 2015-05-11 2018-05-15 Samsung Electronics Co., Ltd. Electronic apparatus and method for controlling recording thereof
US10275116B2 (en) 2015-06-07 2019-04-30 Apple Inc. Browser with docked tabs
CN105094801B (zh) * 2015-06-12 2019-12-24 阿里巴巴集团控股有限公司 应用功能激活方法及装置
USD884003S1 (en) 2015-07-29 2020-05-12 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
US10003938B2 (en) 2015-08-14 2018-06-19 Apple Inc. Easy location sharing
US20170061935A1 (en) * 2015-08-31 2017-03-02 Sap Se Adaptive message display duration
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
KR102399764B1 (ko) * 2015-09-22 2022-05-19 삼성전자 주식회사 전자 장치 및 촬영 방법
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US9734686B2 (en) * 2015-11-06 2017-08-15 Blackberry Limited System and method for enhancing a proximity warning sound
WO2017087862A1 (en) * 2015-11-19 2017-05-26 Nike Innovate C.V. Apparel with pressure sensor control
US10078482B2 (en) * 2015-11-25 2018-09-18 Samsung Electronics Co., Ltd. Managing display of information on multiple devices based on context for a user task
US9913114B1 (en) 2015-12-15 2018-03-06 Snap Inc. Simplified message grouping and display
CN105610695B (zh) 2015-12-21 2021-01-12 阿里巴巴集团控股有限公司 对象分配方法及装置
US20170214651A1 (en) 2016-01-05 2017-07-27 William McMichael Systems and methods of transmitting and displaying private message data via a text input application
US20170220573A1 (en) 2016-01-05 2017-08-03 William McMichael Systems and methods of performing searches within a text input application
CN105681056B (zh) 2016-01-13 2019-03-19 阿里巴巴集团控股有限公司 对象分配方法及装置
USD781907S1 (en) * 2016-01-19 2017-03-21 Apple Inc. Display screen or portion thereof with graphical user interface
CN105812237B (zh) 2016-03-07 2020-12-04 钉钉控股(开曼)有限公司 快速添加提醒对象的方法及装置
US10530731B1 (en) * 2016-03-28 2020-01-07 Snap Inc. Systems and methods for chat with audio and video elements
CN107306286B (zh) 2016-04-21 2020-12-04 钉钉控股(开曼)有限公司 离线考勤的处理方法及装置
CN107305459A (zh) * 2016-04-25 2017-10-31 阿里巴巴集团控股有限公司 语音和多媒体消息的发送方法及装置
CN107368995A (zh) 2016-05-13 2017-11-21 阿里巴巴集团控股有限公司 任务处理方法及装置
BR112018073693A2 (pt) 2016-05-18 2019-02-26 Apple Inc dispositivos, métodos, e interfaces gráficas de usuário para mensagens
DK180169B1 (en) * 2016-05-18 2020-07-13 Apple Inc Devices, procedures, and graphical messaging user interfaces
US9959037B2 (en) 2016-05-18 2018-05-01 Apple Inc. Devices, methods, and graphical user interfaces for messaging
USD797137S1 (en) * 2016-06-03 2017-09-12 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
DK201770423A1 (en) 2016-06-11 2018-01-15 Apple Inc Activity and workout updates
US10368208B2 (en) 2016-06-12 2019-07-30 Apple Inc. Layers in messaging applications
US10545653B2 (en) 2016-06-12 2020-01-28 Apple Inc. Device, method, and graphical user interface for media playback
USD803238S1 (en) 2016-06-12 2017-11-21 Apple Inc. Display screen or portion thereof with graphical user interface
US10873786B2 (en) 2016-06-12 2020-12-22 Apple Inc. Recording and broadcasting application visual output
USD825612S1 (en) 2016-07-27 2018-08-14 Apple Inc. Display screen or portion thereof with graphical user interface
US10318125B2 (en) * 2016-08-29 2019-06-11 Sap Se Graphical user interface magnetic panel
CN107846345A (zh) 2016-09-18 2018-03-27 阿里巴巴集团控股有限公司 通讯方法及装置
DK179471B1 (en) 2016-09-23 2018-11-26 Apple Inc. IMAGE DATA FOR ENHANCED USER INTERACTIONS
CN106502527A (zh) * 2016-09-29 2017-03-15 北京小米移动软件有限公司 一种内容分享的方法、装置及终端
EP3544291B1 (en) * 2016-11-18 2021-09-08 JVCKENWOOD Corporation Recording device, recording method and program
USD846575S1 (en) * 2016-12-02 2019-04-23 Lyft, Inc. Display screen or portion thereof with graphical user interface
USD858534S1 (en) * 2016-12-02 2019-09-03 Lyft, Inc. Display screen or portion thereof with animated graphical user interface
KR101893768B1 (ko) * 2017-02-27 2018-09-04 주식회사 브이터치 음성 인식 트리거를 제공하기 위한 방법, 시스템 및 비일시성의 컴퓨터 판독 가능한 기록 매체
US10051107B1 (en) 2017-03-16 2018-08-14 Microsoft Technology Licensing, Llc Opportunistic timing of device notifications
US10742587B2 (en) 2017-04-10 2020-08-11 Facebook, Inc. Systems and methods for sharing content
AU2017411918A1 (en) * 2017-04-24 2019-12-05 Huawei Technologies Co., Ltd. Image sharing method and electronic device
US10992795B2 (en) 2017-05-16 2021-04-27 Apple Inc. Methods and interfaces for home media control
US11431836B2 (en) 2017-05-02 2022-08-30 Apple Inc. Methods and interfaces for initiating media playback
DK180048B1 (en) 2017-05-11 2020-02-04 Apple Inc. MAINTAINING THE DATA PROTECTION OF PERSONAL INFORMATION
DK201770429A1 (en) 2017-05-12 2018-12-14 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK179867B1 (en) 2017-05-16 2019-08-06 Apple Inc. RECORDING AND SENDING EMOJI
CN111343060B (zh) 2017-05-16 2022-02-11 苹果公司 用于家庭媒体控制的方法和界面
KR20230144661A (ko) 2017-05-16 2023-10-16 애플 인크. 이모지 레코딩 및 전송
US11553316B2 (en) * 2017-05-16 2023-01-10 Angel Pena Method and apparatus for storing and sending a computer location
CN110520901B (zh) * 2017-05-16 2021-01-05 苹果公司 表情符号录制和发送
US20220279063A1 (en) 2017-05-16 2022-09-01 Apple Inc. Methods and interfaces for home media control
DK180859B1 (en) 2017-06-04 2022-05-23 Apple Inc USER INTERFACE CAMERA EFFECTS
US10498775B2 (en) 2017-08-31 2019-12-03 T-Mobile Usa, Inc. Exchanging non-text content in real time text messages
US20190082122A1 (en) * 2017-09-08 2019-03-14 Samsung Electronics Co., Ltd. Method and device for providing contextual information
US11521240B2 (en) 2017-09-12 2022-12-06 GetTogether, Inc. Tracking a digital diet for targeted advertisement delivery
US10212555B1 (en) * 2017-09-13 2019-02-19 Microsoft Technology Licensing, Llc Enabling and disabling location sharing based on environmental signals
US10372298B2 (en) 2017-09-29 2019-08-06 Apple Inc. User interface for multi-user communication session
USD846567S1 (en) 2017-10-06 2019-04-23 Apple Inc. Electronic device with graphical user interface
US11206230B2 (en) * 2017-10-23 2021-12-21 Pim Communication Technologies Ltd. Managing exchange of instant messages using an assigned communication code
USD857033S1 (en) 2017-11-07 2019-08-20 Apple Inc. Electronic device with graphical user interface
CN109903758B (zh) 2017-12-08 2023-06-23 阿里巴巴集团控股有限公司 音频处理方法、装置及终端设备
WO2019117361A1 (ko) * 2017-12-14 2019-06-20 라인 가부시키가이샤 메시징 서비스 환경에서의 인터랙션 방법 및 시스템
US20190206102A1 (en) * 2017-12-29 2019-07-04 Facebook, Inc. Systems and methods for enhancing content
US10375313B1 (en) 2018-05-07 2019-08-06 Apple Inc. Creative camera
US11722764B2 (en) 2018-05-07 2023-08-08 Apple Inc. Creative camera
DK201870380A1 (en) 2018-05-07 2020-01-29 Apple Inc. DISPLAYING USER INTERFACES ASSOCIATED WITH PHYSICAL ACTIVITIES
CN110457091A (zh) * 2018-05-07 2019-11-15 苹果公司 多参与者实时通信用户界面
DK180171B1 (en) 2018-05-07 2020-07-14 Apple Inc USER INTERFACES FOR SHARING CONTEXTUALLY RELEVANT MEDIA CONTENT
DK201870364A1 (en) 2018-05-07 2019-12-03 Apple Inc. MULTI-PARTICIPANT LIVE COMMUNICATION USER INTERFACE
JP7073238B2 (ja) * 2018-05-07 2022-05-23 アップル インコーポレイテッド クリエイティブカメラ
DK180078B1 (en) 2018-05-07 2020-03-31 Apple Inc. USER INTERFACE FOR AVATAR CREATION
KR102637122B1 (ko) * 2018-05-07 2024-02-16 애플 인크. 크리에이티브 카메라
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
US11694435B2 (en) * 2018-06-18 2023-07-04 Magic Leap, Inc. Systems and methods for temporarily disabling user control interfaces during attachment of an electronic device
WO2020026939A1 (ja) * 2018-07-31 2020-02-06 株式会社ニコン 電子機器およびプログラム
KR20200017292A (ko) * 2018-08-08 2020-02-18 삼성전자주식회사 음성 인식 방법 및 그 방법을 지원하는 전자 장치
US10154364B1 (en) 2018-09-09 2018-12-11 Philip Scott Lyren Moving an emoji to move a location of binaural sound
DK201870623A1 (en) 2018-09-11 2020-04-15 Apple Inc. USER INTERFACES FOR SIMULATED DEPTH EFFECTS
USD901525S1 (en) 2018-09-11 2020-11-10 Apple Inc. Electronic device with animated graphical user interface
US10674072B1 (en) 2019-05-06 2020-06-02 Apple Inc. User interfaces for capturing and managing visual media
US11770601B2 (en) 2019-05-06 2023-09-26 Apple Inc. User interfaces for capturing and managing visual media
US11128792B2 (en) 2018-09-28 2021-09-21 Apple Inc. Capturing and displaying images with multiple focal planes
US11321857B2 (en) 2018-09-28 2022-05-03 Apple Inc. Displaying and editing images with depth information
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
CA3124259A1 (en) * 2018-12-18 2020-06-25 Qaqaq Inc. Asynchronous short video communication platform based on animated still images and audio
CN110209952B (zh) * 2018-12-18 2023-03-24 腾讯科技(深圳)有限公司 信息推荐方法、装置、设备及存储介质
US10499179B1 (en) * 2019-01-01 2019-12-03 Philip Scott Lyren Displaying emojis for binaural sound
US11107261B2 (en) 2019-01-18 2021-08-31 Apple Inc. Virtual avatar animation based on facial feature movement
CN109873753B (zh) * 2019-01-30 2021-10-26 北京达佳互联信息技术有限公司 名称修改方法及装置
CA3131489A1 (en) 2019-02-27 2020-09-03 Louisiana-Pacific Corporation Fire-resistant manufactured-wood based siding
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US10944711B2 (en) * 2019-03-28 2021-03-09 Microsoft Technology Licensing, Llc Paginated method to create decision tree conversation
DK201970530A1 (en) 2019-05-06 2021-01-28 Apple Inc Avatar integration with multiple applications
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11706521B2 (en) 2019-05-06 2023-07-18 Apple Inc. User interfaces for capturing and managing visual media
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
US10904029B2 (en) 2019-05-31 2021-01-26 Apple Inc. User interfaces for managing controllable external devices
US11010121B2 (en) 2019-05-31 2021-05-18 Apple Inc. User interfaces for audio media control
DK201970533A1 (en) 2019-05-31 2021-02-15 Apple Inc Methods and user interfaces for sharing audio
EP3948517A1 (en) 2019-05-31 2022-02-09 Apple Inc. User interfaces for audio media control
US11363071B2 (en) 2019-05-31 2022-06-14 Apple Inc. User interfaces for managing a local network
CN110333814A (zh) * 2019-05-31 2019-10-15 华为技术有限公司 一种分享内容的方法及电子设备
US11468890B2 (en) 2019-06-01 2022-10-11 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
US11481094B2 (en) 2019-06-01 2022-10-25 Apple Inc. User interfaces for location-related communications
US11477609B2 (en) 2019-06-01 2022-10-18 Apple Inc. User interfaces for location-related communications
US11144176B2 (en) * 2019-06-01 2021-10-12 Apple Inc. User interfaces for electronic voice communications
US11152100B2 (en) 2019-06-01 2021-10-19 Apple Inc. Health application user interfaces
US11106342B1 (en) * 2019-06-03 2021-08-31 Snap Inc. User interfaces to facilitate multiple modes of electronic communication
US11252274B2 (en) * 2019-09-30 2022-02-15 Snap Inc. Messaging application sticker extensions
CN112752127B (zh) * 2019-10-30 2022-07-01 腾讯科技(深圳)有限公司 视频播放位置的定位方法和装置、存储介质及电子装置
JP7467139B2 (ja) * 2020-01-30 2024-04-15 キヤノン株式会社 表示制御装置及びその制御方法
US11290834B2 (en) * 2020-03-04 2022-03-29 Apple Inc. Determining head pose based on room reverberation
US11675494B2 (en) * 2020-03-26 2023-06-13 Snap Inc. Combining first user interface content into second user interface
DK181103B1 (en) 2020-05-11 2022-12-15 Apple Inc User interfaces related to time
US11921998B2 (en) 2020-05-11 2024-03-05 Apple Inc. Editing features of an avatar
US11061543B1 (en) 2020-05-11 2021-07-13 Apple Inc. Providing relevant data items based on context
US11079913B1 (en) 2020-05-11 2021-08-03 Apple Inc. User interface for status indicators
US11039074B1 (en) 2020-06-01 2021-06-15 Apple Inc. User interfaces for managing media
JP2023529126A (ja) 2020-06-08 2023-07-07 アップル インコーポレイテッド 三次元環境におけるアバターの提示
US11743213B2 (en) 2020-06-09 2023-08-29 Apple Inc. User interfaces for messages
US11392347B2 (en) * 2020-06-17 2022-07-19 Twitter, Inc. Audio messaging interface on messaging platform
US11490204B2 (en) 2020-07-20 2022-11-01 Apple Inc. Multi-device audio adjustment coordination
US11438683B2 (en) 2020-07-21 2022-09-06 Apple Inc. User identification using headphones
US11212449B1 (en) 2020-09-25 2021-12-28 Apple Inc. User interfaces for media capture and management
US11392291B2 (en) 2020-09-25 2022-07-19 Apple Inc. Methods and interfaces for media control with dynamic feedback
AU2021349382B2 (en) * 2020-09-25 2023-06-29 Apple Inc. Methods for adjusting and/or controlling immersion associated with user interfaces
CN114327206A (zh) * 2020-09-29 2022-04-12 华为技术有限公司 一种消息显示方法及电子设备
USD989091S1 (en) * 2020-09-29 2023-06-13 Huawei Technologies Co., Ltd. Display screen or portion thereof with graphical user interface
US11543961B2 (en) * 2020-10-26 2023-01-03 Microsoft Technology Licensing, Llc Touch screen display with virtual trackpad
US11431891B2 (en) 2021-01-31 2022-08-30 Apple Inc. User interfaces for wide angle video conference
CN113010074A (zh) * 2021-04-22 2021-06-22 海信电子科技(深圳)有限公司 一种网页视频Video控制栏显示方法及显示设备
CN115529415A (zh) * 2021-04-30 2022-12-27 苹果公司 用于更改视觉媒体的用户界面
US11539876B2 (en) 2021-04-30 2022-12-27 Apple Inc. User interfaces for altering visual media
US11778339B2 (en) 2021-04-30 2023-10-03 Apple Inc. User interfaces for altering visual media
EP4323992A1 (en) 2021-05-15 2024-02-21 Apple Inc. User interfaces for group workouts
US11449188B1 (en) 2021-05-15 2022-09-20 Apple Inc. Shared-content session user interfaces
US11907605B2 (en) 2021-05-15 2024-02-20 Apple Inc. Shared-content session user interfaces
US11893214B2 (en) 2021-05-15 2024-02-06 Apple Inc. Real-time communication user interface
CN113360002B (zh) * 2021-06-01 2023-12-19 维沃移动通信有限公司 信息收集方法、装置、电子设备和存储介质
KR20220163573A (ko) * 2021-06-03 2022-12-12 라인플러스 주식회사 그룹화된 이미지 메시지를 표시하는 방법, 컴퓨터 장치, 및 컴퓨터 프로그램
US11776190B2 (en) 2021-06-04 2023-10-03 Apple Inc. Techniques for managing an avatar on a lock screen
USD973703S1 (en) * 2021-06-05 2022-12-27 Apple Inc. Display or portion thereof with graphical user interface
CN113434063B (zh) * 2021-07-01 2023-06-20 支付宝(杭州)信息技术有限公司 一种信息显示方法、装置及设备
US11770600B2 (en) 2021-09-24 2023-09-26 Apple Inc. Wide angle video conference

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090005011A1 (en) * 2007-06-28 2009-01-01 Greg Christie Portable Electronic Device with Conversation Management for Incoming Instant Messages
US20110080356A1 (en) * 2009-10-05 2011-04-07 Lg Electronics Inc. Mobile terminal and method of controlling application execution in a mobile terminal
CN103207674A (zh) * 2013-03-21 2013-07-17 苏州展科光电科技有限公司 基于体感技术的电子演示系统
CN205263700U (zh) * 2014-05-31 2016-05-25 苹果公司 电子设备

Family Cites Families (579)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3859005A (en) 1973-08-13 1975-01-07 Albert L Huebner Erosion reduction in wet turbines
US4826405A (en) 1985-10-15 1989-05-02 Aeroquip Corporation Fan blade fabrication system
US4975694A (en) 1989-03-14 1990-12-04 Motorola, Inc. Paging receiver with variable color indicators
US5146217A (en) 1989-05-25 1992-09-08 Motorola, Inc. Selective call receiver having confidential message read protection
US5418528A (en) 1993-08-30 1995-05-23 Motorola, Inc. Method and apparatus for prioritizing deletion of received messages based on message source and message order
GB2286507B (en) 1993-08-31 1998-01-14 Ericsson Ge Mobile Communicat Apparatus for storing messages in a cellular mobile terminal
US5483595A (en) 1993-09-20 1996-01-09 Seiko Communications Holding N.V. Paging device including password accessed stored cryptographic keys
US5479378A (en) 1993-12-17 1995-12-26 Seiko Telecommunication Systems Inc. Analog wristwatch paging receiver
US6191807B1 (en) * 1994-05-27 2001-02-20 Canon Kabushiki Kaisha Communication apparatus and method for performing a file transfer operation
EP0731590A3 (de) 1995-03-06 1999-03-24 Siemens Aktiengesellschaft Mobiltelefon
TW366674B (en) 1995-08-30 1999-08-11 Motorola Inc Method and apparatus for marking messages in selective call receivers
WO1997021281A1 (en) 1995-12-08 1997-06-12 Amsc Subsidiary Corporation Mobile communications terminal for satellite communications system
US5801700A (en) * 1996-01-19 1998-09-01 Silicon Graphics Incorporated System and method for an iconic drag and drop interface for electronic file transfer
KR0171852B1 (ko) 1996-02-29 1999-03-30 김광호 휴대용 정보단말기의 무선호출 메시지 처리장치 및 방법
KR100214303B1 (ko) 1996-04-10 1999-08-02 윤종용 팩시밀리의 동보송신 장치 및 방법
US5835084A (en) 1996-05-01 1998-11-10 Microsoft Corporation Method and computerized apparatus for distinguishing between read and unread messages listed in a graphical message window
US6014429A (en) 1996-08-12 2000-01-11 Lucent Technologies, Inc. Two-way wireless messaging system with transaction server
US6002402A (en) 1997-04-09 1999-12-14 Symantec Corporation System and method for producing a drag-and-drop object from a popup menu item
US6333973B1 (en) 1997-04-23 2001-12-25 Nortel Networks Limited Integrated message center
JPH1145117A (ja) 1997-07-25 1999-02-16 Mitsubishi Electric Corp メッセージ表示システム
US6137864A (en) * 1997-07-25 2000-10-24 Lucent Technologies Inc. Specifiable delete times for voice messaging
US6169911B1 (en) 1997-09-26 2001-01-02 Sun Microsystems, Inc. Graphical user interface for a portable telephone
KR100232874B1 (ko) 1997-10-18 1999-12-01 윤종용 이동 무선 단말기의 전송 실패 단축메시지 재전송 방법
KR100251783B1 (ko) 1997-10-18 2000-06-01 윤종용 이동무선단말기의단축메시지전송상태정보표시장치및방법
US7663607B2 (en) 2004-05-06 2010-02-16 Apple Inc. Multipoint touchscreen
KR100595912B1 (ko) 1998-01-26 2006-07-07 웨인 웨스터만 수동 입력 통합 방법 및 장치
US7614008B2 (en) 2004-07-30 2009-11-03 Apple Inc. Operation of a computer with touch screen interface
US20060033724A1 (en) 2004-07-30 2006-02-16 Apple Computer, Inc. Virtual input device placement on a touch screen user interface
US8479122B2 (en) 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
US7844914B2 (en) 2004-07-30 2010-11-30 Apple Inc. Activating virtual keys of a touch-screen virtual keyboard
JP3511462B2 (ja) 1998-01-29 2004-03-29 インターナショナル・ビジネス・マシーンズ・コーポレーション 操作画像表示装置およびその方法
US6484027B1 (en) 1998-06-15 2002-11-19 Sbc Technology Resources, Inc. Enhanced wireless handset, including direct handset-to-handset communication mode
JP2000083282A (ja) 1998-09-07 2000-03-21 Mitsubishi Electric Corp 移動体通信装置
US20020126135A1 (en) 1998-10-19 2002-09-12 Keith Ball Image sharing for instant messaging
US6778642B1 (en) 1999-03-23 2004-08-17 Verizon Laboratories Inc. Unified messaging system
US6393464B1 (en) 1999-05-10 2002-05-21 Unbound Communications, Inc. Method for controlling the delivery of electronic mail messages
GB2350523B (en) 1999-05-26 2003-11-26 Nokia Mobile Phones Ltd Communication device
US6457122B1 (en) 1999-06-18 2002-09-24 Phoenix Technologies Ltd. Fault tolerant process for the delivery of programs to writeable storage device utilizing pre-operating system software/firmware
JP2001034546A (ja) 1999-07-22 2001-02-09 Fujitsu Ltd メッセージ装置
US7149893B1 (en) 1999-09-07 2006-12-12 Poofaway.Com, Inc. System and method for enabling the originator of an electronic mail message to preset an expiration time, date, and/or event, and to control processing or handling by a recipient
US6809724B1 (en) 2000-01-18 2004-10-26 Seiko Epson Corporation Display apparatus and portable information processing apparatus
US6661438B1 (en) 2000-01-18 2003-12-09 Seiko Epson Corporation Display apparatus and portable information processing apparatus
GB2365676B (en) 2000-02-18 2004-06-23 Sensei Ltd Mobile telephone with improved man-machine interface
US6907571B2 (en) 2000-03-01 2005-06-14 Benjamin Slotznick Adjunct use of instant messenger software to enable communications to or between chatterbots or other software agents
JP3448003B2 (ja) 2000-03-09 2003-09-16 株式会社東芝 移動通信端末
JP4434424B2 (ja) 2000-04-18 2010-03-17 株式会社ルネサステクノロジ ホームエレクトロニクスシステム、ホームサーバ装置およびコンピュータをホームサーバ装置として機能させるためのプログラムを記録したコンピュータ読取可能な記録媒体
US20030078833A1 (en) 2000-04-21 2003-04-24 Yoshihiko Suzuki Marketing supporting method and device using electronic message
EP1212885B1 (en) 2000-06-21 2009-04-29 Seiko Epson Corporation Mobile telephone and radio communication device cooperatively processing incoming call
US20020057284A1 (en) 2000-06-29 2002-05-16 Dalby Richard Sean Methods and systems for delivering announcements to users of an information system
US6662023B1 (en) 2000-07-06 2003-12-09 Nokia Mobile Phones Ltd. Method and apparatus for controlling and securing mobile phones that are lost, stolen or misused
US7302280B2 (en) * 2000-07-17 2007-11-27 Microsoft Corporation Mobile phone operation based upon context sensing
US20070037605A1 (en) * 2000-08-29 2007-02-15 Logan James D Methods and apparatus for controlling cellular and portable phones
US7218226B2 (en) 2004-03-01 2007-05-15 Apple Inc. Acceleration-based theft detection system for portable electronic devices
US7688306B2 (en) 2000-10-02 2010-03-30 Apple Inc. Methods and apparatuses for operating a portable device based on an accelerometer
KR100500537B1 (ko) 2000-11-15 2005-07-12 엘지전자 주식회사 하나의 문자 메시지를 다수의 수신자 단말기에 전송하는방법
KR100369646B1 (ko) 2000-11-23 2003-01-30 삼성전자 주식회사 휴대용 단말기의 사용자 인터페이스방법
JP2002163217A (ja) 2000-11-24 2002-06-07 Sharp Corp 電子コミュニケーション方法、電子コミュニケーションシステム及びそれに用いられる端末装置
US6677932B1 (en) 2001-01-28 2004-01-13 Finger Works, Inc. System and method for recognizing touch typing under limited tactile feedback conditions
US6570557B1 (en) 2001-02-10 2003-05-27 Finger Works, Inc. Multi-touch system and method for emulating modifier keys via fingertip chords
US7334267B2 (en) 2001-02-28 2008-02-19 Hall Aluminum Llc Email viewing security
US6990180B2 (en) * 2001-04-05 2006-01-24 Nokia Mobile Phones Limited Short voice message (SVM) service method, apparatus and system
US7603379B2 (en) 2001-04-11 2009-10-13 Lg Electronics Inc. Unified management method of various types of messages of a personal information terminal
US6892081B1 (en) 2001-05-31 2005-05-10 Nokia Corporation Mobile terminal and method of operation using content sensitive menu keys in keypad locked mode
JP4860057B2 (ja) 2001-06-06 2012-01-25 京セラ株式会社 通信端末装置
KR100492976B1 (ko) * 2001-06-29 2005-06-07 삼성전자주식회사 단순음성메일서비스를 이용한 이동통신 단말기에서의음성메일 저장 및 전송 방법
US6720863B2 (en) 2001-08-16 2004-04-13 Wildseed Ltd. Mobile electronic communication device with lights to indicate received messages
US20030073496A1 (en) 2001-10-17 2003-04-17 D'amico Michael H. Gaming system customer service techniques
JP4123757B2 (ja) * 2001-10-30 2008-07-23 ソニー株式会社 ユーザ間の通信機能を備えた情報処理装置及びこれに用いるプログラム並びに情報処理方法
DE60123850T2 (de) 2001-11-08 2007-05-03 T&A Mobile Phones Ltd. Verfahren zum verwalten von verketteten erweiterten kurznachrichten (ems) und telekommunikationsendgerät welches das verfahren anwendet
US20030112938A1 (en) 2001-12-17 2003-06-19 Memcorp, Inc. Telephone answering machine and method employing caller identification data
US8347104B2 (en) 2001-12-26 2013-01-01 Research In Motion Limited Security interface for a mobile device
CA2471831C (en) 2001-12-26 2011-07-19 Research In Motion Limited User interface and method of viewing unified communications events on a mobile device
US7921166B2 (en) 2002-02-01 2011-04-05 Xerox Corporation Methods and systems for accessing email
KR100455979B1 (ko) 2002-02-27 2004-11-08 삼성전자주식회사 이동통신단말기에 있어서 단문메시지서비스의 메시지 수신 확인방법
US7461378B2 (en) * 2002-06-11 2008-12-02 Siemens Communications, Inc. Methods and apparatus for processing an instant message
US11275405B2 (en) 2005-03-04 2022-03-15 Apple Inc. Multi-functional hand-held device
US8150922B2 (en) 2002-07-17 2012-04-03 Research In Motion Limited Voice and text group chat display management techniques for wireless mobile terminals
US7111044B2 (en) 2002-07-17 2006-09-19 Fastmobile, Inc. Method and system for displaying group chat sessions on wireless mobile terminals
US20040041841A1 (en) 2002-08-27 2004-03-04 Lemogne Stephane Enhanced contact navigator with interactive tabs for managing network events in real time
US7844662B2 (en) 2002-10-17 2010-11-30 At&T Intellectual Property Ii, L.P. Merging instant messaging (IM) chat sessions
US9076147B2 (en) 2002-09-18 2015-07-07 Advenix, Corp. Systems and methods for online marketing and advertising on e-mail systems
KR100532273B1 (ko) 2002-10-11 2005-11-29 삼성전자주식회사 복합 단말기에서 동작 모드에 따른 배터리 가용 시간 알림방법
BR0215932A (pt) 2002-10-31 2005-08-09 Nokia Corp Aparelho de comunicação, método para indicar o recebimento de uma mensagem eletrônica, servidor, e, método e programa de computador para prover o serviço computadorizado de ordenação de ícone
US9100218B2 (en) 2002-11-18 2015-08-04 Aol Inc. Enhanced buddy list interface
US7111253B2 (en) 2002-12-16 2006-09-19 Palo Alto Research Center Incorporated Method and apparatus for displaying hierarchical information
US20040130581A1 (en) 2003-01-03 2004-07-08 Microsoft Corporation Interaction model
US7300429B2 (en) 2003-03-18 2007-11-27 Catharos Medical Systems, Inc. Methods and devices for retrieval of a medical agent from a physiological efferent fluid collection site
US7457879B2 (en) 2003-04-01 2008-11-25 Microsoft Corporation Notification platform architecture
KR100504828B1 (ko) 2003-04-11 2005-07-29 엘지전자 주식회사 휴대폰의 단문 메시지 관리 방법
US7280646B2 (en) 2003-04-18 2007-10-09 At&T Bls Intellectual Property, Inc. Dynamic Caller ID messaging
US20050266884A1 (en) * 2003-04-22 2005-12-01 Voice Genesis, Inc. Methods and systems for conducting remote communications
US7827232B2 (en) * 2003-05-05 2010-11-02 Microsoft Corporation Record button on a computer system
EP1627542B1 (en) 2003-05-28 2009-03-18 Nokia Corporation Method and radio terminal equipment arrangement of indicating incoming connection
US7250955B1 (en) 2003-06-02 2007-07-31 Microsoft Corporation System for displaying a notification window from completely transparent to intermediate level of opacity as a function of time to indicate an event has occurred
US7716593B2 (en) 2003-07-01 2010-05-11 Microsoft Corporation Conversation grouping of electronic mail records
US7707255B2 (en) 2003-07-01 2010-04-27 Microsoft Corporation Automatic grouping of electronic mail
MXPA06000404A (es) 2003-07-14 2006-08-23 Orative Corp Sistema y metodo para colaboracion movil activa.
US7571014B1 (en) 2004-04-01 2009-08-04 Sonos, Inc. Method and apparatus for controlling multimedia players in a multi-zone system
US7353413B2 (en) 2003-08-18 2008-04-01 Intel Corporation Computer system power policy adjustment in response to an affirmative indication from a user
US20050055412A1 (en) 2003-09-04 2005-03-10 International Business Machines Corporation Policy-based management of instant message windows
US8952895B2 (en) 2011-06-03 2015-02-10 Apple Inc. Motion-based device operations
US7433920B2 (en) 2003-10-10 2008-10-07 Microsoft Corporation Contact sidebar tile
JP3651850B2 (ja) 2003-10-21 2005-05-25 アンリツ株式会社 移動体通信端末試験装置
US7281201B2 (en) 2003-11-26 2007-10-09 Sap Aktiengesellschaft Common message area for a customer interaction center user interface
CA2727763C (en) 2003-12-01 2013-09-10 Research In Motion Limited Previewing a new event on a small screen device
US7305438B2 (en) 2003-12-09 2007-12-04 International Business Machines Corporation Method and system for voice on demand private message chat
US7454716B2 (en) 2003-12-22 2008-11-18 Microsoft Corporation Clustering messages
KR100664108B1 (ko) 2003-12-27 2007-01-04 엘지전자 주식회사 이동통신단말기의 메시지 전송 방법
US7631276B2 (en) 2003-12-29 2009-12-08 International Business Machines Corporation Method for indication and navigating related items
US7496385B2 (en) 2003-12-29 2009-02-24 International Business Machines Corporation Method for viewing information underlying lists and other contexts
KR100608747B1 (ko) 2003-12-30 2006-08-04 엘지전자 주식회사 이동통신단말기 및 그의 메시지 전송방법
US7904510B2 (en) 2004-02-23 2011-03-08 Microsoft Corporation Systems and methods for managing discussion threads based on ratings
US8255835B2 (en) 2004-02-24 2012-08-28 Research In Motion Limited Method and system for managing unread electronic messages
US7645108B2 (en) 2004-02-26 2010-01-12 Benko John C Stack loading and unloading cart
US8739071B2 (en) 2004-02-27 2014-05-27 Blackberry Limited System and method for message display and management
US7365736B2 (en) * 2004-03-23 2008-04-29 Fujitsu Limited Customizable gesture mappings for motion controlled handheld devices
US7912904B2 (en) 2004-03-31 2011-03-22 Google Inc. Email system with conversation-centric user interface
KR100598062B1 (ko) 2004-04-14 2006-07-10 주식회사 팬택앤큐리텔 덮개 닫힘 상태에서 데이터 송/수신 방법
US7773404B2 (en) * 2005-01-07 2010-08-10 Invisage Technologies, Inc. Quantum dot optical devices with enhanced gain and sensitivity and methods of making same
US7697960B2 (en) 2004-04-23 2010-04-13 Samsung Electronics Co., Ltd. Method for displaying status information on a mobile terminal
JP2007536634A (ja) 2004-05-04 2007-12-13 フィッシャー−ローズマウント・システムズ・インコーポレーテッド プロセス制御システムのためのサービス指向型アーキテクチャ
CN1998224A (zh) 2004-05-12 2007-07-11 富盛旺公司 高级联络识别系统
US7120455B1 (en) 2004-05-20 2006-10-10 Cellco Partnership Method and system for mobile instant messaging using multiple interfaces
US7353466B2 (en) 2004-05-28 2008-04-01 Microsoft Corporation System and method for generating message notification objects on dynamically scaled timeline
CA2571391C (en) 2004-06-21 2010-12-21 Research In Motion Limited System and method for handling electronic messages
US7197121B2 (en) 2004-06-30 2007-03-27 Glenayre Electronics, Inc. Audio chunking
RU2355022C2 (ru) * 2004-07-01 2009-05-10 Нокиа Корпорейшн Способ, устройство и компьютерный программный продукт для использования онтологии контекстов при персонализации приложения для мобильного устройства
US20060026245A1 (en) 2004-07-07 2006-02-02 Ivy Cunningham System and method for data organization and display in an instant-messaging interface
US8607334B2 (en) 2004-07-08 2013-12-10 Research In Motion Limited System and method for secure message processing
US7805683B2 (en) 2004-07-09 2010-09-28 Sap Ag Action pad
US20060019649A1 (en) 2004-07-21 2006-01-26 Feinleib David A System and method for remote telephone ringer
US7650361B1 (en) 2004-07-21 2010-01-19 Comcast Ip Holdings I, Llc Media content modification and access system for interactive access of media content across disparate network platforms
US7653883B2 (en) 2004-07-30 2010-01-26 Apple Inc. Proximity detector in handheld device
US8381135B2 (en) 2004-07-30 2013-02-19 Apple Inc. Proximity detector in handheld device
US20060025091A1 (en) 2004-08-02 2006-02-02 Matsushita Electric Industrial Co., Ltd Method for creating and using phrase history for accelerating instant messaging input on mobile devices
US7519670B2 (en) 2004-08-12 2009-04-14 International Business Machines Corporation Method for disappearing ink for text messaging
JP2006072489A (ja) 2004-08-31 2006-03-16 Toshiba Corp 情報処理装置および表示制御プログラム
US7487213B2 (en) 2004-09-07 2009-02-03 Iconix, Inc. Techniques for authenticating email
JP2006079427A (ja) 2004-09-10 2006-03-23 Toshiba Tec Corp 携帯情報機器
JP2006129429A (ja) 2004-10-01 2006-05-18 Haatec:Kk 通信システムの端末機
JP4127833B2 (ja) 2004-10-12 2008-07-30 株式会社東芝 携帯端末
US7571319B2 (en) 2004-10-14 2009-08-04 Microsoft Corporation Validating inbound messages
US20060092177A1 (en) 2004-10-30 2006-05-04 Gabor Blasko Input method and apparatus using tactile guidance and bi-directional segmented stroke
JP2006135667A (ja) * 2004-11-05 2006-05-25 Toshiba Corp データ送信機、データ送信方法、データ受信機、及びデータ受信処理方法
US7665031B2 (en) 2004-12-08 2010-02-16 Microsoft Corporation Method and system of taskbar button interfaces
US7218943B2 (en) 2004-12-13 2007-05-15 Research In Motion Limited Text messaging conversation user interface functionality
US7969959B2 (en) 2004-12-16 2011-06-28 Critical Response Systems, Inc. Method and apparatus for efficient and deterministic group alerting
EP1672884B1 (en) 2004-12-20 2017-01-04 Samsung Electronics Co., Ltd. Apparatus and method for providing user assistance in a wireless terminal employing an avatar
EP1832125B1 (en) * 2004-12-28 2013-02-13 Samsung Electronics Co., Ltd. Method and apparatus for managing multimedia messages
US7636578B1 (en) 2004-12-30 2009-12-22 Sprint Communications Company L.P. Method and system to provide text messages via a host device connected to a media-delivery network
US7536565B2 (en) 2005-01-07 2009-05-19 Apple Inc. Techniques for improved playlist processing on media devices
KR101155335B1 (ko) 2005-01-07 2012-06-11 엘지전자 주식회사 이동통신 단말기의 멀티미디어 메시지 동작방법
US8375327B2 (en) 2005-01-16 2013-02-12 Zlango Ltd. Iconic communication
US8856223B2 (en) * 2005-01-18 2014-10-07 International Business Machines Corporation Limiting access to instant messaging content on a display screen
US8107599B2 (en) * 2005-02-15 2012-01-31 Fastvdo, Llc Methods and apparatus for the composition and communication of digital composition coded multisensory messages (DCC MSMS)
US7783065B2 (en) 2005-03-18 2010-08-24 Nyko Technologies, Inc. Wireless headphone kit for media players
CN100502415C (zh) 2005-04-22 2009-06-17 英华达(上海)电子有限公司 手机中语音自动处理外来通信事件的方法
EP1724955A3 (en) 2005-05-17 2007-01-03 Samsung Electronics Co.,Ltd. Method for taking a telephone call while receiving a broadcast service, and digital multimedia broadcasting terminal using this method
US7685530B2 (en) 2005-06-10 2010-03-23 T-Mobile Usa, Inc. Preferred contact group centric interface
US7430409B2 (en) 2005-06-17 2008-09-30 Research In Motion Limited Method and apparatus for dynamic session placeholder for message collection user interface
US20070004461A1 (en) 2005-06-30 2007-01-04 Bathina Sridhar N Terminal with messaging application
JP5030776B2 (ja) 2005-07-01 2012-09-19 株式会社Access 端末装置、端末装置用プログラム、及び放送番組シーン通知システム
US7697926B2 (en) 2005-07-29 2010-04-13 Research In Motion Limited Device and method for generating user notifications associated with tasks that are pending completion
JP4400534B2 (ja) 2005-09-06 2010-01-20 富士通株式会社 予約メール送信方法および情報端末装置
US9629384B2 (en) 2005-09-14 2017-04-25 S & P Ingredient Development, Llc Low sodium salt composition
CA2623260C (en) 2005-09-26 2012-05-01 Research In Motion Limited Rendering subject identification on protected messages lacking such identification
US20070073823A1 (en) * 2005-09-29 2007-03-29 International Business Machines Corporation Method and apparatus to secure and retrieve instant messages
US7728316B2 (en) * 2005-09-30 2010-06-01 Apple Inc. Integrated proximity sensor and light sensor
US7633076B2 (en) 2005-09-30 2009-12-15 Apple Inc. Automated response to and sensing of user activity in portable devices
US20070117549A1 (en) * 2005-10-06 2007-05-24 Arnos Reed W Wireless handset and methods for use therewith
US8689147B2 (en) 2005-10-07 2014-04-01 Blackberry Limited System and method for using navigational and other commands on a mobile communication device
US7894580B2 (en) 2005-10-26 2011-02-22 Research In Motion Limited Methods and apparatus for reliable voicemail message deletion alerts at mobile communication devices
KR100664251B1 (ko) 2005-11-02 2007-01-04 엘지전자 주식회사 단축키를 이용한 단문 메시지 작성 방법 및 이를 위한 이동단말
JP2007140696A (ja) 2005-11-15 2007-06-07 Nec Corp コミュニケーションシステム、機器およびプログラム
EP1801689A1 (en) 2005-12-23 2007-06-27 Sap Ag Methods, systems and software applications including tab panel elements
US7657849B2 (en) 2005-12-23 2010-02-02 Apple Inc. Unlocking a device by performing gestures on an unlock image
EP1971113B1 (en) 2005-12-27 2014-05-14 Kyocera Corporation Communication device and communication control method
US7552399B2 (en) * 2005-12-27 2009-06-23 International Business Machines Corporation Extensible icons with multiple drop zones
US20070157105A1 (en) 2006-01-04 2007-07-05 Stephen Owens Network user database for a sidebar
US7956846B2 (en) 2006-01-05 2011-06-07 Apple Inc. Portable electronic device with content-dependent touch sensitivity
JP2009524357A (ja) 2006-01-20 2009-06-25 カンバーセイショナル コンピューティング コーポレイション 着用型ディスプレーインターフェースクライエント装置
KR100746943B1 (ko) 2006-02-06 2007-08-07 주식회사 케이티프리텔 단문 메시지 서비스를 이용한 문자 채팅 기능을 지원하는이동통신 단말기 및 문자 채팅 서비스 방법
US8175656B2 (en) 2006-02-24 2012-05-08 Qualcomm Incorporated System and method of displaying incoming communication alerts at a wireless device
US7720916B2 (en) 2006-02-28 2010-05-18 Microsoft Corporation Ordering personal information using social metadata
US10521022B2 (en) * 2006-03-17 2019-12-31 Conversant Wireless Licensing S.a.r.l. Mobile communication terminal and method therefor
US20070224979A1 (en) 2006-03-21 2007-09-27 Iman, Inc. Opt-in data communication to wireless devices
US7830569B2 (en) 2006-03-31 2010-11-09 Eastman Kodak Company Multilevel halftone screen and sets thereof
CN100462909C (zh) * 2006-03-31 2009-02-18 腾讯科技(深圳)有限公司 一种控制窗口界面显示的方法及装置
US9395905B2 (en) 2006-04-05 2016-07-19 Synaptics Incorporated Graphical scroll wheel
KR100727398B1 (ko) 2006-04-18 2007-06-12 삼성전자주식회사 이동통신 단말기에서 핸드오버 중 단문 메시지의 전송을제어하기 위한 방법
CA2545339C (en) 2006-05-01 2014-07-08 Lms Medical Systems Ltd. Method and apparatus for displaying labour related information associated to an obstetrics patient
US8279180B2 (en) 2006-05-02 2012-10-02 Apple Inc. Multipoint touch surface controller
US20070300140A1 (en) 2006-05-15 2007-12-27 Nokia Corporation Electronic device having a plurality of modes of operation
CN101484870B (zh) 2006-05-16 2012-10-03 捷讯研究有限公司 主屏幕接口集成应用和系统状态的方法及系统
US8571580B2 (en) 2006-06-01 2013-10-29 Loopt Llc. Displaying the location of individuals on an interactive map display on a mobile communication device
US8989778B2 (en) * 2006-06-01 2015-03-24 Green Dot Corporation Secure and private location sharing for location-aware mobile communication devices
KR101277256B1 (ko) 2006-06-16 2013-07-05 삼성전자주식회사 사용자 인터페이스를 위한 장치 및 방법
US7702282B2 (en) 2006-07-13 2010-04-20 Sony Ericsoon Mobile Communications Ab Conveying commands to a mobile terminal through body actions
US8180382B1 (en) * 2006-07-14 2012-05-15 At&T Mobility Ii Llc Direct and immediate transmittal of voice messages and handset storage thereof
US8572182B2 (en) 2006-07-21 2013-10-29 Blackberry Limited Handling notifications in instant messaging systems
US7789225B2 (en) * 2006-07-27 2010-09-07 David Whiteis Jewelry box
US7623877B2 (en) 2006-07-28 2009-11-24 Research In Motion Limited Limited lifespan for outgoing data at a mobile device
KR100778367B1 (ko) 2006-08-02 2007-11-22 삼성전자주식회사 휴대 단말기 및 그의 이벤트 처리 방법
US7899474B2 (en) 2006-08-18 2011-03-01 Research In Motion Limited Associating a label with a queued message at a mobile device
KR100754796B1 (ko) 2006-08-22 2007-09-03 삼성전자주식회사 휴대용 단말기의 인스턴트 메시지 표시 장치 및 방법
US8842074B2 (en) 2006-09-06 2014-09-23 Apple Inc. Portable electronic device performing similar operations for different gestures
US9304675B2 (en) 2006-09-06 2016-04-05 Apple Inc. Portable electronic device for instant messaging
US7996792B2 (en) 2006-09-06 2011-08-09 Apple Inc. Voicemail manager for portable multifunction device
US8564544B2 (en) 2006-09-06 2013-10-22 Apple Inc. Touch screen device, method, and graphical user interface for customizing display of content category icons
CN101356493A (zh) 2006-09-06 2009-01-28 苹果公司 用于照片管理的便携式电子装置
US8106856B2 (en) 2006-09-06 2012-01-31 Apple Inc. Portable electronic device for photo management
US8014760B2 (en) 2006-09-06 2011-09-06 Apple Inc. Missed telephone call management for a portable multifunction device
US8233885B2 (en) 2006-09-08 2012-07-31 Hewlett-Packard Development Company, L.P. Apparatus and methods for providing enhanced mobile messaging services
KR100774927B1 (ko) * 2006-09-27 2007-11-09 엘지전자 주식회사 이동통신 단말기, 메뉴 및 아이템 선택방법
US7768415B2 (en) 2006-09-28 2010-08-03 Nike, Inc. Sensor device with persistent low power beacon
KR20080035108A (ko) 2006-10-18 2008-04-23 삼성전자주식회사 이동 통신 단말기에서의 메시지 작성 방법
US8090087B2 (en) 2006-10-26 2012-01-03 Apple Inc. Method, system, and graphical user interface for making conference calls
US7908219B2 (en) * 2006-11-03 2011-03-15 Microsoft Corporation Inbox management
JP4332173B2 (ja) 2006-11-13 2009-09-16 京セラ株式会社 情報通信端末、メール既読化方法、及びメール既読化プログラム
KR20080043134A (ko) 2006-11-13 2008-05-16 삼성전자주식회사 통합 ip 메시징 서비스 클라이언트와 단문 메시징 서비스클라이언트 간에 메시지 통신을 위한 세션 설정 방법 및시스템
KR20080043472A (ko) 2006-11-14 2008-05-19 삼성전자주식회사 휴대용 단말기의 메시지 관리 방법 및 장치
US7650384B2 (en) 2006-11-17 2010-01-19 Microsoft Corporation Maintaining real-time conversations over unreliable connections
US8006002B2 (en) 2006-12-12 2011-08-23 Apple Inc. Methods and systems for automatic configuration of peripherals
US20080146289A1 (en) * 2006-12-14 2008-06-19 Motorola, Inc. Automatic audio transducer adjustments based upon orientation of a mobile communication device
US8706818B2 (en) 2006-12-19 2014-04-22 Microsoft Corporation Remote control-based instant messaging
US20080163121A1 (en) 2006-12-29 2008-07-03 Research In Motion Limited Method and arrangement for designating a menu item on a handheld electronic device
US20080030496A1 (en) 2007-01-03 2008-02-07 Social Concepts, Inc. On-line interaction system
US8413059B2 (en) 2007-01-03 2013-04-02 Social Concepts, Inc. Image based electronic mail system
US8462109B2 (en) * 2007-01-05 2013-06-11 Invensense, Inc. Controlling and accessing content using motion processing on mobile devices
US7957762B2 (en) 2007-01-07 2011-06-07 Apple Inc. Using ambient light sensor to augment proximity sensor output
US8091045B2 (en) 2007-01-07 2012-01-03 Apple Inc. System and method for managing lists
CN101578501B (zh) 2007-01-10 2013-11-13 通腾科技股份有限公司 导航装置及方法
AU2007343396A1 (en) 2007-01-10 2008-07-17 Tomtom International B.V. A navigation device and method for displaying a rich content document
US7925306B2 (en) 2007-01-12 2011-04-12 Research In Motion Limited System and method for providing a preview of message content on a mobile device
US7844658B2 (en) 2007-01-22 2010-11-30 Comcast Cable Holdings, Llc System and method for providing an application to a device
WO2008097869A1 (en) 2007-02-02 2008-08-14 Iconix, Inc. Authenticating and confidence marking e-mail messages
KR101364885B1 (ko) 2007-02-21 2014-02-19 엘지전자 주식회사 아이콘을 이용한 메시지 수신 표시 방법 및 단말기
US20080268901A1 (en) 2007-03-05 2008-10-30 Ivan Miramontes Slider twister phone
US20080261569A1 (en) 2007-04-23 2008-10-23 Helio, Llc Integrated messaging, contacts, and mail interface, systems and methods
US8621024B2 (en) 2007-04-24 2013-12-31 Blackberry Limited System and method for prioritizing and displaying messages
EP1998543A1 (en) 2007-05-29 2008-12-03 Research In Motion Limited System and Method for Integrating Image Upload Objects with a Message List
US8218734B2 (en) 2007-06-12 2012-07-10 Microsoft Corporation Messaging with a locked communication device
US9933937B2 (en) 2007-06-20 2018-04-03 Apple Inc. Portable multifunction device, method, and graphical user interface for playing online videos
US8068925B2 (en) * 2007-06-28 2011-11-29 Apple Inc. Dynamic routing of audio among multiple audio devices
US20090003552A1 (en) * 2007-06-29 2009-01-01 Lucent Technologies Inc. Personal message expiration
AU2008201643B1 (en) 2007-07-24 2008-08-28 Rambrandt Messaging Technologies, LP Messaging service in a wireless communications network
US7996473B2 (en) * 2007-07-30 2011-08-09 International Business Machines Corporation Profile-based conversion and delivery of electronic messages
US8990400B2 (en) * 2007-08-17 2015-03-24 The Invention Science Fund I, Llc Facilitating communications among message recipients
US9261979B2 (en) * 2007-08-20 2016-02-16 Qualcomm Incorporated Gesture-based mobile interaction
JP2009053758A (ja) 2007-08-23 2009-03-12 Toshiba Corp 通信端末装置
US10580459B2 (en) * 2007-08-23 2020-03-03 Sony Interactive Entertainment America Llc Dynamic media interaction using time-based metadata
US8265665B2 (en) 2007-09-21 2012-09-11 Research In Motion Limited Color differentiating a portion of a text message shown in a listing on a handheld communication device
US8125458B2 (en) 2007-09-28 2012-02-28 Microsoft Corporation Detecting finger orientation on a touch-sensitive device
US8942764B2 (en) * 2007-10-01 2015-01-27 Apple Inc. Personal media device controlled via user initiated movements utilizing movement based interfaces
US20090098914A1 (en) 2007-10-15 2009-04-16 Research In Motion Limited Method and system for enabling or disabling features based on a battery level threshold
KR101476176B1 (ko) 2007-10-19 2014-12-24 엘지전자 주식회사 단말기, 그 제어 방법 및 이를 위한 기록 매체
US9313160B1 (en) 2007-10-30 2016-04-12 Google, Inc. Systems and methods for a card-based user interface for reading thread-based communications on mobile devices
US9241063B2 (en) 2007-11-01 2016-01-19 Google Inc. Methods for responding to an email message by call from a mobile device
US20090119678A1 (en) 2007-11-02 2009-05-07 Jimmy Shih Systems and methods for supporting downloadable applications on a portable client device
KR20100133945A (ko) 2007-11-05 2010-12-22 비스토 코포레이션 모바일 클라이언트에서 서비스 관련 메시지 우선순위화를 제공하기 위한 서비스 관리 시스템
US7996045B1 (en) 2007-11-09 2011-08-09 Google Inc. Providing interactive alert information
WO2009071112A1 (en) * 2007-12-03 2009-06-11 Nokia Corporation Media embedded in mobile messaging
JP2008099330A (ja) 2007-12-18 2008-04-24 Sony Corp 情報処理装置、携帯電話機
US8635288B2 (en) 2007-12-18 2014-01-21 Alcatel Lucent Methods and systems for expiration handling in electronic message systems
US8112281B2 (en) * 2007-12-19 2012-02-07 Enbiomedic Accelerometer-based control of wearable audio recorders
JP5034931B2 (ja) 2007-12-26 2012-09-26 ソニー株式会社 表示装置、プログラム、及び記録媒体
US8706092B2 (en) * 2008-01-03 2014-04-22 Apple Inc. Outgoing voice mail recording and playback
US8407603B2 (en) 2008-01-06 2013-03-26 Apple Inc. Portable electronic device for instant messaging multiple recipients
US20090176517A1 (en) 2008-01-06 2009-07-09 Apple Inc. Multiple Recipient Messaging Service for Mobile Device
US7996046B2 (en) 2008-01-10 2011-08-09 Microsoft Corporation Smart alert charms for wireless devices
US20090187842A1 (en) * 2008-01-22 2009-07-23 3Dlabs Inc., Ltd. Drag and Drop User Interface for Portable Electronic Devices with Touch Sensitive Screens
KR101629873B1 (ko) 2008-01-30 2016-06-21 구글 인코포레이티드 모바일 디바이스 이벤트의 통지
US8677285B2 (en) 2008-02-01 2014-03-18 Wimm Labs, Inc. User interface of a small touch sensitive display for an electronic data and communication device
US9054912B2 (en) * 2008-02-08 2015-06-09 Voxer Ip Llc Communication application for conducting conversations including multiple media types in either a real-time mode or a time-shifted mode
US8676224B2 (en) * 2008-02-19 2014-03-18 Apple Inc. Speakerphone control for mobile device
US20090248751A1 (en) * 2008-04-01 2009-10-01 Myman Darin M Destroyable Instant Message (IM)
US8312380B2 (en) 2008-04-04 2012-11-13 Yahoo! Inc. Local map chat
EP2109055A1 (en) 2008-04-11 2009-10-14 Universiteit Maastricht Portable psychological monitoring device
US20090265643A1 (en) * 2008-04-18 2009-10-22 Alcatel Lucent Instant messaging reception indication
CN101276255A (zh) * 2008-05-05 2008-10-01 中兴通讯股份有限公司 一种移动终端菜单的显示装置及显示方法
US20130275899A1 (en) 2010-01-18 2013-10-17 Apple Inc. Application Gateway for Providing Different User Interfaces for Limited Distraction and Non-Limited Distraction Contexts
US10496753B2 (en) 2010-01-18 2019-12-03 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US20090313582A1 (en) 2008-06-11 2009-12-17 Raul Rupsingh System, Method and Computer Program for User-Friendly Social Interaction
US20130310089A1 (en) * 2008-08-05 2013-11-21 Vasileios John Gianoukos Voice texting over sms
US10375223B2 (en) 2008-08-28 2019-08-06 Qualcomm Incorporated Notifying a user of events in a computing device
US8121586B2 (en) * 2008-09-16 2012-02-21 Yellowpages.Com Llc Systems and methods for voice based search
US8620869B2 (en) 2008-09-25 2013-12-31 Microsoft Corporation Techniques to manage retention policy tags
EP2173072B1 (en) 2008-10-01 2013-09-11 Accenture Global Services Limited Personalized storage accounts in an electronic file delivery system
EP3258468B1 (en) * 2008-11-10 2019-08-21 Google LLC Multisensory speech detection
US20100124906A1 (en) * 2008-11-14 2010-05-20 Nokia Corporation Method and Apparatus for Transmitting and Receiving Data
US8584031B2 (en) 2008-11-19 2013-11-12 Apple Inc. Portable touch screen device, method, and graphical user interface for using emoji characters
KR101050642B1 (ko) 2008-12-04 2011-07-19 삼성전자주식회사 와치 폰 및 상기 와치 폰에서 통화수행 방법
US20100162138A1 (en) 2008-12-23 2010-06-24 At&T Mobility Ii Llc Conversation bubbles including visual cues for threaded messaging applications
US20100162169A1 (en) 2008-12-23 2010-06-24 Nokia Corporation Method, Apparatus and Computer Program Product for Providing a Dynamic Slider Interface
US20110306393A1 (en) 2010-06-15 2011-12-15 Tomasz Goldman Headset base with display and communications base
US8572493B2 (en) 2009-01-29 2013-10-29 Rick Qureshi Mobile device messaging application
US9280971B2 (en) 2009-02-27 2016-03-08 Blackberry Limited Mobile wireless communications device with speech to text conversion and related methods
US8315606B2 (en) 2009-02-27 2012-11-20 Research In Motion Limited System and method for intelligent call identification on a mobile communication device
US8370736B2 (en) 2009-03-16 2013-02-05 Apple Inc. Methods and graphical user interfaces for editing on a multifunction device with a touch screen display
US20100281409A1 (en) 2009-04-30 2010-11-04 Nokia Corporation Apparatus and method for handling notifications within a communications device
US8340646B2 (en) * 2009-05-01 2012-12-25 T-Mobile Usa, Inc. Direct voicemailing
US8464182B2 (en) 2009-06-07 2013-06-11 Apple Inc. Device, method, and graphical user interface for providing maps, directions, and location-based information
KR20100132705A (ko) 2009-06-10 2010-12-20 삼성전자주식회사 컨텐츠 리스트 제공방법 및 이를 적용한 멀티미디어 기기
US8281244B2 (en) 2009-06-11 2012-10-02 Apple Inc. User interface for media playback
US8930438B2 (en) 2009-06-17 2015-01-06 Apple Inc. Push-based location update
KR101590766B1 (ko) 2009-06-26 2016-02-02 삼성전자주식회사 메시지를 그룹화하고 디스플레이하는 장치 및 방법
US8548523B2 (en) 2009-07-01 2013-10-01 At&T Intellectual Property I, L.P. Methods, apparatus, and computer program products for changing ring method based on type of connected device
WO2011011224A1 (en) * 2009-07-24 2011-01-27 Dynavox Systems, Llc Hand-held speech generation device
US9519417B2 (en) * 2009-08-31 2016-12-13 Twin Harbor Labs, LLC System and method for orientation-based object monitoring and device for the same
TWI554076B (zh) 2009-09-04 2016-10-11 普露諾洛股份有限公司 遠距離的電話管理器
JP5419153B2 (ja) 2009-10-22 2014-02-19 Necカシオモバイルコミュニケーションズ株式会社 タッチ検出装置、電子機器、および、プログラム
JP2011107823A (ja) * 2009-11-13 2011-06-02 Canon Inc 表示制御装置及び表示制御方法
CN102696248B (zh) 2009-11-17 2016-03-02 尖端解决方案有限公司 通讯管理功能
US8922485B1 (en) * 2009-12-18 2014-12-30 Google Inc. Behavioral recognition on mobile devices
KR101626621B1 (ko) 2009-12-30 2016-06-01 엘지전자 주식회사 원형 디스플레이부를 구비한 이동 통신 단말기의 데이터 제어 방법 및 이를 적용한 이동 통신 단말기
US8972892B2 (en) 2010-01-05 2015-03-03 Qualcomm Incorporated Notification in immersive applications
US8456297B2 (en) 2010-01-06 2013-06-04 Apple Inc. Device, method, and graphical user interface for tracking movement on a map
US8698845B2 (en) 2010-01-06 2014-04-15 Apple Inc. Device, method, and graphical user interface with interactive popup views
US8301121B2 (en) 2010-01-22 2012-10-30 Sony Ericsson Mobile Communications Ab Regulating alerts generated by communication terminals responsive to sensed movement
DE102010008622A1 (de) 2010-02-19 2011-08-25 Airbus Operations GmbH, 21129 Gehäuseloses Staufach
US8589815B2 (en) 2010-03-10 2013-11-19 Microsoft Corporation Control of timing for animations in dynamic icons
EP2369820B1 (en) 2010-03-22 2016-04-06 BlackBerry Limited Management and display of grouped messages on a communication device
US9275376B2 (en) 2010-03-25 2016-03-01 Nokia Technologies Oy Method and apparatus for providing soft reminders
CN102215374B (zh) * 2010-04-07 2015-09-02 苹果公司 在多照相机移动设备的视频会议期间切换照相机
US9112989B2 (en) * 2010-04-08 2015-08-18 Qualcomm Incorporated System and method of smart audio logging for mobile devices
US20110254684A1 (en) 2010-04-20 2011-10-20 Vito Antoci Bag Attachment for Alert Notification and Device Retrieval
US9050534B2 (en) 2010-04-23 2015-06-09 Ganz Achievements for a virtual world game
US20110276901A1 (en) 2010-05-04 2011-11-10 Qwest Communications International Inc. Family chat
US8587476B2 (en) 2010-05-11 2013-11-19 Blackberry Limited System and method for providing location information on mobile devices
CN101873386A (zh) 2010-06-13 2010-10-27 华为终端有限公司 一种移动终端及其来电提示方法
KR101672212B1 (ko) * 2010-06-15 2016-11-04 엘지전자 주식회사 휴대 단말기 및 그 동작 방법
US9417665B2 (en) 2010-06-28 2016-08-16 Apple Inc. Providing an alternative human interface
US8549617B2 (en) 2010-06-30 2013-10-01 Juniper Networks, Inc. Multi-service VPN network client for mobile device having integrated acceleration
CN101877745B (zh) 2010-06-30 2014-04-09 中兴通讯股份有限公司 移动终端节电的系统及方法
US8284748B2 (en) 2010-07-07 2012-10-09 Apple Inc. Ad hoc formation and tracking of location-sharing groups
US8285258B2 (en) 2010-07-07 2012-10-09 Research In Motion Limited Pushed content notification and display
US9304591B2 (en) * 2010-08-10 2016-04-05 Lenovo (Singapore) Pte. Ltd. Gesture control
EP2609750A4 (en) 2010-08-26 2014-10-08 Tarik Taleb SYSTEM AND METHOD FOR CREATING A CUSTOMIZED MULTIMEDIA CONTENT CHANNEL FOR A SOCIAL NETWORK
KR20120019531A (ko) 2010-08-26 2012-03-07 삼성전자주식회사 휴대 단말기의 gui제공 방법 및 장치
US8620850B2 (en) 2010-09-07 2013-12-31 Blackberry Limited Dynamically manipulating an emoticon or avatar
US9317598B2 (en) * 2010-09-08 2016-04-19 Nokia Technologies Oy Method and apparatus for generating a compilation of media items
CN102447778B (zh) 2010-10-13 2013-10-09 腾讯科技(深圳)有限公司 一种展示消息的方法及消息展示装置
US20120102437A1 (en) 2010-10-22 2012-04-26 Microsoft Corporation Notification Group Touch Gesture Dismissal Techniques
US20120108215A1 (en) 2010-10-29 2012-05-03 Nader Kameli Remote notification device
US8253684B1 (en) * 2010-11-02 2012-08-28 Google Inc. Position and orientation determination for a mobile computing device
US9262002B2 (en) 2010-11-03 2016-02-16 Qualcomm Incorporated Force sensing touch screen
US10303357B2 (en) 2010-11-19 2019-05-28 TIVO SOLUTIONS lNC. Flick to send or display content
US8660679B2 (en) * 2010-12-02 2014-02-25 Empire Technology Development Llc Augmented reality system
US8874665B2 (en) 2010-12-13 2014-10-28 At&T Mobility Ii Llc Systems, apparatus and methods for facilitating display and management of information for communication devices
US8798648B2 (en) 2010-12-14 2014-08-05 Qualcomm Incorporated Methods and apparatus for managing messages
US9131060B2 (en) * 2010-12-16 2015-09-08 Google Technology Holdings LLC System and method for adapting an attribute magnification for a mobile communication device
US20120162350A1 (en) 2010-12-17 2012-06-28 Voxer Ip Llc Audiocons
US20120158511A1 (en) 2010-12-21 2012-06-21 Microsoft Corporation Provision of contextual advertising
WO2012087314A1 (en) * 2010-12-22 2012-06-28 Empire Technology Development Llc Audio control system
US8369893B2 (en) 2010-12-31 2013-02-05 Motorola Mobility Llc Method and system for adapting mobile device to accommodate external display
US9471145B2 (en) 2011-01-06 2016-10-18 Blackberry Limited Electronic device and method of displaying information in response to a gesture
US8775535B2 (en) * 2011-01-18 2014-07-08 Voxilate, Inc. System and method for the transmission and management of short voice messages
US9002420B2 (en) 2011-01-19 2015-04-07 Ram Pattikonda Watch having an interface to a mobile communications device
CN201928419U (zh) 2011-01-21 2011-08-10 青岛海信移动通信技术股份有限公司 一种耳机及配置有所述耳机的移动通信终端
US10133388B2 (en) 2011-02-10 2018-11-20 Kyocera Corporation Input device
US9588669B2 (en) 2011-02-17 2017-03-07 T-Mobile Usa, Inc. Sticky messages
US10146329B2 (en) 2011-02-25 2018-12-04 Nokia Technologies Oy Method and apparatus for providing different user interface effects for different motion gestures and motion properties
CN102111505B (zh) 2011-03-04 2013-06-05 中山大学 一种移动终端短信息提示显示方法
US9104288B2 (en) * 2011-03-08 2015-08-11 Nokia Technologies Oy Method and apparatus for providing quick access to media functions from a locked screen
US20120239949A1 (en) 2011-03-14 2012-09-20 Research In Motion Limited Electronic device and method for application and profile sensitive battery power management
GB2503846A (en) 2011-03-18 2014-01-08 Antony-Euclid C Villa-Real Global multi-purpose voice-controlled trans-lingual electronic talking and singing watch
JP5729759B2 (ja) 2011-03-22 2015-06-03 埼玉日本電気株式会社 携帯電子機器、その制御方法及びプログラム
US9331972B2 (en) * 2011-03-31 2016-05-03 Loment, Inc. Automatic expiration of messages communicated to an end user communication device
US8880625B2 (en) * 2011-03-31 2014-11-04 Loment, Inc. Automatic expiration of messages communicated among end user communication devices
US8971924B2 (en) 2011-05-23 2015-03-03 Apple Inc. Identifying and locating users on a mobile network
KR101891803B1 (ko) 2011-05-23 2018-08-27 삼성전자주식회사 터치스크린을 구비한 휴대 단말기의 화면 편집 방법 및 장치
US8508494B2 (en) 2011-06-01 2013-08-13 Motorola Mobility Llc Using pressure differences with a touch-sensitive display screen
EP3767463B1 (en) 2011-06-05 2024-02-21 Apple Inc. Systems and methods for displaying notifications received from multiple applications
US20120313847A1 (en) * 2011-06-09 2012-12-13 Nokia Corporation Method and apparatus for contextual gesture recognition
JP5762850B2 (ja) 2011-06-28 2015-08-12 京セラ株式会社 携帯端末装置
JP5829982B2 (ja) 2011-06-28 2015-12-09 京セラ株式会社 電子機器、報知制御方法および制御プログラム
CA2746065C (en) 2011-07-18 2013-02-19 Research In Motion Limited Electronic device and method for selectively applying message actions
JP5790238B2 (ja) 2011-07-22 2015-10-07 ソニー株式会社 情報処理装置、情報処理方法及びプログラム
US20150172393A1 (en) * 2011-07-29 2015-06-18 Google Inc. Temporal Location Sharing
CN103890695B (zh) * 2011-08-11 2017-10-13 视力移动技术有限公司 基于手势的接口系统和方法
US20130053007A1 (en) * 2011-08-24 2013-02-28 Microsoft Corporation Gesture-based input mode selection for mobile devices
JP2013048389A (ja) 2011-08-29 2013-03-07 Fujitsu Mobile Communications Ltd 電子装置、そのカメラ制御プログラムおよびカメラ制御方法
KR20130028598A (ko) 2011-09-09 2013-03-19 삼성전자주식회사 장치 및 장치의 이미지 파일의 sns 업로드방법
US8976128B2 (en) 2011-09-12 2015-03-10 Google Technology Holdings LLC Using pressure differences with a touch-sensitive display screen
US20130078958A1 (en) 2011-09-23 2013-03-28 Research In Motion Limited System and method for managing transient notifications using sensors
WO2013048880A1 (en) 2011-09-30 2013-04-04 Apple Inc. Automatically adapting user interfaces for hands-free interaction
KR101789626B1 (ko) * 2011-10-10 2017-10-25 엘지전자 주식회사 휴대 단말기 및 그 제어 방법
BR112014008378B1 (pt) * 2011-10-10 2022-06-14 Microsoft Technology Licensing, Llc Método e sistema para comunicação
US8848932B2 (en) * 2011-10-13 2014-09-30 Blackberry Limited Proximity sensing for user detection and automatic volume regulation with sensor interruption override
EP2582120A1 (en) * 2011-10-14 2013-04-17 Research In Motion Limited User interface methods and apparatus for use in communicating text and photo messages
US8819154B2 (en) * 2011-10-14 2014-08-26 Blackberry Limited User interface methods and apparatus for use in communicating text and photo messages
US20130117391A1 (en) 2011-11-07 2013-05-09 LaVoult.com, LLC Messaging System
US20130120106A1 (en) 2011-11-16 2013-05-16 Motorola Mobility, Inc. Display device, corresponding systems, and methods therefor
US8655385B2 (en) 2011-11-18 2014-02-18 Blackberry Limited Social networking methods and apparatus for use in facilitating participation in user-relevant social groups
WO2013093558A1 (en) 2011-12-21 2013-06-27 Nokia Corporation Apparatus and method for collating application events with contacts of an electronic device.
CN102404458A (zh) 2011-12-27 2012-04-04 上海华勤通讯技术有限公司 移动终端和联系人信息排序方法
EP2610701B1 (en) 2011-12-29 2015-04-01 Research in Motion Corporation Power supply management for portable electronic devices
EP2817863A1 (en) 2012-01-08 2014-12-31 Powermat Technologies Ltd. System and method for providing and controlling inductive power charging
US10289660B2 (en) 2012-02-15 2019-05-14 Apple Inc. Device, method, and graphical user interface for sharing a content object in a document
EP2631743B1 (en) 2012-02-24 2018-05-02 BlackBerry Limited Handheld device with notification message viewing
KR101253451B1 (ko) * 2012-02-29 2013-04-11 주식회사 팬택 음원의 위치를 감지할 수 있는 모바일 디바이스 및 그 제어 방법
KR101921203B1 (ko) * 2012-03-02 2018-11-22 삼성전자 주식회사 녹음 기능이 연동된 메모 기능 운용 방법 및 장치
US9189062B2 (en) 2012-03-07 2015-11-17 Google Technology Holdings LLC Portable electronic device and method for controlling operation thereof based on user motion
US9247525B2 (en) 2012-03-16 2016-01-26 Qualcomm Incorporated Systems and methods for providing notifications
CN103327159B (zh) 2012-03-19 2016-07-06 联想(北京)有限公司 一种低电提示方法及电子设备
KR20130107974A (ko) * 2012-03-23 2013-10-02 삼성전자주식회사 플로팅 사용자 인터페이스 제공 장치 및 방법
US9934713B2 (en) 2012-03-28 2018-04-03 Qualcomm Incorporated Multifunction wristband
US20130275924A1 (en) 2012-04-16 2013-10-17 Nuance Communications, Inc. Low-attention gestural user interface
US9507327B2 (en) 2012-04-20 2016-11-29 Liaison Home Automation, Llc Systems and methods for controlling home and commercial environments including one touch and intuitive functionality
US20130282844A1 (en) 2012-04-23 2013-10-24 Contact Solutions LLC Apparatus and methods for multi-mode asynchronous communication
US10649622B2 (en) 2012-05-09 2020-05-12 Apple Inc. Electronic message user interface
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
US10097496B2 (en) 2012-05-09 2018-10-09 Apple Inc. Electronic mail user interface
WO2013169875A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying content associated with a corresponding affordance
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
AU2013259630B2 (en) 2012-05-09 2016-07-07 Apple Inc. Device, method, and graphical user interface for transitioning between display states in response to gesture
US9191988B2 (en) 2012-05-26 2015-11-17 Qualcomm Incorporated Smart pairing using bluetooth technology
KR101395480B1 (ko) 2012-06-01 2014-05-14 주식회사 팬택 필기 입력에 기초하여 어플리케이션을 실행하는 방법 및 그 단말
US9230556B2 (en) 2012-06-05 2016-01-05 Apple Inc. Voice instructions during navigation
KR101941510B1 (ko) 2012-06-13 2019-01-23 삼성전자주식회사 전력 소모를 줄이기 위한 방법 및 그 전자 장치
CN102695302B (zh) 2012-06-15 2014-12-24 吴芳 用于扩展便携终端电子设备移动通信功能的系统和方法
US8949363B2 (en) 2012-06-19 2015-02-03 Blackberry Limited Delayed or suspended alerts with multiple devices in proximity
US20130347018A1 (en) 2012-06-21 2013-12-26 Amazon Technologies, Inc. Providing supplemental content with active media
US20130346922A1 (en) 2012-06-26 2013-12-26 Google Inc. Insitu actions within presentation of notifications
US9461833B1 (en) 2012-07-13 2016-10-04 Google Inc. Coalesced notifications for social groups
CN102799382A (zh) * 2012-07-16 2012-11-28 华为终端有限公司 用户设备的系统栏的控制方法和用户设备
EP3672227B1 (en) * 2012-07-20 2022-05-04 BlackBerry Limited Dynamic region of interest adaptation and image capture device providing same
US9560006B2 (en) 2012-07-26 2017-01-31 Google Inc. Method and apparatus for expiring messages in electronic communications
CN103581413A (zh) 2012-08-01 2014-02-12 中兴通讯股份有限公司 一种会话管理方法及终端
WO2014029026A1 (en) 2012-08-22 2014-02-27 Scanavo North America Ltd. Virtual packaging and electronic gifting system and methodology
KR101901919B1 (ko) * 2012-08-27 2018-09-27 삼성전자주식회사 휴대 단말기 및 메신저 영상 서비스 운용 방법
KR102020335B1 (ko) 2012-08-27 2019-09-10 삼성전자 주식회사 메시지 운용 방법 및 이를 지원하는 단말기
US8787888B2 (en) 2012-08-29 2014-07-22 Facebook, Inc. Sharing location information during a communication session
KR101399112B1 (ko) 2012-08-31 2014-05-30 주식회사 팬택 휴대용 전자 기기 및 이를 위한 배터리 관리 방법
US9131332B2 (en) 2012-09-10 2015-09-08 Qualcomm Incorporated Method of providing call control information from a mobile phone to a peripheral device
JP5884689B2 (ja) 2012-09-11 2016-03-15 カシオ計算機株式会社 携帯機器及びその制御方法、並びに、携帯機器の制御プログラム
US8488752B1 (en) * 2012-09-14 2013-07-16 Google Inc. System and method for recording voicemail
US10042603B2 (en) * 2012-09-20 2018-08-07 Samsung Electronics Co., Ltd. Context aware service provision method and apparatus of user device
KR102013443B1 (ko) * 2012-09-25 2019-08-22 삼성전자주식회사 이미지를 전송하기 위한 방법 및 그 전자 장치
JP2014071835A (ja) 2012-10-01 2014-04-21 Fujitsu Ltd 電子機器及び処理制御方法
US10158391B2 (en) 2012-10-15 2018-12-18 Qualcomm Incorporated Wireless area network enabled mobile device accessory
JP2014087126A (ja) 2012-10-22 2014-05-12 Sharp Corp 電力管理装置、電力管理装置の制御方法および電力管理装置の制御プログラム
WO2014078598A1 (en) * 2012-11-14 2014-05-22 invi Labs, Inc. System for and method of embedding rich media into text messages
US9628424B2 (en) 2012-11-15 2017-04-18 Samsung Electronics Co., Ltd. Apparatus and method for sharing time-sensitive data between devices with intermittent connectivity
JP6144354B2 (ja) 2012-11-28 2017-06-07 モントレー・ラドー・エス アー 携帯用タッチ式電子物品
JP5796789B2 (ja) 2012-12-20 2015-10-21 カシオ計算機株式会社 情報処理システムにおける無線端末、無線端末による携帯情報端末の起動方法
JP6075055B2 (ja) 2012-12-20 2017-02-08 カシオ計算機株式会社 表示端末装置、情報表示システム、情報表示制御方法、及び、プログラム
CN104903834B (zh) 2012-12-29 2019-07-05 苹果公司 用于在触摸输入到显示输出关系之间过渡的设备、方法和图形用户界面
US20140189533A1 (en) 2012-12-30 2014-07-03 Avaya Inc. Dynamic notification system and method
WO2014120948A1 (en) 2013-01-30 2014-08-07 Whoozat Inc. Systems and methods for location-based group tracking and notifications
CN103199311B (zh) 2013-02-05 2015-08-12 北京奇虎科技有限公司 便携式电子产品的电池省电方法、设备及移动终端
JP2014165663A (ja) 2013-02-25 2014-09-08 Kyocera Corp 携帯端末装置、プログラムおよび携帯端末装置の制御方法
JP5963695B2 (ja) 2013-03-01 2016-08-03 株式会社J−WAVEi メッセージ送信プログラム、メッセージ送信装置、及びメッセージ配信システム
WO2014143776A2 (en) 2013-03-15 2014-09-18 Bodhi Technology Ventures Llc Providing remote interactions with host device using a wireless device
US20140279728A1 (en) 2013-03-15 2014-09-18 Gary Skole System and Method for Caring for a Person Afflicted with Dementia
US20140282005A1 (en) 2013-03-15 2014-09-18 Howard Gutowitz Apparatus for message triage
US9200915B2 (en) 2013-06-08 2015-12-01 Apple Inc. Mapping application with several user interfaces
KR102171444B1 (ko) 2013-04-22 2020-10-29 엘지전자 주식회사 스마트 워치 및 제어 방법
US10394410B2 (en) 2013-05-09 2019-08-27 Amazon Technologies, Inc. Mobile device interfaces
US9075612B2 (en) 2013-05-10 2015-07-07 Jinrong Yang System and method for managing display power consumption
US9300617B2 (en) 2013-05-17 2016-03-29 Blackberry Limited Method and device for graphical indicator of electronic messages
US10078372B2 (en) * 2013-05-28 2018-09-18 Blackberry Limited Performing an action associated with a motion based input
US20140365944A1 (en) 2013-06-09 2014-12-11 Apple Inc. Location-Based Application Recommendations
EP3038427B1 (en) 2013-06-18 2019-12-11 Samsung Electronics Co., Ltd. User terminal apparatus and management method of home network thereof
CN105339959A (zh) 2013-06-27 2016-02-17 惠普发展公司,有限责任合伙企业 用于显示从通信服务接收的电子通信的设备
US9338116B2 (en) 2013-06-28 2016-05-10 Blackberry Limited Device and method for displaying and interacting with display objects
KR101474467B1 (ko) 2013-07-09 2014-12-19 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
CN103440247A (zh) * 2013-07-19 2013-12-11 张佳佩 发送照片的方法及其设备
US9419935B2 (en) 2013-08-02 2016-08-16 Whatsapp Inc. Voice communications with real-time status notifications
KR102047703B1 (ko) 2013-08-09 2019-11-22 엘지전자 주식회사 이동 단말기 및 이의 제어 방법
US8914752B1 (en) 2013-08-22 2014-12-16 Snapchat, Inc. Apparatus and method for accelerated display of ephemeral messages
US9100944B2 (en) 2013-08-28 2015-08-04 Qualcomm Incorporated Wireless connecting mobile devices and wearable devices
KR102194795B1 (ko) 2013-08-29 2020-12-23 삼성전자주식회사 전력 제어를 위한 전자 장치 및 방법
CN203520050U (zh) 2013-09-09 2014-04-02 李晓 具有超级电容的智能手表
WO2015038684A1 (en) 2013-09-10 2015-03-19 Polyera Corporation Attachable article with signaling, split display and messaging features
US9959431B2 (en) 2013-09-16 2018-05-01 Google Technology Holdings LLC Method and apparatus for displaying potentially private information
CN103500079A (zh) 2013-09-17 2014-01-08 小米科技有限责任公司 通知消息显示方法、装置及电子设备
CN103576902A (zh) 2013-09-18 2014-02-12 酷派软件技术(深圳)有限公司 控制终端设备的方法及系统
US9727752B2 (en) 2013-09-25 2017-08-08 Kairos Social Solutions, Inc. Device, system, and method of identifying a specific user from a profile image containing multiple people
CN103473004A (zh) 2013-09-29 2013-12-25 小米科技有限责任公司 一种显示消息的方法、装置及终端设备
US9977591B2 (en) 2013-10-01 2018-05-22 Ambient Consulting, LLC Image with audio conversation system and method
US20150100537A1 (en) 2013-10-03 2015-04-09 Microsoft Corporation Emoji for Text Predictions
US9230486B2 (en) 2013-10-10 2016-01-05 Google Technology Holdings LLC Method and apparatus for displaying content on a display of an electronic device during different device operating modes
KR102125834B1 (ko) 2013-11-29 2020-06-23 삼성전자주식회사 모바일 단말기 및 그의 전력 관리 방법
CN103677520B (zh) 2013-12-04 2017-07-21 深圳市朗强科技有限公司 基于Android平台的应用程序评论方法及装置
KR102114616B1 (ko) 2013-12-06 2020-05-25 엘지전자 주식회사 스마트 와치 및 제어 방법
US9785794B2 (en) * 2013-12-12 2017-10-10 Citrix Systems, Inc. Securing sensitive data on a mobile device
US9563328B2 (en) 2013-12-23 2017-02-07 Microsoft Technology Licensing, Llc Information surfacing with visual cues indicative of relevance
JP6644466B2 (ja) 2013-12-31 2020-02-12 イマージョン コーポレーションImmersion Corporation 触覚通知を提供するシステム及び方法
US10033679B2 (en) 2013-12-31 2018-07-24 Google Llc Systems and methods for displaying unseen labels in a clustering in-box environment
US20150193196A1 (en) 2014-01-06 2015-07-09 Alpine Electronics of Silicon Valley, Inc. Intensity-based music analysis, organization, and user interface for audio reproduction devices
KR102277752B1 (ko) 2014-01-06 2021-07-16 삼성전자주식회사 웨어러블 기기를 이용한 홈 디바이스 제어 장치 및 제어 방법
US8811951B1 (en) 2014-01-07 2014-08-19 Google Inc. Managing display of private information
KR102218906B1 (ko) * 2014-01-17 2021-02-23 엘지전자 주식회사 이동 단말기 및 이의 제어 방법
CN104811423B (zh) 2014-01-24 2019-03-01 腾讯科技(深圳)有限公司 位置信息的共享方法和装置
US10013601B2 (en) 2014-02-05 2018-07-03 Facebook, Inc. Ideograms for captured expressions
US20150227245A1 (en) 2014-02-10 2015-08-13 Polyera Corporation Attachable Device with Flexible Electronic Display Orientation Detection
US9483529B1 (en) * 2014-02-14 2016-11-01 Twitter, Inc. Selection and presentation of unviewed messages
CN103793075B (zh) 2014-02-14 2017-02-15 北京君正集成电路股份有限公司 一种应用在智能手表上的识别方法
US9031812B2 (en) 2014-02-27 2015-05-12 Fitbit, Inc. Notifications on a user device based on activity detected by an activity monitoring device
US9772985B2 (en) 2014-02-28 2017-09-26 Microsoft Technology Licensing, Llc Communications control for resource constrained devices
CN103838992B (zh) 2014-03-03 2017-07-14 宇龙计算机通信科技(深圳)有限公司 一种指纹识别方法及终端
US9888207B2 (en) 2014-03-17 2018-02-06 Microsoft Technology Licensing, Llc Automatic camera selection
CN104123333B (zh) 2014-03-17 2017-02-15 腾讯科技(深圳)有限公司 用于位置共享的数据处理方法和装置
US20150264303A1 (en) * 2014-03-17 2015-09-17 Microsoft Corporation Stop Recording and Send Using a Single Action
US9722962B2 (en) 2014-03-21 2017-08-01 Facebook, Inc. Providing message status notifications during electronic messaging
CN106104445A (zh) 2014-04-04 2016-11-09 微软技术许可有限责任公司 可扩展应用表示和任务栏
US20150286391A1 (en) 2014-04-08 2015-10-08 Olio Devices, Inc. System and method for smart watch navigation
US10444715B2 (en) 2014-05-01 2019-10-15 Belkin International, Inc. Controlling settings and attributes related to operation of devices in a network
US20150301506A1 (en) 2014-04-22 2015-10-22 Fahad Koumaiha Transparent capacitive touchscreen device overlying a mechanical component
US9213941B2 (en) 2014-04-22 2015-12-15 Google Inc. Automatic actions based on contextual replies
CN105005457B (zh) 2014-04-25 2019-04-09 腾讯科技(深圳)有限公司 地理位置展示方法及装置
US10845982B2 (en) 2014-04-28 2020-11-24 Facebook, Inc. Providing intelligent transcriptions of sound messages in a messaging application
GB201408408D0 (en) * 2014-05-12 2014-06-25 Tomlinson Martin Method and apparatus for time limited messages in packet communications
KR102105961B1 (ko) * 2014-05-13 2020-05-28 엘지전자 주식회사 이동단말기 및 그 제어방법
CN103944811B (zh) 2014-05-15 2018-09-21 广州博冠信息科技有限公司 一种邮件提示方法和设备
US9614804B2 (en) 2014-05-16 2017-04-04 Dropbox, Inc. Managing messages based on expiration dates
US9537811B2 (en) 2014-10-02 2017-01-03 Snap Inc. Ephemeral gallery of ephemeral messages
WO2015183755A1 (en) 2014-05-31 2015-12-03 Apple Inc. Message user interfaces for captured and transmittal of media and location
EP4068067A1 (en) 2014-06-24 2022-10-05 Apple Inc. Music now playing user interface
EP3410253A1 (en) 2014-07-31 2018-12-05 Samsung Electronics Co., Ltd. Mobile communication device using a plurality of wearable devices in parallel
US20160036996A1 (en) 2014-08-02 2016-02-04 Sony Corporation Electronic device with static electric field sensor and related method
CN106605201B (zh) 2014-08-06 2021-11-23 苹果公司 用于电池管理的减小尺寸的用户界面
US9860200B1 (en) 2014-08-27 2018-01-02 Google Llc Message suggestions
EP4209872A1 (en) 2014-09-02 2023-07-12 Apple Inc. Phone user interface
WO2016036415A1 (en) 2014-09-02 2016-03-10 Apple Inc. Electronic message user interface
WO2016036545A1 (en) 2014-09-02 2016-03-10 Apple Inc. Reduced-size notification interface
KR102016160B1 (ko) 2014-09-02 2019-08-29 애플 인크. 경고를 관리하기 위한 축소된 크기의 인터페이스
US20160073223A1 (en) 2014-09-10 2016-03-10 Microsoft Corporation Real-time location sharing to facilitate a physical meet-up
US20170097621A1 (en) 2014-09-10 2017-04-06 Crestron Electronics, Inc. Configuring a control sysem
US20160080552A1 (en) * 2014-09-17 2016-03-17 Qualcomm Incorporated Methods and systems for user feature tracking on a mobile device
US20160088146A1 (en) * 2014-09-23 2016-03-24 Mcafee, Inc. Device lock while in motion
KR102256642B1 (ko) * 2014-12-04 2021-05-27 삼성전자주식회사 메시지 송수신 장치 및 메시지 송수신 방법
US9954991B2 (en) 2014-12-31 2018-04-24 Xiaomi Inc. Status notification method and device
US10116601B2 (en) 2015-02-06 2018-10-30 Jamdeo Canada Ltd. Methods and devices for display device notifications
US10080111B2 (en) 2015-03-19 2018-09-18 Facebook, Inc. Techniques for communication using audio stickers
US20170045981A1 (en) 2015-08-10 2017-02-16 Apple Inc. Devices and Methods for Processing Touch Inputs Based on Their Intensities
US11113022B2 (en) 2015-05-12 2021-09-07 D&M Holdings, Inc. Method, system and interface for controlling a subwoofer in a networked audio system
DK179360B1 (en) 2015-06-07 2018-05-22 Apple Inc Devices, methods and graphical user interfaces for providing and interacting with notifications
US9661117B2 (en) 2015-07-16 2017-05-23 Plantronics, Inc. Wearable devices for headset status and control
US10827589B2 (en) 2015-07-30 2020-11-03 Brightgreen Pty Ltd Multiple input touch dimmer lighting control
US10003938B2 (en) 2015-08-14 2018-06-19 Apple Inc. Easy location sharing
EP3354015A1 (en) 2015-09-23 2018-08-01 Edoardo Rizzi Communication device and method
US10353754B2 (en) 2015-12-31 2019-07-16 Entefy Inc. Application program interface analyzer for a universal interaction platform
KR102383130B1 (ko) 2016-01-18 2022-04-08 삼성전자주식회사 기능을 제어하는 방법 및 이를 지원하는 전자 장치
US10310725B2 (en) 2016-06-12 2019-06-04 Apple Inc. Generating scenes based on accessory state
DK179594B1 (en) 2016-06-12 2019-02-25 Apple Inc. USER INTERFACE FOR MANAGING CONTROLLABLE EXTERNAL DEVICES
US10511456B2 (en) 2016-06-12 2019-12-17 Apple Inc. Presenting accessory group controls
JP6909990B2 (ja) 2016-07-06 2021-07-28 パナソニックIpマネジメント株式会社 表示制御システム、表示制御方法、及び表示制御プログラム
US10042595B2 (en) 2016-09-06 2018-08-07 Apple Inc. Devices, methods, and graphical user interfaces for wireless pairing with peripheral devices and displaying status information concerning the peripheral devices
KR20180085931A (ko) 2017-01-20 2018-07-30 삼성전자주식회사 음성 입력 처리 방법 및 이를 지원하는 전자 장치
US10523625B1 (en) 2017-03-09 2019-12-31 Snap Inc. Restricted group content collection
KR102414122B1 (ko) 2017-04-19 2022-06-29 삼성전자주식회사 사용자 발화를 처리하는 전자 장치 및 그 동작 방법
US10200969B2 (en) 2017-05-09 2019-02-05 Qualcomm Incorporated Methods and apparatus for selectively providing alerts to paired devices
US10481856B2 (en) * 2017-05-15 2019-11-19 Microsoft Technology Licensing, Llc Volume adjustment on hinged multi-screen device
WO2018213415A1 (en) 2017-05-16 2018-11-22 Apple Inc. Far-field extension for digital assistant services
CN109688442B (zh) 2017-05-16 2021-06-04 苹果公司 用于家庭媒体控制的方法和界面
DK179549B1 (en) 2017-05-16 2019-02-12 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
WO2018213844A1 (en) 2017-05-19 2018-11-22 Six Curtis Wayne Smart hub system
MX2019015201A (es) 2017-06-15 2020-08-13 Lutron Tech Co Llc Comunicación y control de los sistemas de control de carga.
US10771270B2 (en) 2017-07-20 2020-09-08 Slack Technologies, Inc. Channeling messaging communications in a selected group-based communication interface
US10466962B2 (en) 2017-09-29 2019-11-05 Sonos, Inc. Media playback system with voice assistance
KR102490376B1 (ko) 2017-11-06 2023-01-25 삼성전자 주식회사 전자 장치 및 전자 장치 간 음성으로 기능을 실행하는 방법
US20190138951A1 (en) 2017-11-09 2019-05-09 Facebook, Inc. Systems and methods for generating multi-contributor content posts for events
KR20190102509A (ko) 2018-02-26 2019-09-04 삼성전자주식회사 음성 명령을 수행하는 방법 및 시스템
EP3783867A1 (en) 2018-05-07 2021-02-24 Google LLC Providing composite graphical assistant interfaces for controlling various connected devices
US10924446B1 (en) 2018-10-08 2021-02-16 Facebook, Inc. Digital story reply container
US20200135191A1 (en) 2018-10-30 2020-04-30 Bby Solutions, Inc. Digital Voice Butler
US10885912B2 (en) 2018-11-13 2021-01-05 Motorola Solutions, Inc. Methods and systems for providing a corrected voice command
KR20200111853A (ko) 2019-03-19 2020-10-05 삼성전자주식회사 전자 장치 및 전자 장치의 음성 인식 제어 방법
CN114938360B (zh) 2019-04-12 2023-04-18 腾讯科技(深圳)有限公司 一种基于即时通讯应用的数据处理方法和装置
US20210065134A1 (en) 2019-08-30 2021-03-04 Microsoft Technology Licensing, Llc Intelligent notification system
US20210064317A1 (en) 2019-08-30 2021-03-04 Sony Interactive Entertainment Inc. Operational mode-based settings for presenting notifications on a user display
US11172329B2 (en) 2019-09-27 2021-11-09 Sonos, Inc. Systems and methods for target device prediction
US11152011B2 (en) 2019-11-27 2021-10-19 Summit Wireless Technologies, Inc. Voice detection with multi-channel interference cancellation
US10963145B1 (en) 2019-12-30 2021-03-30 Snap Inc. Prioritizing display of user icons associated with content
US11745585B2 (en) 2020-04-20 2023-09-05 Thinkware Corporation Vehicle infotainment apparatus using widget and operation method thereof
US11079913B1 (en) 2020-05-11 2021-08-03 Apple Inc. User interface for status indicators
US20210349680A1 (en) 2020-05-11 2021-11-11 Apple Inc. User interface for audio message

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090005011A1 (en) * 2007-06-28 2009-01-01 Greg Christie Portable Electronic Device with Conversation Management for Incoming Instant Messages
US20110080356A1 (en) * 2009-10-05 2011-04-07 Lg Electronics Inc. Mobile terminal and method of controlling application execution in a mobile terminal
CN103207674A (zh) * 2013-03-21 2013-07-17 苏州展科光电科技有限公司 基于体感技术的电子演示系统
CN205263700U (zh) * 2014-05-31 2016-05-25 苹果公司 电子设备

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105824541A (zh) * 2016-02-29 2016-08-03 维沃移动通信有限公司 一种提示信息的处理方法及移动终端
CN105824541B (zh) * 2016-02-29 2017-12-26 维沃移动通信有限公司 一种提示信息的处理方法及移动终端
US11962889B2 (en) 2016-06-12 2024-04-16 Apple Inc. User interface for camera effects
CN110637280A (zh) * 2017-07-18 2019-12-31 谷歌有限责任公司 图形图标的操纵
CN113439255A (zh) * 2019-02-22 2021-09-24 索尼集团公司 信息处理装置、信息处理方法及程序
CN114128248A (zh) * 2019-12-13 2022-03-01 索尼集团公司 管理多个图像设备
CN111291653A (zh) * 2020-01-21 2020-06-16 Oppo(重庆)智能科技有限公司 指纹事件上报方法、装置及电子设备
CN115185431A (zh) * 2020-06-01 2022-10-14 苹果公司 用于管理媒体的用户界面

Also Published As

Publication number Publication date
JP6286615B2 (ja) 2018-02-28
US20170083202A1 (en) 2017-03-23
AU2018203215A1 (en) 2018-05-31
EP3217341A1 (en) 2017-09-13
JP6734419B2 (ja) 2020-08-05
AU2015267259B2 (en) 2018-02-08
AU2016102029B4 (en) 2017-06-15
JP6554570B2 (ja) 2019-07-31
CN205263700U (zh) 2016-05-25
JP2022008989A (ja) 2022-01-14
US20160054841A1 (en) 2016-02-25
CN113485550A (zh) 2021-10-08
US20200348807A1 (en) 2020-11-05
AU2015267260A1 (en) 2016-10-06
CN106575149A (zh) 2017-04-19
JP6960034B2 (ja) 2021-11-05
EP3108422A1 (en) 2016-12-28
JP6500093B2 (ja) 2019-04-10
US10592072B2 (en) 2020-03-17
DE202015009346U1 (de) 2017-03-10
JP2019146184A (ja) 2019-08-29
AU2016102028B4 (en) 2017-07-27
JP2017521804A (ja) 2017-08-03
CN105183443B (zh) 2019-03-22
AU2015267260B2 (en) 2018-02-08
US20150350130A1 (en) 2015-12-03
AU2015100711B4 (en) 2016-01-14
AU2020201575B2 (en) 2021-03-25
JP6793868B1 (ja) 2020-12-02
DE202015003916U1 (de) 2015-10-08
AU2015100713A4 (en) 2015-06-25
US10732795B2 (en) 2020-08-04
US9185062B1 (en) 2015-11-10
HK1216556A1 (zh) 2016-11-18
US20170083189A1 (en) 2017-03-23
AU2021202815B2 (en) 2022-06-30
CN204946542U (zh) 2016-01-06
EP3108423A1 (en) 2016-12-28
CN107122049A (zh) 2017-09-01
CN105183443A (zh) 2015-12-23
US20230393705A1 (en) 2023-12-07
AU2016102028A4 (en) 2016-12-22
AU2021202815A1 (en) 2021-05-27
DE202015003860U1 (de) 2015-10-09
CN113485551A (zh) 2021-10-08
JP2021064374A (ja) 2021-04-22
CN106575149B (zh) 2021-10-12
AU2020201575A1 (en) 2020-03-19
JP2017529008A (ja) 2017-09-28
CN107122049B (zh) 2021-07-13
US11775145B2 (en) 2023-10-03
JP2018125001A (ja) 2018-08-09
US10564807B2 (en) 2020-02-18
AU2016102029A4 (en) 2016-12-22
US10416844B2 (en) 2019-09-17
AU2018203215B2 (en) 2019-12-05
US11513661B2 (en) 2022-11-29
DE202015009347U1 (de) 2017-03-10
AU2015267259A1 (en) 2016-10-06
US9207835B1 (en) 2015-12-08
CN105183442B (zh) 2019-03-08
US20170220212A1 (en) 2017-08-03
JP2020205588A (ja) 2020-12-24
HK1216555A1 (zh) 2016-11-18
AU2015100713B4 (en) 2015-07-30
AU2015100711A4 (en) 2015-06-25
US20150346912A1 (en) 2015-12-03
US20150350141A1 (en) 2015-12-03
US20230079965A1 (en) 2023-03-16
JP7299954B2 (ja) 2023-06-28

Similar Documents

Publication Publication Date Title
CN204946542U (zh) 电子设备
CN206649467U (zh) 一种电子设备
CN105955520B (zh) 用于控制媒体呈现的设备和方法
CN205485733U (zh) 电子设备
CN205038630U (zh) 电子设备
CN206193749U (zh) 电子设备
CN105144037B (zh) 用于输入字符的设备、方法和图形用户界面
CN109219796A (zh) 实时视频上的数字触摸
CN104169857B (zh) 用于访问被锁定设备中应用程序的设备、方法和图形用户界面
CN107430488A (zh) 基于活动的阈值和反馈
CN109691074A (zh) 用于增强的用户交互的图像数据
CN109690445A (zh) 特殊锁定模式用户界面
CN109313651A (zh) 用于检索上下文相关媒体内容的用户界面
CN107491258A (zh) 用于在分屏模式下操纵窗口的设备、方法和图形用户界面
CN108334227A (zh) 用于删除内容的方法、设备、介质和装置
CN105955591A (zh) 用于显示和使用菜单的设备、方法和图形用户界面
CN106462340A (zh) 尺寸减小的用户界面
CN109196455A (zh) 用于carplay的应用程序快捷方式
CN105389107A (zh) 电子触摸通信
CN106227374A (zh) 用于在用户界面之间导航的设备和方法
CN106462358A (zh) 在触敏装置上显示交互式通知
CN106415542A (zh) 结构化建议
CN105892644A (zh) 导航用户界面
CN109416591A (zh) 用于增强型用户交互的图像数据
CN106662630A (zh) 使用通信耦接的电子设备来进行位置确定

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1216556

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant